CN110197097B - 一种港区监控方法及***、中控*** - Google Patents

一种港区监控方法及***、中控*** Download PDF

Info

Publication number
CN110197097B
CN110197097B CN201810157700.XA CN201810157700A CN110197097B CN 110197097 B CN110197097 B CN 110197097B CN 201810157700 A CN201810157700 A CN 201810157700A CN 110197097 B CN110197097 B CN 110197097B
Authority
CN
China
Prior art keywords
target object
global image
images
automatic driving
harbor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810157700.XA
Other languages
English (en)
Other versions
CN110197097A (zh
Inventor
吴楠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Tusimple Technology Co Ltd
Original Assignee
Beijing Tusimple Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Tusimple Technology Co Ltd filed Critical Beijing Tusimple Technology Co Ltd
Priority to CN201810157700.XA priority Critical patent/CN110197097B/zh
Priority to EP18907348.9A priority patent/EP3757866A4/en
Priority to PCT/CN2018/105474 priority patent/WO2019161663A1/zh
Priority to AU2018410435A priority patent/AU2018410435B2/en
Publication of CN110197097A publication Critical patent/CN110197097A/zh
Priority to US17/001,082 priority patent/US20210073539A1/en
Application granted granted Critical
Publication of CN110197097B publication Critical patent/CN110197097B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/10—Terrestrial scenes
    • G06V20/182—Network patterns, e.g. roads or rivers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02—Control of position or course in two dimensions
    • G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0212—Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/12—Target-seeking control
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/10—Terrestrial scenes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30232—Surveillance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/07—Target detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Remote Sensing (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Automation & Control Theory (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开一种港区监控方法及***、中控***，以解决现有技术无法对港区内的目标物体进行直观、有效的进行全局查看的技术问题。港区监控方法包括：接收设置在港区内的各路侧摄像机采集的图像；对接收到的图像进行坐标转换和拼接得到上帝视角下港区的全局图像；确定所述全局图像中的道路区域；对全局图像中的道路区域进行物体检测和物体跟踪，得到目标物体的跟踪结果和类别；在全局图像中展示所述目标物体的跟踪结果和类别。采用本发明技术方案，解决了现有技术无法对港区内的目标物体进行直观、有效的进行全局查看的技术问题。

Description

一种港区监控方法及***、中控***
技术领域
本发明涉及自动驾驶领域，特别涉及一种港区监控方法、一种港区监控***和一种中控***。
背景技术
目前，随着自动驾驶技术的发展，在一些地理区域较大的特定区域(例如临海港区、公路港区、矿区、大型仓库、货物集散地、园区等)配备有大量的自动驾驶车辆，如何能够确保自动驾驶车辆在区域内行驶的安全性，需要对区域内的目标物体(例如自动驾驶车辆、非自动驾驶车辆、行人等)进行全局查看。目前在这些特定区域内虽然安装有监控摄像机，但各监控摄像机之间独立运行，且各摄像机的拍摄角度均不同，工作人员需要同时查看多个监控摄像机的屏幕画面，不仅效率低，而且拍摄得到画面并不是很直观能够获知区域内的目标物体的情况。
发明内容
鉴于上述问题，本发明提供一种港区监控方法，以解决现有技术无法对港区内的目标物体进行直观、有效的进行全局查看的技术问题。
本发明实施例，第一方面，提供一种港区监控方法，方法包括：
接收设置在港区内的各路侧摄像机采集的图像；
对接收到的图像进行坐标转换和拼接得到上帝视角下港区的全局图像；
确定所述全局图像中的道路区域；
对全局图像中的道路区域进行物体检测和物体跟踪，得到目标物体的跟踪结果和类别；
在全局图像中展示所述目标物体的跟踪结果和类别。
本发明实施例，第二方面，提供一种港区监控***，该***包括设置在港区内的路侧摄像机、中控***，其中：
路侧摄像机，用于采集图像，并将图像发送给监控***；
中控***，用于接收各路侧摄像机采集的图像；对接收到的图像进行坐标转换和拼接得到上帝视角下港区的全局图像；确定所述全局图像中的道路区域；对全局图像中的道路区域进行物体检测和物体跟踪，得到目标物体的跟踪结果和类别；在全局图像中展示所述目标物体的跟踪结果和类别。
本发明实施例，第三方面，提供一种中控***，该***包括：
通信单元，用于接收各路侧摄像机采集的图像；
图像处理单元，用于对接收到的图像进行坐标转换和拼接得到上帝视角下港区的全局图像；
道路区域确定单元，用于确定所述全局图像中的道路区域；
目标检测跟踪单元，用于对全局图像中的道路区域进行物体检测和物体跟踪，得到目标物体的跟踪结果和类别；
展示单元，用于在全局图像中展示所述目标物体的跟踪结果和类别。
本发明技术方案在港区内设置有大量的路侧摄像机，通过路侧摄像机拍摄港区内的画面；首先，通过将港区内的各路侧摄像机采集的图像进行坐标转换和拼接以得到上帝视角下港区的全局图像；其次，确定出全局图像中的道路区域；最后，对全局图像进行物体检测和物体跟踪以得到道路区域中目标物体的跟踪结果和类别。采用本发明技术方案，一方面能够实时的得到整个港区的上帝视角下的全局图像，而上帝视角为俯瞰地面角度，能够更加直观的查看整个港区内的情况，工作人员只需要查看一个屏幕画面即可全局了解港区内所有的情况；另一方面，实时显示全局图像中的道路区域的目标物体的跟踪结果和类别，工作人员能够非常直观的了解各种类别的目标物体的运动情况；因此，采用本发明技术方案解决了现有技术无法对港区内的目标物体进行直观、有效的进行全局查看的技术问题。
附图说明
附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。
图1为本发明实施例中港区监控***的结构示意图之一；
图2为本发明实施例中港区监控***的结构示意图之二；
图3为本发明实施例中中控***的结构示意图之一；
图4A为本发明实施例中路侧摄像机采集得到的图像的示意图；
图4B为本发明实施例中将图像按照采集时间进行分组的示意图；
图4C为本发明实施例中一组俯瞰图像的示意图；
图4D为本发明实施例中将一组俯瞰图像拼接成一张全局图像的示意图；
图4E为本发明实施例中在一张全局图像中展示目标物体的跟踪结果和类别的示意图；
图5为本发明实施例中中控***的结构示意图之二；
图6为本发明实施例中港区监控***的结构示意图之三；
图7为本发明实施例中第一V2X设备、路侧V2X设备和第二V2X设备之间的通信示意图；
图8为本发明实施例中港区监控方法的流程图之一；
图9为本发明实施例中对接收到的图像进行坐标转换和拼接得到上帝视角下港区的全局图像的流程图；
图10为本发明实施例中港区监控方法的流程图之二。
具体实施方式
为了使本技术领域的人员更好地理解本发明中的技术方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。
本发明技术方案的应用场景，不仅限于港区(包括临海港区、公路港区等)，还可以应用于例如矿区、货物集散地、大型仓库、园区等其他应用场景；该技术方案移植到其他应用场景无需做实质性的改变，本领域技术人员也不需要付出创造性的劳动，也不需要克服一些特定的技术问题。由于篇幅有限，本申请不再对本发明技术方案应用于其他应用场景做详细的描述。以下对技术方案的描述，均以港区为例。
实施例一
参见图1，为本发明实施例中港区监控***的结构示意图，该***包括设置在港区内的路侧摄像机1、中控***2，其中：
路侧摄像机1，用于采集图像，并将图像发送给监控***2；
中控***2，用于接收各路侧摄像机1采集的图像；对接收到的图像进行坐标转换和拼接得到上帝视角下港区的全局图像；确定所述全局图像中的道路区域；对全局图像中的道路区域进行物体检测和物体跟踪，得到目标物体的跟踪结果和类别；在全局图像中展示所述目标物体的跟踪结果和类别。
优选地，本发明实施例中，路侧摄像机1可采取港区全覆盖原则，尽量使得路侧摄像机1采集到的图像集合能够覆盖整个港区的地理区域范围，当然，本领域技术人员也可以根据实际需求进行灵活设置，例如仅对港区内的一些核心区域进行全面覆盖。本申请不作严格限定。
优选地，为使得路侧摄像机1采集的图像涵盖的视野范围更大，本发明实施例中，可以将路侧摄像机1设置在港区内已有的具有一定高度的设备上，例如塔吊、轮胎吊、桥吊、灯杆、天车、正面吊、吊车等上，或者还可以在港区内设置专门用于铺设路侧摄像机1的具有一定高度的路侧设备上。如图2所示，可以将设置在塔吊上的路侧摄像机1称为塔吊CAM，将设置在灯杆上的路侧摄像机称为灯杆CAM，将设置在天车上的路侧摄像机称为天车CAM。
优选地，为便于更好的对各路侧摄像机1拍摄的图像进行拼接，本发明实施例中，所有路侧摄像机1的图像采集时钟同步，且各路侧摄像机1的相机参数相同，采集得到的图像尺寸相同。
优选地，本发明实施例中，中控***2的结构可如图3所示，包括通信单元21、图像处理单元22、道路区域确定单元23、目标检测跟踪单元24和展示单元25，其中：
通信单元21，用于接收各路侧摄像机采集的图像；
图像处理单元22，用于对接收到的图像进行坐标转换和拼接得到上帝视角下港区的全局图像；
道路区域确定单元23，用于确定所述全局图像中的道路区域；
目标检测跟踪单元24，用于对全局图像中的道路区域进行物体检测和物体跟踪，得到目标物体的跟踪结果和类别；
展示单元25，用于在全局图像中展示所述目标物体的跟踪结果和类别。
本发明实施例中，中控***2可以运行在DSP(Digital Signal Processing，数字信号处理器)、FPGA(Field-Programmable Gate Array)，现场可编程门阵列)控制器、台式电脑、移动电脑、PAD、单片机等设备上。
本发明实施例中，通信单元21可以通过无线的方式收发信息，例如可以通过天线实现。图像处理单元22、道路区域确定单元23、目标检测跟踪单元24可以运行在DSP、FPGA控制器、台式电脑、移动电脑、PAD、单片机等设备的处理器上(例如CPU(Central ProcessingUnit，中央处理器))；展示单元25可以运行在DSP、FPGA控制器、台式电脑、移动电脑、PAD、单片机等设备的显示器(例如GPU(Graphics Processing Unit，图形处理器))上。
优选地，本发明实施例中，图像处理单元22具体用于：将接收到的图像中采集时间相同的图像确定为一组图像；将一组图像中的各图像进行坐标转换，得到一组俯瞰图像；将一组俯瞰图像按照预置的拼接顺序进行拼接得到一张全局图像，所述拼接顺序根据各路侧摄像机之间的空间位置关系得到。
以一个具体的实例进行描述，假设港区内设置有n台路侧摄像机1，该n台路侧摄像机1按照空间位置的相邻关系依次编号为CAM1、CAM2、CAM3、…、CAMn，根据该n个路侧摄像机1的空间位置关系设置图像拼接顺序为：CAM1->CAM2->CAM3->、…、->CAMn；以时间t0为起始时间，CAM1依次采集到的图像如图像集合1、CAM2依次采集到的图像如图像集合2、…、CAMn依次采集到的图像如图像集合n，如图4A所示，每个图像集合包含k张图像；将n个图像集合中的图像中采集时间相同的图像确定为一组图像，如图4B所示，一个虚线框内的图像构成一组图像，得到k组图像，每组图像生成一张全局图像，得到k张全局图像；将每组图像中的每张图像进行坐标转换，得到一组俯瞰图像，如图4C所示为港区的四个路侧摄像机分别拍摄得到的同一时间的四张图像的俯瞰图像，即该四张俯瞰图像组成一组俯瞰图像，图4D将一组俯瞰图像按照预置的拼接顺序拼接得到一张全局图像，图4E为一张全局图像的目标物体的跟踪结果及类别，虚线框表示车辆的跟踪结果。
在一个示例中，将一张图像投影到地平面即得到该图像对应的俯瞰图像。具体实现可如下：
首先，预先建立统一的地平面坐标系；
其次，针对每个路侧摄像机，预先标定得到该路侧摄像机的成像平面坐标系与地平面坐标系之间的转换关系。例如：预先通过人工或计算机标定每个路侧摄像机的相机坐标系与地平面坐标系之间的转换关系；根据路侧摄像机的相机坐标系与地平面坐标系之间的转换关系(为现有技术)、路侧摄像机的相机坐标系与该路侧摄像机的成像平面坐标系之间的转换关系，得到该路侧摄像机的成像平面坐标系与地平面坐标系之间的转换关系；
最后，针对路侧摄像机拍摄的一张图像，根据该路侧摄像机的成像平面坐标系与地平面坐标系之间的转换关系，将该路侧摄像机拍摄的图像中的每个像素点投影到地平面坐标系中，得到该图像对应的俯瞰图像。
优选地，本发明实施例中，道路区域确定单元23具体可通过但不仅限于以下任意一种方式实现：
方式A1、将所述港区对应的高精地图与所述全局图像进行叠加，以得到所述全局图像中的道路区域。
方式A2、采用预置的语义分割算法对所述全局图像进行语义分割，以得到所述全局图像中的道路区域。
方式A1中，港区对应的高精地图指采用地图引擎根据港区的高精地图数据绘制得到的一张电子地图，在该电子地图中绘制有港区内所有的道路(包括道路边界线、车道线、道路方向、限速、转向等信息)。本发明实施例中，将港区对应的高精地图与全局图像进行叠加得到全局图像的道路区域，可采用以下方式实现：步骤1)将全局图图像的尺寸调整为与高精地图一致(如通过拉伸/缩放的方式)；步骤2)通过人工在高精地图和全局图像上标定几个可用于叠加的共通基准点(例如高精地图的四个角点，或者某些道路的交界点等)，通过基准点将高精地图与全局图像进行叠加；步骤3)通过人工根据高精地图的上的道路在全局图像中相应位置绘制道路，以得到全局图像中的道路区域；或者，以全局图像的图像坐标系为基准，将高精地图上构成道路的道路点投射到该图像坐标系中，得到各道路点在图像坐标系中的坐标点，将全局图像中与前述坐标点重合的像素点标注为道路点，依此得到全局图像中的道路区域。
方式A2中，预置的语义分割算法可以为一个预先训练得到的能够对输入的图像进行语义分割的语义分割模型。该语义分割模型可以根据预先采集到的样本数据对神经网络模型进行迭代训练得到。样本数据包括：预先在港区内采集到的包含道路的一定数量的图像，以及通过人工对这些采集到的图像进行语义标注的标注结果。如何根据样本数据对神经网络模型进行迭代训练得到语义分割模型，可参见现有的技术，本申请不做严格限定。
本发明实施例中，目标检测跟踪单元24具体实现可如下：采用预置的物体检测算法对全局图像中的道路区域进行物体检测得到检测结果(检测结果包括目标物体的二维框和类别，可以通过将目标物体的二维框设置成不同的颜色来代表该目标物体的类别(例如，绿色框表示该框内的目标物体为车辆，红色框表示该框内的目标物体为行人等)，还可以通过在目标物体的二维框附近标注该目标物体的类别，例如在二维框的正上方或正下方用文字标注该二维框内的目标物体的类别)；采用预置的物体跟踪算法根据所述全局图像的检测结果和前一帧全局图像的物体跟踪结果，得到所述全局图像的跟踪结果和类别。本发明实施例中，目标物体的类别可以包括车辆、行人等。物体检测算法可以预先根据训练数据(包括在港区内预先采集到的包含目标物体的一定数量的图像，以及对该图像进行物体检测标定的标定结果)对神经网络模型进行迭代训练得到的物体检测模型；物体跟踪算法可以是预先根据训练数据对神经网络模型进行迭代训练得到的物体跟踪模型。
优选地，为进一步全局合理规划港区内所有自动驾驶车辆的行驶路径，本发明实施例中，中控***2还可进一步包括运动轨迹预测单元26、路径优化单元27，如图5所示，其中：
运动轨迹预测单元26，用于根据目标物体的跟踪结果和类别，预测各目标物体对应的运动轨迹；
路径优化单元27，用于根据各目标物体对应的运动轨迹，对各自动驾驶车辆的行驶路径进行优化；
所述通信单元21进一步用于：将各自动驾驶车辆的优化后的行驶路径发送给相应的自动驾驶车辆。
在一个示例中，运动轨迹预测单元26预测各目标物体对应的运动轨迹，具体实现可如下：根据目标物体的跟踪结果和类别分析确定该目标物体的姿态数据；将目标物体的姿态数据输入到预置的与该目标物体类别对应的运动模型中，得到该目标物体对应的运动轨迹。
当然，本领域技术人员还可通过其他可替代的技术方案实现对目标物体的运动轨迹的预测，例如：在目标物体中设置有定位单元(例如GPS定位单元)和惯性测量单元(IMU)，或者其它的可实现定位以及实现姿态测量的设备；目标物体在行驶过程中，通过定位单元的测量结果和惯性测量单元的测量结果生成目标物体的姿态数据，并将该姿态数据发送给运动轨迹预测单元26。运动轨迹预测单元26预测各目标物体对应的运动轨迹，具体实现可如下：接收目标物体发送的姿态数据，将该目标物体的姿态数据输入到预置的与该目标物体类别对应的运动模型中，得到该目标物体对应的运动轨迹。
优选地，本发明实施例中，自动驾驶控制装置周期性地或实时地将其所在的自动驾驶车辆的预估行驶轨迹(自动驾驶控制装置会根据自动驾驶车辆的历史行驶轨迹和自动驾驶车辆上的IMU传感器反馈的姿态信息预估自动驾驶车辆的预估行驶轨迹，如何预估可参见现有技术，该技术点并不是本发明技术方案的发明点)同步给中控***2。所述路径优化单元27具体用于：
针对每辆自动驾驶车辆，将自动驾驶车辆发送的该自动驾驶车辆对应的预估行驶轨迹与各目标物体对应的运动轨迹进行比对，若发生重合(包括全部重合、部分重合)则优化所述自动驾驶车辆的行驶路径，以使优化后的行驶路径与各目标物体对应的运动轨迹不重合；若不发生重合则不优化所述自动驾驶车辆的行驶路径。
本发明实施例中，自动驾驶车辆对应的预估行驶轨迹由一定数量的位置点构成，各目标物体分别对应的运动轨迹由一定数量的位置点构成，若自动驾驶车辆的预估行驶轨迹和目标物体的运动轨迹中有n(n为预先设置的大于等于1的自然数，可以根据实际需求灵活设置n的取值，本申请不做严格限定)个以上的位置点重合，则认为该自动驾驶车辆的预估行驶轨迹与目标物体的运动轨迹重合。
优选地，为提高通信成功率和质量，本发明实施例中，如图5所述的***还包括设置在港区内的路侧V2X(即vehicle to everything)设备和设置在自动驾驶车辆上的自动驾驶控制装置；并且，所述中控***2设置有第一V2X设备，自动驾驶控制装置设置有第二V2X设备，如图6所示，其中；
所述通信单元21具体用于：将各自动驾驶车辆的优化后的行驶路径发送给第一V2X设备，由第一V2X设备将各自动驾驶车辆的优化后的行驶路径发送给路侧V2X设备；
路侧V2X设备，用于将从第一V2X设备接收到的自动驾驶车辆的优化后的行驶路径进行广播，由自动驾驶车辆上的第二V2X设备接收与该自动驾驶车辆对应的优化后的行驶路径。
本发明实施例中，路侧V2X设备可采用港区全覆盖原则，即通过路侧V2X设备可以实现港区内所有区域的自动驾驶车辆、中控***之间的通信。中控***的第一V2X设备将自动驾驶车辆对应的优化后的行驶路径打包成V2X通信报文，并进行广播；路侧V2X设备接收到该V2X通信报文时，对该V2X通信报文进行广播；由第二V2X设备接收与其所在自动驾驶车辆对应的V2X通信报文。
通信单元21可将自动驾驶车辆的优化后的行驶路径打包成TCP/UDP(Transmission Control Protocol(传输控制协议)/User Datagram Protocol(用户数据协议))报文传输给第一V2X设备(例如在将行驶路径作为TCP/UDP报文的payload)；第一V2X设备对接收到的TCP/UDP报文进行解析得到优化后的行驶路径，并将解析得到的行驶路径打包成V2X通信报文，并广播该V2X通信报文；路侧V2X设备接收到该V2X通信报文时，广播该V2X通信报文；第二V2X设备接收与其对应自动驾驶车辆的V2X通信报文，并对接收到的V2X通信报文进行解析，得到与该第二V2X设备对应的自动驾驶车辆对应的优化后的行驶路径，并将该行驶路径打包成TCP/UDP报文发送给该自动驾驶车辆对应的自动驾驶控制装置，如图7所示。TCP/UDP报文和V2X通信报文中均携带有自动驾驶车辆对应的身份信息，以声明该TCP/UDP报文、V2X报文中的优化后的行驶路径对应的自动驾驶车辆。第一V2X设备与中控***2的通信单元21的通信接口可通过以太网、USB(Universal Serial Bus，通用串行总线)或者串口进行通信；第二V2X设备与自动驾驶控制装置的通信接口可通过以太网、USB或者串口通信。
实施例二
基于前述实施例一相同构思，本发明实施例二还提供一种中控***，该中控***的结构可如图3或如图5所示，在此不再赘述。
实施例三
基于前述实施例一相同构思，本发明实施例三提供一种港区监控方法，该方法流程如图8所示，该港区监控方法可以运行在前述中控***2中，方法包括：
步骤101、接收设置在港区内的各路侧摄像机采集的图像；
步骤102、对接收到的图像进行坐标转换和拼接得到上帝视角下港区的全局图像；
步骤103、确定所述全局图像中的道路区域；
步骤104、对全局图像中的道路区域进行物体检测和物体跟踪，得到目标物体的跟踪结果和类别；
步骤105、在全局图像中展示所述目标物体的跟踪结果和类别。
优选地，前述步骤102具体可通过图9所示的流程实现：
步骤102A、将接收到的图像中采集时间相同的图像确定为一组图像；
步骤102B、将一组图像中的各图像进行坐标转换，得到一组俯瞰图像；
步骤102C、将一组俯瞰图像按照预置的拼接顺序进行拼接得到一张全局图像，所述拼接顺序根据各路侧摄像机之间的空间位置关系得到。
优选地，所述步骤103具体实现可如下：将所述港区对应的高精地图与所述全局图像进行叠加，以得到所述全局图像中的道路区域(具体可参见实施例一中的方式A1，在此不再赘述)；或者，采用预置的语义分割算法对所述全局图像进行语义分割，以得到所述全局图像中的道路区域(具体可参见实施例一中的方式A2，在此不再赘述)。
优选地，前述图8、图9所示的方法，还可进一步包括步骤106～步骤108，如图10所示在图8所示的方法流程中还包括步骤106～步骤108，其中：
步骤106、根据目标物体的跟踪结果和类别预测各目标物体对应的运动轨迹；
步骤107、根据各目标物体对应的运动轨迹对自动驾驶车辆的行驶路径进行优化；
步骤108、将优化后的行驶路径发送给相应的自动驾驶车辆。
优选地，所述步骤107具体实现可如下：
针对每辆自动驾驶车辆，将自动驾驶车辆发送的该自动驾驶车辆对应的预估行驶轨迹与各目标物体对应的运动轨迹进行比对，若发生重合则优化所述自动驾驶车辆的行驶路径，以使优化后的行驶路径与各目标物体对应的运动轨迹不重合；若不发生重合则不优化所述自动驾驶车辆的行驶路径。
优选地，步骤108具体实现可如下：通过V2X通信技术将优化后的行驶路径发送给相应的自动驾驶车辆。
以上结合具体实施例描述了本发明的基本原理，但是，需要指出的是，对本领域普通技术人员而言，能够理解本发明的方法和装置的全部或者任何步骤或者部件可以在任何计算装置(包括处理器、存储介质等)或者计算装置的网络中，以硬件固件、软件或者他们的组合加以实现，这是本领域普通技术人员在阅读了本发明的说明的情况下运用它们的基本编程技能就能实现的。
本领域普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。
本领域内的技术人员应明白，本发明的实施例可提供为方法、***、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(***)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的上述实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括上述实施例以及落入本发明范围的所有变更和修改。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (9)

1.一种港区监控方法，其特征在于，包括：
接收设置在港区内的各路侧摄像机采集的图像；
对接收到的图像进行坐标转换和拼接得到上帝视角下港区的全局图像；
确定所述全局图像中的道路区域，具体包括：将所述港区对应的高精地图与所述全局图像进行叠加，以得到所述全局图像中的道路区域；
对全局图像中的道路区域进行物体检测和物体跟踪，得到目标物体的跟踪结果和类别，所述目标物体包括多个车辆和行人；
在全局图像中展示所述目标物体的跟踪结果和类别；
根据目标物体的跟踪结果和类别预测各目标物体对应的运动轨迹；
针对每辆自动驾驶车辆，将自动驾驶车辆发送的该自动驾驶车辆对应的预估行驶轨迹与各目标物体对应的运动轨迹进行比对，若发生重合则优化所述自动驾驶车辆的行驶路径，以使优化后的行驶路径与各目标物体对应的运动轨迹不重合；以及
将优化后的行驶路径发送给相应的自动驾驶车辆。
2.根据权利要求1所述的方法，其特征在于，对接收到的图像进行坐标转换和拼接得到上帝视角下港区的全局图像，具体包括：
将接收到的图像中采集时间相同的图像确定为一组图像；
将一组图像中的各图像进行坐标转换，得到一组俯瞰图像；
将一组俯瞰图像按照预置的拼接顺序进行拼接得到一张全局图像，所述拼接顺序根据各路侧摄像机之间的空间位置关系得到。
3.根据权利要求1所述的方法，其特征在于，将优化后的行驶路径发送给相应的自动驾驶车辆，具体包括：
通过V2X通信技术将优化后的行驶路径发送给相应的自动驾驶车辆。
4.一种港区监控***，其特征在于，包括设置在港区内的路侧摄像机、中控***，其中：
路侧摄像机，用于采集图像，并将图像发送给中控***；
中控***，用于：
接收各路侧摄像机采集的图像；
对接收到的图像进行坐标转换和拼接得到上帝视角下港区的全局图像；
确定所述全局图像中的道路区域，具体包括：将所述港区对应的高精地图与所述全局图像进行叠加，以得到所述全局图像中的道路区域；
对全局图像中的道路区域进行物体检测和物体跟踪，得到目标物体的跟踪结果和类别，所述目标物体包括多个车辆和行人；
在全局图像中展示所述目标物体的跟踪结果和类别；
根据目标物体的跟踪结果和类别，预测各目标物体对应的运动轨迹；
针对每辆自动驾驶车辆，将自动驾驶车辆发送的该自动驾驶车辆对应的预估行驶轨迹与各目标物体对应的运动轨迹进行比对，若发生重合则优化所述自动驾驶车辆的行驶路径，以使优化后的行驶路径与各目标物体对应的运动轨迹不重合；若不发生重合则不优化所述自动驾驶车辆的行驶路径；
将各自动驾驶车辆的优化后的行驶路径发送给相应的自动驾驶车辆。
5.根据权利要求4所述的***，其特征在于，所述中控***包括：
通信单元，用于接收各路侧摄像机采集的图像；
图像处理单元，用于对接收到的图像进行坐标转换和拼接得到上帝视角下港区的全局图像；
道路区域确定单元，用于确定所述全局图像中的道路区域；
目标检测跟踪单元，用于对全局图像中的道路区域进行物体检测和物体跟踪，得到目标物体的跟踪结果和类别；
展示单元，用于在全局图像中展示所述目标物体的跟踪结果和类别。
6.根据权利要求4所述的***，其特征在于，所述中控***，具体用于：
将接收到的图像中采集时间相同的图像确定为一组图像；
将一组图像中的各图像进行坐标转换，得到一组俯瞰图像；
将一组俯瞰图像按照预置的拼接顺序进行拼接得到一张全局图像，所述拼接顺序根据各路侧摄像机之间的空间位置关系得到。
7.根据权利要求5所述的***，其特征在于，所述中控***还包括运动轨迹预测单元、路径优化单元，其中：
运动轨迹预测单元，用于根据目标物体的跟踪结果和类别，预测各目标物体对应的运动轨迹；
路径优化单元，用于根据各目标物体对应的运动轨迹，对各自动驾驶车辆的行驶路径进行优化；
所述通信单元进一步用于：将各自动驾驶车辆的优化后的行驶路径发送给相应的自动驾驶车辆。
8.根据权利要求5所述的***，其特征在于，所述***还包括设置在港区内的路侧V2X设备和设置在自动驾驶车辆上的自动驾驶控制装置；并且，所述中控***设置有第一V2X设备，自动驾驶控制装置设置有第二V2X设备；
所述通信单元具体用于：将各自动驾驶车辆的优化后的行驶路径发送给第一V2X设备，由第一V2X设备将各自动驾驶车辆的优化后的行驶路径发送给路侧V2X设备；
路侧V2X设备，用于将从第一V2X设备接收到的自动驾驶车辆的优化后的行驶路径进行广播，由自动驾驶车辆上的第二V2X设备接收与该自动驾驶车辆对应的优化后的行驶路径。
9.一种中控***，其特征在于，包括：
通信单元，用于接收各路侧摄像机采集的图像；
图像处理单元，用于对接收到的图像进行坐标转换和拼接得到上帝视角下港区的全局图像；
道路区域确定单元，用于确定所述全局图像中的道路区域，具体用于将所述港区对应的高精地图与所述全局图像进行叠加，以得到所述全局图像中的道路区域；
目标检测跟踪单元，用于对全局图像中的道路区域进行物体检测和物体跟踪，得到目标物体的跟踪结果和类别，所述目标物体包括多个车辆和行人；
展示单元，用于在全局图像中展示所述目标物体的跟踪结果和类别；
运动轨迹预测单元，用于根据目标物体的跟踪结果和类别，预测各目标物体对应的运动轨迹；
路径优化单元，用于针对每辆自动驾驶车辆，将自动驾驶车辆发送的该自动驾驶车辆对应的预估行驶轨迹与各目标物体对应的运动轨迹进行比对，若发生重合则优化所述自动驾驶车辆的行驶路径，以使优化后的行驶路径与各目标物体对应的运动轨迹不重合；若不发生重合则不优化所述自动驾驶车辆的行驶路径；
其中，所述通信单元进一步用于：将各自动驾驶车辆的优化后的行驶路径发送给相应的自动驾驶车辆。
CN201810157700.XA 2018-02-24 2018-02-24 一种港区监控方法及***、中控*** Active CN110197097B (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN201810157700.XA CN110197097B (zh) 2018-02-24 2018-02-24 一种港区监控方法及***、中控***
EP18907348.9A EP3757866A4 (en) 2018-02-24 2018-09-13 PORT AREA SURVEILLANCE PROCESS AND SYSTEM, AND CENTRAL CONTROL SYSTEM
PCT/CN2018/105474 WO2019161663A1 (zh) 2018-02-24 2018-09-13 一种港区监控方法及***、中控***
AU2018410435A AU2018410435B2 (en) 2018-02-24 2018-09-13 Port area monitoring method and system, and central control system
US17/001,082 US20210073539A1 (en) 2018-02-24 2020-08-24 Port area monitoring method and system and central control system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810157700.XA CN110197097B (zh) 2018-02-24 2018-02-24 一种港区监控方法及***、中控***

Publications (2)

Publication Number Publication Date
CN110197097A CN110197097A (zh) 2019-09-03
CN110197097B true CN110197097B (zh) 2024-04-19

Family

ID=67687914

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810157700.XA Active CN110197097B (zh) 2018-02-24 2018-02-24 一种港区监控方法及***、中控***

Country Status (5)

Country Link
US (1) US20210073539A1 (zh)
EP (1) EP3757866A4 (zh)
CN (1) CN110197097B (zh)
AU (1) AU2018410435B2 (zh)
WO (1) WO2019161663A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114067556B (zh) * 2020-08-05 2023-03-14 北京万集科技股份有限公司 环境感知方法、装置、服务器和可读存储介质
CN112866578B (zh) * 2021-02-03 2023-04-07 四川新视创伟超高清科技有限公司 基于8k视频画面全局到局部的双向可视化及目标跟踪***及方法
JP7185740B1 (ja) * 2021-08-30 2022-12-07 三菱電機インフォメーションシステムズ株式会社 領域特定装置、領域特定方法及び領域特定プログラム
CN114598823B (zh) * 2022-03-11 2024-06-14 北京字跳网络技术有限公司 特效视频生成方法、装置、电子设备及存储介质
CN114820700B (zh) * 2022-04-06 2023-05-16 北京百度网讯科技有限公司 对象跟踪方法及装置

Citations (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1897015A (zh) * 2006-05-18 2007-01-17 王海燕 基于机器视觉的车辆检测和跟踪方法及***
CN1932841A (zh) * 2005-10-28 2007-03-21 南京航空航天大学 基于仿生复眼的运动目标检测装置及其方法
CN102096803A (zh) * 2010-11-29 2011-06-15 吉林大学 基于机器视觉的行人安全状态识别***
CN102164269A (zh) * 2011-01-21 2011-08-24 北京中星微电子有限公司 全景监控方法及装置
CN103017753A (zh) * 2012-11-01 2013-04-03 中国兵器科学研究院 一种无人机航路规划方法及装置
CN103236160A (zh) * 2013-04-07 2013-08-07 水木路拓科技(北京)有限公司 基于视频图像处理技术的路网交通状态监测***
CN103473659A (zh) * 2013-08-27 2013-12-25 西北工业大学 配送车辆端实时状态信息驱动的物流任务动态优化分配方法
CN103491617A (zh) * 2012-06-12 2014-01-01 现代自动车株式会社 控制用于v2x通信的功率的装置和方法
CN103955920A (zh) * 2014-04-14 2014-07-30 桂林电子科技大学 基于三维点云分割的双目视觉障碍物检测方法
CN104410838A (zh) * 2014-12-15 2015-03-11 成都鼎智汇科技有限公司 一种分布式视频监视***
CN104483970A (zh) * 2014-12-20 2015-04-01 徐嘉荫 一种基于卫星定位***或移动通信网络的控制无人驾驶***航行的方法
CN105844964A (zh) * 2016-05-05 2016-08-10 深圳市元征科技股份有限公司 一种车辆安全驾驶预警方法及装置
CN106441319A (zh) * 2016-09-23 2017-02-22 中国科学院合肥物质科学研究院 一种无人驾驶车辆车道级导航地图的生成***及方法
CN106652448A (zh) * 2016-12-13 2017-05-10 山姆帮你（天津）信息科技有限公司 基于视频处理技术的公路交通状态监测***
CN106997466A (zh) * 2017-04-12 2017-08-01 百度在线网络技术（北京）有限公司 用于检测道路的方法和装置
JP2017138660A (ja) * 2016-02-01 2017-08-10 トヨタ自動車株式会社 物体検出方法、物体検出装置、およびプログラム
CN107045782A (zh) * 2017-03-05 2017-08-15 赵莉莉 智能交通管控***差异化调配路线的实现方法
WO2017147792A1 (en) * 2016-03-01 2017-09-08 SZ DJI Technology Co., Ltd. Methods and systems for target tracking
CN107209854A (zh) * 2015-09-15 2017-09-26 深圳市大疆创新科技有限公司 用于支持顺畅的目标跟随的***和方法
CN107226087A (zh) * 2017-05-26 2017-10-03 西安电子科技大学 一种结构化道路自动驾驶运输车及控制方法
CN107316006A (zh) * 2017-06-07 2017-11-03 北京京东尚科信息技术有限公司 一种道路障碍物检测的方法和***
CN107343165A (zh) * 2016-04-29 2017-11-10 杭州海康威视数字技术股份有限公司 一种监控方法、设备及***
CN107341445A (zh) * 2017-06-07 2017-11-10 武汉大千信息技术有限公司 监控场景下行人目标的全景描述方法及***
EP3244344A1 (en) * 2016-05-13 2017-11-15 DOS Group S.A. Ground object tracking system

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9275545B2 (en) * 2013-03-14 2016-03-01 John Felix Hart, JR. System and method for monitoring vehicle traffic and controlling traffic signals
US9407881B2 (en) * 2014-04-10 2016-08-02 Smartvue Corporation Systems and methods for automated cloud-based analytics for surveillance systems with unmanned aerial devices
US9747505B2 (en) * 2014-07-07 2017-08-29 Here Global B.V. Lane level traffic
US9681046B2 (en) * 2015-06-30 2017-06-13 Gopro, Inc. Image stitching in a multi-camera array
CN105208323B (zh) * 2015-07-31 2018-11-27 深圳英飞拓科技股份有限公司 一种全景拼接画面监控方法及装置
EP3141926B1 (en) * 2015-09-10 2018-04-04 Continental Automotive GmbH Automated detection of hazardous drifting vehicles by vehicle sensors
US9910441B2 (en) * 2015-11-04 2018-03-06 Zoox, Inc. Adaptive autonomous vehicle planner logic
CN105407278A (zh) * 2015-11-10 2016-03-16 北京天睿空间科技股份有限公司 一种全景视频交通态势监控***及方法
JP6595401B2 (ja) * 2016-04-26 2019-10-23 株式会社Ｓｏｋｅｎ 表示制御装置
CN107122765B (zh) * 2017-05-22 2021-05-14 成都通甲优博科技有限责任公司 一种高速公路服务区全景监控方法及***
US20180307245A1 (en) * 2017-05-31 2018-10-25 Muhammad Zain Khawaja Autonomous Vehicle Corridor

Patent Citations (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1932841A (zh) * 2005-10-28 2007-03-21 南京航空航天大学 基于仿生复眼的运动目标检测装置及其方法
CN1897015A (zh) * 2006-05-18 2007-01-17 王海燕 基于机器视觉的车辆检测和跟踪方法及***
CN102096803A (zh) * 2010-11-29 2011-06-15 吉林大学 基于机器视觉的行人安全状态识别***
CN102164269A (zh) * 2011-01-21 2011-08-24 北京中星微电子有限公司 全景监控方法及装置
CN103491617A (zh) * 2012-06-12 2014-01-01 现代自动车株式会社 控制用于v2x通信的功率的装置和方法
CN103017753A (zh) * 2012-11-01 2013-04-03 中国兵器科学研究院 一种无人机航路规划方法及装置
CN103236160A (zh) * 2013-04-07 2013-08-07 水木路拓科技(北京)有限公司 基于视频图像处理技术的路网交通状态监测***
CN103473659A (zh) * 2013-08-27 2013-12-25 西北工业大学 配送车辆端实时状态信息驱动的物流任务动态优化分配方法
CN103955920A (zh) * 2014-04-14 2014-07-30 桂林电子科技大学 基于三维点云分割的双目视觉障碍物检测方法
CN104410838A (zh) * 2014-12-15 2015-03-11 成都鼎智汇科技有限公司 一种分布式视频监视***
CN104483970A (zh) * 2014-12-20 2015-04-01 徐嘉荫 一种基于卫星定位***或移动通信网络的控制无人驾驶***航行的方法
CN107209854A (zh) * 2015-09-15 2017-09-26 深圳市大疆创新科技有限公司 用于支持顺畅的目标跟随的***和方法
JP2017138660A (ja) * 2016-02-01 2017-08-10 トヨタ自動車株式会社 物体検出方法、物体検出装置、およびプログラム
WO2017147792A1 (en) * 2016-03-01 2017-09-08 SZ DJI Technology Co., Ltd. Methods and systems for target tracking
CN107343165A (zh) * 2016-04-29 2017-11-10 杭州海康威视数字技术股份有限公司 一种监控方法、设备及***
CN105844964A (zh) * 2016-05-05 2016-08-10 深圳市元征科技股份有限公司 一种车辆安全驾驶预警方法及装置
EP3244344A1 (en) * 2016-05-13 2017-11-15 DOS Group S.A. Ground object tracking system
CN106441319A (zh) * 2016-09-23 2017-02-22 中国科学院合肥物质科学研究院 一种无人驾驶车辆车道级导航地图的生成***及方法
CN106652448A (zh) * 2016-12-13 2017-05-10 山姆帮你（天津）信息科技有限公司 基于视频处理技术的公路交通状态监测***
CN107045782A (zh) * 2017-03-05 2017-08-15 赵莉莉 智能交通管控***差异化调配路线的实现方法
CN106997466A (zh) * 2017-04-12 2017-08-01 百度在线网络技术（北京）有限公司 用于检测道路的方法和装置
CN107226087A (zh) * 2017-05-26 2017-10-03 西安电子科技大学 一种结构化道路自动驾驶运输车及控制方法
CN107316006A (zh) * 2017-06-07 2017-11-03 北京京东尚科信息技术有限公司 一种道路障碍物检测的方法和***
CN107341445A (zh) * 2017-06-07 2017-11-10 武汉大千信息技术有限公司 监控场景下行人目标的全景描述方法及***

Also Published As

Publication number Publication date
WO2019161663A1 (zh) 2019-08-29
US20210073539A1 (en) 2021-03-11
AU2018410435B2 (en) 2024-02-29
EP3757866A4 (en) 2021-11-10
AU2018410435A1 (en) 2020-10-15
EP3757866A1 (en) 2020-12-30
CN110197097A (zh) 2019-09-03

Similar Documents

Publication Publication Date Title
CN110197097B (zh) 一种港区监控方法及***、中控***
JP7070974B2 (ja) 自律車両ナビゲーションのための疎な地図
US11676307B2 (en) Online sensor calibration for autonomous vehicles
CN110174093B (zh) 定位方法、装置、设备和计算机可读存储介质
US11386672B2 (en) Need-sensitive image and location capture system and method
US20200082614A1 (en) Intelligent capturing of a dynamic physical environment
WO2021038294A1 (en) Systems and methods for identifying potential communication impediments
US20170359561A1 (en) Disparity mapping for an autonomous vehicle
CN106023622B (zh) 一种确定红绿灯识别***识别性能的方法和装置
US20220032452A1 (en) Systems and Methods for Sensor Data Packet Processing and Spatial Memory Updating for Robotic Platforms
CN109931950B (zh) 一种实景导航方法、***及终端设备
CN111353453B (zh) 用于车辆的障碍物检测方法和装置
CN115665553A (zh) 一种无人机的自动跟踪方法、装置、电子设备及存储介质
CN115249345A (zh) 一种基于倾斜摄影三维实景地图的交通拥堵检测方法
CN115752476B (zh) 一种基于语义信息的车辆地库重定位方法、装置、设备和介质
CN115909286A (zh) 数据处理方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20200327

Address after: 101300, No. two, 1 road, Shunyi Park, Zhongguancun science and Technology Park, Beijing, Shunyi District

Applicant after: BEIJING TUSEN ZHITU TECHNOLOGY Co.,Ltd.

Address before: 101300, No. two, 1 road, Shunyi Park, Zhongguancun science and Technology Park, Beijing, Shunyi District

Applicant before: BEIJING TUSEN WEILAI TECHNOLOGY Co.,Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant