CN107131883B - 基于视觉的全自动移动终端室内定位*** - Google Patents

基于视觉的全自动移动终端室内定位*** Download PDF

Info

Publication number
CN107131883B
CN107131883B CN201710280545.6A CN201710280545A CN107131883B CN 107131883 B CN107131883 B CN 107131883B CN 201710280545 A CN201710280545 A CN 201710280545A CN 107131883 B CN107131883 B CN 107131883B
Authority
CN
China
Prior art keywords
roi
image
region
module
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710280545.6A
Other languages
English (en)
Other versions
CN107131883A (zh
Inventor
刘宁
李明宽
牛群
刘畅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Wojia Technology Co ltd
Original Assignee
Sun Yat Sen University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sun Yat Sen University filed Critical Sun Yat Sen University
Priority to CN201710280545.6A priority Critical patent/CN107131883B/zh
Publication of CN107131883A publication Critical patent/CN107131883A/zh
Application granted granted Critical
Publication of CN107131883B publication Critical patent/CN107131883B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/20—Instruments for performing navigational calculations
    • G01C21/206—Instruments for performing navigational calculations specially adapted for indoor navigation

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Image Analysis (AREA)

Abstract

本发明涉及一种基于视觉的全自动移动终端室内定位***及方法，其中***包括图像数据库、深度学习模块、图像匹配模块以及定位模块，还可以包括增量构建图像数据库模块。本发明提供的基于视觉的全自动移动终端室内定位***，通过自动在视频中自动提取ROI区域实现了带摄像头设备在室内场景下的全自动定位，并获得了较高精度的定位结果。同时，利用用户定位成功的视频数据，增量构建和更新图像数据库。这种方法有效利用了大量的视频数据，降低了部署所需要的工作量，同时能及时更新数据库以应对由于装修等导致的室内场景的改变。

Description

基于视觉的全自动移动终端室内定位***
技术领域
本发明涉及一种基于视觉的全自动移动终端室内定位***。
背景技术
随着移动互联网的飞速发展，基于地理位置的服务在许多应用上发挥着越来越重要的作用。如今大多数定位应用都是基于全球定位***(Global Positioning System，简称GPS)或基站等室外定位环境，而对于人们大部分时间活动的室内环境，GPS卫星信号收到混凝土等众多障碍物的阻挡导致信号严重衰减，定位精度很难达到要求。因此，方便而且精确的室内定位技术具有重要的商业价值。
而照片和视频慢慢成为了全球人们生活中不可缺少的一部分，计算机视觉技术也在近年来受到了越来越多的关注。室内场景中的视觉特征相对于传统的无线射频信号特征来说，具有更直观、更稳定的特征，而且除了相机之外不需要额外的特殊设备部署，可以广泛应用在室内商场导航导购，机器人自动送货等场景，具有广阔的商业应用前景。
现有基于计算机视觉的方法包括基于2D图像的方法以及基于3D模型的方法。基于2D图像的方法通常分为图像特征匹配与位置确定两部分，首先利用SIFT、SURF等局部特征或颜色直方图等全局特征表示用户拍摄的图像，与图像数据库进行匹配确定用户拍摄的照片所对应的位置，接着使用罗盘或陀螺仪测量用户拍摄照片时候手机的的朝向与旋转角，构建三角定位模型确定用户位置。基于3D模型的方法通常使用SfM算法，利用一组二维图像序列构建出室内场景的三维模型。在定位阶段找到用户拍摄的2D照片特征点与3D点云匹配的对应关系，从而估算出相机姿态以及相机所在的位置
在实际场景中，现有的技术普遍存在如下几个方面的缺点：
1.基于2D图像的室内定位的用户操作很繁琐，用户对准特定的目标(ROI，RegionofInterest,如商场的店铺招牌等)进行拍摄，如果ROI选择错误或者拍摄方向没有正对ROI都会导致定位误差。同时，不能方便地移植到无人的移动设备上实现全自动定位。
2.基于计算机视觉的室内定位的定位精度很大程度上依赖于图像或特征点的匹配准确率，传统的图像匹配算法(如SIFT，SURF，ORB等)的匹配准确率不高，还有较大提升的空间。
3.基于3D模型在建立点云阶段需要大量室内场景的照片，并且定位阶段的运算量很大或者需要一些如深度摄像头之类的特定设备。
发明内容
本发明提供了一种基于视觉的全自动移动终端室内定位***，以使得装备有摄像头的设备有效地在室内场景中自动定位，并使用深度学习获得较高的图像匹配准确率，最后，使用增量构建和更新图像数据库的方式减少***部署成本。为实现上述目的本发明技术方案如下：
一种基于视觉的全自动移动终端室内定位***，包括：
图像数据库，从互联网获取一部分目标室内场景的图像，标注出图像中ROI区域以及它们在室内地图上的坐标后构建而成；
深度学习模块，使用图像数据库训练快速区域提取卷积神经网络(Faster R-CNN)模型以及深度卷积神经网络(CNN)模型；
图像匹配模块，接收移动设备采集的视频数据，在视频中提取ROI区域并对ROI区域进行匹配，并根据视频的连续性针对ROI序列进行过滤以提高匹配准确率；
定位模块，用于将图像匹配模块中提取的ROI序列与传感器数据进行结合，考虑传感器的误差后建立优化模型估算出设备在室内场景中的位置。
一种基于视觉的全自动移动终端室内定位方法，包括以下步骤：
在离线阶段，***从互联网获取一部分目标室内场景的图像，标注出图像中ROI区域以及它们在室内地图上的坐标后构建图像数据库；
通过深度学习模块，使用图像数据库训练快速区域提取卷积神经网络(Faster R-CNN)模型以及深度卷积神经网络(CNN)模型；
在线阶段中，通过图像匹配模块接收移动设备采集的视频数据，在视频中提取ROI区域并对ROI区域进行匹配，最后根据视频的连续性针对ROI序列进行过滤以提高匹配准确率；
通过定位模块，将图像匹配模块中提取的ROI序列与传感器数据进行结合，考虑传感器的误差后建立优化模型估算出设备在室内场景中的位置。
本发明提供的基于视觉的全自动移动终端室内定位***，通过自动在视频中自动提取ROI区域实现了带摄像头设备在室内场景下的全自动定位，并获得了较高精度的定位结果。同时，利用用户定位成功的视频数据，增量构建和更新图像数据库。这种方法有效利用了大量的视频数据，降低了部署所需要的工作量，同时能及时更新数据库以应对由于装修等导致的室内场景的改变。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，并不构成对本发明的不当限定，在附图中：
图1是本发明实施例***模块设计图；
图2是本发明实施例ROI区域示意图；
图3是本发明实施例关键帧提取流程图；
图4是本发明实施例ROI匹配模块流程图；
图5是本发明实施例ROI提取与匹配结果效果图；
图6是本发明实施例三角不等式过滤示意图；
图7是本发明实施例ROI序列过滤流程图；
图8是本发明实施例定位模型示意图；
图9是本发明实施例定位模块原理图；
图10是本发明实施例聚类效果示意图；
图11是本发明实施例增量构建图像数据库模块流程图。
具体实施方式
下面将结合附图以及具体实施例来详细说明本发明，在此本发明的示意性实施例以及说明用来解释本发明，但并不作为对本发明的限定。
实施例
***总体设计及理论基础
***由图像匹配模块、定位模块、深度学习模块、增量构建与更新数据库模块组成。首先在离线阶段，***从互联网获取一部分目标室内场景的图像，标注出图像中ROI区域以及它们在室内地图上的坐标后构建图像数据库。深度学习模块是使用图像数据库训练快速区域提取卷积神经网络(Faster R-CNN)模型以及深度卷积神经网络(CNN)模型，分别与用户图像匹配模块中的ROI区域提取以及ROI匹配。在线阶段中图像匹配模块接收移动设备采集的视频数据，在视频中提取ROI区域并对区域进行匹配，为了提高匹配准确率，最后根据视频的连续性针对ROI序列进行过滤。定位模块将图像匹配模块中提取的ROI序列与传感器数据进行结合，考虑传感器的误差后建立优化模型估算出设备在室内场景中的位置。***模块设计图如图1所示。
图像匹配模块的设计与实现
该模块主要负责接收移动设备的视频数据，并提取视频中的ROI序列。其中包括三个部分，分别是关键帧提取，基于深度学习的ROI匹配以及ROI序列过滤。
关键帧提取部分设计与实现
在这个部分中，需要在视频中提取出关键帧以及对应的ROI区域。在本***中，视频帧中的ROI区域一般为店铺招牌区域，如图2所示。关键帧定义为存在一个ROI区域位于视野中间的帧。首先训练一个Faster R-CNN神经网络用于在图像中提取ROI区域，Faster R-CNN输入为视频中的某一帧，输出为一个矩形区域的集合，还有这些矩形区域为ROI的概率。选取满足公式条件的矩形区域为ROI区域：
pi＞δ(1)
其中pi为矩形区域i为属于ROI的概率，δ为一个概率的阈值。
为了加快ROI区域提取速度，考虑到视频帧与帧之间是连续而且有关联的，本专利书结合视频目标跟踪的算法KCF提出了一个关键帧选择的算法。算法流程图3如所示，首先使用FasterR-CNN提取给定帧视频中的ROI区域，然后使用KCF算法跟踪这些每一个ROI区域，记录他们在视频视野内所有的位置，选择出该ROI区域的中心位置与视野中心距离最短的那一帧为这个ROI对应的关键帧。当给定的帧的所有ROI区域都找到对应的关键帧后，在KCF算法跟踪到的最后一帧开始重复上述过程，直到提取完整个视频所有ROI的关键帧。得到关键帧后，记录关键帧对应的一系列ROI区域以及罗盘方向读数，用于后续进行匹配以及位置的计算。
ROI匹配部分设计与实现
ROI匹配部分的主要工作是在数据库中找到与视频中提取出的ROI区域以及它们在实际的坐标。利用图像数据库中的ROI区域照片训练了卷积神经网络分类器后，每个ROI在视频的每一帧出现的区域都能得到一个匹配结果。因此，需要综合考虑同一个ROI在每一帧出现的区域的匹配结果来得到该ROI的匹配结果。
匹配过程设计如下：假设第i个ROI有Ni个的矩形区域，首先第k个矩形区域ri (k)的FAST特征点，FAST特征点越多表示该矩形区域的匹配结果对ROI匹配结果的影响越大。然后按照公式根据FAST特征点个数
Figure GDA0002840513210000051
计算ri (k)的概率
Figure GDA0002840513210000052
最后按照公式综合计算出该ROI对应数据库中第j类的概率
Figure GDA0002840513210000053
Figure GDA0002840513210000054
Figure GDA0002840513210000055
ROI匹配模块的流程图如图4所示，匹配效果如图5所示。
ROI序列过滤设计与实现
由于视频拍摄是连续的，拍摄到相邻的ROI在实际地图上也应该是相邻的。因此，可以过滤一部分可能存在的匹配错误的结果，提高匹配准确率。ROI序列过滤分为两步，首先过滤不满足公式的ROI区域ri，其中ò为距离差的阈值。
|ri-1ri|+|riri+1|-|ri-1ri+1|＜ò (4)
该约束条件的示意图如图6所示，虚线部分为室内地图的一部分，A、B、C分别为三个相邻的店铺，他们之间满足|AB|+|BC|-|AC|＜ò的条件。然后计算出可能的最长ROI序列，与视频中提取出的ROI序列进行比较选取最长公共子序列为ROI序列过滤结果。
ROI序列过滤的流程图如图7所示。
定位模块的设计与实现
功能和结构设计
已知拍摄的其中两个ROI的坐标P(1)和P(2)，以及拍摄的时候面对他们的罗盘读数θ1和θ2，可以通过如图8所示模型进行定位。所示模型进行定位。而视频中可能提取到ROI序列中有三个或者更多的ROI，每两个ROI都可以确定一个设备所在的位置。但由于罗盘读数往往存在误差，每两个ROI确定的位置可能不唯一。因此本专利书提出一个方法，考虑到罗盘读数的误差以及各个ROI组合所确定的位置，综合得到一个误差更小的定位结果。
如图9所示为定位模块的原理图。所示为定位模块的原理图。首先假设观测每个ROI的时候罗盘都有误差Δθ，然后计算出每个ROI组合所确定的位置Li,j，以及它们的平均位置L，通过遗传算法调整Δθ的值，使得公式(5)所表示的误差函数J(Δθ)最小，此时平均位置L即为最终设备的定位结果。
Figure GDA0002840513210000061
增量构建图像数据库模块的设计与实现
构建图像数据库往往需要较大的工作量，本专利书提出了一个增量构建图像数据库的方法，利用用户上传的定位成功的视频，找出在数据库中没有的ROI并把这些ROI的位置与矩形区域图像更新到数据库中，能够使得数据库得到及时的更新和维护，使定位***更加稳定。
首先，需要对一段时间内的多个视频中提取出的矩形区域进行聚类，找到在不同的视频中属于同一个ROI的矩形区域。聚类过程为先使用GoogLeNet神经网络提取矩形区域的高维深度特征，然后对深度特征进行MeanShift聚类，聚类的结果如图10所示，每个矩形区域都来自不同的视频片段，属于同一个ROI的矩形区域被划分到了同一类里。接着使用上述定位模块中的定位算法计算出ROI在地图中的坐标，如果该坐标与某一个已有的ROI坐标距离很近，那可能是那个ROI有了装修等情况导致图像的变化，那么把新的矩形区域图像更新到数据库中替换原有的图像，否则，把得到的ROI坐标与矩形区域图像作为一类加入到数据库中。最后数据库更新完毕后需要重新训练图像分类模块中的训练神经网络分类器。
增量构建图像数据库模块的流程图如图11所示。
本发明提出了基于视频的室内定位***，通过自动在视频中自动提取ROI区域实现了带摄像头设备在室内场景下的全自动定位，并获得了较高精度的定位结果。同时，利用用户定位成功的视频数据，增量构建和更新图像数据库。这种方法有效利用了大量的视频数据，降低了部署所需要的工作量，同时能及时更新数据库以应对由于装修等导致的室内场景的改变。
以上对本发明实施例所提供的技术方案进行了详细介绍，本文中应用了具体个例对本发明实施例的原理以及实施方式进行了阐述，以上实施例的说明只适用于帮助理解本发明实施例的原理；同时，对于本领域的一般技术人员，依据本发明实施例，在具体实施方式以及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种基于视觉的全自动移动终端室内定位***，其特征在于包括：
图像数据库，从互联网获取一部分目标室内场景的图像，标注出图像中ROI区域以及它们在室内地图上的坐标后构建而成；
深度学习模块，使用图像数据库训练快速区域提取卷积神经网络模型以及深度卷积神经网络模型；
图像匹配模块，接收移动设备采集的视频数据，在视频中提取ROI区域并对ROI区域进行匹配，并根据视频的连续性针对ROI序列进行过滤以提高匹配准确率；
定位模块，用于将图像匹配模块中提取的ROI序列与传感器数据进行结合，考虑传感器的误差后建立优化模型估算出设备在室内场景中的位置。
2.如权利要求1所述的基于视觉的全自动移动终端室内定位***，其特征在于：
所述图像匹配模块包括关键帧提取模块、ROI匹配模块以及ROI序列过滤模块；
关键帧提取模块用于通过训练一个快速区域提取卷积神经网络以在视频图像中提取ROI区域，并将ROI区域位于视野中间的帧定义为关键帧；
ROI匹配模块用于在图形数据库中找到与视频中提取出的ROI区域以及它们在实际的坐标；
ROI序列过滤模块用于过滤一部分可能存在的匹配错误的结果，提高匹配准确率。
3.如权利要求1所述的基于视觉的全自动移动终端室内定位***，其特征在于：
还包括增量构建图像数据库模块，利用用户上传的定位成功的视频，找出在数据库中没有的ROI并把这些ROI的位置与矩形区域图像更新到数据库中，使得数据库得到及时的更新和维护，使定位***更加稳定。
4.一种基于视觉的全自动移动终端室内定位方法，其特征在于包括以下步骤：
在离线阶段，***从互联网获取一部分目标室内场景的图像，标注出图像中ROI区域以及它们在室内地图上的坐标后构建图像数据库；
通过深度学习模块，使用图像数据库训练快速区域提取卷积神经网络模型以及深度卷积神经网络模型；
在线阶段中，通过图像匹配模块接收移动设备采集的视频数据，在视频中提取ROI区域并对ROI区域进行匹配，最后根据视频的连续性针对ROI序列进行过滤以提高匹配准确率；
通过定位模块，将图像匹配模块中提取的ROI序列与传感器数据进行结合，考虑传感器的误差后建立优化模型估算出设备在室内场景中的位置。
5.如权利要求4所述的基于视觉的全自动移动终端室内定位方法，其特征在于所述图像匹配模块的设计与实现包括以下步骤：
关键帧提取，训练一个快速区域提取卷积神经网络，在快速区域提取卷积神经网络输出的一个矩形区域的集合中选取满足条件的矩形区域为ROI区域，以ROI区域位于视野中间的帧作为关键帧；
ROI匹配，假设第i个ROI有Ni个的矩形区域，首先第k个矩形区域ri (k)的FAST特征点，FAST特征点越多表示该矩形区域的匹配结果对ROI匹配结果的影响越大，然后按照公式二根据FAST特征点个数
Figure FDA0002840513200000031
计算ri (k)的概率
Figure FDA0002840513200000032
最后按照公式三综合计算出该ROI对应数据库中第j类的概率
Figure FDA0002840513200000033
其中：
公式二：
Figure FDA0002840513200000034
公式三：
Figure FDA0002840513200000035
ROI序列过滤，首先过滤不满足|ri-1ri|+|riri+1|-|ri-1ri+1|＜ò的ROI区域ri，其中ò为距离差的阈值，然后计算出可能的最长ROI序列，与视频中提取出的ROI序列进行比较选取最长公共子序列为ROI序列过滤结果。
6.如权利要求4所述的基于视觉的全自动移动终端室内定位方法，其特征在于所述ROI区域的选取包括以下步骤：
首先使用快速区域提取卷积神经网络提取给定帧视频中的ROI区域，然后使用KCF算法跟踪这些每一个ROI区域，记录他们在视频视野内所有的位置，选择出该ROI区域的中心位置与视野中心距离最短的那一帧为这个ROI对应的关键帧，当给定的帧的所有ROI区域都找到对应的关键帧后，在KCF算法跟踪到的最后一帧开始重复上述过程，直到提取完整个视频所有ROI的关键帧。
7.如权利要求4所述的基于视觉的全自动移动终端室内定位方法，其特征在于所述定位模块的设计与实现包括以下步骤：
首先假设观测每个ROI的时候罗盘都有误差Δθ，然后计算出每个ROI组合所确定的位置Li,j，以及它们的平均位置L，通过遗传算法调整Δθ的值，使得以下公式所表示的误差函数J(Δθ)最小，此时平均位置L即为最终设备的定位结果：
Figure FDA0002840513200000051
8.如权利要求4所述的基于视觉的全自动移动终端室内定位方法，其特征在于还包括以下步骤：
利用用户上传的定位成功的视频，找出在数据库中没有的ROI并把这些ROI的位置与矩形区域图像更新到图像数据库中，使得数据库得到及时的更新和维护，使定位***更加稳定。
9.如权利要求8所述的基于视觉的全自动移动终端室内定位方法，其特征在于增量构建图像数据库包括以下步骤：
首先，需要对一段时间内的多个视频中提取出的矩形区域进行聚类，找到在不同的视频中属于同一个ROI的矩形区域；
接着使用上述定位模块中的定位算法计算出ROI在地图中的坐标，如果该坐标与某一个已有的ROI坐标距离很近，那么把新的矩形区域图像更新到数据库中替换原有的图像，否则，把得到的ROI坐标与矩形区域图像作为一类加入到图形数据库中；
最后图像数据库更新完毕后需要重新训练图像分类模块中的训练神经网络分类器。
10.如权利要求9所述的基于视觉的全自动移动终端室内定位方法，其特征在于：
所述聚类过程为先使用GoogLeNet神经网络提取矩形区域的高维深度特征，然后对深度特征进行MeanShift聚类，每个矩形区域都来自不同的视频片段，属于同一个ROI的矩形区域被划分到了同一类里。
CN201710280545.6A 2017-04-26 2017-04-26 基于视觉的全自动移动终端室内定位*** Active CN107131883B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710280545.6A CN107131883B (zh) 2017-04-26 2017-04-26 基于视觉的全自动移动终端室内定位***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710280545.6A CN107131883B (zh) 2017-04-26 2017-04-26 基于视觉的全自动移动终端室内定位***

Publications (2)

Publication Number Publication Date
CN107131883A CN107131883A (zh) 2017-09-05
CN107131883B true CN107131883B (zh) 2021-02-12

Family

ID=59715285

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710280545.6A Active CN107131883B (zh) 2017-04-26 2017-04-26 基于视觉的全自动移动终端室内定位***

Country Status (1)

Country Link
CN (1) CN107131883B (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108053447A (zh) * 2017-12-18 2018-05-18 纳恩博（北京）科技有限公司 基于图像的重定位方法、服务器及存储介质
CN108534781A (zh) * 2018-03-30 2018-09-14 中山大学 基于视频的室内定位方法
CN110470296A (zh) * 2018-05-11 2019-11-19 珠海格力电器股份有限公司 一种定位方法、定位机器人及计算机存储介质
CN109099929B (zh) * 2018-07-13 2021-10-15 武汉理工大学 基于场景指纹的智能车定位装置及方法
US10810466B2 (en) * 2018-08-23 2020-10-20 Fuji Xerox Co., Ltd. Method for location inference from map images
CN109671119A (zh) * 2018-11-07 2019-04-23 中国科学院光电研究院 一种基于slam的室内定位方法及装置
CN109540138B (zh) * 2018-11-12 2021-05-25 中南大学 基于视觉神经网络的室内导航方法、***及可读存储器
CN109357679B (zh) * 2018-11-16 2022-04-19 山东浪潮科学研究院有限公司 一种基于显著性特征识别的室内定位方法
CN111337010B (zh) * 2018-12-18 2022-05-03 北京地平线机器人技术研发有限公司 可移动设备的定位方法、定位装置及电子设备
CN110097128B (zh) * 2019-05-07 2023-02-07 广东工业大学 医学图像分类装置及***
CN110136175A (zh) * 2019-05-21 2019-08-16 杭州电子科技大学 一种基于神经网络的室内典型场景匹配定位方法
CN110826448B (zh) * 2019-10-29 2023-04-07 中山大学 一种自主更新的室内定位方法
CN112880681A (zh) * 2021-01-12 2021-06-01 桂林慧谷人工智能产业技术研究院 一种基于ssd的视觉室内定位***技术方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101900566A (zh) * 2009-05-29 2010-12-01 通用汽车环球科技运作公司 基于像素的纹理丰富畅通路径检测
CN103747523A (zh) * 2014-01-14 2014-04-23 上海河广信息科技有限公司 一种基于无线网络的用户位置预测***和方法
CN106127804A (zh) * 2016-06-17 2016-11-16 淮阴工学院 基于稀疏深度去噪自编码器的rgb‑d数据跨模式特征学习的目标跟踪方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130212094A1 (en) * 2011-08-19 2013-08-15 Qualcomm Incorporated Visual signatures for indoor positioning
US9846042B2 (en) * 2014-11-13 2017-12-19 Worcester Polytechnic Institute Gyroscope assisted scalable visual simultaneous localization and mapping
JP6321570B2 (ja) * 2015-03-06 2018-05-09 日本電信電話株式会社 屋内位置情報測位システム及び屋内位置情報測位方法
CN105444766B (zh) * 2015-12-16 2018-04-10 清华大学 基于深度学习的室内导航方法
CN105760894A (zh) * 2016-03-16 2016-07-13 哈尔滨伟方智能科技开发有限责任公司 一种基于机器视觉及机器学习的机器人导航方法
CN106023211B (zh) * 2016-05-24 2019-02-26 深圳前海勇艺达机器人有限公司 基于深度学习的机器人图像定位方法及***
CN106447071A (zh) * 2016-07-25 2017-02-22 浙江大学 一种应用于视频监控场景的路径预测方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101900566A (zh) * 2009-05-29 2010-12-01 通用汽车环球科技运作公司 基于像素的纹理丰富畅通路径检测
CN103747523A (zh) * 2014-01-14 2014-04-23 上海河广信息科技有限公司 一种基于无线网络的用户位置预测***和方法
CN106127804A (zh) * 2016-06-17 2016-11-16 淮阴工学院 基于稀疏深度去噪自编码器的rgb‑d数据跨模式特征学习的目标跟踪方法

Also Published As

Publication number Publication date
CN107131883A (zh) 2017-09-05

Similar Documents

Publication Publication Date Title
CN107131883B (zh) 基于视觉的全自动移动终端室内定位***
CN111199564B (zh) 智能移动终端的室内定位方法、装置与电子设备
JP7190842B2 (ja) 情報処理装置、情報処理装置の制御方法及びプログラム
US10664708B2 (en) Image location through large object detection
CN109029444B (zh) 一种基于图像匹配和空间定位的室内导航***及导航方法
US8532400B1 (en) Scene classification for place recognition
CN109520500B (zh) 一种基于终端拍摄图像匹配的精确定位及街景库采集方法
CN109671119A (zh) 一种基于slam的室内定位方法及装置
CN104281840B (zh) 一种基于智能终端定位识别建筑物的方法及装置
EP3274964B1 (en) Automatic connection of images using visual features
CN111323024B (zh) 定位方法及装置、设备、存储介质
CN111028358B (zh) 室内环境的增强现实显示方法、装置及终端设备
CN104978390A (zh) 使用出行路径元数据进行情景感知目标检测
CN106650965B (zh) 一种远程视频处理方法及装置
CN110827353B (zh) 一种基于单目摄像头辅助的机器人定位方法
EP3537310A1 (en) Methods for navigating through a set of images
CN111652929A (zh) 一种视觉特征的识别定位方法及***
CN105279769A (zh) 一种联合多特征的层次粒子滤波跟踪方法
CN114969221A (zh) 一种更新地图的方法及相关设备
Xiao et al. Geo-spatial aerial video processing for scene understanding and object tracking
JP2020153956A (ja) 移動***置推定システムおよび移動***置推定方法
CN113298871A (zh) 地图生成方法、定位方法及其***、计算机可读存储介质
KR102249381B1 (ko) 3차원 영상 정보를 이용한 모바일 디바이스의 공간 정보 생성 시스템 및 방법
Sui et al. An accurate indoor localization approach using cellphone camera
CN112284390A (zh) 一种基于vslam的室内高精度定位导航方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20220614

Address after: 510000 room A2-2, room 306, No. 82, No. 397, Xingang Middle Road, Haizhu District, Guangzhou City, Guangdong Province

Patentee after: Guangzhou wojia Technology Co.,Ltd.

Address before: 510000 No. 135 West Xingang Road, Guangdong, Guangzhou

Patentee before: SUN YAT-SEN University