CN108474666A - 用于在地图显示中定位用户的***和方法 - Google Patents

用于在地图显示中定位用户的***和方法 Download PDF

Info

Publication number
CN108474666A
CN108474666A CN201780004604.5A CN201780004604A CN108474666A CN 108474666 A CN108474666 A CN 108474666A CN 201780004604 A CN201780004604 A CN 201780004604A CN 108474666 A CN108474666 A CN 108474666A
Authority
CN
China
Prior art keywords
map
panoramic
portable device
geographic area
processors
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780004604.5A
Other languages
English (en)
Other versions
CN108474666B (zh
Inventor
约书华·S·史巴克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN108474666A publication Critical patent/CN108474666A/zh
Application granted granted Critical
Publication of CN108474666B publication Critical patent/CN108474666B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3635Guidance using 3D or perspective road maps
    • G01C21/3638Guidance using 3D or perspective road maps including 3D objects and buildings
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3667Display of a road map
    • G01C21/3676Overview of the route on the road map
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3647Guidance involving output of stored or live camera images or video streams
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3667Display of a road map
    • G01C21/367Details, e.g. road map scale, orientation, zooming, illumination, level of detail, scrolling of road map or positioning of current position marker
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3679Retrieval, searching and output of POI information, e.g. hotels, restaurants, shops, filling stations, parking facilities

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Human Computer Interaction (AREA)
  • Navigation (AREA)
  • Instructional Devices (AREA)

Abstract

为了在地图显示内定位用户,便携式设备(10)显示表示用户的现实世界环境的全景视图(200)。便携式设备(10)还在全景视图(200)上方显示相邻区域的地图表示(250),使得地图表示(250)中所显示的区域比全景视图(200)中所描绘的现实世界环境看起来更远。便携式设备(10)还可以显示包括全景视图(200)和地图表示(250)之间的公共共享边界的交集(302),使得用户可以辨别两个显示之间的关系。

Description

用于在地图显示中定位用户的***和方法
技术领域
本公开涉及显示地图数据,并且更具体地涉及同时显示邻接的地理区域的全景视图和非全景地图表示,以在地图显示内定位用户。
背景技术
今天,地理区域的数字地图通常经由地图应用、网页浏览器等被显示在诸如计算机、平板电脑、和移动电话的计算设备上。许多地图应用为用户提供选择用于查看的地图信息或特征的类型以及调整数字地图的显示的能力。例如,用户可以在多个比例和地图查看模式中进行选择,地图查看模式诸如是呈现传统道路地图视图的基本地图模式、卫星模式、街道模式、或三维(3D)视图。
发明内容
对于地理区域,便携式设备上的绘图应用可以在显示的底部显示对应于地理区域的第一部分(例如,华盛顿州西雅图的南部)的建筑物、街道、树木等的全景3D视图,使得全景视图看起来在前景中。在背景中,在全景视图正上方,绘图应用可以显示与第一部分邻接的地理区域的第二部分(例如,西雅图的北部)的地图表示。在一些实施例中,全景视图和地图表示被组合并且在地理区域的第一和第二部分之间所共享的共同地理边界相交,以形成组合式全景/地图显示。另外在一些实施例中,根据便携式设备的朝向,全景视图和地图表示被定位。
因此,当用户查看包括她的当前位置的区域的组合式全景/地图显示时,全景视图可以以与用户相同的方向被定位,并且可以描绘用户在现实世界中在她的面前看见的对象。此外,地图表示出现在背景中,使得用户认识到地图表示中所描绘的位置和兴趣点(POI)比全景视图中的对象更远离她的当前位置。POI可以包括用户可能感兴趣的特定位置,诸如宾馆、饭店、企业、加油站、体育场、音乐厅等。结果,用户可以通过沿着她当前面对的方向行进来接近地图表示中所描绘的位置和POI。以这种方式,通过显示实际出现在用户的面前的对象的全景视图,组合式全景/地图显示有助于在地图表示的背景内定位用户。
特别地,本公开的技术的示例实施例是用于显示地图数据的便携式设备中的方法。方法包括在便携式设备中获得地理区域的地图数据的请求,并且显示地理区域的第一部分的地理定位图像的全景视图。方法还包括同时显示地理区域的第二部分的非全景地图表示,包括在地理区域的第一部分和地理区域的第二部分之间所共享的共同地理边界显示全景视图和非全景地图表示之间的交集(intersection)。
另一示例实施例是便携式设备,包括用户界面、被耦接到用户界面的一个或多个处理器、以及被耦接到一个或多个处理器并且在其上存储指令的非暂时性计算机可读存储器。指令在由一个或多个处理器执行时,使得便携式设备获得地理区域的地图数据的请求,并且在用户界面上显示地理区域的第一部分的地理定位图像的全景视图。指令还使得便携式设备在用户界面上同时显示地理区域的第二部分的非全景地图表示,并且在地理区域的第一部分和地理区域的第二部分之间所共享的共同地理边界显示全景视图和非全景地图表示之间的交集。
又一示例实施例是用于显示地图数据的服务器设备中的方法。方法包括在服务器设备中接收地理区域的地图数据的请求,并且生成地理区域的第一部分的地理定位图像的全景视图。方法还包括生成地理区域的第二部分的非全景地图表示,包括在地理区域的第一部分和地理区域的第二部分之间所共享的共同地理边界生成全景视图和非全景地图表示之间的交集,并且使得全景视图、非全景地图表示、以及全景视图和非全景地图表示之间的交集被显示在便携式设备上。
附图说明
图1是其中可以实现用于向便携式设备提供组合式全景/地图显示的技术的示例***的框图;
图2A是全景视图的示例性显示;
图2B是地图表示的示例性显示;
图3A是包括覆盖的导航方向的基于图2A的全景视图和图2B的地图表示的示例性组合式全景/地图显示;
图3B是包括覆盖的导航方向的另一示例性组合式全景/地图显示;
图3C是包括覆盖的导航方向的又一示例性组合式全景/地图显示;
图3D是具有引导用户转向以查看导航方向的指示的全景视图的示例性显示;
图3E是基于用户手势所改变的示例性组合式全景/地图显示;
图4是可以在便携式设备中实现的用于显示组合式全景/地图显示的示例方法的流程图;
图5是可以在服务器设备中实现的用于生成组合式全景/地图显示的示例方法的流程图;以及
图6是可以在服务器设备中实现的用于生成被覆盖在组合式全景/地图显示上的导航方向的示例方法的流程图。
具体实施方式
概述
为了在地图显示内初始地定位用户,便携式设备显示包括用户的当前位置的地理区域的全景3D视图。全景视图根据用户的当前朝向被定位,并且被显示在便携式设备上的显示屏幕的底部,使得全景视图看起来最接近用户。此外,便携式设备同时显示与全景视图中的地理区域邻接的地理区域的非全景地图表示。非全景地图表示被显示在全景视图正上方的显示屏幕的顶部,使得地图表示中所包括的地理区域看起来比全景视图中所包括的地理区域更远离用户。在一些实施例中,全景视图中的天空的表示被移除并且由地图表示来替换。
另外,当用户请求从她的当前位置到目的地的导航方向时,全景视图和非全景地图表示根据导航方向被覆盖有路线的指示。在一些实施例中,全景视图和地图表示都可以在与导航方向中的机动相对应的每条街道上被注释有路线覆盖图,使得用户可以沿着由路线覆盖图提供的路径从她的当前位置行进到目的地。
例如,用户可以请求从她在华盛顿州西雅图的钥匙球馆的当前位置到太空针塔的步行方向。如果用户在托马斯街上的钥匙球馆的正南并且面向东,则便携式设备可以显示具有50米半径的地理区域的全景视图,该全景视图包括在屏幕的左下部中的钥匙球馆、在中下方中的从用户的当前位置到用户的当前位置的正东50米的托马斯街、以及在右下方中的托马斯街的正南的建筑物。在全景视图正上方,便携式设备可以显示地理区域的非全景地图表示,该非全景地图表示包括从用户的当前位置的托马斯街上以东50米的位置,并且包括具有在太空针塔的针的太空针塔。全景视图可以包括突出显示被包括在导航方向中的道路部分的路线覆盖图。例如,全景视图可以包括向东的托马斯街上的路线覆盖图,并且非全景地图表示可以包括向更东的沿着托马斯街延伸的路线覆盖图,随后是指示到达太空针塔之前的右转的另一路线覆盖图。
以这种方式,当被提供有导航方向时,用户立即被定位,使得她知道朝着她当前面对的方向行进以到达她的目的地。在另一场景中,如果用户面向东北,则托马斯街上的路线覆盖图可以出现在显示屏幕上的向右的对角线。结果,用户可以认识到,她必须向右转以朝着用于到达她的目的地的正确的方向行进。
如此处所使用的,“全景视图”可以指包括可由用户从特定地理位置所查看的现实世界对象的地理定位图像的照片级的表示,诸如来自用户的当前位置的用户的环境的街面视图,以模拟沿着街道行走并且探索附近的体验。可以使用专用设备来捕捉全景视图,专用设备诸如是具有广角镜头或鱼眼镜头和/或检测深度的诸如LIDAR(光检测和测距)传感器的图像传感器的高分辨率相机。然后可以将由相机或由具有窄镜头的多个相机所捕捉的多张地理定位图像的照片拼合在一起以生成全景视图。全景视图可以被渲染到虚拟圆柱体的表面上,以模拟用户处于场景中间的感觉,诸如虚拟圆柱体的矩形横截面,或者被渲染到以用户的视角为中心的三维实体的任何其他表面。在另一示例中,全景视图可以包括位于由全景视图所表示的地理区域内的现实世界的建筑物、树木、标志、以及其他对象的三维渲染。此外,全景视图可以包括被投影到虚拟圆柱体上的照片以及位于地理区域内的现实世界的对象的三维渲染的任何组合。全景视图可以从虚拟相机的视角被显示。
同样如此处所使用的,“地图表示”可以指用于地理区域的诸如道路、城市、州、物理特征、标签等的地图特征的非全景道路地图或卫星表示。地图表示可以包括使用墨卡托投影在二维平面中的地图特征的渲染。在另一示例中,地图表示可以包括来自卫星的地理区域的航空照片,该航空照片可以被拼合在一起并且在二维平面中被渲染。此外,二维平面可以平行于虚拟相机的平面,或者可以相对于虚拟相机的平面倾斜(斜)。
如此处所使用的,“同时”显示全景视图和非全景地图表示可以指并发地而不是顺序地显示全景视图和非全景地图表示。当全景视图和非全景地图表示在相同的屏幕内、相同的窗口中等在相同的时间被显示时,全景视图和非全景地图表示可以被称为被“同时”显示。
因此,全景视图和非全景地图表示可以被“同时”显示,使得全景视图被渲染到虚拟圆柱体的表面上,而非全景地图表示被渲染到平行于虚拟圆柱的表面的平面上,或被渲染到基于平面被倾斜的量相对于虚拟圆柱体的表面成角度的平面上。另外,可以使用用于全景视图和非全景地图表示的渲染的任何合适的组合来“同时”显示全景视图和非全景视图。例如,全景视图可以被渲染到虚拟圆柱体的表面上,并且非全景地图表示可以被渲染到平行于虚拟圆柱体的表面的二维平面上,全景视图可以包括现实世界对象的三维渲染,并且非全景地图表示可以被渲染到相对于虚拟相机的平面被倾斜的二维平面上等。
示例硬件和软件组件
参考图1,其中可以实现上述技术的示例通信***100包括便携式设备10,诸如被配置为执行绘图应用22的便携式设备。除了便携式设备10之外,通信***还包括被配置为向便携式设备10提供组合式全景/地图显示的服务器设备60。服务器设备60可以被通信地耦接到数据库80,该数据库80在示例实施方式中存储各种地理区域的全景视图。例如,全景视图可以对应于各种地理位置,并且描绘各种地理位置周围特定半径(例如,10米、50米、100米等)的地理区域。每个全景视图可以是来自具有特定视锥体的虚拟相机的视角。例如,视锥体可以对应于三维中的相机位置(例如,用户的当前位置)、缩放级别、以及诸如俯仰、偏航、翻滚等或相机方位角、相机倾斜的相机朝向参数。
更一般地,服务器设备60可以与一个或多个数据库进行通信,该一个或多个数据库存储任何类型的合适的地理空间信息或诸如优惠券或报价的可以被链接到地理环境的信息。例如,通信***100还可以包括提供驾驶、步行、骑车或公共交通方向的导航数据服务器34。此外,通信***100可以包括地图数据服务器50,该地图数据服务器50向服务器设备60提供地图数据,用于生成组合式全景/地图显示。在通信***100中操作的设备可以经由通信网络30被互连。
在示例实施方式中,例如,便携式设备10可以是智能电话或平板电脑,并且包括内存20、一个或多个处理器(CPU)16、图形处理单元(GPU)12、I/O模块14、用户界面(UI)32以及一个或多个传感器19。内存20可以是非暂时性存储器,并且可以包括诸如随机存取存储器(RAM)、只读存储器(ROM)、闪存、其他类型的永久存储器等的一个或多个合适的内存模块。例如,I/O模块14可以是触摸屏。更一般地,可以在诸如膝上型或台式计算机、诸如车辆头部单元的被嵌入在车辆中的设备、诸如智能手表或智能眼镜的可穿戴设备等的其他类型的设备中实现本公开的技术。
取决于实施方式,一个或多个传感器19可以包括检测便携式设备10的位置的全球定位***(GPS)模块、确定便携式设备10的方向的罗盘、确定旋转和倾斜的陀螺仪、加速计等。
内存20存储操作***(OS)26,该操作***26可以是任何类型的合适的移动或通用操作***。OS26可以包括允许应用(诸如绘图应用22)来检索传感器读数的应用程序编程接口(API)功能。例如,被配置为在便携式设备10上执行的软件应用可以包括调用OS26API以用于在那时检索便携式设备10的当前位置和朝向的指令。API还可以返回估计API的确定程度的定量指示(例如,作为百分比)。
内存20还存储绘图应用22,该绘图应用22被配置为生成交互式数字地图。绘图应用22可以从地图数据服务器50和/或服务器设备60接收光栅(例如,位图)或非光栅(例如,矢量图形)格式的地图数据。在一些情况下,地图数据可以被组织成层,诸如描绘道路、街道、自然形态等的基本层,描绘当前交通状况的交通层,描绘当前天气状况的天气层,描绘到达目的地的路径的导航层等。绘图应用22还可以显示驾驶、步行、或运输方向,并且通常提供与地理、地理位置、导航等有关的功能。
值得注意的是,虽然图1将绘图应用22示出为独立应用,但是绘图应用22的功能也可以经由在便携式设备10上执行的网页浏览器以可访问的在线服务的形式被提供,作为在便携式设备10上执行的另一软件应用的插件或扩展等。通常可以对于不同的各自的操作***以不同的版本提供绘图应用22。例如,便携式设备10的制造商可以提供用于AndroidTM平台的包括绘图应用22的软件开发套件(SDK)、用于iOSTM平台的另一SDK等。
在一些实施方式中,服务器设备60包括一个或多个处理器62和内存64。内存64可以是有形的、非暂时性存储器,并且可以包括任何类型的合适的内存模块,该内存模块包括随机存取存储器(RAM)、只读存储器(ROM)、闪存、其它类型的永久存储器等。内存64存储可在处理器62上执行的组成组合式全景/地图视图生成器68的指令,该组合式全景/地图视图生成器68可以生成要由绘图应用22显示的用于地理区域的组合式全景/地图显示。内存64或另一服务器中的内存类似地可以存储指令,该指令生成到地理区域内的地理位置的导航方向,并且该导航方向可以由绘图应用22显示为覆盖组合式全景/地图显示。
为了简单起见,图1将服务器设备60示出为服务器的仅仅一个例子。然而,根据一些实施方式,服务器设备60包括一个或多个服务器设备的组,每个服务器设备被配备有一个或多个处理器,并且能够独立于其他服务器设备进行操作。在这样的组中操作的服务器设备可以以分布式方式或根据任何其他合适的技术来分别处理来自便携式设备10的请求(例如,基于可用性),在分布式方式中,在一服务器设备上进行与处理请求相关联的一操作,而在另一服务器设备上进行与处理相同的请求相关联的另一操作。为了该讨论的目的,术语“服务器设备”可以指单独的服务器设备或者两个或多个服务器设备的组。
在操作中,在便携式设备10中操作的绘图应用22向服务器设备60发送数据。因此,在一示例中,服务器设备60可以接收包括诸如用户的当前位置的地理位置的地理区域的地图数据的请求。服务器设备60还可以接收便携式设备的当前朝向的指示。作为响应,服务器设备60可以检索地理区域的第一部分的全景视图(例如,从数据库80),该地理区域从用户的当前位置的视角以特定方向延伸预定的距离(例如,10米、50米、100米等)。例如,可以根据用户的当前朝向来定位全景视图。服务器设备60还可以检索与第一部分邻接的地理区域的第二部分的地图表示(例如,从地图数据服务器50),诸如以与全景视图相同的方向距离用户的当前位置10米开始并且延伸出数米、数公里等的区域。因此,服务器设备60可以组合全景视图和地图表示,并且向便携式设备10提供组合式全景/地图显示。
服务器设备60可以以多种方式组合全景视图和地图表示。例如,服务器设备60可以辨别表示天空的全景视图的部分,并且过滤掉或掩盖该部分。然后,服务器设备60可以用地图表示来替换被过滤掉的部分。这可能需要缩放地图表示或移除地图表示的部分,使得地图表示适合在天空的边界内。另外,在一些实施例中,如图3A中所示并且如下面更详细描述的,全景视图可以被缩放,使得全景视图中的对象仅占用显示的一小部分。另外,可以根据用户的朝向来定位地图表示。例如,如果用户面向南,则全景视图可以被定位成使得用户的当前位置以南的建筑物、街道、和其他对象被显示。地图表示可以被定位成使得地图表示的顶部是地图表示的最南部,并且底部是最北部。然后,服务器设备60可以向便携式设备10传送组合式全景/地图显示,并且在便携式设备10的绘图应用22中所实现的组合式显示24可以使得组合式全景/地图显示被呈现在便携式设备10的用户界面32上。
在另一实施方式中,可以在便携式设备10而不是服务器60上组成组合式全景/地图显示。例如,服务器设备60上的组合式全景/地图视图生成器68可以向便携式设备10传送对应于地图表示的地图数据和对应于全景视图的全景数据。然后,组合式显示24可以基于所接收的地图数据和全景数据来渲染组合式全景/地图显示。在其他实施例中,可以使用便携式设备10和服务器设备60的一些组合来组成组合式全景/地图显示。
为了更清楚,图2A和2B分别示出全景视图和地图表示,全景视图和地图表示可以一起被布置为组合体,以生成如图中3A所示并且如下面更详细描述的组合式全景/地图显示。参考图1中的通信***100,组合式全景/地图视图生成器68可以从数据库80检索如图2A中所示的全景视图200。例如,数据库80可以存储多个地理区域的多个全景视图。在一示例场景中,全景视图200可以描绘西雅图附近的部分,其中虚拟相机的位置是用户的当前位置202,并且可以以用户当前面对的方向延伸阈值距离(例如,10米、50米、100米等)到另一位置204,根据全景视图200的右上角中的罗盘206,用户当前面对的方向是南。在一些实施例中,预定的阈值距离可以是从相机位置到现实世界视图中地平线的距离。在其他场景中,全景视图可以来自由用户所指定或以任何其他合适的方式所选择的另一起始位置的视角,并且可以在用户的当前朝向延伸任何合适的距离,该朝向是用户在起始位置或任何其他合适的位置可能面对的朝向。例如,如果起始位置是火车站,则全景视图的朝向可以是用户走出车站时可能面对的朝向。
如在全景视图200中,靠近屏幕的底部被显示的建筑物、街道和其他对象看起来比在屏幕上较高处被显示的建筑物、街道和其他对象更接近起始位置202。此外,较小的对象看起来比较大的对象更远离起始位置202。例如,第一建筑物210看起来比第二建筑物212更接近全景视图的起始位置202,因为第二建筑物212比第一建筑物210小,并且开始于屏幕上的比第一建筑物210更高的像素位置。全景视图200可以包括多个像素,每个像素具有表示像素相对于全景视图200内的其他像素的位置的像素坐标(例如,x、y坐标)的集合。例如,全景视图上最左侧的像素可以具有x坐标为0的像素坐标,并且全景视图的底部的像素可以具有y坐标为0的像素坐标。在一些实施例中,位于全景视图200的左下角的像素可以具有像素坐标(0,0),并且位于全景视图200的右上角的像素可以具有x坐标为全景视图200的像素宽度并且y坐标为全景视图200的像素高度的像素坐标(宽度,高度)。像素的像素位置可以对应于全景视图200内的像素坐标方位。此外,全景视图200中的像素坐标的每个集合可以对应于地理坐标(例如,纬度、经度、和海拔)的集合。例如,起始位置202可以对应于映射到地理坐标Y的像素坐标X,并且位置204可以对应于映射到地理坐标Z的像素坐标W。
通过用诸如图2B中所示的地图表示250的地图表示来替换全景视图200中所描绘的天空220,地图表示中所显示的位置、街道、和POI看起来比全景视图200中所显示的建筑物、街道、和其他对象更远离用户,因为天空在建筑物、街道、和其他对象上方。此外,地图表示250中的位置和POI的指示通常小于全景视图200中的建筑物、街道、和其他对象。因此,用地图表示替换全景视图200中所描绘的天空220创建了深度的外观,使得用户将全景视图200中的对象辨别为比地图表示中的位置和POI更接近起始位置202。
此外,通过用地图表示250替换天空220,组合式全景/地图视图生成器68还减少显示上未使用的空间的量,并且允许用户看到比全景视图的地平线更远的距离。例如,如果全景视图200向南延伸100米并且地图表示250向南延伸三公里以上,则用户可以查看起始位置202以南3.1公里,而不是100米,同时保持全景视图的优点(例如,与现实世界视图的相似性、3D对象等)。
为了辨别全景视图200的表示天空220的部分,组合式全景/地图视图生成器68可以从全景视图200的顶部检索可能表示天空的像素,并且将所检索的像素的属性与全景视图上的每个像素的属性进行比较。在一些实施例中,可以与先前图像中表示天空的示例像素进行比较。如果示例像素的属性(例如,RGB像素值)与全景视图200中的像素的属性相差小于预定的阈值,则全景视图中的像素可以被辨别为天空的表示,并且可以被过滤掉。在一些实施例中,如果像素直接在没有被辨别为天空的表示的像素的下方,则它们保留在全景视图200中。例如,描绘地面上的对象的蓝色像素可以保留在全景视图200中,因为描绘建筑物、树木等的像素可以位于描绘地面上的对象的蓝色像素和描绘天空的像素之间,并且被渲染成与天空不匹配的不同颜色。
在另一实施例中,服务器设备60可以检索包含被用于辨别表示天空的像素的多个特征的天空分类器。基于天空分类器,服务器设备60可以使用统计推断或任何其他合适的统计方法来辨别并且移除全景视图200的表示天空220的部分。可以利用诸如支持向量机、神经网络、朴素贝叶斯、随机森林等的各种分类***。可以使用空间-色彩启发式算法、使用机器学习技术来将全景视图中的像素与示例像素进行比较、或者以任何其他合适的方式来进行过滤处理。
现在转到图2B,示出了西雅图的部分的地图表示250。在一些实施例中,组合式全景/地图视图生成器68可以从地图数据服务器50检索地图表示250。在其他实施例中,组合式全景/地图视图生成器68可以从地图数据服务器50检索对应于西雅图的部分的地图数据,并且可以基于该地图数据来渲染地图表示250。在其他实施例中,组合式全景/地图视图生成器68可以从地图数据服务器50检索对应于西雅图的部分的地图数据,操纵地图数据来生成组合式全景/地图显示,并且向便携式设备10传送所操纵的地图数据,用于渲染该地图表示250。
在任何情况下,组合式全景/地图视图生成器68可以检索地理区域的地图数据,该地理区域包括全景视图200中离起始位置202最远的边界,并且以全景视图200的朝向延伸预定的阈值距离(例如,一公里、五公里、十公里等)。在上面的示例中,组合式全景/地图视图生成器68可以检索地理区域的地图数据,该地理区域包括具有地理坐标Z的位置204并且包括地理坐标Z以南5公里的位置。在另一示例中,用户可以选择目的地或其他POI。作为响应,组合式全景/地图视图生成器68可以检索地理区域的地图数据,该地理区域包括位置204并包括所选择的目的地或POI。
然后,全景/地图视图生成器68可以旋转地图表示,使得地图表示根据用户的当前朝向被定位,类似于全景视图。例如,虽然地图表示250被定位,使得地图表示250的顶部是最北部,但是地图表示250可以被旋转180度,使得地图表示250的顶部在全景视图200中是最南部。地图表示250中的标签和其他地图特征也可以以类似的方式被旋转。结果,华盛顿州会议中心252可以出现在地图表示250的顶部附近,并且联合湖公园254可以出现在地图表示250的底部附近。在其他场景中,当全景视图200面向东时,地图表示可以被旋转90度,使得地图表示250的顶部是最东部,当全景视图面向东北时,地图表示250可以被旋转45度,使得地图表示250的顶部是最东北部,当全景视图200面向北时,地图表示250不被旋转等。
另外,当天空220被移除时,地图表示250的几何形状可以被改变为匹配全景视图200中的空白空间的几何形状。在一些实施例中,空白空间可以是类似于地图表示250的形状的矩形,然而在另一实施例中,如在全景视图200中,空白空间可以是不规则的形状。在这种情况下,在根据全景视图200的朝向旋转地图表示250之后,组合式全景/地图视图生成器68可以移除不适合在空白空间的几何形状内的地图表示250的部分。例如,组合式全景/地图视图生成器68可以将对应于空白空间的像素坐标的像素阵列与对应于地图表示250的像素坐标的像素阵列进行比较。当像素对应于未被包括在表示空白空间的像素阵列中的像素坐标时,地图表示250中的这些像素可以被移除。
另外,地图表示250可以以任何合适的方式被缩放。例如,如果用户选择起始位置202的西南500公里的POI,则地图表示250可以以非常低的细节级别被显示,以在由空白空间的像素阵列所指定的边界内包括位置204和所选择的POI。另一方面,如果用户选择起始位置202以南1公里的POI,则地图表示250可以以非常高的细节级别被显示。另外在一些实施例中,参考图3E如下面更详细描述的,细节级别可以经由用户输入来调整。
在任何情况下,组合式全景/地图视图生成器68可以将被改变且被旋转的地图表示250放置在全景视图200的空白空间中,以生成组合式全景/地图显示。例如,图3A示出包括全景视图200和被改变且被旋转的地图表示250的组合式全景/地图显示300。组合式全景/地图显示300还包括全景视图200和地图表示250之间的交集302。交集302出现在全景视图200和地图表示250之间所共享的共同地理边界。如上所述,位置204可以对应于地理坐标Z。在交集302,地图表示250中的位置还可以对应于地理坐标Z。在一些实施例中,在交集302的位置可以具有不同的高度。例如,在地图表示250中,建筑物304的顶部可以与其相邻位置306处于相同的经度和纬度。然而,建筑物304的顶部可以具有高于街面若干米的高度,而相邻位置306可以具有街面的高度。结果,组合式全景/地图视图生成器68可以在交集302显示全景视图200中和地图表示250中的位置,这些位置根据它们的纬度和经度具有相同的地理坐标。
此外,用户可以请求到目的地的导航方向,该导航方向可以被显示为覆盖全景视图200和地图表示250。例如,用户可以请求到西雅图的51区家具商店的导航方向。结果,可以在51区的地图表示250上显示诸如针的指示312。此外,组合式全景/地图视图生成器68可以检索从起始位置202(其可以是用户的当前位置)到51区的导航方向的集合。导航方向的集合可以包括多个机动,诸如“沿着主街朝南行进”、“右转进入滨湖大道”、“并入54号公路”等。
对于导航方向的集合中的每个机动,组合式全景/地图视图生成器68确定机动是对应于全景视图200中所显示的位置、对应于地图表示250中所显示的位置、还是对应于两者的组合。当机动对应于全景视图200中所显示的位置时,组合式全景/地图视图生成器68生成被覆盖在全景视图200中所描绘的对应街道上的第一路线指示。例如,该指示可以是突出显示全景视图200中的用户被引导沿其行进的街道部分的路线覆盖图。路线覆盖图可以是具有如路线覆盖图突出显示的街道部分的长度和宽度的矩形。此外,路线覆盖图可以以明亮的颜色被显示,或者可以具有比全景视图200中的建筑物、街道和其他对象更粗的线,以将用户的注意力引导到路线覆盖图。然而,这仅仅是表示路线的指示的一个示例,并且路线的指示可以由箭头、颜色、标签、或以任何合适的方式来表示。此外,路线覆盖图可以包括使得路线覆盖图突出显示全景视图200中的对应街道部分的任何合适的形状、长度、宽度和/或颜色。
类似地,当机动对应于地图表示中所显示的位置时,组合式全景/地图视图生成器68生成第二路线指示,该第二路线指示也可以是被覆盖在地图表示250中所描绘的对应街道上的路线覆盖图。当机动对应于全景视图200和地图表示250两者中所显示的位置时,机动可以被划分成对应于全景视图200中所显示的位置的部分和对应于地图表示250中所显示的位置的部分。组合式全景/地图视图生成器68生成第一路线指示和第二路线指示,该第一路线指示被覆盖在全景视图200中所描绘的对应街道上,用于对应于全景视图200的机动部分,该第二路线指示被覆盖在地图表示250中所描绘的对应街道上,用于对应于地图表示的机动部分。结果,组合式全景/地图显示300显示从起始位置202到51区(附图标记312)的整个路线308的指示。在一些实施例中,每个机动的文本描述可以被包括在组合式全景/地图显示300上。例如,文本描述可以被包括在不显示路线308的地图表示250的部分上。
通过在组合式全景/地图显示300上覆盖路线的指示,用户可以容易地识别行进到达他的目的地的合适方向。在示例路线308中,用户能够辨别他应该继续沿他当前面对的方向行进以到达51区。例如,如果在组合式全景/地图显示300中第一路线指示包括对角线路线覆盖图而不是垂直路线覆盖图,则用户将意识到他需要基于他正面对的方向和路线覆盖图的方向的差异来进行转弯。
例如,如图3B中所示的组合式全景/地图显示320用由第一路线覆盖图322所显示的第一机动开始的路线进行注释,该第一路线覆盖图322在向左的对角线上。基于该指示,用户被引导以略微地向左转弯。为了确保用户不会左转太多或太小以匹配路线覆盖图322的朝向,组合式全景/地图视图生成器68可以基于用户的当前位置和朝向来更新组合式全景/地图显示320。例如,如果用户左转正确的量,则所更新的显示可以包括第一机动的指示,该指示是指示用户应该直行的垂直路线覆盖图。另一方面,如果用户左转太多,则所更新的显示中的第一机动的指示可以在向右的对角线上。在一些实施例中,每次用户的当前位置或朝向改变,组合式全景/地图显示320就被更新,以显示来自用户的最新位置和朝向的视图。在其他实施例中,周期性地(例如,每分钟、每两分钟、每五分钟等)或基于用户丢失或不确定他在哪里的指示来更新组合式全景/地图显示320。例如,如果用户暂停超过阈值时间段(例如,15秒、30秒、1分钟等)或如由加速计所检测到的摇动便携式设备10,则组合式全景/地图显示320可以被更新。
另外,组合式全景/地图显示320的全景视图可以包括诸如建筑物324的地标,该地标可以定位用户以确保她正确地沿着路线。例如,由第二路线覆盖图326所显示的第二机动可以引导用户在特定位置进行右转。为了确保她在适当的位置进行右转,用户可以认识到右转应该正好在到达建筑物324之前发生。在进行转弯之前,用户可以核实她靠近看起来像全景视图中所描绘的建筑物324的建筑物。
在一些实施例中,地图数据和全景数据可以由服务器设备60生成/改变,并且便携式设备10可以基于所接收的地图和全景数据来渲染组合式全景/地图显示300。例如,便携式设备10的绘图应用22中的组合式显示24可以渲染组合式全景/地图显示300。在其他实施例中,服务器设备60可以渲染组合式全景/地图显示300,并且向便携式设备10提供组合式全景/地图显示300以显示在用户界面32上。虽然组合式全景/地图显示300被组合使得地图表示250被显示在全景视图200上方,但是地图表示250和全景视图可以被组合使得它们并排地被显示,使得地图表示250被显示在全景视图200下方,或以任何适当的方式被显示。
图3C示出组合式全景/地图显示340的又一示例。在该示例性显示340中,用户请求从火车站(英巴卡迪诺站)到旧金山谷歌办公室的导航方向。结果,全景视图350和地图表示355可以基于离开火车站时用户最可能的朝向而不是用户的当前朝向被定位。例如,火车站出口可以面向东。在其他场景中,例如,如果便携式设备10确定用户的当前位置是英巴卡迪诺站,则全景视图350和地图表示355可以基于用户的当前朝向被定位。在任何情况下,由全景视图350中的第一路线覆盖图342所显示的第一机动可以引导用户略微地向左转弯,并且沿着全景视图350中所显示的街道行进。由地图表示355中的第二路线覆盖图344所显示的第二机动可以引导用户在沿着对应于第一路线覆盖图342的街道行进一定距离之后进行右转。
另外,虽然分别显示图3A和3B中的地图表示250、330,使得远离起始位置的位置和POI在地图表示250、330上更高,但这与用户在现实世界中看到的不完全相似。从用户的视角来看,远处的位置和POI出现在远处,而不是高于用户的视线。为了向用户提供组合式全景/地图显示340的地图表示355部分的深度感知,地图表示355可以被倾斜,使得例如谷歌旧金山348看起来比霍华德街346更远。为了倾斜地图表示355,组合式全景/地图视图生成器68可以改变虚拟相机的视锥体内的地图表示355的间距。在一些实施例中,可以使用变换矩阵来倾斜地图表示。以这种方式,用户可以感知全景视图中的深度和地图表示中的附加深度。
在一些场景中,用户可以请求与用户的当前朝向或组合式全景/地图显示的被选择的朝向相反的地图数据或导航方向。例如,如果地图数据或导航方向与组合式全景/地图显示的朝向相差超过预定的阈值量(例如,顺时针或逆时针至少90度),则地图数据和导航方向从组合式全景/地图显示的视角将是不可视的。在这种场景中,组合式全景/地图视图生成器68可以辨别大于或等于90度的朝向差异,并且可以生成引导用户转向适当的方向的指示符。然后,该指示符被显示在组合式全景/地图显示上。
图3D示出当用户请求与用户的当前朝向相反的导航方向时被生成的组合式全景/地图显示360。例如,当用户请求要求用户朝北行进的目的地的导航方向时,用户可以正面向南。在另一示例中,当用户请求包括用户的当前位置以北的POI的周围地理区域的地图数据时,用户可以正面向南。结果,组合式全景/地图显示360可以包括引导用户转向并且面向北的指示符362。指示符362可以是箭头,并且当引导用户转向时可以面向下。此外,当引导用户左转或右转时,指示符362可以面向左或面向右。另外,指示符362可以具有任何合适的朝向。例如,如果导航方向要求用户朝东北行进,则指示符362可以面向下并且向左;如果导航方向要求用户朝西北行进,则指示符362可以面向下并且向右,等等。
组合式全景/地图显示360也不包括地图表示,因为对于用户的当前朝向,被请求的地图数据和导航方向在显示360内不能被看见。在一些实施例中,组合式全景/地图显示360也可以不包括全景视图,直到朝向改变,使得被请求的地图数据和导航方向可以在显示内被看见。在其他实施例中,组合式全景/地图显示360可以包括用于对应于当前朝向的地理区域的全景视图和地图表示,以及引导用户转向适当的方向以在显示上查看被请求的地图数据或导航方向的指示符。
虽然指示符362在组合式全景/地图显示360中被显示为箭头,但这仅仅是一个示例性实施例,并且指示符362可以由闪烁的箭头、文本、指向手指、或以任何其他合适的方式来表示。此外,虽然指示器362被图示为指向下,但是在其他实施例中,指示符362可以指向用户以引导他转向。
图3E示出可以基于来自用户的输入被调整的又一组合式全景/地图显示380。组合式全景/地图显示380类似于如图3A中所示的组合式全景/地图显示320,并且包括类似的全景视图和地图表示。为了调整全景视图或地图表示的缩放级别,用户可以在便携式设备10的触摸屏上进行一个或多个基于手势的动作。例如,用户可以向内捏她的手指来缩小并且向外拉她的手指来放大。用户还可以轻击或双击来调整缩放级别或点击鼠标。缩放级别对应于地图缩放级别,其中例如级别2的低级别可以包括北美,并且缩放级别18可以仅显示城市的几个街区或更少。
然而,当缩放级别调整以远离路线的位置为中心时,组合式全景/地图显示380不允许用户调整缩放级别。这是为了确保组合式全景/地图显示380不会平移远离路线,使得用户不会在全景视图或地图表示中迷失方向。例如,用户可以在地图表示的右上角进行捏合手势,指示组合式全景/地图显示380放大地图表示的右上角。组合式全景/地图显示380放大在全景视图和地图表示之间的交集的位置,而不是放大并且平移地图表示到被显示在右上角的地理区域。
例如,组合式全景/地图显示380可以放大位置204,确保组合式全景/地图显示380不会移动离开被请求的路线上的位置。在另一示例中,在交集的位置可以被辨别,其中全景视图上所覆盖的路线的部分与地图表示上所覆盖的路线的部分相遇。该位置可以对应于映射到地理坐标Y的像素坐标X。当用户调整缩放级别时,组合式全景/地图显示380可以被配置为使得地理坐标Y不能移动离开显示上的像素坐标X。因此,每个缩放级别调整可以以对应于像素坐标X的位置为中心。
如图3E中所示,用户在组合式全景/地图显示380的右上角展开她的手指(捏开手势)382来放大。结果,组合式全景/地图显示380放大地图表示。然而,路线保持在组合式全景/地图显示380的中心,并且不会像在显示380被缩放并且被平移到用户的手指的位置的情况中那样被移动到左边。在一些实施例中,当接收指示在组合式全景/地图显示380上的对应于全景视图的位置的缩放的用户输入时,组合式全景/地图显示380调整全景视图的缩放级别。在其他实施例中,当接收指示显示380上的任何地方的缩放的用户输入时,组合式全景/地图显示380同时调整全景视图和地图表示的缩放级别。
此外,在一些实施例中,组合式全景/地图显示380可以包括附加的用户控件。例如,用户可以选择选项,例如通过在组合式全景/地图显示380上轻击或点击来隐藏全景视图或地图表示。当全景视图被隐藏时,用户可以通过如上所述的轻击、捏合、点击等来缩放并且平移到地图表示上的各个位置。
图4示出用于显示组合式全景/地图显示的示例方法400的流程图。该方法可以以一组指令被实现,该一组指令被存储在计算机可读存储器中并且在便携式设备10的一个或多个处理器上可执行。例如,该方法可以通过绘图应用22来实现,并且更具体地,可以通过组合式显示24来实现。
在框402,便携式设备10可以获得地理区域的地图数据的请求。例如,用户可以请求查看诸如最近的麦当劳餐厅的POI,其可以被解释为查看包括用户的当前位置和最近的麦当劳的地理区域的地图数据的请求。在另一示例中,用户可以打开绘图应用22,并且请求查看她的当前环境(例如,包括用户的当前位置周围三公里半径的地理区域)。在任何情况下,便携式设备10可以向服务器设备60传送请求。
因此,服务器设备60中的组合式全景/地图视图生成器68可以获得被请求的地理区域的第一部分的全景视图。例如,可以从数据库80获得全景视图,该全景视图显示可以以麦当劳的方向10米内的从用户的当前位置的视角被查看的对象。在其他实施例中,全景视图可以延伸50米、100米等。另外在一些实施例中,全景视图可以根据便携式设备的当前朝向被定位。例如,如果便携式设备10面向南,则全景视图可以显示用户的当前位置以南的对象。
然后,组合式全景/地图视图生成器68可以辨别表示全景视图的天空的部分,并且过滤掉该部分。在一些实施例中,然后,全景视图可以被传送到便携式设备10并且被显示在用户界面32上(框404)。例如,服务器设备60可以向便携式设备10传送被渲染的全景视图以用于显示。在其他实施例中,服务器设备60可以向便携式设备10传送全景数据,并且组合式显示24可以基于全景数据来渲染全景视图。在任何情况下,全景视图可以被显示在用户界面32的底部,使得全景视图中的对象看起来靠近用户。
组合式全景/地图视图生成器68还可以生成被请求的地理区域的第二部分的地图表示。第一和第二部分可以不重叠并且是邻接的。例如,如果全景视图面向南,并且全景视图的南部边界位于用户的当前位置以南10米,则地图表示的北部边界也位于用户的当前位置以南10米。第二部分可以包括未被包括在第一部分中的地理区域的剩余部分,该第一部分包括地理区域中离用户的当前位置10米以南的所有内容。地图表示可以基于从地图数据服务器50所检索的地图数据被生成。另外,类似于全景视图,地图表示可以根据用户的当前朝向被定位。例如,如果地图数据服务器50传送被定位的地图数据,以使得地图表示面向北(例如,地图表示的顶部是最北点),则组合式全景/地图视图生成器68可以将地图表示和对应的标签或其他地图特征旋转180度,使得地图表示面向南(例如,地图表示的顶部是最南点)。然后,服务器设备60可以向便携式设备10传送地图表示或对应于地图表示的地图数据,以用于在用户界面32上显示。
为了在用户界面32上将全景视图和地图表示显示在组合式全景/地图显示中,组合式显示24将地图表示放置在全景视图中天空曾经位于的空白空间中。在一些实施例中,组合式显示24辨别全景视图中由空白空间所留下的几何形状,并且将其与地图表示的形状进行比较。不适合在由空白空间所留下的几何图形内的地图表示的部分可以被移除。然后,组合式显示24可以在用户界面32上显示全景视图和地图表示(框406),使得全景视图和地图表示在全景视图和地图表示之间通常共享的边界处相交。在上述示例中,全景视图的南部边界是地图表示的北部边界。在该示例中,全景视图和地图表示之间的交集出现在该通常共享的边界。
图5示出用于生成组合式全景/地图显示的方法500的流程图。该方法可以以一组指令被实现,该组指令被存储在计算机可读存储器中并且在服务器设备60的一个或多个处理器上可执行。例如,该方法可以通过组合式全景/地图视图生成器68来实现。
在框502,服务器设备60可以接收地理区域的地图数据的请求。例如,地理区域可以包括用户的当前位置和诸如最近的麦当劳的POI。在另一示例中,地理区域可以包括用户的当前位置周围500米半径。在一些实施例中,请求还可以包括用户的当前朝向的指示或被选择的朝向的指示,用于生成组合式全景/地图显示。
然后,组合式全景/地图视图生成器68可以获得和/或生成被请求的地理区域的第一部分的全景视图(框504)。例如,可以从数据库80获得全景视图,该全景视图显示可以以麦当劳的方向10米内的从用户的当前位置的视角被查看的对象。在其他实施例中,全景视图可以延伸50米、100米等。另外在一些实施例中,全景视图可以根据所接收的朝向被定位。例如,如果便携式设备10面向南,则全景视图可以显示用户的当前位置以南的对象。
一旦全景视图被获得,则表示全景视图的天空的部分可以被移除。例如,组合式全景/地图视图生成器68可以从全景视图的顶部检索可能表示天空的像素,并且将所检索的像素的属性与全景视图上的每个像素的属性进行比较。在一些实施例中,可以用先前图像中表示天空的样本像素来进行比较。如果样本像素的属性与全景视图中的像素的属性相差小于预定的阈值,则全景视图中的像素可以被辨别为天空的表示,并且可以被过滤掉。在一些实施例中,如果全景中的像素直接在没有被辨别为天空的表示的像素的下方,则它们不会被移除。
在框506,组合式全景/地图视图生成器68可以生成被请求的地理区域的第二部分的地图表示。第一和第二部分可以不重叠并且是邻接的。例如,如果全景视图面向南,并且全景视图的南部边界位于用户的当前位置以南10米,则地图表示的北部边界也位于用户的当前位置以南10米。第二部分可以包括未被包括在第一部分中的地理区域的剩余部分,该第一部分包括地理区域中离用户的当前位置10米以南的所有内容。地图表示可以基于从地图数据服务器50所检索的地图数据被生成。另外,类似于全景视图,地图表示可以根据用户的当前朝向被定位。例如,如果地图数据服务器50传送被定位的地图数据,以使得地图表示面向北(例如,地图表示的顶部是最北点),则组合式全景/地图视图生成器68可以将地图表示和对应的标签或其他地图特征旋转180度,使得地图表示面向南(例如,地图表示的顶部是最南点)。在一些实施例中,为了向用户提供地图表示的深度感知,地图表示可以被倾斜。为了倾斜地图表示,组合式全景/地图视图生成器68可以改变虚拟相机的视锥体内的地图表示的间距。例如,可以使用变换矩阵来倾斜地图表示。
此外,全景视图和地图表示可以一起被布置为组合体来形成组合式全景/地图显示。全景视图和地图表示可以被布置为使得它们在共同的地理边界相交。例如,沿全景视图的地平线的点(像素)可以对应于地理坐标Z。在一些实施例中,沿全景视图的地平线的点可以是路线覆盖图在全景视图上汇聚的点。地图表示中也对应于地理坐标Z的位置可以被放置在全景视图和地图表示之间的交集,在组合式全景/地图显示中与沿全景视图的地平线的点相邻。在一些实施例中,当定位地图表示时,地图表示可以围绕沿对应于地理坐标Z的地平线的点被旋转。
另外,组合式全景/地图视图生成器68辨别由全景视图中的空白空间所留下的几何形状,并且将其与地图表示的形状进行比较。例如,组合式全景/地图视图生成器68可以生成对应于空白空间的像素坐标的阵列。地图表示中的匹配像素可以被分配到阵列中的像素坐标的底部行。然后,组合式全景/地图视图生成器68可以确定地图表示中的哪些剩余像素与像素阵列中的像素坐标的集合不匹配。因此,不适合在由空白空间所留下的几何图形之内的地图表示的部分可以被移除。在一些实施例中,组合式全景/地图显示可以比全景视图更大。例如,组合式全景/地图视图生成器68可以调整全景视图的缩放级别,使得全景视图仅占据组合式全景/地图显示的部分。更具体地,全景视图可以被放置在组合式全景/地图显示的底部四分之一。先前用于表示天空的空白空间可以被直接地放置在全景视图上方,并且可以占据组合式全景/地图显示的另一四分之一。结果,地图表示不仅可以替换表示全景视图的天空的部分,而且还可以占据组合式全景/地图显示的剩余部分。以这种方式,地图表示可以显示更大的地理区域或以更高的细节级别被显示。在任何情况下,在框508,组合式全景/地图视图生成器68可以向便携式设备10传送组合式全景/地图显示。
图6示出用于在组合式全景/地图显示上覆盖导航方向的方法600的流程图。该方法可以以一组指令被实现,该组指令被存储在计算机可读存储器中并且在服务器设备60的一个或多个处理器上可执行。例如,该方法可以通过组合式全景/地图视图生成器68来实现。
在框602,组合式全景/地图视图生成器68可以生成从起始位置(例如,用户的当前位置)到目的地的导航方向的集合。例如,可以从导航数据服务器34检索导航方向的集合。
导航方向的集合可以包括多个机动,诸如“沿着主街朝南行进”、“右转进入滨湖大道”、“并入54号公路”等。对于导航方向的集合中的每个机动,组合式全景/地图视图生成器68确定机动是对应于全景视图中所显示的位置(框604)、地图表示中所显示的位置(框606)、还是两者的组合。当整个机动发生在由全景视图所显示的地理区域内时,机动可以对应于全景视图中所显示的位置。例如,如果机动是“沿着托马斯街向南行进3英里”,并且全景视图显示沿着托马斯街的整个3英里,则该机动对应于全景视图中所显示的位置。另一方面,如果全景视图显示沿着托马斯街的1英里,并且地图表示显示额外的2英里,则该机动对应于全景视图和地图表示。
在任何情况下,当机动对应于全景视图中所显示的位置时,组合式全景/地图视图生成器68生成被覆盖在全景视图中所描绘的对应街道上的第一路线指示(框608)。例如,该指示可以是被放置在全景视图中的用户被引导沿其行进的街道部分上的路线覆盖图。
类似地,当机动对应于地图表示中所显示的位置时,组合式全景/地图视图生成器68生成被覆盖在地图表示中所描绘的对应街道上的第二路线指示(框610)。当机动对应于全景视图和地图表示两者中所显示的位置时,机动可以被划分成对应于全景视图中所显示的位置的部分(例如,沿着托马斯街向南的第1英里)和对应于地图表示中所显示的位置的部分(例如,沿着托马斯街向南的额外2英里)。组合式全景/地图视图生成器68生成对应于全景视图的机动部分的第一路线指示以及对应于地图表示的机动部分的第二路线指示,该第一路线指示被覆盖在全景视图中所描绘的对应街道上,该第二路线指示被覆盖在地图表示中所描绘的对应街道上。组合式全景/地图视图生成器68可以向便携式设备10传送被覆盖的路线以用于显示。
其他注意事项
以下其他注意事项适用于上述讨论。在整个该说明书中,多个实例可以实现被描述为单个实例的组件、操作或结构。尽管一个或多个方法的单个的操作被图示和被描述为单独的操作,但是单个的操作的一个或多个可以被同时进行,并且不要求操作以被图示的顺序进行。在示例配置中被呈现为单独的组件的结构和功能可以被实现为组合式结构或组件。类似地,被呈现为单个组件的结构和功能可以被实现为单独的组件。这些和其他变型、修改、添加、和改进落入本公开的主题的范围内。
此外,此处将某些实施例描述为包括逻辑或多个组件、模块、或机构。模块可以构成软件模块(例如,被存储在机器可读介质上的代码)或硬件模块。硬件模块是能够进行某些操作并且可以以某种方式被配置或被布置的有形单元。在示例实施例中,一个或多个计算机***(例如,独立计算机***、客户端计算机***或服务器计算机***)或计算机***的一个或多个硬件模块(例如,处理器或处理器组)可以由软件(例如,应用或应用部分)被配置为操作以进行此处所描述的某些操作的硬件模块。
在各种实施例中,硬件模块可以机械地或电子地被实现。例如,硬件模块可以包括被永久地配置为进行某些操作的专用的电路或逻辑(例如,作为诸如现场可编程门阵列(FPGA)或专用集成电路(ASIC)的专用处理器)。硬件模块还可以包括由软件临时地配置为进行某些操作的可编程的逻辑或电路(例如,作为被包含在通用处理器或其他可编程的处理器内)。应该理解的是,在专用的和被永久地配置的电路中,或者在被临时地配置的电路中(例如由软件来配置),机械地实现硬件模块的决定可以由成本和时间因素来驱动。
因此,术语硬件应该被理解为包含有形实体,即被物理地构造、被永久地配置(例如,硬连线的)、或被临时地配置(例如,编程的)来以某种方式操作或来进行此处所描述的某些操作的实体。如此处所使用的,“硬件实现的模块”指的是硬件模块。考虑到其中硬件模块被临时地配置(例如,编程的)的实施例,每个硬件模块都不需要在任何一个时刻被配置或实例化。例如,在硬件模块包括使用软件所配置的通用处理器的情况下,通用处理器可以在不同的时间被配置为各自不同的硬件模块。例如,软件可以相应地配置处理器,以在某一时刻构成特定的硬件模块,并且以在不同的时刻构成不同的硬件模块。
硬件模块可以向其他硬件提供信息,并且从其他硬件接收信息。因此,所描述的硬件模块可以被视为被通信地耦接。在多个这样的硬件模块同时存在的情况下,可以通过连接硬件模块的信号传送(例如,通过适当的电路和总线)来实现通信。在其中多个硬件模块在不同时间被配置或实例化的实施例中,例如,可以通过在多个硬件模块可访问的存储器结构中存储和检索信息来实现这些硬件模块之间的通信。例如,一硬件模块可以进行操作,并且将该操作的输出存储在其被通信地耦接的存储器设备中。然后,另一硬件模块可以在稍后访问存储器设备来检索和处理被存储的输出。硬件模块也可以启动与输入设备或输出设备的通信,并且可以对源(例如,信息集)进行操作。
方法400、500、和600可以包括被存储在非临时性计算机可读存储介质中并且使用计算设备(例如,如此处所述的服务器、个人计算机、智能电话、平板电脑、智能手表、移动计算设备、或其他个人计算设备)的处理器来执行的有形计算机可执行指令形式的一个或多个功能块、模块、单个功能或例程。方法400、500、和600可以作为任何后端服务器(例如,如此处所述的地图数据服务器、导航服务器、或任何其他类型的服务器计算设备)的部分被包括,例如示例环境的便携式设备模块,或作为这种环境外部的模块的部分被包括。尽管为了便于解释可以参考其他附图来描述附图,但是方法400、500、和600可以与其他对象和用户界面一起被利用。此外,尽管上述解释描述由特定设备(诸如便携式设备10、和服务器设备60)进行的方法400、500、和600的步骤,但是这仅为了说明的目的。方法400、500、和600的框可以由一个或多个设备或环境的其他部分来进行。
此处所描述的示例方法的各种操作可以至少部分地由被暂时地配置(例如,通过软件)或被永久地配置为进行相关操作的一个或多个处理器来进行。无论是被临时地配置还是被永久地配置,这样的处理器都可以构成操作以进行一个或多个操作或功能的处理器实现的模块。在一些示例实施例中,此处所指的模块可以包括处理器实现的模块。
类似地,此处所描述的方法或例程可以至少部分地是处理器实现的。例如,方法的至少一些操作可以由一个或多个处理器或处理器实现的硬件模块来进行。某些操作的进行可以被分布在一个或多个处理器中,不仅驻留在单个机器内,而且还被部署在多个机器。在一些示例实施例中,一个或多个处理器可以位于单个位置(例如,在家庭环境内、办公室环境内或作为服务器场),而在其他实施例中,处理器可以被分布在多个位置。
一个或多个处理器还可以操作以支持在“云计算”环境中进行相关操作或作为SaaS。例如,如上所述,至少一些操作可以由计算机组(作为包括处理器的机器的示例)来进行,这些操作可以经由网络(例如,因特网)并且经由一个或多个适当的接口(例如,API)而可访问。
更进一步,仅为了说明的目的,附图描绘示例环境的一些实施例。本领域技术人员从以下讨论将容易地认识到,在不脱离此处所描述的原理的情况下,此处所说明的结构和方法的替代实施例可以被采用。
在阅读本公开时,本领域技术人员将理解到通过此处所公开的原理在地图显示内定位用户的另外的替代结构和功能设计。因此,虽然已经说明和描述了特定实施例和应用,但应该理解的是,所公开的实施例不限于此处所公开的精确构造和组件。在不脱离所附权利要求所限定的精神和范围的情况下,可以对此处所公开的方法和装置的布置、操作和细节做出对本领域技术人员显而易见的各种修改、改变和变型。

Claims (20)

1.一种用于显示地图数据的便携式设备中的方法,其特征在于,所述方法包括:
由便携式设备中的一个或多个处理器获得地理区域的地图数据的请求;
由所述一个或多个处理器显示用于所述地理区域的第一部分的地理定位图像的全景视图;以及
由所述一个或多个处理器同时显示用于所述地理区域的第二部分的非全景地图表示,包括在所述地理区域的所述第一部分和所述地理区域的所述第二部分之间所共享的共同地理边界,显示所述全景视图和所述非全景地图表示之间的交集。
2.根据权利要求1所述的方法,其特征在于,还包括:
由所述一个或多个处理器确定所述便携式设备的当前位置和朝向,其中所述地理区域的所述第一部分包括所述当前位置,并且所述全景视图根据所述便携式设备的所述朝向被定位。
3.根据权利要求2所述的方法,其特征在于,其中所述全景视图被显示在所述便携式设备的用户界面的下部,并且所述非全景地图表示被显示在所述全景视图上方,在所述用户界面的上部,以生成深度的外观。
4.根据权利要求3所述的方法,其特征在于,还包括:
由所述一个或多个处理器获得到由用户所选择的目的地的导航方向的请求;
由所述一个或多个处理器获得从所述便携式设备的所述当前位置到所述目的地的导航方向的集合;
基于对应于所述地理区域的所述第一部分内的一个或多个位置的来自所述导航方向的集合的一个或多个第一机动,由所述一个或多个处理器显示覆盖所述全景视图的第一路线指示;以及
基于对应于所述地理区域的所述第二部分内的一个或多个位置的来自所述导航方向的集合的一个或多个第二机动,由所述一个或多个处理器显示覆盖所述非全景地图表示的第二路线指示。
5.根据权利要求4所述的方法,其特征在于,还包括:
由所述一个或多个处理器,将所述便携式设备的所述朝向与所述导航方向的集合中的第一机动的朝向进行比较;以及
当所述便携式设备的所述朝向与所述第一机动的所述朝向相差超过预定的阈值量时,由所述一个或多个处理器在所述用户界面上显示所述用户转弯的方向的指示。
6.根据权利要求2所述的方法,其特征在于,其中根据所述便携式设备的所述朝向与所述非全景地图表示的朝向之间的差异,旋转所述非全景地图表示。
7.根据权利要求2所述的方法,其特征在于,其中所述便携式设备的所述当前位置和所述朝向是在第一时间点的第一当前位置和第一朝向,所述方法还包括:
由所述一个或多个处理器确定所述便携式设备在第二时间点的第二位置或第二朝向;以及
基于所述便携式设备的所述第二位置或所述第二朝向,由所述一个或多个处理器显示更新的全景视图和更新的非全景地图表示。
8.根据权利要求1所述的方法,其特征在于,还包括:
由所述一个或多个处理器获得被施加在所述全景视图或所述非全景地图表示上的位置的来自用户的手势,所述位置不对应于所述地理区域的中心位置;
在不将所述全景视图平移离开所述地理区域的情况下,根据所述手势,由所述一个或多个处理器缩放所述全景视图或所述非全景地图表示。
9.一种便携式设备,其特征在于,包括:
用户界面;
一个或多个处理器,被耦接到所述用户界面;以及
非暂时性计算机可读存储器,被耦接到所述一个或多个处理器,并且在其上存储指令,当所述指令由所述一个或多个处理器执行时,使得所述便携式设备:
获得地理区域的地图数据的请求;
在所述用户界面上显示用于所述地理区域的第一部分的地理定位图像的全景视图;
在所述用户界面上同时显示用于所述地理区域的第二部分的非全景地图表示;以及
在所述地理区域的所述第一部分和所述地理区域的所述第二部分之间所共享的共同地理边界,显示所述全景视图和所述非全景地图表示之间的交集。
10.根据权利要求9所述的便携式设备,其特征在于,其中所述指令还使得所述便携式设备:
确定所述便携式设备的当前位置和朝向,其中所述地理区域的所述第一部分包括所述当前位置,并且所述全景视图根据所述便携式设备的所述朝向被定位。
11.根据权利要求10所述的便携式设备,其特征在于,其中所述全景视图被显示在所述便携式设备的所述用户界面的下部,并且所述非全景地图表示被显示在所述全景视图上方,在所述用户界面的上部,以生成深度的外观。
12.根据权利要求11所述的便携式设备,其特征在于,其中所述指令还使得所述便携式设备:
获得到由用户所选择的目的地的导航方向的请求;
获得从所述便携式设备的所述当前位置到所述目的地的导航方向的集合;
基于对应于所述地理区域的所述第一部分内的一个或多个位置的来自所述导航方向的集合的一个或多个第一机动,在所述用户界面上显示覆盖所述全景视图的第一路线指示;以及
基于对应于所述地理区域的所述第二部分内的一个或多个位置的来自所述导航方向的集合的一个或多个第二机动,在所述用户界面上显示覆盖所述非全景地图表示的第二路线指示。
13.根据权利要求12所述的便携式设备,其特征在于,其中根据所述便携式设备的所述朝向与所述非全景地图表示的朝向之间的差异,旋转所述非全景地图表示。
14.根据权利要求12所述的便携式设备,其特征在于,其中所述指令还使得所述便携式设备:
将所述便携式设备的所述朝向与所述导航方向的集合中的第一机动的朝向进行比较;以及
当所述便携式设备的所述朝向与所述第一机动的所述朝向相差超过预定的阈值量时,在所述用户界面上显示所述用户转弯的方向的指示。
15.根据权利要求10所述的便携式设备,其特征在于,其中所述便携式设备的所述当前位置和所述朝向是在第一时间点的第一当前位置和第一朝向,所述指令还使得所述便携式设备:
确定所述便携式设备在第二时间点的第二位置或第二朝向;以及
基于所述便携式设备的所述第二位置或所述第二朝向,在所述用户界面上显示更新的全景视图和更新的非全景地图表示。
16.根据权利要求9所述的便携式设备,其特征在于,其中所述指令还使得所述便携式设备:
获得被施加在所述全景视图或所述非全景地图表示上的位置的来自用户的手势,所述位置不对应于所述地理区域的中心位置;以及
在不将所述全景视图平移离开所述地理区域的情况下,根据所述手势,缩放所述全景视图或所述非全景地图表示。
17.一种用于显示地图数据的服务器设备中的方法,其特征在于,所述方法包括:
在服务器设备中的一个或多个处理器接收地理区域的地图数据的请求;
由所述一个或多个处理器生成用于所述地理区域的第一部分的地理定位图像的全景视图;
由所述一个或多个处理器生成用于所述地理区域的第二部分的非全景地图表示,包括在所述地理区域的所述第一部分和所述地理区域的所述第二部分之间所共享的共同地理边界,生成所述全景视图和所述非全景地图表示之间的交集;以及
由所述一个或多个处理器使得所述全景视图、所述非全景地图表示、以及所述全景视图与所述非全景地图表示之间的所述交集被显示在便携式设备上。
18.根据权利要求17所述的方法,其特征在于,还包括:
在所述一个或多个处理器,接收所述便携式设备的当前位置和朝向,其中所述地理区域的所述第一部分包括所述当前位置,并且所述全景视图根据所述便携式设备的所述朝向被定位;
在所述一个或多个处理器,接收从所述便携式设备的所述当前位置到目的地的导航方向的请求;
由所述一个或多个处理器生成从所述当前位置到所述目的地的导航方向的集合;
基于对应于所述地理区域的所述第一部分内的一个或多个位置的来自所述导航方向的集合的一个或多个第一机动,由所述一个或多个处理器生成第一路线指示;
基于对应于所述地理区域的所述第二部分内的一个或多个位置的来自所述导航方向的集合的一个或多个第二机动,由所述一个或多个处理器生成第二路线指示;以及
由所述一个或多个处理器使得所述第一路线指示被显示在所述便携式设备上,覆盖所述全景视图,并且使得所述第二路线指示被显示在所述便携式设备上,覆盖所述非全景地图表示。
19.根据权利要求18所述的方法,其特征在于,其中生成用于所述地理区域的所述第二部分的所述非全景地图表示包括:
根据所述便携式设备的所述朝向与所述非全景地图表示的朝向之间的差异,由所述一个或多个处理器旋转所述非全景地图表示。
20.根据权利要求17所述的方法,其特征在于,还包括:
由所述一个或多个处理器过滤掉表示所述全景视图的天空的部分;以及
由所述一个或多个处理器用所述非全景地图表示来替换所述全景视图的被过滤掉的部分。
CN201780004604.5A 2016-01-14 2017-01-04 用于在地图显示中定位用户的***和方法 Active CN108474666B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/995,385 US9766712B2 (en) 2016-01-14 2016-01-14 Systems and methods for orienting a user in a map display
US14/995,385 2016-01-14
PCT/US2017/012118 WO2017123439A1 (en) 2016-01-14 2017-01-04 Systems and methods for orienting a user in a map display

Publications (2)

Publication Number Publication Date
CN108474666A true CN108474666A (zh) 2018-08-31
CN108474666B CN108474666B (zh) 2022-08-09

Family

ID=57868378

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780004604.5A Active CN108474666B (zh) 2016-01-14 2017-01-04 用于在地图显示中定位用户的***和方法

Country Status (4)

Country Link
US (1) US9766712B2 (zh)
EP (1) EP3359918B1 (zh)
CN (1) CN108474666B (zh)
WO (1) WO2017123439A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109582200A (zh) * 2018-11-28 2019-04-05 维沃移动通信有限公司 一种导航信息显示方法及移动终端
CN109781091A (zh) * 2018-12-28 2019-05-21 努比亚技术有限公司 一种移动终端的地图显示方法、移动终端及存储介质
CN109887078A (zh) * 2019-03-12 2019-06-14 百度在线网络技术(北京)有限公司 天空绘制方法、装置、设备和介质
CN113961065A (zh) * 2021-09-18 2022-01-21 北京城市网邻信息技术有限公司 导航页面的显示方法、装置、电子设备及存储介质

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB201303540D0 (en) * 2013-02-27 2013-04-10 Arithmetica Ltd Image processing
US9396697B2 (en) * 2013-06-01 2016-07-19 Apple Inc. Intelligently placing labels
US20170277738A1 (en) * 2015-01-29 2017-09-28 Palantir Technologies Inc. Temporal representation of structured information in an object model
US10593074B1 (en) * 2016-03-16 2020-03-17 Liberty Mutual Insurance Company Interactive user interface for displaying geographic boundaries
JP2017207652A (ja) * 2016-05-19 2017-11-24 アイシン・エィ・ダブリュ株式会社 地図表示システムおよび地図表示プログラム
KR102576654B1 (ko) * 2016-10-18 2023-09-11 삼성전자주식회사 전자 장치 및 그의 제어 방법
US11118930B2 (en) * 2017-07-14 2021-09-14 Lyft, Inc. Providing information to users of a transportation system using augmented reality elements
JP6866820B2 (ja) * 2017-10-12 2021-04-28 トヨタ自動車株式会社 サーバ装置、経路情報のマスキング処理方法およびそのプログラム
JP6888510B2 (ja) * 2017-10-12 2021-06-16 トヨタ自動車株式会社 サーバ装置、経路情報のマスキング処理方法およびそのプログラム
DE102018000459A1 (de) 2018-01-22 2019-07-25 Joachim Becker Verfahren und Vorrichtung zur Anzeige von nutzereigenen Vektorgraphiken mit intelligenten Infopunkten aus einem cloudbasierten CAD-Archiv auf Mobilgeräten, tragbaren oder stationären Computern
US20210102820A1 (en) * 2018-02-23 2021-04-08 Google Llc Transitioning between map view and augmented reality view
JP7073917B2 (ja) * 2018-04-18 2022-05-24 株式会社リコー 情報処理装置およびプログラム
US11049072B1 (en) * 2019-04-26 2021-06-29 State Farm Mutual Automobile Insurance Company Asynchronous virtual collaboration environments
KR20210129974A (ko) * 2020-04-21 2021-10-29 현대자동차주식회사 차량의 표시 장치 및 그 방법
KR20210129975A (ko) * 2020-04-21 2021-10-29 현대자동차주식회사 차량의 표시 장치 및 그 방법
KR20210129976A (ko) 2020-04-21 2021-10-29 현대자동차주식회사 차량의 표시 장치 및 그 방법
US20240028283A1 (en) * 2022-07-20 2024-01-25 Twinit Limited Systems and Methods for Combining and Synchronizing Display Content of Disparate Display Content Generators

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101506764A (zh) * 2006-08-25 2009-08-12 微软公司 全景环形用户界面
CN102216959A (zh) * 2008-11-19 2011-10-12 苹果公司 用于操纵全景的技术
CN102538799A (zh) * 2010-12-06 2012-07-04 罗伯特·博世有限公司 用于显示部分周围环境的方法和设备
EP2541201A2 (en) * 2011-06-30 2013-01-02 Navteq North America, LLC Map View
US20130069941A1 (en) * 2010-05-17 2013-03-21 Jérôme Augui Navigational aid having improved processing of display data
US8868338B1 (en) * 2008-11-13 2014-10-21 Google Inc. System and method for displaying transitions between map views
CN104520904A (zh) * 2012-08-10 2015-04-15 赫力环球有限公司 用于针对增强现实视图的布局的方法和设备
CN104769393A (zh) * 2012-09-05 2015-07-08 赫尔环球有限公司 用于从局部地图视图转变到增强现实视图的方法和装置
US20150371430A1 (en) * 2014-06-20 2015-12-24 Google Inc. Identifying Imagery Views Using Geolocated Text

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7610146B2 (en) * 1997-10-22 2009-10-27 Intelligent Technologies International, Inc. Vehicle position determining system and method
US7746376B2 (en) * 2004-06-16 2010-06-29 Felipe Mendoza Method and apparatus for accessing multi-dimensional mapping and information
US20080285886A1 (en) * 2005-03-29 2008-11-20 Matthew Emmerson Allen System For Displaying Images
JP4918077B2 (ja) 2008-09-22 2012-04-18 株式会社ゼンリン 地図表示装置、地図の表示方法、および、コンピュータプログラム
US8890898B2 (en) * 2009-01-28 2014-11-18 Apple Inc. Systems and methods for navigating a scene using deterministic movement of an electronic device
US20100293173A1 (en) * 2009-05-13 2010-11-18 Charles Chapin System and method of searching based on orientation
US9582166B2 (en) * 2010-05-16 2017-02-28 Nokia Technologies Oy Method and apparatus for rendering user interface for location-based service having main view portion and preview portion
EP2453208A1 (en) 2010-11-15 2012-05-16 Harman Becker Automotive Systems GmbH Navigation system
US8930141B2 (en) * 2011-12-30 2015-01-06 Nokia Corporation Apparatus, method and computer program for displaying points of interest
US9245373B2 (en) * 2012-12-04 2016-01-26 Nintendo Co., Ltd. Caching in map systems for displaying panoramic images
DE102013000879A1 (de) 2013-01-10 2014-07-24 Volkswagen Aktiengesellschaft Navigationsvorrichtung für ein bewegliches Objekt und Verfahren zur Erzeugung eines Anzeigesignals für eine Navigationsvorrichtung für ein bewegliches Objekt
US9720519B2 (en) * 2014-07-30 2017-08-01 Pramod Kumar Verma Flying user interface

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101506764A (zh) * 2006-08-25 2009-08-12 微软公司 全景环形用户界面
US8868338B1 (en) * 2008-11-13 2014-10-21 Google Inc. System and method for displaying transitions between map views
CN102216959A (zh) * 2008-11-19 2011-10-12 苹果公司 用于操纵全景的技术
US20130069941A1 (en) * 2010-05-17 2013-03-21 Jérôme Augui Navigational aid having improved processing of display data
CN102538799A (zh) * 2010-12-06 2012-07-04 罗伯特·博世有限公司 用于显示部分周围环境的方法和设备
EP2541201A2 (en) * 2011-06-30 2013-01-02 Navteq North America, LLC Map View
CN104520904A (zh) * 2012-08-10 2015-04-15 赫力环球有限公司 用于针对增强现实视图的布局的方法和设备
CN104769393A (zh) * 2012-09-05 2015-07-08 赫尔环球有限公司 用于从局部地图视图转变到增强现实视图的方法和装置
US20150371430A1 (en) * 2014-06-20 2015-12-24 Google Inc. Identifying Imagery Views Using Geolocated Text

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
霍烁烁等: "基于OpenGL的全景导游***设计", 《无线电工程》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109582200A (zh) * 2018-11-28 2019-04-05 维沃移动通信有限公司 一种导航信息显示方法及移动终端
CN109781091A (zh) * 2018-12-28 2019-05-21 努比亚技术有限公司 一种移动终端的地图显示方法、移动终端及存储介质
CN109887078A (zh) * 2019-03-12 2019-06-14 百度在线网络技术(北京)有限公司 天空绘制方法、装置、设备和介质
CN113961065A (zh) * 2021-09-18 2022-01-21 北京城市网邻信息技术有限公司 导航页面的显示方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
EP3359918A1 (en) 2018-08-15
US20170205885A1 (en) 2017-07-20
CN108474666B (zh) 2022-08-09
US9766712B2 (en) 2017-09-19
WO2017123439A1 (en) 2017-07-20
EP3359918B1 (en) 2022-12-28

Similar Documents

Publication Publication Date Title
CN108474666A (zh) 用于在地图显示中定位用户的***和方法
US10929494B2 (en) Systems and methods for tagging objects for augmented reality
US11698268B2 (en) Street-level guidance via route path
US8428873B2 (en) Panoramic images within driving directions
US7840032B2 (en) Street-side maps and paths
US8026929B2 (en) Seamlessly overlaying 2D images in 3D model
US8085990B2 (en) Hybrid maps with embedded street-side images
EP1748370A1 (en) Real-time geographic information system and method
US20130162665A1 (en) Image view in mapping
US9454848B2 (en) Image enhancement using a multi-dimensional model
US20090289937A1 (en) Multi-scale navigational visualtization
CN106650723A (zh) 用于确定相机姿态以及用于识别真实环境的对象的方法
CN109059901B (zh) 一种基于社交应用的ar导航方法、存储介质及移动终端
Cavallo et al. Riverwalk: Incorporating historical photographs in public outdoor augmented reality experiences
CN108337664A (zh) 基于地理位置的旅游景区增强现实互动导览***及方法
KR20190086032A (ko) 컨텍스트적 지도 뷰
US20110242271A1 (en) Synthesizing Panoramic Three-Dimensional Images
Kazimierski et al. Integrated presentation of navigational data in a mobile navigation system for inland waters with the use of HUD
Góralski Three-Dimensional Interactive Maps–Theory and Practice
US11726740B2 (en) Immersive audio tours
US20210207972A1 (en) Architecture recognition method and identification system
CN115393509A (zh) 一种基于增强现实的图像显示方法、显示设备及存储介质
Hodzic TRPINAV: A System for Terrain, Route, Points of Interest and Navigation
Forward et al. overarching research challenges

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant