CN112907754A - Ar导览***及ar导览方法 - Google Patents

Ar导览***及ar导览方法 Download PDF

Info

Publication number
CN112907754A
CN112907754A CN202110089295.4A CN202110089295A CN112907754A CN 112907754 A CN112907754 A CN 112907754A CN 202110089295 A CN202110089295 A CN 202110089295A CN 112907754 A CN112907754 A CN 112907754A
Authority
CN
China
Prior art keywords
display device
mobile terminal
user
content
instruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110089295.4A
Other languages
English (en)
Inventor
赵维奇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sichuan Smart Boy Technology Co ltd
Original Assignee
Sichuan Smart Boy Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sichuan Smart Boy Technology Co ltd filed Critical Sichuan Smart Boy Technology Co ltd
Priority to CN202110089295.4A priority Critical patent/CN112907754A/zh
Priority to CN202211407285.1A priority patent/CN115631323A/zh
Publication of CN112907754A publication Critical patent/CN112907754A/zh
Priority to US17/581,011 priority patent/US20220236068A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3605—Destination input or retrieval
    • G01C21/362—Destination input or retrieval received from an external device or application, e.g. PDA, mobile phone or calendar application
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3626—Details of the output of route guidance instructions
    • G01C21/3635—Guidance using 3D or perspective road maps
    • G01C21/3638—Guidance using 3D or perspective road maps including 3D objects and buildings
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3626—Details of the output of route guidance instructions
    • G01C21/365—Guidance using head up displays or projectors, e.g. virtual vehicles or arrows projected on the windscreen or on the road itself
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3667—Display of a road map
    • G01C21/367—Details, e.g. road map scale, orientation, zooming, illumination, level of detail, scrolling of road map or positioning of current position marker
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3697—Output of additional, non-guidance related information, e.g. low fuel level
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/01—Customer relationship services
    • G06Q30/015—Providing customer assistance, e.g. assisting a customer within a business location or via helpdesk
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0251—Targeted advertisements
    • G06Q30/0261—Targeted advertisements based on user location
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0251—Targeted advertisements
    • G06Q30/0265—Vehicular advertisement
    • G06Q30/0266—Vehicular advertisement based on the position of the vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Shopping interfaces
    • G06Q30/0643—Graphical representation of items or shoppers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0881—Seat occupation; Driver or passenger presence
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00—Simulators for teaching or training purposes
    • G09B9/02—Simulators for teaching or training purposes for teaching control of vehicles or other craft
    • G09B9/04—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles
    • G09B9/042—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles providing simulation in a real vehicle
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00—Simulators for teaching or training purposes
    • G09B9/02—Simulators for teaching or training purposes for teaching control of vehicles or other craft
    • G09B9/04—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles
    • G09B9/05—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles the view from a vehicle being simulated

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Development Economics (AREA)
  • Strategic Management (AREA)
  • Human Computer Interaction (AREA)
  • General Business, Economics & Management (AREA)
  • Optics & Photonics (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明涉及一种新的AR导览***和AR导览方法。根据本发明的一个方面，本发明的一个或多个实施方式公开了一种AR导览***，包括，AR显示装置，所述AR显示装置被配置用来提供近眼显示功能；移动终端，所述移动终端和所述AR显示装置通信连接；所述移动终端被配置向所述AR显示装置发送控制指令，使得所述AR显示装置显示所述控制指令所对应的AR内容。通过本发明公开的一个或多个实施例，可以通过移动终端控制AR显示装置的显示内容，从而无需通过CV等复杂算法对目标进行识别，技术实施成本低、用户体验高，可以满足一些特定的导览场景的需求。

Description

AR导览***及AR导览方法
技术领域
本发明涉及软件***领域，尤其涉及一种在通过AR显示装置进行AR导览的***和方法。
背景技术
目前传统的导览方式是通过语音讲解设备向用户介绍其相关的场景(例如博物馆、展览馆)的内容，缺乏和用户的有效交互。基于AR设备的导览***和方法也逐步普及，但是现有的基于AR设备的导览是CV算法识别目标物体后，再向用户播放一些AR内容。
在一些场景下，由于环境限制，AR设备可能无法识别目标物体，导致AR内容不能及时呈现，因此导致用户体验较差。且CV算法的识别需要对目标物体进行事先训练，导览方案的成本较高。
发明内容
本发明的目的在于提供一种新的AR导览***和AR导览方法，实现了通过移动终端控制AR显示装置显示AR内容，从而满足一些特定场景的导览需求。
根据本发明的一个方面，本发明的一个或多个实施方式公开了一种AR导览***，包括，AR显示装置，所述AR显示装置被配置用来提供近眼显示功能；移动终端，所述移动终端和所述AR显示装置通信连接；所述移动终端被配置向所述AR显示装置发送控制指令，使得所述AR显示装置显示所述控制指令所对应的AR内容。
根据本发明的另一个方面，本发明的一个或多个实施方式公开了一种AR导览方法，包括：AR显示装置被配置为与移动终端通信连接，并接收所述移动终端的控制指令；根据所述控制指令，所述AR显示装置显示与所述控制指令对应的AR内容。
通过本发明公开的一个或多个实施例，可以通过移动终端控制AR显示装置的显示内容，从而无需通过CV算法等复杂算法对目标物体进行识别，技术实施成本低、用户体验高，且满足一些特定的导览场景的需求。
附图说明
图1示出了根据本发明一个或多个实施例的AR导览***的示意图；
图2示出了根据本发明一个或多个实施例的AR导览***的移动终端的一个UI界面的示意图；
图3示出了根据本发明的一个或多个实施例的AR导览***的移动终端的一个UI界面的示意图；
图4示出了根据本发明的一个或多个实施例的AR导览方法的流程图。
具体实施方式
为更进一步阐述本发明为达成预定发明目的所采取的技术手段及功效，以下结合附图及较佳实施例，对依据本发明提出的AR导览***及AR导览方法的具体实施方式、结构、特征及其功效，详细说明如后。
根据本发明的一个方面，如图1所示，示出了根据本发明的一个或多个实施例的AR导览***的示意图，其中包括AR显示装置100和移动终端200，AR显示装置100和移动终端200通信连接。具体地，AR显示装置100能够将虚拟的信息叠加到真实世界，使佩戴者可以在看到真实世界画面的情况下，同时看到虚拟信息，实现两种信息的相互补充。在一个或多个实施例中，AR显示装置100包括AR/MR眼镜、AR/MR头环、AR/MR头盔等不同类型的头戴式设备，MR(Mixed Reality)和AR(Augmented Reality)的区别在于MR技术更加突出虚拟信息，而AR技术更加突出真实信息，两者的技术方案上并无本质区别，因此在本发明中，以AR统称包含AR、MR等现实扩增的技术。移动终端200为智能手机、平板电脑、笔记本电脑等移动终端设备，其具有人机交互界面、计算能力、存储能力和通信能力。移动终端200和AR显示装置100通过网线、USB数据线、WIFI、蓝牙等有线或无线的方式连接。在一些变换的实施例中，移动终端200可以被非移动终端替代，例如可以用位于控制中心的台式机向AR显示装置100发送控制信号。
在一个或多个实施例中，移动终端200被配置为向AR显示装置100发送控制指令，使得AR显示装置100显示所述控制指令所对应的AR内容。控制指令包括体验模式指令和推介模式指令。具体地，移动终端200的控制指令的发送可以通过移动终端200上的UI界面的方式，由移动终端200的操作者进行选择。如图2所示，示出了移动终端的一个UI界面的示意图。在其中一个实施例中，移动终端200的界面上具有体验模式和推介模式两个可交互的按钮。当操作者选择体验模式后，则移动终端200向AR显示装置100发送体验模式的指令；当操作者选择推介模式后，则移动终端200向AR显示装置100发送推介模式的指令。在图2的右上角的圆圈内可以显示不同模式的预览效果图，供操作者预览。
在一个或多个实施例中，在接收到控制指令后，AR显示装置100检测用户的FOV(Field of View)是否位于预设的初始位置，若用户的FOV位于预设的初始位置，则启动AR内容的播放，并通过IMU传感器感测用户的姿态变化，并调整所述AR内容。具体地，由于AR显示装置100是一种近眼显示器，因此用户的FOV方向也对应者AR显示装置100的显示屏幕的FOV方向，因此在进行虚实结合的场景叠加过程中，需要确保用户的FOV位于适当的位置，避免虚实结合后的虚拟的信息和真实场景不匹配的情况。例如，在以汽车为例的载人设备的销售导览场景中，需要通过AR显示装置100向用户呈现的AR内容为汽车内部的功能键说明及实际效果演示，则初始位置设定为用户FOV朝向汽车方向盘的中心，在确认用户FOV位于该初始位置，启动AR内容，从而使得AR内容和真实的汽车功能键的布局相匹配。通过设置在AR显示装置100上的IMU传感器检测用户的姿态变化(例如包含转头、低头、抬头等)，可以由此可以对正在播放的AR内容进行对应的操作，使得AR内容的显示和真实场景匹配。
当AR显示装置100接收到体验模式指令后，移动终端200后续并不介入AR显示装置100和用户的交互过程中，即进入体验模式后，AR显示装置100显示的内容和移动终端200的操作无关联，除非通过移动终端200的指令使得AR显示装置100退出体验模式。在其中一个实施例中，体验模式下的AR内容包括3D模型、视频、文本、音频等一种或多个媒体形式的组合。在一个具体的示例中，在以汽车为代表的载人器具的销售导览场景中，销售员可以通过让客户佩戴AR显示装置100，销售员则通过移动终端200发送体验模式指令，使得用户佩戴的AR显示装置100进入体验模式，在体验模式中，可以根据预先设定的内容，用户可以看到其关注的汽车产品的广告视频以及试驾体验视频，从而方便用户进一步决策是否需要进行后续的购买行为。
在另一些实施例中，AR显示装置100通过定位技术检测用户的位置，并根据用户的特定位置播放与所述特定位置对应的AR内容。在其中一个实施例中，AR导览***被应用到以汽车为代表的载人装置的销售导览时，AR显示装置100通过定位技术检测用户是否位于主驾驶位、副驾驶位或后排，并根据用户的位置播放与主驾驶位、副驾驶位或后排位置对应的AR内容。例如，当用户位于主驾驶位的时候，AR内容为主驾驶位视角视频的AR内容、主驾驶位的操作介绍等匹配主驾驶位的AR内容；当用户位于后排时，AR内容为汽车后排的操作指南、后排的驾驶体验视频以及后排的安全性能介绍等匹配后排座位的AR内容。在一个或多个实施例中，可以使用的定位技术包括CV定位、WIFI定位、蓝牙定位、NFC定位、RFID定位中的一个或多个。CV定位即通过位于AR显示装置的摄像头，通过CV算法识别用户FOV(Fieldof View)方向的场景的特征，确定用户当前的位置。WIFI定位、蓝牙定位、NFC定位、RFID定位均是室内定位的方式，可以通过设置于室内的一个或多个发射点，通过AR显示装置100上的接收点收到的信号的强度，来判断当前的位置。
在一个或多个实施例中，AR显示装置100还与载人装置通信连接，并接收用户对载人装置的操作指令，AR显示装置100根据操作指令调整AR内容。在其中一个实施例中，以汽车为例，AR显示装置可以与汽车通过蓝牙、WIFI、USB数据线等方式通信连接，此时，汽车可以接收用户的操作，并将用户的操作转换为操作指令，发送给AR显示装置100，从而控制AR内容的呈现方式。在一个示例中，若AR内容为模拟驾驶内容，AR显示装置100可以根据用户拨动方向盘的操作，而控制模拟驾驶中的汽车的转向；在另一个示例中，若AR内容为汽车功能展示，则可以根据用户对功能键的按压、旋转灯操作，而在AR内容中播放对应的功能介绍。由此，用户可以通过AR显示装置，在不需要进行真实试驾的情况下，完成车辆的使用体验，由此可以提高汽车销售的效率。
当AR显示装置100接收到推介模式指令后，推介模式指令使得所述AR显示装置100进入推介模式，且移动终端200进入推介菜单页面；根据推介菜单页面的激活项的组合，移动终端200向AR显示装置100发送显示指令，使得AR显示装置100显示所和激活项的组合对应的AR内容。具体地，如图3所示，示出了根据本发明一个或多个实施例的AR导览***的移动终端的一个UI界面的示意图。图3的场景为以汽车为代表的载人装置的销售导览，在图3中，移动终端200的操作者(即汽车销售人员)可以选择汽车的外观颜色、内饰主题、轮毂选择菜单中的选项，并使得这些菜单中的其中一项处于激活状态，在选择完毕后，可以通过点击“开始演示”按钮，将这些菜单的激活项的组合，形成一个显示指令，发送给AR显示装置100，从而使得AR显示装置100显示对应的车型，消费者即可以看到对应车型的AR内容。
在其中一些实施例中，AR内容可以存放在移动终端200或云服务器，并通过通信连接的方式随着控制指令或显示指令一起传输给AR显示装置100，但是在这种情况下，可以减少对AR显示装置的预先配置的工作，但是由于AR内容的数据量会比较大，在通信速度受限的情况下，可能会对AR内容的显示产生限制。在另一些实施例中，AR内容可以存放在AR显示装置100的本地，并通过移动终端的控制指令或显示指令进行调整，在这种情况下，需要事先在AR显示装置内存放AR内容，但是AR内容的显示不受通信连接的限制。
如图4所示，根据本发明的另一方面，示出了根据本发明的一个或多个实施例的AR导览方法的流程图，包括步骤：
S1、AR显示装置被配置为与移动终端通信连接，并接收所述移动终端的控制指令；
S2、根据所述控制指令，所述AR显示装置显示与所述控制指令对应的AR内容。
在步骤S1中，控制指令包括体验模式指令和推介模式指令。具体地，移动终端的控制指令的发送可以通过UI界面的方式，由移动终端的操作者进行。如图2所示，示出了移动终端的一个UI界面图，移动终端的界面上具有体验模式和推介模式两个可交互的按钮。当操作者选择体验模式后，则移动终端向AR显示装置发送体验模式的指令；当操作者选择推介模式后，则移动终端向AR显示装置发送推介模式的指令。在图2的右上角的圆圈内可以显示不同模式的预览效果图，供操作者观察。
在步骤S2中，在接收到控制指令后，AR显示装置检测用户的FOV(Field of View)是否位于预设的初始位置，若用户的FOV位于预设的初始位置，则启动AR内容的播放，并通过IMU传感器感测用户的姿态变化，并调整所述AR内容。具体地，由于AR显示装置是一种近眼显示器，因此用户的FOV方向也对应者AR显示装置的显示屏幕的FOV方向，因此在进行虚实结合的场景叠加过程中，需要确保用户的FOV位于适当的位置，避免虚实结合后的虚拟的信息和真实场景不匹配的情况。例如，在以汽车为例的载人设备的销售导览场景中，需要通过AR显示装置向用户呈现的AR内容为汽车内部的案件说明及实际效果演示，则初始位置设定为用户FOV朝向汽车方向盘的中心，在确认用户FOV位于该初始位置，启动AR内容，从而使得AR内容和真实的汽车操作界面相匹配。通过设置在AR显示装置上的IMU传感器检测用户的姿态变化(例如包含转头、低头、抬头等)，可以由此可以对正在播放的AR内容进行对应的操作，使得AR内容的显示和真实场景匹配。
步骤S1和S2中的进一步的实施方式和上文关于AR导览***描述的一个或多个实施例一致或类似，且实现相同或类似的技术效果，在此不再赘述。
以上所述，仅是本发明的较佳实施例而已，并非对本发明作任何形式上的限制，虽然本发明已以较佳实施例揭露如上，然而并非用以限定本发明,任何熟悉本专业的技术人员，在不脱离本发明技术方案范围内,当可利用上述揭示的技术内容作出些许更动或修饰为等同变化的等效实施例,但凡是未脱离本发明技术方案的内容，依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化与修饰，均仍属于本发明技术方案的范围内。

Claims (11)

1.一种AR导览***，包括，
AR显示装置，所述AR显示装置被配置用来提供近眼显示功能；
移动终端，所述移动终端和所述AR显示装置通信连接；
所述移动终端被配置向所述AR显示装置发送控制指令，使得所述AR显示装置显示所述控制指令所对应的AR内容。
2.根据权利要求1所述的AR导览***，所述移动终端被配置向所述AR显示装置发送控制指令，使得所述AR显示装置显示所述控制指令所对应的AR内容，进一步包括，
在接收到所述控制指令后，所述AR显示装置检测用户的FOV是否位于预设的初始位置，
若用户的FOV位于预设的初始位置，则启动AR内容的播放，并通过IMU传感器感测用户的姿态变化，并调整所述AR内容。
3.根据权利要求1所述的AR导览***，其中所述控制指令包括：体验模式指令，
其中所述体验模式指令使得所述AR显示装置进入体验模式，并播放预设于AR显示装置中的AR内容。
4.根据权利要求1所述的AR导览***，其中所述控制指令包括推介模式指令，
所述推介模式指令使得所述所述AR显示装置进入推介模式，且所述移动终端进入推介菜单页面；
根据所述推介菜单页面的激活项的组合，所述移动终端向所述AR显示装置发送显示指令，使得所述AR显示装置显示和所述激活项的组合对应的AR内容。
5.根据权利要求3所述的AR导览***，进一步包括，
在体验模式中，所述AR显示装置通过定位技术检测用户的特定位置，并根据用户的特定位置播放与所述特定位置对应的AR内容。
6.根据权利要求5所述的AR导览***，所述AR导览***被应用到载人装置的销售导览时，进一步包括，
所述AR显示装置通过定位技术检测用户是否位于主驾驶位、副驾驶位或其他位置，并根据用户的位置播放与主驾驶位、副驾驶位或其他位置对应的AR内容，
所述定位技术包括CV定位、WIFI定位、蓝牙定位、NFC定位、RFID定位中的一个或多个。
7.根据权利要求6所述的AR导览***，进一步包括，
所述AR显示装置还与所述载人装置通信连接，并接收用户对所述载人装置的操作指令，
所述AR显示装置根据所述操作指令调整所述AR内容。
8.一种AR导览方法，包括，
AR显示装置被配置为与移动终端通信连接，并接收所述移动终端的控制指令，
根据所述控制指令，所述AR显示装置显示与所述控制指令对应的AR内容。
9.根据权利要求8所述的方法，所述根据所述控制指令，所述AR显示装置显示与所述控制指令对应的AR内容，进一步包括，
在接收到所述控制指令后，所述AR显示装置检测用户的FOV是否位于预设的初始位置；
若用户的FOV位于预设的初始位置，则启动AR内容的播放，并通过IMU传感器感测用户的姿态变化，并调整所述AR内容。
10.根据权利要求8所述的方法，其中所述控制指令包括：体验模式指令，
其中所述体验模式指令使得所述AR显示装置进入体验模式，并播放预设于AR显示装置中的AR内容。
11.根据权利要求10所述的方法，其中所述控制指令包括推介模式指令，
所述推介模式指令使得所述所述AR显示装置进入推介模式，且所述移动终端进入推介菜单页面；
根据推介菜单页面的激活项的组合，所述移动终端向所述AR显示装置发送显示指令，使得所述AR显示装置显示所和所述激活项的组合对应的AR内容。
CN202110089295.4A 2021-01-22 2021-01-22 Ar导览***及ar导览方法 Pending CN112907754A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202110089295.4A CN112907754A (zh) 2021-01-22 2021-01-22 Ar导览***及ar导览方法
CN202211407285.1A CN115631323A (zh) 2021-01-22 2021-01-22 Ar导览***及ar导览方法
US17/581,011 US20220236068A1 (en) 2021-01-22 2022-01-21 Ar navigation system and ar navigation

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110089295.4A CN112907754A (zh) 2021-01-22 2021-01-22 Ar导览***及ar导览方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202211407285.1A Division CN115631323A (zh) 2021-01-22 2021-01-22 Ar导览***及ar导览方法

Publications (1)

Publication Number Publication Date
CN112907754A true CN112907754A (zh) 2021-06-04

Family

ID=76118455

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202211407285.1A Pending CN115631323A (zh) 2021-01-22 2021-01-22 Ar导览***及ar导览方法
CN202110089295.4A Pending CN112907754A (zh) 2021-01-22 2021-01-22 Ar导览***及ar导览方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202211407285.1A Pending CN115631323A (zh) 2021-01-22 2021-01-22 Ar导览***及ar导览方法

Country Status (2)

Country Link
US (1) US20220236068A1 (zh)
CN (2) CN115631323A (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105677015A (zh) * 2014-12-04 2016-06-15 宏达国际电子股份有限公司 虚拟实境***
CN205647764U (zh) * 2016-02-26 2016-10-12 李科 可显示的便捷穿戴设备
US20190122437A1 (en) * 2017-10-20 2019-04-25 Raytheon Company Field of View (FOV) and Key Code limited Augmented Reality to Enforce Data Capture and Transmission Compliance
CN112215964A (zh) * 2020-09-28 2021-01-12 杭州灵伴科技有限公司 基于ar的场景导览方法和设备

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130136566A (ko) * 2011-03-29 2013-12-12 퀄컴 인코포레이티드 로컬 멀티-사용자 협업을 위한 모듈식 모바일 접속된 피코 프로젝터들
KR101535032B1 (ko) * 2014-07-17 2015-07-07 현대자동차주식회사 차량 인터페이스 확장 방법
US10326822B2 (en) * 2015-12-03 2019-06-18 Google Llc Methods, systems and media for presenting a virtual operating system on a display device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105677015A (zh) * 2014-12-04 2016-06-15 宏达国际电子股份有限公司 虚拟实境***
CN205647764U (zh) * 2016-02-26 2016-10-12 李科 可显示的便捷穿戴设备
US20190122437A1 (en) * 2017-10-20 2019-04-25 Raytheon Company Field of View (FOV) and Key Code limited Augmented Reality to Enforce Data Capture and Transmission Compliance
CN112215964A (zh) * 2020-09-28 2021-01-12 杭州灵伴科技有限公司 基于ar的场景导览方法和设备

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
季钰等: "基于增强现实技术的用户体验设计", 《常熟理工学院学报（自然科学）》 *
崔文铮: "从未来的生活场景思考品牌设计的发展趋势", 《美术观察》 *

Also Published As

Publication number Publication date
US20220236068A1 (en) 2022-07-28
CN115631323A (zh) 2023-01-20

Similar Documents

Publication Publication Date Title
US10754496B2 (en) Virtual reality input
US11557134B2 (en) Methods and systems for training an object detection algorithm using synthetic images
CN104469464B (zh) 图像显示装置、控制图像显示装置的方法、计算机程序以及图像显示***
US20150062164A1 (en) Head mounted display, method of controlling head mounted display, computer program, image display system, and information processing apparatus
TWI540534B (zh) 虛擬導覽控制系統與方法
US8966366B2 (en) Method and system for customizing information projected from a portable device to an interface device
EP3449635B1 (en) Display device and method of operating the same
CN111052063B (zh) 电子装置及其控制方法
US20190213793A1 (en) Real-world portals for virtual reality displays
KR102499354B1 (ko) 디스플레이를 통해 표시된 제 1 콘텐트에 대해 제 2 콘텐트를 외부 객체의 움직임에 따라 제공하기 위한 전자 장치 및 그의 동작 방법
US20050010875A1 (en) Multi-focal plane user interface system and method
WO2023226864A1 (zh) 车机***、实现增强现实和虚拟现实的方法以及存储介质
US20210304500A1 (en) System and method for a virtual showroom
CN112907754A (zh) Ar导览***及ar导览方法
EP2932356B1 (en) Method for activating a mobile device in a network, and associated display device and system
US20220343038A1 (en) Vehicle simulator
CN114089890A (zh) 车辆模拟驾驶方法、设备、存储介质及程序产品
KR102227532B1 (ko) 클립 이동 제어를 위한 동영상 편집 ui 제어방법 및 장치
WO2024142300A1 (ja) 情報処理装置、端末機及び情報処理方法
US11573676B2 (en) Method and system for managing contextual views within a user interface
EP4083805A1 (en) System and method of error logging
WO2024142304A1 (ja) 情報処理装置、端末機及び情報処理方法
US11981186B2 (en) Method and system for responsive climate control interface
CN116176432B (zh) 车载设备控制方法、装置、车辆和存储介质
US11852812B1 (en) Incorporating camera through or augmented reality vision into a headset

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210604

RJ01 Rejection of invention patent application after publication