CN110174120B - 用于ar导航模拟的时间同步方法及装置 - Google Patents
用于ar导航模拟的时间同步方法及装置 Download PDFInfo
- Publication number
- CN110174120B CN110174120B CN201910304850.3A CN201910304850A CN110174120B CN 110174120 B CN110174120 B CN 110174120B CN 201910304850 A CN201910304850 A CN 201910304850A CN 110174120 B CN110174120 B CN 110174120B
- Authority
- CN
- China
- Prior art keywords
- data
- read
- video frame
- reading
- navigation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 51
- 238000004088 simulation Methods 0.000 title claims abstract description 44
- 230000004927 fusion Effects 0.000 claims abstract description 16
- 230000005540 biological transmission Effects 0.000 claims description 8
- 230000000694 effects Effects 0.000 abstract description 12
- 238000010586 diagram Methods 0.000 description 14
- 238000012545 processing Methods 0.000 description 11
- 238000004590 computer program Methods 0.000 description 9
- 230000008569 process Effects 0.000 description 9
- 230000006870 function Effects 0.000 description 5
- 230000001360 synchronised effect Effects 0.000 description 5
- 238000012360 testing method Methods 0.000 description 5
- 230000008901 benefit Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C25/00—Manufacturing, calibrating, cleaning, or repairing instruments or devices referred to in the other groups of this subclass
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B25/00—Models for purposes not provided for in G09B23/00, e.g. full-sized devices for demonstration purposes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8547—Content authoring involving timestamps for synchronizing content
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Business, Economics & Management (AREA)
- Remote Sensing (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- Theoretical Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Manufacturing & Machinery (AREA)
- Computer Security & Cryptography (AREA)
- Navigation (AREA)
- Studio Devices (AREA)
Abstract
本发明实施例提供一种用于AR导航模拟的时间同步方法及装置,属于车辆导航领域。所述方法包括:每隔预设周期读取一次视频帧数据,并将每次读取到的视频帧传输至AR导航***的图像识别模块;以及针对每次读取到的视频帧,根据所述读取到的视频帧的播放时间戳读取其他类型的数据,并将每次读取到的其他类型的数据传输至所述AR导航***的融合定位模块,其中所述其他类型的数据包括以下一者或多者:GPS数据、惯导数据、和传感器数据。其能够有效解决最终模拟的AR导航效果的时间同步问题。
Description
技术领域
本发明涉及车辆导航领域,具体地涉及用于AR导航模拟的时间同步方法及装置。
背景技术
AR导航产品的运行依赖于实际环境数据,在室内对AR导航效果进行模拟(如需调试或测试时)或者演示时,实际的***并不能实时提供满足运行条件的数据输入,从而不能有效模拟或者演示AR导航效果。
相关技术中,采样以下三种方案来解决上述技术问题:(1)实际上路测试,这种方式耗费人力、财力,并存在一定的人身及财产安全问题;(2)拍摄屏幕或者通过屏幕录制以保留视频为用户演示,这种方式智能用于演示而不能用于调试及测试。
发明内容
本发明实施例的目的是提供一种用于AR导航模拟的时间同步方法及装置,用于实现AR导航模拟过程中各类型数据的同步播放。
为了实现上述目的,本发明实施例提供一种用于AR导航模拟的时间同步方法,所述方法包括:每隔预设周期读取一次视频帧数据,并将每次读取到的视频帧传输至AR导航***的图像识别模块;以及针对每次读取到的视频帧,根据所述读取到的视频帧的播放时间戳读取其他类型的数据,并将每次读取到的其他类型的数据传输至所述AR导航***的融合定位模块,其中所述其他类型的数据包括以下一者或多者:GPS数据、惯导数据、和传感器数据。
可选的,每隔所述预设周期读取一次视频帧数据包括:启动具有所述预设周期的定时器;以及每隔一个所述预设周期读取播放时间戳不大于所述定时器的当前计数值且未被读取的视频帧。
可选的,针对每次读取到的视频帧,根据所述读取到视频帧的播放时间戳读取其他类型的数据包括:在每次读取到视频帧的情况下,读取播放时间戳不大于当前一次读取到的视频帧的播放时间戳且未被读取的其他类型的数据。
可选的,所述预设周期小于或等于最小的视频采集周期。
可选的,所述视频帧数据、所述GPS数据、所述惯导数据、和所述传感器数据被预先采集及存储。
相应的,本发明实施例还提供了一种用于AR导航模拟的时间同步装置,所述装置包括:第一读取模块,用于每隔预设周期读取一次视频帧数据;第一传输模块,用于将每次读取到的视频帧传输至AR导航***的图像识别模块;第二读取模块,用于针对每次读取到的视频帧,根据所述读取到的视频帧的播放时间戳读取其他类型的数据;以及第二传输模块,用于将每次读取到的其他类型的数据传输至所述AR导航***的融合定位模块,其中所述其他类型的数据包括以下一者或多者:GPS数据、惯导数据、和传感器数据。
可选的,所述第一读取模块包括:启动单元,用于启动具有所述预设周期的定时器;以及读取单元,用于每隔一个所述预设周期读取播放时间戳不大于所述定时器的当前计数值且未被读取的视频帧。
可选的,所述第二读取模块用于在每次读取到视频帧的情况下,读取播放时间戳不大于当前一次读取到的视频帧的播放时间戳且未被读取的其他类型的数据。
可选的,所述预设周期小于或等于最大的视频采集周期。
可选的,所述视频帧数据、所述GPS数据、所述惯导数据、和所述传感器数据被预先采集及存储。
相应的,本发明实施例还提供一种用于AR导航模拟的时间同步装置,所述装置包括存储器和处理器,所述存储器上存储有指令,该指令使得所述处理器能够执行上述的用于AR导航模拟的时间同步方法。
相应的,本发明实施例还提供一种处理器,用于运行程序,其中,所述程序被运行时用于执行上述的用于AR导航模拟的时间同步方法。
相应的,本发明实施例还提供一种机器可读存储介质,所述机器可读存储介质上存储有指令,该指令用于使得机器执行上述的用于AR导航模拟的时间同步方法。
通过上述技术方案,首先每隔预设周期读取一次视频帧数据,针对每次读取到的视频帧,根据所述读取到视频帧的播放时间戳读取其他类型的数据,如此经由图像识别模块处理后的图像和经由融合定位模块处理后的其他类型的数据,输出至展示模块后可以实现时间上的同步,其具有以下优势:(1)使得AR导航的测试、调试、演示不再受到时间及场地限制,其可以选择合适的时间和地点,保障人身财产安全;(2)同步方式保证了时序及结果可重复,降低定位问题及测试验证成本;(4)不再受到输入硬件设备的限制,可通过模拟加速开发过程;(5)模拟过程可在非原始采集设备上进行,硬件要求大大降低;(6)可用于演示目的以进行产品的商业推广。
本发明实施例的其它特征和优点将在随后的具体实施方式部分予以详细说明。
附图说明
附图是用来提供对本发明实施例的进一步理解,并且构成说明书的一部分,与下面的具体实施方式一起用于解释本发明实施例,但并不构成对本发明实施例的限制。在附图中:
图1示出了根据本发明一实施例的用于AR导航模拟的时间同步方法的流程示意图;
图2示出了根据本发明另一实施例的用于AR导航模拟的时间同步方法的流程示意图;以及
图3示出了根据本发明一实施例的用于AR导航模拟的时间同步装置的结构框图。
具体实施方式
以下结合附图对本发明实施例的具体实施方式进行详细说明。应当理解的是,此处所描述的具体实施方式仅用于说明和解释本发明实施例,并不用于限制本发明实施例。
为了能够模拟或者演示AR导航效果,也可以采用各个采集数据源独立播放以展示AR导航效果的方式。但是AR导航对数据同步要求非常严格,如果数据不同步,独立播放数据的效果将难以达到要求。本发明实施例提供的用于AR导航模拟的时间同步方法及装置旨在解决使用各个采集数据源独立播放以展示AR导航效果时的时间同步问题。
图1示出了根据本发明一实施例的用于AR导航模拟的时间同步方法的流程示意图。如图1所示,本发明实施例提供了一种用于AR导航模拟的时间同步方法,该方法可以包括步骤S110至步骤S120。
在步骤S110,每隔预设周期读取一次视频帧数据,并将每次读取到的视频帧传输至AR导航***的图像识别模块。
在一些情况下,视频帧数据的采集频率可以是固定频率的。在另一些情况下,视频帧数据的采集频率可以是变频的,例如,不同时间段的采集频率可以不同。
图像识别模块用于对视频帧进行处理,其可以每次处理一个视频帧。因此,在步骤S110中可以设置每次至多读取一个视频帧,这可以通过对预设周期进行设置而实现。例如,可以设置预设周期小于或等于最小的视频采集周期。如果所存储的视频帧数据是以固定频率采集的,则预设周期可以设置为小于或等于该固定频率对应的采集周期。如果所存储的视频帧数据是以变频采集的,则预设周期可以设置为小于或等于最大采集频率对应的采集周期。如果可以保证每次读取至多一个视频帧,在一些情况下,执行读取时也可能会读取不到视频帧。
可以通过设置具有预设周期的定时器来再每个预设周期触发执行一次步骤S110。
在步骤S120,针对每次读取到的视频帧,根据所述读取到视频帧的播放时间戳读取其他类型的数据,并将每次读取到的其他类型的数据传输至所述AR导航***的融合定位模块。
本发明实施例中其他类型的数据可以包括以下一者或多者:GPS数据、惯导数据、和传感器数据。惯导数据例如可以包括加速度计数据和陀螺仪数据等。传感器数据例如可以包括车速数据、方向盘角等数据。视频帧数据、GPS数据、惯导数据、和传感器数据可以通过数据采集程序被预先采集及存储,采集的数据可以存储在相同或不同的存储模块中。视频帧数据、GPS数据、惯导数据、和传感器数据各自的采集频率可以不同,对应的,其各自的采集周期亦可以不同。GPS数据、惯导数据、和传感器数据各自的采集频率也可以是变频的。
本发明实施例中的播放时间戳是指对视频帧数据从头开始播放时的播放时间,其与视频帧的采集时间戳相关联。视频帧的采集时间戳是指采集视频帧的时刻,在进行视频帧的预先采集时,每采集一个视频帧,将对其采集时间戳进行记录。视频帧的播放时间戳可以是指使用视频帧的采集时间戳减去第一个视频帧的采集时间戳得到的时间值。
可以在每次读取到视频帧时,根据读取到的视频帧的播放时间戳执行一次对其他类型的数据的读取。所读取到的GPS数据、惯导数据、和传感器数据可以分别是一个或多个。
在本发明实施例中每隔预设周期读取一次视频帧数据,并将读取到的视频帧数据传输至图像识别模块进行处理,这相当于对预先存储的视频帧数据进行了一次重新采集。对应的,在每次读取到视频帧的情况下,根据读取到的视频帧的播放时间戳执行一次对其他类型的数据的读取,并将每次读取到的其他类型的数据传输至融合定位模块进行处理,相当于将其他类型的数据进行了一次重新采集,并且重新采集的时间与视频帧数据的播放时间戳同步。如此,图像识别模块独立播放的视频帧和融合定位模块独立播放的其他类型的数据能够在展示模块上保持同步,从而使得AR导航的模拟效果能够达到要求,其尤其适用于视频帧的数据采集时变频的情况。
图2示出了根据本发明另一实施例的用于AR导航模拟的时间同步方法的流程示意图。如图2所示,本发明实施例提供的用于AR导航模拟的时间同步方法包括步骤S210至步骤S230。在本发明实施例中,视频帧数据和其他类型的数据被预先采集并存储,采集到的每个数据都具有对应的采集时间戳。数据的播放时间戳可以是使用数据的采集时间戳减去采集相同类型的第一数据采集时间戳得到的时间值。例如,视频帧的播放时间戳可以是使用视频帧的采集时间戳减去第一个视频帧的采集时间戳得到的时间值。GPS数据的播放时间戳可以是使用该GPS数据的采集时间戳减去第一个GPS数据的采集时间戳得到的时间值。惯导数据的播放时间戳可以是使用该惯导数据数据的采集时间戳减去第一个惯导数据数据的采集时间戳得到的时间值。传感器数据的播放时间戳可以是使用该传感器数据的采集时间戳减去第一个传感器数据的采集时间戳得到的时间值。
在步骤S210,启动具有预设周期的定时器。
预设周期可以小于或等于最小的视频采集周期。定时器可以设置为启动后从0开始计时,每隔预设周期计时一次。
在步骤S220,每隔一个所述预设周期读取播放时间戳不大于所述定时器的当前计数值且未被读取的视频帧,并将每次读取到的视频帧传输至AR导航***的图像识别模块。
在定时器每计时一次,读取一次视频帧。所读取到的视频帧的是播放时间戳不大于定时器的当前计数值且未被读取的视频帧。例如,在定时器计时值为tp时,读取播放时间戳小于tp且未被读取的视频帧,其中tp=n*Tp,Tp是为定时器设置的周期,n为正整数。
由于定时器的周期小于或等于最小的视频采集周期,因此在每次读取视频帧时,至多只能读取到一个满足条件的视频帧,也可能读取不到满足条件的视频帧。在每次读取到视频帧的情况下,可以将读取到的视频帧传输至图像识别模块,以由图像识别模块对读取到的视频帧进行处理。
在步骤S230,在每次读取到视频帧的情况下,读取播放时间戳不大于当前一次读取到的视频帧的播放时间戳且未被读取的其他类型的数据,并将每次读取到的其他类型的数据传输至所述AR导航***的融合定位模块。
例如,如果当前一次读取到的视频帧的播放时间戳为tq,则读取播放时间戳小于tq且未被读取的其他类型的数据。其他类型的数据可以包括以下一者或多者:GPS数据、惯导数据、和传感器数据。
所读取到的GPS数据、惯导数据、和传感器数据可以分别是一个或多个。在将读取到的其他类型的数据输送至融合定位模块后,融合定位模块可以对接收到的其他类型的数据进行处理。
在本发明实施例中每隔预设周期读取一次视频帧数据,并设置每次读取到至多一个视频帧,每读取到一个视频帧将所读取的该视频帧传输至图像识别模块。同时,针对每次读取到的一个视频帧,读取播放时间戳不大于当前一次读取到的视频帧的播放时间戳且未被读取的其他类型的数据,将读取到的其他类型的数据传输至AR导航***的融合定位模块。图像识别模块对接收到的视频帧进行实时处理,融合定位模块对接收到的其他类型的数据进行实时处理,展示模块可以对二者实时处理后的结果进行实时展示,以展示渲染的AR导航效果。这相当于设置了一种数据采集方式,对存储的视频帧数据和其他类型的数据进行同步采集,以解决最终模拟的AR导航效果的时间同步问题。
图3示出了根据本发明一实施例的用于AR导航模拟的时间同步装置的结构框图。如图3所示,本发明实施例还提供一种用于AR导航模拟的时间同步装置,所述装置可以包括:第一读取模块310,用于每隔预设周期读取一次视频帧数据;第一传输模块320,用于将每次读取到的视频帧传输至AR导航***的图像识别模块;第二读取模块330,用于针对每次读取到的视频帧,根据所述读取到的视频帧的播放时间戳读取其他类型的数据;以及第二传输模块340,用于将每次读取到的其他类型的数据传输至所述AR导航***的融合定位模块,其中所述其他类型的数据包括以下一者或多者:GPS数据、惯导数据、和传感器数据。
第一读取模块可以包括:启动单元,用于启动具有所述预设周期的定时器;以及读取单元,用于每隔一个所述预设周期读取播放时间戳不大于所述定时器的当前计数值且未被读取的视频帧。第二读取模块可以用于在每次读取到视频帧的情况下,读取播放时间戳不大于当前一次读取到的视频帧的播放时间戳且未被读取的其他类型的数据。
在具体实施时,视频帧数据和其他类型的数据被预先采集并存储,采集到的每个数据都记录有对应的采集时间戳。预设周期可以小于或等于最大的视频采集频率周期,以使得第一读取模块每次至少读取到一个视频帧。
图像识别模块对接收到的视频帧进行实时处理,融合定位模块对接收到的其他类型的数据进行实时处理,展示模块可以对二者实时处理后的结果进行实时展示,以展示渲染的AR导航效果。其可以解决最终模拟的AR导航效果的时间同步问题。
本发明实施例提供的用于AR导航模拟的时间同步装置可以集成于AR导航***,例如,可以在AR导航***设置模拟数据源接口和真实数据源接收。真实数据源接口用于实时读取真实的数据源。模拟数据源接口用于读取预先采集并存储的数据源。或者本发明实施例提供的用于AR导航模拟的时间同步装置可以集成于仅用于模拟的AR导航模拟***,AR导航模拟***上上可以仅设置有模拟数据源接口,以用于读取预先采集并存储的数据源。
本发明实施例提供的用于AR导航模拟的时间同步装置的具体工作原理及益处与本发明实施例提供的用于AR导航模拟的时间同步方法的具体工作原理及益处相似,这里将不再赘述。
相应的,本发明实施例提供的用于AR导航模拟的时间同步装置可包括处理器和存储器,所述存储器上存储有指令,该指令使得所述处理器能够执行本发明任意实施例所述的用于AR导航模拟的时间同步方法。上述的第一读取模块、第一传输模块、第二读取模块、第二传输模块、启动单元、读取单元等均可作为程序单元存储在存储器中,由处理器执行存储在存储器中的上述程序单元来实现相应的功能。其中,处理器中包含内核,由内核去存储器中调取相应的程序单元。内核可以设置一个或以上,通过调整内核参数来执行根据本发明任意实施例所述的用于AR导航模拟的时间同步方法。存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM),存储器包括至少一个存储芯片。
本发明实施例还提供一种处理器,所述处理器用于运行程序,其中,所述程序被运行时用于执行根据本发明任意实施例所述的用于AR导航模拟的时间同步方法。
本发明实施例还提供一种机器可读存储介质,所述机器可读存储介质上存储有指令,该指令用于使得机器执行根据本发明任意实施例所述的用于AR导航模拟的时间同步方法。
本领域内的技术人员应明白,本申请的实施例可提供为方法、***、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(***)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。存储器是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。
本领域技术人员应明白,本申请的实施例可提供为方法、***或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
以上仅为本申请的实施例而已,并不用于限制本申请。对于本领域技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本申请的权利要求范围之内。
Claims (11)
1.一种用于AR导航模拟的时间同步方法,其特征在于,所述方法包括:
每隔预设周期读取一次视频帧数据,并将每次读取到的视频帧传输至AR导航***的图像识别模块;以及
针对每次读取到的视频帧,根据所述读取到的视频帧的播放时间戳读取其他类型的数据,并将每次读取到的其他类型的数据传输至所述AR导航***的融合定位模块,
其中所述其他类型的数据包括以下一者或多者:GPS数据、惯导数据、和传感器数据,
其中针对每次读取到的视频帧,根据所述读取到视频帧的播放时间戳读取其他类型的数据包括:在每次读取到视频帧的情况下,读取播放时间戳不大于当前一次读取到的视频帧的播放时间戳且未被读取的其他类型的数据。
2.根据权利要求1所述的方法,其特征在于,每隔所述预设周期读取一次视频帧数据包括:
启动具有所述预设周期的定时器;以及
每隔一个所述预设周期读取播放时间戳不大于所述定时器的当前计数值且未被读取的视频帧。
3.根据权利要求1所述的方法,其特征在于,所述预设周期小于或等于最小的视频采集周期。
4.根据权利要求1所述的方法,其特征在于,所述视频帧数据、所述GPS数据、所述惯导数据、和所述传感器数据被预先采集及存储。
5.一种用于AR导航模拟的时间同步装置,其特征在于,所述装置包括:
第一读取模块,用于每隔预设周期读取一次视频帧数据;
第一传输模块,用于将每次读取到的视频帧传输至AR导航***的图像识别模块;
第二读取模块,用于针对每次读取到的视频帧,根据所述读取到的视频帧的播放时间戳读取其他类型的数据;以及
第二传输模块,用于将每次读取到的其他类型的数据传输至所述AR导航***的融合定位模块,
其中所述其他类型的数据包括以下一者或多者:GPS数据、惯导数据、和传感器数据,
其中所述第二读取模块用于根据以下步骤读取所述其他类型的数据:在每次读取到视频帧的情况下,读取播放时间戳不大于当前一次读取到的视频帧的播放时间戳且未被读取的其他类型的数据。
6.根据权利要求5所述的装置,其特征在于,所述第一读取模块包括:
启动单元,用于启动具有所述预设周期的定时器;以及
读取单元,用于每隔一个所述预设周期读取播放时间戳不大于所述定时器的当前计数值且未被读取的视频帧。
7.根据权利要求5所述的装置,其特征在于,所述预设周期小于或等于最大的视频采集周期。
8.根据权利要求5所述的装置,其特征在于,所述视频帧数据、所述GPS数据、所述惯导数据、和所述传感器数据被预先采集及存储。
9.一种用于AR导航模拟的时间同步装置,其特征在于,所述装置包括存储器和处理器,所述存储器上存储有指令,该指令使得所述处理器能够执行:根据权利要求1至4中任一项所述的用于AR导航模拟的时间同步方法。
10.一种处理器,其特征在于,用于运行程序,其中,所述程序被运行时用于执行:根据权利要求1至4中任一项所述的用于AR导航模拟的时间同步方法。
11.一种机器可读存储介质,其特征在于,所述机器可读存储介质上存储有指令,该指令用于使得机器执行:根据权利要求1至4中任一项所述的用于AR导航模拟的时间同步方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111189337.8A CN113865620B (zh) | 2019-04-16 | 2019-04-16 | 用于ar导航模拟的时间同步方法及装置 |
CN201910304850.3A CN110174120B (zh) | 2019-04-16 | 2019-04-16 | 用于ar导航模拟的时间同步方法及装置 |
CN202111189336.3A CN114088111B (zh) | 2019-04-16 | 2019-04-16 | 用于ar导航模拟的时间同步方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910304850.3A CN110174120B (zh) | 2019-04-16 | 2019-04-16 | 用于ar导航模拟的时间同步方法及装置 |
Related Child Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111189336.3A Division CN114088111B (zh) | 2019-04-16 | 2019-04-16 | 用于ar导航模拟的时间同步方法及装置 |
CN202111189337.8A Division CN113865620B (zh) | 2019-04-16 | 2019-04-16 | 用于ar导航模拟的时间同步方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110174120A CN110174120A (zh) | 2019-08-27 |
CN110174120B true CN110174120B (zh) | 2021-10-08 |
Family
ID=67689930
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910304850.3A Active CN110174120B (zh) | 2019-04-16 | 2019-04-16 | 用于ar导航模拟的时间同步方法及装置 |
CN202111189336.3A Active CN114088111B (zh) | 2019-04-16 | 2019-04-16 | 用于ar导航模拟的时间同步方法及装置 |
CN202111189337.8A Active CN113865620B (zh) | 2019-04-16 | 2019-04-16 | 用于ar导航模拟的时间同步方法及装置 |
Family Applications After (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111189336.3A Active CN114088111B (zh) | 2019-04-16 | 2019-04-16 | 用于ar导航模拟的时间同步方法及装置 |
CN202111189337.8A Active CN113865620B (zh) | 2019-04-16 | 2019-04-16 | 用于ar导航模拟的时间同步方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (3) | CN110174120B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110174120B (zh) * | 2019-04-16 | 2021-10-08 | 百度在线网络技术(北京)有限公司 | 用于ar导航模拟的时间同步方法及装置 |
CN110645995B (zh) * | 2019-09-29 | 2021-07-13 | 百度在线网络技术(北京)有限公司 | 地图导航模拟方法及装置 |
CN114218139B (zh) * | 2021-12-15 | 2024-05-31 | 北京航天控制仪器研究所 | 一种基于实时操作***和fpga的仿真转台高速同步采集方法 |
CN114338951A (zh) * | 2021-12-30 | 2022-04-12 | 智道网联科技(北京)有限公司 | 传感器同步方法、装置、***及车辆 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102265237A (zh) * | 2008-08-21 | 2011-11-30 | 克罗诺洛吉克有限公司 | 同步和计时方法及设备 |
CN102668534A (zh) * | 2009-10-19 | 2012-09-12 | 图形科技公司 | 视频和遥测数据的数据搜索、解析和同步 |
CN103616710A (zh) * | 2013-12-17 | 2014-03-05 | 靳文瑞 | 基于fpga的多传感器组合导航时间同步*** |
WO2015054394A1 (en) * | 2013-10-08 | 2015-04-16 | Delightfit, Inc. | Video and map data synchronization for simulated athletic training |
CN107172320A (zh) * | 2017-06-21 | 2017-09-15 | 成都理想境界科技有限公司 | 数据同步方法及摄像设备 |
CN107690053A (zh) * | 2016-08-05 | 2018-02-13 | 北京国基科技股份有限公司 | 一种确定视频流的时间轴的方法以及*** |
CN108629793A (zh) * | 2018-03-22 | 2018-10-09 | 中国科学院自动化研究所 | 使用在线时间标定的视觉惯性测程法与设备 |
Family Cites Families (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0666940B2 (ja) * | 1985-12-20 | 1994-08-24 | ソニー株式会社 | ビデオデイスク再生装置 |
KR20130040361A (ko) * | 2011-10-14 | 2013-04-24 | 주식회사 엘지유플러스 | 증강현실 네비게이션 기반 실시간 교통 정보 제공 방법, 서버, 및 기록 매체 |
CN102506901B (zh) * | 2011-11-25 | 2014-11-05 | 北京航空航天大学 | 一种多串口导航信息模拟集成*** |
KR102021050B1 (ko) * | 2012-06-06 | 2019-09-11 | 삼성전자주식회사 | 내비게이션 정보를 제공하는 방법, 기계로 읽을 수 있는 저장 매체, 이동 단말 및 서버 |
CN105203127B (zh) * | 2014-06-30 | 2018-01-12 | 惠州市德赛西威汽车电子股份有限公司 | 一种一体化导航产品的测试方法和测试装置 |
US9690375B2 (en) * | 2014-08-18 | 2017-06-27 | Universal City Studios Llc | Systems and methods for generating augmented and virtual reality images |
US9406171B2 (en) * | 2014-08-25 | 2016-08-02 | Daqri, Llc | Distributed aperture visual inertia navigation |
CN104535070B (zh) * | 2014-12-26 | 2017-11-14 | 上海交通大学 | 高精细地图数据结构、采集和处理***及方法 |
US10075623B2 (en) * | 2015-03-30 | 2018-09-11 | Myriad Sensors, Inc. | Synchronizing wireless sensor data and video |
WO2017160293A1 (en) * | 2016-03-17 | 2017-09-21 | Hewlett-Packard Development Company, L.P. | Frame transmission |
KR101846386B1 (ko) * | 2017-08-02 | 2018-04-06 | 주식회사 비바엔에스 | 모바일 영상통화 품질측정 방법 및 시스템 |
CN107588782A (zh) * | 2017-08-25 | 2018-01-16 | 上海与德科技有限公司 | 一种虚拟导航的驾驶方法和*** |
CN107454387A (zh) * | 2017-08-28 | 2017-12-08 | 西安万像电子科技有限公司 | 用于图像编解码传输***的质量参数获取方法和装置 |
CN107966723B (zh) * | 2017-11-22 | 2019-10-08 | 中国人民解放军国防科技大学 | 一种多速率多通道时间同步高速数据记录*** |
CN108180921B (zh) * | 2017-12-22 | 2021-06-08 | 联创汽车电子有限公司 | 利用gps数据的ar-hud导航***及其导航方法 |
CN108279430A (zh) * | 2017-12-25 | 2018-07-13 | 广州市中海达测绘仪器有限公司 | 数据同步定位的方法、装置、计算机设备及存储介质 |
CN108801249A (zh) * | 2018-08-15 | 2018-11-13 | 北京七维航测科技股份有限公司 | 一种惯性导航*** |
CN109307508B (zh) * | 2018-08-29 | 2022-04-08 | 中国科学院合肥物质科学研究院 | 一种基于多关键帧的全景惯导slam方法 |
CN109581426B (zh) * | 2019-02-18 | 2021-04-23 | 帆美航空科技(北京)有限公司 | 一种识别gnss异常信号的方法、***、设备及存储介质 |
CN110174120B (zh) * | 2019-04-16 | 2021-10-08 | 百度在线网络技术(北京)有限公司 | 用于ar导航模拟的时间同步方法及装置 |
US10726631B1 (en) * | 2019-08-03 | 2020-07-28 | VIRNECT inc. | Augmented reality system and method with frame region recording and reproduction technology based on object tracking |
-
2019
- 2019-04-16 CN CN201910304850.3A patent/CN110174120B/zh active Active
- 2019-04-16 CN CN202111189336.3A patent/CN114088111B/zh active Active
- 2019-04-16 CN CN202111189337.8A patent/CN113865620B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102265237A (zh) * | 2008-08-21 | 2011-11-30 | 克罗诺洛吉克有限公司 | 同步和计时方法及设备 |
CN102668534A (zh) * | 2009-10-19 | 2012-09-12 | 图形科技公司 | 视频和遥测数据的数据搜索、解析和同步 |
WO2015054394A1 (en) * | 2013-10-08 | 2015-04-16 | Delightfit, Inc. | Video and map data synchronization for simulated athletic training |
CN103616710A (zh) * | 2013-12-17 | 2014-03-05 | 靳文瑞 | 基于fpga的多传感器组合导航时间同步*** |
CN107690053A (zh) * | 2016-08-05 | 2018-02-13 | 北京国基科技股份有限公司 | 一种确定视频流的时间轴的方法以及*** |
CN107172320A (zh) * | 2017-06-21 | 2017-09-15 | 成都理想境界科技有限公司 | 数据同步方法及摄像设备 |
CN108629793A (zh) * | 2018-03-22 | 2018-10-09 | 中国科学院自动化研究所 | 使用在线时间标定的视觉惯性测程法与设备 |
Also Published As
Publication number | Publication date |
---|---|
CN114088111A (zh) | 2022-02-25 |
CN114088111B (zh) | 2024-05-10 |
CN113865620B (zh) | 2024-05-10 |
CN113865620A (zh) | 2021-12-31 |
CN110174120A (zh) | 2019-08-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110174120B (zh) | 用于ar导航模拟的时间同步方法及装置 | |
CN107277594B (zh) | 一种视音频与弹幕同步方法及装置 | |
JP7100863B1 (ja) | 動画処理装置、動画処理方法、プログラム | |
CN109032793A (zh) | 资源配置的方法、装置、终端及存储介质 | |
CN110162089B (zh) | 一种无人驾驶的仿真方法及装置 | |
US10901810B2 (en) | Event-based record and replay for advanced applications | |
CN110264280A (zh) | 一种户外广告监测方法 | |
CN109672837A (zh) | 航拍设备实时视频录制方法、移动终端和计算机存储介质 | |
EP3993428A1 (en) | Time delay error correction method, terminal device, server, and storage medium | |
CN109495340A (zh) | 一种Android应用性能监控统计方法及*** | |
CN111309387A (zh) | 一种驱动加载的方法及装置、电子设备、存储介质 | |
CN105578290B (zh) | 一种基于epg进行计划视频打点的方法及装置 | |
CN111901619A (zh) | 一种消息推送方法和装置 | |
CN108712676B (zh) | 基于React框架实现的视频自动播放方法及装置 | |
CN112162888A (zh) | 显示器黑屏的原因的确定方法、装置和计算机存储介质 | |
CN114553895B (zh) | 一种数据同步方法、***、存储介质及电子设备 | |
CN114390204B (zh) | 一种智慧医疗处理方法和*** | |
CN110968377B (zh) | 界面显示的处理方法及装置 | |
CN113890668A (zh) | 多传感器的时间同步方法、装置及电子设备、存储介质 | |
CN115529481B (zh) | 基于融合信号源的视频同步显示***、方法及输入设备 | |
CN115103181A (zh) | 一种防抖检测方法及装置 | |
CN104574343B (zh) | 一种视频中提取图像的方法及设备 | |
CN114201031A (zh) | 针对眼动跟踪的时间统计方法及装置 | |
CN112486489B (zh) | 一种拍卖组件的渲染方法及设备 | |
CN113938615B (zh) | 一种人脸防伪数据集的获取方法、装置及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right |
Effective date of registration: 20211009 Address after: 100176 101, floor 1, building 1, yard 7, Ruihe West 2nd Road, economic and Technological Development Zone, Daxing District, Beijing Patentee after: Apollo Intelligent Connectivity (Beijing) Technology Co., Ltd. Address before: 100085 third floor, *** building, No. 10, Shangdi 10th Street, Haidian District, Beijing Patentee before: BAIDU ONLINE NETWORK TECHNOLOGY (BEIJING) Co.,Ltd. |
|
TR01 | Transfer of patent right |