CN112383674A - 一种数据和视频同步显示方法、装置、车辆及介质 - Google Patents
一种数据和视频同步显示方法、装置、车辆及介质 Download PDFInfo
- Publication number
- CN112383674A CN112383674A CN202011239400.XA CN202011239400A CN112383674A CN 112383674 A CN112383674 A CN 112383674A CN 202011239400 A CN202011239400 A CN 202011239400A CN 112383674 A CN112383674 A CN 112383674A
- Authority
- CN
- China
- Prior art keywords
- preset
- data
- video
- vehicle
- result data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 81
- 230000001360 synchronised effect Effects 0.000 title claims description 24
- 238000004088 simulation Methods 0.000 claims abstract description 56
- 230000004927 fusion Effects 0.000 claims abstract description 23
- 238000012545 processing Methods 0.000 claims abstract description 15
- 238000012800 visualization Methods 0.000 abstract description 3
- 230000000875 corresponding effect Effects 0.000 description 15
- 230000001276 controlling effect Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 4
- 238000013473 artificial intelligence Methods 0.000 description 3
- 239000003086 colorant Substances 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000007500 overflow downdraw method Methods 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 229910003460 diamond Inorganic materials 0.000 description 1
- 239000010432 diamond Substances 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000000547 structure data Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/04—Synchronising
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Controls And Circuits For Display Device (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
本发明公开了一种数据和视频同步显示方法、装置、车辆及介质。该方法包括：获取通过车辆内传感器数据融合算法以预设仿真时长处理得到的中间变量和结果数据；获取车辆在预设行车时长的场景视频，其中，所述预设行车时长与所述预设仿真时长为同一时间信息；控制第一预设窗口和第二预设窗口同步进行信息展示，其中，所述第一预设窗口展示的信息为所述中间变量和结果数据，所述第二预设窗口展示的信息为所述场景视频。上述技术方案，分别获取传感器数据融合得到的中间变量、结果数据和与传感器数据对应的场景视频，并将中间变量、结果数据和传感器数据进行同步显示，可以确定结果数据和场景视频之间的对应关系，实现结果数据的可视化。进而可以精准定位运行过程发生错误的时间，便于技术人员发现错误发生的过程并进行复现，便于技术人员观测调试参数。
Description
技术领域
本发明实施例涉及智能驾驶技术，尤其涉及一种数据和视频同步显示方法、装置、车辆及介质。
背景技术
随着智能驾驶技术的不断发展，多传感器已经成为无人驾驶汽车的标配。多传感器返回的数据经过融合后以表格的形式展现，数据与主车之间、数据与数据之间的相对位置关系，数据与场景视频之间的时间同步无法生动展现给开发人员。
现有技术中，传感器获取到的大量实时数据在算法模型中运行后生成大量结果数据，人眼观测结果数据，无法确定结果数据和场景视频之间的对应关系，也无法实现结果数据的可视化。不能精准定位运行过程发生错误的时间，不便于技术人员发现错误发生的过程并进行复现，进而不便于技术人员观测调试参数。
发明内容
本发明提供一种数据和视频同步显示方法、装置、车辆及介质，便于确定结果数据和场景视频之间的对应关系，实现结果数据的可视化。
第一方面，本发明实施例提供了一种数据和视频同步显示方法，该方法包括：
获取通过车辆内传感器数据融合算法以预设仿真时长处理得到的中间变量和结果数据；
获取车辆在预设行车时长的场景视频，其中，所述预设行车时长与所述预设仿真时长为同一时间信息；
控制第一预设窗口和第二预设窗口同步进行信息展示，其中，所述第一预设窗口展示的信息为所述中间变量和结果数据，所述第二预设窗口展示的信息为所述场景视频。
第二方面，本发明实施例还提供了一种数据和视频同步显示装置，该装置包括：第一获取模块、第二获取模块和展示模块，其中，
第一获取模块，用于获取通过车辆内传感器数据融合算法以预设仿真时长处理得到的中间变量和结果数据；
第二获取模块，用于获取车辆在预设行车时长的场景视频，其中，所述预设行车时长与所述预设仿真时长为同一时间信息；
展示模块，用于控制第一预设窗口和第二预设窗口同步进行信息展示，其中，所述第一预设窗口展示的信息为所述中间变量和结果数据，所述第二预设窗口展示的信息为所述场景视频。
第三方面，本发明实施例还提供了一种车辆，该车辆包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序；
传感装置，用于获取所述车辆运行中的传感数据；
摄像头，用于获取所述车辆运行中的场景视频；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如第一方面所述的数据和视频同步显示方法。
第四方面，本发明实施例还提供了一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如第一方面所述的数据和视频同步显示方法。
本发明通过获取通过车辆内传感器数据融合算法以预设仿真时长处理得到的中间变量和结果数据；获取车辆在预设行车时长的场景视频，其中，所述预设行车时长与所述预设仿真时长为同一时间信息；控制第一预设窗口和第二预设窗口同步进行信息展示，其中，所述第一预设窗口展示的信息为所述中间变量和结果数据，所述第二预设窗口展示的信息为所述场景视频。解决不便于确定结果数据和场景视频之间的对应关系的问题，实现结果数据的可视化。进而可以精准定位运行过程发生错误的时间，便于技术人员发现错误发生的过程并进行复现，便于技术人员观测调试参数。
附图说明
图1为本发明实施例一提供的一种数据和视频同步显示方法的流程图；
图2为本发明实施例一提供的一种数据和视频同步显示方法的显示示意图；
图3为本发明实施例二提供的一种数据和视频同步显示方法的流程图；
图4为本发明实施例二提供的一种数据和视频同步显示方法的实现流程图；
图5为本发明实施例三提供的一种数据和视频同步显示装置的结构图；
图6为本发明实施例四提供的一种车辆的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
在更加详细地讨论示例性实施例之前应当提到的是，一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项操作(或步骤)描述成顺序的处理，但是其中的许多操作可以被并行地、并发地或者同时实施。此外，各项操作的顺序可以被重新安排。当其操作完成时所述处理可以被终止，但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。此外，在不冲突的情况下，本发明中的实施例及实施例中的特征可以相互组合。
实施例一
图1为本发明实施例一提供的一种数据和视频同步显示方法的流程图，本实施例可适用于车辆运行过程中数据和视频同步显示的情况，该方法可以由车辆***来执行，具体包括如下步骤：
步骤110、获取通过车辆内传感器数据融合算法以预设仿真时长处理得到的中间变量和结果数据。
具体地，将多传感器返回的传感器数据通过融合算法进行合成，可以得到对车辆运行过程的一致性解释和描述。具体地，车辆内传感器数据通过融合算法可以得到中间变量和结果数据。其中，中间变量可以包括基于多个传感器数据计算得到结果数据的过程中，产生的冗余数据或者半结果数据等。
另外，传感器数据融合方法可以包括：随机类方法和人工智能类方法，其中，随机类方法可以包括加权平均法、卡尔曼滤波法、D-S证据推理方法和产生式规则等，人工智能类方法可以包括模糊逻辑推理和人工神经网络法。
预设仿真时长可以对应数据融合算法模型运行的开始和结束时间，数据融合算法模型运行的开始和结束时间可以根据场景视频的开始和结束时间确定。预设仿真时长也可以为运行一次数据融合算法模型的时间，单次运行时间可以对应单次场景视频的获取时间。
获取到预设仿真时长内的中间变量和结果数据，其中，预设仿真时长可以对应获取场景视频的时间，可以使得中间变量、结果数据和场景视频时间对应，便于数据和视频的同步显示。
步骤120、获取车辆在预设行车时长的场景视频，其中，所述预设行车时长与所述预设仿真时长为同一时间信息。
具体地，车辆的场景视频可以通过行车记录仪进行记录，方法运行过程中可以在行车记录仪获取的场景视频库中获取预设时长的场景视频。通过剪辑场景视频库中的场景视频可以得到预设行车时长的场景视频。
另外，车辆的场景视频可以包括前视场景视频和后视场景视频。
如前所述，预设行车时长和预设仿真时长为同一时间信息可以便于获取同一时间的中间变量、结果数据和场景视频。
步骤130、控制第一预设窗口和第二预设窗口同步进行信息展示，其中，所述第一预设窗口展示的信息为所述中间变量和结果数据，所述第二预设窗口展示的信息为所述场景视频。
具体地，可以在同一显示界面的第一预设窗口展示中间变量和结果数据，第二预设窗口展示场景视频。
中间变量和结果数据可以通过显示软件进行读取，其中，显示软件可以包括MATLAB。
图2为本发明实施例一提供的一种数据和视频同步显示方法的显示示意图，如图2所示，MATLAB的第一预设窗口可以显示中间变量和结果数据，坐标系中，采集数据的传感器可以为原点，中间变量和结果数据以相对采集数据的传感器的位置信息作为其横纵坐标。为了区分上述中间变量和结果数据，可以以不同的符号或者颜色将中间变量和结果数据显示在坐标系中。例如，如图2所示，菱形框可以表示中间变量和结果数据，可以根据颜色区分中间变量和结果数据，具体颜色可以根据实际情况进行确定，在此不做具体限定。正方形框可以表示采集数据的传感器。虚线轨道可以表示车辆的运行轨迹。
MATLAB的第二预设窗口可以显示车辆的前视场景视频。另外，为了更加精确掌握车辆运行的具体情况，车辆的场景视频可以包括前视场景视频和后视场景视频。车辆的后视场景视频可以显示在MATLAB的第三预设窗口内。
另外，当显示软件包括MATLAB时，最对中间变量和结果数据进行显示之前，需要对中间变量和结果数据进行类型转换。将其数据类型转换为MATLAB可以识别的数据类型，具体可以包括xls、txt、dat、inp、asv、tiff、png、jpg、bmp、mp4和avi等。
另外，如图2所示，中间变量和结果数据也可以分别显示在两个预设窗口中。
本发明实施例一提供一种数据和视频同步显示方法，通过获取通过车辆内传感器数据融合算法以预设仿真时长处理得到的中间变量和结果数据；获取车辆在预设行车时长的场景视频，其中，所述预设行车时长与所述预设仿真时长为同一时间信息；控制第一预设窗口和第二预设窗口同步进行信息展示，其中，所述第一预设窗口展示的信息为所述中间变量和结果数据，所述第二预设窗口展示的信息为所述场景视频。解决了不便于确定结果数据和场景视频之间的对应关系的问题，实现结果数据的可视化。进而可以精准定位运行过程发生错误的时间，便于技术人员发现错误发生的过程并进行复现，便于技术人员观测调试参数。
实施例二
图3为本发明实施例二提供的一种数据和视频同步显示方法的流程图，本实施例是在上述实施例的基础上进行具体化。在本实施例中，该方法还可以包括：
步骤310、获取通过车辆内传感器数据融合算法以预设仿真时长处理得到的中间变量和结果数据。
一种实施例中，步骤310具体可以包括：
将多个传感器获取到的传感器数据输入预设算法模型，得到的输出结果包括中间变量和结果数据。
具体地，预设算法模型可以基于实施例一中所述的传感器数据融合方法进行构建，即可以基于随机类方法和人工智能类方法进行构建。预设算法模型对多个传感器获取到的传感器数据进行融合，得到中间变量和结果数据。
基于预设仿真时长，在输出结果中截取中间变量和结果数据。
具体地，预设算法模型的输入可以包括预设时间段内多个传感器获取到的传感器数据，输出可以包括预设时间内的中间变量和结果数据。
为了使得中间变量、结果数据和场景视频的时间信息保持一致，可以在预设时间内的中间变量和结果数据中截取预设仿真时长的中间变量和结果数据。
另外，为了便于数据采集和数据处理，预设仿真时长也可以为多个传感器采集数据的周期时长，可以将预设仿真时长的传感器数据输入预设算法模型进行处理，进而得到预设仿真时长的中间变量和结果数据。
基于所述预设算法模型的变量名，确定所述中间变量和所述结果数据的变量名。
通常情况下，传感器获取到的传感器数据的变量名与预设算法模型的变量名不一致，所以在对中间变量、结果数据和场景视频进行同屏显示之前，需要根据预设算法模型的变量名，确定中间变量和结果数据的变量名。
相应的，若预设算法模型得到的中间变量和结果数据的数据类型与显示软件不匹配，需要对中间变量和结果数据的数据类型进行转换。
步骤320、获取车辆在预设行车时长的场景视频，其中，所述预设行车时长与所述预设仿真时长为同一时间信息。
一种实施例中，步骤320具体可以包括：
根据所述视频的总帧数和总时间，确定视频帧的时间间隔。
具体地，由于每帧视频的时间间隔是固定的，视频的总时间除以视频总帧数，可以得到视频帧的时间间隔。其中，视频的总帧数可以通过视频的帧率和视频总时间确定。
根据视频帧的时间间隔和视频帧数，控制获取所述场景视频的预设行车时长与所述预设仿真时长相等。
具体地，时间间隔和视频帧数可以确定场景视频的时长，即可以通过场景视频的视频帧数控制场景视频的预设行车时长。预设仿真时长可以通过调整多个传感器获取传感器的周期时长来确定。进而可以控制预设行车时长和预设仿真时长相等。
基于所述预设行车时长，获取车辆运行中的场景视频。
具体地，预设行车时长确定之后，可以根据预设行车时长，在场景视频库中截取预设行车时长的场景视频。
相应的，截取的场景视频也可以包括前视场景视频和后视场景视频。
步骤330、控制第一预设窗口和第二预设窗口同步进行信息展示，其中，所述第一预设窗口展示的信息为所述中间变量和结果数据，所述第二预设窗口展示的信息为所述场景视频。
一种实施例中，步骤330具体可以包括：
在第一预设窗口内显示时间信息、预设仿真时长的所述中间变量和所述结果数据，其中，原点为采集传感数据的传感器位置、横纵坐标为车辆与传感器的相对位置。
具体地，时间信息和中间变量的显示位置在此不做具体限定，如图2所示，时间信息和中间变量可以显示在坐标系的右上角。另外，坐标系中还可以显示车辆位置信息和车辆的运行轨迹。在坐标系中显示中间变量和结果数据，可以使得结果数据可视化，便于研究人员找出错误数据，并进一步进行错误信息纠正等。
在第二预设窗口内显示预设行车时长的所述场景视频。
具体地，第二预设窗口内可以显示预设行车时长的场景视频。场景视频可以包括前视场景视频和/或后视场景视频。当场景视频可以包括前视场景视频或者后视场景视频时，第二预设窗口可以显示前视场景视频或者后视场景视频；当场景视频可以包括前视场景视频和后视场景视频时，第二预设窗口可以显示前视场景视频，第三预设窗口可以显示后视场景视频。第一预设窗口、第二预设窗口和第三预设窗口可以同时显示，第一预设窗口可以位于显示窗口的一侧，第二预设窗口和第三预设窗口可以分别位于显示窗口另一侧的第一端和第二端。
步骤340、根据所述中间变量、所述结果数据和所述场景视频的显示信息，确定错误信息。
具体地，若中间变量和结果数据与当前视频帧不一致或者不对应，则根据预设算法模型得到的中间变量或者结果数据存在错误信息，可以将其确定为错误信息。
对中间变量、结果数据和视频帧进行同步显示，方便定位错误发生的时刻，便于检测修改参数给不同算法不同的应用场景带来的影响。在智能驾驶算法调试过程中也极大地方便了工程人员的测试过程。
步骤350、基于所述错误信息，修改所述算法模型参数，并继续执行获取通过车辆内传感器数据融合算法以预设仿真时长处理得到的中间变量和结果数据。
具体地，若存在错误信息，可以基于错误信息对算法模型参数进行修改，使得算法模型更加匹配当前车辆的运行。
步骤360、关联存储所述视频、所述中间变量、所述结果数据和所述错误信息。
具体地，可以捕获场景视频中的视频帧和视频帧对应的中间变量和结果数据并进行存储。另外，当存在错误信息时，可以将错误信息与所述视频、所述中间变量和所述结果数据进行关联并存储。
一种实施方式中，可以制作场景视频和传感器数据名称和地址的列表或数据库，通过在MATLAB中循环调用不同的场景视频和传感器数据，一次得到所有的场景视频和传感器数据对应生成视频。
本实施例的技术方案，通过获取通过车辆内传感器数据融合算法以预设仿真时长处理得到的中间变量和结果数据；获取车辆在预设行车时长的场景视频，其中，所述预设行车时长与所述预设仿真时长为同一时间信息；控制第一预设窗口和第二预设窗口同步进行信息展示，其中，所述第一预设窗口展示的信息为所述中间变量和结果数据，所述第二预设窗口展示的信息为所述场景视频。根据所述中间变量、所述结果数据和所述视频的显示信息，确定错误信息。基于所述错误信息，修改所述算法模型参数，并继续执行获取通过车辆内传感器数据融合算法以预设仿真时长处理得到的中间变量和结果数据。关联存储所述视频、所述中间变量、所述结果数据和所述错误信息。解决了不便于确定结果数据和场景视频之间的对应关系的问题，实现结果数据的可视化。进而可以精准定位运行过程发生错误的时间，便于技术人员发现错误发生的过程并进行复现，便于技术人员观测调试参数。
图4为本发明实施例二提供的一种数据和视频同步显示方法的实现流程图，示例性的给出了其中一种实现方式。如图4所示，
步骤410、设置预设算法模型的预设仿真时长和获取场景视频的预设行车时长，并使得预设仿真时长和预设行车时长为同一时间信息。
具体地，在相同的时间段内分别运行预设算法模型和获取场景视频，可以使得获取到的中间变量、结果数据和场景视频的时间信息相互对应，便于中间变量、结构数据和场景视频的同步显示。
步骤420、根据预设仿真时长加载传感器数据，同时预设算法模型运行以获取中间变量和结果数据。
具体地，预设算法模型的输入可以包括多个传感器获取的传感器数据，输出可以包括中间变量和结果数据。
步骤430、在预设行车时长内获取场景视频。
具体地，可以在行车记录仪采集形成的场景视频库中截取对应预设行车时长的场景视频。
步骤440、在MATLAB的第一预设窗口中展示中间变量和结果数据，在MATLAB的第二预设窗口中展示场景视频。
具体地，在MATLAB的第二预设窗口中展示的场景视频可以包括前视场景视频，在MATLAB的第三预设窗口中还可以展示后视场景视频。
步骤450、基于预设存储空间存储相互关联的中间变量、结果数据和场景视频。
具体地，可以制作场景视频和传感器数据名称和地址的列表或数据库，通过在MATLAB中循环调用不同的场景视频和传感器数据，一次得到所有的场景视频和传感器数据对应生成视频。
实施例三
图5为本发明实施例三提供的一种数据和视频同步显示装置的结构图，该装置可以适用于车辆运行中传感器数据和车辆运行中视频同步显示的情况，便于确定结果数据和场景视频之间的对应关系，实现结果数据的可视化。该装置可以通过软件和/或硬件实现，并一般集成在车辆***中。
如图5所示，该装置包括：第一获取模块510、第二获取模块520和展示模块530，其中，
第一获取模块510，用于获取通过车辆内传感器数据融合算法以预设仿真时长处理得到的中间变量和结果数据；
第二获取模块520，用于获取车辆在预设行车时长的场景视频，其中，所述预设行车时长与所述预设仿真时长为同一时间信息；
展示模块530，用于控制第一预设窗口和第二预设窗口同步进行信息展示，其中，所述第一预设窗口展示的信息为所述中间变量和结果数据，所述第二预设窗口展示的信息为所述场景视频。
本实施例提供的数据和视频同步显示显示装置，通过获取通过车辆内传感器数据融合算法以预设仿真时长处理得到的中间变量和结果数据；获取车辆在预设行车时长的场景视频，其中，所述预设行车时长与所述预设仿真时长为同一时间信息；控制第一预设窗口和第二预设窗口同步进行信息展示，其中，所述第一预设窗口展示的信息为所述中间变量和结果数据，所述第二预设窗口展示的信息为所述场景视频。解决不便于确定结果数据和场景视频之间的对应关系的问题，实现结果数据的可视化。进而可以精准定位运行过程发生错误的时间，便于技术人员发现错误发生的过程并进行复现，便于技术人员观测调试参数。
在上述实施例的基础上，第一获取模块510，具体用于：
将多个传感器获取到的传感器数据输入预设算法模型，得到的输出结果包括中间变量和结果数据；
基于预设仿真时长，在输出结果中截取中间变量和结果数据；
基于所述预设算法模型的变量名，确定所述中间变量和所述结果数据的变量名。
在上述实施例的基础上，第二获取模块520，具体用于：
根据所述视频的总帧数和总时间，确定视频帧的时间间隔；
根据视频帧的时间间隔和视频帧数，控制获取所述场景视频的预设行车时长与所述预设仿真时长相等；
基于所述预设行车时长，获取车辆运行中的场景视频。
在上述实施例的基础上，展示模块530，具体用于：
以采集传感数据的传感器为原点、以车辆与传感器的相对位置为横纵坐标，在第一预设窗口内显示时间信息、预设仿真时长的所述中间变量和所述结果数据；
在第二预设窗口内显示预设行车时长的所述场景视频。
在上述实施例的基础上，***还可以包括：
确定模块，用于根据所述中间变量、所述结果数据和所述视频的显示信息，确定错误信息；
修改模块，用于基于所述错误信息，修改所述算法模型参数，并继续执行获取通过车辆内传感器数据融合算法以预设仿真时长处理得到的中间变量和结果数据。
在上述实施例的基础上，***还可以包括：
关联模块，用于关联存储所述视频、所述中间变量、所述结果数据和所述错误信息。
本发明实施例所提供的数据和视频同步显示装置可执行本发明任意实施例所提供的数据和视频同步显示方法，具备执行方法相应的功能模块和有益效果。
实施例四
图6为本发明实施例四提供的一种车辆的结构示意图，如图6所示，该车辆包括处理器610、存储器620、传感装置630和摄像头640；车辆中处理器610的数量可以是一个或多个，图6中以一个处理器610为例；车辆中的处理器610、存储器620、传感装置630和摄像头640可以通过总线或其他方式连接，图6中以通过总线连接为例。
存储器620作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本发明实施例中的数据和视频同步显示方法对应的程序指令/模块(例如，数据和视频同步显示装置中的第一获取模块510、第二获取模块520和展示模块530)。处理器610通过运行存储在存储器520中的软件程序、指令以及模块，从而执行车辆的各种功能应用以及数据处理，即实现上述的数据和视频同步显示方法。
存储器620可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作***、至少一个功能所需的应用程序；存储数据区可存储根据终端的使用所创建的数据等。此外，存储器620可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器620可进一步包括相对于处理器610远程设置的存储器，这些远程存储器可以通过网络连接至车辆。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
传感装置630，用于获取所述车辆运行中的传感数据；摄像头640，用于获取所述车辆运行中的场景视频。
本发明实施例提供的车辆可以执行上述实施例提供的数据和视频同步显示方法，具备相应的功能和有益效果。
实施例五
本发明实施例五还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行一种数据和视频同步显示方法，该方法包括：
获取通过车辆内传感器数据融合算法以预设仿真时长处理得到的中间变量和结果数据；
获取车辆在预设行车时长的场景视频，其中，所述预设行车时长与所述预设仿真时长为同一时间信息；
控制第一预设窗口和第二预设窗口同步进行信息展示，其中，所述第一预设窗口展示的信息为所述中间变量和结果数据，所述第二预设窗口展示的信息为所述场景视频。
当然,本发明实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的方法操作,还可以执行本发明任意实施例所提供的数据和视频同步显示方法中的相关操作.
通过以上关于实施方式的描述，所属领域的技术人员可以清楚地了解到，本发明可借助软件及必需的通用硬件来实现，当然也可以通过硬件实现，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
值得注意的是，上述数据和视频同步显示装置的实施例中，所包括的各个单元和模块只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明的保护范围。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。
Claims (10)
1.一种数据和视频同步显示方法，其特征在于，包括：
获取通过车辆内传感器数据融合算法以预设仿真时长处理得到的中间变量和结果数据；
获取车辆在预设行车时长的场景视频，其中，所述预设行车时长与所述预设仿真时长为同一时间信息；
控制第一预设窗口和第二预设窗口同步进行信息展示，其中，所述第一预设窗口展示的信息为所述中间变量和结果数据，所述第二预设窗口展示的信息为所述场景视频。
2.根据权利要求1所述的数据和视频同步显示方法，其特征在于，获取车辆在预设行车时长内的场景视频，其中，所述预设行车时长与所述预设仿真时长为同一时间信息，包括：
根据所述视频的总帧数和总时间，确定视频帧的时间间隔；
根据视频帧的时间间隔和视频帧数，控制获取所述场景视频的预设行车时长与所述预设仿真时长相等；
基于所述预设行车时长，获取车辆运行中的场景视频。
3.根据权利要求1所述的数据和视频同步显示方法，其特征在于，获取通过车辆内传感器数据融合算法以预设仿真时长处理得到的中间变量和结果数据，包括：
将多个传感器获取到的传感器数据输入预设算法模型，得到的输出结果包括中间变量和结果数据；
基于预设仿真时长，在输出结果中截取中间变量和结果数据。
4.根据权利要求3所述的数据和视频同步显示方法，其特征在于，在基于预设仿真步长，在输出结果中获取中间变量和结果数据之后，还包括：
基于所述预设算法模型的变量名，确定所述中间变量和所述结果数据的变量名。
5.根据权利要求1所述的数据和视频同步显示方法，其特征在于，在第一预设窗口和第二预设窗口分别显示所述中间变量和所述结果数据以及所述视频，包括：
在第一预设窗口内显示时间信息、预设仿真时长的所述中间变量和所述结果数据，其中，原点为采集传感数据的传感器位置、横纵坐标为车辆与传感器的相对位置；
在第二预设窗口内显示预设行车时长的所述场景视频。
6.根据权利要求1所述的数据和视频同步显示方法，其特征在于，在控制第一预设窗口和第二预设窗口同步进行信息展示之后，还包括：
根据所述中间变量、所述结果数据和所述场景视频的显示信息，确定错误信息；
基于所述错误信息，修改所述算法模型参数，并继续执行获取通过车辆内传感器数据融合算法以预设仿真时长处理得到的中间变量和结果数据。
7.根据权利要求6所述的数据和视频同步显示方法，其特征在于，在控制第一预设窗口和第二预设窗口同步进行信息展示之后，还包括：
关联存储所述场景视频、所述中间变量、所述结果数据和所述错误信息。
8.一种数据和视频同步显示装置，其特征在于，包括：第一获取模块、第二获取模块和展示模块，其中，
第一获取模块，用于获取通过车辆内传感器数据融合算法以预设仿真时长处理得到的中间变量和结果数据；
第二获取模块，用于获取车辆在预设行车时长的场景视频，其中，所述预设行车时长与所述预设仿真时长为同一时间信息；
展示模块，用于控制第一预设窗口和第二预设窗口同步进行信息展示，其中，所述第一预设窗口展示的信息为所述中间变量和结果数据，所述第二预设窗口展示的信息为所述场景视频。
9.一种车辆，其特征在于，所述车辆包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序；
传感装置，用于获取所述车辆运行中的传感数据；
摄像头，用于获取所述车辆运行中的场景视频；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-7中任一所述的数据和视频同步显示方法。
10.一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-7中任一所述的数据和视频同步显示方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011239400.XA CN112383674A (zh) | 2020-11-09 | 2020-11-09 | 一种数据和视频同步显示方法、装置、车辆及介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011239400.XA CN112383674A (zh) | 2020-11-09 | 2020-11-09 | 一种数据和视频同步显示方法、装置、车辆及介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112383674A true CN112383674A (zh) | 2021-02-19 |
Family
ID=74578861
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011239400.XA Pending CN112383674A (zh) | 2020-11-09 | 2020-11-09 | 一种数据和视频同步显示方法、装置、车辆及介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112383674A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113984091A (zh) * | 2021-11-17 | 2022-01-28 | 中国第一汽车股份有限公司 | 车辆行驶的定位测评***、方法、设备及介质 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111127701A (zh) * | 2019-12-24 | 2020-05-08 | 武汉光庭信息技术股份有限公司 | 车辆失效场景检测方法及*** |
| CN111127651A (zh) * | 2020-03-31 | 2020-05-08 | 江苏广宇科技产业发展有限公司 | 基于高精度可视化技术的自动驾驶测试开发方法及装置 |
| CN111563313A (zh) * | 2020-03-18 | 2020-08-21 | 交通运输部公路科学研究所 | 一种行车事件模拟再现方法、***、设备及存储介质 |
| CN111783225A (zh) * | 2020-06-28 | 2020-10-16 | 北京百度网讯科技有限公司 | 仿真***中场景处理的方法及装置 |
| CN111897305A (zh) * | 2020-06-02 | 2020-11-06 | 浙江吉利汽车研究院有限公司 | 一种基于自动驾驶的数据处理方法、装置、设备及介质 |
-
2020
- 2020-11-09 CN CN202011239400.XA patent/CN112383674A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111127701A (zh) * | 2019-12-24 | 2020-05-08 | 武汉光庭信息技术股份有限公司 | 车辆失效场景检测方法及*** |
| CN111563313A (zh) * | 2020-03-18 | 2020-08-21 | 交通运输部公路科学研究所 | 一种行车事件模拟再现方法、***、设备及存储介质 |
| CN111127651A (zh) * | 2020-03-31 | 2020-05-08 | 江苏广宇科技产业发展有限公司 | 基于高精度可视化技术的自动驾驶测试开发方法及装置 |
| CN111897305A (zh) * | 2020-06-02 | 2020-11-06 | 浙江吉利汽车研究院有限公司 | 一种基于自动驾驶的数据处理方法、装置、设备及介质 |
| CN111783225A (zh) * | 2020-06-28 | 2020-10-16 | 北京百度网讯科技有限公司 | 仿真***中场景处理的方法及装置 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113984091A (zh) * | 2021-11-17 | 2022-01-28 | 中国第一汽车股份有限公司 | 车辆行驶的定位测评***、方法、设备及介质 |
| CN113984091B (zh) * | 2021-11-17 | 2024-03-15 | 中国第一汽车股份有限公司 | 车辆行驶的定位测评***、方法、设备及介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| NL2024682B1 (en) | Assembly monitoring method and device based on deep learning, and readable storage medium | |
| CN113168524A (zh) | 用于测试驾驶员辅助***的方法和设备 | |
| CN105729466B (zh) | 机器人识别*** | |
| CN112863234B (zh) | 一种车位显示方法、装置、电子设备及存储介质 | |
| CN106327461B (zh) | 一种用于监测的图像处理方法及装置 | |
| JPWO2019069436A1 (ja) | 監視システムおよび監視方法 | |
| CN108122245B (zh) | 一种目标行为描述方法、装置和监控设备 | |
| CN110084885A (zh) | 一种点云和图像优化方法、装置、设备和存储介质 | |
| CN112383674A (zh) | 一种数据和视频同步显示方法、装置、车辆及介质 | |
| EP2675150B1 (en) | Apparatus and method for providing image | |
| CN111079535B (zh) | 一种人体骨架动作识别方法、装置及终端 | |
| CN113021329B (zh) | 一种机器人运动控制方法、装置、可读存储介质及机器人 | |
| CN112702877B (zh) | 机柜内部远程监控诊断方法及***、机柜装置和存储介质 | |
| EP4016450A1 (en) | State determination device and state determination method | |
| JP6780983B2 (ja) | 画像処理システム | |
| Wright et al. | Fast in-situ mesh generation using orb-slam2 and openmvs | |
| CN114679569A (zh) | 基于三维建模的产线可视化监控方法、***和存储介质 | |
| CN114882073A (zh) | 目标跟踪方法和装置，介质和计算机设备 | |
| KR20230104592A (ko) | 센서 데이터의 주석을 다는 방법 및 시스템 | |
| CN104113711A (zh) | 摄像设备及*** | |
| CN112330977A (zh) | 一种自动泊车的方法和装置 | |
| US20240129637A1 (en) | Display screen flicker detection | |
| CN115988273B (zh) | 一种视频监控设备状态监测方法、设备及介质 | |
| CN116758494B (zh) | 一种网联车车载视频智能监控方法及*** | |
| WO2024103482A1 (zh) | 一种摄像机红外视频着色方法、装置及电子设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210219 |
|
| RJ01 | Rejection of invention patent application after publication |