CN113312367A - 产量效率的重算方法、装置、存储介质及处理器 - Google Patents
产量效率的重算方法、装置、存储介质及处理器 Download PDFInfo
- Publication number
- CN113312367A CN113312367A CN202110712158.1A CN202110712158A CN113312367A CN 113312367 A CN113312367 A CN 113312367A CN 202110712158 A CN202110712158 A CN 202110712158A CN 113312367 A CN113312367 A CN 113312367A
- Authority
- CN
- China
- Prior art keywords
- intermediate value
- timestamp
- message
- recalculation
- real
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 50
- 238000004364 calculation method Methods 0.000 claims abstract description 71
- 238000010586 diagram Methods 0.000 description 13
- 230000008569 process Effects 0.000 description 12
- 238000004590 computer program Methods 0.000 description 11
- 238000012545 processing Methods 0.000 description 8
- 230000008859 change Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 230000004048 modification Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 239000004753 textile Substances 0.000 description 1
- 238000009941 weaving Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/23—Updating
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
- G06F16/24552—Database cache management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2457—Query processing with adaptation to user needs
- G06F16/24578—Query processing with adaptation to user needs using ranking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Computing Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明实施例提供一种产量效率的重算方法、装置、处理器及存储介质。方法包括：在获取到重算请求时，获取历史报文；将历史报文组装为对应的中间值结构；将中间值结构对应的中间值发送至流式计算模块的重算消息队列；通过流式计算模块更新中间值，并开启实时计算；根据更新后的中间值和实时计算的结果确定对应的实时产量效率。以此方式对产量效率进行计算时，可以实时对任意一个物联网设备的产量效率进行重新计算，并且计算更加方便简单。
Description
技术领域
本发明涉及计算机技术领域，具体地涉及一种产量效率的重算方法、装置、存储介质及处理器。
背景技术
现有织厂***厂商大都为本地化部署的***，监控数据在本地即席查询机台数据进行计算，存在诸多风险，一旦中位机损坏或故障，导致数据丢失严重，数据检索资源消耗大；想要云端办公成本高昂。
现有技术中，飞梭采用物联网+sass技术方案，单个设备实时上报采集数据至云端服务器，云端基于流式计算平台实现海量物联网数据实时计算织厂的各项指标，提高了数据的安全性，保证了数据实时性，又能较低的代价实现与云工厂。设备上云后对云端来说有海量的物联网数据需要及时计算，既要求保证时效性又要求保证业务上的可修改撤销性，而这样的要求对流式计算框架是致命的冲击。流失计算的特长便是流入的数据实时计算并输出，保证高吞吐和时效性。而业务数据的修改撤销，无法实现对某个别设备的某个区间数据回拨。
发明内容
本发明实施例的目的是提供一种产量效率的重算方法、装置、存储介质及处理器。
为了实现上述目的，本发明第一方面提供一种产量效率的重算方法，包括：
在获取到重算请求时，获取历史报文；
将所述历史报文组装为对应的中间值结构；
将所述中间值结构对应的中间值发送至流式计算模块的重算消息队列；
通过所述流式计算模块更新所述中间值，并开启实时计算；
根据更新后的中间值和实时计算的结果确定对应的实时产量效率。
可选地，获取历史报文包括：通过预设的报文查询结构获取历史报文，所述预设的报文查询结构是基于hbase的特性确定的。
可选地，中间值结构包括业务核心字段班次、轴品种、每个采集器和报文批次首尾数据中的至少一者。
可选地，通过所述流式计算模块更新所述中间值包括：
获取现有的中间值及对应的时间戳；
将所述现有的中间值的第一时间戳与所述中间值结构对应的中间值的第二时间戳进行对比；
在所述第一时间戳早于所述第二时间戳时，对所述第二时间戳对应的中间值进行清除，重新计算以确定最新的中间值；
在所述第二时间戳早于所述第一时间戳时，确定所述中间值结构对应的中间值为最新的中间值，属于有效消息。
可选地，方法还包括：获取新的报文；根据新的报文更新所述中间值。
本发明第二方面提供一种产量效率的重算装置，包括：
报文获取模块，用于在获取到重算请求时，获取历史报文；
中间值更新模块，用于将所述历史报文组装为对应的中间值结构；将所述中间值结构对应的中间值发送至流式计算模块的重算消息队列；通过所述流式计算模块更新所述中间值，并开启实时计算；
效率计算模块，用于根据更新后的中间值和实时计算的结果确定对应的实时产量效率。
本发明第三方面提供一种机器可读存储介质，该机器可读存储介质上存储有指令，该指令在被处理器执行时使得所述处理器被配置成执行上述的产量效率的重算方法。
本发明第四方面提供一种处理器，被配置成执行上述的产量效率的重算方法。
上述产量效率的重算方法，通过在获取到重算请求时，获取历史报文，将历史报文组装为对应的中间值结构，将中间值结构对应的中间值发送至流式计算模块的重算消息队列，通过流式计算模块更新中间值，并开启实时计算，根据更新后的中间值和实时计算的结果确定对应的实时产量效率，以此方式对产量效率进行计算时，可以实时对任意一个物联网设备的产量效率进行重新计算，并且计算更加方便简单。
本发明实施例的其它特征和优点将在随后的具体实施方式部分予以详细说明。
附图说明
附图是用来提供对本发明实施例的进一步理解，并且构成说明书的一部分，与下面的具体实施方式一起用于解释本发明实施例，但并不构成对本发明实施例的限制。在附图中：
图1示意性示出了根据本发明实施例的产量效率的重算方法的流程示意图；
图2示意性示出了根据本发明实施例的产量效率的重算装置的结构框图；
图3示意性示出了根据本发明实施例的计算机设备的内部结构图。
具体实施方式
以下结合附图对本发明实施例的具体实施方式进行详细说明。应当理解的是，此处所描述的具体实施方式仅用于说明和解释本发明实施例，并不用于限制本发明实施例。
图1示意性示出了根据本发明实施例的产量效率的重算方法的流程示意图。如图1所示，在本发明一实施例中，提供了一种产量效率的重算方法，包括以下步骤：
步骤101，在获取到重算请求时，获取历史报文。
步骤102，将历史报文组装为对应的中间值结构。
步骤103，将中间值结构对应的中间值发送至流式计算模块的重算消息队列。
步骤104，通过流式计算模块更新中间值，并开启实时计算。
步骤105，根据更新后的中间值和实时计算的结果确定对应的实时产量效率。
在传统的数据处理流程中，总是先收集数据，然后将数据放到数据库中。当人们需要的时候通过数据库对数据做查询，得到答案或进行相关的处理。这样看起来虽然非常合理，但是结果却非常的紧凑，尤其是在一些实时搜索应用环境中的某些具体问题，类似于MapReduce方式的离线处理并不能很好地解决问题。而流计算方式可以很好地对大规模流动数据在不断变化的运动过程中实时地进行分析，捕捉到可能有用的信息，并把结果发送到下一计算节点。
在本实施例中，针对织厂业务需求的实时维度信息可撤销修改的特点，对流式计算中间值做针对性设计。将一步可完成的计算分拆为3步。预留一层中间缓存层，对计算过程的中间值做增量缓存。在某个物联网设备对应的织机需要做重播计算时，可以发起重算请求，然后在处理器获取到重算请求后，可以从数据库中获取到历史报文，并将历史报文组装为对应的中间值结构。具体地，在一个实施例中，中间值结构包括业务核心字段班次、轴品种、每个采集器和报文批次收尾数据中的至少一者。
在一个实施例中，获取历史报文包括：通过预设的报文查询结构获取历史报文，预设的报文查询结构是基于hbase的特性确定的；HBase是一个分布式的、面向列的开源数据库。
针对重算特征可以设计便于快速检索的存储数据结构，实现快速检索的查询接口服务。可以基于hbase的特性设计如下数据结构，利用rowkey+column实现百亿数据中秒计检索所需数据。具体地，高效查询的数据结构如下：
Rowkey：hash(20)_机台_日期
Column：数据时间
Columnvalue：数据点
然后，可以将中间值结构对应的中间值发送至流式计算模块的重算消息队列。例如，当业务***修改了某台织机的排版，布种等参数时，则需要回播数据，即需要对当班织机的产量效率进行重算。处理器在接收到重算请求后，可以请求报文查询服务，使用明细报文汇总并组装出流式计算服务所需的中间值，推送至实时计算专用重算消息队列。该中间值目的是推送给实时计算服务，实时计算服务基于该结构更新实时计算服务内存中的中间值，以达到改变实时计算内部计算的中间值，改变实时计算结果为正确的。
在一个实施例中，通过流式计算模块更新中间值包括：获取现有的中间值及对应的时间戳；将现有的中间值的第一时间戳与中间值结构对应的中间值的第二时间戳进行对比；在第一时间戳早于第二时间戳时，对第二时间戳对应的中间值进行清除，重新计算以确定最新的中间值；在第二时间戳早于第一时间戳时，确定中间值结构对应的中间值为最新的中间值，属于有效消息。
通过流式计算对产品效率进行实时计算时，可以先获取到现有的中间值及对应的时间戳，即获取到已经计算出来的，缓存好了的中间值以及该中间值所对应的时间戳。并将现有的中间值的第一时间戳与中间值结构对应的中间值的第二时间戳进行对比，即此对比方法是通过时间戳来确定哪个数据是最新的数据。若是第一时间戳早于第二时间戳，则表明现有的中间值比中间值结构对应的中间值的数据更加接近当前时间，即现有的中间值的数据更加新颖。则可以对第二时间戳对应的中间值进行清除，即清除中间值结构对应的中间值，并重新计算中间值，以确定当前最新数据所对应的中间值，以保证最终计算出来的产品效率的准确性。同样地，若是第二时间戳早于第一时间戳，表明中间值结构对应的中间值比现有的中间值的数据更加接近当前时间，即中间值结构对应的中间值的数据更加新颖。那么可以确定中间值结构对应的中间值为最新的中间值，属于有效消息。
在一个实施例中，上述方法还包括：获取新的报文；根据新的报文更新中间值。
在织机的运行过程中，会不断产生新的报文数据，后续在获取到新的报文数据时，可以根据新的报文数据计算出对应的中间值，然后对比新计算出来的中间值和已经缓存的中间值的时间戳。还可以对比批次、预设的关键值等数据，将时间戳显示为更接近为当前时间的中间值确定为有效的数值，以对中间值进行更新，如此，则可以较小的代价实现实时计算和随机机台重播的实时产量效率重算过程。
例如，用户延迟上轴等业务场景，当班的实时计算均是错误的。此时业务***调用重算服务，重算服务开启重算逻辑，调用高速查询服务，获取机台班次内的中间值结构。具体地，在一个实施例中，中间值结构的代码可以如下所示：
然后，重算服务可以根据查询结果进行类型识别，若此时为效率实时重算，则组装以下重算消息推送给实时计算服务。例如，消息结构可以如下所示：
此时，流式计算服务可以接收到该消息，更新中间值后，并触发一次实时计算以保证下游收到正确的产量效率的计算结果。
上述产量效率的重算方法，通过在获取到重算请求时，获取历史报文，将历史报文组装为对应的中间值结构，将中间值结构对应的中间值发送至流式计算模块的重算消息队列，通过流式计算模块更新中间值，并开启实时计算，根据更新后的中间值和实时计算的结果确定对应的实时产量效率，以此方式对产量效率进行计算时，可以实时对任意一个物联网设备的产量效率进行重新计算，并且计算更加方便简单。
该重算算法模式参考织机实时计算分析而来，实时计算产量效率时，主要是记录每个批次的首尾信息，根据首尾信息计算每个批次的产量效率，再进行累加得到产量效率计算，此算法可以看出，实际计算过程中，并不关心织机运行过程中状态复杂的变化过程，只关心以批次分组的最后结果，因此重算时，只需获取织机批次内的首尾信息，再根据批次的首尾信息修改流式计算模块中间值进行计算，以此达到重算目的，此算法跳过了织机运行过程中复杂的状态变化，无需再去查询织机复杂的状态明细报文，大大减少了数据的查询量，降低了程序设计的复杂性，提高了重算程序效率，达到了计算的最简单化。
在一个实施例中，如图2所示，提供了一种产量效率的重算装置，包括：
报文获取模块201，用于在获取到重算请求时，获取历史报文；
中间值更新模块202，用于将历史报文组装为对应的中间值结构；将中间值结构对应的中间值发送至流式计算模块的重算消息队列；通过流式计算模块更新中间值，并开启实时计算；
效率计算模块203，用于根据更新后的中间值和实时计算的结果确定对应的实时产量效率。
在一个实施例中，报文获取模块201还用于通过预设的报文查询结构获取历史报文，预设的报文查询结构是基于hbase的特性确定的。
在一个实施例中，中间值结构包括业务核心字段班次、轴品种、每个采集器和报文批次收尾数据中的至少一者。
在一个实施例中，中间值更新模块还用于获取现有的中间值及对应的时间戳；将现有的中间值的第一时间戳与中间值结构对应的中间值的第二时间戳进行对比；在第一时间戳早于第二时间戳时，对第二时间戳进行清除，重新计算以确定最新的中间值；在第二时间戳早于第一时间戳时，确定中间值结构对应的中间值为最新的中间值，属于有效消息。
在一个实施例中，中间值更新模块还用于获取新的报文；根据新的报文更新中间值。
产量效率的重算装置包括处理器和存储器，上述报文获取模块、中间值更新模块和效率计算模块等均作为程序单元存储在存储器中，由处理器执行存储在存储器中的上述程序模块中实现相应的功能。
处理器中包含内核，由内核去存储器中调取相应的程序单元。内核可以设置一个或以上，通过调整内核参数来实现产量效率的重算方法。
存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)，存储器包括至少一个存储芯片。
本发明实施例提供了一种存储介质，其上存储有程序，该程序被处理器执行时实现上述产量效率的重算方法。
本发明实施例提供了一种处理器，所述处理器用于运行程序，其中，所述程序运行时执行上述产量效率的重算方法。
在一个实施例中，提供了一种计算机设备，该计算机设备可以是服务器，其内部结构图可以如图3所示。该计算机设备包括通过***总线连接的处理器A01、网络接口A02、存储器(图中未示出)和数据库(图中未示出)。其中，该计算机设备的处理器A01用于提供计算和控制能力。该计算机设备的存储器包括内存储器A03和非易失性存储介质A04。该非易失性存储介质A04存储有操作***B01、计算机程序B02和数据库(图中未示出)。该内存储器A03为非易失性存储介质A04中的操作***B01和计算机程序B02的运行提供环境。该计算机设备的数据库用于存储历史报文等数据。该计算机设备的网络接口A02用于与外部的终端通过网络连接通信。该计算机程序B02被处理器A01执行时以实现一种产量效率的重算方法。
本领域技术人员可以理解，图3中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
本发明实施例提供了一种设备，设备包括处理器、存储器及存储在存储器上并可在处理器上运行的程序，处理器执行程序时实现以下步骤：在获取到重算请求时，获取历史报文；将历史报文组装为对应的中间值结构；将中间值结构对应的中间值发送至流式计算模块的重算消息队列；通过流式计算模块更新中间值，并开启实时计算；根据更新后的中间值和实时计算的结果确定对应的实时产量效率。
在一个实施例中，获取历史报文包括：通过预设的报文查询结构获取历史报文，预设的报文查询结构是基于hbase的特性确定的。
在一个实施例中，中间值结构包括业务核心字段班次、轴品种、每个采集器和报文批次收尾数据中的至少一者。
在一个实施例中，通过流式计算模块更新中间值包括：获取现有的中间值及对应的时间戳；将现有的中间值的第一时间戳与中间值结构对应的中间值的第二时间戳进行对比；在第一时间戳早于第二时间戳时，对第二时间戳对应的中间值进行清除，重新计算以确定最新的中间值；在第二时间戳早于第一时间戳时，确定中间值结构对应的中间值为最新的中间值，属于有效消息。
在一个实施例中，方法还包括：获取新的报文；根据新的报文更新中间值。
本申请还提供了一种计算机程序产品，当在数据处理设备上执行时，适于执行初始化有如下方法步骤的程序：在获取到重算请求时，获取历史报文；将历史报文组装为对应的中间值结构；将中间值结构对应的中间值发送至流式计算模块的重算消息队列；通过流式计算模块更新中间值，并开启实时计算；根据更新后的中间值和实时计算的结果确定对应的实时产量效率。
在一个实施例中，获取历史报文包括：通过预设的报文查询结构获取历史报文，预设的报文查询结构是基于hbase的特性确定的。
在一个实施例中，中间值结构包括业务核心字段班次、轴品种、每个采集器和报文批次收尾数据中的至少一者。
在一个实施例中，通过流式计算模块更新中间值包括：获取现有的中间值及对应的时间戳；将现有的中间值的第一时间戳与中间值结构对应的中间值的第二时间戳进行对比；在第一时间戳早于第二时间戳时，对第二时间戳对应的中间值进行清除，重新计算以确定最新的中间值；在第二时间戳早于第一时间戳时，确定中间值结构对应的中间值为最新的中间值，属于有效消息。
在一个实施例中，方法还包括：获取新的报文；根据新的报文更新中间值。
本领域内的技术人员应明白，本申请的实施例可提供为方法、***、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(***)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中，计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)。存储器是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。以上仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。
Claims (10)
1.一种产量效率的重算方法，其特征在于，所述方法包括：
在获取到重算请求时，获取历史报文；
将所述历史报文组装为对应的中间值结构；
将所述中间值结构对应的中间值发送至流式计算模块的重算消息队列；
通过所述流式计算模块更新所述中间值，并开启实时计算；
根据更新后的中间值和实时计算的结果确定对应的实时产量效率。
2.根据权利要求1所述的方法，其特征在于，所述获取历史报文包括：
通过预设的报文查询结构获取历史报文，所述预设的报文查询结构是基于hbase的特性确定的。
3.根据权利要求1所述的方法，其特征在于，所述中间值结构包括业务核心字段班次、轴品种、每个采集器和报文批次收尾数据中的至少一者。
4.根据权利要求1所述的方法，其特征在于，所述通过所述流式计算模块更新所述中间值包括：
获取现有的中间值及对应的时间戳；
将所述现有的中间值的第一时间戳与所述中间值结构对应的中间值的第二时间戳进行对比；
在所述第一时间戳早于所述第二时间戳时，对所述第二时间戳对应的中间值进行清除，重新计算以确定最新的中间值；
在所述第二时间戳早于所述第一时间戳时，确定所述中间值结构对应的中间值为最新的中间值，属于有效消息。
5.根据权利要求1所述的方法，其特征在于，所述方法还包括：
获取新的报文；
根据所述新的报文更新所述中间值。
6.一种产量效率的重算装置，其特征在于，所述装置包括：
报文获取模块，用于在获取到重算请求时，获取历史报文；
中间值更新模块，用于将所述历史报文组装为对应的中间值结构；将所述中间值结构对应的中间值发送至流式计算模块的重算消息队列；通过所述流式计算模块更新所述中间值，并开启实时计算；
效率计算模块，用于根据更新后的中间值和实时计算的结果确定对应的实时产量效率。
7.根据权利要求6所述的装置，其特征在于，所述中间值更新模块还用于获取现有的中间值及对应的时间戳；将所述现有的中间值的第一时间戳与所述中间值结构对应的中间值的第二时间戳进行对比；在所述第一时间戳早于所述第二时间戳时，对所述第二时间戳进行清除，重新计算以确定最新的中间值；在所述第二时间戳早于所述第一时间戳时，确定所述中间值结构对应的中间值为最新的中间值，属于有效消息。
8.根据权利要求6所述的装置，其特征在于，所述中间值更新模块还用于获取新的报文；根据所述新的报文更新所述中间值。
9.一种机器可读存储介质，该机器可读存储介质上存储有指令，其特征在于，该指令在被处理器执行时使得所述处理器被配置成执行根据权利要求1至5中任一项所述的产量效率的重算方法。
10.一种处理器，其特征在于，被配置成执行根据权利要求1至5中任意一项所述的产量效率的重算方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110712158.1A CN113312367A (zh) | 2021-06-25 | 2021-06-25 | 产量效率的重算方法、装置、存储介质及处理器 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110712158.1A CN113312367A (zh) | 2021-06-25 | 2021-06-25 | 产量效率的重算方法、装置、存储介质及处理器 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113312367A true CN113312367A (zh) | 2021-08-27 |
Family
ID=77380403
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110712158.1A Pending CN113312367A (zh) | 2021-06-25 | 2021-06-25 | 产量效率的重算方法、装置、存储介质及处理器 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113312367A (zh) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20110225129A1 (en) * | 2010-03-15 | 2011-09-15 | Symantec Corporation | Method and system to scan data from a system that supports deduplication |
| US20120310934A1 (en) * | 2011-06-03 | 2012-12-06 | Thomas Peh | Historic View on Column Tables Using a History Table |
| WO2019144761A1 (zh) * | 2018-01-24 | 2019-08-01 | ***股份有限公司 | 一种数据同步方法和分布式***、设备 |
| CN111046077A (zh) * | 2019-10-29 | 2020-04-21 | 口碑(上海)信息技术有限公司 | 数据的获取方法及装置、存储介质、终端 |
| CN111077870A (zh) * | 2020-01-06 | 2020-04-28 | 浙江中烟工业有限责任公司 | 一种基于流计算的opc数据实时采集监控智能***及方法 |
-
2021
- 2021-06-25 CN CN202110712158.1A patent/CN113312367A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20110225129A1 (en) * | 2010-03-15 | 2011-09-15 | Symantec Corporation | Method and system to scan data from a system that supports deduplication |
| US20120310934A1 (en) * | 2011-06-03 | 2012-12-06 | Thomas Peh | Historic View on Column Tables Using a History Table |
| WO2019144761A1 (zh) * | 2018-01-24 | 2019-08-01 | ***股份有限公司 | 一种数据同步方法和分布式***、设备 |
| CN111046077A (zh) * | 2019-10-29 | 2020-04-21 | 口碑(上海)信息技术有限公司 | 数据的获取方法及装置、存储介质、终端 |
| CN111077870A (zh) * | 2020-01-06 | 2020-04-28 | 浙江中烟工业有限责任公司 | 一种基于流计算的opc数据实时采集监控智能***及方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109951323B (zh) | 一种日志分析方法和*** | |
| CN111258978B (zh) | 一种数据存储的方法 | |
| CN110633277A (zh) | 时序数据存储方法、装置、计算机设备和存储介质 | |
| CN109408501B (zh) | 一种位置数据的处理方法、装置、服务器及存储介质 | |
| US11500879B2 (en) | Method, device, and program product for managing index of streaming data storage system | |
| CN103731498B (zh) | 一种基于副本选择的大数据实时查询***负载均衡方法 | |
| CN111523004B (zh) | 一种边缘计算网关数据的存储方法及*** | |
| CN111752945B (zh) | 一种基于容器和层次模型的时序数据库数据交互方法和*** | |
| CN108399175B (zh) | 一种数据存储、查询方法及其装置 | |
| US20200293543A1 (en) | Method and apparatus for transmitting data | |
| CN115017159A (zh) | 数据处理方法及装置、存储介质及电子设备 | |
| CN116233164A (zh) | 用于采集设备数据的方法、装置、存储介质及处理器 | |
| CN114398520A (zh) | 数据检索方法、***、装置、电子设备及存储介质 | |
| CN111291054A (zh) | 一种数据处理方法、装置、计算机设备和存储介质 | |
| CN111666260A (zh) | 数据处理方法及装置 | |
| CN113301558B (zh) | 一种消息传输方法、设备、***及存储介质 | |
| CN113312367A (zh) | 产量效率的重算方法、装置、存储介质及处理器 | |
| CN110597830B (zh) | 实时指标生成方法和***、电子设备及存储介质 | |
| CN112835896B (zh) | 一种实时数据库数据热点均衡方法、装置、设备及介质 | |
| CN113360558B (zh) | 数据处理方法、数据处理装置、电子设备及存储介质 | |
| US11429626B2 (en) | Method, device, and program product for managing index of storage system | |
| CN113360576A (zh) | 一种基于Flink Streaming的电网海量数据实时处理方法及装置 | |
| CN110798222B (zh) | 一种数据压缩方法及装置 | |
| Hao et al. | A keyword-aware optimal route query algorithm on large-scale road networks | |
| CN108737522B (zh) | 一种消息的处理方法、装置和*** |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210827 |