CN110716813A - 数据流处理方法、装置、可读存储介质及处理器 - Google Patents

数据流处理方法、装置、可读存储介质及处理器 Download PDF

Info

Publication number
CN110716813A
CN110716813A CN201910877474.7A CN201910877474A CN110716813A CN 110716813 A CN110716813 A CN 110716813A CN 201910877474 A CN201910877474 A CN 201910877474A CN 110716813 A CN110716813 A CN 110716813A
Authority
CN
China
Prior art keywords
data
memory
data stream
divided data
dividing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910877474.7A
Other languages
English (en)
Inventor
崔云鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seashell Housing Beijing Technology Co Ltd
Original Assignee
Beike Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beike Technology Co Ltd filed Critical Beike Technology Co Ltd
Priority to CN201910877474.7A priority Critical patent/CN110716813A/zh
Publication of CN110716813A publication Critical patent/CN110716813A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • G06F9/546—Message passing systems or structures, e.g. queues
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/466—Transaction processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00—Indexing scheme relating to G06F9/00
    • G06F2209/54—Indexing scheme relating to G06F9/54
    • G06F2209/548—Queue

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明实施例提供一种数据流处理方法、装置、可读存储介质及处理器，属于数据处理技术领域。该方法包括：将所述数据流划分为多份划分数据；针对所述多份划分数据中的至少一份划分数据，为每份划分数据配置数据的业务主键；根据所述业务主键，将所述每份划分数据中的同一类数据划分至同一内存队列，以形成多个内存队列；对所述多个内存队列进行并行处理。该数据流处理方法、装置、可读存储介质及处理器可以保证数据业务上的一致性的同时，实现数据流的快速处理。

Description

数据流处理方法、装置、可读存储介质及处理器
技术领域
本发明涉及数据处理技术领域，具体地涉及一种数据流处理方法、装置、可读存储介质及处理器。
背景技术
kafka或rockmq可以当作消息组件，可以通过对同一个主题(topic)进行划分(partition)处理，来将数据分成几份，但是每份划分数据同一时间只能由一个消费者组的一个消费者来处理，如果想提高消费效率，常规的方式可以通过调整划分数量来增加消费者的数量，但是划分数量不能无限的被放大；另外，一般项目中，同一个消费者通过一个单线程来处理分发到的数据，这无疑是一种浪费，同时，即使在一个消费者中采用多线程的方式，也是相对无序的消费同一个划分数据，特殊情况下，不能保证业务的有序性。
发明内容
本发明实施例的目的是提供一种数据流处理方法、装置、可读存储介质及处理器，该数据流处理方法、装置、可读存储介质及处理器可以保证数据业务上的一致性的同时，实现数据流的快速处理。
为了实现上述目的，本发明实施例提供一种数据流处理方法，该方法包括：将所述数据流划分为多份划分数据；针对所述多份划分数据中的至少一份划分数据，为每份划分数据配置数据的业务主键；根据所述业务主键，将所述每份划分数据中的同一类数据划分至同一内存队列，以形成多个内存队列；对所述多个内存队列进行并行处理。
优选地，所述根据所述业务主键，将所述每份划分数据中的同一类数据划分至同一内存队列，以形成多个内存队列的步骤是通过哈希算法执行的。
优选地，所述哈希算法为murmurHash2算法或murmurHash3算法。
优选地，所述对所述多个内存队列进行并行处理包括：将所述多个内存队列分别放入多个线程，其中一个线程对应一个内存队列；并行执行所述多个线程。
本发明实施例还提供一种数据流处理装置，该装置包括：划分单元、配置单元、分片单元以及处理单元，其中，所述划分单元用于将所述数据流划分为多份划分数据；所述配置单元用于针对所述多份划分数据中的至少一份划分数据，为每份划分数据配置数据的业务主键；所述分片单元用于根据所述业务主键，将所述每份划分数据中的同一类数据划分至同一内存队列，以形成多个内存队列；所述处理单元用于对所述多个内存队列进行并行处理。
优选地，所述分片单元所执行的操作是通过哈希算法执行的。
优选地，所述哈希算法为murmurHash2算法或murmurHash3算法。
优选地，所述对所述多个内存队列进行并行处理包括：将所述多个内存队列分别放入多个线程，其中一个线程对应一个内存队列；并行执行所述多个线程。
本发明实施例还提供一种机器可读存储介质，该机器可读存储介质上存储有指令，该指令用于使得机器执行上文所述的数据流处理方法。
本发明实施例还提供一种处理器，用于运行程序，其中，所述程序被运行时用于执行：如上文所述的数据流处理方法。
通过上述技术方案，采用本发明实施例提供的据流处理方法、装置、可读存储介质及处理器，针对多份划分数据中的至少一份划分数据，为每份划分数据配置数据的业务主键；根据业务主键，将每份划分数据中的同一类数据划分至同一内存队列，以形成多个内存队列；对多个内存队列进行并行处理。由于每类数据位于一个队列，并且各队列并行处理，可以保证数据业务上的一致性的同时，实现数据流的快速处理。
本发明实施例的其它特征和优点将在随后的具体实施方式部分予以详细说明。
附图说明
附图是用来提供对本发明实施例的进一步理解，并且构成说明书的一部分，与下面的具体实施方式一起用于解释本发明实施例，但并不构成对本发明实施例的限制。在附图中：
图1是本发明一实施例提供的数据流处理方法的流程图；
图2是本发明另一实施例提供的数据流处理方法的流程图；
图3是本发明一实施例提供的数据流处理方法的执行流程示意图；
图4是本发明一实施例提供的数据流处理装置的结构示意图。
附图标记说明
1 划分单元 2 配置单元
3 分片单元 4 处理单元。
具体实施方式
以下结合附图对本发明实施例的具体实施方式进行详细说明。应当理解的是，此处所描述的具体实施方式仅用于说明和解释本发明实施例，并不用于限制本发明实施例。
图1是本发明一实施例提供的数据流处理方法的流程图。如图1所示，该方法包括：
步骤S11，将所述数据流划分为多份划分数据；
具体地，可以使用kafka或rockmq当作消息组件，kafka等可以通过对同一个主题(topic)的数据流进行划分(partition)处理，来将数据分成多份，形成多份划分数据。
步骤S12，针对所述多份划分数据中的至少一份划分数据，为每份划分数据配置数据的业务主键；
具体地，根据数据特征，为每份划分数据配置业务主键，用来做后续数据分片时的依据，例如，如果业务主键为用户ID，则同一个用户的数据可以为一类数据，或如果业务主键为房源ID，同一个房源ID的数据可以为一类数据。如果业务主键是房源ID，则数据分片就是根据房源ID进行分片。
步骤S13，根据所述业务主键，将所述每份划分数据中的同一类数据划分至同一内存队列，以形成多个内存队列；
具体地，首先为主题分配一个并发数n，即通过哈希算法分片后的队列数量。随后可以通过哈希(hash)算法进行数据分片，例如murmurHash2算法或murmurHash3算法。如果数据的类型的数量与并发数n的数量不同，例如有4类数据，而并发数n为2，则可以将2类数据放入一个队列，另外2类数据放入另一个队列，以保证同一类的数据划分至一个队列，但一个队列中不一定只有一类数据。
步骤S14，对所述多个内存队列进行并行处理。
具体地，如图2所示，对所述多个内存队列进行并行处理包括：
步骤S21，将所述多个内存队列分别放入多个线程，其中一个线程对应一个内存队列；
步骤S22，并行执行所述多个线程。
如上所述，在一份划分数据处理完成后，可以继续处理下一份划分数据，多份划分数据的处理方式为串行处理。
图3是本发明一实施例提供的数据流处理方法的执行流程示意图。如图3所示，首先，针对每份划分数据，进行批量获取；然后，该划分数据其实可以具有多类，例如图中所示1、2和3分别为不同类的数据；接着进行哈希分片，将1代表的一类数据放入第一队列，将2代表的一类数据放入第二队列，将3代表的一类数据放入第三队列；最后，并行处理三个队列。
图4是本发明一实施例提供的数据流处理装置的结构示意图。如图4所示，该装置包括：划分单元1、配置单元2、分片单元3以及处理单元4，其中，所述划分单元1用于将所述数据流划分为多份划分数据；所述配置单元2用于针对所述多份划分数据中的至少一份划分数据，为每份划分数据配置数据的业务主键；所述分片单元3用于根据所述业务主键，将所述每份划分数据中的同一类数据划分至同一内存队列，以形成多个内存队列；所述处理单元4用于对所述多个内存队列进行并行处理。
优选地，所述分片单元3所执行的操作是通过哈希算法执行的。
优选地，所述哈希算法为murmurHash2算法或murmurHash3算法。
优选地，所述对所述多个内存队列进行并行处理包括：将所述多个内存队列分别放入多个线程，其中一个线程对应一个内存队列；并行执行所述多个线程。
上述数据流处理装置的实施例与上文所述的数据流处理方法的实施例类似，在此不再赘述。
所述数据流处理装置包括处理器和存储器，上述划分单元、配置单元、分片单元以及处理单元等均作为程序单元存储在存储器中，由处理器执行存储在存储器中的上述程序单元来实现相应的功能。
处理器中包含内核，由内核去存储器中调取相应的程序单元。内核可以设置一个或以上，通过调整内核参数来保证数据业务上的一致性的同时，实现数据流的快速处理。
存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)，存储器包括至少一个存储芯片。
本发明实施例提供了一种存储介质，其上存储有程序，该程序被处理器执行时实现所述数据流处理方法。
本发明实施例提供了一种处理器，所述处理器用于运行程序，其中，所述程序运行时执行所述数据流处理方法。
本发明实施例提供了一种设备，设备包括处理器、存储器及存储在存储器上并可在处理器上运行的程序，处理器执行程序时实现以下步骤：
将所述数据流划分为多份划分数据；针对所述多份划分数据中的至少一份划分数据，为每份划分数据配置数据的业务主键；根据所述业务主键，将所述每份划分数据中的同一类数据划分至同一内存队列，以形成多个内存队列；对所述多个内存队列进行并行处理。
优选地，所述根据所述业务主键，将所述每份划分数据中的同一类数据划分至同一内存队列，以形成多个内存队列的步骤是通过哈希算法执行的。
优选地，所述哈希算法为murmurHash2算法或murmurHash3算法。
优选地，所述对所述多个内存队列进行并行处理包括：将所述多个内存队列分别放入多个线程，其中一个线程对应一个内存队列；并行执行所述多个线程。
本文中的设备可以是服务器、PC、PAD、手机等。
本申请还提供了一种计算机程序产品，当在数据处理设备上执行时，适于执行初始化有如下方法步骤的程序：
将所述数据流划分为多份划分数据；针对所述多份划分数据中的至少一份划分数据，为每份划分数据配置数据的业务主键；根据所述业务主键，将所述每份划分数据中的同一类数据划分至同一内存队列，以形成多个内存队列；对所述多个内存队列进行并行处理。
优选地，所述根据所述业务主键，将所述每份划分数据中的同一类数据划分至同一内存队列，以形成多个内存队列的步骤是通过哈希算法执行的。
优选地，所述哈希算法为murmurHash2算法或murmurHash3算法。
优选地，所述对所述多个内存队列进行并行处理包括：将所述多个内存队列分别放入多个线程，其中一个线程对应一个内存队列；并行执行所述多个线程。
本领域内的技术人员应明白，本申请的实施例可提供为方法、***、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(***)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中，计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)。存储器是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。
还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。
以上仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。

Claims (10)

1.一种数据流处理方法，其特征在于，该方法包括：
将所述数据流划分为多份划分数据；
针对所述多份划分数据中的至少一份划分数据，为每份划分数据配置数据的业务主键；
根据所述业务主键，将所述每份划分数据中的同一类数据划分至同一内存队列，以形成多个内存队列；
对所述多个内存队列进行并行处理。
2.根据权利要求1所述的数据流处理方法，其特征在于，所述根据所述业务主键，将所述每份划分数据中的同一类数据划分至同一内存队列，以形成多个内存队列的步骤是通过哈希算法执行的。
3.根据权利要求2所述的数据流处理方法，其特征在于，所述哈希算法为murmurHash2算法或murmurHash3算法。
4.根据权利要求1所述的数据流处理方法，其特征在于，所述对所述多个内存队列进行并行处理包括：
将所述多个内存队列分别放入多个线程，其中一个线程对应一个内存队列；
并行执行所述多个线程。
5.一种数据流处理装置，其特征在于，该装置包括：
划分单元、配置单元、分片单元以及处理单元，其中，
所述划分单元用于将所述数据流划分为多份划分数据；
所述配置单元用于针对所述多份划分数据中的至少一份划分数据，为每份划分数据配置数据的业务主键；
所述分片单元用于根据所述业务主键，将所述每份划分数据中的同一类数据划分至同一内存队列，以形成多个内存队列；
所述处理单元用于对所述多个内存队列进行并行处理。
6.根据权利要求5所述的数据流处理装置，其特征在于，所述分片单元所执行的操作是通过哈希算法执行的。
7.根据权利要求6所述的数据流处理装置，其特征在于，所述哈希算法为murmurHash2算法或murmurHash3算法。
8.根据权利要求5所述的数据流处理装置，其特征在于，所述对所述多个内存队列进行并行处理包括：
将所述多个内存队列分别放入多个线程，其中一个线程对应一个内存队列；
并行执行所述多个线程。
9.一种机器可读存储介质，该机器可读存储介质上存储有指令，该指令用于使得机器执行权利要求1-4中任意一项权利要求所述的数据流处理方法。
10.一种处理器，其特征在于，用于运行程序，其中，所述程序被运行时用于执行：如权利要求1-4中任意一项权利要求所述的数据流处理方法。
CN201910877474.7A 2019-09-17 2019-09-17 数据流处理方法、装置、可读存储介质及处理器 Pending CN110716813A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910877474.7A CN110716813A (zh) 2019-09-17 2019-09-17 数据流处理方法、装置、可读存储介质及处理器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910877474.7A CN110716813A (zh) 2019-09-17 2019-09-17 数据流处理方法、装置、可读存储介质及处理器

Publications (1)

Publication Number Publication Date
CN110716813A true CN110716813A (zh) 2020-01-21

Family

ID=69209910

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910877474.7A Pending CN110716813A (zh) 2019-09-17 2019-09-17 数据流处理方法、装置、可读存储介质及处理器

Country Status (1)

Country Link
CN (1) CN110716813A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111475305A (zh) * 2020-05-06 2020-07-31 智博云信息科技(广州)有限公司 一种基于云平台多线程的大数据处理方法及***
CN111491015A (zh) * 2020-03-31 2020-08-04 北京金山云网络技术有限公司 预热任务处理方法及***、代理服务器、服务中心
CN112422635A (zh) * 2020-10-27 2021-02-26 ***股份有限公司 数据核对方法、装置、设备、***及存储介质
CN114218303A (zh) * 2021-12-30 2022-03-22 北京宇信科技集团股份有限公司 一种交易数据的处理***、处理方法、介质和设备

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105100271A (zh) * 2015-08-31 2015-11-25 南京势行软件开发有限公司 一种分布式弹性可扩展信息发布***及其控制方法
CN105608223A (zh) * 2016-01-12 2016-05-25 北京中交兴路车联网科技有限公司 针对kafka的Hbase数据库的入库方法和***
CN105791431A (zh) * 2016-04-26 2016-07-20 北京邮电大学 一种在线分布式监控视频处理任务调度方法及装置
CN107451147A (zh) * 2016-05-31 2017-12-08 北京京东尚科信息技术有限公司 一种kafka集群动态切换的方法和装置
CN108121792A (zh) * 2017-12-20 2018-06-05 第四范式（北京）技术有限公司 基于任务并行处理数据流的方法、装置、设备及存储介质
CN108737177A (zh) * 2018-05-21 2018-11-02 中国联合网络通信有限公司重庆市分公司 一种移动互联网实时流数据采集及分析的实现方法
CN109451072A (zh) * 2018-12-29 2019-03-08 广东电网有限责任公司 一种基于Kafka的消息缓存***和方法
CN109684370A (zh) * 2018-09-07 2019-04-26 平安普惠企业管理有限公司 日志数据处理方法、***、设备及存储介质
CN110086636A (zh) * 2019-04-17 2019-08-02 平安科技（深圳）有限公司 一种基于mqtt的消息分发方法、服务器及存储介质
CN110134500A (zh) * 2019-04-15 2019-08-16 平安普惠企业管理有限公司 基于多线程的数据同步方法、装置、设备和存储介质
CN110231992A (zh) * 2019-06-06 2019-09-13 深圳前海微众银行股份有限公司 分布式资源分配方法、装置、设备及可读存储介质

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105100271A (zh) * 2015-08-31 2015-11-25 南京势行软件开发有限公司 一种分布式弹性可扩展信息发布***及其控制方法
CN105608223A (zh) * 2016-01-12 2016-05-25 北京中交兴路车联网科技有限公司 针对kafka的Hbase数据库的入库方法和***
CN105791431A (zh) * 2016-04-26 2016-07-20 北京邮电大学 一种在线分布式监控视频处理任务调度方法及装置
CN107451147A (zh) * 2016-05-31 2017-12-08 北京京东尚科信息技术有限公司 一种kafka集群动态切换的方法和装置
CN108121792A (zh) * 2017-12-20 2018-06-05 第四范式（北京）技术有限公司 基于任务并行处理数据流的方法、装置、设备及存储介质
CN108737177A (zh) * 2018-05-21 2018-11-02 中国联合网络通信有限公司重庆市分公司 一种移动互联网实时流数据采集及分析的实现方法
CN109684370A (zh) * 2018-09-07 2019-04-26 平安普惠企业管理有限公司 日志数据处理方法、***、设备及存储介质
CN109451072A (zh) * 2018-12-29 2019-03-08 广东电网有限责任公司 一种基于Kafka的消息缓存***和方法
CN110134500A (zh) * 2019-04-15 2019-08-16 平安普惠企业管理有限公司 基于多线程的数据同步方法、装置、设备和存储介质
CN110086636A (zh) * 2019-04-17 2019-08-02 平安科技（深圳）有限公司 一种基于mqtt的消息分发方法、服务器及存储介质
CN110231992A (zh) * 2019-06-06 2019-09-13 深圳前海微众银行股份有限公司 分布式资源分配方法、装置、设备及可读存储介质

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
BOLON0708: "细谈RockertMQ", 《CSDN》 *
修梅婷: "家庭开发平台中消息中间件的设计与实现", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *
汉无为: "什么是集群消费，什么是广播消费，什么是Topic、什么又是Broker", 《个人图书馆》 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111491015A (zh) * 2020-03-31 2020-08-04 北京金山云网络技术有限公司 预热任务处理方法及***、代理服务器、服务中心
CN111491015B (zh) * 2020-03-31 2022-11-11 北京金山云网络技术有限公司 预热任务处理方法及***、代理服务器、服务中心
CN111475305A (zh) * 2020-05-06 2020-07-31 智博云信息科技(广州)有限公司 一种基于云平台多线程的大数据处理方法及***
CN111475305B (zh) * 2020-05-06 2020-11-17 睿智合创(北京)科技有限公司 一种基于云平台多线程的大数据处理方法及***
CN112422635A (zh) * 2020-10-27 2021-02-26 ***股份有限公司 数据核对方法、装置、设备、***及存储介质
CN114218303A (zh) * 2021-12-30 2022-03-22 北京宇信科技集团股份有限公司 一种交易数据的处理***、处理方法、介质和设备

Similar Documents

Publication Publication Date Title
CN107450979B (zh) 一种区块链共识方法及装置
CN110716813A (zh) 数据流处理方法、装置、可读存储介质及处理器
CN107391527B (zh) 一种基于区块链的数据处理方法及设备
CN106933534B (zh) 一种数据同步方法和装置
US9459903B2 (en) Techniques for routing service chain flow packets between virtual machines
CN111953780B (zh) 微服务灰度发布方法、装置、设备、***及存储介质
CN110768912A (zh) Api网关限流方法及装置
CN110262847B (zh) 应用程序启动加速方法、装置及机器可读存储介质
CN110875935B (zh) 消息发布、处理、订阅方法、装置及***
CN110971430B (zh) 自动化扩容缩容的控制方法、装置、存储介质及处理器
CN107818012B (zh) 一种数据处理方法、装置及电子设备
CN107578338B (zh) 一种业务发布方法、装置及设备
CN109857516B (zh) 基于容器的集群迁移方法及装置
CN109739627B (zh) 任务的调度方法、电子设备及介质
CN112748993A (zh) 任务执行方法、装置、存储介质及电子设备
CN106648839B (zh) 数据处理的方法和装置
CN111930530A (zh) 一种基于物联网的设备消息处理方法、装置及介质
CN114035947A (zh) 资源动态调配方法、装置、设备及***
CN112817428A (zh) 任务运行方法、装置、移动终端和存储介质
CN111338803A (zh) 一种线程处理方法和装置
US10901972B2 (en) Table partition configuration method, apparatus and system for database system
CN109992470B (zh) 一种阈值调整方法和装置
CN110032433B (zh) 一种任务执行方法、装置、设备及介质
CN108255820B (zh) 分布式***中数据入库的方法、装置以及电子设备
CN112540842A (zh) 动态调整***资源的方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20200228

Address after: 100085 Floor 102-1, Building No. 35, West Second Banner Road, Haidian District, Beijing

Applicant after: Seashell Housing (Beijing) Technology Co., Ltd.

Address before: 300280 unit 05, room 112, floor 1, building C, comprehensive service area, Nangang Industrial Zone, Binhai New Area, Tianjin

Applicant before: Shell Technology Co., Ltd.

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20200121