CN104021132A - 主备数据库数据一致性核查备份方法及其*** - Google Patents
主备数据库数据一致性核查备份方法及其*** Download PDFInfo
- Publication number
- CN104021132A CN104021132A CN201310650884.0A CN201310650884A CN104021132A CN 104021132 A CN104021132 A CN 104021132A CN 201310650884 A CN201310650884 A CN 201310650884A CN 104021132 A CN104021132 A CN 104021132A
- Authority
- CN
- China
- Prior art keywords
- data
- database
- character string
- backup
- string array
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1448—Management of the data involved in backup or backup restore
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/23—Updating
- G06F16/2365—Ensuring data consistency and integrity
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- Computer Security & Cryptography (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
一种主备数据库数据一致性核查备份方法,它包括如下步骤:①、读取主用数据库与备用数据库中数据,使用MD5信息摘要算法分别对主用数据库与备用数据库中数据进行逐条散列;②、采用快速查找算法比对主用数据库中数据的MD5散列值与备用数据库中的数据的MD5散列值,采用标记法生成比对结果LOG文件;③、依据比对结果LOG文件,获取主数据库中对应的业务数据,并将业务数据更新至比对结果LOG文件;④、依据LOG文件同步完成备份数据库增量备份和备份库备份操作LOG记录表的更新。本发明通过对主备数据库分别进行MD5散列,然后采用二分查找快速查找算法比对两套MD5散列值,加快了核查效率,提高了海量数据一致性核查备份的效率。
Description
技术领域
本发明涉及计算机信息技术领域,特别涉及一种主备数据库数据一致性核查备份的方法。
背景技术
随着信息化技术的广泛应用,各机构或单位都建立了多个IT***,这些IT***因为机构分割管冶或是不同集成厂商的原因,出于对审计的考虑,很多关键业务数据往往存在同样的数据需要在主本方和副本方各存贮一份,主本方的业务数据(即主数据库)通常是业务数据的生产方的IT***所用,而副本方的业务数据(即备份数据库)通常是业务数据的消费方的IT***所有,备份数据库需要定期与主数据库保持一致,以保持副本方业务数据与主本方的正确性。
现有技术中对于主备数据一致性核查备份有两种方法,方法一是将主数据库设备中所有需要备份的数据通过数据通道全部发送到备份数据设备中,备份设备将主设备发来的数据与本设备上的数据进行比较,如果发现数据不一致再进行相关处理。这种方法在主备份设备间传送和比较的是所有需要备份的数据,因此传送和核查比对需要比较长的时间。
方法二是将主备数据库设备上的数据分别进行杂凑类算法加密后,再进行一致性比较,如果发现数据不一致再进行相关处理。因为传递和比较的是经杂凑类算法加密后的摘要信息,因此能够较快的进行主备设备之间数据核查,缩短数据核查周期。
这两种方法在进行比对查找时,均未采用快速查找算法,来提升核查效率,对于数据量非常大-数亿级时,难于实现高效的核查备份;在进行一致性备份处理时,没有在备份数据库设备中形成备份数据库一致性处理的数据库操作LOG记录,不能直观的呈现备份操作,不利于数据操作的安全审计。
CN201210353715.6采用的技术方案是:客户端对文件进行MD5加密,并生成文件快照后上传服务器端进行文件全备份。这种方法的主要目的是增强文件管理的安全性;但是,数据上传服务器需要耗费大量的时间,对于数据量非常大-数亿级时,难于实现高效的核查备份。
CN200510132328.X采用的技术方案是:通过分别对主备设备的用户数据进行MD5杂凑加密后,进行比较核查处理并最终使主备设备用户数据一致的方法。但是这种方法在进行核查校验时,没有采用快速查找方法,不适用于海量数据一致性核查备份;在进行一致性处理时,没有形成直观的备份操作记录表,不利于数据安全审计。
发明内容
本发明的目的有三个:一是核查对比效率高;二是形成直观的备份操作记录表;三是数据库操作的安全审计,基于此,提供一种主备数据库数据一致性核查备份方法及其***。
为实现上述目的,本发明采用以下技术方案:
一种主备数据库数据一致性核查备份方法,它包括如下步骤:
①、读取主用数据库与备用数据库中数据,使用MD5信息摘要算法分别对主用数据库与备用数据库中数据进行逐条散列;
②、采用快速查找算法比对主用数据库中数据的MD5散列值与备用数据库中的数据的MD5散列值,采用标记法生成比对结果LOG文件;
③、依据比对结果LOG文件,获取主数据库中对应的业务数据,并将业务数据更新至比对结果LOG文件;
④、依据LOG文件同步完成备份数据库增量备份和备份库备份操作LOG记录表的更新。
在步骤①中,根据业务确定资源对象的业务主键,依次读取主用数据库中的每一条记录,抽取其业务主键值和整条记录的值,通过MD5信息摘要算法将业务主键值与其对应的整条记录的值转化成MD5散列值,分别存入到主用数据库业务主键值字符串数组和主用数据库整条记录值字符串数组中;
采用上述同样的数据读取方式,将MD5散列值存入备用数据库业务主键值字符串数组和备用数据库整条记录字符串数组。
在步骤②中,快速查找算法为二分查找算法,其比对过程如下:
第一步:将主用数据库中的主用数据库业务主键值字符串数组和主用数据库整条记录值字符串数组与备用数据库中的备用数据库业务主键值字符串数组和备用数据库整条记录字符串数组进行逐条比对,用于筛选出新增、修改的数据;
第二步:将备用数据库中的备用数据库业务主键值字符串数组和备用数据库整条记录字符串数组与主用数据库中的主用数据库业务主键值字符串数组和主用数据库整条记录值字符串数组进行逐条比对,用于筛选出删除的数据。
筛选新增、修改数据的步骤如下:首先将备用数据库业务主键值字符串数组和备用数据库整条记录字符串数组排序,依次使用主用数据库中每一条主用数据库业务主键值字符串数组在备用数据库业务主键值字符串数组中使用二分查找算法查找,分以下情况:
若不存在,则说明该条数据为新增数据,在LOG文件中记录主用数据库中该条据的业务主键值,并以A进行标记;
若存在,则比较主用数据库整条记录值字符串数组与备用数据库整条记录字符串数组是否相同:不相同,则说明该条数据做了更新,在LOG文件中记录主用数据库中该条据的主键值,并以M进行标记;相同,即说明该数据的MD5散列值不变,即说明该条记录无变化,无需更新。
筛选删除数据的步骤如下:首先将主用数据库业务主键值字符串数组排序,依次读取备用数据库中每一条备用数据库业务主键值字符串数组在主用数据库业务主键值字符串数组中使用二分查找算法查找,若不存在则说明该条数据已被主用数据库删除,则在LOG文件中记录该数据的业务主键值,以D进行标记。
一种主备数据库数据一致性核查备份***,它包括:
MD5散列模块,它读取主用数据库与备用数据库中数据,使用MD5信息摘要算法分别对主用数据库与备用数据库中数据进行逐条散列;
LOG文件生成模块,它采用快速查找算法比对主用数据库中数据的MD5散列值与备用数据库中的数据的MD5散列值,采用标记法生成比对结果LOG文件;
LOG文件更新模块,它依据比对结果LOG文件,获取主数据库中对应的业务数据,并将业务数据更新至比对结果LOG文件;
备份库更新模块,依据LOG文件同步完成备份数据库增量备份和备份库备份操作LOG记录表的更新。
采用上述技术方案的本发明,通过对主备数据库分别进行MD5散列,然后采用二分查找快速查找算法比对两套MD5散列值,加快了核查效率,提高了海量数据一致性核查备份的效率;采用标记法生成比对结果,进而形成直观的备份操作LOG记录表,并最终实现备份数据库的增量备份。相比现有的技术,本发明在对比时采用快速查找算法提高核查速度;核查备份中采用标记法形成直观的操作记录,利于业务数据操作安全审计;而且,在实现时,核查时上一次生成的主用数据库中数据的MD5散列值,作为本次备用数据库中数据的MD5散列值,减少散列次数。
附图说明
图1为读取主用数据库与备用数据库当前数据流程图。
图2为筛选新增数据、修改数据的流程图。
图3为筛选删除数据的流程图。
具体实施方式
一种主备数据库数据一致性核查备份方法,它包括如下步骤:
①、读取主用数据库与备用数据库中数据,使用MD5信息摘要算法分别对主用数据库与备用数据库中数据进行逐条散列。
如图1所示,根据业务确定资源对象的业务主键,依次读取主用数据库中的每一条记录,抽取其业务主键值和整条记录的值,通过MD5信息摘要算法将业务主键值与其对应的整条记录的值转化成MD5散列值,分别存入到主用数据库业务主键值字符串数组TS1和主用数据库整条记录值字符串数组TS2中;
采用上述同样的数据读取方式,将MD5散列值存入备用数据库业务主键值字符串数组YS1和备用数据库整条记录字符串数组YS2。由于备份操作往往是周期性的,***可以将上一次生成的主用数据库中数据的MD5散列值保存,作为本次备用数据库中数据的MD5散列值。
②、采用快速查找算法比对主用数据库中数据的MD5散列值与备用数据库中的数据的MD5散列值,采用标记法生成比对结果LOG文件。其中,快速查找算法为二分查找算法,其比对过程如下:
第一步:将主用数据库中的主用数据库业务主键值字符串数组TS1和主用数据库整条记录值字符串数组TS2与备用数据库中的备用数据库业务主键值字符串数组YS1和备用数据库整条记录字符串数组YS2进行逐条比对,用于筛选出新增、修改的数据;
第二步:将备用数据库中的备用数据库业务主键值字符串数组YS1和备用数据库整条记录字符串数组YS2与主用数据库中的主用数据库业务主键值字符串数组TS1和主用数据库整条记录值字符串数组TS2进行逐条比对,用于筛选出删除的数据。
如图2所示,筛选新增、修改数据的步骤如下:首先将备用数据库业务主键值字符串数组YS1和备用数据库整条记录字符串数组YS2排序,依次使用主用数据库中每一条主用数据库业务主键值字符串数组TS1在备用数据库业务主键值字符串数组YS1中使用二分查找算法查找,分以下情况:
若不存在,则说明该条数据为新增数据,在LOG文件中记录主用数据库中该条据的业务主键值,并以A进行标记;
若存在,则比较主用数据库整条记录值字符串数组TS2与备用数据库整条记录字符串数组YS2是否相同:不相同,则说明该条数据做了更新,在LOG文件中记录主用数据库中该条据的主键值,并以M进行标记;相同,即说明该数据的MD5散列值不变,即说明该条记录无变化,无需更新。
如图3所示,筛选删除数据的步骤如下:首先将主用数据库业务主键值字符串数组TS1排序,依次读取备用数据库中每一条备用数据库业务主键值字符串数组YS1在主用数据库业务主键值字符串数组TS1中使用二分查找算法查找,若不存在则说明该条数据已被主用数据库删除,则在LOG文件中记录该数据的业务主键值,以D进行标记。
③、依据比对结果LOG文件,获取主数据库中对应的业务数据,并将业务数据更新至比对结果LOG文件。其具体步骤分为以下三步:首先,将比对结果LOG文件中标识位为‘I’和‘U’的记录对应的业务主键发给主设备;其次,主设备依据发来的业务主键获取实际业务数据,并发送给备份设备;再次,备份设备收到发来的业务数据,将业务数据按主键值更新至比对结果LOG文件中。
④、依据LOG文件同步完成备份数据库增量备份和备份库备份操作LOG记录表的更新。
i)、逐条读取比对结果LOG文件,批量完成备份库的数据增量备份,如下:
LOG文件中标识码为‘I’,则在备份数据库相对应的表中***该条记录;
LOG文件中标识码为‘D’,则在备份数据库相对应的表中删除该条记录;
LOG文件中标识码为‘U’,则在备份数据库相对应的表中先删除当前数据库该条记录,再把LOG文件中与该条记录的业务主键值相等的记录***到数据库中;
ii)、逐条读取比对结果LOG文件,批量完成备份操作LOG记录表追加。
备份操作LOG记录表的表结构为对应的业务数据表结构+更新日期,比对结果中标记的数据更新方式与LOG记录表中的标记对应如下:
LOG文件中‘A’对应备份操作LOG记录表中‘I’(insert 新增的数据);
LOG文件中‘M’对应备份操作LOG记录表中‘U’(update更新的数据);
LOG文件中‘D’ 对应备份操作LOG记录表中(delete删除的数据)。
一种主备数据库数据一致性核查备份***,它包括:
MD5散列模块,它读取主用数据库与备用数据库中数据,使用MD5信息摘要算法分别对主用数据库与备用数据库中数据进行逐条散列;
LOG文件生成模块,它采用快速查找算法比对主用数据库中数据的MD5散列值与备用数据库中的数据的MD5散列值,采用标记法生成比对结果LOG文件;
LOG文件更新模块,它依据比对结果LOG文件,获取主数据库中对应的业务数据,并将业务数据更新至比对结果LOG文件;
备份库更新模块,依据LOG文件同步完成备份数据库增量备份和备份库备份操作LOG记录表的更新。
Claims (6)
1.一种主备数据库数据一致性核查备份方法,其特征在于,它包括如下步骤:
①、读取主用数据库与备用数据库中数据,使用MD5信息摘要算法分别对主用数据库与备用数据库中数据进行逐条散列;
②、采用快速查找算法比对主用数据库中数据的MD5散列值与备用数据库中的数据的MD5散列值,采用标记法生成比对结果LOG文件;
③、依据比对结果LOG文件,获取主数据库中对应的业务数据,并将业务数据更新至比对结果LOG文件;
④、依据LOG文件同步完成备份数据库增量备份和备份库备份操作LOG记录表的更新。
2.根据权利要求1所述的主备数据库数据一致性核查备份方法,其特征在于:在步骤①中,根据业务确定资源对象的业务主键,依次读取主用数据库中的每一条记录,抽取其业务主键值和整条记录的值,通过MD5信息摘要算法将业务主键值与其对应的整条记录的值转化成MD5散列值,分别存入到主用数据库业务主键值字符串数组(TS1)和主用数据库整条记录值字符串数组(TS2)中;
采用上述同样的数据读取方式,将MD5散列值存入备用数据库业务主键值字符串数组(YS1)和备用数据库整条记录字符串数组(YS2)。
3.根据权利要求2所述的主备数据库数据一致性核查备份方法,其特征在于:在步骤②中,快速查找算法为二分查找算法,其比对过程如下:
第一步:将主用数据库中的主用数据库业务主键值字符串数组(TS1)和主用数据库整条记录值字符串数组(TS2)与备用数据库中的备用数据库业务主键值字符串数组(YS1)和备用数据库整条记录字符串数组(YS2)进行逐条比对,用于筛选出新增、修改的数据;
第二步:将备用数据库中的备用数据库业务主键值字符串数组(YS1)和备用数据库整条记录字符串数组(YS2)与主用数据库中的主用数据库业务主键值字符串数组(TS1)和主用数据库整条记录值字符串数组(TS2)进行逐条比对,用于筛选出删除的数据。
4.根据权利要求3所述的主备数据库数据一致性核查备份方法,其特征在于,筛选新增、修改数据的步骤如下:首先将备用数据库业务主键值字符串数组(YS1)和备用数据库整条记录字符串数组(YS2)排序,依次使用主用数据库中每一条主用数据库业务主键值字符串数组(TS1)在备用数据库业务主键值字符串数组(YS1)中使用二分查找算法查找,分以下情况:
若不存在,则说明该条数据为新增数据,在LOG文件中记录主用数据库中该条据的业务主键值,并以A进行标记;
若存在,则比较主用数据库整条记录值字符串数组(TS2)与备用数据库整条记录字符串数组(YS2)是否相同:不相同,则说明该条数据做了更新,在LOG文件中记录主用数据库中该条据的主键值,并以M进行标记;相同,即说明该数据的MD5散列值不变,即说明该条记录无变化,无需更新。
5.根据权利要求3所述的主备数据库数据一致性核查备份方法,其特征在于,筛选删除数据的步骤如下:首先将主用数据库业务主键值字符串数组(TS1)排序,依次读取备用数据库中每一条备用数据库业务主键值字符串数组(YS1)在主用数据库业务主键值字符串数组(TS1)中使用二分查找算法查找,若不存在则说明该条数据已被主用数据库删除,则在LOG文件中记录该数据的业务主键值,以D进行标记。
6.一种主备数据库数据一致性核查备份***,其特征在于,它包括:
MD5散列模块,它读取主用数据库与备用数据库中数据,使用MD5信息摘要算法分别对主用数据库与备用数据库中数据进行逐条散列;
LOG文件生成模块,它采用快速查找算法比对主用数据库中数据的MD5散列值与备用数据库中的数据的MD5散列值,采用标记法生成比对结果LOG文件;
LOG文件更新模块,它依据比对结果LOG文件,获取主数据库中对应的业务数据,并将业务数据更新至比对结果LOG文件;
备份库更新模块,依据LOG文件同步完成备份数据库增量备份和备份库备份操作LOG记录表的更新。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310650884.0A CN104021132B (zh) | 2013-12-08 | 2013-12-08 | 主备数据库数据一致性核查备份方法及其*** |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310650884.0A CN104021132B (zh) | 2013-12-08 | 2013-12-08 | 主备数据库数据一致性核查备份方法及其*** |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104021132A true CN104021132A (zh) | 2014-09-03 |
CN104021132B CN104021132B (zh) | 2017-08-22 |
Family
ID=51437889
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310650884.0A Active CN104021132B (zh) | 2013-12-08 | 2013-12-08 | 主备数据库数据一致性核查备份方法及其*** |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104021132B (zh) |
Cited By (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104462527A (zh) * | 2014-12-22 | 2015-03-25 | 龙信数据(北京)有限公司 | 一种数据去重的方法及装置 |
WO2017071337A1 (zh) * | 2015-10-26 | 2017-05-04 | 中兴通讯股份有限公司 | 管理数据库表数据的方法、装置及*** |
CN106802892A (zh) * | 2015-11-26 | 2017-06-06 | 阿里巴巴集团控股有限公司 | 用于主备数据一致性校验的方法和设备 |
CN106815326A (zh) * | 2016-12-28 | 2017-06-09 | 中国民航信息网络股份有限公司 | 一种检测无主键数据表一致性的***及方法 |
CN106874270A (zh) * | 2015-12-10 | 2017-06-20 | ***通信集团云南有限公司 | 一种数据一致性认证的方法和装置 |
CN107832383A (zh) * | 2017-10-30 | 2018-03-23 | 焦点科技股份有限公司 | 一种跨机房数据库的数据一致性校验方法 |
CN108038028A (zh) * | 2017-12-13 | 2018-05-15 | 江苏神州信源***工程有限公司 | 文件备份方法、装置及文件还原方法、装置 |
CN108363641A (zh) * | 2017-01-26 | 2018-08-03 | 华为技术有限公司 | 一种主备机数据传递方法、控制节点以及数据库*** |
CN108494828A (zh) * | 2018-02-26 | 2018-09-04 | 网易(杭州)网络有限公司 | 一种节点数据的更新方法、介质、装置和计算设备 |
CN108804561A (zh) * | 2018-05-22 | 2018-11-13 | 北京科东电力控制***有限责任公司 | 数据同步方法及装置 |
CN109063070A (zh) * | 2018-07-23 | 2018-12-21 | 郑州云海信息技术有限公司 | 一种数据库的操作方法及数据库服务器 |
CN109299076A (zh) * | 2018-11-13 | 2019-02-01 | 南方电网科学研究院有限责任公司 | 冗余数据库中数据采集点的主键生成方法、装置及设备 |
CN109361625A (zh) * | 2018-10-24 | 2019-02-19 | 新华三技术有限公司合肥分公司 | 核查转发表项的方法、装置和控制器 |
CN110134694A (zh) * | 2019-05-20 | 2019-08-16 | 上海英方软件股份有限公司 | 一种双活数据库中表数据的快速比对装置及方法 |
CN113064909A (zh) * | 2021-06-03 | 2021-07-02 | 广州宸祺出行科技有限公司 | 一种数据同步校验方法、装置 |
CN113190536A (zh) * | 2021-03-02 | 2021-07-30 | 上海英方软件股份有限公司 | 一种对双活数据库管理复制***的快速修复方法及装置 |
CN113449505A (zh) * | 2021-07-01 | 2021-09-28 | 浪潮天元通信信息***有限公司 | 一种文件比对方法 |
CN113495928A (zh) * | 2021-09-08 | 2021-10-12 | 云账户技术(天津)有限公司 | 数据一致性校验方法、装置、电子设备和可读存储介质 |
CN113592667A (zh) * | 2020-04-30 | 2021-11-02 | 南京南瑞继保电气有限公司 | 一种从ems生成电力现货市场的市场模型的方法 |
CN114095509A (zh) * | 2020-07-29 | 2022-02-25 | 中国电信股份有限公司 | 数据同步方法和*** |
TWI789984B (zh) * | 2021-06-11 | 2023-01-11 | 威聯通科技股份有限公司 | 合成增量資料備份方法、系統及電腦可讀取儲存媒體 |
CN117762954A (zh) * | 2023-11-17 | 2024-03-26 | 深圳市前海数据服务有限公司 | 一种数据自动化治理方法 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109522160B (zh) * | 2018-11-29 | 2020-05-05 | 上海英方软件股份有限公司 | 通过保存文件信息摘要进行文件目录比较备份方法和*** |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101957858A (zh) * | 2010-09-27 | 2011-01-26 | 中兴通讯股份有限公司 | 数据比对方法和装置 |
US20110258299A1 (en) * | 2008-12-30 | 2011-10-20 | Thomson Licensing | Synchronization of configurations for display systems |
CN103164523A (zh) * | 2013-03-19 | 2013-06-19 | 华为技术有限公司 | 数据一致性检查方法、装置及*** |
-
2013
- 2013-12-08 CN CN201310650884.0A patent/CN104021132B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110258299A1 (en) * | 2008-12-30 | 2011-10-20 | Thomson Licensing | Synchronization of configurations for display systems |
CN101957858A (zh) * | 2010-09-27 | 2011-01-26 | 中兴通讯股份有限公司 | 数据比对方法和装置 |
CN103164523A (zh) * | 2013-03-19 | 2013-06-19 | 华为技术有限公司 | 数据一致性检查方法、装置及*** |
Cited By (35)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104462527A (zh) * | 2014-12-22 | 2015-03-25 | 龙信数据(北京)有限公司 | 一种数据去重的方法及装置 |
WO2017071337A1 (zh) * | 2015-10-26 | 2017-05-04 | 中兴通讯股份有限公司 | 管理数据库表数据的方法、装置及*** |
CN106802892A (zh) * | 2015-11-26 | 2017-06-06 | 阿里巴巴集团控股有限公司 | 用于主备数据一致性校验的方法和设备 |
CN106802892B (zh) * | 2015-11-26 | 2021-12-28 | 阿里巴巴集团控股有限公司 | 用于主备数据一致性校验的方法和设备 |
CN106874270A (zh) * | 2015-12-10 | 2017-06-20 | ***通信集团云南有限公司 | 一种数据一致性认证的方法和装置 |
CN106874270B (zh) * | 2015-12-10 | 2020-10-16 | ***通信集团云南有限公司 | 一种数据一致性认证的方法和装置 |
CN106815326A (zh) * | 2016-12-28 | 2017-06-09 | 中国民航信息网络股份有限公司 | 一种检测无主键数据表一致性的***及方法 |
CN106815326B (zh) * | 2016-12-28 | 2021-03-02 | 中国民航信息网络股份有限公司 | 一种检测无主键数据表一致性的***及方法 |
CN108363641B (zh) * | 2017-01-26 | 2022-01-14 | 华为技术有限公司 | 一种主备机数据传递方法、控制节点以及数据库*** |
CN108363641A (zh) * | 2017-01-26 | 2018-08-03 | 华为技术有限公司 | 一种主备机数据传递方法、控制节点以及数据库*** |
CN107832383B (zh) * | 2017-10-30 | 2019-02-05 | 焦点科技股份有限公司 | 一种跨机房数据库的数据一致性校验方法 |
CN107832383A (zh) * | 2017-10-30 | 2018-03-23 | 焦点科技股份有限公司 | 一种跨机房数据库的数据一致性校验方法 |
CN108038028A (zh) * | 2017-12-13 | 2018-05-15 | 江苏神州信源***工程有限公司 | 文件备份方法、装置及文件还原方法、装置 |
CN108038028B (zh) * | 2017-12-13 | 2021-03-23 | 北信源***集成有限公司 | 文件备份方法、装置及文件还原方法、装置 |
CN108494828A (zh) * | 2018-02-26 | 2018-09-04 | 网易(杭州)网络有限公司 | 一种节点数据的更新方法、介质、装置和计算设备 |
CN108494828B (zh) * | 2018-02-26 | 2021-04-16 | 网易(杭州)网络有限公司 | 一种节点数据的更新方法、介质、装置和计算设备 |
CN108804561A (zh) * | 2018-05-22 | 2018-11-13 | 北京科东电力控制***有限责任公司 | 数据同步方法及装置 |
CN108804561B (zh) * | 2018-05-22 | 2021-10-15 | 北京科东电力控制***有限责任公司 | 数据同步方法及装置 |
CN109063070B (zh) * | 2018-07-23 | 2022-03-25 | 郑州云海信息技术有限公司 | 一种数据库的操作方法及数据库服务器 |
CN109063070A (zh) * | 2018-07-23 | 2018-12-21 | 郑州云海信息技术有限公司 | 一种数据库的操作方法及数据库服务器 |
CN109361625A (zh) * | 2018-10-24 | 2019-02-19 | 新华三技术有限公司合肥分公司 | 核查转发表项的方法、装置和控制器 |
CN109361625B (zh) * | 2018-10-24 | 2021-12-07 | 新华三技术有限公司合肥分公司 | 核查转发表项的方法、装置和控制器 |
CN109299076A (zh) * | 2018-11-13 | 2019-02-01 | 南方电网科学研究院有限责任公司 | 冗余数据库中数据采集点的主键生成方法、装置及设备 |
CN110134694B (zh) * | 2019-05-20 | 2020-04-17 | 上海英方软件股份有限公司 | 一种双活数据库中表数据的快速比对装置及方法 |
CN110134694A (zh) * | 2019-05-20 | 2019-08-16 | 上海英方软件股份有限公司 | 一种双活数据库中表数据的快速比对装置及方法 |
CN113592667A (zh) * | 2020-04-30 | 2021-11-02 | 南京南瑞继保电气有限公司 | 一种从ems生成电力现货市场的市场模型的方法 |
CN114095509A (zh) * | 2020-07-29 | 2022-02-25 | 中国电信股份有限公司 | 数据同步方法和*** |
CN113190536B (zh) * | 2021-03-02 | 2023-01-17 | 上海英方软件股份有限公司 | 一种对双活数据库管理复制***的快速修复方法及装置 |
CN113190536A (zh) * | 2021-03-02 | 2021-07-30 | 上海英方软件股份有限公司 | 一种对双活数据库管理复制***的快速修复方法及装置 |
CN113064909A (zh) * | 2021-06-03 | 2021-07-02 | 广州宸祺出行科技有限公司 | 一种数据同步校验方法、装置 |
CN113064909B (zh) * | 2021-06-03 | 2021-10-22 | 广州宸祺出行科技有限公司 | 一种数据同步校验方法、装置 |
TWI789984B (zh) * | 2021-06-11 | 2023-01-11 | 威聯通科技股份有限公司 | 合成增量資料備份方法、系統及電腦可讀取儲存媒體 |
CN113449505A (zh) * | 2021-07-01 | 2021-09-28 | 浪潮天元通信信息***有限公司 | 一种文件比对方法 |
CN113495928A (zh) * | 2021-09-08 | 2021-10-12 | 云账户技术(天津)有限公司 | 数据一致性校验方法、装置、电子设备和可读存储介质 |
CN117762954A (zh) * | 2023-11-17 | 2024-03-26 | 深圳市前海数据服务有限公司 | 一种数据自动化治理方法 |
Also Published As
Publication number | Publication date |
---|---|
CN104021132B (zh) | 2017-08-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104021132A (zh) | 主备数据库数据一致性核查备份方法及其*** | |
US20220214995A1 (en) | Blockchain data archiving method, apparatus, and computer-readable storage medium | |
US20200412525A1 (en) | Blockchain filesystem | |
CN102419766B (zh) | 基于hdfs分布式文件***的数据冗余及文件操作方法 | |
CN107220559B (zh) | 一种针对不可篡改文件的加密存储方法 | |
CN106815326B (zh) | 一种检测无主键数据表一致性的***及方法 | |
US11232070B2 (en) | Metadata compaction in a distributed storage system | |
CN110879813A (zh) | 一种基于二进制日志解析的MySQL数据库增量同步实现方法 | |
CN106682077B (zh) | 一种基于Hadoop技术的海量时序数据存储实现方法 | |
CN110795499B (zh) | 基于大数据的集群数据同步方法、装置、设备及存储介质 | |
CN111339103B (zh) | 一种基于全量分片和增量日志解析的数据交换方法及*** | |
CN109522283B (zh) | 一种重复数据删除方法及*** | |
CN103955530A (zh) | 一种在线重复数据删除***的数据重建优化方法 | |
CN102591864B (zh) | 比对***中的数据更新方法及装置 | |
CN107992492B (zh) | 一种数据区块的存储方法、读取方法、其装置及区块链 | |
CN102508833A (zh) | 数据监控装置及方法 | |
CN101673289A (zh) | 分布式文件存储构架的构建方法和装置 | |
CN112685436B (zh) | 一种溯源信息处理方法及装置 | |
CN106649602A (zh) | 业务对象数据处理方法、装置和服务器 | |
CN114092252A (zh) | 一种区块链交易执行方法、装置、设备及可读存储介质 | |
CN114416638A (zh) | 一种电子文件自动归档方法及*** | |
CN112835918A (zh) | 一种MySQL数据库增量同步实现方法 | |
CN109947730B (zh) | 元数据恢复方法、装置、分布式文件***及可读存储介质 | |
CN114968914A (zh) | 一种电子档案管理方法、装置、计算机设备、存储介质 | |
CN115858488A (zh) | 基于数据治理的平行迁移方法、装置及可读介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |