CN112506928A - 一种验证备份数据有效性的方法和装置 - Google Patents
一种验证备份数据有效性的方法和装置 Download PDFInfo
- Publication number
- CN112506928A CN112506928A CN202011432734.9A CN202011432734A CN112506928A CN 112506928 A CN112506928 A CN 112506928A CN 202011432734 A CN202011432734 A CN 202011432734A CN 112506928 A CN112506928 A CN 112506928A
- Authority
- CN
- China
- Prior art keywords
- backup
- data
- backup data
- target
- validity
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 66
- 238000012360 testing method Methods 0.000 claims abstract description 38
- 238000004891 communication Methods 0.000 claims description 14
- 238000004590 computer program Methods 0.000 claims description 12
- 239000000126 substance Substances 0.000 claims description 3
- 238000012795 verification Methods 0.000 abstract description 27
- 230000008569 process Effects 0.000 description 13
- 238000011084 recovery Methods 0.000 description 12
- 238000012545 processing Methods 0.000 description 10
- 230000009286 beneficial effect Effects 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 230000003203 everyday effect Effects 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 229920001621 AMOLED Polymers 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000005034 decoration Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 238000010200 validation analysis Methods 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000005265 energy consumption Methods 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 238000011022 operating instruction Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000002096 quantum dot Substances 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2282—Tablespace storage structures; Management thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1448—Management of the data involved in backup or backup restore
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
- G06F11/1469—Backup restoration techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3684—Test management for test design, e.g. generating new test cases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3688—Test management for test execution, e.g. scheduling of test suites
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及计算机数据库安全技术领域，具体涉及一种验证备份数据有效性的方法和装置。所述方法包括：获取备份数据库中目标实例的备份数据信息；从所述备份数据中获取目标数据表；创建并执行测试实例，其中所述测试实例用于访问所述目标数据表；访问成功，则确定所述备份数据库的备份数据有效。本申请的方案在验证数据有效性的时候，不需要对全量数据进行恢复，节省了备份数据有效性验证服务对服务器资源的占用。
Description
技术领域
本发明涉及计算机数据库安全技术领域，具体涉及一种验证备份数据有效性的方法和装置。
背景技术
越来越多的公司意识到数据的重要性，数据的丢失对公司来说是巨大的损失，特别是金融行业，由于其特殊性，数据决定一切，能否保障数据安全、数据完整决定着一家金融公司的正常营业。数据存储在数据库中，到目前为止，企业常用的关系型数据库包括MySQL、Oracle、SqlServer等，进一步地为了保证数据的安全、完整，防止误操作造成数据丢失，通常情况下需要对数据进行备份，备份方式多种多样，可根据业务类型灵活选择，其中以Xtrabackup工具为代表的物理备份因备份、恢复速度快、对业务影响小，成为企业首选的备份方式。但是在保障数据安全完备上，仅仅有数据备份是不够的，验证备份数据是否可用(即备份数据的有效性)也是数据安全的重要条件，通过Xtrabackup对备份文件进行恢复是验证数据可用性的可行方案，但是在成百上千个数据库***的情况下，数据备份文件众多，对数据进行有效验证将是一个费力、耗时的工作，成本极高且无法及时对数据进行有效验证。当数据丢失或数据库因故障不能正常运行，需要通过备份来恢复数据，如果使用了无效的备份文件，数据无法恢复，后果将是灾难性的。
发明内容
本申请的目的旨在至少能解决上述的技术缺陷之一。本申请所采用的技术方案如下：
第一方面，本申请实施例公开了一种验证备份数据有效性的方法，所述方法包括：
获取备份数据库中目标实例的备份数据信息；
从所述备份数据中获取目标数据表；
创建并执行测试实例，其中所述测试实例用于访问所述目标数据表；
访问成功，则确定所述备份数据库的备份数据有效。
进一步地，所述备份数据库为关系型数据库，所述目标实例为未验证过备份数据有效性的实例，所述目标数据表包括所述目标实例备份数据中的表结构文件和表数据文件。
进一步地，所述获取目标实例包括：
从备份数据看中获取备份实例信息；其中所述备份实例信息至少包括备份实例访问所述备份数据库的端口信息；
将所述备份实例信息记录在配置文件中；
在所述配置文件中获取未被验证备份数据有效性的备份实例为目标实例。
进一步地，所述获取目标数据表进一步包括：按照预设规则获取文件大小满足预设阈值的目标数据表；其中所述预设规则为随机获取或接受用户选择指令；其中所述预设阈值可接受用户的自定义设置。
进一步地，所述方法还包括：所述测试实例获取所述目标数据表的行数信息，后将所述测试实例、目标数据表和表行数记录在预设格式文件中；其中所述预设格式包括但限于数据表、分析报告；将所述预设格式文件发送至用户。
进一步地，从所述备份数据中获取目标数据表之前，所述方法还包括：
根据预设判断规则，判断所述目标实例的备份数据是否为最新的备份数据；
确定所述备份数据为最新备份数据后从所述备份数据中获取目标数据表。
第二方面，本申请实施例提供了一种验证备份数据有效性的装置，所述装置包括：通讯模块、创建模块、执行模块和确定模块；其中，
所述通讯模块，用于获取备份数据库中目标实例的备份数据信息；
所述通讯模块，还用于从所述备份数据中获取目标数据表；
所述创建模块，用于创建测试实例；
所处执行模块，用于执行测试实例，其中所述测试实例用于访问所述目标数据表；
所述确定模块，用于在访问成功后确定所述备份数据库的备份数据有效。
进一步地，所述装置还包括存储模块；其中，所述存储模块存储有获取目标数据表的预设规则；所述通讯模块，具体用于按照存储模块存储的预设规则获取文件大小满足预设阈值的目标数据表；其中所述预设规则为随机获取或接受用户选择指令；其中所述预设阈值可接受用户的自定义设置。
第三方面，本申请实施例提供了一种电子设备，包括处理器和存储器；
所述存储器，用于存储操作指令；
所述处理器，用于通过调用所述操作指令，执行上述任一实施例中所述的方法。
第四方面，本申请实施例提供了一种计算机可读存储介质，所述存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现上述任一实施例所述的方法。
本申请实施例提供验证备份数据有效性的方案包括通过对未执行数据有效性验证的备份数据中选取的其中文件大小符合要求的表结构文件和表数据文件，创建新的测试实例并将所述表结构文件和表数据文件复制在新测试实例的目录下，利用新的测试实例中对选取的表结构文件和表数据文件进行恢复验证，以实现对备份数据有效性的验证。本申请的有益效果至少包括以下之一：
(1)本申请的方案在验证数据有效性的时候，不需要对全量数据进行恢复，可以选择指定范围大小的表来恢复，数据量小，恢复速度快，极大的节省了对服务器资源的占用，并能够有效的验证数据库备份文件的可用性。
(2)本申请的方案能够实现对备份数据的自动化验证，可以通过设置每天定时任务，选取不同的实例进行验证，验证过的备份文件，不会重复验证，整个服务器上的所有实例循环验证，整个过程不需要人工参与，验证速度快，出错率低，极大的降低了工作量，节省人力成本。
(3)本申请的方案可以将验证信息和验证结果及时通过例如邮件报表等的形式发送给用户，方便用户通过清晰明确的信息及时发现有问题的备份以便及时处理。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对本申请实施例描述中所需要使用的附图作简单地介绍。
图1为本申请实施例提供的一种验证备份数据有效性的方法的流程示意图；
图2为本申请实施例提供的一种验证备份数据有效性的装置的示意图；
图3为本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
下面详细描述本申请的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本申请，而不能解释为对本发明的限制。
本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式，其中的“第一”“第二”等只是为了介绍清楚方案而进行的对象区分定义，并不对对象本身进行限制，当然“第一”和“第二”限定的对象可能是同一个终端、设备和用户等，也可能是同一种终端、设备和用户。应该进一步理解的是，本申请的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。
此外应理解，本申请实施例中“至少一个”是指一个或者多个，“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B的情况，其中A、B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一(项)个”或其类似表达，是指的这些项中的任意组合，包括单项(个)或复数项(个)的任意组合。例如，a、b或c中的至少一项(个)，可以表示：a，b，c，a和b，a和c，b和c，或a、b和c，其中a、b、c可以是单个，也可以是多个。
目前现有技术中的验证备份数据有效性的方案如背景技术中介绍的存在着通用性差问题，此外还存在一些其他问题，例如Xtrabackup备份方式为全量物理备份，验证数据有效性需全量恢复。线上业务***，每时每刻都在承接业务流量，长时间的运行，数据库中存放大量的数据，对这些***进行全量备份，备份文件巨大，Xtrabackup验证数据备份，只能将所有的数据进行恢复，在恢复的过程中，对CPU、内存等计算资源消耗严重，如果有其它业务***正在运行，有可能会影响业务性能，同时，全量的备份文件恢复会占用大量的存储资源，如果磁盘空间不足，会导致数据恢复失败，验证数据有效性将无法进行，磁盘空间占满将严重影响线上业务的正常运行，风险极大。其次线上数据库实例成百上千，对每个备份文件进行验证，工作量大，人工成本高，无法及时验证。在金融行业，业务逻辑复杂，数据类型多种多样，产生的数据量巨大，为了存放众多的数据，需要大量的数据库实例来存储，加之，数据重要，必须对每个数据库进行备份，因此，每天产生大量的备份文件，存放到不同的服务器上去，为了验证数据文件是否可用，需要登录不同的服务器对数据进行全量恢复，数据恢复速度慢，时间消耗长，工作量大，对人的精力消耗大，难免出现错误，备份文件每天都会产生，无法及时验证数据是否有效。另外验证文件众多，无法及时、准确获取验证结果。备份文件需要单独验证，在大量的实例面前，获取准确的验证结果会成为一个不小的难题，无法及时准确的获取验证信息，对有问题的备份文件无法及时处理，当数据出现问题，需要通过备份文件恢复时，备份文件不可用，数据无法恢复，造成的影响将是巨大的。基于此，本发明的以下实施例就是提供一种验证备份数据有效性的方法以解决上述至少之一的缺陷。
为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施方式作进一步地详细描述。
需要说明的是，在本申请实施例中所述用户是指进行备份数据有效性验证的工作人员，所述“目标”均为众多处理对象中待处理或正在被处理的对象的一个代表。
下面以具体地实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图，对本申请的实施例进行描述。
下面以具体地实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图，对本申请的实施例进行描述。
图1示出了本申请实施例提供的一种验证备份数据有效性的的流程示意图，如图1所示，该方法主要可以包括：
S101、获取备份数据库中目标实例的备份数据信息；
在本申请实施例中，所述备份数据库为关系型数据库，一个实例是指通过一个端口号去访问数据库的一个进程，所述目标实例为未验证过备份数据有效性的实例。
在本申请实施例中，所述获取目标实例步骤为：
步骤1、从备份数据看中获取备份实例信息；其中所述备份实例信息至少包括备份实例访问所述备份数据库的端口信息；
步骤2、将所述备份实例信息记录在配置文件中；
步骤3、从已经执行的配置文件中获取实例端口信息，判断要验证的目标实例是否已经执行过备份数据有效性验证，循环判断直至获取到未验证的实例。
在可选实施例中，从所述备份数据中获取目标数据表之前，还需要判断所述目标实例的备份数据是否为最新的备份数据，以防止验证的备份数据不是最新的而做无用工作。其中判断的过程为：根据预设判断规则，判断所述目标实例的备份数据是否为最新的备份数据；其中预设的判断规则为日期为最新日期或当日日期，则确定备份文件备份成功，如果不是，则说明此实例备份失败，将信息记录到数据库中，就不再启动S102步骤；相反如果确定所述备份数据为最新备份数据后则启动S102，即从所述备份数据中获取目标数据表。
S102、从所述备份数据中获取目标数据表；在本申请实施例中所述目标数据表包括所述目标实例备份数据中的表结构文件.frm和表数据文件.ibd。
具体地，获取上述表结构文件.frm和表数据文件.ibd的过程为：按照预设规则(所述预设规则为随机获取或接受用户选择指令)提取文件大小满足预设阈值的目标数据表，其中所述预设阈值可接受用户的自定义设置。再步骤S103中创建的新的测试实例对提取的目标数据表进行恢复验证。本申请实施例的方案在验证数据有效性的时候，不需要对全量数据进行恢复，可以选择指定范围大小的表来恢复，数据量小，恢复速度快，极大的节省了对服务器资源的占用。
S103、创建并执行测试实例，其中所述测试实例用于访问所述目标数据表；在本申请实施例中，将所述目标数据表的过程为将目标数据表中的.ibd和.frm拷贝到该测试实例对应的目录下，然后执行测试实例，只要所述测试实例对所述数据表访问成功，则说明所述目标实例的整个备份数据都具有可用性，具体实现过程为在测试实例中创建一个和验证的表名相同的临时表添加默认主键id字段，将备份文件中的表结构文件.frm和表数据文件.ibd拷贝到测试实例数据目录下，重启实例，验证的表结构将会恢复，同时也可以将.ibd文件中的数据进行恢复，从而保证了对备份文件进行验证的技术支持。
S104、访问成功，则确定所述备份数据库的备份数据有效。
在本申请可选实施例中，用户可以在每天设置定时任务对未执行备份数据有效性的实例按照设置要求去依次执行，相较目前方案中在验证过程中对整体全量数据进行验证，本申请实施例的方案可以将任务分散在不同的日程中去执行，通过抽样一个实例或部分实例备份数据的有效性而实现了对整体备份数据库数据有效性的验证。这种在设定的每个验证工作日内选取不同的实例进行验证，验证过的备份文件，不会重复验证，整个服务器上的所有实例循环验证，整个过程不需要人工参与，验证速度快，出错率低，极大的降低了工作量，节省人力成本。
在本申请实施例中，所述方法还包括：所述测试实例获取所述目标数据表的行数信息，后将所述测试实例、目标数据表和表行数记录在预设格式文件中；其中所述预设格式包括但限于具有分析功能的数据表或分析报告；将所述预设格式文件发送至用户，发送的方式可以用邮件或其他短消息。本申请的方案可以将验证信息和验证结果及时通过例如邮件报表等的形式发送给用户，方便用户通过清晰明确的信息及时发现有问题的备份以便及时处理。
在可选实施例中，在对目标实例备份数据有效性验证完成后可以定时清除用于测试实例、临时统计验证信息或结果的数据库或数据表，以释放资源空间。
基于图1所示的验证备份数据有效性的方法，另一方面本申请实施例提供了一种验证备份数据有效性的装置，所述装置如图2所示，所述装置可以包括：201通讯模块、202创建模块、203执行模块和204确定模块；其中，
所述201通讯模块，用于获取备份数据库中目标实例的备份数据信息；
所述201通讯模块，还用于从所述备份数据中获取目标数据表；
所述202创建模块，用于创建测试实例；
所处203执行模块，用于执行测试实例，其中所述测试实例用于访问所述目标数据表；
所述204确定模块，用于在访问成功后确定所述备份数据库的备份数据有效。
在本申请实施例中，所述装置还包括205存储模块；其中，所述205存储模块存储有获取目标数据表的预设规则；所述201通讯模块，具体用于按照205存储模块存储的预设规则获取文件大小满足预设阈值的目标数据表；其中所述预设规则为随机获取或接受用户选择指令；其中所述预设阈值可接受用户的自定义设置。
可以理解的是，本实施例中的验证备份数据有效性的装置的上述各组成设备具有实现图1中所示的实施例中的方法相应步骤的功能。该功能可以通过硬件实现，也可以通过硬件执行相应的软件实现。该硬件或软件包括一个或多个与上述功能相对应的模块或***。上述模块和***可以是软件和/或硬件，上述各模块和***可以单独实现，也可以多个模块和***集成实现。对于上述各模块和***的功能描述具体可以参见图1中所示实施例中的方法的对应描述，因此，其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果，此处不再赘述。
可以理解的是，本发明实施例示意的结构并不构成对验证备份数据有效性的装置的具体结构的具体限定。在本申请另一些实施例中，验证备份数据有效性的装置可以包括比图示更多或更少的部件，或者组合某些部件，或者拆分某些部件，或者不同的部件布置。图示的部件可以以硬件，软件或软件和硬件的组合实现。
本申请实施例提供了一种电子设备，包括处理器和存储器；
存储器，用于存储操作指令；
处理器，用于通过调用操作指令，执行本申请任一实施方式中所提供的验证备份数据有效性的方法。
作为一个示例，图3示出了本申请实施例所适用的一种电子设备的结构示意图，如图3所示，该电子设备300包括：处理器301和存储器303。其中，处理器301和存储器303相连，如通过总线302相连。可选的，电子设备300还可以包括收发器304。需要说明的是，实际应用中收发器304不限于一个。可以理解的是，本发明实施例示意的结构并不构成对电子设备300的具体结构的具体限定。在本申请另一些实施例中，电子设备300可以包括比图示更多或更少的部件，或者组合某些部件，或者拆分某些部件，或者不同的部件布置。图示的部件可以以硬件，软件或软件和硬件的组合实。可选地，电子设备还可以包括显示屏305，用于显示图像，或需要时接收用户的操作指令。
其中，处理器301应用于本申请实施例中，用于实现上述方法实施例所示的方法。收发器304可以包括接收机和发射机，收发器304应用于本申请实施例中，用于执行时实现本申请实施例的电子设备与其他设备通信的功能。
处理器301可以是CPU(Central Processing Unit，中央处理器)，通用处理器，DSP(Digital Signal Processor，数据信号处理器)，ASIC(Application SpecificIntegrated Circuit，专用集成电路)，FPGA(Field Programmable Gate Array，现场可编程门阵列)或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框，模块和电路。处理器301也可以是实现计算功能的组合，例如包含一个或多个微处理器组合，DSP和微处理器的组合等。
处理器301也可以包括一个或多个处理单元，例如：处理器301可以包括应用处理器(application processor，AP)，调制解调处理器，图形处理器(graphicsprocessingunit，GPU)，图像信号处理器(image signal processor,ISP)，控制器，存储器，视频编解码器，数字信号处理器(digital signal processor,DSP)，基带处理器，和/或神经网络处理器(Neural-network Processing Unit,NPU)等。其中，不同的处理单元可以是独立的器件，也可以集成在一个或多个处理器中。其中，控制器可以是电子设备300的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号，产生操作控制信号，完成取指令和执行指令的控制。处理器301中还可以设置存储器，用于存储指令和数据。在一些实施例中，处理器301中的存储器为高速缓冲存储器。该存储器可以保存处理器301刚用过或循环使用的指令或数据。如果处理器301需要再次使用该指令或数据，可从所述存储器中直接调用。避免了重复存取，减少了处理器301的等待时间，因而提高了***的效率。
处理器301可以运行本申请实施例提供的验证备份数据有效性的方法，以便于降低用户的操作复杂度、提高终端设备的智能化程度，提升用户的体验。处理器301可以包括不同的器件，比如集成CPU和GPU时，CPU和GPU可以配合执行本申请实施例提供的验证备份数据有效性的方法，比如验证备份数据有效性的方法中部分算法由CPU执行，另一部分算法由GPU执行，以得到较快的处理效率。
总线302可包括一通路，在上述组件之间传送信息。总线302可以是PCI(Peripheral Component Interconnect，外设部件互连标准)总线或EISA(ExtendedIndustry Standard Architecture，扩展工业标准结构)总线等。总线302可以分为地址总线、数据总线、控制总线等。为便于表示，图3中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
存储器303可以是ROM(Read Only Memory，只读存储器)或可存储静态信息和指令的其他类型的静态存储设备，RAM(Random Access Memory，随机存取存储器)或者可存储信息和指令的其他类型的动态存储设备，也可以是EEPROM(Electrically ErasableProgrammable Read Only Memory，电可擦可编程只读存储器)、CD-ROM(Compact DiscRead Only Memory，只读光盘)，也可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件，闪存器件，通用闪存存储器(universal flashstorage，UFS)，或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质，但不限于此。
可选的，存储器303用于存储执行本申请方案的应用程序代码，并由处理器301来控制执行。处理器301用于执行存储器303中存储的应用程序代码，以实现本申请任一实施方式中所提供的验证备份数据有效性的方法。
存储器303可以用于存储计算机可执行程序代码，所述可执行程序代码包括指令。处理器301通过运行存储在存储器303的指令，从而执行电子设备300的各种功能应用以及数据处理。存储器303可以包括存储程序区和存储数据区。其中，存储程序区可存储操作***，应用程序的代码等。存储数据区可存储电子设备300使用过程中所创建的数据(比如相机应用采集的图像、视频等)等。
存储器303还可以存储本申请实施例提供的验证备份数据有效性的方法对应的一个或多个计算机程序。该一个或多个计算机程序被存储在上述存储器303中并被配置为被该一个或多个处理器301执行，该一个或多个计算机程序包括指令，上述指令可以用于执行上述相应实施例中的各个步骤。
当然，本申请实施例提供的验证备份数据有效性的方法的代码还可以存储在外部存储器中。这种情况下，处理器301可以通过外部存储器接口运行存储在外部存储器中的验证备份数据有效性的方法的代码，处理器301可以控制运行验证备份数据有效性的流程。
显示屏305包括显示面板。显示面板可以采用液晶显示屏(liquid crystaldisplay，LCD)，有机发光二极管(organic light-emittingdiode，OLED)，有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的，AMOLED)，柔性发光二极管(flex light-emittingdiode，FLED)，Miniled，MicroLed，Micro-oLed，量子点发光二极管(quantum dot lightemitting diodes，QLED)等。在一些实施例中，电子设备300可以包括1个或N个显示屏305，N为大于1的正整数。显示屏305可用于显示由用户输入的信息或提供给用户的信息以及各种图形用户界面(graphical userinterface，GUI)。例如，显示屏305可以显示照片、视频、网页、或者文件等。
本申请实施例提供的电子设备，适用于上述方法任一实施例，因此，其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果，此处不再赘述。
本申请实施例提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该程序被处理器执行时实现上述方法实施例所示的验证备份数据有效性的方法。
本申请实施例提供的计算机可读存储介质，适用于上述方法任一实施例，因此，其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果，此处不再赘述。
本申请实施例还提供了一种计算机程序产品，当该计算机程序产品在计算机上运行时，使得计算机执行上述相关步骤，以实现上述实施例中的方法。本申请实施例提供的计算机程序产品，适用于上述方法任一实施例，因此，其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果，此处不再赘述。
本申请上述实施例公开的验证备份数据有效性的方案为获取备份数据库中目标实例的备份数据信息；从所述备份数据中获取目标数据表，创建并执行测试实例，其中所述测试实例用于访问所述目标数据表；访问成功，则确定所述备份数据库的备份数据有效。本申请实施例对未执行数据有效性验证的备份数据中选取的其中文件大小符合要求的表结构文件和表数据文件，创建新的测试实例并将所述表结构文件和表数据文件复制在新测试实例的目录下，利用新的测试实例中对选取的表结构文件和表数据文件进行恢复验证，以实现对备份数据有效性的验证。本申请的方案在验证数据有效性的时候，不需要对全量数据进行恢复，可以选择指定范围大小的表来恢复，数据量小，恢复速度快，极大的节省了对服务器资源的占用，并能够有效的验证数据库备份文件的可用性。
在本申请所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其他的方式实现。例如，以上所描述的装置实施例仅是示意性的，例如，模块或单元的划分，仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个装置，或一些特征可以丢弃，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其他的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是一个物理单元或多个物理单元，即可以位于一个地方，或者也可以分布到多个不同地方。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个可读取存储介质中。基于这样的理解，本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该软件产品存储在一个存储介质中，包括若干指令用以使得一个设备(可以是单片机，芯片等)或处理器(processor)执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(read only memory，ROM)、随机存取存储器(random access memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
应该理解的是，虽然附图的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，其可以以其他的顺序执行。而且，附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，其执行顺序也不必然是依次进行，而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
以上内容，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到变化或替换，还可以做出若干改进和润饰，这些变化、替换、改进和润饰也应视为都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以权利要求的保护范围为准。
Claims (12)
1.一种验证备份数据有效性的方法，其特征在于，所述方法包括：
获取备份数据库中目标实例的备份数据信息；
从所述备份数据中获取目标数据表；
创建并执行测试实例，其中所述测试实例用于访问所述目标数据表；
访问成功，则确定所述备份数据库的备份数据有效。
2.根据权利要求1所述的验证备份数据有效性的方法，其特征在于，所述备份数据库为关系型数据库，所述目标数据表包括所述目标实例备份数据中的表结构文件和表数据文件。
3.根据权利要求1或2所述的验证备份数据有效性的方法，其特征在于，所述目标实例为未验证过备份数据有效性的实例。
4.根据权利要求3所述的验证备份数据有效性的方法，其特征在于，所述获取目标实例包括：
从备份数据看中获取备份实例信息；其中所述备份实例信息至少包括备份实例访问所述备份数据库的端口信息；
将所述备份实例信息记录在配置文件中；
在所述配置文件中获取未被验证备份数据有效性的备份实例为目标实例。
5.根据权利要求1或4所述的验证备份数据有效性的方法，其特征在于，所述获取目标数据表进一步包括：
按照预设规则获取文件大小满足预设阈值的目标数据表；其中所述预设规则为随机获取或接受用户选择指令；其中所述预设阈值可接受用户的自定义设置。
6.根据权利要求5所述的验证备份数据有效性的方法，其特征在于，所述方法还包括：
所述测试实例获取所述目标数据表的行数信息；
将所述测试实例、目标数据表和表行数记录在预设格式文件中；其中所述预设格式包括但限于数据表、分析报告；
将所述预设格式文件发送至用户。
7.根据权利要求1或6所述的验证备份数据有效性的方法，其特征在于，从所述备份数据中获取目标数据表之前，所述方法还包括：
根据预设判断规则，判断所述目标实例的备份数据是否为最新的备份数据；
确定所述备份数据为最新备份数据后从所述备份数据中获取目标数据表。
8.一种验证备份数据有效性的装置，其特征在于，所述装置包括：通讯模块、创建模块、执行模块和确定模块；其中，
所述通讯模块，用于获取备份数据库中目标实例的备份数据信息；
所述通讯模块，还用于从所述备份数据中获取目标数据表；
所述创建模块，用于创建测试实例；
所处执行模块，用于执行测试实例，其中所述测试实例用于访问所述目标数据表；
所述确定模块，用于在访问成功后确定所述备份数据库的备份数据有效。
9.根据权利要求8所述的验证备份数据有效性的装置，其特征在于，所述备份数据库为关系型数据库；所述目标实例为未验证过备份数据有效性的实例；所述目标数据表包括所述目标实例备份数据中的表结构文件和表数据文件。
10.根据权利要求9所述的验证备份数据有效性的装置，其特征在于，所述装置还包括存储模块；其中，所述存储模块存储有获取目标数据表的预设规则；
所述通讯模块，具体用于按照存储模块存储的预设规则获取文件大小满足预设阈值的目标数据表；其中所述预设规则为随机获取或接受用户选择指令；其中所述预设阈值可接受用户的自定义设置。
11.一种电子设备，其特征在于，包括处理器和存储器；
所述存储器，用于存储操作指令；
所述处理器，用于通过调用所述操作指令，执行权利要求1-7中任一项所述的方法。
12.一种计算机可读存储介质，其特征在于，所述存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1-7中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011432734.9A CN112506928A (zh) | 2020-12-10 | 2020-12-10 | 一种验证备份数据有效性的方法和装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011432734.9A CN112506928A (zh) | 2020-12-10 | 2020-12-10 | 一种验证备份数据有效性的方法和装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112506928A true CN112506928A (zh) | 2021-03-16 |
Family
ID=74970391
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011432734.9A Pending CN112506928A (zh) | 2020-12-10 | 2020-12-10 | 一种验证备份数据有效性的方法和装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112506928A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113984067A (zh) * | 2021-10-28 | 2022-01-28 | 福建省海峡智汇科技有限公司 | 一种基于分布式技术的导航自动化*** |
| CN115904819A (zh) * | 2023-02-09 | 2023-04-04 | 云和恩墨(北京)信息技术有限公司 | 数据库备份数据的验证方法及装置 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105677509A (zh) * | 2015-12-25 | 2016-06-15 | 北京奇虎科技有限公司 | 数据库中数据的恢复方法及装置 |
| CN110008129A (zh) * | 2019-04-11 | 2019-07-12 | 苏州浪潮智能科技有限公司 | 一种存储定时快照的可靠性测试方法、装置及设备 |
| CN111240897A (zh) * | 2020-01-07 | 2020-06-05 | 腾讯科技（深圳）有限公司 | 一种数据处理方法及相关设备 |
-
2020
- 2020-12-10 CN CN202011432734.9A patent/CN112506928A/zh active Pending
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105677509A (zh) * | 2015-12-25 | 2016-06-15 | 北京奇虎科技有限公司 | 数据库中数据的恢复方法及装置 |
| CN110008129A (zh) * | 2019-04-11 | 2019-07-12 | 苏州浪潮智能科技有限公司 | 一种存储定时快照的可靠性测试方法、装置及设备 |
| CN111240897A (zh) * | 2020-01-07 | 2020-06-05 | 腾讯科技（深圳）有限公司 | 一种数据处理方法及相关设备 |
Non-Patent Citations (2)
| Title |
|---|
| 叶斌；黄洪桥；余阳: "《信息技术基础》", 31 July 2017, 重庆大学出版社, pages: 19 * |
| 林新文: "《药品生产质量管理规范检查概要》", 31 July 2020, 湖南科学技术出版社, pages: 264 * |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113984067A (zh) * | 2021-10-28 | 2022-01-28 | 福建省海峡智汇科技有限公司 | 一种基于分布式技术的导航自动化*** |
| CN113984067B (zh) * | 2021-10-28 | 2023-04-11 | 福建省海峡智汇科技有限公司 | 一种基于分布式技术的导航自动化*** |
| CN115904819A (zh) * | 2023-02-09 | 2023-04-04 | 云和恩墨(北京)信息技术有限公司 | 数据库备份数据的验证方法及装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6219305B2 (ja) | アプリケーションデータを復元するためのシステム及び方法 | |
| US10289687B2 (en) | Space optimized snapshot for network backup | |
| US20180285216A1 (en) | Virtual Machine Recovery Method and Virtual Machine Management Device | |
| US10866866B2 (en) | Query fault processing method and processing apparatus | |
| CN112286728A (zh) | 数据备份方法、装置、设备及计算机存储介质 | |
| CN112506928A (zh) | 一种验证备份数据有效性的方法和装置 | |
| CN112035472B (zh) | 数据处理方法、装置、计算机设备和存储介质 | |
| CN105573859A (zh) | 一种数据库的数据恢复方法和设备 | |
| CN104641650A (zh) | 在数据存储子***中的源引用复制 | |
| CN108121774B (zh) | 一种数据表备份方法及终端设备 | |
| CN110737504A (zh) | 一种深度学习模型训练容错方法、***、终端及存储介质 | |
| CN114020527A (zh) | 快照恢复方法、装置、计算机设备及存储介质 | |
| CN109445909A (zh) | 虚拟机数据的备份方法、***、终端及存储介质 | |
| US20220129446A1 (en) | Distributed Ledger Management Method, Distributed Ledger System, And Node | |
| CN114996057A (zh) | 数据备份方法及装置、电子设备和计算机可读存储介质 | |
| CN109992475B (zh) | 一种日志的处理方法、服务器及存储介质 | |
| JP2009181497A (ja) | ジョブ処理システムおよびジョブ処理方法 | |
| CN113434359B (zh) | 数据溯源***构建方法、装置、电子设备及可读存储介质 | |
| CN116578446B (zh) | 虚拟机备份方法、装置、***、电子设备及存储介质 | |
| CN110658989B (zh) | 用于备份存储垃圾收集的***和方法 | |
| US20240111623A1 (en) | Extended protection storage system put operation | |
| CN111444040B (zh) | 一种元数据备份方法及装置 | |
| CN115292097B (zh) | 数据库实例创建方法、装置、设备、存储介质和程序产品 | |
| CN115329391B (zh) | 一种文本数据库的防护方法、装置、设备及介质 | |
| CN115525662A (zh) | 保障数据一致性的处理方法、装置及相关设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |