CN113779132A - 一种数据导入的方法、装置、计算机设备和存储介质 - Google Patents

一种数据导入的方法、装置、计算机设备和存储介质 Download PDF

Info

Publication number
CN113779132A
CN113779132A CN202111084103.7A CN202111084103A CN113779132A CN 113779132 A CN113779132 A CN 113779132A CN 202111084103 A CN202111084103 A CN 202111084103A CN 113779132 A CN113779132 A CN 113779132A
Authority
CN
China
Prior art keywords
target
field
data
model
template
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111084103.7A
Other languages
English (en)
Other versions
CN113779132B (zh
Inventor
张焘
侯力夫
金向平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Home Cloud Network Technology Co ltd
Original Assignee
Shenzhen Home Cloud Network Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Home Cloud Network Technology Co ltd filed Critical Shenzhen Home Cloud Network Technology Co ltd
Priority to CN202111084103.7A priority Critical patent/CN113779132B/zh
Priority claimed from CN202111084103.7A external-priority patent/CN113779132B/zh
Publication of CN113779132A publication Critical patent/CN113779132A/zh
Application granted granted Critical
Publication of CN113779132B publication Critical patent/CN113779132B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • G06F16/258Data format conversion from or to a database
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • G06F16/2291User-Defined Types; Storage management thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28Databases characterised by their database models, e.g. relational or object models
    • G06F16/284Relational databases
    • G06F16/285Clustering or classification

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Stored Programmes (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请涉及一种数据导入的方法、装置、计算机设备和存储介质。所述方法包括建立元模型,通过元模型中设置的字段生成第一默认模板,通过元模型中设置的字段属性生成第一默认规则;通过改变元模型中的字段将第一默认模板调整为目标模板,通过改变元模型中的字段属性将第一默认规则调整为目标规则;将所述目标模板发送至目标终端,获取所述目标终端上传的已导入数据的目标模板和对应的脚本信息;通过所述脚本信息从所述元模型中获取到对应的目标字段,按照所述目标字段加载所述目标规则;通过所述目标规则动态校验所述目标模板中的数据,根据校验结果分类存储所述数据这一方法,能够自定义规则和模板以实现灵活地支持不同业务数据的导入。

Description

一种数据导入的方法、装置、计算机设备和存储介质
技术领域
本申请涉及数据处理技术领域,特别是涉及一种数据导入导出方法、装置、计算机设备和存储介质。
背景技术
随着数据处理技术的发展,对于实现数据的导入导出的要求日益增多。现有技术中,由于企业、单位等业务具有复杂多变、来源广、处理复杂的特点,使得数据的导入导出技术应用于企业、单位等时,处理的过程也变得异常复杂。传统的技术中,通常,通过配置配置表的生成界面以生成配置表,设置配置表内的配置信息,然后在配置表生成界面所在的前端设置与配置表生成界面并列的校验柜子界面,用于生成校验规则或者导入预先制备的校验规则。这就使得每个功能的数据导入都需要到配置界面单独维护一套模板,维护界面繁多,维护成本较大,而且每个功能的校验规则都需要预先定义。并且,现有的数据导入导出技术在数据处理的过程中,只会关注数据本身,对数据的处理逻辑未涉及业务方面,以使技术支持的数据来源单一,导致数据量大时会导致***奔溃等。由于企业应用的场景复杂多变,数据来源多,现有的技术已难以支持。
发明内容
基于此,有必要针对上述技术问题,提供一种数据导入方法、装置、计算机设备和存储介质实现自定义规则和模板以达到灵活地支持不同业务数据的导入的目的。
一种数据导入的方法,所述方法包括:
建立元模型,通过元模型中设置的字段生成第一默认模板,通过元模型中设置的字段属性生成第一默认规则。
通过改变元模型中的字段将第一默认模板调整为目标模板,通过改变元模型中的字段属性将第一默认规则调整为目标规则。
将所述目标模板发送至目标终端,获取所述目标终端上传的已导入数据的目标模板和对应的脚本信息。
通过所述脚本信息从所述元模型中获取到对应的目标字段,按照所述目标字段加载所述目标规则。
通过所述目标规则动态校验所述目标模板中的数据,根据校验结果分类存储所述数据。
在其中一个实施例中,所述建立元模型包括:
通过封装视图模型和控件编程模型间接控制终端界面和终端控件,在终端界面进行元数据设计,所述元数据包括主实体模型、字段和字段属性。
通过所述主实体模型构建数据字典,所述数据字典存储单据体、字段值。
调整元数据的文件格式,并将元数据的文件存储到数据库中。
在其中一个实施例中,所述通过改变元模型中的字段将默认模板调整为目标模板,通过改变元模型中的字段属性将默认规则调整为目标规则之后,还包括:
通过业务组织记录记录所述目标规则和所述目标模板。
设置所述目标规则和所述目标模板作为下一次数据导入时的第二默认规则和第二默认模板。
在其中一个实施例中,所述设置所述目标规则和所述目标模板作为下一次数据导入时的第二默认规则和第二默认模板之后,还包括:
验证是否存在所述第二默认规则。
若存在所述第二默认规则,则通过所述第二默认规则在原模型中找到对应的字段属性和对应的字段,通过设置对应的字段生成第三默认模板,并将所述第三默认模板发送至目标终端;若不存在所述第二默认规则,则通过元模型中设置的字段生成第一默认模板,通过元模型中设置的字段属性生成第一默认规则,并将所述第一默认模板发送至目标终端。
在其中一个实施例中,所述通过所述脚本信息从所述元模型中获取到对应的目标字段,按照所述目标字段加载所述目标规则,包括:
获取所述目标字段的散列值和所述目标模板的散列值。
比较所述目标字段的散列值和所述目标模板的散列值,若散列值相同,则所述目标模板为正确模板,将所述目标规则应用于所述目标模板。
在其中一个实施例中,所述通过所述目标规则动态校验所述目标模板中的数据,根据校验结果分类存储所述数据,包括:
通过元模型中设置的字段动态获取字段的必录性,进行必录性校验。
通过元模型中设置的字段属性动态获取字段类型,并动态校验对应字段的数据;若所述字段类型为基础资料类型字段,则通过元模型动态获取所述基础资料类型字段的表结构,并校验对应字段的数据。
根据校验结果将数据分类存储所述数据。
在其中一个实施例中,所述根据校验结果将数据分类存储所述数据包括:
若为父子分录的数据,则采用递归算法对所述数据进行分类处理,将父分录的数据对应子分录数据按照父子结构进行组装,并将组装后的数据更新到分录。
将所述数据存储到数据库。
一种数据导入的装置,所述装置包括:
生成模块,用于建立元模型,通过元模型中设置的字段生成第一默认模板,通过元模型中设置的字段属性生成第一默认规则。
调整模块,用于通过改变元模型中的字段将第一默认模板调整为目标模板,通过改变元模型中的字段属性将第一默认规则调整为目标规则。
导入模块,用于将所述目标模板发送至目标终端,获取所述目标终端上传的已导入数据的目标模板和对应的脚本信息。
获取模块,用于通过所述脚本信息从所述元模型中获取到对应的目标字段,按照所述目标字段加载所述目标规则。
检验模块,用于通过所述目标规则动态校验所述目标模板中的数据,根据校验结果分类存储所述数据。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
建立元模型,通过元模型中设置的字段生成第一默认模板,通过元模型中设置的字段属性生成第一默认规则。
通过改变元模型中的字段将第一默认模板调整为目标模板,通过改变元模型中的字段属性将第一默认规则调整为目标规则。
将所述目标模板发送至目标终端,获取所述目标终端上传的已导入数据的目标模板和对应的脚本信息。
通过所述脚本信息从所述元模型中获取到对应的目标字段,按照所述目标字段加载所述目标规则。
通过所述目标规则动态校验所述目标模板中的数据,根据校验结果分类存储所述数据。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
建立元模型,通过元模型中设置的字段生成第一默认模板,通过元模型中设置的字段属性生成第一默认规则。
通过改变元模型中的字段将第一默认模板调整为目标模板,通过改变元模型中的字段属性将第一默认规则调整为目标规则。
将所述目标模板发送至目标终端,获取所述目标终端上传的已导入数据的目标模板和对应的脚本信息。
通过所述脚本信息从所述元模型中获取到对应的目标字段,按照所述目标字段加载所述目标规则。
通过所述目标规则动态校验所述目标模板中的数据,根据校验结果分类存储所述数据。
上述一种数据导入的方法、装置、计算机设备和存储介质,首先建立元模型,通过元模型中设置的字段生成第一默认模板,通过元模型中设置的字段属性生成第一默认规则;通过改变元模型中的字段将第一默认模板调整为目标模板,通过改变元模型中的字段属性将第一默认规则调整为目标规则;将所述目标模板发送至目标终端,获取所述目标终端上传的已导入数据的目标模板和对应的脚本信息;通过所述脚本信息从所述元模型中获取到对应的目标字段,按照所述目标字段加载所述目标规则;通过所述目标规则动态校验所述目标模板中的数据,根据校验结果分类存储所述数据这一方法,能够自定义规则和模板以实现灵活地支持不同业务数据的导入。
附图说明
图1为一个实施例中一种数据导入的方法的应用环境图;
图2为一个实施例中一种数据导入的方法的流程示意图;
图3为一个实施例中建立元模型步骤的流程示意图;
图4为一个实施例中通过改变元模型中的字段将默认模板调整为目标模板,通过改变元模型中的字段属性将默认规则调整为目标规则之后,还包括步骤的流程示意图;
图5为一个实施例中设置所述目标规则和所述目标模板作为下一次数据导入时的第二默认规则和第二默认模板之后,还包括步骤的流程示意图;
图6为一个实施例中通过所述脚本信息从所述元模型中获取到对应的目标字段,按照所述目标字段加载所述目标规则包括步骤的流程示意图;
图7为一个实施例中通过所述目标规则动态校验所述目标模板中的数据,根据校验结果分类存储所述数据包括步骤的流程示意图;
图8为一个实施例中根据校验结果将数据分类存储所述数据包括步骤的流程示意图;
图9为一个实施例中一种数据导入的装置的结构框图;
图10为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的一种数据导入方法,可以应用于如图1所示的应用环境中。其中,终端102通过网络与服务器104进行通信。首先,在服务器104上建立元模型,通过元模型中设置的字段生成第一默认模板,通过元模型中设置的字段属性生成第一默认规则。然后,通过改变元模型中的字段将第一默认模板调整为目标模板,通过改变元模型中的字段属性将第一默认规则调整为目标规则。然后,通过服务器104将所述目标模板发送至(目标)终端102,获取所述(目标)终端102上传的已导入数据的目标模板和对应的脚本信息。再然后,通过所述脚本信息从所述元模型中获取到对应的目标字段,按照所述目标字段加载所述目标规则。最后,通过所述目标规则动态校验所述目标模板中的数据,根据校验结果分类存储所述数据。其中,终端102可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备,服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个实施例中,如图2所示,提供了一种数据导入方法,以该方法应用于图1中包括终端和服务器的***,并通过终端和服务器的交互实现为例进行说明,包括以下步骤:
步骤202,建立元模型,通过元模型中设置的字段生成第一默认模板,通过元模型中设置的字段属性生成第一默认规则。
其中,元模型由脚本定义,其可分为表单元数据和实体元数据,其中实体元数据包含数据库表字段标识。字段是指是现实业务的内容属性的抽象表示,有不同类型,例如时间、文本、数量、单价、金额、业务对象等。模板是指数据的录入界面,第一默认模板是指依据元模型中的通用字段而生成的通用统一的模板。字段属性可以定义字段的特征和行为,例如字段大小、字段格式、有效性规则等。规则可以控制字段的输入,其中,每个业务都会动态生成一个与之对应的规则。第一默认规则是指依据元模型中的通用字段属性而生成的通用统一的规则。
具体地,在服务器上建立元模型,通过元模型中设置的字段生成第一默认模板,通过元模型中设置的字段属性生成第一默认规则。元模型中设置的字段和元模型中设置的字段属性都具有一般通用性,第一默认模板和第一默认规则之间具有对应关系。
可选地,第一默认模板可以是MS Excel。
步骤204,通过改变元模型中的字段将第一默认模板调整为目标模板,通过改变元模型中的字段属性将第一默认规则调整为目标规则。
其中,目标模板是指用户自定义选择的模板,用户自定义的方式则是调整字段。目标规则是指用户自定义选择的规则,用户自定义的方式则是调整字段属性。目标规则和目标模板之间具有对应关系。
具体地,在服务器上,通过改变元模型中的字段将第一默认模板调整为目标模板,其中,调整方式可以是增加、删减或者添加字段。通过改变元模型中的字段属性将第一默认规则调整为目标规则,其中,调整方式可以是增加、删减或者添加字段属性。
可选地,目标模板可以是MS Excel。
步骤206,将所述目标模板发送至目标终端,获取所述目标终端上传的已导入数据的目标模板和对应的脚本信息。
其中,目标终端是指浏览器、移动端等可视化界面;脚本信息是指脚本页签。
具体地,服务器将将所述目标模板发送至目标终端,然后获取所述目标终端上传的已导入数据的目标模板和对应的脚本信息。
步骤208,通过所述脚本信息从所述元模型中获取到对应的目标字段,按照所述目标字段加载所述目标规则。
其中,按照所述目标字段加载目标规则是指将目标规则应用于目标字段。
具体地,服务器上,通过所述脚本信息从所述元模型中获取到对应的目标字段,将所述目标规则应用于对应的目标字段。
步骤210,通过所述目标规则动态校验所述目标模板中的数据,根据校验结果分类存储所述数据。
具体地,服务器上,每个业务都会动态生成一个规则。通过所述目标规则动态校验所述目标模板中的数据,根据校验结果分类存储所述数据。
上述一种数据导入的方法、装置、计算机设备和存储介质,首先建立元模型,通过元模型中设置的字段生成第一默认模板,通过元模型中设置的字段属性生成第一默认规则;通过改变元模型中的字段将第一默认模板调整为目标模板,通过改变元模型中的字段属性将第一默认规则调整为目标规则;将所述目标模板发送至目标终端,获取所述目标终端上传的已导入数据的目标模板和对应的脚本信息;通过所述脚本信息从所述元模型中获取到对应的目标字段,按照所述目标字段加载所述目标规则;通过所述目标规则动态校验所述目标模板中的数据,根据校验结果分类存储所述数据这一方法,能够自定义规则和模板以实现灵活地支持不同业务数据的导入。
在一个实施例中,如图3所示,所述建立元模型包括:
步骤302,通过封装视图模型和控件编程模型间接控制终端界面和终端控件,在终端界面进行元数据设计,所述元数据包括主实体模型、字段和字段属性,
其中,视图模型是指服务器上用于控制呈现数据,主要可以作用于终端界面。控件编程模型是指服务器上用于控件中的各种离散功能的方法、属性、事件以及控件之间的关系,可作用于终端控件。终端界面是指终端上可用于交互的界面,例如,人机交互界面。终端控件可用于终端控制。
具体地,服务器上,通过封装视图模型和控件编程模型间接控制终端界面和终端控件。
步骤304,通过所述主实体模型构建数据字典,所述数据字典存储单据体、字段值。
其中,元数据是指描述数据属性的信息,元数据可以包括:主实体模型、子实体、字段、字段属性、表结构和界面数据包等。数据字典是指描述数据的信息集合,是对***中使用的所有数据元素的定义的集合,数据字典可存储单据体、字段值。
具体地,在终端界面进行元数据设计并通过主实体模型构建一个数据字典。
步骤306,调整元数据的文件格式,并将元数据的文件存储到数据库中。
其中,元数据的文件格式是指元数据载体文件的格式,格式调整是为了沉淀数据。
本实施例中,服务器上,通过封装视图模型和控件编程模型间接控制终端界面和终端控件;终端上,在终端界面进行元数据设计,所述元数据包括:主实体模型、子实体、字段、字段属性、表结构和界面数据包,其中,通过主实体模型构建一个数据字典,所述数据字典存储单据体、字段值;服务器上,调整元数据的文件格式,并将元数据的文件存储到数据库中,能够实现元模型的建立。
可选地,调整格式为xml格式以沉淀数据。
在一个实施例中,如图4所示,所述通过改变元模型中的字段将默认模板调整为目标模板,通过改变元模型中的字段属性将默认规则调整为目标规则之后,还包括:
步骤402,通过业务组织记录记录所述目标规则和所述目标模板。
其中,业务组织记录是指记录组织业务流程何时及如何发生,业务活动输入与输出,资源使用等信息的溯源数据,这里主要是指记录目标规则和目标模板的相关信息。
具体地,服务器上,通过业务组织记录记录所述目标规则和所述目标模板。
步骤404,设置所述目标规则和所述目标模板作为下一次数据导入时的第二默认规则和第二默认模板。
其中,下一次数据导入是指本次调整第一默认规则和第一默认模板为目标规则和目标模板进行数据导入之后的一次数据导入。
具体地,服务器上,设置所述目标规则和所述目标模板作为下一次数据导入时的第二默认规则和第二默认模板。
可选地,第二默认模板可以是MS Excel。
本实施例中,服务器上,通过业务组织记录记录所述目标规则和所述目标模板;然后,设置所述目标规则和所述目标模板作为下一次数据导入时的第二默认规则和第二默认模板,能够根据记录将目标规则和目标模板设置为新的规则和模板(第二目标规则和第二默认模板)以实现自定义模板和规则。
在一个实施例中,如图5所示,所述设置所述目标规则和所述目标模板作为下一次数据导入时的第二默认规则和第二默认模板之后,还包括:
步骤502,验证是否存在所述第二默认规则。
其中,第二默认规则是指由用户自定义的目标规则,经过服务器设置成为了第二默认规则。
具体地,服务器上,验证是否存在所述第二默认规则。
步骤504,若存在所述第二默认规则,则通过所述第二默认规则在原模型中找到对应的字段属性和对应的字段,通过设置对应的字段生成第三默认模板,并将所述第三默认模板发送至目标终端;若不存在所述第二默认规则,则通过元模型中设置的字段生成第一默认模板,通过元模型中设置的字段属性生成第一默认规则,并将所述第一默认模板发送至目标终端。
其中,第三默认模板是指通过第二默认规则在原模型中找到对应的字段属性和对应的字段,通过设置对应的字段生成的。
具体地,服务器上,经过判断,若存在所述第二默认规则,则通过所述第二默认规则在原模型中找到对应的字段属性和对应的字段,通过设置对应的字段生成第三默认模板,并将所述第三默认模板发送至目标终端;若不存在所述第二默认规则,则通过元模型中设置的字段生成第一默认模板,通过元模型中设置的字段属性生成第一默认规则,并将所述第一默认模板发送至目标终端。
本实施例中,通过验证存在第二默认规则来判断并生成不同的模板,能够实现通过规则经由元模型的设置达到自定义模板的目的。
在一个实施例中,如图6所示,所述通过所述脚本信息从所述元模型中获取到对应的目标字段,按照所述目标字段加载所述目标规则包括:
步骤602,获取所述目标字段的散列值和所述目标模板的散列值。
其中,散列值是指作为哈希函数的答案给出的一段数据,称为值。
具体地,服务器获取所述目标字段的散列值和目标模板的散列值
步骤604,比较所述目标字段的散列值和所述目标模板的散列值,若散列值相同,则所述目标模板为正确模板,将所述目标规则应用于所述目标模板。
其中,目标字段和目标模板之间具有对应关系,因此其散列值具有同一性。
具体地,服务器比较所述目标字段的散列值和目标模板的散列值,若散列值相同,则所述目标模板为正确模板,将所述目标规则应用于所述目标模板。
本实施例中,通过比较目标字段的散列值和目标模板的散列值,能够验证目标模板地正确性。
在一个实施例中,如图7所示,所述通过所述目标规则动态校验所述目标模板中的数据,根据校验结果分类存储所述数据包括:
步骤702,通过元模型中设置的字段动态获取字段的必录性,进行必录性校验。
其中,必录性是为了确保数据的有效性和合法性。
具体地,服务器上,通过元模型中设置的字段动态获取字段的必录性,进行必录性校验。
步骤704,通过元模型中设置的字段属性动态获取字段类型,并动态校验对应字段的数据;若所述字段类型为基础资料类型字段,则通过元模型动态获取所述基础资料类型字段的表结构,并校验对应字段的数据。
其中,字段类型是指按照一定的分类规则将划分为不同类型,这种分类规则可以自定义,也可以根据业务要求定义。这里是按照业务要求来进行分类的,特殊地,单独将基础资料类型字段分开处理。
具体地,服务器上,通过元模型中设置的字段属性动态获取字段类型,并动态校验对应字段的数据;若所述字段类型为基础资料类型字段,则通过元模型动态获取所述基础资料类型字段的表结构,并校验对应字段的数据。
步骤706,根据校验结果将数据分类存储所述数据。
具体地,服务器上,根据校验结果对数据进行分类并存储数据。
本实施例中,字段的必录性校验和数据的动态校验,并按照校验结果分类存储数据,能够实现存储数据的准确性。
在一个实施例中,如图8所示,所述根据校验结果将数据分类存储所述数据包括:
步骤802,若为父子分录的数据,则采用递归算法对所述数据进行分类处理,将父分录的数据对应子分录数据按照父子结构进行组装,并将组装后的数据更新到分录。
其中,父子分录的数据是指具有父子结构的数据。递归算法是一种用于处理数据的算法,例如递归树法。
具体地,服务器上,通过校验后,得到数据的结构为父子分录结构,那么服务器将采用递归树法对所述数据进行分类处理,将父分录的数据对应子分录数据按照父子结构进行组装,并将组装后的数据更新到分录。
步骤804,将所述数据存储到数据库。
具体地,存储数据到数据库。
本实施例中,通过校验结果单独处理父子分录结构,能够实现父子分录数据的稳定存储。其中,对于父子分录结构的数据,通常技术上难以达到较稳定地存储。
应该理解的是,虽然图2-8的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2-8中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图9所示,提供了一种数据导入的装置,包括:生成模块、调整模块、导入模块、获取模块和检验模块,其中:
生成模块,用于建立元模型,通过元模型中设置的字段生成第一默认模板,通过元模型中设置的字段属性生成第一默认规则。
调整模块,用于通过改变元模型中的字段将第一默认模板调整为目标模板,通过改变元模型中的字段属性将第一默认规则调整为目标规则。
导入模块,用于将所述目标模板发送至目标终端,获取所述目标终端上传的已导入数据的目标模板和对应的脚本信息。
获取模块,用于通过所述脚本信息从所述元模型中获取到对应的目标字段,按照所述目标字段加载所述目标规则。
检验模块,用于通过所述目标规则动态校验所述目标模板中的数据,根据校验结果分类存储所述数据。
在一个实施例中,如图9所示,提供了一种数据导入的装置,包括:控制模块、设计模块和存储模块,其中:
控制模块,用于通过封装视图模型和控件编程模型间接控制终端界面和终端控件,在终端界面进行元数据设计,所述元数据包括主实体模型、字段和字段属性。
构建模块,用于通过主实体模型构建数据字典,所述数据字典存储单据体、字段值。
存储模块,用于调整元数据的文件格式,并将元数据的文件存储到数据库中。
在一个实施例中,如图9所示,提供了一种数据导入的装置,包括:记录模块和设置模块,其中:
记录模块,用于通过业务组织记录记录所述目标规则和所述目标模板。
设置模块,用于设置所述目标规则和所述目标模板作为下一次数据导入时的第二默认规则和第二默认模板。
在一个实施例中,如图9所示,提供了一种数据导入的装置,包括:验证模块和第一判断模块,其中:
验证模块,用于验证是否存在所述第二默认规则;
第一判断模块,用于判断若存在所述第二默认规则,则通过所述第二默认规则在原模型中找到对应的字段属性和对应的字段,通过设置对应的字段生成第三默认模板,并将所述第三默认模板发送至目标终端;若不存在所述第二默认规则,则通过元模型中设置的字段生成第一默认模板,通过元模型中设置的字段属性生成第一默认规则,并将所述第一默认模板发送至目标终端。
在一个实施例中,如图9所示,提供了一种数据导入的装置,包括:另一获取模块和比较模块,其中:
另一获取模块,用于获取所述目标字段的散列值和所述目标模板的散列值。
比较模块,用于比较所述目标字段的散列值和所述目标模板的散列值,若散列值相同,则所述目标模板为正确模板,将所述目标规则应用于所述目标模板。
在一个实施例中,如图9所示,提供了一种数据导入的装置,包括:第一校验模块、第二校验模块和分类模块,其中:
第一校验模块,用于通过元模型中设置的字段动态获取字段的必录性,进行必录性校验;
第二校验模块,用于通过元模型中设置的字段属性动态获取字段类型,并动态校验对应字段的数据;若所述字段类型为基础资料类型字段,则通过元模型动态获取所述基础资料类型字段的表结构,并校验对应字段的数据;
分类模块,用于根据校验结果将数据分类存储所述数据。
在一个实施例中,如图9所示,提供了一种数据导入的装置,包括:第二判断模块和另一存储模块,其中:
第二判断模块,用于若为父子分录的数据,则采用递归算法对所述数据进行分类处理,将父分录的数据对应子分录数据按照父子结构进行组装,并将组装后的数据更新到分录;
另一存储模块,用于将所述数据存储到数据库。
装置实施例中,除了装置独权的实施例之外,还需写出所有方法项从权一一对应的装置项的实施例。
关于一种数据导入的装置的具体限定可以参见上文中对于一种数据导入的方法的限定,在此不再赘述。上述一种数据导入的装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图10所示。该计算机设备包括通过***总线连接的处理器、存储器和网络接口。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作***、计算机程序和数据库。该内存储器为非易失性存储介质中的操作***和计算机程序的运行提供环境。该计算机设备的数据库用于存储导入数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种数据导入地方法。
本领域技术人员可以理解,图10中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现以下步骤:
建立元模型,通过元模型中设置的字段生成第一默认模板,通过元模型中设置的字段属性生成第一默认规则。
通过改变元模型中的字段将第一默认模板调整为目标模板,通过改变元模型中的字段属性将第一默认规则调整为目标规则。
将所述目标模板发送至目标终端,获取所述目标终端上传的已导入数据的目标模板和对应的脚本信息。
通过所述脚本信息从所述元模型中获取到对应的目标字段,按照所述目标字段加载所述目标规则。
通过所述目标规则动态校验所述目标模板中的数据,根据校验结果分类存储所述数据。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
通过封装视图模型和控件编程模型间接控制终端界面和终端控件,在终端界面进行元数据设计,所述元数据包括主实体模型、字段和字段属性。
通过所述主实体模型构建数据字典,所述数据字典存储单据体、字段值。
调整元数据的文件格式,并将元数据的文件存储到数据库中。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
通过业务组织记录记录所述目标规则和所述目标模板。
设置所述目标规则和所述目标模板作为下一次数据导入时的第二默认规则和第二默认模板。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
验证是否存在所述第二默认规则。
若存在所述第二默认规则,则通过所述第二默认规则在原模型中找到对应的字段属性和对应的字段,通过设置对应的字段生成第三默认模板,并将所述第三默认模板发送至目标终端;若不存在所述第二默认规则,则通过元模型中设置的字段生成第一默认模板,通过元模型中设置的字段属性生成第一默认规则,并将所述第一默认模板发送至目标终端。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
获取所述目标字段的散列值和所述目标模板的散列值。
比较所述目标字段的散列值和所述目标模板的散列值,若散列值相同,则所述目标模板为正确模板,将所述目标规则应用于所述目标模板。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
通过元模型中设置的字段动态获取字段的必录性,进行必录性校验。
通过元模型中设置的字段属性动态获取字段类型,并动态校验对应字段的数据;若所述字段类型为基础资料类型字段,则通过元模型动态获取所述基础资料类型字段的表结构,并校验对应字段的数据。
根据校验结果将数据分类存储所述数据。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
若为父子分录的数据,则采用递归算法对所述数据进行分类处理,将父分录的数据对应子分录数据按照父子结构进行组装,并将组装后的数据更新到分录。
将所述数据存储到数据库。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
建立元模型,通过元模型中设置的字段生成第一默认模板,通过元模型中设置的字段属性生成第一默认规则。
通过改变元模型中的字段将第一默认模板调整为目标模板,通过改变元模型中的字段属性将第一默认规则调整为目标规则。
将所述目标模板发送至目标终端,获取所述目标终端上传的已导入数据的目标模板和对应的脚本信息。
通过所述脚本信息从所述元模型中获取到对应的目标字段,按照所述目标字段加载所述目标规则。
通过所述目标规则动态校验所述目标模板中的数据,根据校验结果分类存储所述数据。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
通过封装视图模型和控件编程模型间接控制终端界面和终端控件,在终端界面进行元数据设计,所述元数据包括主实体模型、字段和字段属性。
通过所述主实体模型构建数据字典,所述数据字典存储单据体、字段值。
调整元数据的文件格式,并将元数据的文件存储到数据库中。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
通过业务组织记录记录所述目标规则和所述目标模板。
设置所述目标规则和所述目标模板作为下一次数据导入时的第二默认规则和第二默认模板。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
验证是否存在所述第二默认规则。
若存在所述第二默认规则,则通过所述第二默认规则在原模型中找到对应的字段属性和对应的字段,通过设置对应的字段生成第三默认模板,并将所述第三默认模板发送至目标终端;若不存在所述第二默认规则,则通过元模型中设置的字段生成第一默认模板,通过元模型中设置的字段属性生成第一默认规则,并将所述第一默认模板发送至目标终端。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
获取所述目标字段的散列值和所述目标模板的散列值。
比较所述目标字段的散列值和所述目标模板的散列值,若散列值相同,则所述目标模板为正确模板,将所述目标规则应用于所述目标模板。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
通过元模型中设置的字段动态获取字段的必录性,进行必录性校验。
通过元模型中设置的字段属性动态获取字段类型,并动态校验对应字段的数据;若所述字段类型为基础资料类型字段,则通过元模型动态获取所述基础资料类型字段的表结构,并校验对应字段的数据。
根据校验结果将数据分类存储所述数据。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
若为父子分录的数据,则采用递归算法对所述数据进行分类处理,将父分录的数据对应子分录数据按照父子结构进行组装,并将组装后的数据更新到分录。
将所述数据存储到数据库。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-Only Memory,ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic Random Access Memory,DRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种数据导入的方法,其特征在于,所述方法包括:
建立元模型,通过元模型中设置的字段生成第一默认模板,通过元模型中设置的字段属性生成第一默认规则;
通过改变元模型中的字段将第一默认模板调整为目标模板,通过改变元模型中的字段属性将第一默认规则调整为目标规则;
将所述目标模板发送至目标终端,获取所述目标终端上传的已导入数据的目标模板和对应的脚本信息;
通过所述脚本信息从所述元模型中获取到对应的目标字段,按照所述目标字段加载所述目标规则;
通过所述目标规则动态校验所述目标模板中的数据,根据校验结果分类存储所述数据。
2.根据权利要求1所述的方法,其特征在于,所述建立元模型包括:
通过封装视图模型和控件编程模型间接控制终端界面和终端控件,在终端界面进行元数据设计,所述元数据包括主实体模型、字段和字段属性;
通过所述主实体模型构建数据字典,所述数据字典存储单据体、字段值;
调整元数据的文件格式,并将元数据的文件存储到数据库中。
3.根据权利要求1所述的方法,其特征在于,所述通过改变元模型中的字段将默认模板调整为目标模板,通过改变元模型中的字段属性将默认规则调整为目标规则之后,还包括:
通过业务组织记录记录所述目标规则和所述目标模板;
设置所述目标规则和所述目标模板作为下一次数据导入时的第二默认规则和第二默认模板。
4.根据权利要求3所述的方法,其特征在于,所述设置所述目标规则和所述目标模板作为下一次数据导入时的第二默认规则和第二默认模板之后,还包括:
验证是否存在所述第二默认规则;
若存在所述第二默认规则,则通过所述第二默认规则在原模型中找到对应的字段属性和对应的字段,通过设置对应的字段生成第三默认模板,并将所述第三默认模板发送至目标终端;若不存在所述第二默认规则,则通过元模型中设置的字段生成第一默认模板,通过元模型中设置的字段属性生成第一默认规则,并将所述第一默认模板发送至目标终端。
5.根据权利要求1所述的方法,其特征在于,所述通过所述脚本信息从所述元模型中获取到对应的目标字段,按照所述目标字段加载所述目标规则,包括:
获取所述目标字段的散列值和所述目标模板的散列值;
比较所述目标字段的散列值和所述目标模板的散列值,若散列值相同,则所述目标模板为正确模板,将所述目标规则应用于所述目标模板。
6.根据权利要求1所述的方法,其特征在于,所述通过所述目标规则动态校验所述目标模板中的数据,根据校验结果分类存储所述数据,包括:
通过元模型中设置的字段动态获取字段的必录性,进行必录性校验;
通过元模型中设置的字段属性动态获取字段类型,并动态校验对应字段的数据;若所述字段类型为基础资料类型字段,则通过元模型动态获取所述基础资料类型字段的表结构,并校验对应字段的数据;
根据校验结果将数据分类存储所述数据。
7.根据权利要求6所述的方法,其特征在于,所述根据校验结果将数据分类存储所述数据包括:
若为父子分录的数据,则采用递归算法对所述数据进行分类处理,将父分录的数据对应子分录数据按照父子结构进行组装,并将组装后的数据更新到分录;
将所述数据存储到数据库。
8.一种数据导入的装置,其特征在于,所述装置包括:
生成模块,用于建立元模型,通过元模型中设置的字段生成第一默认模板,通过元模型中设置的字段属性生成第一默认规则;
调整模块,用于通过改变元模型中的字段将第一默认模板调整为目标模板,通过改变元模型中的字段属性将第一默认规则调整为目标规则;
导入模块,用于将所述目标模板发送至目标终端,获取所述目标终端上传的已导入数据的目标模板和对应的脚本信息;
获取模块,用于通过所述脚本信息从所述元模型中获取到对应的目标字段,按照所述目标字段加载所述目标规则;
检验模块,用于通过所述目标规则动态校验所述目标模板中的数据,根据校验结果分类存储所述数据。
9.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述的方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
CN202111084103.7A 2021-09-15 一种数据导入的方法、装置、计算机设备和存储介质 Active CN113779132B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111084103.7A CN113779132B (zh) 2021-09-15 一种数据导入的方法、装置、计算机设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111084103.7A CN113779132B (zh) 2021-09-15 一种数据导入的方法、装置、计算机设备和存储介质

Publications (2)

Publication Number Publication Date
CN113779132A true CN113779132A (zh) 2021-12-10
CN113779132B CN113779132B (zh) 2024-07-16

Family

ID=

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110597856A (zh) * 2019-08-20 2019-12-20 华能四川水电有限公司 一种流量深度解析数据的快速检索***和方法

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105447122A (zh) * 2015-11-16 2016-03-30 中国人民解放军理工大学 一种基于多表关联可自主创建档案***的实现方法
CN106033436A (zh) * 2015-03-13 2016-10-19 中国石油化工股份有限公司 一种数据库的合并方法
CN107463625A (zh) * 2017-07-07 2017-12-12 中国建设银行股份有限公司 基于元模型的数据结构建立方法、***、装置及存储介质
CN108052618A (zh) * 2017-12-15 2018-05-18 北京搜狐新媒体信息技术有限公司 数据管理方法及装置
CN109783555A (zh) * 2018-12-13 2019-05-21 东软集团股份有限公司 表单模板存储方法、装置、存储介质及电子设备
CN112380213A (zh) * 2020-11-13 2021-02-19 苏宁云计算有限公司 信息采集方法、装置、计算机设备和存储介质
CN112699100A (zh) * 2020-12-31 2021-04-23 天津浪淘科技股份有限公司 一种基于元数据管理分析***
CN112800370A (zh) * 2021-01-28 2021-05-14 金蝶蝶金云计算有限公司 业务单据的处理方法、装置、计算机设备和存储介质
CN113051354A (zh) * 2021-04-09 2021-06-29 金蝶软件(中国)有限公司 一种基于动态配置的线上寻源方法、装置和计算机设备

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106033436A (zh) * 2015-03-13 2016-10-19 中国石油化工股份有限公司 一种数据库的合并方法
CN105447122A (zh) * 2015-11-16 2016-03-30 中国人民解放军理工大学 一种基于多表关联可自主创建档案***的实现方法
CN107463625A (zh) * 2017-07-07 2017-12-12 中国建设银行股份有限公司 基于元模型的数据结构建立方法、***、装置及存储介质
CN108052618A (zh) * 2017-12-15 2018-05-18 北京搜狐新媒体信息技术有限公司 数据管理方法及装置
CN109783555A (zh) * 2018-12-13 2019-05-21 东软集团股份有限公司 表单模板存储方法、装置、存储介质及电子设备
CN112380213A (zh) * 2020-11-13 2021-02-19 苏宁云计算有限公司 信息采集方法、装置、计算机设备和存储介质
CN112699100A (zh) * 2020-12-31 2021-04-23 天津浪淘科技股份有限公司 一种基于元数据管理分析***
CN112800370A (zh) * 2021-01-28 2021-05-14 金蝶蝶金云计算有限公司 业务单据的处理方法、装置、计算机设备和存储介质
CN113051354A (zh) * 2021-04-09 2021-06-29 金蝶软件(中国)有限公司 一种基于动态配置的线上寻源方法、装置和计算机设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
陈红辉;: "一种基于元数据模型管理的通用比对解决方案", 信息与电脑(理论版), no. 05 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110597856A (zh) * 2019-08-20 2019-12-20 华能四川水电有限公司 一种流量深度解析数据的快速检索***和方法
CN110597856B (zh) * 2019-08-20 2022-08-05 华能四川水电有限公司 一种流量深度解析数据的快速检索***和方法

Similar Documents

Publication Publication Date Title
US9971754B2 (en) Method for associating third party content with online document signing
US8146099B2 (en) Service-oriented pipeline based architecture
US20170068409A1 (en) Computer implemented system and method for dynamically modeling relationships between entities
CN110275861B (zh) 数据存储方法及装置、存储介质、电子装置
CN112488855B (zh) 一种基于规则模板的业务校验方法及设备
US10599985B2 (en) Systems and methods for expediting rule-based data processing
CN111061475B (zh) 软件代码生成方法、装置、计算机设备和存储介质
CN109144487B (zh) 进件业务开发方法、装置、计算机设备和存储介质
CN113742018A (zh) 档案模型调整方法、计算机装置及计算机可读存储介质
CN114443039A (zh) 输入参数校验方法、装置、电子设备及存储介质
CN116737137A (zh) 业务流程的生成方法、装置、计算机设备和存储介质
US20220270122A1 (en) Information delivery method, apparatus, and device, and computer-readable storage medium
CN111177099A (zh) 业务***的数据处理方法及装置、电子设备及存储介质
CN113779132B (zh) 一种数据导入的方法、装置、计算机设备和存储介质
CN113779132A (zh) 一种数据导入的方法、装置、计算机设备和存储介质
CN115658794A (zh) 数据查询方法、装置、计算机设备和存储介质
CN112115235A (zh) 实体属性数据查询及配置方法、装置、服务器
CN108074074B (zh) 整合装置及其整合方法
USRE50043E1 (en) Method for associating third party content with online document signing
CN118313830A (zh) 资源处理方法、装置、计算机设备和存储介质
CN116401323A (zh) 指标数据处理方法、装置及计算机设备
CN116383138A (zh) 单据变更方法、装置、计算机设备和存储介质
CN117610815A (zh) 资源限额数据处理方法、装置、计算机设备和存储介质
CN118312178A (zh) 表单页面的生成方法、装置、计算机设备和可读存储介质
CN116880927A (zh) 规则管理方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant