CN114648058A - 一种基于元数据的锡铋金属材料数据处理方法及装置 - Google Patents
一种基于元数据的锡铋金属材料数据处理方法及装置 Download PDFInfo
- Publication number
- CN114648058A CN114648058A CN202210203450.5A CN202210203450A CN114648058A CN 114648058 A CN114648058 A CN 114648058A CN 202210203450 A CN202210203450 A CN 202210203450A CN 114648058 A CN114648058 A CN 114648058A
- Authority
- CN
- China
- Prior art keywords
- metadata
- data
- tin
- metal material
- governance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- JWVAUCBYEDDGAD-UHFFFAOYSA-N bismuth tin Chemical compound [Sn].[Bi] JWVAUCBYEDDGAD-UHFFFAOYSA-N 0.000 title claims abstract description 54
- 239000007769 metal material Substances 0.000 title claims abstract description 54
- 238000000034 method Methods 0.000 title claims abstract description 14
- 238000012545 processing Methods 0.000 title claims abstract description 12
- 239000008280 blood Substances 0.000 claims abstract description 15
- 210000004369 blood Anatomy 0.000 claims abstract description 15
- 238000004458 analytical method Methods 0.000 claims description 18
- 238000012360 testing method Methods 0.000 claims description 17
- 239000000463 material Substances 0.000 claims description 13
- 238000003672 processing method Methods 0.000 claims description 11
- 239000000956 alloy Substances 0.000 claims description 6
- 229910045601 alloy Inorganic materials 0.000 claims description 6
- 238000002844 melting Methods 0.000 claims description 6
- 230000008018 melting Effects 0.000 claims description 6
- 230000000704 physical effect Effects 0.000 claims description 6
- 238000004220 aggregation Methods 0.000 claims description 3
- 230000002776 aggregation Effects 0.000 claims description 3
- 238000010008 shearing Methods 0.000 claims description 3
- 239000000203 mixture Substances 0.000 claims 1
- 238000005516 engineering process Methods 0.000 abstract description 2
- 238000007726 management method Methods 0.000 description 7
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013523 data management Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
- G06F16/24553—Query execution of query operations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Evolutionary Computation (AREA)
- Evolutionary Biology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Bioinformatics & Computational Biology (AREA)
- Artificial Intelligence (AREA)
- Computational Linguistics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种基于元数据的锡铋金属材料数据处理方法及装置,方法包括:获取锡铋金属材料数据,并建立元数据模型;根据元数据模型以及获取的数据建立元数据治理库;根据元数据治理规则对元数据治理库中的数据进行管理、分析和应用。本发明通过与元数据技术结合,在锡铋金属材料数据之间建立了一个血缘关系图谱,能够快速定位到错误数据及其相关所有数据,找出问题的根源。本发明与现有技术相比,主要解决了现有的锡铋金属材料数据库难以找出数据错误来源的问题,增加了快速定位到错误数据及其相关所有数据,并找出问题的根源的优势。
Description
技术领域
本发明涉及一种基于元数据的锡铋金属材料数据处理方法及装置,属于数据治理技术领域。
背景技术
元数据是描述数据的数据,即根据特定的目的定义描述规则来描述特定类型的资源,是对数据进行组织和管理的基础。利用元数据对数字化信息资源进行描述、管理、交换和共享,已成为当前数值信息资源建设的重要手段。元数据的开发与应用,倡导遵循标准化、规范化和开放性原则,从而为各类信息管理***和知识服务***的互操作和开放性奠定基础。
现有的锡铋金属材料数据库存在难以找出数据错误来源的问题,目前尚未提出有效地解决方案。
发明内容
本发明提供了一种基于元数据的锡铋金属材料数据处理方法及装置,以用于建立血缘关系图谱。
本发明的技术方案是:一种基于元数据的锡铋金属材料数据处理方法,包括:
获取锡铋金属材料数据,并建立元数据模型;
根据元数据模型以及获取的数据建立元数据治理库;
根据元数据治理规则对元数据治理库中的数据进行管理、分析和应用。
所述数据治理库还包括更新模块;每当有新数据的产生都将通过元数据模型自动校准,并同步增量更新至数据治理库。
所述获取锡铋金属材料数据,并建立元数据模型,包括:对获取的锡铋金属材料数据进行分类,根据分类结果建立元数据模型。
所述分类具体为:根据锡铋金属材料数据的空间维度进行分类,空间维度包括力学性能维度、物理性能维度,力学性能维度包括拉伸性能、蠕变性能、屈服强度、抗拉强度、断面延伸率、跌落冲击性能、热疲劳性能、剪切性能,物理性能维度包括合金成分、熔点、热导率、热膨胀系数。
所述元数据治理库包括材料本身的信息元素及信息元素的元数据;所述材料本身的信息元素包括拉伸性能、蠕变性能、屈服强度、抗拉强度、断面延伸率、跌落冲击性能、热疲劳性能、剪切性能、合金成分、熔点、热导率、热膨胀系数,所述信息元素的元数据包括信息元素的产生时间、来源、唯一标识、坐标、空间、归属、项目名称、项目参与人员、测试时间、测试标准、测试仪器、测试环境和测试材料的参数信息。
根据元数据治理规则对元数据治理库中的数据进行管理,包括对材料本身的信息元素及信息元素的元数据进行管理。
根据元数据治理规则对元数据治理库中的数据进行分析,包括对信息元素的元数据进行血缘分析、影响分析和质量分析。
通过hive解析器,依据数据级别、字段级别、表级别三个层级进行血缘分析,再通过聚合后组成血缘关系图谱。
根据元数据治理规则对元数据治理库中的数据进行应用,包括用于依据分析后获得的血缘关系图谱进行锡铋金属材料数据错误分析及锡铋金属材料数据关联查询。
根据本发明实施例的另一方面,还提供了一种基于元数据的锡铋金属材料数据处理装置,包括:
第一建立单元,用于获取锡铋金属材料数据,并建立元数据模型;
第二建立单元,用于根据元数据模型以及获取的数据建立元数据治理库;
执行单元,用于根据元数据治理规则对元数据治理库中的数据进行管理、分析和应用。
本发明的有益效果是:本发明通过与元数据技术结合,在锡铋金属材料数据之间建立了一个血缘关系图谱,能够快速定位到错误数据及其相关所有数据,找出问题的根源。本发明与现有技术相比,主要解决了现有的锡铋金属材料数据库难以找出数据错误来源的问题,增加了快速定位到错误数据及其相关所有数据,并找出问题的根源的优势。
附图说明
图1是本发明总流程图;
图2是锡铋金属材料元数据治理库空间维度详细流程图;
图3是锡铋金属材料锡铋金属材料数据处理详细流程图。
具体实施方式
下面结合附图和实施例,对发明做进一步的说明,但本发明的内容并不限于所述范围。
实施例1:如图1-3所示,一种基于元数据的锡铋金属材料数据处理方法,包括:
获取锡铋金属材料数据,并建立元数据模型;
根据元数据模型以及获取的数据建立元数据治理库;
根据元数据治理规则对元数据治理库中的数据进行管理、分析和应用。
可选地,所述数据治理库还包括更新模块;每当有新数据的产生都将通过元数据模型自动校准,并同步增量更新至数据治理库。
可选地,所述获取锡铋金属材料数据,并建立元数据模型,包括:对获取的锡铋金属材料数据进行分类,根据分类结果建立元数据模型;所述元数据模型属于关系型元数据模型。
可选地,所述分类具体为:根据锡铋金属材料数据的空间维度进行分类,空间维度包括力学性能维度、物理性能维度,力学性能维度包括拉伸性能、蠕变性能、屈服强度、抗拉强度、断面延伸率、跌落冲击性能、热疲劳性能、剪切性能,物理性能维度包括合金成分、熔点、热导率、热膨胀系数。图2展示了锡铋金属材料数据的空间维度的分类。
可选地,所述元数据治理库包括材料本身的信息元素及信息元素的元数据;所述材料本身的信息元素包括拉伸性能、蠕变性能、屈服强度、抗拉强度、断面延伸率、跌落冲击性能、热疲劳性能、剪切性能、合金成分、熔点、热导率、热膨胀系数,所述信息元素的元数据包括信息元素的产生时间、来源、唯一标识、坐标、空间、归属、项目名称、项目参与人员、测试时间、测试标准、测试仪器、测试环境和测试材料的参数信息。测试材料的参数信息包括测试样品的编号、类型、尺寸以及加工方式等。
可选地,根据元数据治理规则对元数据治理库中的数据进行管理,包括对材料本身的信息元素及信息元素的元数据进行管理。
可选地,根据元数据治理规则对元数据治理库中的数据进行分析,包括对信息元素的元数据进行血缘分析、影响分析和质量分析。
可选地,通过hive解析器,依据数据级别、字段级别、表级别三个层级进行血缘分析,再通过聚合后组成血缘关系图谱。
可选地,根据元数据治理规则对元数据治理库中的数据进行应用,包括用于依据分析后获得的血缘关系图谱进行锡铋金属材料数据错误分析及锡铋金属材料数据关联查询。以实现对数据进行数据质量管理和羁系维护,更快速、直观的找出问题数据的来源以及其相关数据,进而为之后的数据修复工作提供便利和可靠依据。
根据本发明实施例的另一方面,还提供了一种基于元数据的锡铋金属材料数据处理装置,包括:
第一建立单元,用于获取锡铋金属材料数据,并建立元数据模型;
第二建立单元,用于根据元数据模型以及获取的数据建立元数据治理库;
执行单元,用于根据元数据治理规则对元数据治理库中的数据进行管理、分析和应用。
需要说明的是,上述各个单元是可以通过软件或硬件来实现的,例如,对于后者,可以通过以下方式实现:上述各个单元可以位于同一处理器中;和/或,上述各个单元以任意组合的方式位于不同的处理器中。
根据本发明实施例的另一方面,提供了一种处理器,所述处理器用于运行程序,其中,所述程序运行时执行上述中任意一项所述的基于元数据的锡铋金属材料数据处理方法。
根据本发明实施例的另一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如上述中任意一项所述的基于元数据的锡铋金属材料数据处理方法。
上面结合附图对本发明的具体实施方式作了详细说明,但是本发明并不限于上述实施方式,在本领域普通技术人员所具备的知识范围内,还可以在不脱离本发明宗旨的前提下做出各种变化。
Claims (10)
1.一种基于元数据的锡铋金属材料数据处理方法,其特征在于:包括:
获取锡铋金属材料数据,并建立元数据模型;
根据元数据模型以及获取的数据建立元数据治理库;
根据元数据治理规则对元数据治理库中的数据进行管理、分析和应用。
2.根据权利要求1所述的基于元数据的锡铋金属材料数据处理方法,其特征在于:所述数据治理库还包括更新模块;每当有新数据的产生都将通过元数据模型自动校准,并同步增量更新至数据治理库。
3.根据权利要求1所述的基于元数据的锡铋金属材料数据处理方法,其特征在于:所述获取锡铋金属材料数据,并建立元数据模型,包括:对获取的锡铋金属材料数据进行分类,根据分类结果建立元数据模型。
4.根据权利要求3所述的基于元数据的锡铋金属材料数据处理方法,其特征在于:所述分类具体为:根据锡铋金属材料数据的空间维度进行分类,空间维度包括力学性能维度、物理性能维度,力学性能维度包括拉伸性能、蠕变性能、屈服强度、抗拉强度、断面延伸率、跌落冲击性能、热疲劳性能、剪切性能,物理性能维度包括合金成分、熔点、热导率、热膨胀系数。
5.根据权利要求1所述的基于元数据的锡铋金属材料数据处理方法,其特征在于:所述元数据治理库包括材料本身的信息元素及信息元素的元数据;所述材料本身的信息元素包括拉伸性能、蠕变性能、屈服强度、抗拉强度、断面延伸率、跌落冲击性能、热疲劳性能、剪切性能、合金成分、熔点、热导率、热膨胀系数,所述信息元素的元数据包括信息元素的产生时间、来源、唯一标识、坐标、空间、归属、项目名称、项目参与人员、测试时间、测试标准、测试仪器、测试环境和测试材料的参数信息。
6.根据权利要求1所述的基于元数据的锡铋金属材料数据处理方法,其特征在于:根据元数据治理规则对元数据治理库中的数据进行管理,包括对材料本身的信息元素及信息元素的元数据进行管理。
7.根据权利要求1所述的基于元数据的锡铋金属材料数据处理方法,其特征在于:根据元数据治理规则对元数据治理库中的数据进行分析,包括对信息元素的元数据进行血缘分析、影响分析和质量分析。
8.根据权利要求7所述的基于元数据的锡铋金属材料数据处理方法,其特征在于:通过hive解析器,依据数据级别、字段级别、表级别三个层级进行血缘分析,再通过聚合后组成血缘关系图谱。
9.根据权利要求1所述的基于元数据的锡铋金属材料数据处理方法,其特征在于:根据元数据治理规则对元数据治理库中的数据进行应用,包括用于依据分析后获得的血缘关系图谱进行锡铋金属材料数据错误分析及锡铋金属材料数据关联查询。
10.一种基于元数据的锡铋金属材料数据处理装置,其特征在于:包括:
第一建立单元,用于获取锡铋金属材料数据,并建立元数据模型;
第二建立单元,用于根据元数据模型以及获取的数据建立元数据治理库;
执行单元,用于根据元数据治理规则对元数据治理库中的数据进行管理、分析和应用。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210203450.5A CN114648058A (zh) | 2022-03-03 | 2022-03-03 | 一种基于元数据的锡铋金属材料数据处理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210203450.5A CN114648058A (zh) | 2022-03-03 | 2022-03-03 | 一种基于元数据的锡铋金属材料数据处理方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114648058A true CN114648058A (zh) | 2022-06-21 |
Family
ID=81992918
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210203450.5A Pending CN114648058A (zh) | 2022-03-03 | 2022-03-03 | 一种基于元数据的锡铋金属材料数据处理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114648058A (zh) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104850399A (zh) * | 2015-04-30 | 2015-08-19 | 昆明理工大学 | 一种构件接口与构件实现映射表的追溯分析方法及*** |
CN105787051A (zh) * | 2016-02-26 | 2016-07-20 | 广州品唯软件有限公司 | 一种基于元数据模型的分析方法及装置 |
CN109684402A (zh) * | 2018-12-21 | 2019-04-26 | 福建南威软件有限公司 | 一种基于大数据平台元数据血缘关系实现方法 |
CN111125068A (zh) * | 2019-11-13 | 2020-05-08 | 深圳市华傲数据技术有限公司 | 一种元数据治理方法和*** |
US20200334272A1 (en) * | 2019-04-18 | 2020-10-22 | Sap Se | Metadata hub for metadata models of database objects |
CN112699100A (zh) * | 2020-12-31 | 2021-04-23 | 天津浪淘科技股份有限公司 | 一种基于元数据管理分析*** |
CN113871018A (zh) * | 2021-10-21 | 2021-12-31 | 卫宁健康科技集团股份有限公司 | 基于元数据模型的医疗数据治理方法、***、计算机设备 |
CN114036130A (zh) * | 2021-11-09 | 2022-02-11 | 中国建设银行股份有限公司 | 一种元数据分析处理方法及装置 |
-
2022
- 2022-03-03 CN CN202210203450.5A patent/CN114648058A/zh active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104850399A (zh) * | 2015-04-30 | 2015-08-19 | 昆明理工大学 | 一种构件接口与构件实现映射表的追溯分析方法及*** |
CN105787051A (zh) * | 2016-02-26 | 2016-07-20 | 广州品唯软件有限公司 | 一种基于元数据模型的分析方法及装置 |
CN109684402A (zh) * | 2018-12-21 | 2019-04-26 | 福建南威软件有限公司 | 一种基于大数据平台元数据血缘关系实现方法 |
US20200334272A1 (en) * | 2019-04-18 | 2020-10-22 | Sap Se | Metadata hub for metadata models of database objects |
CN111125068A (zh) * | 2019-11-13 | 2020-05-08 | 深圳市华傲数据技术有限公司 | 一种元数据治理方法和*** |
CN112699100A (zh) * | 2020-12-31 | 2021-04-23 | 天津浪淘科技股份有限公司 | 一种基于元数据管理分析*** |
CN113871018A (zh) * | 2021-10-21 | 2021-12-31 | 卫宁健康科技集团股份有限公司 | 基于元数据模型的医疗数据治理方法、***、计算机设备 |
CN114036130A (zh) * | 2021-11-09 | 2022-02-11 | 中国建设银行股份有限公司 | 一种元数据分析处理方法及装置 |
Non-Patent Citations (2)
Title |
---|
沈韬等: "基于区块链的能源数据访问控制方法", 计算机应用, vol. 41, no. 9, 30 September 2021 (2021-09-30), pages 2615 - 2622 * |
胡人卓;: "基于电力行业的大数据时代下元数据管理方法", 信息技术与信息化, no. 09, 28 September 2020 (2020-09-28), pages 242 - 244 * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2572294B1 (en) | System and method for sql performance assurance services | |
US5930798A (en) | Universal data measurement, analysis and control system | |
CN111611458B (zh) | 大数据治理中基于元数据和数据分析技术实现***数据架构梳理的方法 | |
CN114356940B (zh) | 电网数据治理***及方法 | |
CN111125068A (zh) | 一种元数据治理方法和*** | |
US20060129879A1 (en) | System and method for monitoring the status and progress of a technical process or of a technical project | |
CN105786682A (zh) | 一种规避软件性能故障的实施***及方法 | |
CN105868956A (zh) | 一种数据处理方法及装置 | |
CN112559523A (zh) | 数据探查方法、装置、电子设备以及存储介质 | |
CN115657890A (zh) | 一种pra机器人可定制方法 | |
CN103064780B (zh) | 一种软件测试的方法及装置 | |
CN113342692B (zh) | 测试用例自动生成方法、装置、电子设备及存储介质 | |
CN114648058A (zh) | 一种基于元数据的锡铋金属材料数据处理方法及装置 | |
CN111639094A (zh) | 化工产品配方检索实现方法、装置及存储介质 | |
CN111858236A (zh) | 知识图谱监控方法、装置、计算机设备及存储介质 | |
CN115169578A (zh) | 一种基于元宇宙数据标记的ai模型生产方法及*** | |
CN113434382A (zh) | 数据库性能监控方法、装置、电子设备及计算机可读介质 | |
CN113238901A (zh) | 多设备的自动化测试方法及装置、存储介质、计算机设备 | |
CN112416727A (zh) | 批处理作业的检核方法、装置、设备及介质 | |
CN116011758B (zh) | 一种多数据分析智能整合排程***及方法 | |
CN111177640A (zh) | 一种数据中心运维工作绩效评价*** | |
CN109615308A (zh) | 产出统计方法、装置、设备及可读存储介质 | |
CN112783509A (zh) | 一种基于xbrl的数据解析方法、存储及介质及*** | |
CN112925856B (zh) | 实体关系分析方法、装置、分析设备及计算机存储介质 | |
CN108875008A (zh) | 一种大容量数据分析方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |