CN107832340A - 对地勘资料智能分析的大数据*** - Google Patents

对地勘资料智能分析的大数据*** Download PDF

Info

Publication number
CN107832340A
CN107832340A CN201710951487.5A CN201710951487A CN107832340A CN 107832340 A CN107832340 A CN 107832340A CN 201710951487 A CN201710951487 A CN 201710951487A CN 107832340 A CN107832340 A CN 107832340A
Authority
CN
China
Prior art keywords
data
module
analysis
ground
management
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710951487.5A
Other languages
English (en)
Inventor
王利强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Coal Geology General Survey Team
Original Assignee
China Coal Geology General Survey Team
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Coal Geology General Survey Team filed Critical China Coal Geology General Survey Team
Priority to CN201710951487.5A priority Critical patent/CN107832340A/zh
Publication of CN107832340A publication Critical patent/CN107832340A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25—Integrating or interfacing systems involving database management systems
    • G06F16/258—Data format conversion from or to a database
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25—Integrating or interfacing systems involving database management systems
    • G06F16/252—Integrating or interfacing systems involving database management systems between a Database Management System and a front-end application
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/26—Visual data mining; Browsing structured data

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Investigation Of Foundation Soil And Reinforcement Of Foundation Soil By Compacting Or Drainage (AREA)

Abstract

本发明涉及对地勘资料智能分析的大数据***，其包括数据解析模块、海量数据快速入库模块、数据管理中心、数据管理和提取中心、以及数据分析成图模块；数据解析模块对地勘数据格式的统一解析和标准化，海量数据快速入库模块对数据解析模块统一解析和标准化后的数据源的秒级入库，数据管理心对入库后的海量数据快速入库模块进行一体化管理，数据提取和分析对数据管理心一体化管理的数据进行处理后并最终通过数据分析成图模块分析成图。本发明设计合理、结构紧凑且使用方便。

Description

对地勘资料智能分析的大数据***
技术领域
本发明涉及对地勘资料智能分析的大数据***。
背景技术
在地勘行业中，通过野外数据采集将产生海量的数据资料，人们通过对这些数据的综合分析和比对，来判断地质构造的种类和级别。人们通过不断创新数据分析算法，来提升数据分析的准确性和效率，更好的为地质工作服务。
地勘数据具有数据量大、关联性强、变化性强等显著特点，在野外数据采集完成后，这些数据按照位、道、点、线、面等逐步累加，形成一个数据体；随着目前勘探精度的不断提高，数据量更是呈几何增长，从效率上和质量上都影响了对数据的分析和利用。面对动则上G的数据文件，普通微机处理力不从心，目前多采用专业数据处理工作站进行处理和分析；针对超大型工区产生的海量数据体，只能通过分片、分段、分线等普通拆分方法进行处理。该种模式不仅操作烦琐，而且在各段、各线分析完毕后，需进行接边处理，此时需要有极其丰富的经验，否则极容易被产生的失真和假值影响到总体的分析结果，造成整体数据分析成果的偏差和失真。
因此，研究一种简单高效、不受数据体量影响的，灵活数据管理、提取、分析、汇总方法显得十分必要。
发明内容
本发明所要解决的技术问题总的来说是提供一种对地勘资料智能分析的大数据***；详细解决的技术问题以及取得有益效果在后述内容以及结合具体实施方式中内容具体描述。
为解决上述问题，本发明所采取的技术方案是：
一种对地勘资料智能分析的大数据***，包括数据解析模块、海量数据快速入库模块、数据管理中心、数据管理和提取中心、以及数据分析成图模块；
其中，数据解析模块对地勘数据格式的统一解析和标准化，海量数据快速入库模块对数据解析模块统一解析和标准化后的数据源的秒级入库，数据管理中心对入库后的海量数据快速入库模块进行一体化管理，数据提取和分析对数据管理中心一体化管理的数据进行处理后并最终通过数据分析成图模块分析成图。
作为上述技术方案的进一步改进：
在数据管理和提取中心中对数据体按点、线、平面、不规则曲面、任意模型的任意切片提取。
在数据分析成图模块中对数据分析结果进行可视化展示与输出。
本发明的实质性特点和进步是：
1. 主流数据格式兼容：数据解析模块实现了对主流地勘仪器采集数据格式的全面兼容，可以实现一键解析、转换和读取。
2. 利用专业数据引擎实现海量数据统一管理和利用，理论上只受磁盘空间影响，数据体量可无限大，并有效避免数据的分割、接边等产生的一系列副作用和对数据分析质量的影响。
3. 分析模型高效灵活：可根据分析需求实现任意点、线、面、不规则曲面、自由模型的切片数据提取与分析。
本发明的有益效果不限于此描述，为了更好的便于理解，在具体实施方式部分进行了更加详细的描述。
附图说明
图1是本发明专利的数据流向示意简图。
数据解析模块1、海量数据快速入库模块2、数据管理中心3、数据管理和提取中心4、数据分析成图模块5。
具体实施方式
如图1所述，本发明专利的技术组成包括：数据解析模块1、海量数据快速入库模块2、数据管理中心3、数据管理和提取中心4即数据任意规则点、线、面、模型提取模块、以及数据分析成图模块5。
所述任意规则包括点、线、面、和/或模型。
其中，数据解析模块1对地勘数据格式的统一解析和标准化，海量数据快速入库模块2对数据解析模块1统一解析和标准化后的数据源的秒级入库，数据管理中心3对入库后的海量数据快速入库模块2进行一体化管理，数据提取和分析4对数据管理中心3一体化管理的数据进行处理后并最终通过数据分析成图模块5分析成图。
在数据管理和提取中心4中对数据体按点、线、平面、不规则曲面、任意模型的任意切片提取；在数据分析成图模块5中对数据分析结果进行可视化展示与输出。
参看图1所示，本发明专利首先由数据解析模块1实现对数据源的格式解析和转换，转换成标准格式后作为数据源使用；再对标准数据源利用海量数据快速入库模块2实现对格式化后数据的底层快速读写，按照数据库规范，实现秒级入库；
随着数据采集工作不断开展，重复上述步骤逐步扩充该数据体，利用数据管理中心3进行一体化管理；根据数据分析需要，随时从数据体中通过数据提取和分析模块4完成对目标数据的提取，最终通过数据分析成图模块5实现对数据的分析，并将结果可视化展现出来。
本发明设计合理、成本低廉、结实耐用、安全可靠、操作简单、省时省力、节约资金、结构紧凑且使用方便。
本发明充分描述是为了更加清楚的公开，而对于现有技术就不再一一例举。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；作为本领域技术人员对本发明的多个技术方案进行组合是显而易见的。而这些修改或者替换，并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围。

Claims (3)

1.一种对地勘资料智能分析的大数据***，其特征在于：包括数据解析模块（1）、海量数据快速入库模块（2）、数据管理中心（3）、数据管理和提取中心（4）、以及数据分析成图模块（5）；
其中，数据解析模块（1）对地勘数据格式的统一解析和标准化，海量数据快速入库模块（2）对数据解析模块（1）统一解析和标准化后的数据源的秒级入库，数据管理中心（3）对入库后的海量数据快速入库模块（2）进行一体化管理，数据提取和分析（4）对数据管理中心（3）一体化管理的数据进行处理后并最终通过数据分析成图模块（5）分析成图。
2.根据权利要求1所述的对地勘资料智能分析的大数据***，其特征在于: 在数据管理和提取中心（4）中对数据体按点、线、平面、不规则曲面、任意模型的任意切片提取。
3.根据权利要求2所述的对地勘资料智能分析的大数据***，其特征在于: 在数据分析成图模块（5）中对数据分析结果进行可视化展示与输出。
CN201710951487.5A 2017-10-13 2017-10-13 对地勘资料智能分析的大数据*** Pending CN107832340A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710951487.5A CN107832340A (zh) 2017-10-13 2017-10-13 对地勘资料智能分析的大数据***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710951487.5A CN107832340A (zh) 2017-10-13 2017-10-13 对地勘资料智能分析的大数据***

Publications (1)

Publication Number Publication Date
CN107832340A true CN107832340A (zh) 2018-03-23

Family

ID=61647969

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710951487.5A Pending CN107832340A (zh) 2017-10-13 2017-10-13 对地勘资料智能分析的大数据***

Country Status (1)

Country Link
CN (1) CN107832340A (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103218389A (zh) * 2012-12-20 2013-07-24 江苏乐买到网络科技有限公司 一种数据处理服务***
US20150324445A1 (en) * 2014-05-09 2015-11-12 Internet Brands, Inc. Systems and Methods for Receiving, Aggregating, and Editing Survey Answers from Multiple Sources
CN106779417A (zh) * 2016-12-20 2017-05-31 黄河勘测规划设计有限公司 工程勘察信息数字化采集、管理及综合应用方法
CN106814671A (zh) * 2017-03-24 2017-06-09 福建英格尔电气设备有限公司 地下工程运行管理综合监控装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103218389A (zh) * 2012-12-20 2013-07-24 江苏乐买到网络科技有限公司 一种数据处理服务***
US20150324445A1 (en) * 2014-05-09 2015-11-12 Internet Brands, Inc. Systems and Methods for Receiving, Aggregating, and Editing Survey Answers from Multiple Sources
CN106779417A (zh) * 2016-12-20 2017-05-31 黄河勘测规划设计有限公司 工程勘察信息数字化采集、管理及综合应用方法
CN106814671A (zh) * 2017-03-24 2017-06-09 福建英格尔电气设备有限公司 地下工程运行管理综合监控装置

Similar Documents

Publication Publication Date Title
CN102073706B (zh) 分布式文件存储***和关系数据库的结合应用方法
CN106709035A (zh) 一种电力多维全景数据的预处理***
Holdaway et al. Notched tool reuse and raw material availability in French Middle Paleolithic sites
CN101739337B (zh) 一种基于聚类的软件漏洞序列特征的分析方法
CN104820670A (zh) 一种电力信息大数据的采集和存储方法
CN104133866A (zh) 一种面向智能电网的缺失数据填充方法
CN102509001B (zh) 一种自动去除时序数据野值点的方法
CN102855232A (zh) 一种表格分析编改加工方法
CN107797916A (zh) Ddl语句审核方法和装置
CN104572894A (zh) 在商业智能中利用xml描述业务模型的方法及商业智能***
CN104765879A (zh) 数据挖掘中基于密度的k中心点划分聚类方法
CN104462462B (zh) 基于业务变化频度的数据仓库建模方法和建模装置
CN107463624B (zh) 一种基于社交媒体数据进行城市兴趣域识别的方法及***
CN104809246A (zh) 充电数据的处理方法及装置
CN104391910B (zh) 一种基于HBase的税收统计报表存储与计算的方法
CN104731811A (zh) 一种面向大规模动态短文本的聚类信息演化分析方法
CN113393051B (zh) 基于深度迁移学习的配电网投资决策方法
Xiao A clustering algorithm based on artificial fish school
CN107832340A (zh) 对地勘资料智能分析的大数据***
CN102208027B (zh) 基于间隙度维数的土地利用空间格局评价方法
CN101441180B (zh) 树木年轮组成成分快速分析方法
CN113254517A (zh) 一种基于互联网大数据的服务提供方法
CN107066997A (zh) 一种基于图像识别的电气元件报价方法
CN104063518A (zh) 一种针对大数据的分解组合聚类方法
CN104809483A (zh) 实现任意方向书写文本行切分的方法及***

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180323