CN102750355A - 一种非结构化数据管理***的可视化管理方法 - Google Patents

一种非结构化数据管理***的可视化管理方法 Download PDF

Info

Publication number
CN102750355A
CN102750355A CN2012101916209A CN201210191620A CN102750355A CN 102750355 A CN102750355 A CN 102750355A CN 2012101916209 A CN2012101916209 A CN 2012101916209A CN 201210191620 A CN201210191620 A CN 201210191620A CN 102750355 A CN102750355 A CN 102750355A
Authority
CN
China
Prior art keywords
user
browser
management system
data management
servers
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012101916209A
Other languages
English (en)
Other versions
CN102750355B (zh
Inventor
***
丁贵广
卓安
林丹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tsinghua University
Original Assignee
Tsinghua University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tsinghua University filed Critical Tsinghua University
Priority to CN201210191620.9A priority Critical patent/CN102750355B/zh
Publication of CN102750355A publication Critical patent/CN102750355A/zh
Application granted granted Critical
Publication of CN102750355B publication Critical patent/CN102750355B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及一种非结构化数据管理***的可视化管理方法,属于计算机数据管理技术领域。本方法对非结构化数据管理***中所有服务器的管理在浏览器中进行可视化,首先对非结构化数据***进行管理的初始化;非结构化数据模型管理***的数据模型操作可视化;用户在浏览器点击数据访问页面,对非结构化数据管理***的数据进行控制;用户点击浏览器的非结构化数据管理***所有服务器的状态页面,对非结构化数据管理***所有服务器的状态进行可视化监控。本发明方法简化了非结构化数据管理的操作,为用户提供直观的界面操作,并使用户能对非结构化数据管理***的所有服务器的状态进行监控。

Description

一种非结构化数据管理***的可视化管理方法
技术领域
本发明涉及一种非结构化数据管理***的可视化管理方法,尤其涉及云环境中的非结构化数据管理的可视化技术,属于计算机数据管理技术领域。
背景技术
随着互联网的飞速发展,企业产生了大量的非结构化数据,传统的关系数据库已经无法处理和分析如此大规模的数据。这些数据除了规模大之外,还有数据类型丰富、结构复杂等难题使得非结构化数据的管理面临巨大的挑战。
在企业界,Hadoop作为分布式文件存储和分布式计算的典型代表已经得到广泛的使用,并用来存储海量的非结构化数据。Cassandra作为高性能键值库存储的代表也得到了广泛使用,用来存储结构化数据。但这些***都是分布式的,对于用户来说管理复杂,而且数据模型也复杂多变,所以需要一个方便用户管理的可视化工具来对整个***进行管理。
非结构化数据管理领域的相关技术还未成熟,不像关系型数据库那样有很多配套的可视化管理工具,如Oracle,SQL Server和MySQL等都有相应的可视化管理工具来简化用户的操作和使用。
发明内容
本发明的目的是提出一种非结构化数据管理***的可视化管理方法,针对非结构化数据管理,提出可视化的管理方法,以方便用户能对海量的非结构化数据统一管理,屏蔽底层的分布式特性和数据格式多样性带来的复杂性。
本发明提出的非结构化数据管理***的可视化管理方法,包括以下步骤:
(1)从非结构化数据管理***的所有服务器中选定一台作为网页服务器,并启动;
(2)用户使用浏览器访问上述网页服务器,并在浏览器中输入用户信息,对非结构化数据***进行管理的初始化,其过程如下:
(2-1)若非结构化数据管理***中的所有服务器未初始化,则用户通过浏览器中的自动化部署向导,向所有服务器分发非结构化数据管理软件,并启动所有服务器,若启动成功,则浏览器进入管理界面,若启动不成功,则向用户返回启动失败的信息;
(2-2)用户通过浏览器设定服务器的地址和端口,并使浏览器与设定的服务器连接,在浏览器界面中显示该连接的状态信息;
(3)将浏览器连接到非结构化数据管理***中的所有服务器后,在浏览器的数据模型页面查看非结构化数据管理***的已有数据表格,根据用户的应用需求,在非结构化数据管理***中添加或修改与用户应用需求相应的表格,若操作成功,则浏览器出现执行成功的信息,若操作不成功,则向用户返回操作失败的信息;
(4)用户在浏览器点击数据访问页面,对非结构化数据管理***的数据进行控制,控制过程如下:
(4-1)用户在浏览器点击数据导入导出菜单,进入数据导入导出向导页面,用户从浏览器本地已有的结构化数据文件中选择文件,上传到非结构化数据管理***中的所有服务器中,或用户从非结构化数据管理***中选择用户需求的数据表格,下载到浏览器本地,并存储为结构化数据文件;
(4-2)如果底层支持和传统的关系型数据库之间的数据进行导入导出,则在页面设置相应的地址,端口及驱动,启动数据的导入导出过程,在导入导出过程看到进度条显示;
(4-3)用户向浏览器的查询语言输入框输入查询语句,点击执行或回车,等待服务器响应;
(5)用户点击浏览器的非结构化数据管理***所有服务器的状态页面,对非结构化数据管理***所有服务器的状态进行可视化监控,监控过程如下:
(5-1)用户根据需求,通过浏览器,对非结构化数据管理***中的所有服务器进行选择添加或删除的操作;
(5-2)用户根据需求,通过浏览器,监控服务器的内存、硬盘存储量和计算机中央处理器的状态信息,并对状态信息进行自动刷新。
本发明提出的非结构化数据管理***的可视化管理方法,针对非结构化数据的管理,包括文本、图片、视频和音频等非结构化数据。为了管理方便,对这些非结构化数据进行抽取结构化特征数据后存入底层,之后的查询都是依赖这些特征数据来进行。非结构化的数据存储和处理是基于分布式存储和计算相关技术,所以除了具有传统的关系型数据库的可视化管理之外,还有很多分布式集群管理的可视化操作。本发明方法简化了非结构化数据管理的操作,为用户提供了直观的界面操作,使用户能对整个集群的状态进行监控。
具体实施方式
本发明提出的非结构化数据管理***的可视化管理方法,包括以下步骤:
(1)从非结构化数据管理***的所有服务器中选定一台作为网页服务器,并启动;
(2)用户使用浏览器访问上述网页服务器,并在浏览器中输入用户信息,对非结构化数据***进行管理的初始化,其过程如下:
(2-1)若非结构化数据管理***中的所有服务器未初始化,则用户通过浏览器中的自动化部署向导,向所有服务器分发非结构化数据管理软件,并启动所有服务器,若启动成功,则浏览器进入管理界面,若启动不成功,则向用户返回启动失败的信息;
(2-2)用户通过浏览器设定服务器的地址和端口,并使浏览器与设定的服务器连接,在浏览器界面中显示该连接的状态信息;
(3)将浏览器连接到非结构化数据管理***中的所有服务器后,在浏览器的数据模型页面查看非结构化数据管理***的已有数据表格,根据用户的应用需求,在非结构化数据管理***中添加或修改与用户应用需求相应的表格,该表格可配置的选项都能在表单里体现,可方便的控制存储的表格和字段等属性,若操作成功,则浏览器出现执行成功的信息,若操作不成功,则向用户返回操作失败的信息;
(4)用户在浏览器点击数据访问页面,进入可视化的数据操作界面,对非结构化数据管理***的数据进行控制,控制过程如下:
(4-1)用户在浏览器点击数据导入导出菜单,进入数据导入导出向导页面,用户从浏览器本地已有的结构化数据文件中选择文件,上传到非结构化数据管理***中的所有服务器中,或用户从非结构化数据管理***中选择用户需求的数据表格,下载到浏览器本地,并存储为结构化数据文件,导入导出阶段可看到进度条显示相关进度;
(4-2)如果底层支持和传统的关系型数据库之间的数据进行导入导出,则在页面设置相应的地址,端口及驱动,启动数据的导入导出过程,在导入导出过程看到进度条显示;
(4-3)用户向浏览器的查询语言输入框输入查询语句,点击执行或回车,等待服务器响应;等服务器响应以后可看到相关结果的表格,对于不同的非结构化数据进行丰富的多媒体显示,不只是一些文字信息;
(5)用户点击浏览器的非结构化数据管理***所有服务器的状态页面,对非结构化数据管理***所有服务器的状态进行可视化监控,监控过程如下:
(5-1)用户根据需求,通过浏览器,对非结构化数据管理***中的所有服务器进行选择添加或删除的操作;
(5-2)用户根据需求,通过浏览器,监控服务器的内存、硬盘存储量和计算机中央处理器的状态信息,并对状态信息进行自动刷新。

Claims (1)

1.一种非结构化数据管理***的可视化管理方法,其特征在于该方法包括以下步骤:
(1)从非结构化数据管理***的所有服务器中选定一台作为网页服务器,并启动;
(2)用户使用浏览器访问上述网页服务器,并在浏览器中输入用户信息,对非结构化数据***进行管理的初始化,其过程如下:
(2-1)若非结构化数据管理***中的所有服务器未初始化,则用户通过浏览器中的自动化部署向导,向所有服务器分发非结构化数据管理软件,并启动所有服务器,若启动成功,则浏览器进入管理界面,若启动不成功,则向用户返回启动失败的信息;
(2-2)用户通过浏览器设定服务器的地址和端口,并使浏览器与设定的服务器连接,在浏览器界面中显示该连接的状态信息;
(3)将浏览器连接到非结构化数据管理***中的所有服务器后,在浏览器的数据模型页面查看非结构化数据管理***的已有数据表格,根据用户的应用需求,在非结构化数据管理***中添加或修改与用户应用需求相应的表格,若操作成功,则浏览器出现执行成功的信息,若操作不成功,则向用户返回操作失败的信息;
(4)用户在浏览器点击数据访问页面,对非结构化数据管理***的数据进行控制,控制过程如下:
(4-1)用户在浏览器点击数据导入导出菜单,进入数据导入导出向导页面,用户从浏览器本地已有的结构化数据文件中选择文件,上传到非结构化数据管理***中的所有服务器中,或用户从非结构化数据管理***中选择用户需求的数据表格,下载到浏览器本地,并存储为结构化数据文件;
(4-2)如果底层支持和传统的关系型数据库之间的数据进行导入导出,则在页面设置相应的地址,端口及驱动,启动数据的导入导出过程,在导入导出过程看到进度条显示;
(4-3)用户向浏览器的查询语言输入框输入查询语句,点击执行或回车,等待服务器响应;
(5)用户点击浏览器的非结构化数据管理***所有服务器的状态页面,对非结构化数据管理***所有服务器的状态进行可视化监控,监控过程如下:
(5-1)用户根据需求,通过浏览器,对非结构化数据管理***中的所有服务器进行选择添加或删除的操作;
(5-2)用户根据需求,通过浏览器,监控服务器的内存、硬盘存储量和计算机中央处理器的状态信息,并对状态信息进行自动刷新。
CN201210191620.9A 2012-06-11 2012-06-11 一种非结构化数据管理***的可视化管理方法 Active CN102750355B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210191620.9A CN102750355B (zh) 2012-06-11 2012-06-11 一种非结构化数据管理***的可视化管理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210191620.9A CN102750355B (zh) 2012-06-11 2012-06-11 一种非结构化数据管理***的可视化管理方法

Publications (2)

Publication Number Publication Date
CN102750355A true CN102750355A (zh) 2012-10-24
CN102750355B CN102750355B (zh) 2014-07-16

Family

ID=47030540

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210191620.9A Active CN102750355B (zh) 2012-06-11 2012-06-11 一种非结构化数据管理***的可视化管理方法

Country Status (1)

Country Link
CN (1) CN102750355B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103793531A (zh) * 2014-02-26 2014-05-14 中国银行股份有限公司 非结构化数据管理***
CN107368506A (zh) * 2015-05-11 2017-11-21 斯图飞腾公司 非结构化数据分析***和方法
CN109213754A (zh) * 2018-03-29 2019-01-15 北京九章云极科技有限公司 一种数据处理***及数据处理方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101477568A (zh) * 2009-02-12 2009-07-08 清华大学 一种结构化数据和非结构化数据综合检索的方法
CN102012912A (zh) * 2010-11-19 2011-04-13 清华大学 一种基于云计算环境的非结构化数据的管理方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101477568A (zh) * 2009-02-12 2009-07-08 清华大学 一种结构化数据和非结构化数据综合检索的方法
CN102012912A (zh) * 2010-11-19 2011-04-13 清华大学 一种基于云计算环境的非结构化数据的管理方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
田万鹏,***: "一种基于特征的非结构化数据演化管理建模框架", 《计算机研究与发展》, 31 December 2010 (2010-12-31), pages 394 - 399 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103793531A (zh) * 2014-02-26 2014-05-14 中国银行股份有限公司 非结构化数据管理***
CN107368506A (zh) * 2015-05-11 2017-11-21 斯图飞腾公司 非结构化数据分析***和方法
CN107368506B (zh) * 2015-05-11 2020-11-06 斯图飞腾公司 非结构化数据分析***和方法
CN109213754A (zh) * 2018-03-29 2019-01-15 北京九章云极科技有限公司 一种数据处理***及数据处理方法
CN109213754B (zh) * 2018-03-29 2020-02-28 北京九章云极科技有限公司 一种数据处理***及数据处理方法

Also Published As

Publication number Publication date
CN102750355B (zh) 2014-07-16

Similar Documents

Publication Publication Date Title
US11941016B2 (en) Using specified performance attributes to configure machine learning pipepline stages for an ETL job
US9773029B2 (en) Generation of a data model
US20190108046A1 (en) Dashboard creation and management
US10514948B2 (en) Information based on run-time artifacts in a distributed computing cluster
US10261762B2 (en) User interface template generation using dynamic in-memory database techniques
US20180032605A1 (en) Integrated intermediary computing device for data analytic enhancement
CN108628608A (zh) 一种数据可视化的方法及装置
CN107315776A (zh) 一种基于云计算的数据管理***
US10114846B1 (en) Balanced distribution of sort order values for a multi-column sort order of a relational database
CN107291806A (zh) 一种Web可视化环境中的数据视图副本迭代方法
JP2013246835A (ja) データウェアハウスモデルからインメモリモデルを生成するためのシステムおよび方法
CN113220755B (zh) 一种基于多源数据灵活生成GraphQL接口的方法
WO2015038409A1 (en) Smart search refinement
Naheman et al. Review of NoSQL databases and performance testing on HBase
US11860832B2 (en) Custom columns for static logical models
US10127617B2 (en) System for analyzing social media data and method of analyzing social media data using the same
Ferrari et al. Microsoft SQL Server 2012 Analysis Services: The BISM Tabular Model
US10942732B1 (en) Integration test framework
CN102750355B (zh) 一种非结构化数据管理***的可视化管理方法
Li et al. Deep-level quality management based on big data analytics with case study
US11444847B1 (en) State based GUI for cloud data management
EP2990895B1 (en) Industrial monitoring system
US20140282477A1 (en) Automatic updating of data in application programs
US20130111393A1 (en) Modeling reports directly from data sources
Zheng-Ping et al. Analysis on Cloud Data Service Platform for Digital Oilfields.

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant