CN103856354A - 一种集群存储***日志统一管理实现方法 - Google Patents

一种集群存储***日志统一管理实现方法 Download PDF

Info

Publication number
CN103856354A
CN103856354A CN201410082186.XA CN201410082186A CN103856354A CN 103856354 A CN103856354 A CN 103856354A CN 201410082186 A CN201410082186 A CN 201410082186A CN 103856354 A CN103856354 A CN 103856354A
Authority
CN
China
Prior art keywords
daily record
storage system
unified management
cluster storage
cluster
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410082186.XA
Other languages
English (en)
Inventor
张延良
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Electronic Information Industry Co Ltd
Original Assignee
Inspur Electronic Information Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Electronic Information Industry Co Ltd filed Critical Inspur Electronic Information Industry Co Ltd
Priority to CN201410082186.XA priority Critical patent/CN103856354A/zh
Publication of CN103856354A publication Critical patent/CN103856354A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明为一种集群存储***日志统一管理实现方法，涉及集群存储***领域，通过在集群存储***中部署一个日志统一管理服务器来收集***内所有设备的日志信息，并将这些日志信息用户可以登录日志统一管理服务器web日志管理界面，查看设备日志信息。

Description

一种集群存储***日志统一管理实现方法
技术领域   
    本发明涉及集群存储***领域，具体说一种集群存储***日志统一管理实现方法。
背景技术
目前，大规模的集群存储***硬件设备少则十几台，多则上百台，用户不可能逐个查看***设备。一般都采用统一监控的方式统一监控整个存储***。然而，当某个设备出现问题后，统一监控也只能显示出哪个设备有问题，具体什么问题统一监控没法显示出来，还得需要收集各个设备的日志信息，来查看存储设备具体出现什么问题。日志统一管理是个很重要的环节，也是集群存储***必不可少的一个环节。
发明内容
本发明提供一种集群存储***日志统一管理实现方法，解决的问题是通过一台服务器获取集群存储***所有设备日志信息，供用户统一查看。这台服务器称作日志统一管理服务器。通过在集群存储***中部署一个日志统一管理服务器来收集***内所有设备的日志信息，并将这些日志信息用户可以登录日志统一管理服务器web日志管理界面，查看设备日志信息。集群存储***主要的组成部分为服务器，存储和集群软件。服务器日志主要是操作***日志，存储日志主要是存储设备告警和报错日志，集群软件日志主要是软件运行过程记录的日志。
     一种集群存储***日志统一管理实现方法，该实现方法主要有4个模块组成：日志统一管理模块；服务器日志转发；存储设备日志转发模块；集群软件日志转发；
日志统一管理模块
在集群存储***中选择1台服务器作为日志统一管理节点，在该节点上建立专门存储集群***日志的目录，给用户提供查看集群存储***所有设备日志的路径；为了更好的给用户展现存储***设备日志具体信息，在日志统一管理服务器上制作一个集群存储***日志web显示页面，供用户查看***所有设备日志信息；
服务器日志转发
集群存储***内有很多服务器节点，支撑着集群存储***业务数据I/O，因此服务器节点会产生很多有用的日志，这些日志也是用户最关心的部分；集群存储***服务器节点定时将***产生的日志同步到日志统一管理服务器端；
存储设备日志转发模块
集群存储***存储用户数据的介质是存储阵列，存储阵列的状态好坏直接影响集群存储***的功能和性能；因此，需要将存储阵列的信息发送到日志统一管理服务器；由于存储***只关注存储阵列是否正常工作，所以存储阵列只给日志统一管理服务器发送告警和错误等重要日志信息。
    集群软件日志转发
    集群存储***是一种集群，依赖集群软件实现存储***集群功能；集群存储***在应用过程中，集群软件同样会产生日志信息，这些日志显示的是集群软件运行信息，是非常重要的信息，也必须将软件运行信息发送到日志统一管理服务器上；
    具体部署过程如下：
1)、选择集群存储***中一个节点作为统一日志管理服务器，创建日志管理路
径；
2）、配置集群存储***服务器日志同步机制，每隔一个小时同步一次日志到
日志统一管理服务器；
3）、部署集群存储***集群软件，也是每隔一段时间一次日志到日志统一管
理服务器；
   4）、配置存储设备告警信息和报错信息发送功能，发送到日志统一管理服务器。
在集群存储***中有专门的日志统一管理服务器收集***内所有设备的日志信息。同时，日志统一管理服务器还提供***所有组成部门日志查询web界面。
本发明与现有技术相比，所产生的有益效果是：
适用于大规模、分布式集群存储***。特别是在服务器节点多、存储阵列多的大型集群存储***，并且有统一日志管理，不需要逐个的登录每个设备区查看日志信息。集群存储***通过登录一个日志收集节点，方便、高效地查看***内所有设备的日志。日志统一管理服务器不但能收集存储***内部各个设备的日志信息，还提供日志web界面查询功能。用户可以登录日志统一管理服务器的日志web管理界面，查看***内部所有设备的信息。
附图说明
附图1为本发明中集群存储***日志统一管理示意图。
具体实施方式
   一种集群存储***日志统一管理实现方法具体部署过程如下：
（1）选择集群存储***中一个节点作为统一日志管理服务器，创建日志管理路径。
（2）配置集群存储***服务器日志同步机制，每隔一个小时同步一次日志到日志统一管理服务器。
（3）部署集群存储***集群软件，也是每隔一段时间一次日志到日志统一管理服务器。
（4）配置存储设备告警信息和报错信息发送功能，发送到日志统一管理服务器。

Claims (1)

1.一种集群存储***日志统一管理实现方法，其特征在于该实现方法主要有4个模块组成：日志统一管理模块；服务器日志转发；存储设备日志转发模块；集群软件日志转发；
日志统一管理模块；
在集群存储***中选择1台服务器作为日志统一管理节点，在该节点上建立专门存储集群***日志的目录，给用户提供查看集群存储***所有设备日志的路径；为了更好的给用户展现存储***设备日志具体信息，在日志统一管理服务器上制作一个集群存储***日志web显示页面，供用户查看***所有设备日志信息；
服务器日志转发
集群存储***内有很多服务器节点，支撑着集群存储***业务数据I/O，因此服务器节点会产生很多有用的日志，这些日志也是用户最关心的部分；集群存储***服务器节点定时将***产生的日志同步到日志统一管理服务器端；
存储设备日志转发模块
集群存储***存储用户数据的介质是存储阵列，存储阵列的状态好坏直接影响集群存储***的功能和性能；因此，需要将存储阵列的信息发送到日志统一管理服务器；由于存储***只关注存储阵列是否正常工作，所以存储阵列只给日志统一管理服务器发送告警和错误等重要日志信息;
 集群软件日志转发
    集群存储***是一种集群，依赖集群软件实现存储***集群功能；集群存储***在应用过程中，集群软件同样会产生日志信息，这些日志显示的是集群软件运行信息，是非常重要的信息，也必须将软件运行信息发送到日志统一管理服务器上；
 具体部署过程如下：
1)、选择集群存储***中一个节点作为统一日志管理服务器，创建日志管理路径；
2)、配置集群存储***服务器日志同步机制，每隔一个小时同步一次日志到日志统一管理服务器；
3)、部署集群存储***集群软件，也是每隔一段时间一次日志到日志统一管理服务器；
4）、配置存储设备告警信息和报错信息发送功能，发送到日志统一管理服务器。
CN201410082186.XA 2014-03-07 2014-03-07 一种集群存储***日志统一管理实现方法 Pending CN103856354A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410082186.XA CN103856354A (zh) 2014-03-07 2014-03-07 一种集群存储***日志统一管理实现方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410082186.XA CN103856354A (zh) 2014-03-07 2014-03-07 一种集群存储***日志统一管理实现方法

Publications (1)

Publication Number Publication Date
CN103856354A true CN103856354A (zh) 2014-06-11

Family

ID=50863598

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410082186.XA Pending CN103856354A (zh) 2014-03-07 2014-03-07 一种集群存储***日志统一管理实现方法

Country Status (1)

Country Link
CN (1) CN103856354A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104917627A (zh) * 2015-01-20 2015-09-16 杭州安恒信息技术有限公司 一种用于大型服务器集群的日志集群扫描与分析方法
CN105160011A (zh) * 2015-09-22 2015-12-16 浪潮(北京)电子信息产业有限公司 一种日志管理***及方法
CN105306261A (zh) * 2015-09-29 2016-02-03 北京奇艺世纪科技有限公司 一种收集日志的方法、装置及***
CN105471635A (zh) * 2015-11-18 2016-04-06 中国建设银行股份有限公司 一种***日志的处理方法、装置和***
CN106909493A (zh) * 2017-02-28 2017-06-30 郑州云海信息技术有限公司 一种在基于windows平台的刀片服务器中实时显示bmc日志的方法
CN109525645A (zh) * 2018-10-22 2019-03-26 郑州云海信息技术有限公司 一种收集分布式存储集群日志的方法与***
CN109818797A (zh) * 2019-02-12 2019-05-28 山东超越数控电子股份有限公司 一种刀片服务器smc管理中日志管理方法及***
US11782880B2 (en) 2019-01-04 2023-10-10 International Business Machines Corporation Synchronizing log data within a cluster

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101459557A (zh) * 2008-11-29 2009-06-17 成都市华为赛门铁克科技有限公司 一种安全日志集中存储方法及装置
CN102622407A (zh) * 2012-01-29 2012-08-01 广州亦云信息技术有限公司 日志文件操作***及日志文件管理方法
CN102780726A (zh) * 2011-05-13 2012-11-14 中兴通讯股份有限公司 一种基于web平台的日志分析方法及***
CN103166785A (zh) * 2011-12-15 2013-06-19 同程网络科技股份有限公司 基于Hadoop的分布式日志分析***
CN103338128A (zh) * 2013-02-25 2013-10-02 中国人民解放军91655部队 一种具有一体化安全管控功能的信息安全管理***
CN103377069A (zh) * 2012-04-26 2013-10-30 东方有线网络有限公司 一种基于日志文件写入外挂nas实现虚拟化计算部署的新方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101459557A (zh) * 2008-11-29 2009-06-17 成都市华为赛门铁克科技有限公司 一种安全日志集中存储方法及装置
CN102780726A (zh) * 2011-05-13 2012-11-14 中兴通讯股份有限公司 一种基于web平台的日志分析方法及***
CN103166785A (zh) * 2011-12-15 2013-06-19 同程网络科技股份有限公司 基于Hadoop的分布式日志分析***
CN102622407A (zh) * 2012-01-29 2012-08-01 广州亦云信息技术有限公司 日志文件操作***及日志文件管理方法
CN103377069A (zh) * 2012-04-26 2013-10-30 东方有线网络有限公司 一种基于日志文件写入外挂nas实现虚拟化计算部署的新方法
CN103338128A (zh) * 2013-02-25 2013-10-02 中国人民解放军91655部队 一种具有一体化安全管控功能的信息安全管理***

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104917627A (zh) * 2015-01-20 2015-09-16 杭州安恒信息技术有限公司 一种用于大型服务器集群的日志集群扫描与分析方法
CN104917627B (zh) * 2015-01-20 2018-06-19 杭州安恒信息技术有限公司 一种用于大型服务器集群的日志集群扫描与分析方法
CN105160011A (zh) * 2015-09-22 2015-12-16 浪潮(北京)电子信息产业有限公司 一种日志管理***及方法
CN105306261A (zh) * 2015-09-29 2016-02-03 北京奇艺世纪科技有限公司 一种收集日志的方法、装置及***
CN105471635A (zh) * 2015-11-18 2016-04-06 中国建设银行股份有限公司 一种***日志的处理方法、装置和***
CN105471635B (zh) * 2015-11-18 2019-05-31 中国建设银行股份有限公司 一种***日志的处理方法、装置和***
CN106909493A (zh) * 2017-02-28 2017-06-30 郑州云海信息技术有限公司 一种在基于windows平台的刀片服务器中实时显示bmc日志的方法
CN109525645A (zh) * 2018-10-22 2019-03-26 郑州云海信息技术有限公司 一种收集分布式存储集群日志的方法与***
US11782880B2 (en) 2019-01-04 2023-10-10 International Business Machines Corporation Synchronizing log data within a cluster
CN109818797A (zh) * 2019-02-12 2019-05-28 山东超越数控电子股份有限公司 一种刀片服务器smc管理中日志管理方法及***

Similar Documents

Publication Publication Date Title
US10944628B2 (en) Network operation support system and network device management method
CN103856354A (zh) 一种集群存储***日志统一管理实现方法
CN109245931B (zh) 基于kubernetes的容器云平台的日志管理和监控报警的实现方法
CN105183860B (zh) 数据同步方法和***
CN102340415B (zh) 一种服务器集群***的监控方法和一种服务器集群***
CN101854400B (zh) 一种数据库同步部署及监控的方法和装置
CN111209011A (zh) 一种跨平台的容器云自动化部署***
CN105207826A (zh) 一种基于Tachyou的Spark大数据平台的安全攻击告警定位***
CN104022903A (zh) 一站式自动化运维***
US20160147622A1 (en) Enhanced error detection in data synchronization operations
CN103412893A (zh) 一种日志收集***及其收集方法
CN104092575A (zh) 一种资源监控方法及***
CN101854270A (zh) 多***运行状态监控方法及***
CN105574109A (zh) 一种数据库同步方法、同步设备及***
CN104268061A (zh) 一种适用于虚拟机的存储状态监控机制
CN108932184A (zh) 监控装置及方法
CN102594598A (zh) 一种日志管理***及其实现方法
CN108959445A (zh) 分布式日志处理方法及装置
CN111127250B (zh) 一种电力数据监控事件分析***及方法
CN104834582A (zh) 一种监控事件展示方法
CN112698915A (zh) 多集群统一监控告警方法、***、设备及存储介质
CN113986649A (zh) 一种基于prometheus服务的***监控装置及方法
CN105553691A (zh) 一种基于电力监管信息的监控告警实现方法
CN104113579A (zh) 一种基于udp的业务***数据采集与实现
CN103297477B (zh) 一种数据采集上报***及数据处理方法和代理服务器

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20140611

WD01 Invention patent application deemed withdrawn after publication