CN106789941A - 一种数据库及***应用心跳统一管理的实现方法 - Google Patents
一种数据库及***应用心跳统一管理的实现方法 Download PDFInfo
- Publication number
- CN106789941A CN106789941A CN201611077682.1A CN201611077682A CN106789941A CN 106789941 A CN106789941 A CN 106789941A CN 201611077682 A CN201611077682 A CN 201611077682A CN 106789941 A CN106789941 A CN 106789941A
- Authority
- CN
- China
- Prior art keywords
- node
- application
- database
- heartbeat
- state
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/40—Support for services or applications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/16—Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Multimedia (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Multi Processors (AREA)
Abstract
本发明公开了一种数据库及***应用心跳统一管理的实现方法,包括如下步骤:(一)按照***中的节点类型,把节点分为应用节点及数据库节点:(二)监测数据库心跳及维护本地信息:(三)监测***应用心跳及维护本地信息:(四)心跳管理服务运算所有节点状态及往其他节点同步:(五)心跳管理程序通过统一的报文格式,把数据库主用、备用等信息,各应用主机状态信息,通过UDP方式往所有的应用节点同步。实现两种心跳的存储格式是一致的,向其他应用主机同步的方法也是一致的,并且由统一的服务进行管理调度。
Description
技术领域
本发明涉及了一种数据库及***应用心跳统一管理的实现方法,属于分布式监控***领域。
背景技术
随着工业自动化的快速蓬勃的发展,监控***的应用越来越广泛。对于大型的分布式监控***,如何管理不同地域的应用节点、数据库节点,并实时监控其状态,同步其管理数据显得越来越突出及重要。
对于分布式***的应用节点及数据库节点的管理,通常采用心跳监测的方式。应用节点的心跳监测,我们这里统称为应用***管理;数据库节点的心跳监测,我们统称为数据库管理,涉及到数据库的多种状态的切换等等。
在监控***中,应用***管理和数据库管理的对象,方式不同,通用的做法是采用不同的服务对其心跳分开独立管理,心跳通讯方式一般采用tcp\udp报文方式,需要对不同的服务分配不同的端口号、不同的网络资源,这给原来有限的网络资源变得紧张;另外由于涉及到两种心跳,本身在网络传输上增加了复杂性,会大大地降低其可靠性;另外由于***管理及数据库管理本身存在依赖关系的,但是其底层是通过两种不同心跳来源做判断的,这时候会造成***管理的错误会影响到数据库管理,并且随着数据库管理机制,向其他别的数据库节点同步,使这种错误进一步扩大。这种灾难性的后果是开发者及使用者最不希望见到的。
发明内容
本发明所要解决的技术问题是提供一种数据库及***应用心跳统一管理的实现方法,实现两种心跳的存储格式是一致的,向其他应用主机同步的方法也是一致的,并且由统一的服务进行管理调度。
为了解决上述技术问题,本发明所采用的技术方案是:
一种数据库及***应用心跳统一管理的实现方法,包括如下步骤:
(一)按照***中的节点类型,把节点分为应用节点及数据库节点:
把运行业务应用的节点称为应用节点,把只运行数据库服务的节点称为数据库节点,如果某节点上既运行业务应用,又运行数据库服务我们仍称其为应用节点;并且在***中把应用节点和数据库节点的节点名和ip地址存储到某配置文档中,并且保证***中此文档内容的一致性;
(二)监测数据库心跳及维护本地信息:
(1)根据配置文档中的信息,判断当前节点是否应用节点;
(2)如果是应用节点,通过配置文档,找到某数据库节点,通过ip地址的方式,使用数据库接口对数据库进行访问;
(3)如果能连接上此节点,在本地共享存储中数据库节点信息处增加此节点的信息,并给此节点置上备用库状态,并在此节点相应位置写入当前时间;
(4)如果连接不上此节点,在本地共享存储中数据库节点信息处增加此节点的信息,并给此节点置上退出状态,并在此节点相应位置写入当前时间;
(5)对配置文档中的所有的数据库节点进行(2)-(4)的步骤,直到文档中所有节点全部被遍历;
(6)心跳管理服务每隔1秒钟,对本地共享存储中的数据库节点进行(2)的步骤,然后更新本地共享存储中此数据库节点的状态及时间;
(三)监测***应用心跳及维护本地信息:
(1)根据配置文档中的信息,判断当前节点是否应用节点;
(2)如果是应用节点,通过配置文档,找到其他应用节点,通过UDP组播给其他所有应用节点发送本节点各应用状态;
(3)其他节点收到此心跳后,把此节点的各应用状态及当前时间存入本地共享存储相应位置;
(4)心跳管理服务每隔1秒钟,对本地共享存储中的所有应用节点进行(2)的步骤;
(四)心跳管理服务运算所有节点状态及往其他节点同步:
(1)心跳管理程序对本地共享存储中所有数据库节点及应用节点进行时间判断,把共享存储中的时间与当前时间做对比,如果超过预设值的时间,给所有节点置上不可用状态,即不参与以下步骤中的节点运算;
(2)心跳管理程序根据本地共享内存中所有数据库状态,通过优先级及预配置算法算出所有数据库主用库,备用库,并存储到本地共享存储中相应位置;
(3)心跳管理程序根据本地共享内存中所有应用节点中应用状态状态,通过优先级及预配置算法算出给每个应用算出主机、备用等状态,并存储到本地共享存储中相应位置;
(五)心跳管理程序通过统一的报文格式,把数据库主用、备用等信息,各应用主机状态信息,通过UDP方式往所有的应用节点同步。
前述的一种数据库及***应用心跳统一管理的实现方法,其特征在于:所述数据库节点状态,包括启动、主用库、备用库、强制主用库、强制备用库、网络异常、单网故障、登录故障、退出九种。
前述的一种数据库及***应用心跳统一管理的实现方法,其特征在于:所述应用节点状态,包括离线、主机、备机、强制主机、强制备机、网络异常、进程异常、启动、故障九种。
前述的一种数据库及***应用心跳统一管理的实现方法,其特征在于:所述数据库,包括ORACLE、MYSQL、PostgreSQL。
前述的一种数据库及***应用心跳统一管理的实现方法,其特征在于:所述应用节点状态和数据库节点状态,由应用节点上的同一服务进行本地存储。
前述的一种数据库及***应用心跳统一管理的实现方法,其特征在于:所述应用节点状态和数据库节点状态,由应用节点上的同一服务进行网络发送、传输及接收。
前述的一种数据库及***应用心跳统一管理的实现方法,其特征在于:所述应用节点状态和数据库节点状态的存储结构及网络传输结构保持一致。
本发明的有益效果是:通过将***中的所有节点分为数据库节点及应用节点两类,所有对这两类节点的心跳判断来源于统一的心跳管理服务;心跳管理服务通过对数据库状态及应用状态归一化处理,采用同样的格式进行本地存储,并通过同样的端口,同样的tcp链路向其他节点同步;网络传输中的报文中包含着数据库信息及应用******两部分,实现两种心跳的存储格式是一致的,向其他应用主机同步的方法也是一致的,并且由统一的服务进行管理调度。
附图说明
图1是本发明一种数据库及***应用心跳统一管理的实现方法的数据库节点与应用节点逻辑关系图;
图2 是本发明一种数据库及***应用心跳统一管理的实现方法的统一的存储结构;
图3 是本发明一种数据库及***应用心跳统一管理的实现方法的心跳报文监测及同步的过程。
具体实施方式
下面是本发明的一个实际案例的实施方式,本发明的目的和特点也可以从案例的说明中看出。应当理解此处描述的实例仅仅用于说明和解释本发明,并不限定本发明。
如图1-图3所示,本发明提出了一种数据库及***应用心跳统一管理的实现方法,通过将***中的所有节点分为数据库节点及应用节点两类;所述数据库节点的状态由所述应用节点通过商用数据库接口判断,并且把所述数据库节点状态通过所述应用节点向其他应用节点同步;所述应用节点的状态由本节点服务自获取,并把本节点状态通过所述应用节点向其他节点同步;同步的方法与所述数据库节点状态同步的方法一致,并且由统一的服务进行管理调度。具体实现方法包括如下步骤:
(一)按照***中的节点类型,把节点分为应用节点及数据库节点:
(1)把运行业务应用的节点称为应用节点,把只运行数据库服务的节点称为数据库节点,如果某节点上既运行业务应用,又运行数据库服务我们仍称其为应用节点;心跳管理服务属于业务应用的范畴,即数据库节点上不运行心跳管理服务,在***中把应用节点和数据库节点的节点名和ip地址存储到某配置文档中,并且保证***中此文档内容的一致性。
(二)监测数据库心跳及维护本地信息:
(1)根据配置文档中的信息,判断当前节点是否应用节点;
(2)如果是应用节点,通过配置文档,找到某数据库节点,通过ip地址的方式,使用数据库接口对数据库进行访问;
(3)如果能连接上此节点,在本地共享存储中数据库节点信息处增加此节点的信息,并给此节点置上备用库状态,并在此节点相应位置写入当前时间;
(4)如果连接不上此节点,在本地共享存储中数据库节点信息处增加此节点的信息,并给此节点置上退出状态,并在此节点相应位置写入当前时间;
(5)对配置文档中的所有的数据库节点进行(2)-(4)的步骤,直到文档中所有节点全部被遍历;
(6)心跳管理服务每隔1秒钟,对本地共享存储中的数据库节点进行(2)的步骤,然后更新本地共享存储中此数据库节点的状态及时间;
数据库节点状态,由应用节点通过轮询的方式获取、更新本地内存中相应数据库节点的状态,并定期通过网络向其他节点同步此数据库节点的状态,其中,所述数据库节点状态,包括启动、主用库、备用库、强制主用库、强制备用库、网络异常、单网故障、登录故障、退出九种。
(三)监测***应用心跳及维护本地信息:
(1)根据配置文档中的信息,判断当前节点是否应用节点;
(2)如果是应用节点,通过配置文档,找到其他应用节点,通过UDP组播给其他所有应用节点发送本节点各应用状态;
(3)其他节点收到此心跳后,把此节点的各应用状态及当前时间存入本地共享存储相应位置;
(4)心跳管理服务每隔1秒钟,对本地共享存储中的所有应用节点进行(2)的步骤;
应用节点状态,由当前应用节点自获取,进行本地存储、并定期通过网络向其他节点同步当前节点的状态,所述应用节点状态,包括离线、主机、备机、强制主机、强制备机、网络异常、进程异常、启动、故障九种。
(四)心跳管理服务运算所有节点状态及往其他节点同步:
(1)心跳管理程序对本地共享存储中所有数据库节点及应用节点进行时间判断,把共享存储中的时间与当前时间做对比,如果超过预设值的时间,给所有节点置上不可用状态,即不参与以下步骤中的节点运算;
(2)心跳管理程序根据本地共享内存中所有数据库状态,通过优先级及预配置算法算出所有数据库主用库,备用库,并存储到本地共享存储中相应位置;
(3)心跳管理程序根据本地共享内存中所有应用节点中应用状态状态,通过优先级及预配置算法算出给每个应用算出主机、备用等状态,并存储到本地共享存储中相应位置。
(五)心跳管理程序通过统一的报文格式,把数据库主用、备用等信息,各应用主机状态信息,通过UDP方式往所有的应用节点同步。
应用节点状态和数据库节点状态,由应用节点上的同一服务进行本地存储,也可以进行网络发送、传输及接收,且应用节点状态和数据库节点状态的存储结构及网络传输结构保持一致。
本实施例中,所采用的数据库包括ORACLE、MYSQL、PostgreSQL。
通过将***中的所有节点分为数据库节点及应用节点两类,所有对这两类节点的心跳判断来源于统一的心跳管理服务;心跳管理服务通过对数据库状态及应用状态归一化处理,采用同样的格式进行本地存储,并通过同样的端口,同样的tcp链路向其他节点同步;网络传输中的报文中包含着数据库信息及应用******两部分,实现两种心跳的存储格式是一致的,向其他应用主机同步的方法也是一致的,并且由统一的服务进行管理调度。
以上显示和描述了本发明的基本原理、主要特征及优点。本行业的技术人员应该了解,本发明不受上述实施例的限制,上述实施例和说明书中描述的只是说明本发明的原理,在不脱离本发明精神和范围的前提下,本发明还会有各种变化和改进,这些变化和改进都落入要求保护的本发明范围内。本发明要求保护范围由所附的权利要求书及其等效物界。
Claims (7)
1.一种数据库及***应用心跳统一管理的实现方法,其特征在于:包括如下步骤:
(一)按照***中的节点类型,把节点分为应用节点及数据库节点:
把运行业务应用的节点称为应用节点,把只运行数据库服务的节点称为数据库节点,如果某节点上既运行业务应用,又运行数据库服务我们仍称其为应用节点;并且在***中把应用节点和数据库节点的节点名和ip地址存储到某配置文档中,并且保证***中此文档内容的一致性;
(二)监测数据库心跳及维护本地信息:
(1)根据配置文档中的信息,判断当前节点是否应用节点;
(2)如果是应用节点,通过配置文档,找到某数据库节点,通过ip地址的方式,使用数据库接口对数据库进行访问;
(3)如果能连接上此节点,在本地共享存储中数据库节点信息处增加此节点的信息,并给此节点置上备用库状态,并在此节点相应位置写入当前时间;
(4)如果连接不上此节点,在本地共享存储中数据库节点信息处增加此节点的信息,并给此节点置上退出状态,并在此节点相应位置写入当前时间;
(5)对配置文档中的所有的数据库节点进行(2)-(4)的步骤,直到文档中所有节点全部被遍历;
(6)心跳管理服务每隔1秒钟,对本地共享存储中的数据库节点进行(2)的步骤,然后更新本地共享存储中此数据库节点的状态及时间;
(三)监测***应用心跳及维护本地信息:
(1)根据配置文档中的信息,判断当前节点是否应用节点;
(2)如果是应用节点,通过配置文档,找到其他应用节点,通过UDP组播给其他所有应用节点发送本节点各应用状态;
(3)其他节点收到此心跳后,把此节点的各应用状态及当前时间存入本地共享存储相应位置;
(4)心跳管理服务每隔1秒钟,对本地共享存储中的所有应用节点进行(2)的步骤;
(四)心跳管理服务运算所有节点状态及往其他节点同步:
(1)心跳管理程序对本地共享存储中所有数据库节点及应用节点进行时间判断,把共享存储中的时间与当前时间做对比,如果超过预设值的时间,给所有节点置上不可用状态,即不参与以下步骤中的节点运算;
(2)心跳管理程序根据本地共享内存中所有数据库状态,通过优先级及预配置算法算出所有数据库主用库,备用库,并存储到本地共享存储中相应位置;
(3)心跳管理程序根据本地共享内存中所有应用节点中应用状态状态,通过优先级及预配置算法算出给每个应用算出主机、备用等状态,并存储到本地共享存储中相应位置;
(五)心跳管理程序通过统一的报文格式,把数据库主用、备用等信息,各应用主机状态信息,通过UDP方式往所有的应用节点同步。
2.根据权利要求1所述的一种数据库及***应用心跳统一管理的实现方法,其特征在于:所述数据库节点状态,包括启动、主用库、备用库、强制主用库、强制备用库、网络异常、单网故障、登录故障、退出九种。
3.根据权利要求1所述的一种数据库及***应用心跳统一管理的实现方法,其特征在于:所述应用节点状态,包括离线、主机、备机、强制主机、强制备机、网络异常、进程异常、启动、故障九种。
4.根据权利要求1所述的一种数据库及***应用心跳统一管理的实现方法,其特征在于:所述数据库,包括ORACLE、MYSQL、PostgreSQL。
5.根据权利要求1所述的一种数据库及***应用心跳统一管理的实现方法,其特征在于:所述应用节点状态和数据库节点状态,由应用节点上的同一服务进行本地存储。
6.根据权利要求1所述的一种数据库及***应用心跳统一管理的实现方法,其特征在于:所述应用节点状态和数据库节点状态,由应用节点上的同一服务进行网络发送、传输及接收。
7.根据权利要求1所述的一种数据库及***应用心跳统一管理的实现方法,其特征在于:所述应用节点状态和数据库节点状态的存储结构及网络传输结构保持一致。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611077682.1A CN106789941B (zh) | 2016-11-30 | 2016-11-30 | 一种数据库及***应用心跳统一管理的实现方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611077682.1A CN106789941B (zh) | 2016-11-30 | 2016-11-30 | 一种数据库及***应用心跳统一管理的实现方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106789941A true CN106789941A (zh) | 2017-05-31 |
CN106789941B CN106789941B (zh) | 2019-12-03 |
Family
ID=58898832
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201611077682.1A Active CN106789941B (zh) | 2016-11-30 | 2016-11-30 | 一种数据库及***应用心跳统一管理的实现方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106789941B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110290159A (zh) * | 2018-03-19 | 2019-09-27 | 中移(苏州)软件技术有限公司 | 一种调度管理的方法和设备 |
CN114817075A (zh) * | 2022-06-21 | 2022-07-29 | 远江盛邦(北京)网络安全科技股份有限公司 | 一种进程间心跳检测方法及装置 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101493826A (zh) * | 2008-12-23 | 2009-07-29 | 中兴通讯股份有限公司 | 基于web应用的数据库***及其数据管理方法 |
CN102693324A (zh) * | 2012-01-09 | 2012-09-26 | 西安电子科技大学 | 一种分布式数据库同步***、同步方法和节点管理方法 |
CN103763155A (zh) * | 2014-01-24 | 2014-04-30 | 国家电网公司 | 分布式云存储***多服务心跳监测方法 |
US8769089B2 (en) * | 2011-11-15 | 2014-07-01 | International Business Machines Corporation | Distributed application using diagnostic heartbeating |
CN105095008A (zh) * | 2015-08-25 | 2015-11-25 | 国电南瑞科技股份有限公司 | 一种适用于集群***的分布式任务故障冗余方法 |
-
2016
- 2016-11-30 CN CN201611077682.1A patent/CN106789941B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101493826A (zh) * | 2008-12-23 | 2009-07-29 | 中兴通讯股份有限公司 | 基于web应用的数据库***及其数据管理方法 |
US8769089B2 (en) * | 2011-11-15 | 2014-07-01 | International Business Machines Corporation | Distributed application using diagnostic heartbeating |
CN102693324A (zh) * | 2012-01-09 | 2012-09-26 | 西安电子科技大学 | 一种分布式数据库同步***、同步方法和节点管理方法 |
CN103763155A (zh) * | 2014-01-24 | 2014-04-30 | 国家电网公司 | 分布式云存储***多服务心跳监测方法 |
CN105095008A (zh) * | 2015-08-25 | 2015-11-25 | 国电南瑞科技股份有限公司 | 一种适用于集群***的分布式任务故障冗余方法 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110290159A (zh) * | 2018-03-19 | 2019-09-27 | 中移(苏州)软件技术有限公司 | 一种调度管理的方法和设备 |
CN110290159B (zh) * | 2018-03-19 | 2022-06-28 | 中移(苏州)软件技术有限公司 | 一种调度管理的方法和设备 |
CN114817075A (zh) * | 2022-06-21 | 2022-07-29 | 远江盛邦(北京)网络安全科技股份有限公司 | 一种进程间心跳检测方法及装置 |
CN114817075B (zh) * | 2022-06-21 | 2022-09-13 | 远江盛邦(北京)网络安全科技股份有限公司 | 一种进程间心跳检测方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN106789941B (zh) | 2019-12-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Botelho et al. | On the design of practical fault-tolerant SDN controllers | |
US10169709B2 (en) | Avoiding incompatibility between data and computing processes to enhance computer performance | |
CN108604202B (zh) | 并行处理***的工作节点重建 | |
US10122595B2 (en) | System and method for supporting service level quorum in a data grid cluster | |
WO2021249268A1 (zh) | 服务网格实例的构建方法、服务网格***以及多集群*** | |
KR102013004B1 (ko) | 확장 가능한 환경에서의 동적 로드 밸런싱 기법 | |
WO2019061720A1 (zh) | 一种数据同步的方法和*** | |
US9960964B2 (en) | System, method and apparatus to manage services in a network | |
US20140108532A1 (en) | System and method for supporting guaranteed multi-point delivery in a distributed data grid | |
CN110362381A (zh) | Hdfs集群高可用部署方法、***、设备及存储介质 | |
CN106888245A (zh) | 一种数据处理方法、装置及*** | |
CN109783151B (zh) | 规则变更的方法和装置 | |
CN108319623A (zh) | 一种数据重分布方法、装置及数据库集群 | |
CN108347347A (zh) | 一种信息处理方法、装置和*** | |
CN108984320A (zh) | 一种消息队列集群防脑裂方法及装置 | |
US8751711B2 (en) | Storage topology manager | |
CN107783842A (zh) | 一种分布式锁实现方法、设备及存储装置 | |
CN105827678B (zh) | 一种基于高可用架构下的通信方法和节点 | |
CN108600316A (zh) | 云存储服务的数据管理方法、***及设备 | |
Stojnić et al. | Osiris-sr: A safety ring for self-healing distributed composite service execution | |
CN111708668B (zh) | 集群故障的处理方法、装置及电子设备 | |
CN106789941A (zh) | 一种数据库及***应用心跳统一管理的实现方法 | |
CN112732491A (zh) | 数据处理***、基于数据处理***的业务数据处理方法 | |
CN109257396A (zh) | 一种分布式锁调度方法及装置 | |
CN105100185A (zh) | 事务中间件机器环境中处理数据库状态通知的***和方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |