CN113656243B - 一种业务指标监控方法、装置、设备及存储介质 - Google Patents
一种业务指标监控方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN113656243B CN113656243B CN202110861842.6A CN202110861842A CN113656243B CN 113656243 B CN113656243 B CN 113656243B CN 202110861842 A CN202110861842 A CN 202110861842A CN 113656243 B CN113656243 B CN 113656243B
- Authority
- CN
- China
- Prior art keywords
- target
- service
- index
- business
- matching
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 66
- 238000000034 method Methods 0.000 title claims abstract description 58
- 238000004364 calculation method Methods 0.000 claims abstract description 88
- 238000013507 mapping Methods 0.000 claims description 56
- 238000012806 monitoring device Methods 0.000 claims description 7
- 230000004044 response Effects 0.000 claims description 2
- 230000008569 process Effects 0.000 description 9
- 238000012545 processing Methods 0.000 description 9
- 238000007619 statistical method Methods 0.000 description 8
- 238000012546 transfer Methods 0.000 description 5
- 238000010276 construction Methods 0.000 description 4
- 230000001960 triggered effect Effects 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000000605 extraction Methods 0.000 description 3
- 230000004931 aggregating effect Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000002498 deadly effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
- G06F11/3006—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system is distributed, e.g. networked systems, clusters, multiprocessor systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3055—Monitoring arrangements for monitoring the status of the computing system or of the computing system component, e.g. monitoring if the computing system is on, off, available, not available
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3065—Monitoring arrangements determined by the means or processing involved in reporting the monitored data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3089—Monitoring arrangements determined by the means or processing involved in sensing the monitored data, e.g. interfaces, connectors, sensors, probes, agents
- G06F11/3093—Configuration details thereof, e.g. installation, enabling, spatial arrangement of the probes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/32—Monitoring with visual or acoustical indication of the functioning of the machine
- G06F11/324—Display of status information
- G06F11/327—Alarm or error message display
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Mathematical Physics (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Debugging And Monitoring (AREA)
Abstract
本申请公开了一种业务指标监控方法、装置、设备及存储介质,所述方法包括:获取目标业务的业务指标规则,所述业务指标规则包括:业务指标匹配规则、业务指标计算规则和阈值告警规则;获取所述目标业务的业务日志;基于所述业务指标匹配规则,将所述业务日志与目标业务指标关键字进行匹配,得到业务指标匹配结果;基于所述业务指标计算规则,对所述业务指标匹配结果进行计算得到目标业务指标;基于所述阈值告警规则,对所述目标业务指标进行监控。利用本申请提供的技术方案通过预先配置的业务指标规则对业务日志的分析,可以准确的提取业务指标,进而实现对业务运行情况的有效监控。
Description
技术领域
本申请涉及计算机通信技术领域,具体涉及一种业务指标监控方法、装置、设备及存储介质。
背景技术
随着软件构建技术的进步和发展,分布式***越来越普遍,但在一个大型的分布式***中获取业务处理成功、业务处理失败等业务指标数据是一项费时费力的工作。目前普遍的做法是在构建业务***的过程中就收集和统计关键的业务指标并写入数据库中,再基于对业务日志的处理得到业务指标对应的指标值,对业务指标进行监控。
由于这种方式需要在每个业务***的构建过程中收集和统计这些业务指标,在***构建完成之后,如果出现业务更新,更改业务指标,需要修改业务***,不仅要投入大量的人力成本,而且耗时长,效率低,无法对业务运行情况形成及时有效的监控,因此,需要提供更加高效的技术方案。
发明内容
为了解决现有技术的问题,本申请提供了一种业务指标监控方法、装置、设备及存储介质。所述技术方案如下:
一方面,提供了一种业务指标监控方法,所述方法包括:
获取目标业务的业务指标规则,所述业务指标规则包括:业务指标匹配规则、业务指标计算规则和阈值告警规则;
获取所述目标业务的业务日志;
基于所述业务指标匹配规则,将所述业务日志与目标业务指标关键字进行匹配,得到业务指标匹配结果;
基于所述业务指标计算规则,对所述业务指标匹配结果进行计算得到目标业务指标;
基于所述阈值告警规则,对所述目标业务指标进行监控。
另一方面,提供了一种业务指标监控装置,所述装置包括:
业务指标配置规则获取模块,用于获取目标业务的业务指标规则,所述业务指标规则包括:业务指标匹配规则、业务指标计算规则和阈值告警规则;
业务日志获取模块,用于获取所述目标业务的业务日志;
业务指标匹配模块,用于基于所述业务指标匹配规则,将所述业务日志与目标业务指标关键字进行匹配,得到业务指标匹配结果;
业务指标计算模块,用于基于所述业务指标计算规则,对所述业务指标匹配结果进行计算得到目标业务指标;
业务指标监控模块,用于基于所述阈值告警规则,对所述目标业务指标进行监控。
另一方面,提供了一种业务指标监控设备,所述设备包括处理器和存储器,所述存储器中存储有至少一条指令或至少一段程序,所述至少一条指令或所述至少一段程序由所述处理器加载并执行以实现如上述的业务指标监控方法。
另一方面,提供了一种计算机可读存储介质,所述存储介质中存储有至少一条指令或至少一段程序,所述至少一条指令或所述至少一段程序由处理器加载并执行以实现如上述的业务指标监控方法。
本申请提供的业务指标监控方法、装置、设备及存储介质,具有如下技术效果:
本申请通过获取目标业务的业务指标规则,所述业务指标规则包括:业务指标匹配规则、业务指标计算规则和阈值告警规则;获取所述目标业务的业务日志;先基于所述业务指标匹配规则,将所述业务日志与目标业务指标关键字进行匹配,得到业务指标匹配结果;然后基于所述业务指标计算规则,对所述业务指标匹配结果进行计算得到目标业务指标;最后基于所述阈值告警规则,对所述目标业务指标进行监控,所述技术方案通过预先配置的业务指标规则对业务日志的分析,可以准确的提取目标业务指标,进而实现对业务运行情况的有效监控,使得对存量***、分布式业务***的业务监控更加方便。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案和优点,下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它附图。
图1是本申请实施例提供的一种业务指标监控方法的流程示意图;
图2是本申请实施例提供的一种业务指标规则配置方法的流程示意图;
图3是本申请实施例提供的一种基于上述业务指标匹配规则,将上述业务日志与目标业务指标关键字进行匹配,得到业务指标匹配结果的流程示意图;
图4是本申请实施例提供的一种基于上述业务指标计算规则,对上述业务指标匹配结果进行计算得到目标业务指标的流程示意图;
图5是本申请实施例提供的一种基于上述阈值告警规则,对上述业务指标进行监控的流程示意图;
图6是本申请实施例提供的一种业务指标规则重新配置方法的流程示意图;
图7是本申请实施例提供的一种业务指标监控装置示意图;
图8是本申请实施例提供的一种业务指标监控方法的服务器的硬件结构框图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。
需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、***、产品或服务器不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
以下介绍本申请实施例提供的一种业务指标监控方法,图1为本申请实施例提供的一种业务指标监控方法的流程示意图。需要说明的是,本说明书提供了如实施例或流程图所述的方法操作步骤,但基于常规或者无创造性的劳动可以包括更多或者更少的操作步骤。实施例中列举的步骤顺序仅仅为众多步骤执行顺序中的一种方式,不代表唯一的执行顺序。在实际中的***或产品执行时,可以按照实施例或者附图所示的方法顺序执行或者并行执行(例如并行处理器或者多线程处理的环境)。具体的如图1所示,上述方法可以包括:
S101,获取目标业务的业务指标规则,上述业务指标规则包括:业务指标匹配规则、业务指标计算规则和阈值告警规则。
在本说明书实施例中,上述业务指标规则可以为业务指标的匹配、计算及监控规则。具体的,业务指标规则可以包括:业务指标匹配规则、业务指标计算规则和阈值告警规则;其中,业务指标匹配规则可以为用于生成目标业务对应的业务指标匹配结果的匹配条件集,业务指标匹配结果可以用于衡量目标业务的业务日志与业务指标的关联度;业务指标计算规则可以为用于统计分析目标业务指标的公式集;目标业务指标可以用于表征目标业务中业务指标对应的指标参数;阈值告警规则可以为用于监控目标业务指标的阈值比较条件集。
在一个具体的实施例中,如图2所示,上述业务指标规则的配置过程可以包括:
S201,响应于上述目标业务的业务指标匹配规则配置指令,上述业务指标匹配规则配置指令携带有第一预设映射信息、第二预设映射信息和业务指标关键字,上述第一预设映射信息表征日志路径与业务类别间的映射关系,上述第二预设映射信息表征上述业务类别与匹配方式间的映射关系,基于上述第一预设映射信息、上述第二预设映射信息和上述业务指标关键字,配置上述业务指标匹配规则。
在本说明书实施例中,上述业务指标匹配规则可以用于根据日志路径、业务类别、匹配方式以及业务指标关键字确定目标业务对应的业务指标匹配结果。
S203,响应于上述目标业务的业务指标计算规则配置指令,上述业务指标计算规则配置指令携带有一级业务指标计算公式和二级业务指标计算公式,基于上述一级业务指标计算公式和上述二级业务指标计算公式,配置上述业务指标计算规则。
在本说明书实施例中,上述业务指标计算规则可以用于解析业务指标匹配结果对应的多级业务指标计算公式,上述多级业务指标计算公式可以基于业务类别和业务指标关键字进行预先配置,其中,上述多级业务指标计算公式可以包括一级业务指标计算公式和二级业务指标计算公式。
S205,响应于上述目标业务的阈值告警规则配置指令,上述阈值告警规则配置指令携带有每个业务指标的预设阈值和预设比较方式,基于上述每个业务指标的预设阈值和预设比较方式,配置上述阈值告警规则。
在本说明书实施例中,上述阈值告警规则可以用于根据每个业务指标的预设阈值和预设比较方式,对每个业务指标进行告警监控。
S207,基于上述业务指标匹配规则、上述业务指标计算规则和上述阈值告警规则,配置上述业务指标规则。
由以上实施例可见,通过分别配置业务指标匹配规则、业务指标计算规则以及阈值告警规则然后聚合得到业务指标规则的方法,减少了各个规则之间的耦合,提升了各个规则的独立性,从而提升了对各个规则进行独立更新修改的便捷性。
S103,获取上述目标业务的业务日志。
具体的,上述获取上述目标业务的业务日志可以包括:
1)采集上述业务日志;
2)将上述业务日志存入消息队列;
3)按照预设读取周期从上述消息队列中读取上述业务日志。
在本说明书实施例中,通过Filebeat(日志文件数据采集器)对分布式业务***的业务日志进行采集,并将业务日志传入Kafka(消息引擎***),按照预设读取周期从Kafka(消息引擎***)中读取业务日志,具体的,预设读取周期可以基于业务指标监控需求预先设置,例如,可以为10分钟或30分钟。
S105,基于上述业务指标匹配规则,将上述业务日志与目标业务指标关键字进行匹配,得到业务指标匹配结果。
在本说明书实施例中,如图3所示,上述基于上述业务指标匹配规则,将上述业务日志与目标业务指标关键字进行匹配,得到业务指标匹配结果可以包括:
S301,确定上述业务日志的目标日志路径。
S303,基于第一预设映射信息,确定上述目标日志路径对应的目标业务类别,上述第一预设映射信息表征日志路径与业务类别间的映射关系。
具体的,可以结合实际应用中的日志存储信息和业务分类信息预先设置日志路径和业务类别之间的第一映射信息。
S305,基于第二预设映射信息,确定上述目标业务类别对应的目标匹配方式,上述第二预设映射信息表征上述业务类别与匹配方式间的映射关系。
具体的,可以结合实际应用中的业务分类信息和业务指标统计需求预先设置业务类别和匹配方式之间的第二映射信息,匹配方式可以包括精确匹配和模糊匹配。
S307,根据上述目标业务类别和目标匹配方式,获取上述目标业务指标关键字。
在本说明书实施例中,业务指标关键字可以结合实际应用中业务指标的统计需求进行预设设置,并根据目标业务类别和目标匹配方式,确定业务指标关键字中的目标业务指标关键字。具体的,目标业务指标关键字可以包括目标业务指标精确关键字和目标业务指标模糊关键字,其中,目标业务指标精确关键字可以为用于匹配业务指标的精确统计字段,目标业务指标模糊关键字可以为用于匹配业务指标的模糊统计字段。
在一个可选的实施例中,当目标匹配方式为精确匹配时,基于目标业务类别,获取目标业务指标精确关键字,例如,当目标业务类别为统计用户存款操作,目标业务指标精确关键字可以为“存款操作”、“存款操作失败”。
在另一个可选的实施例中,当目标匹配方式为模糊匹配时,基于目标业务类别,获取目标业务指标模糊关键字,例如,当目标业务类别为统计用户交易操作时,目标业务指标模糊关键字可以为“XX操作”、“XX操作失败”。
S309,基于上述目标匹配方式,对上述业务日志与上述目标业务指标关键字进行匹配,得到上述业务指标匹配结果。
具体的,上述业务指标匹配结果可以包括业务指标精确匹配结果或业务指标模糊匹配结果。
在一个可选的实施例中,当上述目标匹配方式为精确匹配时,将上述业务日志与目标业务指标精确关键字进行关键字精确匹配,得到业务指标精确匹配结果,例如,业务日志包含存款操作的相关数据,当目标业务指标精确关键字为“存款操作”时,将关键字设置为“存款操作”与业务日志进行精确匹配可以得到存款操作数据;当目标业务指标精确关键字为“存款操作失败”时,将关键字设置为“存款操作失败”与业务日志进行精确匹配可以得到存款操作失败数据。
具体的,当上述目标匹配方式为模糊匹配时,将上述业务日志与目标业务指标模糊关键字进行正则模糊匹配,得到业务指标模糊匹配结果,例如,业务日志包含交易操作的相关数据,当目标业务指标模糊关键字为“XX操作”时,将正则表达式设置为“.{2}操作”与业务日志进行模糊匹配可以得到提现操作数据、存款操作数据和转账操作数据;当目标业务指标模糊关键字为“XX操作失败”时,将正则表达式设置为“.{2}操作失败”与业务日志进行模糊匹配可以得到提现操作失败数据、存款操作失败数据和转账操作失败数据。
由以上实施例可见,通过日志路径与业务类别之间以及业务类别与匹配方式之间的多种映射信息能够快速确定业务日志对应的目标匹配方式以及目标业务指标关键字,并基于目标匹配方式,生成对应的业务指标匹配结果,提升了业务指标的提取效率。
S107,基于上述业务指标计算规则,对上述业务指标匹配结果进行计算得到目标业务指标。
在本说明书实施例中,上述业务指标计算规则可以包括一级业务指标计算公式和二级业务指标计算公式,上述目标业务指标可以包括目标一级业务指标和目标二级业务指标。具体的,目标一级业务指标可以为对业务指标匹配结果进行统计分析得到的指标参数,目标二级业务指标可以为对一级业务指标进行统计分析得到的指标参数。
在一个具体的实施例中,如图4所示,上述基于上述业务指标计算规则,对上述业务指标匹配结果进行计算得到目标业务指标可以包括:
S401,基于上述一级业务指标计算公式,对上述业务指标匹配结果进行计算得到上述目标一级业务指标。
具体的,上述一级业务指标计算公式可以结合实际应用中一级业务指标的统计需求进行预先设置,使用的计算方式可以包括但不限于计数、求和、求最大值、求最小值,还可以通过设置计算周期得到更加精确的业务指标。例如,当业务指标匹配结果为存款操作数据和存款操作失败数据时,对应的一级业务指标有存款操作数和存款操作失败数,预设的存款操作数计算公式为计数公式,通过统计业务指标结果中存款操作数据的数量得到存款操作数,当设置的计算周期为1分钟时,可以得到每分钟存款操作数;预设的存款操作失败数计算公式为计数公式,通过统计业务指标结果中存款操作失败数据的数量得到存款操作失败数,当设置的计算周期为30分钟时,可以得到每半小时存款操作失败数。
S403,当上述目标一级业务指标包括至少两个一级业务指标时,判断上述至少两个一级业务指标是否存在对应的二级业务指标。
在本说明书实施例中,每个二级业务指标由对应的至少两个一级业务指标通过计算得到,预先设置第三映射信息,第三映射信息表征每个二级业务指标和对应的至少两个一级业务指标之间的映射关系;基于上述第三映射信息,判断上述至少两个一级业务指标是否存在对应的二级业务指标。
S405,当判断为是时,基于上述二级业务指标计算公式,对上述至少两个一级业务指标进行计算得到上述目标二级业务指标。
具体的,上述二级业务指标计算公式可以结合实际应用中二级业务指标的统计需求进行预先设置,使用的计算方式可以包括但不限于四则运算。例如,当一级业务指标有存款操作数和存款操作失败数时,基于上述第三映射信息,判断是否存在对应的二级业务指标;判断结果为是,存款操作数和存款操作失败数存在对应的二级业务指标存款操作失败率,预设的二级业务指标存款操作失败率的计算公式为存款操作失败数÷存款操作数=存款操作失败率,通过将一级业务指标存款操作失败数除以一级业务指标存款操作数可以得到二级业务指标存款操作失败率。
由以上实施例可见,在对业务指标匹配结果进行统计分析得到目标一级业务指标的基础上,对目标一级业务指标进行统计分析得到目标二级业务指标,实现对目标业务更高维度的有效监控,提升了目标业务监控的全面性。
S109,基于上述阈值告警规则,对上述目标业务指标进行监控。
在本说明书实施例中,如图5所示,上述基于上述阈值告警规则,对上述业务指标进行监控可以包括:
S501,判断上述目标业务指标是否有目标阈值。
具体的,上述目标阈值可以结合实际应用中目标业务的运行情况和目标业务指标的监控需要进行设置。
S503,当判断为上述目标业务指标有上述目标阈值时,确定上述目标阈值的目标比较方式,上述目标比较方式包括比较是否超出上述目标阈值或比较是否低于上述目标阈值。
具体的,上述目标比较方式可以结合上述目标阈值和目标业务指标的监控需求进行预先设置。
S505,当上述目标比较方式为比较是否超出上述目标阈值时,判断上述目标业务指标是否超出上述目标阈值。
S507,当判断为上述目标业务指标超出上述目标阈值时,触发上述目标业务指标超出上述目标阈值的监控告警通知。
具体的,当目标业务指标超出目标阈值时可以将触发的监控告警通知发送给预设的告警联系人,例如,目标业务指标“存款操作失败数”的目标阈值为100,目标比较方式为比较是否超出上述目标阈值,当前存款操作失败数为120,则触发“存款服务出错”的监控告警通知,并将监控告警通知发送给对应的告警联系人。
S509,当上述目标比较方式为比较是否低于上述目标阈值时,判断上述目标业务指标是否低于上述目标阈值。
S511,当判断为上述目标业务指标低于上述目标阈值时,触发上述目标业务指标低于上述目标阈值的监控告警通知。
具体的,当目标业务指标低于目标阈值时可以将触发的监控告警通知发送给预设的告警联系人,例如,目标业务指标“转账操作成功率”的目标阈值为99%,目标比较方式为比较是否低于上述目标阈值,当前转账操作成功率为95%,则触发“转账服务出错”的监控告警通知,并将监控告警通知发送给对应的告警联系人。
在本说明书实施例中,可以基于业务指标的实际监控需求预先设置监控告警级别,监控告警级别可以包括但不限于警告告警、错误告警和致命告警,还可以对同一业务指标的不同告警级别的监控告警通知分别设置对应的目标阈值。
由以上实施例可见,通过不同的比较方式对目标业务指标与目标阈值的比较结果进行监控,提升了对不同目标业务指标监控的针对性,进而实现对业务运行情况的有效监控。
在本说明书实施例中,如图6所示,上述业务指标监控方法还可以包括:
S601,响应于目标业务更新指令,更新上述目标业务。
在实际应用中,可以根据实际的业务发展需求发布目标业务更新指令,对目标业务进行更新。
S603,根据更新后的目标业务,重新配置上述更新后的目标业务的业务指标规则。
在实际应用中,当目标业务更新后,需要重新配置更新后的目标业务的业务指标规则以便于对相应的业务指标进行及时的监控,具体的,这里重新配置更新后的目标业务的业务指标规则的具体步骤与S201~S207中配置业务指标规则的步骤类似,具体步骤可以参见S201~S207中配置业务指标规则的相关描述,在此不再赘述。
由以上本申请实施例提供的技术方案可见,一方面,通过分别预先配置业务指标匹配规则、业务指标计算规则以及阈值告警规则然后聚合得到业务指标规则的方法,避免相关技术中在业务***构建过程中确定业务指标,造成业务更新时重新修改业务***带来的大量的人力成本和效率低的问题,减少了各个规则之间的耦合,提升了各个规则的独立性,从而提升了对各个规则进行独立更新修改的便捷性;另一方面,基于上述业务指标匹配规则,将上述业务日志与目标业务指标关键字进行匹配,得到业务指标匹配结果,提升了业务指标的提取效率;另一方面,在对业务指标匹配结果进行统计分析得到目标一级业务指标的基础上,对目标一级业务指标进行统计分析得到目标二级业务指标,实现对目标业务更高维度的有效监控;另一方面,通过不同的比较方式对目标业务指标与目标阈值的比较结果进行监控,提升了对不同目标业务指标监控的针对性,进而实现对业务运行情况的有效监控。
本申请实施例提供了一种业务指标监控装置,如图7所示,上述装置可以包括:
业务指标配置规则获取模块710,用于获取目标业务的业务指标规则,上述业务指标规则包括:业务指标匹配规则、业务指标计算规则和阈值告警规则;
业务日志获取模块720,用于获取上述目标业务的业务日志;
业务指标匹配模块730,用于基于上述业务指标匹配规则,将上述业务日志与目标业务指标关键字进行匹配,得到业务指标匹配结果;
业务指标计算模块740,用于基于上述业务指标计算规则,对上述业务指标匹配结果进行计算得到目标业务指标;
业务指标监控模块750,用于基于上述阈值告警规则,对上述目标业务指标进行监控。
在一个具体的实施例中,上述装置还可以包括:
业务指标匹配规则配置模块,用于响应于上述目标业务的业务指标匹配规则配置指令,上述业务指标匹配规则配置指令携带有第一预设映射信息、第二预设映射信息和业务指标关键字,上述第一预设映射信息表征日志路径与业务类别间的映射关系,上述第二预设映射信息表征上述业务类别与匹配方式间的映射关系,基于上述第一预设映射信息、上述第二预设映射信息和上述业务指标关键字,配置上述业务指标匹配规则;
业务指标计算规则配置模块,用于响应于上述目标业务的业务指标计算规则配置指令,上述业务指标计算规则配置指令携带有一级业务指标计算公式和二级业务指标计算公式,基于上述一级业务指标计算公式和上述二级业务指标计算公式,配置上述业务指标计算规则;
阈值告警规则配置模块,用于响应于上述目标业务的阈值告警规则配置指令,上述阈值告警规则配置指令携带有每个业务指标的预设阈值和预设比较方式,基于上述每个业务指标的预设阈值和预设比较方式,配置上述阈值告警规则;
业务指标规则配置模块,用于基于上述业务指标匹配规则、上述业务指标计算规则和上述阈值告警规则,配置上述业务指标规则。
在本说明书实施例中,上述装置还可以包括:
目标业务更新模块,用于响应于目标业务更新指令,更新上述目标业务;
业务指标规则重新配置模块,用于根据更新后的目标业务,重新配置上述更新后的目标业务的业务指标规则。
在一个具体的实施例中,上述业务日志获取模块720可以包括:
业务日志采集单元,用于采集上述业务日志;
业务日志存储单元,用于将上述业务日志存入消息队列;
业务日志读取单元,用于按照预设读取周期从上述消息队列中读取上述业务日志。
在本说明书实施例中,上述业务指标匹配模块730可以包括:
目标日志路径确定单元,用于确定上述业务日志的目标日志路径;
目标业务类别确定单元,用于基于第一预设映射信息,确定上述目标日志路径对应的目标业务类别,上述第一预设映射信息表征日志路径与业务类别间的映射关系;
目标匹配方式确定单元,用于基于第二预设映射信息,确定上述目标业务类别对应的目标匹配方式,上述第二预设映射信息表征上述业务类别与匹配方式间的映射关系;
目标业务指标关键字单元,用于根据上述目标业务类别和目标匹配方式,获取上述目标业务指标关键字;
业务指标匹配结果单元,用于基于上述目标匹配方式,对上述业务日志与上述目标业务指标关键字进行匹配,得到上述业务指标匹配结果。
在一个具体的实施例中,上述业务指标计算规则可以包括一级业务指标计算公式和二级业务指标计算公式,上述目标业务指标可以包括目标一级业务指标和目标二级业务指标,上述业务指标计算模块740可以包括:
一级业务指标计算单元,用于基于上述一级业务指标计算公式,对上述业务指标匹配结果进行计算得到上述目标一级业务指标;
二级业务指标判断单元,用于当上述目标一级业务指标包括至少两个一级业务指标时,判断上述至少两个一级业务指标是否存在对应的二级业务指标;
二级业务指标计算单元,用于当判断为是时,基于上述二级业务指标计算公式,对上述至少两个一级业务指标进行计算得到上述目标二级业务指标。
在本说明书实施例中,上述业务指标监控模块750可以包括:
目标阈值判断单元,用于判断上述目标业务指标是否有目标阈值;
目标比较方式确定单元,用于当判断为上述目标业务指标有上述目标阈值时,确定上述目标阈值的目标比较方式,上述目标比较方式包括比较是否超出上述目标阈值或比较是否低于上述目标阈值;
业务指标超出目标阈值判断单元,用于当上述目标比较方式为比较是否超出上述目标阈值时,判断上述目标业务指标是否超出上述目标阈值;
第一监控告警通知触发单元,用于当判断为上述目标业务指标超出上述目标阈值时,触发上述目标业务指标超出上述目标阈值的监控告警通知;
业务指标低于目标阈值判断单元,用于当上述目标比较方式为比较是否低于上述目标阈值时,判断上述目标业务指标是否低于上述目标阈值;
第二监控告警通知触发单元,用于当判断为上述目标业务指标低于上述目标阈值时,触发上述目标业务指标低于上述目标阈值的监控告警通知。
本申请实施例提供了一种业务指标监控设备,该业务指标监控设备包括处理器和存储器,该存储器中存储有至少一条指令或至少一段程序,该至少一条指令或该至少一段程序由该处理器加载并执行以实现如上述方法实施例所提供的业务指标监控方法。
存储器可用于存储软件程序以及模块,处理器通过运行存储在存储器的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作***、功能所需的应用程序等;存储数据区可存储根据上述设备的使用所创建的数据等。此外,存储器可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器还可以包括存储器控制器,以提供处理器对存储器的访问。
本申请实施例所提供的方法实施例可以在移动终端、计算机终端、服务器或者类似的运算装置中执行,即上述计算机设备可以包括移动终端、计算机终端、服务器或者类似的运算装置。以运行在服务器上为例,图8是本申请实施例提供的一种业务指标监控方法的服务器的硬件结构框图。如图8所示,该服务器800可因配置或性能不同而产生比较大的差异,可以包括一个或一个以***处理器(Central Processing Units,CPU)810(处理器810可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)、用于存储数据的存储器830,一个或一个以上存储应用程序823或数据822的存储介质820(例如一个或一个以上海量存储设备)。其中,存储器830和存储介质820可以是短暂存储或持久存储。存储在存储介质820的程序可以包括一个或一个以上模块,每个模块可以包括对服务器中的一系列指令操作。更进一步地,中央处理器810可以设置为与存储介质820通信,在服务器800上执行存储介质820中的一系列指令操作。服务器800还可以包括一个或一个以上电源860,一个或一个以上有线或无线网络接口850,一个或一个以上输入输出接口840,和/或,一个或一个以上操作***821,例如Windows ServerTM,Mac OS XTM,UnixTM,LinuxTM,FreeBSDTM等等。
输入输出接口840可以用于经由一个网络接收或者发送数据。上述的网络具体实例可包括服务器800的通信供应商提供的无线网络。在一个实例中,输入输出接口840包括一个网络适配器(Network Interface Controller,NIC),其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中,输入输出接口840可以为射频(RadioFrequency,RF)模块,其用于通过无线方式与互联网进行通讯。
本领域普通技术人员可以理解,图8所示的结构仅为示意,其并不对上述电子装置的结构造成限定。例如,服务器800还可包括比图8中所示更多或者更少的组件,或者具有与图8所示不同的配置。
本申请实施例还提供了一种存储介质,上述存储介质可设置于服务器之中以保存用于实现方法实施例中一种的业务指标监控方法相关的至少一条指令或至少一段程序,该至少一条指令或该至少一段程序由该处理器加载并执行以实现上述方法实施例提供的业务指标监控方法。
可选地,在本实施例中,上述存储介质可以位于计算机网络的多个网络服务器中的至少一个网络服务器。可选地,在本实施例中,上述存储介质可以包括但不限于:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
由上述本申请提供的业务指标监控方法、装置、设备或存储介质的实施例可见,一方面,通过分别预先配置业务指标匹配规则、业务指标计算规则以及阈值告警规则然后聚合得到业务指标规则的方法,避免相关技术中在业务***构建过程中确定业务指标,造成业务更新时重新修改业务***带来的大量的人力成本和效率低的问题,减少了各个规则之间的耦合,提升了各个规则的独立性,从而提升了对各个规则进行独立更新修改的便捷性;另一方面,基于上述业务指标匹配规则,将上述业务日志与目标业务指标关键字进行匹配,得到业务指标匹配结果,提升了业务指标的提取效率;另一方面,在对业务指标匹配结果进行统计分析得到目标一级业务指标的基础上,对目标一级业务指标进行统计分析得到目标二级业务指标,实现对目标业务更高维度的有效监控;另一方面,通过不同的比较方式对目标业务指标与目标阈值的比较结果进行监控,提升了对不同目标业务指标监控的针对性,进而实现对业务运行情况的有效监控。
需要说明的是:上述本申请实施例先后顺序仅仅为了描述,不代表实施例的优劣。且上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置、设备和存储介质实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指示相关的硬件完成,上述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上上述仅为本申请的较佳实施例,并不用以限制本申请,凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。
Claims (9)
1.一种业务指标监控方法,其特征在于,所述方法包括:
获取目标业务的业务指标规则,所述业务指标规则包括:业务指标匹配规则、业务指标计算规则和阈值告警规则;所述业务指标匹配规则配置有第一预设映射信息、第二预设映射信息和业务指标关键字,所述第一预设映射信息表征日志路径与业务类别间的映射关系,所述第二预设映射信息表征所述业务类别与匹配方式间的映射关系;
确定所述目标业务的业务日志的目标日志路径;
基于所述第一预设映射信息和所述第二预设映射信息,确定所述目标日志路径对应的目标业务类别和所述目标业务类别对应的目标匹配方式;
根据所述目标业务类别和所述目标匹配方式,获取目标业务指标关键字;
基于所述目标匹配方式,对所述业务日志与所述目标业务指标关键字进行匹配,得到业务指标匹配结果;所述业务指标匹配结果用于衡量所述目标业务的业务日志与业务指标的关联度;
基于所述业务指标计算规则,对所述业务指标匹配结果进行计算得到目标业务指标;
基于所述阈值告警规则,对所述目标业务指标进行监控。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
响应于所述目标业务的业务指标匹配规则配置指令,所述业务指标匹配规则配置指令携带有所述第一预设映射信息、所述第二预设映射信息和所述业务指标关键字,基于所述第一预设映射信息、所述第二预设映射信息和所述业务指标关键字,配置所述业务指标匹配规则;
或,响应于所述目标业务的业务指标计算规则配置指令,所述业务指标计算规则配置指令携带有一级业务指标计算公式和二级业务指标计算公式,基于所述一级业务指标计算公式和所述二级业务指标计算公式,配置所述业务指标计算规则;
或,响应于所述目标业务的阈值告警规则配置指令,所述阈值告警规则配置指令携带有每个业务指标的预设阈值和预设比较方式,基于所述每个业务指标的预设阈值和预设比较方式,配置所述阈值告警规则;
基于所述业务指标匹配规则、所述业务指标计算规则和所述阈值告警规则,配置所述业务指标规则。
3.根据权利要求1或2所述的方法,其特征在于,所述业务指标匹配结果包括业务指标精确匹配结果或业务指标模糊匹配结果,所述基于所述目标匹配方式,对所述业务日志与所述目标业务指标关键字进行匹配,得到所述业务指标匹配结果包括:
当所述目标匹配方式为精确匹配时,将所述业务日志与目标业务指标精确关键字进行关键字精确匹配,得到所述业务指标精确匹配结果;
或,
当所述目标匹配方式为模糊匹配时,将所述业务日志与目标业务指标模糊关键字进行正则模糊匹配,得到所述业务指标模糊匹配结果。
4.根据权利要求1或2所述的方法,其特征在于,当所述业务指标计算规则包括一级业务指标计算公式和二级业务指标计算公式时,所述目标业务指标包括目标一级业务指标和目标二级业务指标,所述基于所述业务指标计算规则,对所述业务指标匹配结果进行计算得到目标业务指标包括:
基于所述一级业务指标计算公式,对所述业务指标匹配结果进行计算得到所述目标一级业务指标;
当所述目标一级业务指标包括至少两个一级业务指标时,判断所述至少两个一级业务指标是否存在对应的二级业务指标;
当判断为是时,基于所述二级业务指标计算公式,对所述至少两个一级业务指标进行计算得到所述目标二级业务指标。
5.根据权利要求1或2所述的方法,其特征在于,所述基于所述阈值告警规则,对所述目标业务指标进行监控包括:
判断所述目标业务指标是否有目标阈值;
当判断为所述目标业务指标有所述目标阈值时,确定所述目标阈值的目标比较方式,所述目标比较方式包括比较是否超出所述目标阈值或比较是否低于所述目标阈值;
当所述目标比较方式为比较是否超出所述目标阈值时,判断所述目标业务指标是否超出所述目标阈值;
当判断为所述目标业务指标超出所述目标阈值时,触发所述目标业务指标超出所述目标阈值的监控告警通知;
当所述目标比较方式为比较是否低于所述目标阈值时,判断所述目标业务指标是否低于所述目标阈值;
当判断为所述目标业务指标低于所述目标阈值时,触发所述目标业务指标低于所述目标阈值的监控告警通知。
6.根据权利要求2所述的方法,其特征在于,所述方法还包括:
响应于目标业务更新指令,更新所述目标业务;
根据更新后的目标业务,重新配置所述更新后的目标业务的业务指标规则。
7.一种业务指标监控装置,其特征在于,所述装置包括:
业务指标配置规则获取模块,用于获取目标业务的业务指标规则,所述业务指标规则包括:业务指标匹配规则、业务指标计算规则和阈值告警规则;所述业务指标匹配规则配置有第一预设映射信息、第二预设映射信息和业务指标关键字,所述第一预设映射信息表征日志路径与业务类别间的映射关系,所述第二预设映射信息表征所述业务类别与匹配方式间的映射关系;
目标日志路径确定模块,用于确定所述目标业务的业务日志的目标日志路径;
目标匹配方式模块,用于基于所述第一预设映射信息和所述第二预设映射信息,确定所述目标日志路径对应的目标业务类别和所述目标业务类别对应的目标匹配方式;
目标业务指标关键字获取模块,用于根据所述目标业务类别和所述目标匹配方式,获取目标业务指标关键字;
业务指标匹配模块,用于基于所述目标匹配方式,对所述业务日志与所述目标业务指标关键字进行匹配,得到业务指标匹配结果;所述业务指标匹配结果用于衡量所述目标业务的业务日志与业务指标的关联度;
业务指标计算模块,用于基于所述业务指标计算规则,对所述业务指标匹配结果进行计算得到目标业务指标;
业务指标监控模块,用于基于所述阈值告警规则,对所述目标业务指标进行监控。
8.一种业务指标监控设备,其特征在于,所述设备包括处理器和存储器,所述存储器中存储有至少一条指令或至少一段程序,所述至少一条指令或所述至少一段程序由所述处理器加载并执行以实现如权利要求1至6任一所述的业务指标监控方法。
9.一种计算机可读存储介质,其特征在于,所述存储介质中存储有至少一条指令或至少一段程序,所述至少一条指令或所述至少一段程序由处理器加载并执行以实现如权利要求1至6任一所述的业务指标监控方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110861842.6A CN113656243B (zh) | 2021-07-28 | 2021-07-28 | 一种业务指标监控方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110861842.6A CN113656243B (zh) | 2021-07-28 | 2021-07-28 | 一种业务指标监控方法、装置、设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113656243A CN113656243A (zh) | 2021-11-16 |
CN113656243B true CN113656243B (zh) | 2024-05-31 |
Family
ID=78478932
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110861842.6A Active CN113656243B (zh) | 2021-07-28 | 2021-07-28 | 一种业务指标监控方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113656243B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114863364B (zh) * | 2022-05-20 | 2023-03-07 | 碧桂园生活服务集团股份有限公司 | 一种基于智能视频监控的安防检测方法及*** |
CN117033117B (zh) * | 2023-07-05 | 2024-07-12 | 广州市玄武无线科技股份有限公司 | 一种实时业务监控管理方法、***、电子设备及存储介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104811344A (zh) * | 2014-01-23 | 2015-07-29 | 阿里巴巴集团控股有限公司 | 网络动态业务监控方法及装置 |
CN106161060A (zh) * | 2015-04-07 | 2016-11-23 | 腾讯科技(深圳)有限公司 | 数据监控方法和装置 |
CN106302015A (zh) * | 2016-08-16 | 2017-01-04 | 华青融天(北京)技术股份有限公司 | 一种业务状态监控方法、装置以及*** |
CN107992398A (zh) * | 2017-12-22 | 2018-05-04 | 宜人恒业科技发展(北京)有限公司 | 一种业务***的监控方法和监控*** |
CN108491310A (zh) * | 2018-03-26 | 2018-09-04 | 北京九章云极科技有限公司 | 一种日志监测方法及*** |
WO2019140828A1 (zh) * | 2018-01-17 | 2019-07-25 | 平安科技(深圳)有限公司 | 电子装置、分布式***日志查询方法及存储介质 |
CN110333983A (zh) * | 2019-05-31 | 2019-10-15 | 口口相传(北京)网络技术有限公司 | 业务监控及搜索业务监控方法及装置 |
CN111861472A (zh) * | 2020-07-30 | 2020-10-30 | 中国工商银行股份有限公司 | 业务监控的处理方法和装置 |
-
2021
- 2021-07-28 CN CN202110861842.6A patent/CN113656243B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104811344A (zh) * | 2014-01-23 | 2015-07-29 | 阿里巴巴集团控股有限公司 | 网络动态业务监控方法及装置 |
CN106161060A (zh) * | 2015-04-07 | 2016-11-23 | 腾讯科技(深圳)有限公司 | 数据监控方法和装置 |
CN106302015A (zh) * | 2016-08-16 | 2017-01-04 | 华青融天(北京)技术股份有限公司 | 一种业务状态监控方法、装置以及*** |
CN107992398A (zh) * | 2017-12-22 | 2018-05-04 | 宜人恒业科技发展(北京)有限公司 | 一种业务***的监控方法和监控*** |
WO2019140828A1 (zh) * | 2018-01-17 | 2019-07-25 | 平安科技(深圳)有限公司 | 电子装置、分布式***日志查询方法及存储介质 |
CN108491310A (zh) * | 2018-03-26 | 2018-09-04 | 北京九章云极科技有限公司 | 一种日志监测方法及*** |
CN110333983A (zh) * | 2019-05-31 | 2019-10-15 | 口口相传(北京)网络技术有限公司 | 业务监控及搜索业务监控方法及装置 |
CN111861472A (zh) * | 2020-07-30 | 2020-10-30 | 中国工商银行股份有限公司 | 业务监控的处理方法和装置 |
Also Published As
Publication number | Publication date |
---|---|
CN113656243A (zh) | 2021-11-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113656243B (zh) | 一种业务指标监控方法、装置、设备及存储介质 | |
CN111064614B (zh) | 一种故障根因定位方法、装置、设备及存储介质 | |
CN110147387B (zh) | 一种根因分析方法、装置、设备及存储介质 | |
CN106095639A (zh) | 一种集群亚健康预警方法及*** | |
WO2015136624A1 (ja) | アプリケーション性能監視方法および装置 | |
CN110830438A (zh) | 一种异常日志告警方法、装置及电子设备 | |
CN113051147A (zh) | 一种数据库集群的监控方法、装置、***、以及设备 | |
CN111090807B (zh) | 一种基于知识图谱的用户识别方法及装置 | |
CN107122669A (zh) | 一种评估数据泄露风险的方法和装置 | |
CN112953738B (zh) | 根因告警的定位***、方法、装置、计算机设备 | |
CN112181767A (zh) | 软件***异常的确定方法、装置和存储介质 | |
US9235463B2 (en) | Device and method for fault management of smart device | |
CN107908533A (zh) | 一种数据库性能指标的监测方法、装置、计算机可读存储介质及设备 | |
CN113271224A (zh) | 节点的定位方法、装置、存储介质及电子装置 | |
CN113949652A (zh) | 基于人工智能的用户异常行为检测方法、装置及相关设备 | |
CN113125903A (zh) | 线损异常检测方法、装置、设备及计算机可读存储介质 | |
CN106951360B (zh) | 数据统计完整度计算方法和*** | |
CN110909129A (zh) | 异常投诉事件的识别方法及装置 | |
CN114780358A (zh) | 异常操作行为的检测方法和检测装置 | |
CN113504996A (zh) | 一种负载均衡检测方法、装置、设备及存储介质 | |
CN112784025A (zh) | 一种目标事件的确定方法和装置 | |
CN112612679A (zh) | ***运行状态监控方法、装置、计算机设备和存储介质 | |
CN112416896A (zh) | 数据异常的报警方法和装置、存储介质、电子装置 | |
CN114742371A (zh) | 业务流程管理***及其方法 | |
CN108763007B (zh) | 一种计步异常设备的识别方法、装置及服务器 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |