CN110083504B - 分布式任务的运行状态监控方法及装置 - Google Patents

分布式任务的运行状态监控方法及装置 Download PDF

Info

Publication number
CN110083504B
CN110083504B CN201910252105.9A CN201910252105A CN110083504B CN 110083504 B CN110083504 B CN 110083504B CN 201910252105 A CN201910252105 A CN 201910252105A CN 110083504 B CN110083504 B CN 110083504B
Authority
CN
China
Prior art keywords
instance
task
tree
state information
storage structure
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910252105.9A
Other languages
English (en)
Other versions
CN110083504A (zh
Inventor
覃永靖
程诗尧
王彬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qianxin Technology Group Co Ltd
Original Assignee
Qianxin Technology Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qianxin Technology Group Co Ltd filed Critical Qianxin Technology Group Co Ltd
Priority to CN201910252105.9A priority Critical patent/CN110083504B/zh
Publication of CN110083504A publication Critical patent/CN110083504A/zh
Application granted granted Critical
Publication of CN110083504B publication Critical patent/CN110083504B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3055Monitoring arrangements for monitoring the status of the computing system or of the computing system component, e.g. monitoring if the computing system is on, off, available, not available
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3065Monitoring arrangements determined by the means or processing involved in reporting the monitored data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/13File access structures, e.g. distributed indices

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Computing Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Debugging And Monitoring (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明实施例提供一种分布式任务的运行状态监控方法及装置,所述方法包括:第一节点服务器接收任务分发服务器针对目标任务下发的第一实例,运行所述第一实例,并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库,以及从所述分布式信息库中获取第二实例的运行状态信息;所述第一节点服务器将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中;所述第一节点服务器接收到用户设备发来的监控请求信息后,将各个目标任务的树状存储结构发送给所述用户设备,实现数据易收集、易同步,提高分布式***的易用性。

Description

分布式任务的运行状态监控方法及装置
技术领域
本发明实施例涉及信息处理技术领域,尤其涉及一种分布式任务的运行状态监控方法及装置。
背景技术
分布式任务状态监控是基于分布式环境软件开发的,其有别于单机环境,在分布式***中一个任务可能被分为多个实例运行在多个节点服务器上,而同一时间又可能有多个不同任务并存。为此,任务状态的监控需要考虑各个节点服务器对不同任务数据的收集、存储、同步及清理,对此,目前没有成熟、统一的处理流程,导致无法方便应对状态信息监控难的问题。
发明内容
针对现有技术存在的问题,本发明实施例提供一种分布式任务的运行状态监控方法及装置。
本发明实施例提供一种分布式任务的运行状态监控方法,包括:
第一节点服务器接收任务分发服务器针对目标任务下发的第一实例,运行所述第一实例,并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库,以及从所述分布式信息库中获取第二实例的运行状态信息,所述第二实例的运行状态信息为第二节点服务器接收所述任务分发服务器针对目标任务下发的第二实例,运行所述第二实例后获取到的运行状态信息,所述第一节点服务器和所述第二节点服务器为所述任务分发服务器针对目标任务下发实例的目标节点服务器,所述第一实例和所述第二实例构成所述目标任务;
所述第一节点服务器将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中;
所述第一节点服务器接收到用户设备发来的监控请求信息后,将各个目标任务的树状存储结构发送给所述用户设备。
本发明实施例提供一种分布式任务的运行状态监控装置,包括:
监控模块,用于接收任务分发服务器针对目标任务下发的第一实例,运行所述第一实例,并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库,以及从所述分布式信息库中获取第二实例的运行状态信息,所述第二实例的运行状态信息为第二节点服务器接收所述任务分发服务器针对目标任务下发的第二实例,运行所述第二实例后获取到的运行状态信息;所述监控模块所属第一节点服务器,所述第一节点服务器和所述第二节点服务器为所述任务分发服务器针对目标任务下发实例的目标节点服务器,所述第一实例和所述第二实例构成所述目标任务;
存储模块,用于将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中;
发送模块,用于接收到用户设备发来的监控请求信息后,将各个目标任务的树状存储结构发送给所述用户设备。
本发明实施例提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如上述分布式任务的运行状态监控方法的步骤。
本发明实施例提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如上述分布式任务的运行状态监控方法的步骤。
本发明实施例提供的分布式任务的运行状态监控方法及装置,通过各个节点服务器接收任务分发服务器针对目标任务下发的实例,运行实例并将实例的运行状态信息存储及发送给分布式信息库完成数据共享,使各个节点服务器均能够获取各任务的各实例的运行状态信息完成存放,并在接收到用户设备发来的监控请求信息后,将各个目标任务的状态信息发送给用户设备,实现数据易收集、易同步,提高分布式***的易用性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明分布式任务的运行状态监控方法实施例流程图;
图2为本发明分布式任务的运行状态监控方法的信息流向示意图;
图3为本发明分布式任务的运行状态监控方法实施例流程图;
图4为本发明实例节点建立示意图;
图5为本发明分布式任务的运行状态监控方法实施例流程图;
图6为本发明分布式任务的运行状态监控装置实施例结构图;
图7为本发明分布式任务的运行状态监控装置实施例结构图;
图8为本分布式任务的运行状态监控装置实施例结构图;
图9为本发明电子设备实施例结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
图1示出了本发明一实施例提供的一种分布式任务的运行状态监控方法,包括:
S11、第一节点服务器接收任务分发服务器针对目标任务下发的第一实例,运行所述第一实例,并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库,以及从所述分布式信息库中获取第二实例的运行状态信息,所述第二实例的运行状态信息为第二节点服务器接收所述任务分发服务器针对目标任务下发的第二实例,运行所述第二实例后获取到的运行状态信息。
针对步骤S11,需要说明的是,在本发明实施例中,在分布式***中,一个目标任务会被分为多个实例。各个实例会运行在多个节点服务器上。其中,每个节点服务器上可运行一个或一个以上的实例。实例下发给节点服务器由任务分发服务器完成。任务分发服务器会针对目标任务进行实例划分,并将划分后的实例按照预设分发计划发送给对应的节点服务器。
在本发明实施例中,每个节点服务器均能完成分布式任务的运行状态监控工作。为了方便对监控工作的描述,以单个节点服务器作为主体进行监控方法的阐述。因此,在这里,第一节点服务器作为阐述的主体服务器。第二节点服务器为分发实例的节点服务器中非主体服务器的其他服务器。
在本发明实施例中,无论是第一节点服务器还是第二节点服务器均会接收任务分发服务器针对目标任务下发的实例,运行实例,并将实例的运行状态信息各自存储及发送给分布式信息库。在这里,第一实例为运行在第一节点服务器上的实例,第二实例为运行在第二节点服务器上的实例。所述第一实例和所述第二实例构成所述目标任务。
在本发明实施例中,由于所有的实例的运行状态信息均发送在分布式信息库中,各节点服务器均能够从分布式信息库中获取到其他节点服务器发出的实例的运行状态信息,从而实现状态信息的共享。
如图2所示,图中以两个节点服务器为例,以说明各节点将各自运行的实例的运行状态信息发送到分布式信息库中,再从分布式信息库中获取到其他节点服务器发送的实例的运行状态信息。
S12、所述第一节点服务器将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中。
针对步骤S12,需要说明的是,在本发明实施例中,由于任务分发服务器会同时分发多个不同目标任务的实例,故第一节点服务器会将各个实例的运行状态信息存放在各个目标任务的树状存储结构中。在存放过程中,为了方便存放,各实例的运行状态信息中需至少包含任务ID、实例ID。通过任务ID和实例ID能够清楚的分出哪些实例属于哪个目标任务,从而快速的建立各目标任务下的树状存储结构,快速存储实例的运行状态信息。
S13、所述第一节点服务器接收到用户设备发来的监控请求信息后,将各个目标任务的树状存储结构发送给所述用户设备。
针对步骤S13,需要说明的是,在本发明实施例中,用户要查看目标任务的监控数据,可通过用户设备向节点服务器发送监控请求信息,节点服务器接收到请求后,会将当前存在的各个目标任务的树状存储结构发送给所述用户设备。由于各个节点服务器实现了数据共享,因此,无论用户设备向哪一个正常运行的节点服务器发送请求,均能够得到所需的目标任务的状态信息。
本发明实施例提供的分布式任务的运行状态监控方法,通过各个节点服务器接收任务分发服务器针对目标任务下发的实例,运行实例并将实例的运行状态信息存储及发送给分布式信息库完成数据共享,使各个节点服务器均能够获取各任务的各实例的运行状态信息完成存放,并在接收到用户设备发来的监控请求信息后,将各个目标任务的状态信息发送给用户设备,实现数据易收集、易同步,提高分布式***的易用性。
图3示出了本发明实施例提供的一种分布式任务的运行状态监控方法,包括:
S21、第一节点服务器接收任务分发服务器针对目标任务下发的第一实例,运行所述第一实例,并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库,以及从所述分布式信息库中获取第二实例的运行状态信息,所述第二实例的运行状态信息为第二节点服务器接收所述任务分发服务器针对目标任务下发的第二实例,运行所述第二实例后获取到的运行状态信息。
S22、所述第一节点服务器将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中。
S23、所述第一节点服务器对第一实例的运行状态信息和第二实例的运行状态信息进行解析,获得各实例ID及对应的任务ID、获取时间,并根据各实例ID及对应的任务ID、获取时间对各个目标任务的树状存储结构进行更新、新建;
S24、所述第一节点服务器接收到用户设备发来的监控请求信息后,将各个目标任务的树状存储结构发送给所述用户设备。
针对步骤S23,需要说明的是,在本发明实施例中,由于最初每个节点服务器并未获取到各个节点服务器发送的实例的运行状态信息,故第一次从分布式信息库中获取到各节点服务器发送的各实例的运行状态信息后,先建立各个目标任务的树状存储结构。之后的每次从分布式信息库中获取到各节点服务器发送的实例的运行状态信息,均要对已存在的目标任务的树状存储结构进行更新及建立。
在本发明实施例中,每次获取到新的实例的运行状态信息后,节点服务器对实例的运行状态信息进行解析,获得各实例ID及对应的任务ID、获取时间,并根据各实例ID及对应的任务ID、获取时间对各个目标任务的树状存储结构进行更新、新建。在这里,任务ID用于区分不同目标任务,建立树状存储结构的任务节点。实例ID用于在任务节点下的区分不同实例,建立树状存储结构的实例节点。获取时间为实例的状态信息的更新时间或建立时间。
上述步骤S23具体执行过程可包括:
若确定所述树状存储结构内不存在解析出的任务ID,则根据所述任务ID建立新的目标任务的树状存储结构;
若确定所述树状存储结构内存在解析出的任务ID,且不存在解析出的实例ID,则在对应于所述任务ID的树状存储结构中建立对应于所述实例ID的新实例的运行状态信息;
若确定所述树状存储结构内存在解析出的任务ID,且存在解析出的实例ID,则更新对应于所述任务ID的树状存储结构中对应于所述实例ID的实例的运行状态信息。
上述执行过程说明了树状存储结构的建立任务节点数据、建立实例节点数据及已存有实例节点数据更新。如图4所示,从图中可以看出建立实例节点的过程。
针对其他步骤,在上述实施例中有所说明,在此不再赘述。
本发明实施例提供的分布式任务的运行状态监控方法,通过各个节点服务器接收任务分发服务器针对目标任务下发的实例,运行实例并将实例的运行状态信息存储及发送给分布式信息库完成数据共享,使各个节点服务器均能够获取各任务的各实例的运行状态信息完成树状存储结构的建立、更新,并在接收到用户设备发来的监控请求信息后,将各个目标任务的状态信息发送给用户设备,实现数据易收集、易同步,提高分布式***的易用性。
图5示出了本发明一实施例提供的一种分布式任务的运行状态监控方法,包括:
S31、第一节点服务器接收任务分发服务器针对目标任务下发的第一实例,运行所述第一实例,并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库,以及从所述分布式信息库中获取第二实例的运行状态信息,所述第二实例的运行状态信息为第二节点服务器接收所述任务分发服务器针对目标任务下发的第二实例,运行所述第二实例后获取到的运行状态信息。
S32、所述第一节点服务器将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中。
S33、所述第一节点服务器对第一实例的运行状态信息和第二实例的运行状态信息进行解析,获得各实例ID及对应的任务ID、获取时间,并根据各实例ID及对应的任务ID、获取时间对各个目标任务的树状存储结构进行更新、新建;
S34、获取各个目标任务的树状存储结构的最后更新时间,并计算所述最后更新时间与当前时间的差值,当差值超出预设阈值,将对应的目标任务的树状存储结构数据删除;
S35、所述第一节点服务器接收到用户设备发来的监控请求信息后,将各个目标任务的树状存储结构发送给所述用户设备。
针对步骤S34,需要说明的是,在本发明实施例中,需要实时对树状存储结构进行清理,释放内存。各节点服务器获取各个目标任务的树状存储结构的最后更新时间,并计算所述最后更新时间与当前时间的差值,当差值超出预设阈值,将对应的目标任务的树状存储结构数据删除。
针对其他步骤,在上述实施例中有所说明,在此不再赘述。
本发明实施例提供的分布式任务的运行状态监控方法,通过各个节点服务器接收任务分发服务器针对目标任务下发的实例,运行实例并将实例的运行状态信息存储及发送给分布式信息库完成数据共享,使各个节点服务器均能够获取各任务的各实例的运行状态信息完成树状存储结构的建立、更新及删除,并在接收到用户设备发来的监控请求信息后,将各个目标任务的状态信息发送给用户设备,实现数据易收集、易同步,提高分布式***的易用性。
图6示出了本发明一实施例提供的一种分布式任务的运行状态监控装置,包括监控模块41、存储模块42和发送模块43,其中:
监控模块41,用于接收任务分发服务器针对目标任务下发的第一实例,运行所述第一实例,并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库,以及从所述分布式信息库中获取第二实例的运行状态信息,所述第二实例的运行状态信息为第二节点服务器接收所述任务分发服务器针对目标任务下发的第二实例,运行所述第二实例后获取到的运行状态信息;所述监控模块所属第一节点服务器,所述第一节点服务器和所述第二节点服务器为所述任务分发服务器针对目标任务下发实例的目标节点服务器,所述第一实例和所述第二实例构成所述目标任务;
存储模块42,用于将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中;
发送模块43,用于接收到用户设备发来的监控请求信息后,将各个目标任务的树状存储结构发送给所述用户设备。
由于本发明实施例所述装置与上述实施例所述方法的原理相同,对于更加详细的解释内容在此不再赘述。
需要说明的是,本发明实施例中可以通过硬件处理器(hardware processor)来实现相关功能模块。
本发明实施例提供的分布式任务的运行状态监控装置,通过各个节点服务器接收任务分发服务器针对目标任务下发的实例,运行实例并将实例的运行状态信息存储及发送给分布式信息库完成数据共享,使各个节点服务器均能够获取各任务的各实例的运行状态信息完成存放,并在接收到用户设备发来的监控请求信息后,将各个目标任务的状态信息发送给用户设备,实现数据易收集、易同步,提高分布式***的易用性。
图7示出了本发明一实施例提供的一种分布式任务的运行状态监控装置,包括监控模块41、存储模块42、处理模块51和发送模块43,其中:
监控模块41,用于接收任务分发服务器针对目标任务下发的第一实例,运行所述第一实例,并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库,以及从所述分布式信息库中获取第二实例的运行状态信息,所述第二实例的运行状态信息为第二节点服务器接收所述任务分发服务器针对目标任务下发的第二实例,运行所述第二实例后获取到的运行状态信息;所述监控模块所属第一节点服务器,所述第一节点服务器和所述第二节点服务器为所述任务分发服务器针对目标任务下发实例的目标节点服务器,所述第一实例和所述第二实例构成所述目标任务;
存储模块42,用于将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中;
处理模块51,用于对第一实例的运行状态信息和第二实例的运行状态信息进行解析,获得各实例ID及对应的任务ID、获取时间,根据各实例ID及对应的任务ID、获取时间对各个目标任务的树状存储结构进行更新、新建;
发送模块43,用于接收到用户设备发来的监控请求信息后,将各个目标任务的树状存储结构发送给所述用户设备。
由于本发明实施例所述装置与上述实施例所述方法的原理相同,对于更加详细的解释内容在此不再赘述。
需要说明的是,本发明实施例中可以通过硬件处理器(hardware processor)来实现相关功能模块。
本发明实施例提供的分布式任务的运行状态监控装置,通过各个节点服务器接收任务分发服务器针对目标任务下发的实例,运行实例并将实例的运行状态信息存储及发送给分布式信息库完成数据共享,使各个节点服务器均能够获取各任务的各实例的运行状态信息完成树状存储结构的建立、更新,并在接收到用户设备发来的监控请求信息后,将各个目标任务的状态信息发送给用户设备,实现数据易收集、易同步,提高分布式***的易用性。
图8示出了本发明一实施例提供的一种分布式任务的运行状态监控装置,包括监控模块41、存储模块42、处理模块51、删除模块61和第三发送模块43,其中:
监控模块41,用于接收任务分发服务器针对目标任务下发的第一实例,运行所述第一实例,并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库,以及从所述分布式信息库中获取第二实例的运行状态信息,所述第二实例的运行状态信息为第二节点服务器接收所述任务分发服务器针对目标任务下发的第二实例,运行所述第二实例后获取到的运行状态信息;所述监控模块所属第一节点服务器,所述第一节点服务器和所述第二节点服务器为所述任务分发服务器针对目标任务下发实例的目标节点服务器,所述第一实例和所述第二实例构成所述目标任务;
存储模块42,用于将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中;
处理模块51,用于对第一实例的运行状态信息和第二实例的运行状态信息进行解析,获得各实例ID及对应的任务ID、获取时间,根据各实例ID及对应的任务ID、获取时间对各个目标任务的树状存储结构进行更新、新建;
删除模块61,用于获取各个目标任务的树状存储结构的最后更新时间,计算所述最后更新时间与当前时间的差值,当差值超出预设阈值,则将对应的目标任务的树状存储结构数据删除;
发送模块43,用于接收到用户设备发来的监控请求信息后,将各个目标任务的树状存储结构发送给所述用户设备。
由于本发明实施例所述装置与上述实施例所述方法的原理相同,对于更加详细的解释内容在此不再赘述。
需要说明的是,本发明实施例中可以通过硬件处理器(hardware processor)来实现相关功能模块。
本发明实施例提供的分布式任务的运行状态监控装置,通过各个节点服务器接收任务分发服务器针对目标任务下发的实例,运行实例并将实例的运行状态信息存储及发送给分布式信息库完成数据共享,使各个节点服务器均能够获取各任务的各实例的运行状态信息完成树状存储结构的建立、更新及删除,并在接收到用户设备发来的监控请求信息后,将各个目标任务的状态信息发送给用户设备,实现数据易收集、易同步,提高分布式***的易用性。
图9示例了一种服务器的实体结构示意图,如图9所示,该服务器可以包括:处理器(processor)710、通信接口(Communications Interface)720、存储器(memory)730和通信总线740,其中,处理器710,通信接口720,存储器730通过通信总线740完成相互间的通信。处理器710可以调用存储器730中的逻辑指令,以执行如下方法:接收任务分发服务器针对目标任务下发的第一实例,运行所述第一实例,并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库,以及从所述分布式信息库中获取第二实例的运行状态信息,所述第二实例的运行状态信息为第二节点服务器接收所述任务分发服务器针对目标任务下发的第二实例,运行所述第二实例后获取到的运行状态信息,第一节点服务器和所述第二节点服务器为所述任务分发服务器针对目标任务下发实例的目标节点服务器,所述第一实例和所述第二实例构成所述目标任务;将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中;接收到用户设备发来的监控请求信息后,将各个目标任务的树状存储结构发送给所述用户设备。
此外,上述的存储器730中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (6)

1.一种分布式任务的运行状态监控方法,其特征在于,包括:
第一节点服务器接收任务分发服务器针对目标任务下发的第一实例,运行所述第一实例,并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库,以及从所述分布式信息库中获取第二实例的运行状态信息,所述第二实例的运行状态信息为第二节点服务器接收所述任务分发服务器针对目标任务下发的第二实例,运行所述第二实例后获取到的运行状态信息,所述第一节点服务器和所述第二节点服务器为所述任务分发服务器针对目标任务下发实例的目标节点服务器,所述第一实例和所述第二实例构成所述目标任务;
所述第一节点服务器将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中;
所述第一节点服务器接收到用户设备发来的监控请求信息后,将各个目标任务的树状存储结构发送给所述用户设备;每个节点服务器均能完成所述分布式任务的运行状态监控工作;还包括:
所述第一节点服务器对第一实例的运行状态信息和第二实例的运行状态信息进行解析,获得各实例ID及对应的任务ID、获取时间;
根据各实例ID及对应的任务ID、获取时间对各个目标任务的树状存储结构进行更新、新建;所述根据各实例ID及对应的任务ID、获取时间对各个目标任务的树状存储结构进行更新、新建,包括:
若确定所述树状存储结构内不存在解析出的任务ID,则根据所述任务ID建立新的目标任务的树状存储结构;
若确定所述树状存储结构内存在解析出的任务ID,且不存在解析出的实例ID,则在对应于所述任务ID的树状存储结构中建立对应于所述实例ID的新实例的运行状态信息;
若确定所述树状存储结构内存在解析出的任务ID,且存在解析出的实例ID,则更新对应于所述任务ID的树状存储结构中对应于所述实例ID的实例的运行状态信息。
2.根据权利要求1所述的方法,其特征在于,还包括:
获取各个目标任务的树状存储结构的最后更新时间;
计算所述最后更新时间与当前时间的差值,当差值超出预设阈值,则将对应的目标任务的树状存储结构数据删除。
3.一种分布式任务的运行状态监控装置,其特征在于,包括:
监控模块,用于接收任务分发服务器针对目标任务下发的第一实例,运行所述第一实例,并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库,以及从所述分布式信息库中获取第二实例的运行状态信息,所述第二实例的运行状态信息为第二节点服务器接收所述任务分发服务器针对目标任务下发的第二实例,运行所述第二实例后获取到的运行状态信息;所述监控模块所属第一节点服务器,所述第一节点服务器和所述第二节点服务器为所述任务分发服务器针对目标任务下发实例的目标节点服务器,所述第一实例和所述第二实例构成所述目标任务;
存储模块,用于将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中;
发送模块,用于接收到用户设备发来的监控请求信息后,将各个目标任务的树状存储结构发送给所述用户设备;每个节点服务器均能完成所述分布式任务的运行状态监控工作;还包括处理模块,用于:
对第一实例的运行状态信息和第二实例的运行状态信息进行解析,获得各实例ID及对应的任务ID、获取时间;
根据各实例ID及对应的任务ID、获取时间对各个目标任务的树状存储结构进行更新、新建;所述处理模块具体用于:
若确定所述树状存储结构内不存在解析出的任务ID,则根据所述任务ID建立新的目标任务的树状存储结构;
若确定所述树状存储结构内存在解析出的任务ID,且不存在解析出的实例ID,则在对应于所述任务ID的树状存储结构中建立对应于所述实例ID的新实例的运行状态信息;
若确定所述树状存储结构内存在解析出的任务ID,且存在解析出的实例ID,则更新对应于所述任务ID的树状存储结构中对应于所述实例ID的实例的运行状态信息。
4.根据权利要求3所述的装置,其特征在于,还包括删除模块,用于:
获取各个目标任务的树状存储结构的最后更新时间;
计算所述最后更新时间与当前时间的差值,当差值超出预设阈值,则将对应的目标任务的树状存储结构数据删除。
5.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1至2任一项所述分布式任务的运行状态监控方法的步骤。
6.一种非暂态计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现如权利要求1至2任一项所述分布式任务的运行状态监控方法的步骤。
CN201910252105.9A 2019-03-29 2019-03-29 分布式任务的运行状态监控方法及装置 Active CN110083504B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910252105.9A CN110083504B (zh) 2019-03-29 2019-03-29 分布式任务的运行状态监控方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910252105.9A CN110083504B (zh) 2019-03-29 2019-03-29 分布式任务的运行状态监控方法及装置

Publications (2)

Publication Number Publication Date
CN110083504A CN110083504A (zh) 2019-08-02
CN110083504B true CN110083504B (zh) 2024-04-26

Family

ID=67413960

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910252105.9A Active CN110083504B (zh) 2019-03-29 2019-03-29 分布式任务的运行状态监控方法及装置

Country Status (1)

Country Link
CN (1) CN110083504B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110751384A (zh) * 2019-09-30 2020-02-04 口碑(上海)信息技术有限公司 业务监控方法和装置
CN111245909B (zh) * 2019-12-31 2023-04-07 深圳云天励飞技术有限公司 分布式动态调度方法、装置、电子设备及存储介质
CN113806176B (zh) * 2021-09-22 2024-06-11 中国建设银行股份有限公司 一种基于配置管理的数据对象识别方法和装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102984012A (zh) * 2012-12-10 2013-03-20 青岛海信传媒网络技术有限公司 管理服务资源的方法及服务资源管理***
CN103634394A (zh) * 2013-11-28 2014-03-12 中国科学院信息工程研究所 一种面向数据流处理的弹性可扩展资源管理方法及***
CN105022833A (zh) * 2015-08-10 2015-11-04 浪潮(北京)电子信息产业有限公司 一种数据处理的方法、节点及监控***

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101002445A (zh) * 2004-06-30 2007-07-18 建利尔电子公司 分布式ip结构电信***中的电话协议服务器和电话协议客户端
CN101715001A (zh) * 2009-10-21 2010-05-26 南京邮电大学 一种控制网格任务执行的方法
CN101883098B (zh) * 2010-06-18 2012-12-05 大连海事大学 Rfid设备网络环境下分布式复杂事件检测的***及方法
CN102346460B (zh) * 2011-05-27 2013-11-13 运软网络科技(上海)有限公司 一种基于事务的服务控制***及其控制方法
US9251481B2 (en) * 2011-06-13 2016-02-02 Accenture Global Services Limited Distributed metering and monitoring system
CN102739775B (zh) * 2012-05-29 2017-11-07 宁波东冠科技有限公司 物联网数据采集服务器集群的监控和管理方法
CN103118130A (zh) * 2013-02-25 2013-05-22 汉柏科技有限公司 一种用于分布式服务的集群管理方法和***
CN104683480A (zh) * 2015-03-19 2015-06-03 成都艺辰德迅科技有限公司 一种基于应用的分布式计算方法
CN108984544B (zh) * 2017-05-31 2021-04-30 北京京东尚科信息技术有限公司 一种分布式***修改配置信息的方法和装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102984012A (zh) * 2012-12-10 2013-03-20 青岛海信传媒网络技术有限公司 管理服务资源的方法及服务资源管理***
CN103634394A (zh) * 2013-11-28 2014-03-12 中国科学院信息工程研究所 一种面向数据流处理的弹性可扩展资源管理方法及***
CN105022833A (zh) * 2015-08-10 2015-11-04 浪潮(北京)电子信息产业有限公司 一种数据处理的方法、节点及监控***

Also Published As

Publication number Publication date
CN110083504A (zh) 2019-08-02

Similar Documents

Publication Publication Date Title
CN110083504B (zh) 分布式任务的运行状态监控方法及装置
CN112073265B (zh) 一种基于分布式边缘计算的物联网监控方法和***
CN105407117B (zh) 分布式备份数据的方法、装置和***
CN102202087B (zh) 一种标识存储设备的方法及***
US8898677B2 (en) Data arrangement calculating system, data arrangement calculating method, master unit and data arranging method
CN105099761A (zh) 一种集中管理客户端的配置信息的方法和***
CN107832169B (zh) 内存数据迁移方法、装置、终端设备和存储介质
CN106021370A (zh) 内存数据库实例的管理方法及装置
CN104750738B (zh) 一种更新数据信息的方法、数据节点、管理节点及***
CN104301990B (zh) 一种数据同步的方法及装置
CN102946410A (zh) 网络同步方法和装置
CN110502572A (zh) 一种数据同步的方法及服务器
CN109361625A (zh) 核查转发表项的方法、装置和控制器
KR102039419B1 (ko) 프로세스 실행 로그 기반 업무 네트워크의 점진적 데이터 마이닝 시스템 및 방법
CN107741994A (zh) 一种数据更新方法及装置
CN107547622B (zh) 一种资源调整方法及装置
CN112463305A (zh) 一种云端虚拟化gpu的管理方法、***及相关装置
CN106792825A (zh) 一种分布式网络设备的管理方法
US10860580B2 (en) Information processing device, method, and medium
CN108156201B (zh) 统一管理应用***配置数据的方法和装置
CN105721531B (zh) 一种消息同步方法及装置
CN105791350B (zh) 项目数据处理方法和***
CN112150102A (zh) 结合rpa和ai的智能电网信息***台帐更新方法和装置
CN104735097A (zh) 信息的收集方法和***
CN109240608B (zh) 一种配置信息同步方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Country or region after: China

Address after: Room 332, 3 / F, Building 102, 28 xinjiekouwei street, Xicheng District, Beijing 100088

Applicant after: Qianxin Technology Group Co.,Ltd.

Address before: 100015 15, 17 floor 1701-26, 3 building, 10 Jiuxianqiao Road, Chaoyang District, Beijing.

Applicant before: BEIJING QIANXIN TECHNOLOGY Co.,Ltd.

Country or region before: China

GR01 Patent grant
GR01 Patent grant