CN115629903A - 任务延迟监控方法、装置、设备及存储介质 - Google Patents

Abstract

本发明实施例公开了一种任务延迟监控方法、装置、设备及存储介质。该方法通过在确定当前监控任务的执行开始时间延迟的情况下，确定与当前监控任务对应的各上游执行任务，以进一步从各上游执行任务中确定造成当前监控任务延迟的上游延迟任务，进而根据各上游执行任务的当前执行信息和平均执行信息，确定各上游执行任务的当前延迟偏差，通过各当前延迟偏差确定造成当前监控任务延迟的上游延迟任务，实现了造成当前监控任务延迟执行的上游任务的确定，进而实现了任务延迟原因的确定，该方法可以在任务延迟执行时立即确定出任务延迟原因，解决了无法实时确定任务延迟原因的技术问题，并且，无需人为后续查找延迟原因，提高了任务延迟原因的确定效率。

Description

任务延迟监控方法、装置、设备及存储介质

技术领域

本发明涉及云计算技术领域，尤其涉及一种任务延迟监控方法、装置、设备及存储介质。

背景技术

在现有的大数据调度任务中，对调度任务的监控也是有多方面、多维度、多指标的监控，其中有一项就是任务执行延迟监控，即监控调度任务是否在预定的时间开始执行以及是否在预定的时间执行完成，当任务执行延迟后，会通过短信或者邮件等方式通知任务负责人。

在实现本发明的过程中，发明人发现现有技术中至少存在以下技术问题：无法在任务延迟时实时确定出任务延迟的原因，确定任务延迟原因的实时性差。

发明内容

本发明实施例提供了一种任务延迟监控方法、装置、设备及存储介质，以解决无法实时确定任务延迟原因的技术问题。

根据本发明实施例的一方面，提供了一种任务延迟监控方法，包括：

在确定当前监控任务的执行开始时间延迟的情况下，确定与所述当前监控任务对应的各上游执行任务；

确定各所述上游执行任务分别对应的当前执行信息和平均执行信息，所述当前执行信息包括当前开始时间和当前结束时间，所述平均执行信息包括平均开始时间和平均结束时间；

根据各所述当前执行信息和各所述平均执行信息，确定各所述上游执行任务分别对应的当前延迟偏差，基于各所述上游执行任务分别对应的当前延迟偏差，从各所述上游执行任务中确定造成所述当前监控任务延迟的上游延迟任务。

根据本发明实施例的另一方面，提供了一种任务延迟监控装置，包括：

上游任务确定模块，用于在确定当前监控任务的执行开始时间延迟的情况下，确定与所述当前监控任务对应的各上游执行任务；

执行信息确定模块，用于确定各所述上游执行任务分别对应的当前执行信息和平均执行信息，所述当前执行信息包括当前开始时间和当前结束时间，所述平均执行信息包括平均开始时间和平均结束时间；

延迟任务确定模块，用于根据各所述当前执行信息和各所述平均执行信息，确定各所述上游执行任务分别对应的当前延迟偏差，基于各所述上游执行任务分别对应的当前延迟偏差，从各所述上游执行任务中确定造成所述当前监控任务延迟的上游延迟任务。

根据本发明实施例的另一方面，提供了一种电子设备，所述电子设备包括：

至少一个处理器；以及

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的计算机程序，所述计算机程序被所述至少一个处理器执行，以使所述至少一个处理器能够执行本发明任一实施例所述的任务延迟监控方法。

根据本发明实施例的另一方面，提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使处理器执行时实现本发明任一实施例所述的任务延迟监控方法。

本发明实施例的技术方案，通过在确定当前监控任务的执行开始时间延迟的情况下，确定与当前监控任务对应的各上游执行任务，以进一步从各上游执行任务中确定造成当前监控任务延迟的上游延迟任务，进而根据各上游执行任务的当前执行信息和平均执行信息，确定各上游执行任务的当前延迟偏差，通过各当前延迟偏差确定造成当前监控任务延迟的上游延迟任务，实现了造成当前监控任务延迟执行的上游任务的确定，进而实现了任务延迟原因的确定，该方法可以在任务延迟执行时立即确定出任务延迟原因，解决了无法实时确定任务延迟原因的技术问题，并且，无需人为后续查找延迟原因，提高了任务延迟原因的确定效率。

应当理解，本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征，也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明一个实施例提供的一种任务延迟监控方法的流程示意图；

图2为本发明一个实施例提供的另一种任务延迟监控方法的流程示意图；

图3为本发明一个实施例提供的另一种任务延迟监控方法的流程示意图；

图4A为本发明一个实施例提供的一种任务延迟监控装置的结构示意图；

图4B为本发明一个实施例提供的另一种任务延迟监控装置的结构示意图

图5为本发明一个实施例提供的一种电子设备的结构示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、***、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

图1为本发明一个实施例提供的一种任务延迟监控方法的流程示意图，本实施例可适用于监控各任务是否延迟执行，并确定任务延迟执行的原因，该方法可以由任务延迟监控装置来执行，该任务延迟监控装置可以采用硬件和/或软件的形式实现，该任务延迟监控装置可配置于计算机、智能手机或智能平板等电子设备中。如图1所示，该方法包括：

S110、在确定当前监控任务的执行开始时间延迟的情况下，确定与当前监控任务对应的各上游执行任务。

其中，当前监控任务可以是当前需要监控是否存在延迟的任务。具体的，当前监控任务可以是执行后产生其它业务***所需的业务数据的任务。

示例性的，可以将所有任务的标识信息、任务优先级以及是否为监控任务的标志位等信息存储至任务信息表，根据任务信息表中各任务的是否为监控任务的标志位，确定监控任务。或者，还可以各将监控任务对应的预设开始时间存储至任务信息表，检测任务信息表中全部任务中存在预设开始时间的任务，将存在预设开始时间的任务确定为监控任务。

具体的，针对当前监控任务，需要判断当前监控任务的执行开始时间是否延迟，即当前监控任务是否延迟执行。例如，可以在到达当前监控任务对应的预设开始时间时，检测当前监控任务是否开始执行，若是，则确定当前监控任务的执行开始时间未延迟，若否，则确定当前监控任务的执行开始时间延迟。或者，还可以在检测到当前监控任务开始执行时，获取当前监控任务对应的实际开始时间，基于实际开始时间和预设开始时间判断当前监控任务的执行开始时间是否延迟。

在一种具体的实施方式中，可以通过设置多个定时任务，以通过定时任务发起对各监控任务的延迟监控。如，本实施例提供的方法还包括：根据任务信息表确定当前监控任务对应的预设开始时间，其中，任务信息表包括各监控任务对应的预设开始时间；在到达预设开始时间时启动预设定时监控任务，通过预设定时监控任务检测当前监控任务是否开始执行，若否，则确定当前监控任务的执行开始时间延迟。

其中，预设开始时间可以是预先设置的当前监控任务开始执行的时间，即设定开始时刻。具体的，预设开始时间可以是人为设置的；也可以是根据当前监控任务的历史执行记录确定的，即根据历史时间段(如一个月)内监控任务的历史开始时间确定的。

即，可以根据任务信息表确定出各个监控任务对应的预设开始时间，并将各个预设开始时间分别设置为预设定时监控任务的各个启动时刻，以通过在各个预设开始时间分别启动预设定时监控任务，确定各监控任务的是否开始执行，进而确定各监控任务的执行开始时间是否延迟。

在上述实施方式中，通过在预设开始时间启动预设定时监控任务，以通过预设定时监控任务检测当前监控任务是否开始执行，实现了在当前监控任务的设定开始时刻，自动发起对当前监控任务是否延迟执行的判断，进而实现了在确定出任务延迟执行的初始时刻，立即判断延迟原因，便于用户及时解决延迟问题，降低了任务延迟对其它业务***的影响。

进一步的，在确定出当前监控任务的执行开始时间延迟的情况下，需要确定与当前监控任务对应的各个上游执行任务。其中，上游执行任务可以是与当前监控任务具备任务依赖关系，且在当前监控任务执行开始之前所执行的任务。

具体的，可以预先针对每一个任务，将当前任务以及与当前任务对应的依赖任务关联存储至任务依赖信息表；进而通过任务依赖信息表，查找与当前监控任务对应的依赖任务，将全部依赖任务中的上游任务确定为当前监控任务对应的各个上游执行任务。

示例性的，任务依赖信息表可以通过以下方式存储各任务对应的依赖任务：任务C：任务A、任务E、任务F、任务G、任务K，任务D：任务B、任务E、任务H、任务I；其中，任务依赖信息表存储的可以是各任务的标识信息。

需要说明的是，本实施例在确定出当前监控任务的执行开始时间延迟的情况下，确定与当前监控任务对应的各上游执行任务的原因在于：若当前监控任务的执行开始时间延迟，则表明是由于上游任务的延迟造成了当前监控任务延迟执行，因此，可以确定出当前监控任务的各个上游执行任务，以从各上游执行任务中确定造成当前监控任务延迟执行的上游延迟任务。

S120、确定各上游执行任务分别对应的当前执行信息和平均执行信息，当前执行信息包括当前开始时间和当前结束时间，平均执行信息包括平均开始时间和平均结束时间。

其中，当前执行信息可以是上游执行任务前一次执行的信息，包括当前开始时间和当前结束时间，即实际开始执行的时间和实际结束执行的时间。平均执行信息可以是上游执行任务在历史时间段内执行的平均信息，包括平均开始时间和平均结束时间。

在本实施例中，可以将各个任务的执行信息记录在任务执行记录表中，进而从任务执行记录表中，可以读取各个上游执行任务的当前执行信息。并且，还可以从任务执行记录表中读取各个上游执行任务的历史执行信息，根据历史执行信息确定平均执行信息。

示例性的，确定各上游执行任务分别对应的当前执行信息和平均执行信息，可以是：基于任务执行记录表获取各上游执行任务分别对应的历史执行信息和当前执行信息，其中，任务执行记录表包括各任务对应的历史执行信息和当前执行信息，历史执行信息包括各任务对应的历史开始时间和历史结束时间；基于各上游执行任务对应的历史执行信息，分别确定各上游执行任务对应的平均执行信息。

其中，历史执行信息可以是历史时间段内任务的执行信息，如一个月内、一周内的执行信息。每一个任务的历史执行信息均包括任务的历史开始时间和历史结束时间，进而根据历史开始时间可以确定平均开始时间，根据历史结束时间可以确定平均结束时间。

通过该方式，实现了各上游执行任务的平均执行信息和当前执行信息的准确获取；并且，通过历史执行信息确定平均执行信息，实现了任务的开始时间和结束时间的合理确定，无需人为指定任务的开始时间和结束时间，避免了由于人为指定时间不合理所造成的延迟原因确定有误的情形。

当然，除了根据任务执行记录表确定当前执行信息和平均执行信息的方式之外，还可以预先计算出各个任务的平均执行信息，将各个任务的平均执行信息存储至任务信息表中，从任务信息表中查询各个上游执行任务的平均执行信息。

具体的，根据历史执行信息确定平均执行信息的过程，可以采用求平均的方法、聚类的方法或K近邻的方法。

示例性的，基于各上游执行任务对应的历史执行信息，分别确定各上游执行任务对应的平均执行信息，包括：针对各上游执行任务，根据当前上游执行任务对应的各历史开始时间计算历史平均开始时间，根据当前上游执行任务对应的各历史结束时间计算历史平均结束时间，将历史平均开始时间和历史平均结束时间确定为当前上游执行任务对应的平均执行信息；或者，针对各上游执行任务，对当前上游执行任务对应的各历史开始时间进行聚类，基于聚类结果中的核心点确定当前上游执行任务对应的平均开始时间，对当前上游执行任务对应的各历史结束时间进行聚类，基于聚类结果中的核心点确定当前上游执行任务对应的平均结束时间。

即，可以根据各历史开始时间计算出历史平均开始时间，并根据历史结束时间计算出历史平均结束时间，将其作为平均执行信息。或者，还可以针对每一个上游执行任务，对上游执行任务的各历史开始时间进行聚类，将聚类后的核心点确定为平均开始时间，并对各历史结束时间进行聚类，将聚类后的核心点确定为平均结束时间。

通过求平均或聚类等统计分析的方法，实现了各上游执行任务的平均执行时间的准确确定，提高了各上游执行任务的平均开始时间和平均结束时间的合理性，避免了由于人为指定时间不合理所造成的延迟原因确定有误的情形。并且，即使上游执行任务没有配置延迟监控，也可以统计出上游执行任务是否有延迟，从而在当前监控任务延迟时可以明确造成其延迟的上游执行任务，进而可以快速定位出当前监控任务的延迟原因，提高问题排查效率。

S130、根据各当前执行信息和各平均执行信息，确定各上游执行任务分别对应的当前延迟偏差，基于各上游执行任务分别对应的当前延迟偏差，从各上游执行任务中确定造成当前监控任务延迟的上游延迟任务。

其中，当前延迟偏差可以是上游执行任务上一次执行的延迟时长。具体的，可以根据当前执行信息中的当前开始时间和当前结束时间计算当前执行时长，并根据平均执行信息的平均开始时间和平均结束时间计算平均执行时长，进而根据当前执行时长和平均执行时长，计算上游执行任务的当前延迟偏差。

具体的，在计算出各个上游执行任务的当前延迟偏差后，可以根据各当前延迟偏差，在各上游执行任务中筛选出造成当前监控任务延迟执行的上游执行任务，即上游延迟任务，以确定出当前监控任务的延迟原因。

示例性的，可以将当前延迟偏差最大的上游执行任务，确定为上游延迟任务。或者，还可以根据各个上游执行任务分别对应的当前延迟偏差的大小，按照从大到小的顺序对各上游执行任务进行排序，基于排序的结果确定至少一个上游延迟任务。

需要说明的是，本实施例不仅可以监控任务的执行开始时间是否延迟，并确定造成任务延迟执行的上游任务，还可以监控任务的执行结束时间是否延迟。示例性的，本实施例提供的方法还可以包括：在确定当前监控任务的执行开始时间未延迟，且当前监控任务的执行结束时间延迟的情况下，将当前监控任务确定为监控延迟任务。

即，若当前监控任务的执行开始时间未延迟，且，当前监控任务的执行结束时间延迟时，则表明与当前监控任务对应的各上游执行任务未延迟，并且，该当前监控任务自身存在延迟，此时，可以将该当前监控任务确定为监控延迟任务。

具体的，可以在确定出当前监控任务延迟执行的初始时刻，确定出造成当前监控任务延迟执行的上游任务，并在确定出当前监控任务是否延迟执行后，再确定当前监控任务是否延迟结束，实现了对任务的开始执行和结束执行的延迟监控，在开始执行未延迟且执行结束延迟的情况下，确定出任务延迟完成的原因在于该任务本身，便于用户进行问题排查。

在上述过程中，可以通过如下方式，确定当前监控任务的执行结束时间是否延迟：

根据任务信息表确定当前监控任务对应的预设结束时间，其中，任务信息表包括各监控任务对应的预设结束时间；在到达预设结束时间时启动预设定时监控任务，通过预设定时监控任务检测当前监控任务是否完成执行，若否，则确定当前监控任务的执行结束时间延迟。

其中，预设结束时间可以是预先设置的当前监控任务执行的结束时间。预设结束时间可以是人为设置的，也可以是根据当前监控任务的历史执行记录确定的，即根据历史时间段(如一个月、三个月)内监控任务的历史结束时间确定的。

即，可以根据任务信息表，确定出各个监控任务对应的预设结束时间，并将各个预设结束时间分别设置为预设定时监控任务的各个启动时刻，以通过在各个预设结束时间分别启动预设定时监控任务，确定各监控任务是否结束执行，进而确定各监控任务的执行结束时间是否延迟。

通过该方式，实现了在当前监控任务的设定结束时刻，发起对当前监控任务是否延迟执行的判断，进而实现了在确定出任务延迟结束的初始时刻，立即判断延迟原因，便于用户及时解决延迟问题。

本实施例的技术方案，通过在确定当前监控任务的执行开始时间延迟的情况下，确定与当前监控任务对应的各上游执行任务，以进一步从各上游执行任务中确定造成当前监控任务延迟的上游延迟任务，进而根据各上游执行任务的当前执行信息和平均执行信息，确定各上游执行任务的当前延迟偏差，通过各当前延迟偏差确定造成当前监控任务延迟的上游延迟任务，实现了造成当前监控任务延迟执行的上游任务的确定，进而实现了任务延迟原因的确定，该方法可以在任务延迟执行时立即确定出任务延迟原因，解决了无法实时确定任务延迟原因的技术问题，并且，该方法无需人为后续查找延迟原因，减少查找任务延迟原因的时间，提高了任务延迟原因的确定效率。

图2为本发明一个实施例提供的另一种任务延迟监控方法的流程示意图，本实施例在上述实施例的基础上，对根据各上游执行任务的当前延迟偏差确定上游延迟任务的过程进行了补充说明。如图2所示，该方法包括：

S210、在确定当前监控任务的执行开始时间延迟的情况下，确定与当前监控任务对应的各上游执行任务。

S220、确定各上游执行任务分别对应的当前执行信息和平均执行信息，当前执行信息包括当前开始时间和当前结束时间，平均执行信息包括平均开始时间和平均结束时间。

S230、根据各当前执行信息和各平均执行信息，确定各上游执行任务分别对应的当前延迟偏差。

S240、基于预设偏差阈值以及各上游执行任务分别对应的当前延迟偏差，从各上游执行任务中确定出至少一个待筛选延迟任务，根据各待筛选延迟任务分别对应的当前延迟偏差，从各待筛选延迟任务中确定至少一个上游延迟任务。

其中，预设偏差阈值可以是预先设置的偏差允许最大值。具体的，可以将各上游执行任务分别对应的当前延迟偏差，与预设偏差阈值进行比对，若上游执行任务对应的当前延迟偏差大于预设偏差阈值，则可以将该上游执行任务确定为待筛选延迟任务。

进一步的，根据各个待筛选延迟任务对应的当前延迟偏差，确定出至少一个上游延迟任务。示例性的，可以将全部待筛选延迟任务作为上游延迟任务；或者，可以将根据各待筛选延迟任务对应的当前延迟偏差的大小，按照从大到校的顺序对各待筛选延迟任务进行排序，基于排序的结果确定至少一个上游延迟任务。如，将排序结果中的前n个待筛选延迟任务确定为上游延迟任务。

在一种实施方式中，若确定出的上游延迟任务的数量为多个，可以按照各上游延迟任务的当前延迟偏差，对各上游延迟任务进行排序；还可以按照各上游延迟任务的执行先后顺序，即依赖关系，对各上游延迟任务进行排序。

如，可以针对每一个上游延迟任务，根据任务依赖信息表确定当前上游延迟任务对应的依赖任务，在依赖任务中查询是否存在其他上游延迟任务，若存在，则可以将其他上游延迟任务确定为当前上游延迟任务的关联延迟任务，并根据依赖关系对当前上游延迟任务和关联延迟任务进行排序。

在本实施例中，在确定出造成当前监控任务延迟的上游延迟任务后，还可以生成报警信息发送至用户的终端设备。

示例性的，本实施例提供的方法还包括：根据任务信息表获取当前监控任务的第一任务标识以及各上游延迟任务的第二任务标识，基于第一任务标识和各第二任务标识生成报警信息；基于任务信息表获取当前监控任务对应的关联用户标识，将报警信息发送至与关联用户标识对应的用户终端，其中，任务信息表包括各任务的任务标识以及各监控任务对应的关联用户标识。

其中，第一任务标识可以是当前监控任务对应的任务标识，第二任务标识可以是上游延迟任务对应的任务标识。当前监控任务对应的关联用户标识可以是负责处理当前监控任务的用户标识。

具体的，可以从任务信息表中查询当前监控任务对应的关联用户标识，并从任务信息表中查询当前监控任务的第一任务标识，和各上游延迟任务的第二任务标识，进而将根据第一任务标识和各第二任务标识生成的报警信息，发送至关联用户标识对应的用户终端。其中，可以是以邮件、短信、电话、微信或应用程序提示消息等方式发送报警信息。

通过该方式，实现了对延迟执行的监控任务的报警，快速定位出延迟执行的监控任务，并通过将上游延迟任务一并发送至用户，无需用户人为查找任务延迟原因，提高了排查任务延迟问题的效率。并且，还可以在确定出任务延迟执行的初始时刻，立即发送延迟执行的监控任务以及该任务延迟执行的原因，便于用户及时处理，提高了延迟监控报警的实用性。

在本实施例中，除发送包含执行延迟任务的任务标识以及造成任务延迟的上游延迟任务的任务标识之外，还可以发送当前监控任务的预计开始时间和预计结束时间。

示例性的，基于第一任务标识和各第二任务标识生成报警信息，包括：基于各上游延迟任务分别对应的当前延迟偏差，确定当前监控任务的预计开始时间和预计结束时间；根据第一任务标识、各第二任务标识、预计开始时间和预计结束时间，生成报警信息。

具体的，可以根据当前监控任务的预设开始时间、各上游延迟任务对应的当前延迟偏差，计算当前监控任务的预计开始时间。如，预设开始时间为8：00，各上游延迟任务分别对应的当前延迟偏差为5分钟、20分钟和15分钟，则预计开始时间为8:40。

还可以根据当前监控任务的预设完成时间、各上游延迟任务对应的当前延迟偏差，计算当前监控任务的预计完成时间；或者，根据当前监控任务的预设开始时间和预设完成时间确定预设执行时长，基于预计开始时间和预设执行时长确定预计结束时间。

进一步的，在确定出预计开始时间和预计结束时间后，生成携带有第一任务标识、各第二任务标识、预计开始时间和预计结束时间的报警信息，发送至关联用户标识对应的用户终端。当然，还可以将各上游延迟任务对应的当前延迟偏差发送至关联用户标识对应的用户终端。

通过各上游延迟任务分别对应的当前延迟偏差，计算当前监控任务的预计开始时间和预计结束时间，并生成包含有当前监控任务的预计开始时间和预计结束时间的报警信息，实现了在当前监控任务延迟执行时，及时通知用户是哪些上游任务延迟造成的，以及，当前监控任务被延迟了多久，预计在什么时间可以开始执行，在什么时间可以完成执行，进一步的提高了延迟监控报警的实用性。

本实施例的技术方案，通过预设偏差阈值以及各上游执行任务的当前延迟偏差，在各上游执行任务中确定至少一个待筛选延迟任务，以实现初步从上游执行任务中选出延迟的上游执行任务，进而根据待筛选延迟任务的当前延迟偏差，确定出至少一个上游延迟任务，以实现造成当前监控任务延迟的上游延迟任务的确定，通过预设偏差阈值对各上游执行任务进行过滤，可以避免将延迟误差允许范围内的上游执行任务确定为延迟原因，提高了延迟原因的准确度，便于用户快速排查所过滤出的上游延迟任务。

图3为本发明一个实施例提供的另一种任务延迟监控方法的流程示意图，本实施例在上述实施例的基础上，在从各上游执行任务中确定出造成当前监控任务延迟的上游延迟任务之后，对当前监控任务的执行结束时间延迟的情况进行了补充说明。如图3所示，该方法包括：

S310、在确定当前监控任务的执行开始时间延迟的情况下，确定与当前监控任务对应的各上游执行任务。

S320、确定各上游执行任务分别对应的当前执行信息和平均执行信息，当前执行信息包括当前开始时间和当前结束时间，平均执行信息包括平均开始时间和平均结束时间。

S330、根据各当前执行信息和各平均执行信息，确定各上游执行任务分别对应的当前延迟偏差，基于各上游执行任务分别对应的当前延迟偏差，从各上游执行任务中确定造成当前监控任务延迟的上游延迟任务。

S340、在确定当前监控任务的执行结束时间延迟的情况下，确定当前监控任务对应的当前执行信息。

具体的，若当前监控任务的执行开始时间延迟，且，执行结束时间也延迟，则可以进一步判断当前监控任务的执行过程是否存在延迟。因此，可以获取当前监控任务对应的当前执行信息，其中，当前执行信息包括当前开始时间和当前结束时间。

S350、基于当前监控任务对应的当前执行信息，确定当前监控任务对应的实际执行时长。

具体的，在得到当前监控任务对应的当前开始时间和当前结束时间后，可以根据当前开始时间和当前结束时间确定实际执行时长。

S360、获取当前监控任务对应的预设执行时长，若预设执行时长与实际执行时长之间的差值超过预设阈值，则将当前监控任务确定为监控延迟任务。

其中，预设执行时长可以从任务信息表中获取，即任务信息表中存储有各监控任务对应的预设执行时长。或者，还可以从任务信息表中获取预设开始时间和预设结束时间，基于预设开始时间和预设结束时间计算预设执行时长。

进一步的，如果预设执行时长和实际执行时长之间的差值超过预设阈值，则可以确定当前监控任务的执行过程存在延迟，将当前监控任务确定为监控延迟任务。其中，预设阈值可以是预先设置的延迟时长最大误差。

示例性的，在将当前监控任务确定为监控延迟任务后，还可以基于监控延迟任务对应的任务标识生成报警信息，将报警信息发送至监控延迟任务对应的关联用户标识的用户终端。

本实施例的技术方案，在确定出造成当前监控任务延迟的上游延迟任务之后，若确定当前监控任务的执行结束时间延迟，则根据当前监控任务对应的当前执行信息，确定当前监控任务对应的实际执行时长，进而若实际执行时长与预设执行时长之间的差值超过预设阈值，则将当前监控任务确定为监控延迟任务，实现了对当前监控任务的执行过程是否延迟的判断，便于用户及时处理监控延迟任务，并且，可以用于判断下游任务的延迟原因，即在当前监控任务的下游任务执行延迟时，可以直接根据监控延迟任务确定造成下游任务延迟的原因。

图4A为本发明一个实施例提供的一种任务延迟监控装置的结构示意图。如图4A所示，该装置包括上游任务确定模块410、执行信息确定模块420以及延迟任务确定模块430。

上游任务确定模块410，用于在确定当前监控任务的执行开始时间延迟的情况下，确定与所述当前监控任务对应的各上游执行任务；

执行信息确定模块420，用于确定各所述上游执行任务分别对应的当前执行信息和平均执行信息，所述当前执行信息包括当前开始时间和当前结束时间，所述平均执行信息包括平均开始时间和平均结束时间；

延迟任务确定模块430，用于根据各所述当前执行信息和各所述平均执行信息，确定各所述上游执行任务分别对应的当前延迟偏差，基于各所述上游执行任务分别对应的当前延迟偏差，从各所述上游执行任务中确定造成所述当前监控任务延迟的上游延迟任务。

本实施例的技术方案，通过上游任务确定模块，在确定当前监控任务的执行开始时间延迟的情况下，确定与当前监控任务对应的各上游执行任务，以进一步从各上游执行任务中确定造成当前监控任务延迟的上游延迟任务，进而通过执行信息确定模块，确定各上游执行任务的当前执行信息和平均执行信息，通过延迟任务确定模块，确定各上游执行任务的当前延迟偏差，根据过各当前延迟偏差确定造成当前监控任务延迟的上游延迟任务，实现了造成当前监控任务延迟执行的上游任务的确定，进而实现了任务延迟原因的确定，该方法可以在任务延迟执行时立即确定出任务延迟原因，解决了无法实时确定任务延迟原因的技术问题，并且，该方法无需人为后续查找延迟原因，提高了任务延迟原因的确定效率。

在上述实施例的基础上，上游任务确定模块410，还用于根据任务信息表确定所述当前监控任务对应的预设开始时间，其中，所述任务信息表包括各监控任务对应的预设开始时间；在到达所述预设开始时间时启动预设定时监控任务，通过所述预设定时监控任务检测所述当前监控任务是否开始执行，若否，则确定所述当前监控任务的执行开始时间延迟。

在上述实施例的基础上，执行信息确定模块420包括信息获取单元和平均信息计算单元；其中，信息获取单元，用于基于任务执行记录表获取各所述上游执行任务分别对应的历史执行信息和当前执行信息，其中，所述任务执行记录表包括各任务对应的历史执行信息和当前执行信息，所述历史执行信息包括各任务对应的历史开始时间和历史结束时间；平均信息计算单元，用于基于各所述上游执行任务对应的所述历史执行信息，分别确定各所述上游执行任务对应的平均执行信息。

在上述实施例的基础上，平均信息计算单元，具体用于：

针对各所述上游执行任务，根据当前上游执行任务对应的各历史开始时间计算历史平均开始时间，根据所述当前上游执行任务对应的各历史结束时间计算历史平均结束时间，将所述历史平均开始时间和所述历史平均结束时间确定为所述当前上游执行任务对应的平均执行信息；或者，针对各所述上游执行任务，对当前上游执行任务对应的各历史开始时间进行聚类，基于聚类结果中的核心点确定所述当前上游执行任务对应的平均开始时间，对所述当前上游执行任务对应的各历史结束时间进行聚类，基于聚类结果中的核心点确定所述当前上游执行任务对应的平均结束时间。

在上述实施例的基础上，延迟任务确定模块430，具体用于：

基于预设偏差阈值以及各所述上游执行任务分别对应的当前延迟偏差，从各所述上游执行任务中确定出至少一个待筛选延迟任务；根据各所述待筛选延迟任务分别对应的当前延迟偏差，从各所述待筛选延迟任务中确定至少一个上游延迟任务。

在上述实施例的基础上，本实施例提供的装置还包括报警模块；报警模块，用于根据任务信息表获取所述当前监控任务的第一任务标识以及各所述上游延迟任务的第二任务标识，基于所述第一任务标识和各所述第二任务标识生成报警信息；基于所述任务信息表获取所述当前监控任务对应的关联用户标识，将所述报警信息发送至与所述关联用户标识对应的用户终端，其中，所述任务信息表包括各任务的任务标识以及各监控任务对应的关联用户标识。

在上述实施例的基础上，报警模块，还用于基于各所述上游延迟任务分别对应的当前延迟偏差，确定所述当前监控任务的预计开始时间和预计结束时间；根据所述第一任务标识、各所述第二任务标识、所述预计开始时间和所述预计结束时间，生成报警信息。

在上述实施例的基础上，本实施例提供的装置还包括结束延迟判断模块，结束延迟判断模块，用于在确定所述当前监控任务的执行开始时间未延迟，且所述当前监控任务的执行结束时间延迟的情况下，将所述当前监控任务确定为监控延迟任务。

在上述实施例的基础上，结束延迟判断模块，还用于根据任务信息表确定所述当前监控任务对应的预设结束时间，其中，所述任务信息表包括各监控任务对应的预设结束时间；在到达所述预设结束时间时启动预设定时监控任务，通过所述预设定时监控任务检测所述当前监控任务是否完成执行，若否，则确定所述当前监控任务的执行结束时间延迟。

在上述实施例的基础上，延迟任务确定模块430，还用于在确定所述当前监控任务的执行结束时间延迟的情况下，确定所述当前监控任务对应的当前执行信息；基于所述当前监控任务对应的当前执行信息，确定所述当前监控任务对应的实际执行时长；获取所述当前监控任务对应的预设执行时长，若所述预设执行时长与所述实际执行时长之间的差值超过预设阈值，则将所述当前监控任务确定为监控延迟任务。

在本实施例中，还提供另一种任务延迟监控装置，如图4B所示，图4B为本发明一个实施例提供的另一种任务延迟监控装置的结构示意图。其中，任务延迟监控装置包括任务模块、监控模块和报警模块。

具体的，任务模块用于将各个任务的任务信息存储至任务信息表，任务信息包括任务标识、关联用户标识、任务优先级等信息，监控任务的任务信息还包括预设开始时间和预设结束时间。任务模块还用于将各个任务以及与各个任务对应的依赖任务存储至任务依赖信息表，并将各个任务的历史执行信息存储至任务执行记录表。

监控模块可以从任务模块的任务信息表中，确定需要监控延迟的各个监控任务，并获取各个监控任务的预设开始时间和预设结束时间，根据各预设开始时间和各预设结束时间设置预设定时监控任务的启动时间，以在到达各预设开始时间和各预设结束时间时，启动预设定时监控任务。

若监控模块在启动预设定时监控任务后，检测出当前监控任务的执行时间延迟，则可以从任务依赖信息表中读取该当前监控任务对应的各上游执行任务，并从任务执行记录表中读取各上游执行任务的当前执行信息和历史执行信息。

进一步的，监控模块基于历史执行信息计算上游执行任务的平均执行信息，根据平均执行信息和当前执行信息确定上游执行任务的当前延迟偏差，将各上游执行任务的当前延迟偏差和平均执行信息存储至延迟统计信息表，并通过延迟统计信息表中各上游执行任务的当前延迟偏差，确定造成当前监控任务延迟的上游延迟任务。

进一步的，监控模块可以调用报警模块，通过调用报警模块发送报警信息，具体的，在报警模块被调用后，报警模块可以从任务模块中的任务信息表中查询当前监控任务对应的关联用户标识，进而将报警信息发送至该关联用户标识对应的用户终端。

通过任务模块、监控模块和报警模块，实现了在大数据调度任务执行时，不仅确定监控任务本身是否延迟执行，还可以确定监控任务的延迟是否为上游任务的延迟所造成的。并且，通过统计分析的方法计算平均执行信息，即使上游任务没有配置延迟监控，也可以统计出上游任务是否存在延迟，从而在监控任务延迟时可以明确提供上游任务延迟情况，快速定位出监控任务延迟的原因，提高排查问题的效率。

本发明实施例所提供的任务延迟监控装置可执行本发明任意实施例所提供的任务延迟监控方法，具备执行方法相应的功能模块和有益效果。

图5为本发明一个实施例提供的一种电子设备的结构示意图。电子设备10旨在表示各种形式的数字计算机，诸如，膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置，诸如，个人数字处理、蜂窝电话、智能电话、可穿戴设备(如头盔、眼镜、手表等)和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例，并且不意在限制本文中描述的和/或者要求的本发明的实现。

如图5所示，电子设备10包括至少一个处理器11，以及与至少一个处理器11通信连接的存储器，如只读存储器(ROM)12、随机访问存储器(RAM)13等，其中，存储器存储有可被至少一个处理器执行的计算机程序，处理器11可以根据存储在只读存储器(ROM)12中的计算机程序或者从存储单元18加载到随机访问存储器(RAM)13中的计算机程序，来执行各种适当的动作和处理。在RAM 13中，还可存储电子设备10操作所需的各种程序和数据。处理器11、ROM 12以及RAM 13通过总线14彼此相连。输入/输出(I/O)接口15也连接至总线14。

电子设备10中的多个部件连接至I/O接口15，包括：输入单元16，例如键盘、鼠标等；输出单元17，例如各种类型的显示器、扬声器等；存储单元18，例如磁盘、光盘等；以及通信单元19，例如网卡、调制解调器、无线通信收发机等。通信单元19允许电子设备10通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。

处理器11可以是各种具有处理和计算能力的通用和/或专用处理组件。处理器11的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的处理器、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。处理器11执行上文所描述的各个方法和处理，例如任务延迟监控方法。

在一些实施例中，任务延迟监控方法可被实现为计算机程序，其被有形地包含于计算机可读存储介质，例如存储单元18。在一些实施例中，计算机程序的部分或者全部可以经由ROM 12和/或通信单元19而被载入和/或安装到电子设备10上。当计算机程序加载到RAM 13并由处理器11执行时，可以执行上文描述的任务延迟监控方法的一个或多个步骤。备选地，在其他实施例中，处理器11可以通过其他任何适当的方式(例如，借助于固件)而被配置为执行任务延迟监控方法。

本文中以上描述的***和技术的各种实施方式可以在数字电子电路***、集成电路***、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上***的***(SOC)、负载可编程逻辑设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括：实施在一个或者多个计算机程序中，该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程***上执行和/或解释，该可编程处理器可以是专用或者通用可编程处理器，可以从存储***、至少一个输入装置、和至少一个输出装置接收数据和指令，并且将数据和指令传输至该存储***、该至少一个输入装置、和该至少一个输出装置。

用于实施本发明实施例的任务延迟监控方法的计算机程序可以采用一个或多个编程语言的任何组合来编写。这些计算机程序可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器，使得计算机程序当由处理器执行时使流程图和/或框图中所规定的功能/操作被实施。计算机程序可以完全在机器上执行、部分地在机器上执行，作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。

本发明实施例还提供了一种计算机可读存储介质，计算机可读存储介质存储有计算机指令，计算机指令用于使处理器执行一种任务延迟监控方法，该方法包括：

在确定当前监控任务的执行开始时间延迟的情况下，确定与所述当前监控任务对应的各上游执行任务；

确定各所述上游执行任务分别对应的当前执行信息和平均执行信息，所述当前执行信息包括当前开始时间和当前结束时间，所述平均执行信息包括平均开始时间和平均结束时间；

根据各所述当前执行信息和各所述平均执行信息，确定各所述上游执行任务分别对应的当前延迟偏差，基于各所述上游执行任务分别对应的当前延迟偏差，从各所述上游执行任务中确定造成所述当前监控任务延迟的上游延迟任务。

在本发明的上下文中，计算机可读存储介质可以是有形的介质，其可以包含或存储以供指令执行***、装置或设备使用或与指令执行***、装置或设备结合地使用的计算机程序。计算机可读存储介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体***、装置或设备，或者上述内容的任何合适组合。备选地，计算机可读存储介质可以是机器可读信号介质。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。

为了提供与用户的交互，可以在电子设备上实施此处描述的***和技术，该电子设备具有：用于向用户显示信息的显示装置(例如，CRT(阴极射线管)或者LCD(液晶显示器)监视器)；以及键盘和指向装置(例如，鼠标或者轨迹球)，用户可以通过该键盘和该指向装置来将输入提供给电子设备。其它种类的装置还可以用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的传感反馈(例如，视觉反馈、听觉反馈、或者触觉反馈)；并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。

可以将此处描述的***和技术实施在包括后台部件的计算***(例如，作为数据服务器)、或者包括中间件部件的计算***(例如，应用服务器)、或者包括前端部件的计算***(例如，具有图形用户界面或者网络浏览器的用户计算机，用户可以通过该图形用户界面或者该网络浏览器来与此处描述的***和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算***中。可以通过任何形式或者介质的数字数据通信(例如，通信网络)来将***的部件相互连接。通信网络的示例包括：局域网(LAN)、广域网(WAN)、区块链网络和互联网。

计算***可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器，又称为云计算服务器或云主机，是云计算服务体系中的一项主机产品，以解决了传统物理主机与VPS服务中，存在的管理难度大，业务扩展性弱的缺陷。

应该理解，可以使用上面所示的各种形式的流程，重新排序、增加或删除步骤。例如，本发明中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行，只要能够实现本发明的技术方案所期望的结果，本文在此不进行限制。

上述具体实施方式，并不构成对本发明保护范围的限制。本领域技术人员应该明白的是，根据设计要求和其他因素，可以进行各种修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等，均应包含在本发明保护范围之内。

Claims (13)

1.一种任务延迟监控方法，其特征在于，包括：

在确定当前监控任务的执行开始时间延迟的情况下，确定与所述当前监控任务对应的各上游执行任务；

确定各所述上游执行任务分别对应的当前执行信息和平均执行信息，所述当前执行信息包括当前开始时间和当前结束时间，所述平均执行信息包括平均开始时间和平均结束时间；

根据各所述当前执行信息和各所述平均执行信息，确定各所述上游执行任务分别对应的当前延迟偏差，基于各所述上游执行任务分别对应的当前延迟偏差，从各所述上游执行任务中确定造成所述当前监控任务延迟的上游延迟任务。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

根据任务信息表确定所述当前监控任务对应的预设开始时间，其中，所述任务信息表包括各监控任务对应的预设开始时间；

在到达所述预设开始时间时启动预设定时监控任务，通过所述预设定时监控任务检测所述当前监控任务是否开始执行，若否，则确定所述当前监控任务的执行开始时间延迟。

3.根据权利要求1所述的方法，其特征在于，所述确定各所述上游执行任务分别对应的当前执行信息和平均执行信息，包括：

基于任务执行记录表获取各所述上游执行任务分别对应的历史执行信息和当前执行信息，其中，所述任务执行记录表包括各任务对应的历史执行信息和当前执行信息，所述历史执行信息包括各任务对应的历史开始时间和历史结束时间；

基于各所述上游执行任务对应的所述历史执行信息，分别确定各所述上游执行任务对应的平均执行信息。

4.根据权利要求3所述的方法，其特征在于，所述基于各所述上游执行任务对应的所述历史执行信息，分别确定各所述上游执行任务对应的平均执行信息，包括：

针对各所述上游执行任务，根据当前上游执行任务对应的各历史开始时间计算历史平均开始时间，根据所述当前上游执行任务对应的各历史结束时间计算历史平均结束时间，将所述历史平均开始时间和所述历史平均结束时间确定为所述当前上游执行任务对应的平均执行信息；或者，

针对各所述上游执行任务，对当前上游执行任务对应的各历史开始时间进行聚类，基于聚类结果中的核心点确定所述当前上游执行任务对应的平均开始时间，对所述当前上游执行任务对应的各历史结束时间进行聚类，基于聚类结果中的核心点确定所述当前上游执行任务对应的平均结束时间。

5.根据权利要求1所述的方法，其特征在于，所述基于各所述上游执行任务分别对应的当前延迟偏差，从各所述上游执行任务中确定造成所述当前监控任务延迟的上游延迟任务，包括：

基于预设偏差阈值以及各所述上游执行任务分别对应的当前延迟偏差，从各所述上游执行任务中确定出至少一个待筛选延迟任务；

根据各所述待筛选延迟任务分别对应的当前延迟偏差，从各所述待筛选延迟任务中确定至少一个上游延迟任务。

6.根据权利要求5所述的方法，其特征在于，所述方法还包括：

根据任务信息表获取所述当前监控任务的第一任务标识以及各所述上游延迟任务的第二任务标识，基于所述第一任务标识和各所述第二任务标识生成报警信息；

基于所述任务信息表获取所述当前监控任务对应的关联用户标识，将所述报警信息发送至与所述关联用户标识对应的用户终端，其中，所述任务信息表包括各任务的任务标识以及各监控任务对应的关联用户标识。

7.根据权利要求6所述的方法，其特征在于，所述基于所述第一任务标识和各所述第二任务标识生成报警信息，包括：

基于各所述上游延迟任务分别对应的当前延迟偏差，确定所述当前监控任务的预计开始时间和预计结束时间；

根据所述第一任务标识、各所述第二任务标识、所述预计开始时间和所述预计结束时间，生成报警信息。

8.根据权利要求1-7中任一所述的方法，其特征在于，所述方法还包括：

在确定所述当前监控任务的执行开始时间未延迟，且所述当前监控任务的执行结束时间延迟的情况下，将所述当前监控任务确定为监控延迟任务。

9.根据权利要求8所述的方法，其特征在于，所述方法还包括：

根据任务信息表确定所述当前监控任务对应的预设结束时间，其中，所述任务信息表包括各监控任务对应的预设结束时间；

在到达所述预设结束时间时启动预设定时监控任务，通过所述预设定时监控任务检测所述当前监控任务是否完成执行，若否，则确定所述当前监控任务的执行结束时间延迟。

10.根据权利要求1-7中任一所述的方法，其特征在于，在所述从各所述上游执行任务中确定造成所述当前监控任务延迟的上游延迟任务之后，所述方法还包括：

在确定所述当前监控任务的执行结束时间延迟的情况下，确定所述当前监控任务对应的当前执行信息；

基于所述当前监控任务对应的当前执行信息，确定所述当前监控任务对应的实际执行时长；

获取所述当前监控任务对应的预设执行时长，若所述预设执行时长与所述实际执行时长之间的差值超过预设阈值，则将所述当前监控任务确定为监控延迟任务。

11.一种任务延迟监控装置，其特征在于，包括：

上游任务确定模块，用于在确定当前监控任务的执行开始时间延迟的情况下，确定与所述当前监控任务对应的各上游执行任务；

执行信息确定模块，用于确定各所述上游执行任务分别对应的当前执行信息和平均执行信息，所述当前执行信息包括当前开始时间和当前结束时间，所述平均执行信息包括平均开始时间和平均结束时间；

延迟任务确定模块，用于根据各所述当前执行信息和各所述平均执行信息，确定各所述上游执行任务分别对应的当前延迟偏差，基于各所述上游执行任务分别对应的当前延迟偏差，从各所述上游执行任务中确定造成所述当前监控任务延迟的上游延迟任务。

12.一种电子设备，其特征在于，所述电子设备包括：

至少一个处理器；以及

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的计算机程序，所述计算机程序被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-10中任一项所述的任务延迟监控方法。

13.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使处理器执行时实现权利要求1-10中任一项所述的任务延迟监控方法。

Images