CN112560547A - 一种异常行为判定方法、装置、终端及可读存储介质 - Google Patents

Abstract

本发明提供的异常行为判定方法、装置、终端及可读存储介质，该异常行为判定方法通过获取监控视频中的行为数据；从行为数据中确定至少一个疑似异常行为；获取疑似异常行为所在区域的当前状态图片；根据当前状态图片判定疑似异常行为是否是异常行为。本发明实施例提供的方法首先对行为数据的预处理来确定疑似异常行为，再有针对性的针对疑似异常行为所在的区域获取当前状态图片，该图片对疑似异常行为的拍摄更加清晰准确，再根据该当前状态图片判定疑似异常行为是否是异常行为。本发明还公开了一种异常行为判定装置、终端及可读存储介质，通过实施上述方案，可以提升对异常行为判定准确的准确性，降低了资源占用，提升了处理速度。

Description

一种异常行为判定方法、装置、终端及可读存储介质

技术领域

本发明实施例涉及但不限于视频监控技术领域，具体而言，涉及但不限于一种异常行为判定方法、装置、终端及可读存储介质。

背景技术

随着人工智能技术在图像处理等方面的飞速发展，基于人工智能的视频监控技术在很多场合被广泛使用。在很多敏感区域例如会议室、考场、金融机构等地方，往往需要更多的智能摄像机监控设备来统计人员信息和检测异常行为。但是目前的智能监控设备从前端获取图像数据后，直接将原始图片传送给后端GPU集群通过卷积神经网络进行检测，其具体过程可参见图1，如图1所示，目前的相关技术中，其判定过程为：

S101：智能监控设备从前端获取图像数据；

S102：后端GPU集群接收图像数据并通过卷积神经网络进行检测；

S103：输出结果。

利用该方法进行判定，有如下缺点：

1，对监控人员的异常行为判定不准确。由于监控摄像机分辨率不足；监控区域里人员较多且在图像中像素较小不够清晰；基于深度学习的异常行为检测模型单步检测效果不够好等原因，往往会造成检测信息错误，判定不准确。

2，资源占用较大，处理速度慢。为了获取更清晰可靠的数据，需要布置多个摄像头；前端多个摄像头获取的图像数据，全部不间断发送给后端高清图像数据，让后端进行信息分析和异常行为检测。这样不仅增加了现场布控的复杂度，而且还需要更多的空间资源和硬件资源，处理速度慢。

发明内容

本发明实施例提供的一种异常行为判定方法、装置、终端及可读存储介质，主要解决的技术问题是现有技术中对异常行为的判定不准确，资源占用较大，处理速度慢。

为解决上述技术问题，本发明实施例提供一种异常行为判定方法，包括：

获取监控视频中的行为数据；

从所述行为数据中确定至少一个疑似异常行为；

获取所述疑似异常行为所在区域的当前状态图像；

根据所述当前状态图像判定所述疑似异常行为是否是异常行为。

本发明实施例还提供了一种异常行为判定装置，包括：至少一个视频监控模块和数据处理模块，其中：

所述视频监控模块包括：

数据获取模块，用于获取监控视频中的行为数据；

数据初步处理模块，用于从所述行为数据中确定至少一个疑似异常行为；

图像获取模块，用于获取所述疑似异常行为所在区域的当前状态图像；

所述数据处理模块，用于根据所述当前状态图像判定所述疑似异常行为是否是异常行为。

本发明实施例还提供了一种异常行为判定终端，包括处理器、存储器及通信总线；

所述通信总线用于实现处理器和存储器之间的连接通信；

所述处理器用于执行存储器中存储的一个或者多个计算机程序，以实现上述任一项所述的异常行为判定方法的步骤。

本发明实施例还提供了一种可读存储介质，所述可读存储介质存储有一个或者多个计算机程序，所述一个或者多个计算机程序可被一个或者多个处理器执行，以实现上述任一项所述的异常行为判定方法的步骤。

本发明的有益效果是：

本发明提供的异常行为判定方法、装置、终端及可读存储介质，该异常行为判定方法通过获取监控视频中的行为数据；从行为数据中确定至少一个疑似异常行为；获取疑似异常行为所在区域的当前状态图像；根据当前状态图像判定疑似异常行为是否是异常行为。由于本发明实施例提供的方法通过对行为数据的预处理来确定疑似异常行为，再有针对性的针对疑似异常行为所在的区域获取当前状态图像，该图像对疑似异常行为的拍摄更加清晰准确，再根据该当前状态图像判定疑似异常行为是否是异常行为。通过本发明的实施，提升对异常行为判定准确的准确性，降低了资源占用，提升了处理速度。

本发明其他特征和相应的有益效果在说明书的后面部分进行阐述说明，且应当理解，至少部分有益效果从本发明说明书中的记载变的显而易见。

附图说明

图1为本发明背景技术中的异常行为判定方法的流程示意图；

图2为本发明实施例一的一种异常行为判定方法的流程示意图；

图3为本发明实施例一的一种异常行为判定方法具体实施例的流程示意图；

图4为本发明实施例二提供的一种异常行为判定装置的结构图；

图5为本发明实施例二提供的另一种异常行为判定装置的结构图；

图6为本发明实施例二提供的另一种异常行为判定装置的结构图；

图7为本发明实施例二提供的另一种异常行为判定装置的结构图；

图8为本发明实施例三提供的终端的结构示意图。

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，下面通过具体实施方式结合附图对本发明实施例作进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

实施例一：

请参见图2，本实施例提供的一种异常行为判定方法包括：

S201：获取监控视频中的行为数据；

S202：从行为数据中确定至少一个疑似异常行为；

S203：获取疑似异常行为所在区域的当前状态图像；

S204：根据所当前状态图像判定疑似异常行为是否是异常行为。

需要说明的是，本实施例中的异常行为可以是在某些场景下特定的某些行为，例如：考场作弊、涉密会议室拍照、危险区域点明火或吸烟等；也可以是某些特指的行为，例如：跑动、挥手、鼓掌等；还可以是一些人物的面部微表情，例如：皱眉、嘟嘴、吐舌头等。异常行为可以是通过预先设置规则所确定，也可以是用户根据需求进行确定。

在一些实施例中，监控视频的监控区域可以是学校、医院、广场、会议室、公园、景区等场所，其监控区域在本实施例中不做限定。

在一些实施例中，获取监控视频中的行为数据可以是实时获取，也可以是间隔一定时间进行获取，例如每隔1分钟，获取一次监控视频中的行为数据。还可以是在预设时间段内实时获取监控视频中的行为数据。例如监控区域为会议室，则可以设定，在开会时间段内实时获取实时监控视频中的行为数据，而在会议结束后，停止获取。

需要说明的是，行为数据可以包括特定主体的位置、特定事物的出现、运动数据、光线变化、色彩变化等。例如，可以通过获取监控视频中的某一帧或者某几帧或者全部帧的画面图像并分析其中的各预设事物的位置作为行为数据，例如分析交通路口中车辆的位置作为行为数据，当某一辆车的位置超出斑马线且斑马线上有行人时，则可以通过该行为数据确定该车辆超出斑马线的行为为疑似异常行为；通过获取并分析监控视频中画面图像的亮度数据作为行为数据，例如，在厨房的监控视频中，获取到监控画面中的各区域亮度数据，若某一非灶台区域的亮度超出预设范围，则认为该区域存在疑似着火的可能性，则可以通过该行为数据确定非灶台区域的亮度超出预设范围的行为为疑似异常行为；例如，在广场的监控视频中，拍摄到多个人在移动的图像，则可以将每个人移动的状态作为行为数据。例如，在禁烟场所的监控视频画面中，识别画面中存在的事物，各事物即为行为数据，当事物中出现疑似烟或者疑似打火机时，则确定该画面中存在疑似异常行为。具体的行为数据的获取可以是本领域技术人员根据所需要确定的异常行为的特性而设定的。

在一些实施例中，获取疑似异常行为所在区域的当前状态图像之后，根据当前状态图像判定疑似异常行为是否是异常行为之前还包括：对当前状态图像进行归一化处理。

需要说明的是，对当前状态图像进行归一化处理包括但不限于对当前状态图像的尺寸进行调整，将其调整为预设尺寸，例如获取到的异常行为所在区域的当前状态图像可能是图片，其尺寸大小可能是480*270像素大小，为使后续对该当前状态图像的处理更加快速，占用资源更加小，则可以将该当前状态图像的尺寸大小调整为统一的预设尺寸240*135像素。在一些实施例中，对当前状态图像进行归一化处理还包括对当前状态图像的格式进行统一，例如，将其均另存为JPG格式、mp4格式等。在一些实施例中，对当前状态图像进行归一化处理还包括对当前状态图像的亮度、对比度等参数进行调整。

在一些实施例中，当前状态图像是包括疑似异常行为主体的图像，该图像是推疑似异常行为的“特写”，在一些实施例中，由于获取监控视频中的行为数据可能包括多个行为执行主体，在某一行为执行主体的行为数据被判定为疑似异常行为后，将对该疑似异常行为所在的区域进行单独、加清晰的拍摄，以获取当前状态图像。在一些实施例中，当前状态图像是包括异常行为及其执行执行主体的完整图像，例如针对密会议的会议室中，有参会人员使用手机拍摄演示屏幕这一疑似异常行为，将会获取使用手机进行拍摄的对象的当前监控视频的某一帧或某几帧或某段视频作为当前状态图像；在一些实施例中，当前状态图像是包括异常行为的完整图像，例如针对在禁烟场所发现疑似吸烟这一疑似异常行为后，将会获取疑似吸烟动作的位置信息，并根据该位置信息调整摄像云台和摄像设备对该位置信息所在区域一定范围内进行“特写”拍摄，以获得当前状态图像。

在一些实施例中，根据当前状态图像判定疑似异常行为是否是异常行为之后还包括：

若判定疑似异常行为是异常行为，输出以下信息中至少之一：

异常行为警报信息；

异常行为对应的坐标信息。

需要说明的是，异常行为警报信息可以是发出警报铃声，也可以是在某些预设界面弹出提示框，还可以是将异常行为信息发送至指定的终端或服务器等，在本实施例中不做限定。

需要说明的是，异常行为对应的坐标信息可以是以经纬度为单位的标识信息，例如：北纬29.35东经106.33；可以是以地点为单位的信息，例如：XX省XX市XX区XX路XX号；还可以是用户自行设定的坐标规则信息，例如XX区、XX会议室X排X座、XX病房XX床、XX楼层、XX包厢等。

在一些实施例中，根据当前状态图像判定疑似异常行为是否是异常行为包括：

获取疑似异常行为所在的行为类别；

获取与疑似异常行为所在的行为类别对应的第一卷积神经网络；

通过第一卷积神经网络根据当前状态图像判定疑似异常行为是否是异常行为。

需要说明的，第一卷积神经网络与行为类别的对应关系可以根据用户的需求进行限定，本实施例中不做限定。例如，当前获取的疑似异常行为为在教室中跑动，可以将该疑似异常行为分类为教室类，可以设定与疑似异常行为所在的行为类别教室类对应的第一卷积神经网络为教室深度卷积神经分类网络，进而将该疑似异常行为所对应获取的当前状态图像发送传输给该教室深度卷积神经分类网络，教室深度卷积神经分类网络接收到该当前状态图像后对其进行判定。在一些实施例中，第一卷积神经网络包括深度卷积神经分类网络。

在一些实施例中，可以包括多个行为类别分别一一对应不同的第一卷积神经网络，还可以多个行为类别对应同一个第一卷积神经网络，第一卷积神经网络的数量在此不做限定，用户可以根据需要设定。

本发明实施例中的第一卷积神经网络是通过对预先建立的卷积神经网络进行预设行为类别的经人工标注完成的异常行为样本深度学习完成后得到的第一卷积神经网络。该第一卷积神经网络可以通过获取到的当前状态图像进一步判定疑似异常行为是否是异常行为。

在一些实施例中，获取疑似异常行为所在区域的当前状态图像包括：

获取疑似异常行为所在的坐标信息；

获取该疑似异常行为所在的坐标信息所对应的区域的当前状态图像。

需要说明的是，此时当前状态图像的拍摄区域可以是以疑似异常行为所在的坐标为中心，向四周或预设的方向扩张预设范围后得到的当前状态图像。例如：获取到疑似异常行为所在的坐标信息为高1.2米，距离3米，宽1米，此时当前状态图像所针对的区域可以是高1-1.5米，距离3米，宽0.8-1.3米的范围。

在一些实施例中，当前状态图像可以通过控制调整摄像机云台进而控制摄像设备的摄像角度来获取，和/或，通过控制摄像设备的参数例如焦距、水平分辨率、信噪比等来来获取。有时疑似异常行为的坐标位置与当前摄像设备的角度刚好一致，则可以仅通过调整摄像设备的参数来获取当前状态图像。需要说明的是，摄像设备包括但不限于摄像机等可以进行监控拍摄的设备。

在一些实施例中，在获取到异常行为所在的坐标信息后，可以对照该坐标信息来控制摄像机云台调整仰角、水平角度和摄像机焦距，使摄像机对准疑似异常行为的区域来获取针对性的当前状态图像。例如：调整云台仰角和水平角度对准异常行为区域中心点。调整焦距让摄像机可以接收以疑似异常行为坐标中心点为图像中心的图像作为当前状态图像。

在一些实施例中，从行为数据中确定至少一个疑似异常行为包括：

获取疑似异常行为的置信度；

若疑似异常行为的置信度大于预设阈值，则将疑似异常行为作为目标疑似异常行为。

在一些实施例中，获取疑似异常行为所在区域的当前状态图像包括：

获取目标疑似异常行为所在区域的当前状态图像。

通过在疑似异常行为中根据置信度来筛选出目标疑似异常行为，并针对目标疑似异常行为才去获取其当前状态图像，可以进一步提升异常行为判定的效率，降低资源占用。

需要说明的是，置信度标定的规则可以是用户根据一定逻辑进行预设的，也可以是基于一些计算模型所规定的置信度规则进行标定。

在一些实施例中，可以通过逻辑回归、决策树等通用的模型算法推测疑似异常行为的置信度。

需要说明的是，预设阈值可以是针对全部场景也即针对全部行为类别均设置统一的预设阈值，也可以是根据不同的行为类别分别设置对应的预设阈值，还可以是用户根据需要随时调整的预设阈值。例如：针对在车站获取监控视频中的行为信息中获取到疑似持有危险物品这一疑似异常行为，其置信度为0.8，按照初始预设阈值为0.85，此时该疑似异常行为将被排除，不会进入下一步骤，对其进行进一步分析。但当前安保等级要求提升，预设阈值设置为0.79，则，该疑似异常行为将被列为目标疑似异常行为。

需要说明的是，在一些实施例中，获取置信度在预设阈值以上的疑似异常行为作为目标疑似异常行为，也即，疑似异常行为的置信度等于预设阈值时，也将其列为目标疑似异常行为。目标疑似异常行为的设定可以根据用户的需要进行更换。

需要说明的是，当异常行为判定方法中存在从疑似异常行为中确定目标疑似异常行为的步骤时，原方法中的获取疑似异常行为所在区域的当前状态图像将随即更改换仅获取目标疑似异常行为所在区域的当前状态图像，对于那些被确定为是疑似异常行为，但不是目标疑似异常行为将不再获取其所在区域的当前状态图像，以降低***的资源占用，提升处理速度。

在一些实施例中，当目标疑似异常行为的数量超过1个时，

获取目标疑似异常行为所在区域的当前状态图像包括：

获取目标疑似异常行为序列，目标疑似异常行为序列由各目标疑似异常行为所对应的疑似异常行为的置信度按照预设规则排序得到；

根据目标疑似异常行为序列的顺序获取目标疑似异常行为所在区域的当前状态图像。

需要说明的是，目标疑似异常行为的置信度等于该目标疑似异常行为所对应的疑似异常行为所被标定的置信度。例如疑似异常行为所标定的置信度为0.9，预设阈值为0.8，则该疑似异常行为的置信度高于预设阈值，则区该疑似异常行为作为目标疑似异常行为，该目标疑似异常行为的置信度等于疑似异常行为的置信度等于0.9。

在一些实施例中，根据各目标疑似异常行为所对应的置信度根据预设规则对各目标疑似异常行为进行优先级排序中的预设规则可以是按照置信度的大小从高到低进行排序，也可以是根据置信度的大小针对每个行为类别的目标疑似异常行为进行从高到低排序，再根据行为类别的优先级进行排序，需要说明的是，针对包括多个行为类别的目标疑似异常行为的排序中置信度大小排序与类别优先级排序的顺序可以根据用户需求自行设定，本实施例不做限定。。例如：当前有行为类别甲类：目标疑似异常行为A的置信度0.7，目标疑似异常行为B的置信度0.75，目标疑似异常行为C的置信度0.79；行为类别乙类：目标疑似异常行为D的置信度0.7，目标疑似异常行为E的置信度0.75，目标疑似异常行为F的置信度0.79。其中预设规则是行为类别甲类优先级高于乙类，置信度越高优先级越高。则按照此预设规则对上述各目标疑似异常行为进行优先级排序的结果就是：目标疑似异常行为C>目标疑似异常行为B>目标疑似异常行为A>目标疑似异常行为F>目标疑似异常行为E>目标疑似异常行为D。

需要说明的是，在一些实施例中，预设规则也可以是按照置信度由低到高来进行优先级排序，得到目标疑似异常行为序列。

需要说明的是，根据目标疑似异常行为序列可以通过分别控制调整摄像机云台和摄像设备的参数中至少之一来获取目标疑似异常行为所在的坐标信息所对应的区域的当前状态图像。可以理解，在一些实施例中，根据各目标疑似异常行为的目标疑似异常行为序列从优先级高的的目标疑似异常行为所在的坐标信息控制调整摄像机云台和摄像设备参数中至少之一来获取包括相应目标疑似异常行为所在的坐标信息的区域的当前状态图像。例如，目标疑似异常行为A的在目标疑似异常行为序列中的排序高于目标疑似异常行为B的优先级，则先控制调整摄像机云台和摄像设备参数中至少之一来获取包括目标疑似异常行为A所在的坐标信息的区域的当前状态图像，再控制调整摄像机云台和摄像设备参数中至少之一来获取包括目标疑似异常行为B所在的坐标信息的区域的当前状态图像。

在一些实施例中，获取到目标疑似异常行为的位置信息后，将该位置信息于摄像机当前位置进行对比，调整调整云台仰角和水平角度对准异常行为区域中心点。调整焦距让摄像机可以接收以疑似异常行为坐标中心点为图像中心的图像来获取当前状态图像。对于当前存在多个目标疑似异常行为时，可以按照各目标疑似异常行为的目标疑似异常行为序列的顺序重复上述步骤，直到获取到所有的目标疑似异常行为的当前状态图像。

在一些实施例中，从行为数据中确定至少一个疑似异常行为可以通过第二卷积神经网络来进行确定，在一些实施例中，可以通过在前端摄像机上布置的第二卷积神经网络，直接在摄像机加载的GPU上进行计算。在一些实施例中，第二卷积神经网络为小型卷积神经网络。

需要说明的是，在一些实施例中，第二卷积神经网络可以确定全部行为类别的疑似异常行为。

在一些实施例中，第二卷积神经网络通过以下方式获取，建立人工标注完成的全类别的异常行为样本，预先设置的全类别的卷积神经网络对上述样本进行学习，并进行置信度标定训练，学习、训练完成后得到的卷积神经网络作为第二卷积神经网络。该第二卷积神经网络可以对获取到的行为数据进行计算分析，从中筛选出疑似异常行为，并标定该疑似异常行为的置信度，得到该疑似异常行为的位置信息。

需要说明的是，本实施例中的行为数据可以是人的行为数据，也可以是动物的行为数据，还可以是一些机械设备等具有动作的事物。例如，可以获取保护区中目标监控范围中的行为数据，其中包括一只大熊猫在爬树，另一只考拉在树下发呆。此时可以通过小型卷积神经网络确定大熊猫在爬树是疑似异常行为A，考拉在树下发呆为疑似异常行为B。又例如，工厂中某传送带正常工作是以5米每秒的速度在运转，但在监控视频中的行为数据中提取到该传送带的状态时静止不动的，则可以确定该传送带静止为疑似异常行为。

下面结合一种具体的实施例对上述实施例中的异常行为判定方法进行进一步的说明。参见图3，如图3所示，提供了一种会议室中拍摄屏幕这一异常行为判定方法，该方法包括：

S301：获取针对会议室的监控视频中的行为数据；

S302：通过第二卷积神经网络从行为数据中确定至少两个疑似拍摄屏幕行为；

S303：通过第二卷积神经网络对疑似拍摄屏幕行为进行置信度标定，获取到疑似拍摄屏幕行为的置信度；

S304：获取至少两个目标疑似拍摄屏幕行为；

S305：根据各目标疑似拍摄屏幕行为的置信度对各目标疑似拍摄屏幕行为进行排序，得到目标疑似拍摄屏幕行为序列；

S306：获取各目标疑似异常行为所在的坐标信息；

S307：控制调整摄像机云台和/或摄像设备的参数按照目标疑似拍摄屏幕行为序列的顺序来获取其坐标信息所对应的区域的当前状态图像；

S308:对当前状态图像进行归一化处理；

S309：获取目标疑似拍摄屏幕行为所在的行为类别；

S310：获取与疑似拍摄屏幕行为所在的行为类别对应的第一卷积神经网络，通过第一卷积神经网络根据当前状态图像判定疑似拍摄屏幕行为是否是拍摄屏幕行为；

S311：若是，则输出拍摄行为警报信息；

S312：输出拍摄行为对应的坐标信息；

S313：若否，则结束流程。

需要说明的是，上述实施例中步骤S311和步骤S312之间没有顺序限定，且也可以选择至少一个步骤执行。

需要说明的是，其中目标疑似拍摄屏幕行为包括疑似拍摄屏幕行为的置信度高于预设阈值的疑似拍摄屏幕行为，且目标疑似拍摄屏幕行为的置信度等于其所对应的疑似拍摄屏幕行为的置信度。

需要说明的是，行为数据可以是监控视频中的每一帧。确定疑似异常行为可以通过小型卷积神经网络来进行。

在一些实施例中，本发明实施例中获取监控视频中的行为数据可以是通过一套云台和拍摄设备进行获取，也可以是通过多套云台和拍摄设备进行获取，当通过多套云台和拍摄设备来获取多个行为数据时，当从多个行为数据中获取到疑似异常行为数据时，可以通过与疑似异常行为所对应的拍摄设备来获取该疑似异常行为所对应的当前状态图像，也可以通过能够获取到疑似异常行为所在区域的其他拍摄设备来获取该疑似异常行为所对应的当前状态图像。例如，当前在教室的四个方位存在四个拍摄设备A、B、C、D，通过上述A拍摄设备获取到教室第一组座位位置的行为数据，通过上述B拍摄设备获取到教室第二组座位位置的行为数据，通过上述C拍摄设备获取到教室第三组座位位置的行为数据，通过上述D拍摄设备获取到教室第四组座位位置的行为数据，第二卷积神经网络经过计算分析后认为教室第二组座位位置的行为数据中包括疑似上课玩手机这一疑似异常行为，此时，需要采集疑似上课玩手机这一疑似异常行为所在区域的当前状态图像以进一步确认是否是上课玩手机这一行为。对于该当前状态图像，可以通过先获取疑似上课玩手机这一行为更加精确的位置信息，假设为第二组第三排，此时，可以选择调整四个拍摄设备中至少一个拍摄设备的拍摄角度等参数来获取第二组第三排的“特写”，例如仅拍摄第二组第三排区域，以获取至少一张当前状态图像。

本发明实施例提供的异常行为判定方法，通过获取监控视频中的行为数据；从行为数据中确定至少一个疑似异常行为；获取疑似异常行为所在区域的当前状态图像；接收当前状态图像并判定疑似异常行为是否是异常行为。由于本发明实施例提供的方法存在对行为数据的预处理—确定疑似异常行为，再有针对性的针对疑似异常行为所在的区域获取当前状态图像，该图像对疑似异常行为的拍摄更加清晰准确，再根据该当前状态图像判定疑似异常行为是否是异常行为。通过本方法的实施，可以提升对异常行为判定准确的准确性，降低了资源占用，提升了处理速度。

实施例二：

本实施例还提供了一种异常行为判定装置，如图4所示，异常行为判定装置400其包括至少一个视频监控模块401，和数据处理模块402，其中：

视频监控模块401包括：

数据获取模块4011，用于获取监控视频中的行为数据；

数据初步处理模块4012，用于从行为数据中确定至少一个疑似异常行为；

图像获取模块4013，用于获取疑似异常行为所在区域的当前状态图像

数据处理模块402，用于根据当前状态图像判定疑似异常行为是否是异常行为。

需要说明的是，本实施例中的异常行为可以是在某些场景下特定的某些行为，例如：考场作弊、涉密会议室拍照、危险区域点明火或吸烟等；也可以是某些特指的行为，例如：跑动、挥手、鼓掌等；还可以是一些人物的面部微表情，例如：皱眉、嘟嘴、吐舌头等。异常行为可以是通过预先设置规则所确定，也可以是用户根据需求进行确定。

在一些实施例中，监控视频的监控区域可以是学校、医院、广场、会议室、公园、景区等场所，其监控区域在本实施例中不做限定。

在一些实施例中，获取监控视频中的行为数据可以是实时获取，也可以是间隔一定时间进行获取，例如每隔1分钟，获取一次监控视频中的行为数据。还可以是在预设时间段内获取监控视频中的行为数据。例如监控区域为会议室，则可以设定，在开会时间段内获取监控视频中的行为数据，而在会议结束后，停止获取。

需要说明的是，行为数据可以包括特定主体的位置、特定事物的出现、运动数据、光线变化、色彩变化等。例如，可以通过获取监控视频中的某一帧或者某几帧或者全部帧的画面图像并分析其中的各预设事物的位置作为行为数据，例如分析交通路口中车辆的位置作为行为数据，当某一辆车的位置超出斑马线且斑马线上有行人时，则可以通过该行为数据确定该车辆超出斑马线的行为为疑似异常行为；通过获取并分析监控视频中画面图像的亮度数据作为行为数据，例如，在厨房的监控视频中，获取到监控画面中的各区域亮度数据，若某一非灶台区域的亮度超出预设范围，则认为该区域存在疑似着火的可能性，则可以通过该行为数据确定非灶台区域的亮度超出预设范围的行为为疑似异常行为；例如，在广场的监控视频中，拍摄到多个人在移动的图像，则可以将每个人移动的状态作为行为数据。例如，在禁烟场所的监控视频画面中，识别画面中存在的事物，各事物即为行为数据，当事物中出现疑似烟或者疑似打火机时，则确定该画面中存在疑似异常行为。具体的行为数据的获取可以是本领域技术人员根据所需要确定的异常行为的特性而设定的。

在一些实施例中，如图5所示，异常行为判定装置还包括控制数据传输模块501，控制数据传输模块501用于对当前状态图像进行归一化处理。

需要说明的是，对当前状态图像进行归一化处理包括但不限于对当前状态图像的尺寸进行调整，将其调整为预设尺寸，例如初次获取到的异常行为所在区域的当前状态图像可能是图片，其尺寸大小可能是480*270像素大小，为使后续对该当前状态图像的处理更加快速，占用资源更加小，则可以将该当前状态图像的尺寸大小调整为统一的预设尺寸240*135像素。在一些实施例中，对当前状态图像进行归一化处理还包括对当前状态图像的格式进行统一，例如，将其均另存为JPG格式、mp4格式等。在一些实施例中，对当前状态图像进行归一化处理还包括对当前状态图像的亮度、对比度等参数进行调整。

在一些实施例中，当前状态图像是包括疑似异常行为主体的图像，该图像是推疑似异常行为的“特写”，在一些实施例中，由于获取监控视频中的行为数据可能包括多个行为执行主体，在某一行为执行主体的行为数据被判定为疑似异常行为后，将对该疑似异常行为所在的区域进行单独、加清晰的拍摄，以获取当前状态图像。例如，在教室的监控视频中获取的行为数据包括教室中10个学生的动作数据，其中第二组第三排左侧的王同学处于站立状态，假使该场景下异常行为数据为站立行为，则判定王同学的行为为疑似异常行为，并仅针对对第二组第三排左侧区域进行拍摄，获取第二组第三排左侧区域的当前状态图像。

在一些实施例中，当前状态图像是包括异常行为及其执行执行主体的完整图像，例如针对密会议的会议室中，有参会人员使用手机拍摄演示屏幕这一疑似异常行为，将会获取使用手机进行拍摄的对象的当前监控视频的某一帧或某几帧或某段视频作为当前状态图像；在一些实施例中，当前状态图像是包括异常行为的完整图像，例如针对在禁烟场所发现疑似吸烟的位置信息，并根据该位置信息调整摄像云台和摄像设备对该位置信息所在区域一定范围内进行“特写”拍摄，以获得当前状态图像。

在一些实施例中，数据处理模块还用于：

若判定疑似异常行为是异常行为，输出以下信息中至少之一：

异常行为警报信息；

异常行为对应的坐标信息。

需要说明的是，异常行为警报信息可以是发出警报铃声，也可以是在某些预设界面弹出提示框，还可以是将异常行为信息发送至指定的终端或服务器等，在本实施例中不做限定。

需要说明的是，异常行为对应的坐标信息可以是以经纬度为单位的标识信息，例如：北纬29.35东经106.33；可以是以地点为单位的信息，例如：XX省XX市XX区XX路XX号；还可以是用户自行设定的坐标规则信息，例如XX区、XX会议室X排X座、XX病房XX床、XX楼层、XX包厢等。

在一些实施例中，数据处理模块还包括至少一个第一卷积神经网络；数据初步处理模块还用于获取疑似异常行为所在的行为类别；

数据处理模块还用于获取与疑似异常行为所在的行为类别对应的第一卷积神经网络，通过第一卷积神经网络根据当前状态图像判定疑似异常行为是否是异常行为。

需要说明的，第一卷积神经网络包括深度卷积神经分类网络，第一卷积神经网络的分类可以根据用户的需求进行限定，本实施例中不做限定。例如，当前获取的疑似异常行为为在教室中跑动，可以将该疑似异常行为分类为教室类，可以设定与疑似异常行为所在的行为类别教室类对应的深度卷积神经分类网络为教室深度卷积神经分类网络，进而将该疑似异常行为所对应获取的当前状态图像发送传输给该教室深度卷积神经分类网络，教室深度卷积神经分类网络接收到该当前状态图像后对其进行判定。

在一些实施例中，可以包括多个行为类别分别一一对应不同的第一卷积神经网络，还可以多个行为类别对应同一个第一卷积神经网络，第一卷积神经网络的数量在此不做限定，用户可以根据需要设定。

本发明实施例中的第一卷积神经网络是通过对预先建立的卷积神经网络进行预设行为类别的经人工标注完成的异常行为样本深度学习完成后得到的第一卷积神经网络。通过该第一卷积神经网络可以根据获取到的当前状态图像进一步判定疑似异常行为是否是异常行为。

在一些实施例中，数据初步处理模块4012，还用于获取疑似异常行为的置信度；

如图6所示，异常行为判定装置400还包括阈值判断模块601，阈值判断模块601还用于若所述疑似异常行为的置信度大于预设阈值，则将所述疑似异常行为作为目标疑似异常行为。

在一些实施例中，当阈值判断模块601确定了目标疑似异常行为后，图像获取模块4013，用于获取目标疑似异常行为所在区域的当前状态图像。

此时，可以仅针对置信度达到一定标准的目标疑似异常行为进行获取当前状态图像，而对于置信度未达标的疑似异常行为，则不再进行后续的判断，节约的资源占用，提升了判定效率。

需要说明的是，此时当前状态图像的拍摄区域可以是以疑似异常行为所在的坐标为中心，向四周或预设的方向扩张预设范围后得到的当前状态图像。例如：获取到疑似异常行为所在的坐标信息为高1.2米，距离3米，宽1米，此时当前状态图像所针对的区域可以是高1-1.5米，距离3米，宽0.8-1.3米的范围。

在一些实施例中，包括坐标信息的区域的当前状态图像可以通过控制调整摄像机云台进而控制摄像设备的摄像角度来获取，和/或，通过控制摄像设备的参数例如焦距、水平分辨率、信噪比等来来获取。有时疑似异常行为的坐标位置与当前摄像设备的角度刚好一致，则可以仅通过调整摄像设备的参数来获取当前状态图像。需要说明的是，摄像设备包括但不限于摄像机等可以进行监控拍摄的设备。

在一些实施例中，在获取到异常行为所在的坐标信息后，可以对照该坐标信息来控制摄像机云台调整仰角、水平角度和摄像机焦距，使摄像机对准疑似异常行为的区域来获取针对性的当前状态图像。例如：调整云台仰角和水平角度对准异常行为区域中心点。调整焦距让摄像机可以接收以疑似异常行为坐标中心点为图像中心的图像作为当前状态图像。

在一些实施例中，如图6所示，异常行为判定装置还包括排序模块602，排序模块602用于当目标疑似异常行为的数量超过1个时，获取目标疑似异常行为序列，目标疑似异常行为序列由各目标疑似异常行为所对应的疑似异常行为的置信度按照预设规则排序得到；图像获取模块4013根据目标疑似异常行为序列的顺序获取目标疑似异常行为所在区域的当前状态图像。

需要说明的是，置信度标定的规则可以是用户根据一定逻辑进行预设的，也可以是基于一些计算模型所规定的置信度规则进行标定。本领域技术人员可以采用可获的置信度计算方法对该疑似异常行为的置信度进行计算。

在一些实施例中，可以通过逻辑回归、决策树等通用的模型算法推测疑似异常行为的置信度。

需要说明的是，预设阈值可以是针对全部场景也即针对全部行为类别均设置统一的预设阈值，也可以是根据不同的行为类别分别设置对应的预设阈值，还可以是用户根据需要随时调整的预设阈值。例如：针对在车站获取监控视频中的行为信息中获取到疑似持有危险物品这一疑似异常行为，其置信度为0.8，按照初始预设阈值为0.85，此时该疑似异常行为将被排除，不会进入下一步骤，对其进行进一步分析。但当前安保等级要求提升，预设阈值设置为0.79，则，该疑似异常行为将被列为目标疑似异常行为。

需要说明的是，在一些实施例中，获取置信度在预设阈值以上的疑似异常行为作为目标疑似异常行为，也即，疑似异常行为的置信度等于预设阈值时，也将其列为目标疑似异常行为。目标疑似异常行为的设定可以根据用户的需要进行更换。

需要说明的是，当异常行为判定方法中存在从疑似异常行为中确定目标疑似异常行为的步骤时，原方法中的获取疑似异常行为所在区域的当前状态图像将随即更改换仅获取目标疑似异常行为所在区域的当前状态图像，对于那些被确定为是疑似异常行为，但不是目标疑似异常行为将不再获取其所在区域的当前状态图像，以降低***的资源占用，提升处理速度。

需要说明的是，目标疑似异常行为的置信度等于该目标疑似异常行为所对应的疑似异常行为所被标定的置信度。例如疑似异常行为所标定的置信度为0.9，预设阈值为0.8，则该疑似异常行为的置信度高于预设阈值，则区该疑似异常行为作为目标疑似异常行为，该目标疑似异常行为的置信度等于疑似异常行为的置信度等于0.9。

在一些实施例中，根据各目标疑似异常行为所对应的置信度根据预设规则对各目标疑似异常行为进行优先级排序中的预设规则可以是按照置信度的大小从高到低进行排序，也可以是根据置信度的大小针对每个行为类别的目标疑似异常行为进行从高到低排序，再根据行为类别的优先级进行排序，需要说明的是，针对包括多个行为类别的目标疑似异常行为的排序中置信度大小排序与类别优先级排序的顺序可以根据用户需求自行设定，本实施例不做限定。。例如：当前有行为类别甲类：目标疑似异常行为A的置信度0.7，目标疑似异常行为B的置信度0.75，目标疑似异常行为C的置信度0.79；行为类别乙类：目标疑似异常行为D的置信度0.7，目标疑似异常行为E的置信度0.75，目标疑似异常行为F的置信度0.79。其中预设规则是行为类别甲类优先级高于乙类，置信度越高优先级越高。则按照此预设规则对上述各目标疑似异常行为进行优先级排序的结果就是：目标疑似异常行为C>目标疑似异常行为B>目标疑似异常行为A>目标疑似异常行为F>目标疑似异常行为E>目标疑似异常行为D。

需要说明的是，在一些实施例中，预设规则也可以是按照置信度由低到高来进行优先级排序，得到目标疑似异常行为序列。

需要说明的是，根据目标疑似异常行为序列可以通过分别控制调整摄像机云台和摄像设备的参数中至少之一来获取目标疑似异常行为所在的坐标信息所对应的区域的当前状态图像。可以理解，在一些实施例中，根据各目标疑似异常行为的目标疑似异常行为序列从优先级高的的目标疑似异常行为所在的坐标信息控制调整摄像机云台和摄像设备参数中至少之一来获取包括相应目标疑似异常行为所在的坐标信息的区域的当前状态图像。例如，目标疑似异常行为A的在目标疑似异常行为序列中的排序高于目标疑似异常行为B的优先级，则先控制调整摄像机云台和摄像设备参数中至少之一来获取包括目标疑似异常行为A所在的坐标信息的区域的当前状态图像，再控制调整摄像机云台和摄像设备参数中至少之一来获取包括目标疑似异常行为B所在的坐标信息的区域的当前状态图像。

在一些实施例中，获取到目标疑似异常行为的位置信息后，将该位置信息于摄像机当前位置进行对比，调整调整云台仰角和水平角度对准异常行为区域中心点。调整焦距让摄像机可以接收以疑似异常行为坐标中心点为图像中心的图像来获取当前状态图像。对于当前存在多个目标疑似异常行为时，可以按照各目标疑似异常行为目标疑似异常行为序列的顺序重复上述步骤，直到获取到所有的目标疑似异常行为的当前状态图像。

在一些实施例中，数据初步处理模块包括第二卷积神经网络，在一些实施例中，第二卷积神经网络包括小型卷积神经网络，可以通过在前端摄像机上布置的小型卷积神经网络，直接在摄像机加载的GPU上进行计算。

需要说明的是，在一些实施例中，通过第二卷积神经网络可以初步确定全部行为类别的疑似异常行为。

在一些实施例中，第二卷积神经网络通过以下方式获取，建立人工标注完成的全类别的异常行为样本，预先设置的全类别的卷积神经网络对上述样本进行学习，并进行置信度标定训练，学习、训练完成后得到的卷积神经网络作为第二卷积神经网络。该第二卷积神经网络可以对获取到的行为数据进行计算分析，从中筛选出疑似异常行为，并标定该疑似异常行为的置信度，得到该疑似异常行为的位置信息。

需要说明的是，本实施例中的行为数据可以是人的行为数据，也可以是动物的行为数据，还可以是一些机械设备等具有动作的事物。例如，可以获取保护区中目标监控范围中的行为数据，其中包括一只大熊猫在爬树，另一只考拉在树下发呆。此时可以通过小型卷积神经网络确定大熊猫在爬树是疑似异常行为A，考拉在树下发呆为疑似异常行为B。又例如，工厂中某传送带正常工作是以5米每秒的速度在运转，但在监控视频中的行为数据中提取到该传送带的状态时静止不动的，则可以确定该传送带静止为疑似异常行为。

下面结合一个具体的实施例对本发明所提供的异常行为判定装置进行进一步的说明。

参见图7，如图7所示，异常行为判定装置700包括：至少一个视频监控模块701、控制数据传输模块702、阈值判断模块703、排序模块704以及数据处理模块705其中：

视频监控模块701包括数据获取模块7011、数据初步处理模块7012和图像获取模块7013，其中一个数据获取模块7011主要负责其所监控区域的图像获取及行为数据获取，其中，行为数据包括但不限于图像。数据获取模块7011将图像传输给数据初步处理模块7012，数据初步处理模块7012包括摄像机前端的小型卷积神经网络以及GPU，通过小型卷积神经网络及GPU将接收到的图像计算后输出疑似异常行为和人员基本信息，其中，人员基本信息包括但不限于人员姓名、职位、所属类别、性别、年龄、工号等信息。需要说明的是，小型卷积神经网络对于异常的行为检测有很高召回率，对于一份行为数据中的疑似异常行为的差全度较高，例如某行为数据中存在5个疑似异常行为，该小型卷积神经网络可以查找到全部5个疑似异常行为。高召回率主要是由于本发明实施例所使用的小型卷积神经网络是经前期通过大量人工标注完成的异常行为样本的训练学习所保证的。图像获取模块7013可通过完成对摄像机云台角度和摄像机焦距等的调整，主要接收控制模块发送的坐标信息，通过调整摄像机云台角度和焦距等参数来获取针对于坐标信息所在区域清晰的图像信息。需要说明的是，小型卷积神经网络还用于获取疑似异常行为的执行度，通过小型卷积神经网络对疑似异常行为进行置信度标定，并将包括置信度的疑似异常行为传输给阈值判断模块进行进一步处理。

异常行为判定装置700还包括，控制数据传输模块702、阈值判断模块703和排序模块704，其中，阈值判断模块703接收视频监控模块中发送的包括置信度的疑似异常行为，并对此信息通过排序模块对疑似异常行为根据其所对应的置信度完成排序，将比预设阈值大的疑似异常行为发送到图像获取模块7013。这里的阈值为0-1之间的值，可以通过不同场景的测试集来获取一个较优值，一般对于特别敏感的区域，可以选择较低的值来提取更低异常行为置信度的疑似区域，并发送给图像获取模块7013。图像获取模块7013接收阈值判断模块703发送的疑似异常行为所在的坐标信息，控制摄像机云台调整仰角、水平角度和摄像机焦距，使摄像机对准疑似异常行为的区域来获取针对性的图像数据。控制数据传输模块接收针对于疑似异常行为区域的图像，然后将图像缩小为240*135像素大小，然后编码传输至数据处理模块。需要说明的是，此处还可以将图像统一为PNG等格式。

数据处理模块主要有高性能的GPU集群和针对异常行为的深度卷积神经分类网络。此模块接收控制数据传输模块发送的图像，用深度卷积神经网络对其进一步确认。对于确认异常行为的信息，推算回原始图像位置，最后输出确认异常行为警报和对应的坐标信息。

需要说明的是，其中数据处理模块所输出的对应的坐标信息可以是数据处理模块所计算得到的坐标信息，也可以是数据处理模块将接收到图像所包括的阈值判断模块所发送的疑似异常行为所在的坐标信息直接输出。

需要说明的是，疑似异常行为所对应的坐标信息可以是通过阈值判断模块进行计算得到的，也可以是通过小型卷积神经网络所计算得到的。

需要说明的是，异常行为判定装置，可以包括多个视频监控模块，多个视频监控模块可以对应同一个或者多个数据处理模块。在一些实施例中，多个视频监控模块对应多个阈值判断模块、控制数据传输模块和排序模块，各阈值判断模块、控制数据传输模块和排序模块对应同一个数据处理模块。

需要说明的是，上述各模块仅是做了一种示例性的分区，其中数据处理模块与阈值判断模块、控制数据传输模块和排序模块可以分属于同一模块。

在一些实施例中，数据处理模块位于整个异常行为判定装置的后端，而视频监控模块和控制模块位于异常行为判定装置的前端。

通过本实施例所提供的异常行为判定装置的使用，对于一个监控场景，例如会议室、教室等仅需要布置一个数据获取模块，例如，布置一个摄像头，极大降低了安装的复杂度。极大减轻了数据处理模块处理的负荷，加速了信息处理速度：数据处理模块不需要处理每一帧数据获取模块所获取的数据，仅仅处理疑似异常行为置信度高于预设阈值的部分帧。对于处理的部分帧，也经过了归一化，极大减少了数据量，降低了信息传输和数据处理的负荷，提高了检测判断准确度。另外极大提高了对于异常行为检测的准确性：对于这样的行为数据分为两步判断，包括第一步视频监控模块的通过第二卷积神经网络进行的初次判定后，选取疑似异常行为，再针对疑似异常行为调整云台和摄像头参数获取疑似异常行为区域清晰的当前状态图像，控制数据传输模块归一化后传输给数据处理模块，第二步数据处理模块利用有针对性的第一卷积神经网络例如深度卷积神经分类网络对第一步提取的当前状态图像再次检测判定。第二步获得的当前状态图像更清晰且有针对性。经过第二步深度卷积神经网络的再判断，明显提高了准确度。

本实施例公开了一种异常行为判定装置，包括：至少一个视频监控模块和数据处理模块，其中：视频监控模块包括：数据获取模块，用于获取监控视频中的行为数据；数据初步处理模块，从行为数据中确定至少一个疑似异常行为；图像获取模块，获取疑似异常行为所在区域的当前状态图像；数据处理模块，用于根据当前状态图像判定疑似异常行为是否是异常行为。通过本实施例的实施不仅可以有效利用计算资源，还可以提升对异常行为判定准确的准确性，降低了资源占用，提升了处理速度。

实施例三：

本实施例还提供了一种异常行为判定终端，参见图8所示，其包括处理器81、存储器83及通信总线82，其中：

通信总线82用于实现处理器81和存储器83之间的连接通信；

处理器81用于执行存储器83中存储的一个或者多个计算机程序，以实现上述各实施例中的异常行为判定方法中的至少一个步骤。

实施例四：

本实施例还提供了一种计算机可读存储介质，该计算机可读存储介质包括在用于存储信息(诸如计算机可读指令、数据结构、计算机程序模块或其他数据)的任何方法或技术中实施的易失性或非易失性、可移除或不可移除的介质。计算机可读存储介质包括但不限于RAM(Random Access Memory，随机存取存储器),ROM(Read-Only Memory，只读存储器),EEPROM(Electrically Erasable Programmable read only memory，带电可擦可编程只读存储器)、闪存或其他存储器技术、CD-ROM(Compact Disc Read-Only Memory，光盘只读存储器)，数字多功能盘(DVD)或其他光盘存储、磁盒、磁带、磁盘存储或其他磁存储装置、或者可以用于存储期望的信息并且可以被计算机访问的任何其他的介质。

本实施例中的计算机可读存储介质可用于存储一个或者多个计算机程序，其存储的一个或者多个计算机程序可被处理器执行，以实现上述各实施例中的异常行为判定方法的至少一个步骤。

本实施例还提供了一种计算机程序(或称计算机软件)，该计算机程序可以分布在计算机可读介质上，由可计算装置来执行，以实现上述各实施例中的异常行为判定方法的至少一个步骤；并且在某些情况下，可以采用不同于上述实施例所描述的顺序执行所示出或描述的至少一个步骤。

应当理解的是，在某些情况下，可以采用不同于上述实施例所描述的顺序执行所示出或描述的至少一个步骤。

本实施例还提供了一种计算机程序产品，包括计算机可读装置，该计算机可读装置上存储有如上所示的计算机程序。本实施例中该计算机可读装置可包括如上所示的计算机可读存储介质。

可见，本领域的技术人员应该明白，上文中所公开方法中的全部或某些步骤、***、装置中的功能模块/单元可以被实施为软件(可以用计算装置可执行的计算机程序代码来实现)、固件、硬件及其适当的组合。在硬件实施方式中，在以上描述中提及的功能模块/单元之间的划分不一定对应于物理组件的划分；例如，一个物理组件可以具有多个功能，或者一个功能或步骤可以由若干物理组件合作执行。某些物理组件或所有物理组件可以被实施为由处理器，如中央处理器、数字信号处理器或微处理器执行的软件，或者被实施为硬件，或者被实施为集成电路，如专用集成电路。

此外，本领域普通技术人员公知的是，通信介质通常包含计算机可读指令、数据结构、计算机程序模块或者诸如载波或其他传输机制之类的调制数据信号中的其他数据，并且可包括任何信息递送介质。所以，本发明不限制于任何特定的硬件和软件结合。

以上内容是结合具体的实施方式对本发明实施例所作的进一步详细说明，不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干简单推演或替换，都应当视为属于本发明的保护范围。

Claims (11)

1.一种异常行为判定方法，其特征在于，所述异常行为判定方法包括：

获取监控视频中的行为数据；

从所述行为数据中确定至少一个疑似异常行为；

获取所述疑似异常行为所在区域的当前状态图像；

根据所述当前状态图像判定所述疑似异常行为是否是异常行为。

2.如权利要求1所述的异常行为判定方法，其特征在于，所述从所述行为数据中确定至少一个疑似异常行为包括：

获取所述疑似异常行为的置信度；

若所述疑似异常行为的置信度大于预设阈值，则将所述疑似异常行为作为目标疑似异常行为。

3.如权利要求2所述的异常行为判定方法，其特征在于，所述获取所述疑似异常行为所在区域的当前状态图像包括：

获取所述目标疑似异常行为所在区域的当前状态图像。

4.如权利要求3所述的异常行为判定方法，其特征在于，

当所述目标疑似异常行为的数量超过1个时，

所述获取目标疑似异常行为所在区域的当前状态图像包括：

获取所述目标疑似异常行为序列，所述目标疑似异常行为序列由各所述目标疑似异常行为所对应的疑似异常行为的置信度按照预设规则排序得到；

根据所述目标疑似异常行为序列的顺序获取所述目标疑似异常行为所在区域的当前状态图像。

5.如权利要求1-4任一项所述的异常行为判定方法，其特征在于，所述获取所述疑似异常行为所在区域的当前状态图像之后，所述根据所述当前状态图像并判定所述疑似异常行为是否是异常行为之前还包括：

对所述当前状态图像进行归一化处理。

6.如权利要求1-4任一项所述的异常行为判定方法，其特征在于，所述根据所述当前状态图像并判定所述疑似异常行为是否是异常行为还包括：

若判定所述疑似异常行为是异常行为，输出以下信息中至少之一：

异常行为警报信息；

所述异常行为对应的坐标信息。

7.如权利要求1-4任一项所述的异常行为判定方法，其特征在于，所述根据所述当前状态图像并判定所述疑似异常行为是否是异常行为包括：

获取所述疑似异常行为所在的行为类别；

获取与所述疑似异常行为所在的行为类别对应的第一卷积神经网络；

通过所述第一卷积神经网络根据所述当前状态图像判定所述疑似异常行为是否是异常行为。

8.如权利要求1-4任一项所述的异常行为判定方法，其特征在于，所述从所述行为数据中确定至少一个疑似异常行为包括：

通过第二卷积神经网络从所述行为数据中确定至少一个疑似异常行为。

9.一种异常行为判定装置，其特征在于，所述异常行为判定装置包括：至少一个视频监控模块和数据处理模块，其中：

所述视频监控模块包括：

数据获取模块，用于获取监控视频中的行为数据；

数据初步处理模块，用于从所述行为数据中确定至少一个疑似异常行为；

图像获取模块，用于获取所述疑似异常行为所在区域的当前状态图像；

所述数据处理模块，用于根据所述当前状态图像判定所述疑似异常行为是否是异常行为。

10.一种异常行为判定终端，其特征在于，所述异常行为判定终端包括：处理器、存储器及通信总线；

所述通信总线用于实现处理器和存储器之间的连接通信；

所述处理器用于执行存储器中存储的一个或者多个计算机程序，以实现如权利要求1至8中任一项所述的异常行为判定方法的步骤。

11.一种可读存储介质，其特征在于，所述可读存储介质存储有一个或者多个计算机程序，所述一个或者多个计算机程序可被一个或者多个处理器执行，以实现如权利要求1至8中任一项所述的异常行为判定方法的步骤。

Images