CN114170318A - 图像处理方法、装置、***、介质及电子设备 - Google Patents

Abstract

本公开实施例提供了一种图像处理方法、装置、***、介质及电子设备，属于计算机技术领域。该方法包括：获取抓拍区域的背景图像；获取标定物品通过安检设备开始扫描的初始时刻；获取标定物品至少部分处于抓拍区域的抓拍图像；根据背景图像和抓拍图像，从抓拍图像中确定包括标定物品的完整外观的目标图像；获取目标图像的截取时刻；根据目标图像的截取时刻和初始时刻，获得标定物品通过安检设备至抓拍区域的抓拍延迟时间。通过本公开实施例提供的技术方案，通过自动获取标定物品通过安检设备开始扫描至通过安检设备的抓拍区域的抓拍延迟时间，能够在大规模部署场景中，提高标定安检设备的抓拍延迟时间的工作效率与准确率。

Description

图像处理方法、装置、***、介质及电子设备

技术领域

本公开涉及计算机技术领域，具体而言，涉及一种图像处理方法、装置及***、计算机可读存储介质和电子设备。

背景技术

目前，图像处理与分析技术广泛应用于机场、火车站、海关、边检、码头以及地铁站等区域的物品安检中。安检设备通过扫描被检测物品，生成扫描图像，有助于对其内部违禁品(包括但不限于为危险品)的识别。如果同时需要获取被检测物品的外观图像，比如需要通过外观图像来定位开包物品时，一般会在安检设备的出口的传送装置(如传送带)的上方加装图像采集装置(如摄像头)，采用抓拍的方式获取被检测物品的外观。

正常情况下，安检设备的传送带的转动速度相对浮动较小，可以认为传送带速度不变。因此从被检测物品开始扫描，至被检测物品到达传送带上适合拍摄的位置的时间，基本是固定的。可以通过传送带的速度，摄像头的安装位置和角度大致估算出抓拍所需的延迟时间，再通过实际测试和调整最终确定合适的抓拍延迟时间，使得被检测物品可以在合适的时间出现在抓拍区域中。如此一来，摄像头抓拍获取的被检测物品外观图像就能够正确对应被检测物品的扫描图像。

但是由于不同安检设备的型号、尺寸、传送带运行速度均存在差异，并且现场实际情况中对被检测物品外观进行抓拍的摄像头的安装位置、角度也存在差异。因此需要对每台安检设备进行单独的抓拍延迟时间的估算，并进行测试和调整。这在大规模部署的场景下将会带来巨大的工作量。

同时已有方案中，抓拍延迟时间的调整需要人工来完成，而任何人工干预的工作都可能存在人为误差，那么如果抓拍延迟时间设定的偏差过大，将直接导致被检测物品的外观图像无法被抓拍到，或者导致被检测物品的扫描图像和外观图像对应有误。

因此，需要一种新的图像处理方法、图像处理装置、图像处理***、计算机可读存储介质及电子设备。

需要说明的是，在上述背景技术部分发明的部分仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

本公开实施例的目的在于提供一种新的图像处理方法、图像处理装置、图像处理***、计算机可读存储介质及电子设备，进而至少在一定程度上克服了人工标定安检设备存在的工作效率低和准确率低的问题。

本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本公开的实践而习得。

本公开实施例提供了一种图像处理方法，所述方法包括：获取抓拍区域的背景图像；获取标定物品通过安检设备开始扫描的初始时刻；获取所述标定物品至少部分处于所述抓拍区域的抓拍图像；根据所述背景图像和所述抓拍图像，从所述抓拍图像中确定包括所述标定物品的完整外观的目标图像；获取所述目标图像的截取时刻；根据所述目标图像的截取时刻和所述初始时刻，获得所述标定物品通过所述安检设备至所述抓拍区域的抓拍延迟时间。

本公开实施例提供了一种图像处理装置，所述装置包括：背景图像获取单元，用于获取抓拍区域的背景图像；初始时刻获得单元，用于获取标定物品通过安检设备开始扫描的初始时刻；抓拍图像获取单元，获取所述标定物品至少部分处于所述抓拍区域的抓拍图像；目标图像获取单元，根据所述背景图像和所述抓拍图像，从所述抓拍图像中确定包括所述标定物品的完整外观的目标图像；截取时刻获得单元，获取所述目标图像的截取时刻；抓拍延迟时间获取单元，根据所述目标图像的截取时刻和所述初始时刻，获得所述标定物品通过所述安检设备至所述抓拍区域的抓拍延迟时间。

本公开实施例提供了一种图像处理***，所述***包括：安检设备，其包括传送装置和扫描装置；图像采集装置，其位于所述安检设备的出口的所述传送装置上方，所述图像采集装置采集图像的区域为抓拍区域；图像处理装置，用于获取所述抓拍区域的背景图像；获取标定物品通过所述安检设备开始扫描的初始时刻；获取所述标定物品至少部分处于所述抓拍区域的抓拍图像；根据所述背景图像和所述抓拍图像，从所述抓拍图像中确定包括所述标定物品的完整外观的目标图像；获取所述目标图像的截取时刻；根据所述目标图像的截取时刻和所述初始时刻，获得所述标定物品通过所述安检设备至所述抓拍区域的抓拍延迟时间。

本公开实施例提供了一种计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现如上述任一实施例中所述的图像处理方法。

本公开实施例提供了一种电子设备，包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述至少一个处理器实现如上述任一实施例中所述的图像处理方法。

在本公开中的一些实施例所提供的技术方案中，通过抓拍区域的背景图像和抓拍图像，来获得抓拍图像中包括标定物品的完整外观的目标图像，根据该目标图像相应的截取时刻和标定物品通过安检设备开始扫描的初始时刻，从而可以自动获得标定物品通过安检设备至抓拍区域的抓拍延迟时间。在大规模部署的应用场景下，将本公开实施例提供的技术方案应用在自动标定安检设备的抓拍延迟时间中，可以提高标定安检设备的抓拍延迟时间的准确率和工作效率。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理，显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动中，还可以根据这些附图获得其他的附图。在附图中：

图1示意性示出了可以应用本公开实施例的图像处理方法或图像处理装置的示例性***架构的示意图。

图2示意性示出了适于用来实现本公开实施例的电子设备的结构示意图。

图3示意性示出了根据本公开的一个实施例的图像处理方法的流程图。

图4示意性示出了本公开的一个实施例的图像抓拍过程的示意图。

图5示意性示出了本公开的一个实施例的抓拍图像采样的方法的示意图。

图6示意性示出了本公开的一个实施例的标定物品在抓拍区域的位置判定的方法的示意图。

图7示意性示出了本公开的一个实施例的图像处理装置的框图。

图8示意性示出了本公开的一个实施例的图像处理***的示意图。

具体实施方式

现在将根据参考附图更全面地描述示例实施方式。然而，示例实施方式能够以多种形式实施，且不应被理解为限于在此阐述的范例；相反，提供这些实施方式使得本公开将更加全面和完整，并将示例实施方式的构思全面地传达给本领域的技术人员。

此外，所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施例中。在下面的描述中，提供许多具体细节从而给出对本公开的实施例的充分理解。然而，本领域技术人员将意识到，可以实践本公开的技术方案而没有特定细节中的一个或更多，或者可以采用其它的方法、组元、装置、步骤等。在其它情况下，不详细示出或描述公知方法、装置、实现或者操作以避免模糊本公开的各方面。

附图中所示的方框图仅仅是功能实体，不一定必须与物理上独立的实体相对应。即，可以采用软件形式来实现这些功能实体，或在一个或多个硬件模块或集成电路中实现这些功能实体，或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。

附图中所示的流程图仅是示例性说明，不是必须包括所有的内容和操作/步骤，也不是必须按所描述的顺序执行。例如，有的操作/步骤还可以分解，而有的操作/步骤可以合并或部分合并，因此实际执行的顺序有可能根据实际情况改变。

图1示意性示出了可以应用本公开实施例的图像处理方法或图像处理装置的示例性***架构100的示意图。

如图1所示，***架构100可以包括安检设备101、图像采集装置(例如摄像头)102、网络103、终端设备104和服务器105。其中，图像采集装置102安装在安检设备101的出口的传送装置上方。工作人员可以使用安检设备101和摄像头102获取抓拍到的视频流，通过网络103与终端设备104或服务器105交互，以对视频流进行截取处理等。

应该理解，图1中的图像采集装置、终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要，可以具有任意数目的摄像头、终端设备、网络和服务器。比如摄像头102可以是两个摄像头组成的双机位摄像头。

网络103用以在安检设备101、图像采集装置102、终端设备104和服务器105之间提供通信链路的介质。网络103可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。安检设备104可以是具有各种安检仪的电子设备，包括但不限于X射线检测仪，X光行包检测仪，三品检测仪，查危仪等安检仪。服务器105可以是提供各种服务的服务器，包括但不限于云端服务器、本地服务器等。

图2示意性示出了适于用来实现本公开实施例的电子设备结构示意图。

需要说明的是，图2示出的电子设备200仅是一个示例，不应对本公开实施例的功能和使用范围带来任何限制。

如图2所示，电子设备200包括中央处理单元(CPU)201，其可以根据存储在只读存储器(ROM)202中的程序或者从存储部分208加载到随机访问存储器(RAM)203中的程序而执行各种适当的动作和处理。在RAM 203中，还存储有***操作所需的各种程序和数据。CPU201、ROM 202以及RAM 203通过总线204彼此相连。输入/输出(I/O)接口205也连接至总线204。

以下部件连接至I/O接口205：包括键盘、鼠标等的输入部分206；包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分207；包括硬盘等的存储部分208；以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分209。通信部分209经由诸如因特网的网络执行通信处理。驱动器210也根据需要连接至I/O接口205。可拆卸介质211，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器210上，以便于从其上读出的计算机程序根据需要被安装入存储部分208。

特别地，根据本公开的实施例，下文参考流程图描述的过程可以被实现为计算机软件程序。例如，本公开的实施例包括一种计算机程序产品，其包括承载在计算机可读存储介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以从网络上被下载和安装，和/或从可拆卸介质被安装。在该计算机程序被中央处理单元(CPU)执行时，执行本申请的***中限定的各种功能。

需要说明的是，本公开所示的计算机可读存储介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的***、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行***、装置或者器件使用或者与其结合使用。而在本公开中，计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读存储介质，该计算机可读存储介质可以发送、传播或者传输用于由指令执行***、装置或者器件使用或者与其结合使用的程序。计算机可读存储介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：无线、电线、光缆、RF等等，或者上述的任意合适的组合。

附图中的流程图和框图，图示了按照本公开各种实施例的***、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的***来实现，或者可以用专用硬件与计算机指令的组合来实现。

描述于本公开实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现，所描述的单元也可以设置在处理器中。其中，这些单元的名称在某种情况下并不构成对该单元本身的限定。

作为另一方面，本申请还提供了一种计算机可读存储介质，该计算机可读存储介质可以是上述实施例中描述的电子设备中所包含的；也可以是单独存在，而未装配入该电子设备中。上述计算机可读存储介质承载有一个或者多个程序，当上述一个或者多个程序被一个该电子设备执行时，使得该电子设备实现如下述实施例中所述的方法。例如，所述的电子设备可以实现如图3所示的各个步骤。

在本公开的一个实施例中提出了一种图像处理方法，以对上述相关技术中存在的技术问题进行优化处理。具体参照图3所示，该图像处理方法适用于前述实施例中所述的电子设备，可以由图1中的终端设备104或者服务器105中的任意一者执行，本公开对此不作限定。图3实施例提供的方法可以包括以下步骤S310至步骤S360：

在步骤S310中，获取抓拍区域的背景图像。

在示例性实施例中，获取抓拍区域的背景图像，可以包括：获取所述抓拍区域的图像采集装置采集的视频流；从所述视频流中选择不包括所述标定物品的图像帧作为所述背景图像。

本公开实施例提供的方法可以应用于图像处理***，可以包括：安检设备，其包括传送装置和扫描装置；图像采集装置，其位于所述安检设备的出口的所述传送装置上方，图像采集装置采集图像的区域为抓拍区域。

本公开实施例中，标定物品是指在安检设备标定抓拍延迟时间时所使用的标准物品。在标定物品通过安检设备的时候，需要抓拍到标定物品的外观。为了能够将标定物品与传送装置明显区分开，从而更好的抓拍到标定物品的外观，选择和传送装置具有明显差异的物品作为标定物品。

本公开实施例中，均以摄像头为图像采集装置为例进行举例说明。图8示意性示出了本公开中一个实施例的图像处理***的示意图。如图8所示，安检设备本体801包括扫描装置802，安检设备的出口的传送装置804上方安装有图像采集装置(如摄像头)803。传送装置804上的标定物品805，沿着安检方向807通过安检设备的扫描之后，逐渐进入图像采集装置803的图像采集区域806，即抓拍区域。截取图像采集装置803获得的视频流，可以得到每一帧抓拍到的图像帧，将得到的图像帧在服务器808或者终端设备809中进行图像识别处理，选择任一帧不包括标定物品外观的图像帧作为背景图像。本公开并不限定于此，当本公开实施例提供的技术方案应用于不同场景时，背景图像可以是任意格式的图像。

在步骤S320中，获取标定物品通过安检设备开始扫描的初始时刻。

本公开实施例中，当标定物品通过安检设备开始扫描时，安检设备的扫描装置能够通过扫描成像技术生成相应的扫描图像(包括但不限于光谱成像技术)。根据扫描图像可以识别出违禁品(包括但不限于为危险品)。当在扫描图像中发现违禁品时，为了能够快速定位包括违禁品的物品的位置，需要获取该物品通过安检设备开始扫描的初始时刻。通过扫描图像可以获得标定物品通过安检设备开始扫描的初始时刻。本公开可以使用任意的记录存储方式或装置来记录标定物品通过安检设备开始扫描的初始时刻。

在步骤S330中，获取所述标定物品至少部分处于所述抓拍区域的抓拍图像。

本公开实施例中，标定物品从安检设备的出口离开到完全进入抓拍区域的过程中，标定物品在抓拍图像中的显示范围逐渐增加，在此增加过程中，认为标定物品处于所述抓拍区域中的部分不断增加；当标定物品在抓拍图像中的显示范围增加到不再变化时，如图4的D图，认为标定物品完全进入抓拍区域；在标定物品逐渐离开抓拍区域的过程中，标定物品在抓拍图形中的显示范围逐渐减小，在此减小过程中，当标定物品在抓拍图像中的显示范围减小到0之前，认为标定物品处于所述抓拍区域中的部分不断减小，如图4的E图，且标定物品外观至少部分处于目标图像内；当标定物品在抓拍图像中的显示范围减小至0，认为标定物品已经完全离开抓拍区域，且标定物品外观不包括在目标图像内。

具体地，可以使用图像处理与分析方法对抓拍图像进行图像识别与分析，详细的分析抓拍图像内标定物品的显示部分变化的过程。如图4的A部分至图4的E部分。图4的A部分示意性示出了根据本公开的一个实施例的图像抓拍过程的示意图。其中，安检设备401包括本体402、传送装置403(以下均以传送带为例进行举例说明，但本公开并不限定于此)，本体402内部包括扫描装置，当标定物品405沿着传送方向404通过安检设备的出口406之后，逐渐到达抓拍区域407，即图像采集装置的图像采集区域。在图4的A部分中，A部分示出了抓拍区域407内不包括标定物品405的示意图；标定物品405随着传送装置403的传送逐渐从安检设备的出口406离开并进入抓拍区域407，如B部分所示；当标定物品405开始进入抓拍区域407内，抓拍图像中包括了一部分标定物品405的外观，如图4的C部分所示；接着，标定物品405完全进入了抓拍区域407，如图4的D部分所示，标定物品405首次完整进入抓拍区域407内，抓拍图像中包括标定物品405的完整外观；最后，标定物品405随着传送装置403的传送逐渐离开抓拍区域407，如图4的E部分所示。

在步骤S340中，根据所述背景图像和所述抓拍图像，从所述抓拍图像中确定包括所述标定物品的完整外观的目标图像。

在示例性实施例中，根据所述背景图像和所述抓拍图像，从所述抓拍图像中确定包括所述标定物品的完整外观的目标图像，可以包括：分别计算每一帧抓拍图像与所述背景图像之间的差异值；选取差异值最大的任一帧抓拍图像作为所述目标图像。

本公开实施例中，所述包括标定物品完整外观目标图像可以根据背景图像与抓拍图像的最大差异值来判定。为了得到每一帧抓拍图像和背景图像之间的差异值，可以利用图像处理和分析算法来分析抓拍图像，可以使用任意一种的图像分析方法(如图像灰度算法)得到背景图像和包括标定物品的抓拍图像之间每个像素点之间的像素差，将此差值进行相加并对得到的和取平均值，得到差异值，当该差异值增长到不再变化时，即为差异的最大值。在获得最大差异值的时候，表示标定物品已完全包含在当前的目标图像中。

本公开实施例中，所述包括标定物品完整外观的目标图像也可以根据背景图像与抓拍图像的最大面积占比来判定。判定方法与上述使用背景图像与抓拍图像的最大差异值来确定目标图像包括标定物品完整外观的方法一致。

在示例性实施例中，根据所述背景图像和所述抓拍图像，从所述抓拍图像中确定包括所述标定物品的完整外观的目标图像，可以包括：分别识别每一帧抓拍图像中所述标定物品的轮廓；分别计算每一帧抓拍图像中所述标定物品的轮廓与对应帧抓拍图像的面积占比；选取面积占比最大的任一帧抓拍图像作为所述目标图像。

但是由于存在传送装置(如传送带)划痕、背景杂色或图像采集装置(如摄像头)获得的视频流中的噪点，不能将最大差异值或者最大面积占比作为唯一依据来辨别标定物品的完整外观存在于抓拍区域内。

在示例性实施例中，根据所述背景图像和所述抓拍图像，从所述抓拍图像中确定包括所述标定物品的完整外观的目标图像，可以包括：分别计算每一帧抓拍图像与所述背景图像之间的差异值；从所述抓拍图像中确定首次出现的差异值最大的一帧抓拍图像，作为第一抓拍图像；获取截取时刻在所述第一抓拍图像之后的连续多帧抓拍图像；采样所述连续多帧抓拍图像中每一帧抓拍图像靠近所述安检设备的侧边的像素值；若所述连续多帧抓拍图像靠近所述安检设备的侧边的像素值满足预定条件，则判定所述连续多帧抓拍图像中的任一帧为所述目标图像。

本公开实施例中，所述包括标定物品完整外观的目标图像还可以根据背景图像与抓拍图像之间的面积占比来判定。其中，面积占比是指在包括标定物品完整外观的目标图像中，标定物品完整轮廓的面积所占抓拍图像面积的比例。

在示例性实施例中，根据所述背景图像和所述抓拍图像，从所述抓拍图像中确定包括所述标定物品的完整外观的目标图像，可以包括：分别计算每一帧抓拍图像与所述背景图像之间的面积占比；从所述抓拍图像中确定首次出现面积占比最大的一帧抓拍图像，作为第二抓拍图像；获取截取时刻在所述第二抓拍图像之后的连续多帧抓拍图像；采样所述连续多帧抓拍图像中每一帧抓拍图像靠近所述安检设备的侧边的像素值；若所述连续多帧抓拍图像靠近所述安检设备的侧边的像素值满足预定条件，则判定所述连续多帧抓拍图像中的任一帧为所述目标图像。

本公开实施例中，通过对抓拍图像中靠近安检设备的侧边的像素进行采样，确定包括完整标定物品外观的目标图像。在找到最大差异值或者最大面积占比之后，本公开实施例结合图像采样分析算法以及轮廓识别算法，确认整个标定物品的轮廓已经完整地出现在抓拍区域内，即抓拍图像内靠近安检设备出口侧边的像素采样中不包含标定物品的像素，则能够辨别出标定物品的顶部轮廓。

辨别标定物品和背景像素的方法是，连续对一定帧数的抓拍图像的靠近安检设备出口的像素值进行采样，跟踪每条采样线的变化，如图5中C部分所示，靠近安检设备侧边的方格框线即为采样线501。若满足抓拍图像中具有完整标定物品的预定条件，也就是说采样线501得到的采样值在一定阈值范围内浮动或者无变化，可以认为采样线501中的内容不再改变，采样中的像素全部来自背景画面，认为标定物品已完全进入抓拍区域内。若采样值在连续一定帧数内发生了变化，则抓取图像中包括标定物品的部分外观，如图5中A部分所示；若在连续一定帧数内采样均无变化，可确定抓取图像中包括标定物品的完整外观，如图5中的B部分至D部分。

在示例性实施例中，根据所述背景图像和所述抓拍图像，从所述抓拍图像中确定包括所述标定物品的完整外观的目标图像，可以包括：识别所述目标抓拍图像的轮廓；获得所述目标抓拍图像的轮廓的外接规则几何形状；获得所述目标抓拍图像的轮廓的外接规则几何形状的中心点；确定所述外接规则几何形状的中心点处于所述抓拍区域垂直于所述安检设备的传送带中心轴线方向的中心线上的目标抓拍图像为所述目标图像。

本公开实施例中，所述目标抓拍图像的轮廓外接规则几何形状是包括且不限于方形、五边形等多边形、圆形中的任意一种，本公开以矩形为例举例说明，所述目标抓拍图像轮廓外接矩形的中心点可以通过以下方法计算得到：

上述矩形包括4个顶点(x₀,y₀),(x₁,y₁),(x₂,y₂),(x₃,y₃)，多边形的面积A为：

多边形的中心点(C_x,C_y)由下式给出：

根据标定物品轮廓在抓拍图像中的所处位置，可以得到标定物品居中于抓拍图像中的较好抓拍位置的目标图像。识别抓拍图像中的标定物品的轮廓，获得标定物品轮廓的外接矩形的中心点。根据外接矩形中心点在传送带中心轴线方向上的位置来判断标定物品在抓拍区域内所处的位置，如图6中A部分所示。

在步骤S350中，获取所述目标图像的截取时刻。

本公开实施例中，获取所述目标图像的截取时刻。计算每一帧抓拍图像和背景图像之间的差异值或面积占比，选择任一帧差异值或面积占比最大的抓拍图像，作为包括完整标定物品外观的目标图像。如图4中的D部分所示，标定物品首次完整出现在抓拍图像中时，可以作为第一抓拍图像，可以获得相应的截取时刻。

本公开实施例中，获取所述目标图像的截取时刻。采用对抓拍图像中靠近安检设备的侧边的像素进行采样的方法，确定包括完整标定物品外观的目标图像。当采样线内的像素值保持在一定阈值内呈现动态波动或者呈现不变状态，说明标定物品完整出现在抓拍图像中，如图5的B部分至D部分。其中，图5的D部分与B部分、C部分相比，D部分示出了标定物品居中于抓拍图像的目标图像，此时能够得到抓拍效果的目标图像，记录对应目标图像的截取时刻。

本公开实施例中，获取所述目标图像的截取时刻。采用相对较佳的抓拍位置可以得到标定物品尽量居于抓拍区域中心时的抓拍图像。如图6所示，图6示意性示出了本公开的一个实施例的标定物品在抓拍区域的位置判定的方法的示意图。在图6的B部分中，随着每一帧抓拍图像的变化，标定物品的轮廓外接矩形601的中心点602，沿着传送带中心轴线方向604上移动，当其到达并落在抓拍区域垂直于传送装置(如传送带)中心轴线方向的中心线603上时，图像处理***记录对应抓取图像的截取时刻。其中图6的B部分采用相对较佳的抓拍位置，相比于A部分具有更好的抓拍效果。

在步骤S360中，根据所述目标图像的截取时刻和所述初始时刻，获得所述标定物品通过所述安检设备至所述抓拍区域的抓拍延迟时间。

在示例性实施例中，根据所述目标图像的截取时刻和所述初始时刻，获得所述标定物品通过所述安检设备至所述抓拍区域的抓拍延迟时间，包括：根据所述目标图像的截取时刻和所述初始时刻，获得所述标定物品通过所述安检设备至所述抓拍区域的初始抓拍延迟时间；取所述初始抓拍延迟时间的平均值作为所述抓拍延迟时间。

本公开实施例中，根据所述目标图像的截取时刻和所述初始时刻，获得所述标定物品通过所述安检设备至所述抓拍区域的初始抓拍延迟时间。通过将所述初始时刻作为t1，通过将上述目标图像的截取时间作为t2，可以得到标定物品通过所述安检设备至所述抓拍区域的抓拍延迟时间(t2-t1)。

本公开实施例中，取所述初始抓拍延迟时间的平均值作为所述抓拍延迟时间。单次得到的抓拍延迟时间可能存在误差，为了获取更加准确的抓拍延迟时间，本公开多次标定抓拍延迟时间(t2-t1)，并取平均值，得到更加准确的抓拍延迟时间。

本公开实施例提出的图像处理方法，可以是一种基于安检设备对标定物品外观的抓拍延迟时间进行标定的方式，获取标定物品通过安检设备开始扫描的初始时刻，截取安检设备的摄像头拍摄到的视频流，可以得到一系列的抓拍的图像帧，选择任一帧不包括标定物品的图像帧作为背景图像，在该背景图像之后的连续抓拍到的图像帧中，选择包括完整标定物品的抓拍图像作为目标图像，利用目标图像的截取时间和初始时刻相减得到差值，就是相应的抓拍延迟时间。

根据本公开实施例中提出的方法，可以在实际应用场景中用于标定安检设备的被检测物品的抓拍延迟时间。被检测物品是指需要使用安检设备进行检测的物品。

在示例性实施例中，包括：获取被检测物品通过所述安检设备开始扫描的起始时刻，并获取所述被检测物品的扫描图像；识别所述扫描图像，确定所述被检测物品中包括违禁品；根据所述起始时刻和所述抓拍延迟时间，确定所述被检测物品处于所述抓拍区域的到达时间；根据所述到达时间获取包括所述被检测物品的完整外观的目标图像；利用所述目标图像确定所述被检测物品为目标开包物品。

本公开实施例中，可以通过图像采集装置获取被检测物品的扫描图像，同时得到被检测物品通过所述安检设备开始扫描的起始时刻，对扫描图像进行识别，确定被检测物品中包括违禁品时，需要对被检测物品进行开包检查。其中，需要进行开包检查的被检测物品就是指目标开包物品。将起始时刻和被检测物品的抓拍延迟时间进行相加，可以得到被检测物品到达抓拍区域的到达时间，根据到达时间可以获取相应的包括所述被检测物品完整外观的目标图像。确定该目标图像中的被检测物品的完整外观和目标开包物品的外观一致之后，可以对目标开包物品进行开包检查。

本公开实施例提供的方法提高了大规模部署场景中的工作效率，并且一定程度上可以降低人工误差。

以下介绍本公开的装置实施例，可以用于执行本公开上述的图像处理方法。对于本公开装置实施例中未披露的细节，请参照本公开上述的图像处理方法的实施例。

图7示意性的示出了根据本公开的一个实施例的图像处理装置的框图，参照图7所示，根据本公开的一个实施例的图像处理装置700可以包括：背景图像获取单元710、初始时刻获得单元720、抓拍图像获取单元730、目标图像获取单元740、截取时刻获得单元750、以及抓拍延迟时间获取单元760。

其中，背景图像获取单元710可以用于获取抓拍区域的背景图像。初始时刻获得单元720可以用于获取标定物品通过安检设备开始扫描的初始时刻。抓拍图像获取单元730可以用于获取所述标定物品至少部分处于所述抓拍区域的抓拍图像。目标图像获取单元740可以用于根据所述背景图像和所述抓拍图像，从所述抓拍图像中确定包括所述标定物品的完整外观的目标图像。截取时刻获得单元750可以用于获取所述目标图像的截取时刻。抓拍延迟时间760获取单元可以用于根据所述目标图像的截取时刻和所述初始时刻，获得所述标定物品通过所述安检设备至所述抓拍区域的抓拍延迟时间。

在示例性实施例中，目标图像获取单元740可以包括：差异值计算单元，可以用于分别计算每一帧抓拍图像与所述背景图像之间的差异值；目标选取单元，可以用于选取差异值最大的任一帧抓拍图像作为所述目标图像。

在示例性实施例中，目标图像获取单元740可以包括：轮廓识别单元，分别识别每一帧抓拍图像中所述标定物品的轮廓；面积占比计算单元，分别计算每一帧抓拍图像中所述标定物品的轮廓与对应帧抓拍图像的面积占比；目标选取单元，选取面积占比最大的任一帧抓拍图像作为所述目标图像。

在示例性实施例中，目标图像获取单元740可以包括：差异值计算单元，分别计算每一帧抓拍图像与所述背景图像之间的差异值；第一抓拍图像获取单元，从所述抓拍图像中确定首次出现的差异值最大的一帧抓拍图像，作为第一抓拍图像；连续多帧抓拍图像获取单元，获取截取时刻在所述第一抓拍图像之后的连续多帧抓拍图像；采样单元，采样所述连续多帧抓拍图像中每一帧抓拍图像靠近所述安检设备的侧边的像素值；目标选取单元，若所述连续多帧抓拍图像靠近所述安检设备的侧边的像素值满足预定条件，则判定所述连续多帧抓拍图像中的任一帧为所述目标图像。

在示例性实施例中，目标图像获取单元740可以包括：面积占比计算单元，分别计算每一帧抓拍图像与所述背景图像之间的面积占比；第二抓拍图像获取单元，从所述抓拍图像中确定首次出现面积占比最大的一帧抓拍图像，作为第二抓拍图像；连续多帧抓拍图像获取单元，获取截取时刻在所述第二抓拍图像之后的连续多帧抓拍图像；采样单元，采样所述连续多帧抓拍图像中每一帧抓拍图像靠近所述安检设备的侧边的像素值；目标选取单元，若所述连续多帧抓拍图像靠近所述安检设备的侧边的像素值满足预定条件，则判定所述连续多帧抓拍图像中的任一帧为所述目标图像。

在示例性实施例中，目标图像获取单元740可以包括：轮廓识别单元，识别所述目标抓拍图像的轮廓；轮廓形状获取单元，获得所述目标抓拍图像的轮廓的外接规则几何形状；轮廓形状中心点获取单元，获得所述目标抓拍图像的轮廓的外接规则几何形状的中心点；目标选取单元，确定所述外接规则几何形状的中心点处于所述抓拍区域垂直于所述安检设备的传送装置中心轴线方向的中心线上的目标抓拍图像为所述目标图像。

在示例性实施例中，背景图像获取单元710可以包括：

视频流获取单元，获取所述抓拍区域的图像采集装置采集的视频流；背景选取单元，从所述视频流中选择不包括所述标定物品的图像帧作为所述背景图像。

在示例性实施例中，抓拍延时时刻获取单元760可以包括：

初始抓拍延时时刻获取单元，根据所述目标图像的截取时刻和所述初始时刻，获得所述标定物品通过所述安检设备至所述抓拍区域的初始抓拍延迟时间；平均值获取单元，取所述初始抓拍延迟时间的平均值作为所述抓拍延迟时间。

在示例性实施例中，所述方法的图像处理装置还包括：扫描图像获取单元，获取被检测物品通过所述安检设备开始扫描的起始时刻，并获取所述被检测物品的扫描图像；扫描图像识别单元，识别所述扫描图像，确定所述被检测物品中包括违禁品；到达时间获取单元，根据所述起始时刻和所述抓拍延迟时间，确定所述被检测物品处于所述抓拍区域的到达时间；目标获取单元，根据所述到达时间获取包括所述被检测物品的完整外观的目标图像；目标开包物品获取单元，利用所述目标图像确定所述被检测物品为目标开包物品。

应当注意，尽管在上文详细描述中提及了用于动作执行的设备的若干单元，但是这种划分并非强制性的。实际上，根据本公开的实施方式，上文描述的两个或更多单元的特征和功能可以在一个单元中具体化。反之，上文描述的一个单元的特征和功能可以进一步划分为由多个单元来具体化。

通过以上的实施方式的描述，本领域的技术人员易于理解，这里描述的示例实施方式可以通过软件实现，也可以通过软件结合必要的硬件的方式来实现。因此，根据本公开实施方式的技术方案可以以软件产品的形式体现出来，该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM，U盘，移动硬盘等)中或网络上，包括若干指令以使得一台计算设备(可以是个人计算机、服务器、触控终端、或者网络设备等)执行根据本公开实施方式的方法。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。

应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由权利要求来限制。

Claims (13)

1.一种图像处理方法，其特征在于，包括：

获取抓拍区域的背景图像；

获取标定物品通过安检设备开始扫描的初始时刻；

获取所述标定物品至少部分处于所述抓拍区域的抓拍图像；

根据所述背景图像和所述抓拍图像，从所述抓拍图像中确定包括所述标定物品的完整外观的目标图像；

获取所述目标图像的截取时刻；

根据所述目标图像的截取时刻和所述初始时刻，获得所述标定物品通过所述安检设备至所述抓拍区域的抓拍延迟时间。

2.根据权利要求1中所述的方法，其特征在于，根据所述背景图像和所述抓拍图像，从所述抓拍图像中确定包括所述标定物品的完整外观的目标图像，包括：

分别计算每一帧抓拍图像与所述背景图像之间的差异值；

选取差异值最大的任一帧抓拍图像作为所述目标图像。

3.根据权利要求1中所述的方法，其特征在于，根据所述背景图像和所述抓拍图像，从所述抓拍图像中确定包括所述标定物品的完整外观的目标图像，包括：

分别识别每一帧抓拍图像中所述标定物品的轮廓；

分别计算每一帧抓拍图像中所述标定物品的轮廓与对应帧抓拍图像的面积占比；

选取面积占比最大的任一帧抓拍图像作为所述目标图像。

4.根据权利要求1中所述的方法，其特征在于，根据所述背景图像和所述抓拍图像，从所述抓拍图像中确定包括所述标定物品的完整外观的目标图像，包括：

分别计算每一帧抓拍图像与所述背景图像之间的差异值；

从所述抓拍图像中确定首次出现的差异值最大的一帧抓拍图像，作为第一抓拍图像；

获取截取时刻在所述第一抓拍图像之后的连续多帧抓拍图像；

采样所述连续多帧抓拍图像中每一帧抓拍图像靠近所述安检设备的侧边的像素值；

若所述连续多帧抓拍图像靠近所述安检设备的侧边的像素值满足预定条件，则判定所述连续多帧抓拍图像中的任一帧为所述目标图像。

5.根据权利要求1中所述的方法，其特征在于，根据所述背景图像和所述抓拍图像，从所述抓拍图像中确定包括所述标定物品的完整外观的目标图像，包括：

分别计算每一帧抓拍图像与所述背景图像之间的面积占比；

从所述抓拍图像中确定首次出现面积占比最大的一帧抓拍图像，作为第二抓拍图像；

获取截取时刻在所述第二抓拍图像之后的连续多帧抓拍图像；

采样所述连续多帧抓拍图像中每一帧抓拍图像靠近所述安检设备的侧边的像素值；

若所述连续多帧抓拍图像靠近所述安检设备的侧边的像素值满足预定条件，则判定所述连续多帧抓拍图像中的任一帧为所述目标图像。

6.根据权利要求1中所述的方法，其特征在于，根据所述背景图像和所述抓拍图像，从所述抓拍图像中确定包括所述标定物品的完整外观的目标图像，包括：

识别所述目标抓拍图像的轮廓；

获得所述目标抓拍图像的轮廓的外接规则几何形状；

获得所述目标抓拍图像的轮廓的外接规则几何形状的中心点；

确定所述外接规则几何形状的中心点处于所述抓拍区域垂直于所述安检设备的传送装置中心轴线方向的中心线上的目标抓拍图像为所述目标图像。

7.根据权利要求1所述的方法，其特征在于，获取抓拍区域的背景图像，包括：

获取所述抓拍区域的图像采集装置采集的视频流；

从所述视频流中选择不包括所述标定物品的图像帧作为所述背景图像。

8.根据权利要求1-7任一项所述的方法，其特征在于，根据所述目标图像的截取时刻和所述初始时刻，获得所述标定物品通过所述安检设备至所述抓拍区域的抓拍延迟时间，包括：

根据所述目标图像的截取时刻和所述初始时刻，获得所述标定物品通过所述安检设备至所述抓拍区域的初始抓拍延迟时间；

取所述初始抓拍延迟时间的平均值作为所述抓拍延迟时间。

9.根据权利要求1中所述的方法，其特征在于，还包括：

获取被检测物品通过所述安检设备开始扫描的起始时刻，并获取所述被检测物品的扫描图像；

识别所述扫描图像，确定所述被检测物品中包括违禁品；

根据所述起始时刻和所述抓拍延迟时间，确定所述被检测物品处于所述抓拍区域的到达时间；

根据所述到达时间获取包括所述被检测物品的完整外观的目标图像；

利用所述目标图像确定所述被检测物品为目标开包物品。

10.一种图像处理装置，其特征在于，包括：

背景图像获取单元，用于获取抓拍区域的背景图像；

初始时刻获得单元，用于获取标定物品通过安检设备开始扫描的初始时刻；

抓拍图像获取单元，用于获取所述标定物品至少部分处于所述抓拍区域的抓拍图像；

目标图像获取单元，用于根据所述背景图像和所述抓拍图像，从所述抓拍图像中确定包括所述标定物品的完整外观的目标图像；

截取时刻获得单元，用于获取所述目标图像的截取时刻；

抓拍延迟时间获取单元，用于根据所述目标图像的截取时刻和所述初始时刻，获得所述标定物品通过所述安检设备至所述抓拍区域的抓拍延迟时间。

11.一种图像处理***，其特征在于，包括：

安检设备，其包括传送装置和扫描装置；

图像采集装置，其位于所述安检设备的出口的所述传送装置上方，所述图像采集装置采集图像的区域为抓拍区域；

图像处理装置，用于获取所述抓拍区域的背景图像；获取标定物品通过所述安检设备开始扫描的初始时刻；获取所述标定物品至少部分处于所述抓拍区域的抓拍图像；根据所述背景图像和所述抓拍图像，从所述抓拍图像中确定包括所述标定物品的完整外观的目标图像；获取所述目标图像的截取时刻；根据所述目标图像的截取时刻和所述初始时刻，获得所述标定物品通过所述安检设备至所述抓拍区域的抓拍延迟时间。

12.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述程序被处理器执行时实现如权利要求1至9中任一项所述的图像处理方法。

13.一种电子设备，其特征在于，包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现如权利要求1至9中任一项所述的图像处理方法。

Images