CN113836998A - 针对待查验物品进行分析的信息处理装置及方法 - Google Patents

Abstract

本发明提供针对待查验物品进行分析的信息处理装置及方法。信息处理装置包括：获取单元，获取待查验物品的图像信息和所述待查验物品的描述信息；比较单元，获得第一比较结果、第二比较结果和第三比较结果；判断单元，根据第一比较结果判断图像信息指向的物品与描述信息指向的物品是否一致，根据第二比较结果判断所述图像信息指向的物品与参考图像数据指向的物品是否一致，以及根据第三比较结果判断描述信息指向的物品与参考描述数据指向的物品是否一致；显示单元，其用于显示图像信息、描述信息及各个比较结果。本发明提供可视化的监管前置方案，为海关查验节省了人力物力，并且为后期海关查验过程中提供真实的图像视频。

Description

针对待查验物品进行分析的信息处理装置及方法

技术领域

本发明涉及信息处理领域，更具体地，本发明涉及针对待查验物品进行分析的信息处理装置及方法。

背景技术

目前，进出口贸易的数量不断提高，这导致海关关检的工作量也在不断加大。

与此同时，企业自身并不能提前对待查验物品是否存在不被通过的可能性(例如，是否存在违禁品，通关商品与申报商品是否一致等)做出预判。这也间接地影响了海关关检的工作效率。

发明内容

为了克服现有技术中的一个或多个不足，本发明提供可视化的监管前置方案。通过可视化前置监管装置进行智能人工识别，直接返回申报与实物不一致的物品或者涉嫌违禁品的物品，只有物品与申报一致且物品不属于违禁品的情况下才放行，为海关查验节省了人力物力，并且可以为后期海关查验过程提供真实的图像视频，一目了然。

简言之，为了提高待查验物品顺利通关的可能性，同时提高关检的工作效率，根据本发明的一个方面，提供一种针对待查验物品进行分析的信息处理装置，包括：

获取单元，其被构造为获取待查验物品的图像信息和所述待查验物品的描述信息，所述图像信息通过对待查验物品进行拍摄而获得，所述描述信息通过读取所述图像信息中的文字信息而获得、通过读取对待查验物品的外包装进行拍摄而获得的包装图像信息而获得、或者通过信息处理装置的用户上传而获得；

比较单元，其被构造为获得第一比较结果、第二比较结果和第三比较结果，所述第一比较结果通过对所述图像信息和所述描述信息进行比较而获得，所述第二比较结果通过对所述图像信息与数据存储装置中的参考图像数据进行比较而获得，所述第三比较结果通过对所述描述信息与数据存储装置中的参考描述数据进行比较而获得；

判断单元，其被构造为根据第一比较结果判断图像信息指向的物品与描述信息指向的物品是否一致，根据第二比较结果判断所述图像信息指向的物品与参考图像数据指向的物品是否一致，以及根据第三比较结果判断所述描述信息指向的物品与参考描述数据指向的物品是否一致；

显示单元，其用于显示所述图像信息、所述描述信息、所述第一比较结果、所述第二比较结果和所述第三比较结果。

根据本发明的另一个方面，还提供一种针对待查验物品进行分析的方法，包括如下步骤：

对待查验物品进行拍照获得待查验物品的图像信息；

对图像信息中的文字信息进行读取、对待查验物品的外包装的照片中的文字信息进行读取、或者通过用户上传来获得待查验物品的描述信息，

对所述图像信息和所述描述信息进行比较而获得第一比较结果，并根据第一比较结果判断图像信息指向的物品与描述信息指向的物品是否一致；

对所述图像信息与数据存储装置中的参考图像数据进行比较而获得第二比较结果，并根据第二比较结果判断图像信息指向的物品与参考图像数据指向的物品是否一致；

对所述描述信息与数据存储装置中的参考描述数据进行比较而获得第三比较结果，并根据第三比较结果判断所述描述信息指向的物品与参考描述数据指向的物品是否一致；

在下述任何情况下，显示提示信息：

所述第一比较结果指示所述图像信息和所述描述信息不一致，

所述第一比较结果指示无法识别图像信息或描述信息，

所述第二比较结果指示所述图像信息和所述参考图像数据一致或高度相似，

所述第二比较结果指示无法识别图像信息，

所述第三比较结果指示所述描述信息和所述参考描述数据一致或高度相似。

附图说明

为了更清楚地说明本申请实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本申请的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。

图1是例示根据本发明实施例的信息处理装置100与其他相关结构之间的关系的示例的图。

图2是例示根据本发明实施例的信息处理装置100的硬件构造的框图。

图3是例示根据本发明实施例的处理的流程图。

图4是例示对图像信息与数据存储装置中的参考图像数据进行比较的处理的流程图。

具体实施方式

为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。

因此，以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围，而是仅仅表示本申请的选定实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。

以下结合附图，更为详细地描述本发明的信息处理装置的具体细节。本发明的信息处理装置能够获取物品的真实图像并与AI服务器的的大数据进行对比，进而判断是否有违禁品，以及违禁品的种类及数量。

图1是例示根据本发明实施例的信息处理装置100与其他相关结构之间的关系的示例的图。

在图1中，本发明实施例的信息处理装置100经由网络1000与数据存储装置200(例如，数据库)连接。当然，在图1所示的实施例中，数据存储装置200与信息处理装置100是相对独立的，以保证数据存储装置200内存储的数据的安全性和可操作性。但是，这不是被特别限制的。作为替换，数据存储装置200还可以被构造为是包括在信息处理装置100内的一个功能单元。在下文中，是以数据存储装置200与信息处理装置100相对独立来进行描述。但是，本领域技术人员可以在本发明的思想的指引下，根据所掌握的本领域的技术获得数据存储装置200作为信息处理装置100内的一个功能单元的结构和运行方式。

另外，在图1中，信息处理装置100还可以经由网络1100与海关的相关***300连接。在图1中用虚线将海关相关***300与其他结构区分开，是为了说明本发明的信息处理装置不包括海关的相关***300。信息处理装置100与海关的相关***300进行连接的目的是可以请求向海关上传通关所需的资料。

网络1000和1100可以是任何规格的网络(无线，有线等)，只要能够传输数据即可。

当数据存储装置200作为与信息处理装置100相对独立的装置时，一般将数据存储装置200用作存储参考数据的存储器。本文中的参考数据一般是指关于违禁品的信息。违禁品包括国家规定限制生产、购买、运输和持有的物品，例如刀具、***物品等。参考数据包括参考图像数据和参考描述数据二者。参考图像数据是指图片、视频、照片等关于违禁品的图形资料，参考描述数据是指关于违禁品的文字说明，例如违禁品的名称、型号、特点等。数据存储装置200中的参考数据的建立和维护一般由信息处理装置的服务提供商完成，或者也可开放入口由海关进行更新和编辑。当待查验物品的图像信息与参考图像数据一致或高度相似，或者待查验物品的描述信息与参考描述数据一致或高度相似时，则判断待查验物品属于违禁品。

除了关于违禁品的描述的常用名，本发明的数据存储装置200还存储有这些常用名的别名、易混淆名、英文名等相关词汇，例如，若违禁品为“垃圾”，则数据存储装置200中还存储有“废品”、“garbage”、“Rubbish”等相关词汇。这些相关词汇之间以及他们与常用名之间相互索引，均用于后续的比较。

图2是例示根据本发明实施例的信息处理装置100的硬件构造的示例的图。

信息处理装置100包括CPU 111、RAM 112、ROM 113、显示单元114、输入单元115、通信模块116、存储单元117、比较单元118和判断单元119、获取单元121。这些构成元件通过***总线120彼此连接，并彼此交换数据。

CPU是中央处理单元的缩写，RAM是随机存取存储器的缩写，ROM是只读存储器的缩写。

CPU 111根据存储在RAM 112或ROM 113中的程序进行各种算术处理。RAM 112是易失性存储区域，并且在CPU 111进行各种算术处理时用作临时存储区域。ROM 113是存储有操作***(OS)、和各种应用程序的非易失性存储区域。

显示单元114是被构造为显示图形用户界面(GUI)等的设备，并且包括例如液晶显示器和图形控制器。

输入单元115是被构造为接收用户在信息处理装置100上进行的操作的设备，其示例包括键盘和指点设备(例如鼠标等)。信息处理装置100响应于从输入单元115接收到的用户的各种指令或数据而进行各种控制。

这里，输入单元115可以是外部附接于信息处理装置100的设备。此外，在图2的示例中，显示单元114和输入单元115被分别示出在信息处理装置100中。然而，例如显示单元114和输入单元115可以被构造为诸如触摸面板显示器等的一个模块。

通信模块116是被构造为与外部装置(例如，数据存储装置200，海关300等)通信的接口。通信模块116连接到诸如路由器等的通信机(未示出)，并且通过网络1000与数据存储装置200进行数据通信，或者通过网络1100与海关300进行数据通信。该数据通信可以通过例如使用无线线路的通信来进行，也可以通过使用诸如电话线或LAN线等的有线线路的通信来进行。

存储单元117为非易失性存储区域，其用于存储待查验物品(即，需要等待海关查验的物品，或称“待通关物品”)的图像信息和描述信息。待查验物品的图像信息是指待查验物品的照片或视频，其通过照相机或其他摄像设备对待查验物品进行拍摄而获得。待查验物品的描述信息是指待查验物品的文字描述信息，可以包括例如通关商品的品名、类型、型号、颜色、用途、特点等。待查验物品的描述信息可以通过多种方式获得，例如可以通过读取图像信息中的文字信息而获得，可以通过读取对待查验物品的外包装进行拍摄而获得的包装图像信息(例如包装上的文字)而获得，或者可以通过信息处理装置的用户上传而获得。

比较单元118用于对相关内容进行比较而得到比较结果。在本发明中，为了获得可靠的待查验信息，需要将待查验物品与数据存储装置200中的数据进行比较，判断待查验物品是否是违禁品。例如，可以通过比较待查验物品的图片与数据存储装置200中的图片(数据存储装置200中存储的图片是违禁品的图片)的相似度，也可以通过比较待查验物品的文字描述信息与数据存储装置200中的文字信息是否一致。另外，考虑到企业有可能将错误的商品作为待查验物品进行通关，因此还需要将待查验物品的信息与底账记录的数据进行比较。因此，比较单元118可以对不同的描述信息/数据进行比较，也可以对不同的图像信息进行比较，还可以对图像信息和描述信息进行比较。例如，比较单元118可以通过对图像信息和描述信息进行比较而获得第一比较结果，第一比较结果可用于判断企业申报的待查验物品是否正确。比较单元118可以通过对图像信息与数据存储装置200中的参考图像数据进行比较而获得第二比较结果，第二比较结果可用于判断企业申报的待查验物品是否含有违禁品。比较单元118可以通过将所述描述信息与数据存储装置200中的参考描述数据进行比较而获得第三比较结果，第三比较结果也可用于判断企业申报的待查验物品是否含有违禁品。第一比较结果、第二比较结果和第三比较结果会被存储在存储单元117中。

判断单元119根据比较单元118的各个比较结果进行判断，从而确定待查验物品是否是违禁品，或者是否与企业期望查验的物品一致。例如，判断单元119根据第一比较结果判断图像信息指向的物品与描述信息指向的物品是否一致，根据第二比较结果判断图像信息指向的物品与参考图像数据指向的物品是否一致，以及根据第三比较结果判断描述信息指向的物品与参考描述数据指向的物品是否一致。

在图像信息指向的物品与描述信息指向的物品一致的情况下，说明企业提交的待查验物品是其实际期望海关进行查验的物品，而没有发生错误。在图像信息指向的物品与参考图像数据指向的物品一致或高度相似的情况下，说明企业提交的待查验物品属于违禁品。在描述信息指向的物品与参考描述数据指向的物品一致或高度相似的情况下，也说明企业提交的待查验物品属于违禁品。若无法识别图像信息或者描述信息，则需要重新进行图像信息或者描述信息的上传。

在发现违禁品或企业提交的待查验物品不是其实际期望海关进行查验的物品的情况下，显示单元114用于向用户发出提示或警示信息。例如，该提示信息可以是在显示单元114上发出亮光等，或高亮标记相关条目等。

图3是例示根据本发明实施例的信息处理装置100的处理的流程图。

在步骤S301中，获取待查验物品的图像信息和描述信息。

其中，待查验物品的图像信息是指待查验物品的照片或视频，其通过照相机或其他摄像设备对待查验物品进行拍摄而获得。

待查验物品的描述信息是指待查验物品的文字描述信息，可以包括例如通关商品的品名、类型、型号、颜色、用途、特点等。描述信息可以是手工输入的，也可以是通过读取/扫描图像信息或容纳待查验物品的包装而获取到的。

具体地，待查验物品的描述信息可以通过以下多种方式获得，实际应用时可以选择其中的任一种或多种。例如，可以通过读取图像信息中的文字信息而获得，可以通过读取对待查验物品的外包装进行拍摄而获得的包装图像信息(例如包装上的文字)而获得，或者也可以通过信息处理装置的用户上传而获得(即，底账)。在实际应用时，可以通过上述3种方式获得针对一个待查验物品的最多3条描述信息。可以将这3条描述信息之间进行比较以判断待查验物品及其包装是否一致，判断待查验物品与用户期望查验的物品是否一致。进一步，还可以将这3条描述信息分别与数据存储装置中的参考描述数据进行比较，以判断是否属于违禁品等。

其中，底账一般是用于在海关备案时的海关帐，包括原材料和成品的详细备案资料，比如商品编码、物流运单号、出口日期、订单编号、电商平台名称、物流企业名称、进出口标识、进出口日期、收发件人姓名、身份证号码及联系方式、运抵国(地区)等信息。其他相关信息包括例如通关商品的品名、类型、型号、颜色、用途、特点等。

在步骤S302中，对在步骤S301中获取的图像信息与描述信息进行比较以获得第一比较结果，并判断第一比较结果的类型。

由于描述信息一般是文字，而图像信息是图像。因此，通常是对图像信息进行分析以提取其上的文字信息。对如此提取的文字信息和描述信息进行比较。

若第一比较结果是图像信息与描述信息一致，则说明企业提交的待查验物品是其实际期望海关进行查验的物品，而没有发生错误。此时，步骤前进到S303。否则，若第一比较结果是图像信息与描述信息不一致，或者无法识别图像信息和/或描述信息，则步骤前进到S306。

在步骤S303中，对图像信息与数据存储装置中的参考图像数据进行比较以获得第二比较结果，并判断第二比较结果的类型。

若第二比较结果是图像信息与参考图像数据一致或高度相似，则说明企业提交的待查验物品是违禁品。此时，步骤前进到S306。否则，说明企业提交的待查验物品不是违禁品，此时步骤前进到S304。若无法识别图像信息与描述信息，则步骤前进到S306。

在步骤S304中，对描述信息与数据存储装置中的参考描述数据进行比较以获得第三比较结果，并判断第三比较结果的类型。

若第三比较结果是描述信息与参考描述数据一致或高度相似，则说明企业提交的待查验物品是违禁品。此时，步骤前进到S306。否则，说明企业提交的待查验物品不是违禁品，此时步骤前进到S305。若无法识别描述信息，则步骤前进到S306。

在步骤S305中，申请打单，并请求将待查验物品的相关资料上传到海关，并结束(步骤S307)。

在步骤S306中，进行警示操作。例如，在显示单元上发出警示信息等，并结束(步骤S307)。

需要注意的是，在本发明的方法中，步骤S302、S303和S304不是必须按顺序进行的。也就是说，步骤S302、S303和S304的顺序可以颠倒，先执行S304，然后执行S303，最后执行S302也是可以的。或者，步骤S302、S303和S304可以是同时执行的。

另外，需要注意的是，步骤S302、S303和S304不是必须全部进行的。也就是说，本发明的方法至少执行S303和S304中的一者，而省略另一者和S302。

以下根据图4详细描述步骤S303中进行的对图像信息与数据存储装置中的参考图像数据进行比较的处理。

在步骤S401中，缩小对待查验物品进行拍摄获得的图片的尺寸。具体地，将图片缩小到8*8的尺寸，获得总共64个像素。这一步的作用是去除图片的细节，只保留结构、明暗等基本信息，摒弃不同尺寸、比例带来的图片差异。例如，可以用汉明距离进行图片相似度检测的Java实现。然后进入步骤S402。

在步骤S402中，对缩小后的图片的色彩进行简化。具体地，将缩小后的图片转为64级灰度。也就是说，经过步骤S402的处理后，图片中的所有像素点总共只有最多64种颜色。然后进入步骤S403。

在步骤S403中，计算灰度平均值。具体地，计算在步骤S402中获得的所有64个像素的灰度的平均值。然后进入步骤S404。

在步骤S404中，比较像素的灰度与灰度平均值。即，将在步骤S402中获得每个像素的灰度值与在步骤S403中获得的灰度平均值进行比较。若像素的灰度值大于或等于平均值，则将该像素标记为true，即1。若像素的灰度值小于平均值，则将该像素标记为false，即0。然后进入步骤S405。

在步骤S405中，计算哈希值。具体地，所有比较结果组合在一起，就构成了一个64位的整数，从而得到这张图片的指纹。组合的次序并不重要，只要保证所有图片都采用同样的次序即可。

得到指纹以后，就可以对比不同的图片，确定64位中有多少是不一样的。在理论上，这等同于计算汉明距离。如果不相同的数据位不超过5位，就说明两张图片很相似；如果不相同的数据位大于10，就说明这是不同的图片。

数据存储装置中的参考图像数据是事先根据上述方法获得的字符串。

以上所述，仅为本申请的各种实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种针对待查验物品进行分析的信息处理装置，其特征在于，包括：

获取单元，其被构造为获取待查验物品的图像信息和所述待查验物品的描述信息，所述图像信息通过对待查验物品进行拍摄而获得，所述描述信息通过读取所述图像信息中的文字信息而获得、通过读取对待查验物品的外包装进行拍摄而获得的包装图像信息而获得、或者通过信息处理装置的用户上传而获得；

比较单元，其被构造为获得第一比较结果、第二比较结果和第三比较结果，所述第一比较结果通过对所述图像信息和所述描述信息进行比较而获得，所述第二比较结果通过对所述图像信息与数据存储装置中的参考图像数据进行比较而获得，所述第三比较结果通过对所述描述信息与数据存储装置中的参考描述数据进行比较而获得；

判断单元，其被构造为根据第一比较结果判断图像信息指向的物品与描述信息指向的物品是否一致，根据第二比较结果判断所述图像信息指向的物品与参考图像数据指向的物品是否一致，以及根据第三比较结果判断所述描述信息指向的物品与参考描述数据指向的物品是否一致；

显示单元，其用于显示所述图像信息、所述描述信息、所述第一比较结果、所述第二比较结果和所述第三比较结果。

2.根据权利要求1所述的信息处理装置，其特征在于，

所述第一比较结果包括指示所述图像信息和所述描述信息一致、指示所述图像信息和所述描述信息不一致、以及无法识别图像信息或描述信息的内容；

所述第二比较结果包括指示所述图像信息和所述参考图像数据一致或高度相似、指示所述图像信息和所述参考图像数据不一致、以及无法识别图像信息的内容；

所述第三比较结果包括指示所述描述信息和所述参考描述数据一致或高度相似、指示所述描述信息和所述参考描述数据不一致的内容。

3.根据权利要求2所述的信息处理装置，其特征在于，在下述任何情况下，使显示单元显示提示信息：

所述第一比较结果指示所述图像信息和所述描述信息不一致，

所述第一比较结果指示无法识别图像信息或描述信息，

所述第二比较结果指示所述图像信息和所述参考图像数据一致或高度相似，

所述第二比较结果指示无法识别图像信息，

所述第三比较结果指示所述描述信息和所述参考描述数据一致或高度相似。

4.根据权利要求3所述的信息处理装置，其特征在于，所述提示信息是表明可能存在违禁品的信息。

5.根据权利要求1所述的信息处理装置，其特征在于，所述信息处理装置还包括上传单元，其被构造为在所述图像信息和所述描述信息不一致，所述图像信息与参考图像数据一致或高度相似，所述描述信息与所述参考描述数据一致或高度相似的情况下，请求向海关和/用户发送图像信息和/或描述信息。

6.根据权利要求1所述的信息处理装置，其特征在于，数据存储装置中的参考图像数据和参考描述数据由信息处理装置的运营商进行维护和更新，参考图像数据和参考描述数据所指向的商品包括违禁品。

7.根据权利要求1所述的信息处理装置，其特征在于，待查验物品的图像信息是指一64位、由0和1组成的字符串，所述字符串通过如下步骤获得：

对待查验物品进行拍照获得待查验物品的图片；

将所述图片的尺寸缩小到8*8像素；

将缩小后的图片转换为64级灰度得到所有像素的灰度值；

计算所有64个像素的平均灰度值；

将每个像素的灰度值与平均灰度值进行比较，在像素的灰度值大于或等于平均灰度值的情况下，将该像素的标记记为1，而在像素的灰度值小于平均灰度值的情况下，将该像素的标记记为0；

将所有像素的标记排列在一起，构成所述字符串。

8.根据权利要求1所述的信息处理装置，其特征在于，数据存储装置中的参考图像数据是指一64位、由0和1组成的数字串，所述数字串通过如下步骤获得：

将违禁品的图片的尺寸缩小到8*8像素；

将缩小后的图片转换为64级灰度得到所有像素的灰度值；

计算所有64个像素的平均灰度值；

将每个像素的灰度值与平均灰度值进行比较，在像素的灰度值大于或等于平均灰度值的情况下，将该像素的标记记为1，而在像素的灰度值小于平均灰度值的情况下，将该像素的标记记为0；

将所有像素的标记排列在一起，构成所述数字串。

9.一种针对待查验物品进行分析的方法，其特征在于，包括如下步骤：

对待查验物品进行拍照获得待查验物品的图像信息；

对图像信息中的文字信息进行读取、对待查验物品的外包装的照片中的文字信息进行读取、或者通过用户上传来获得待查验物品的描述信息，

对所述图像信息和所述描述信息进行比较而获得第一比较结果，并根据第一比较结果判断图像信息指向的物品与描述信息指向的物品是否一致；

对所述图像信息与数据存储装置中的参考图像数据进行比较而获得第二比较结果，并根据第二比较结果判断图像信息指向的物品与参考图像数据指向的物品是否一致；

对所述描述信息与数据存储装置中的参考描述数据进行比较而获得第三比较结果，并根据第三比较结果判断所述描述信息指向的物品与参考描述数据指向的物品是否一致；

在下述任何情况下，显示提示信息：

所述第一比较结果指示所述图像信息和所述描述信息不一致，

所述第一比较结果指示无法识别图像信息或描述信息，

所述第二比较结果指示所述图像信息和所述参考图像数据一致或高度相似，

所述第二比较结果指示无法识别图像信息，

所述第三比较结果指示所述描述信息和所述参考描述数据一致或高度相似。

10.根据权利要求9所述的方法，其特征在于，待查验物品的图像信息是指一64位、由0和1组成的数字串，所述数字串通过如下步骤获得：

对待查验物品进行拍照获得待查验物品的图片；

将所述图片的尺寸缩小到8*8像素；

将缩小后的图片转换为64级灰度得到所有像素的灰度值；

计算所有64个像素的平均灰度值；

将每个像素的灰度值与平均灰度值进行比较，在像素的灰度值大于或等于平均灰度值的情况下，将该像素的标记记为1，而在像素的灰度值小于平均灰度值的情况下，将该像素的标记记为0；

将所有像素的标记组合在一起，构成所述字符串。

Images