CN109325491B - 识别码识别方法、装置、计算机设备和存储介质 - Google Patents
识别码识别方法、装置、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN109325491B CN109325491B CN201810934332.5A CN201810934332A CN109325491B CN 109325491 B CN109325491 B CN 109325491B CN 201810934332 A CN201810934332 A CN 201810934332A CN 109325491 B CN109325491 B CN 109325491B
- Authority
- CN
- China
- Prior art keywords
- picture
- code
- detected
- sampling
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 73
- 238000005070 sampling Methods 0.000 claims abstract description 118
- 238000001514 detection method Methods 0.000 claims abstract description 77
- 238000003062 neural network model Methods 0.000 claims description 42
- 238000012549 training Methods 0.000 claims description 19
- 238000004590 computer program Methods 0.000 claims description 17
- 230000008569 process Effects 0.000 claims description 17
- 238000005516 engineering process Methods 0.000 claims description 14
- 238000012545 processing Methods 0.000 claims description 8
- 238000001914 filtration Methods 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 13
- 238000004422 calculation algorithm Methods 0.000 description 11
- 238000013527 convolutional neural network Methods 0.000 description 11
- 230000000694 effects Effects 0.000 description 8
- 230000009471 action Effects 0.000 description 7
- 230000006870 function Effects 0.000 description 5
- 238000013528 artificial neural network Methods 0.000 description 4
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000003708 edge detection Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 101100153586 Caenorhabditis elegans top-1 gene Proteins 0.000 description 1
- UHDGCWIWMRVCDJ-CCXZUQQUSA-N Cytarabine Chemical compound O=C1N=C(N)C=CN1[C@H]1[C@@H](O)[C@H](O)[C@@H](CO)O1 UHDGCWIWMRVCDJ-CCXZUQQUSA-N 0.000 description 1
- 101100370075 Mus musculus Top1 gene Proteins 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 125000004122 cyclic group Chemical group 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
- G06V30/14—Image acquisition
- G06V30/148—Segmentation of character regions
- G06V30/153—Segmentation of character regions using recognition of characters or words
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
- G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
- G06K7/14—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
- G06K7/1404—Methods for optical code recognition
- G06K7/1439—Methods for optical code recognition including a method step for retrieval of the optical code
- G06K7/1443—Methods for optical code recognition including a method step for retrieval of the optical code locating of the code in an image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
- G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
- G06K7/14—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
- G06K7/1404—Methods for optical code recognition
- G06K7/1439—Methods for optical code recognition including a method step for retrieval of the optical code
- G06K7/1447—Methods for optical code recognition including a method step for retrieval of the optical code extracting optical codes from image or text carrying said optical code
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
- G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
- G06K7/14—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
- G06K7/1404—Methods for optical code recognition
- G06K7/146—Methods for optical code recognition the method including quality enhancement steps
- G06K7/1469—Methods for optical code recognition the method including quality enhancement steps using sub-pixel interpolation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4007—Scaling of whole images or parts thereof, e.g. expanding or contracting based on interpolation, e.g. bilinear interpolation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4053—Scaling of whole images or parts thereof, e.g. expanding or contracting based on super-resolution, i.e. the output image resolution being higher than the sensor resolution
- G06T3/4069—Scaling of whole images or parts thereof, e.g. expanding or contracting based on super-resolution, i.e. the output image resolution being higher than the sensor resolution by subpixel displacements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/13—Edge detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
- G06V10/443—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components by matching or filtering
- G06V10/449—Biologically inspired filters, e.g. difference of Gaussians [DoG] or Gabor filters
- G06V10/451—Biologically inspired filters, e.g. difference of Gaussians [DoG] or Gabor filters with interaction between the filter responses, e.g. cortical complex cells
- G06V10/454—Integrating the filters into a hierarchical structure, e.g. convolutional neural networks [CNN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/66—Trinkets, e.g. shirt buttons or jewellery items
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
- G06V30/19—Recognition using electronic means
- G06V30/191—Design or setup of recognition systems or techniques; Extraction of features in feature space; Clustering techniques; Blind source separation
- G06V30/19173—Classification techniques
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Toxicology (AREA)
- Electromagnetism (AREA)
- Life Sciences & Earth Sciences (AREA)
- Computing Systems (AREA)
- Molecular Biology (AREA)
- Biomedical Technology (AREA)
- Software Systems (AREA)
- Databases & Information Systems (AREA)
- Biodiversity & Conservation Biology (AREA)
- Medical Informatics (AREA)
- Quality & Reliability (AREA)
- Biophysics (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- Mathematical Physics (AREA)
- Image Analysis (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本申请涉及一种识别码识别方法、装置、设备和存储介质,获取待检测图片;检测所述待检测图片中的识别码得到检测结果,所述检测结果包括与所述识别码对应的目标码的目标信息;根据所述目标信息对所述目标码进行采样,得到采样图像;对所述采样图像进行解码,得到与所述识别码对应的识别结果。由于在获取到待检测图片后,并不是直接对整张待检测图片进行采样、解码等操作,而是先对整张图片进行检测,得到针对识别码的检测结果,该检测结果包括与识别码对应的目标码的目标信息。然后,再针对该目标码进行采样、解码等操作。如此,可以降低待检测图片中非识别码的干扰,提高识别码的识别效率。
Description
技术领域
本申请涉及识别码技术领域,特别是涉及一种识别码识别方法、装置、计算机设备和存储介质。
背景技术
随着计算机信息技术的发展,出现了识别码技术,识别码技术的发展使得人们的生活更加方便快捷。如,通过识别码乘车、通过识别码支付、通过识别码运行小程序等这些方便快捷的生活方式都离不开识别码技术的支持。
传统的识别码的识别方式,对整张待识别图片进行采样及解码等操作。如图1所示,整张待识别图片可能很大,而识别码只占整张图片很小的一部分;或者如图2所示,整张待识别图片可能存在很多干扰信息。这都将使得整个识别过程耗费大量的时间用于非识别码区域的识别。因此,识别效率低。
发明内容
基于此,有必要针对上述技术问题,提供一种识别效率高的识别码识别方法、装置、计算机设备和存储介质。
一种识别码识别方法,所述方法包括:
获取待检测图片;
检测所述待检测图片中的识别码得到检测结果,所述检测结果包括与所述识别码对应的目标码的目标信息;
根据所述目标信息对所述目标码进行采样,得到采样图像;
对所述采样图像进行解码,得到与所述识别码对应的识别结果。
一种识别码识别装置,所述装置包括:
图片获取模块,用于获取待检测图片;
目标检测模块,用于对所述待检测图片中的识别码进行目标检测,得到待识别码信息;
采样模块,用于对所述目标码进行采样,得到采样图像;
解码模块,用于对所述采样图像进行解码,得到对所述待检测图片中所述识别码的识别结果。
一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现以下步骤:
获取待检测图片;
检测所述待检测图片中的识别码得到检测结果,所述检测结果包括与所述识别码对应的目标码的目标信息;
根据所述目标信息对所述目标码进行采样,得到采样图像;
对所述采样图像进行解码,得到与所述识别码对应的识别结果。
一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
获取待检测图片;
检测所述待检测图片中的识别码得到检测结果,所述检测结果包括与所述识别码对应的目标码的目标信息;
根据所述目标信息对所述目标码进行采样,得到采样图像;
对所述采样图像进行解码,得到与所述识别码对应的识别结果。
上述识别码识别方法、装置、计算机设备和存储介质,获取待检测图片;检测所述待检测图片中的识别码得到检测结果,所述检测结果包括与所述识别码对应的目标码的目标信息;根据所述目标信息对所述目标码进行采样,得到采样图像;对所述采样图像进行解码,得到与所述识别码对应的识别结果。由于在获取到待检测图片后,并不是直接对整张待检测图片进行采样、解码等操作,而是先对整张图片进行检测,得到针对识别码的检测结果,该检测结果包括与识别码对应的目标码的目标信息。然后,再针对该目标码进行采样、解码等操作。如此,可以降低待检测图片中非识别码的干扰,提高识别码的识别效率。
附图说明
图1为一大图小码的示例图片;
图2为一存在较多干扰的图片示例图;
图3为一实施例中识别码识别方法的应用环境图;
图4为一实施例中识别码识别方法的流程示意图;
图5为一示例中原图及对原图进行转发压缩及多次转发压缩的对比图;
图6为一示例中对目标码进行双线差值的结果与图像超分辨率重建结果的对比图;
图7为传统方式与一实施例中得到的采样图像的对比图;
图8为一实施例中识别码识别方法中采用的盒子网络的结构示意图;
图9为两个具体实施例中识别码识别方法的效果与传统方案效果的对比图;
图10为另外两个具体实施例中识别码识别方法的效果与传统方案效果的对比图;
图11为一具体实施例的流程示意图;
图12为一实施例中识别码识别装置的结构框图;
图13为一实施例中计算机设备的内部结构图;
图14为另一实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的识别码识别方法,可应用于识别码的识别引擎中,该识别引擎可以通过扫描识别码或通过设置待识别图片的方式启动。其应用环境如图3所示。其中,扫描设备302与计算机设备304进行通信。可以通过扫描设备302采集待检测图片,并将待检测图片发送至计算机设备304,计算机设备304获取待检测图片;检测所述待检测图片中的识别码得到检测结果,所述检测结果包括与所述识别码对应的目标码的目标信息;根据所述目标信息对所述目标码进行采样,得到采样图像;对所述采样图像进行解码,得到与所述识别码对应的识别结果。计算机设备304可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备。计算机设备304还可以是服务器,该服务器可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个实施例中,如图4所示,提供了一种识别码识别方法,该方法可运行于图3中的计算机设备304。该识别码识别方法包括以下步骤:
S402,获取待检测图片。
待检测图片是包括识别码的图片。可以通过扫描或拍摄照片的方式获取待检测图片;还可以通过对已存储在本地的、或联网浏览的图片进行设置的方式,将该图片设置为待检测图片,从而确定该待检测图片。
待检测图片可以是一张较大的图片,而识别码在该待检测图片中所占比例较小,即大图小码的情况。对于这种大图小码情况下的待检测图片,将更大程度上提高针对待检测图片中识别码的识别效率。
S404,检测所述待检测图片中的识别码得到检测结果,所述检测结果包括与所述识别码对应的目标码的目标信息。
识别码可以是二维码、一维码(也可以称为条形码)、小程序码、PDF417条码等码格式对应的码。其中,PDF417条码是一种高密度、高信息含量的便携式数据格式。该PDF417条码可以用于实现证件及卡片等大容量、高可靠性信息自动存储、携带并可用机器自动识读。
目标码是通过检测的方式检测到的、认定为识别码的码。可以理解地,该认定为识别码的码与实际的识别码可以不完全重合,但目标码与识别码的交并比应该大于预设值,该预设值不小于0.5。当目标码与识别码的交或比为1时,检测到的目标码与识别码完全重合;可以理解地,目标码可能与实际的识别码并不完全重合。
目标信息可以为目标码在待检测图片中的位置信息,也可以直接为目标码的图像信息,该图像信息可以是指目标码的每个像素点的信息。
检测所述待检测图片中的识别码得到检测结果的方式,可以通过目标检测算法将识别码作为目标进行检测,得到包括与识别码对应的目标码的目标信息的检测结果。该目标检测算法可以通过神经网络实现。如,可以采用DPM模型(Discrete Phase Model,离散相位模型)。
S406,根据所述目标信息对所述目标码进行采样,得到采样图像。
在本实施例中,无需对整张待检测图片进行采样,只需要对检测得到的目标码信息对应的目标码进行采样即可,如此,得到的采样图像能够在很大程度上降低非识别码区域的干扰。
采样的方式包括按照1:1的比例进行原图采样,也可以包括按照1:n的比例进行上采样,还以可以包括按照n:1的比例进行下采样。如4:1的1/4下采样,4个像素点取一个点,或16:1的1/16下采样,16个像素点取一个点。
S408,对所述采样图像进行解码,得到与所述识别码对应的识别结果。
在对目标码采样之后,可以通过解码器对采样得到的采样图片进行解码,得到与该目标码对应的识别码所对应的识别结果。解码器可以包括一维码解码器、二维码解码器、小程序码解码器、PDF417条码解码器等。识别码对应的识别结果为对目标码进行解码得到的解码结果。如,当识别码为二维码时,解码结果可以包括二维码所携带的信息;当识别码为小程序码时,解码结果可以包括小程序码对应的小程序信息。
可以理解地,对于一个目标码对应的采样图像,可以包括不同采样比例的多个图片。如,采样图像可以包括一个1:1的原图,一个1:2的上采样图,一个4:1的下采样图。又如,采样图像可以包括一个1:1的原图,一个4:1的下采样图,一个16:1的下采样图。
上述识别码识别方法获取待检测图片;检测所述待检测图片中的识别码得到检测结果,所述检测结果包括与所述识别码对应的目标码的目标信息;根据所述目标信息对所述目标码进行采样,得到采样图像;对所述采样图像进行解码,得到与所述识别码对应的识别结果。由于在获取到待检测图片后,并不是直接对整张待检测图片进行采样及解码操作,而是先对整张图片进行检测,得到针对识别码的检测结果,该检测结果包括与识别码对应的目标码的目标信息。然后,再针对该目标码进行采样及解码操作。如此,可以降低待检测图片中非识别码的干扰,提高识别码的识别效率。
从通过将经过多次转发压缩的图像设置为待检测图像的场景中,选择30%识别失败的案例进行分析,发现识别失败的案例中存在70%的案例,是由于识别码太小而又被压缩导致解码失败,最终使得识别失败。如图5所示,由于流量等因素限制,用户在转发图像时往往需要进行图像的压缩,经过多次转发压缩的图像,其分辨率较低,通过原图采样和向下采样的方式,在后续解码过程中将导致解码失败,最终使得识别失败。
在其中一实施例中,所述根据所述目标信息对所述目标码进行采样,得到采样图像,包括:当所述目标码满足分辨率条件时,根据所述目标信息对所述目标码进行上采样,得到采样图像。
分辨率条件可以是分辨率小于预设值,如,分辨率小于300dpi*300dpi,或400dpi*400dpi等,其中dpi表示每英寸点数。分辨率条件也可以是分辨率在预设范围内,如,分辨率大于200dpi*200dpi小于300pdi*300pdi,或分辨率大于180dpi*200dpi小于400dpi*400dpi等。上采样是在原有图像像素的基础上在像素点之间***新的元素,从而使得到的采样图像相比原有图像更清晰。一般地,可以采用插值算法***新的元素。
基于本实施例的识别码识别方法,需要在目标码满足分辨率条件时,才根据所述目标信息对所述目标码进行上采样,得到采样图像。如此,一方面,可以避免分辨率不满足分辨率条件的情况,如分辨率已经足够大的情况,仍然进行上采样,而造成资源浪费。另一方面,还可以更适用于通过将经过多次转发压缩的图像设置为待检测图像的场景。从而,基于本实施例的识别码识别方法,能够在保证识别码的识别效率的基础上,节约***资源。
在其中一实施例中,当所述目标码的分辨率小于预设值时,根据所述目标信息对所述目标码进行上采样,得到采样图像。如此,对分辨率较小的目标码进行上采样,减少因为分辨率较低而使得识别效率下降的因素,从而提高识别码的识别效率。
对应地,可以在当所述目标码的分标率大于另一预设值时,根据目标信息对目标码进行下采样,得到采用图像。可以理解地,该另一预设值大于上述预设值,如此将分辨率过大的目标码进行下采样,减少需要识别的像素点数量,从而提高识别码的识别效率。
可以理解地,可以在当目标码的分辨率在该预设值与另一预设值之间时,根据目标信息对目标码进行1:1原图采样。如此,使得分辨率合适的目标码无需进行上采样或下采样的操作。
需要说明的是,基于本实施例的识别码识别方法,根据目标码的分辨率确定采样方式,无需对目标码进行各种方式的采样,且得到的采样图像的数量较少。该采样方式包括上采样、下采样及原图采样。该采样图片的数量可以为预设数量,该预设数量最少可以为1。如此,可以减少采样的时间,并减少解码的采样图像的数量,从而提高识别码的识别效率。
在其中一实施例中,所述获取待检测图片的步骤,包括以下两种方式中的任意一种:
(1)、通过设置图片的方式获取待检测图片;
(2)、通过扫描的方式获取待检测图片。
通过设置图片的方式获取待检测图片,可以通过预设指令将预设图片设置为待检测图片。该预设图片可以是当前显示的图片,也可以是最近存储或显示的图片。当前显示的图片可以是本地图片,也可以是联网浏览的图片;最近显示的图片可以是本地图片,也可以是联网浏览的图片。该预设指令可以是通过功能菜单进行设置,也可以通过预设动作将预设图片设置为待检测图片。如,通过在屏幕上划圈的动作将最近显示的图片设置为待检测图片。可以理解地,预设动作不仅可以是在屏幕上划圈、划预设图案等在屏幕上的屏幕操作动作,还可是按下预设按钮等按钮动作,还可以是屏幕操作动作与按钮动作结合。
需要说明的是,通过设置图片的方式获取待检测图片区别于通过扫描的方式获取待检测图片。通过设置图片的方式获取待检测图片的方式,一般是可以获取到一张图片,因此,在对该一张图片的识别码进行识别时,需要保证该图片的分辨率,从而提高识别码的识别效率。
通过扫描的方式获取待检测图片,可以是通过扫码设备扫描识别码得到待检测图片,或通过摄像设备采集识别码的图像得到待检测图片。通过扫描的方式可以获取到多张图片。由于可以联合多张图片进行识别码的识别,因此,该多张图片的分辨率的要求可以相对低一些,且同时可以保证识别码的识别效率,从而提高识别码识别的适用性。
在其中一实施例中,若通过设置图片的方式获取待检测图片,则采用第一分辨率,检测所述待检测图片中的识别码得到检测结果;若通过扫描的方式获取待检测图片,则采用第二分辨率,检测所述待检测图片中的识别码得到检测结果;所述第一分辨率大于所述第二分辨率。
如此,保证通过设置图片的方式获取待检测图片对应的目标码的分辨率,大于通过扫描的方式获取待检测图片对应的目标码的分辨率,从而可以在保证两种方式的识别效率的基础上,提高识别码识别的适用性。
在其中一具体实施例中,由于通过设置图片的方式获取待检测图片的方式,对于精度要求高、耗时长,为了提高识别效率第一分辨率可以为400dpi*400dpi。而对于通过扫描的方式获取待检测图片的方式中,第二分辨率可以为300dpi*300dpi。
在其中一实施例中,若通过设置本地图片设置图片的方式获取待检测图片,则所述根据所述目标信息对所述目标码进行采样,得到采样图像,包括:当所述目标码满足分辨率条件时,根据所述目标信息对所述目标码进行上采样,得到采样图像。
由于通过设置图片的方式获取待检测图片,相较于通过扫描的方式获取待检测图片,需要更高的分辨率,因此,在本实施例中,在通过设置图片的方式获取待检测图片的情况下,若目标码满足分辨率条件,则根据所述目标信息对所述目标码进行上采样,得到采样图像。如此,保证在通过设置图片的方式获取待检测图片的情况下,采样图片的分辨率,从而提高识别码的识别效率。
在其中一实施例中,所述根据所述目标信息对所述目标码进行上采样,得到采样图像,为:根据所述目标信息对所述目标码中每相邻的四个像素点进行双线性插值,得到采样图像。
即在本实施例中,上采样中采用的差值算法可以为双线性差值算法。双线性差值是有两个变量的插值函数的线性插值扩展。双线性差值的方式可以在两个方向分别进行一次线性插值。对目标码中每相邻的四个像素点在两个方向上分别进行一次线性插值,得到双线性差值的结果,如此提高采样图像的准确性定,降低解码难度,从而提高识别码的识别效率。
在其中一实施例中,所述根据所述目标信息对所述目标码进行上采样,得到采样图像,为:基于图像超分辨率重建技术对所述目标码进行上采样,得到采样图像。
即根据所述目标信息、基于图像超分辨率重建技术对所述目标码进行上采样,得到采样图像。在本实施例中,通过图像超分辨率重建技术实现对所述目标码的上采样,得到采样图像。图像超分辨率重建技术是指利用一组低质量、低分辨率图像(或运动序列)的目标码,来生成一幅高质量、高分辨率图像的采样图像。如此,可以提高采样图像的质量及分辨率,从而提高识别码的识别效率。
一般地,如图6所示,基于图像超分辨率重建技术对所述目标码进行上采样的方式,相较于根据所述目标信息对所述目标码中每相邻的四个像素点进行双线性插值的方式,得到采样图像的分辨率更高。
进一步地,为了进一步保证上采样的准确性,从而提高识别效率。可以通过神经网络模型,基于图像超分辨率重建技术对所述目标码进行上采样,得到采样图像。神经网络模型可以为深度神经网络模型、卷积神经网络模型及循环神经网络等,如可以是FSRCNN(FastRegion-based Convolutional Network,快速区域基础卷积神经网络),ShuffleNet(重组通道网络,一种轻量即神经网络),DenseNet(密集网络)等网络。更进一步地,由于识别码的纹理比较简单,该基于图像超分辨率重建技术对所述目标码进行上采样的神经网络模型可以为轻量型神经网络模型。在该轻量型神经网络模型的训练过程中,损失函数与识别成功率相关,如,当识别成功率大于预设值时模型达到最优。相较于损失函数与PSNR(PeakSignal to Noise Ratio,峰值信噪比)相关的实施方式,其模型较小,可以节约运行时间,从而可进一步提高识别码的识别效率。
在其中一实施例中,所述神经网络模型的隐藏层中、与所述目标码的边缘区域对应的权重大于预设值。
神经网络模型包括输入层、输出层及连接在输入层和输出层之间的隐藏层。隐藏层的数量可以不少于1。该隐藏层中可以包括目标码的各特征区域对应的权重。由于识别码这种对象,对于边缘区域是否清晰与识别效率强相关,神经网络模型的隐藏层中、与目标码边缘区域对应的权重大于预设值,可以提高边缘区域的清晰度。该预设值可以为各区域权重的平均值,也可以为一固定值,还可以为根据预设方式确定的值,预设方式包括对预设区域对应的权值进行加权求和或求平均值等方式。如此,提高边缘区域的清晰度,从而可以提高识别效率。
在其中一具体实施例中,可以通过在训练该神经网络的过程中,计算损失函数时,采用边缘检测算法,如Sobel(索贝尔算子)边缘检测算法,提取目标码的边缘信息,并对边缘区域对应的权重适当提高,使得神经网络模型的隐藏层中、与所述目标码的边缘区域对应的权重大于预设值,从而提高识别效率。
在其中一具体实施例中,通过与所述目标码的边缘区域对应的权重大于预设值的神经网络模型,进行上采样,得到的采样图像,与传统方式得到的采样图像的对比,如图7所示。通过与所述目标码的边缘区域对应的权重大于预设值的神经网络模型,进行上采样,得到的采样图像的清晰度明显大于传统方式得到的采样图像,如,在传统方式得到的图像中用矩形框框出的部分。从而,通过与所述目标码的边缘区域对应的权重大于预设值的神经网络模型,进行上采样,得到采样图像的方式,可以使得识别码的识别效率得到提升。
在其中一实施例中,在训练所述神经网络模型之前,对训练样本中的目标码的标签区域进行过滤。
识别码中可能存在一些没有实质解码意义的信息,如二维码的中心区域可能有标签(Logo)。为了减少解码过程中的干扰,可以对训练样本中的标签区域进行滤除,滤除的方式可以通过获取标签区域位置,然后根据标签区域位置将标签区域设置为空白的形式进行滤除,也可以通过人工方式抠除。由于能够降低解码过程中的干扰,能够提高解码效率,从而可以提高识别码的识别效率。
在其中一具体实施例中,采用密集网络作为网络原型,在保证识别率的前提下精简网络,最终模型大小为13K(千字节,Kilobyte),对于识别码为100dpi*100dpi的待检测图片,耗时为6ms(毫秒)。
在其中一实施例中,所述检测结果还包括识别码类型。所述对所述采样图像进行解码,得到与所述识别码对应的识别结果,包括:根据所述识别码类型对所述采样图像进行解码,得到与所述识别码对应的识别结果。
其中,识别码类型可以包括二维码、一维码(也可以称为条形码)、小程序码、PDF417条码等。由于每种类型的识别码可以分别对应一种解码器,在不确定识别码类型的情况下,需要通过各种类型的解码器,分别进行解码,将解码成功的解码器对应的解码结果作为最终的解码结果。如,一维码通过一维码解码器进行解码,二维码通过二维解码器解码,小程序码通过小程序解码器解码,PDF417条码通过PDF417条码解码器解码。因此,基于本实施例的识别码识别方法,在解码之前确定识别码类型,在解码时只需要通过识别码类型对应的解码器进行解码即可,而无需各个解码器均进行解码,从而可以进一步提高解码效率。
为了进一步提高检测待检测图片中的识别码的检测效率,在其中一实施例中,通过神经网络模型,检测所述待检测图片中的识别码得到检测结果。
神经网络模型可以为CNN(卷积神经网络),RCNN(Regions with CNN features,区域卷积神经网络),FastRCNN(Fast Regions with CNN features,快速区域卷积神经网络),FasterRCNN(Faster Regions with CNN features,更快速区域卷积神经网络)等。通过神经网络模型可以得到更为准确的检测结果,从而可以提高识别码的识别效率。
为了更加适用于移动场景,即方便在移动终端使用,该神经网络模型可以采用SSD(Single Shot multibox Detector,单发多盒检测)算法。进一步地,可以在SSD算法的基础上基于HcNet(高并发卷积神经网络)进行改进,利用ncnn框架(腾讯开源深度学习框架)中对深度可分离卷积结构(Depthwise Separable Convolution)的良好实现,将网络残差中所有3x3卷积都改造成深度可分离卷积结构,并选择多次实验中一个较小的网络系数。如此,使得该神经网络模型更小,耗费时间更少,从而进一步提高识别码的识别效率。需要说明的是,基于本实施例的方案,最终在ImageNet(图像网络)上预训练的BoxNet(盒子网络)基础网络大小只有3M(兆),其检测结果中排在第一位的检测结果的准确率,及Top-1准确率达到56%,算法效果与AlexNet(亚历克斯网络)相同,而AlexNet的模型大小近200M的,且计算量大十倍以上。在其中一具体实施例中,BoxNet的结构示意图如图8所示,将三通道300dpi*300dpi的图像进行卷积,得到4个80通道的38dpi*38dpi的图像;继续进行卷积操作,得到8个160通道的19dpi*19dpi的图像;继续进行卷积操作,得到4个320通道的10dpi*10dpi的图像;继续进行卷积操作得到3个80通道的10dpi*10dpi的图像;继续进行卷积操作,最终得到该图像网络。
在对盒子网络进行进一步量化,如,若通过设置图片的方式获取待检测图片,则采用第一分辨率,检测所述待检测图片中的识别码得到检测结果;若通过扫描的方式获取待检测图片,则采用第二分辨率,检测所述待检测图片中的识别码得到检测结果;所述第一分辨率大于所述第二分辨率。最终,基于SSD算法的盒子模型,在量化16位后,模型大小为500K,检测单帧耗时只需15ms。
进一步地,所述神经网络模型的训练过程中使用的正样本对应的目标码与识别码的交并比大于预设值。
由于不完整的识别码被检测出来并不能解码,识别码的检测相较于普通的目标检测,对完整性的要求更高。因此,在训练过程中,正样本中的识别码需要更严格的保证其完整性;在进行数据增强样本采样时,需要对正样本中最小对象覆盖进行严格限制,采样图像中的目标码需要尽量包含整个识别码。
在本实施例中,通过将训练过程中,正样本对应的目标码与识别码的交并比,设置为大于预设值的方式,提高正样本对应的目标码与识别码的交并比。该交并比可以是正样本中对应的目标码和识别码的交集与并集的比值,即正样本中对应的目标码和识别码的交集,与目标码和识别码的并集的比值。该交集与该并集的比值可以是交集的面积与并集的面积的比值,也可以是交集的像素点的数量与并集的像素点的数量的比值。如此,提高识别码的完整性在神经网络模型中对应的权值,从而提高识别码的识别效率。
在其中一实施例中,所述对所述采样图像进行解码,得到与所述识别码对应的识别结果,包括:对所述采样图像进行二值化处理,得到二值化图像;解码所述二值化图像,得到与所述识别码对应的识别结果。
二值化处理是将采样图像上的像素点的灰度值设置为两个值中的一个,该两个值可以为0或255,如此得到的二值化图像将呈现出明显的黑白效果。二值化的方式可以包括混合二值化、快速窗口二值化及自适应二值化等方式。由于本申请的目的是进行识别码的识别,而识别码的识别可以仅涉及黑白图像的识别。因此在解码之前进行二值化处理,可以提高在解码时的解码效率,从而提高识别码的识别效率。
在其中一具体实施例中,首先,通过扫描的方式获取待检测图片。然后通过神经网络模型,检测所述待检测图片中的识别码得到检测结果,所述神经网络模型的训练过程中使用的正样本对应的目标码与识别码的交并比大于预设值。最后,根据所述目标信息对所述目标码进行采样,得到采样图像;并对所述采样图像进行解码,得到与所述识别码对应的识别结果。在进一步的具体实施例中,根据所述目标信息对所述目标码进行采样,得到采样图像,包括:当所述目标码满足分辨率条件时,根据所述目标信息对所述目标码中每相邻的四个像素点进行双线性插值,得到采样图像。这两个具体实施例的效果与传统识别方式的对比图,如图9所示。基于前一具体实施例的方案,识别码识别时,在降低较小解码成功率的情况下,单帧平均耗时减少了大约150%,因此,其识别效率高于传统方案。基于后一具体实施例的方案,在比前一具体实施例增加较少单帧耗时的情况下,将解码成功率由32%左右提升到36%左右。
在另一具体实施例中,首先,通过设置图片的方式获取待检测图片。然后通过神经网络模型,检测所述待检测图片中的识别码得到检测结果,所述神经网络模型的训练过程中使用的正样本对应的目标码与识别码的交并比大于预设值。最后,根据所述目标信息对所述目标码进行采样,得到采样图像;并对所述采样图像进行解码,得到与所述识别码对应的识别结果。在进一步的具体实施例中,根据所述目标信息对所述目标码进行采样,得到采样图像,包括:当所述目标码满足分辨率条件时,根据所述目标信息、基于图像超分辨率重建技术对所述目标码进行上采样,得到采样图像。这两个具体实施例的效果与传统识别方式的对比图,如图10所示。基于前一具体实施例的方案,识别码识别时,在降低较小解码成功率的情况下,单帧平均耗时减少了大约150%,因此,其识别效率高于传统方案。基于后一具体实施例的方案,在比前一具体实施例增加较少单帧耗时的情况下,将解码成功率由70%左右提升到90%左右。
在其中一具体实施例中,如图11所示,在获取待检测图片之后,检测所述待检测图片中的识别码得到检测结果,所述检测结果包括与所述识别码对应的目标码的目标信息检及识别码类型;该识别码类型包括二维码、一维码及小程序码。当所述目标码满足分辨率条件时,根据所述目标信息对所述目标码进行上采样,得到采样图像。然后,对采样图像进行二值化处理,得到二值化图像;该二值化处理包括混合二值化、快速窗口二值化及自适应二值化。最后,通过与识别码类型对应的解码器对二值化图像进行解码。由于在采样之前,检测识别码,得到包括目标码信息及识别码类型的检测结果,因此在采样、二值化的过程中,无需对整张待采样图像进行处理,同时,解码时只需要采用与识别码类型对应的解码器进行解码,因此,可以提高识别码的识别效率。
应该理解的是,虽然图4的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图4中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图12所示,提供了一种运行于图3中的计算机设备304的识别码识别装置,包括:
图片获取模块202,用于获取待检测图片;
目标检测模块204,用于检测所述待检测图片中的识别码得到检测结果,所述检测结果包括与所述识别码对应的目标码的目标信息;
采样模块206,用于根据所述目标信息对所述目标码进行采样,得到采样图像;
解码模块208,用于对所述采样图像进行解码,得到与所述识别码对应的识别结果。
上述识别码识别装置,获取待检测图片;检测所述待检测图片中的识别码得到检测结果,所述检测结果包括与所述识别码对应的目标码的目标信息;根据所述目标信息对所述目标码进行采样,得到采样图像;对所述采样图像进行解码,得到与所述识别码对应的识别结果。由于在获取到待检测图片后,并不是直接对整张待检测图片进行采样、解码等操作,而是先对整张图片进行检测,得到针对识别码的检测结果,该检测结果包括与识别码对应的目标码的目标信息。然后,再针对该目标码进行采样、解码等操作。如此,可以降低待检测图片中非识别码的干扰,提高识别码的识别效率。
在其中一实施例中,所述采样模块,用于当所述目标码满足分辨率条件时,根据所述目标信息对所述目标码进行上采样,得到采样图像。
在其中一实施例中,所述图片获取模块,用于通过设置图片的方式获取待检测图片;所述采集模块,用于当所述目标码满足分辨率条件时,根据所述目标信息对所述目标码进行上采样,得到采样图像。
在其中一实施例中,所述采样模块,用于当所述目标码的分辨率小于预设值时,根据所述目标信息对所述目标码进行上采样,得到采样图像。
在其中一实施例中,所述采样模块,用于根据所述目标信息对所述目标码中每相邻的四个像素点进行双线性插值,得到采样图像;
在其中一实施例中,所述采样模块,用于根据所述目标信息、基于图像超分辨率重建技术对所述目标码进行上采样,得到采样图像。
进一步地,通过神经网络模型,基于图像超分辨率重建技术对所述目标码进行上采样,得到采样图像;所述神经网络模型的隐藏层中、与所述目标码的边缘区域对应的权重大于预设值。
在其中一实施例中,该装置还包括过滤模块,所述过滤模块,用于在训练所述神经网络模型之前,对训练样本中的目标码的标签区域进行过滤。
在其中一实施例中,所述图片获取模块,用于通过设置图片的方式获取待检测图片。
在其中一实施例中,所述图片获取模块,用于通过扫描的方式获取待检测图片。
在其中一实施例中,所述图片获取模块,用于通过设置图片的方式获取待检测图片;所述目标检测模块,用于采用第一分辨率,检测所述待检测图片中的识别码得到检测结果。
在其中一实施例中,所述图片获取模块,用于通过扫描的方式获取待检测图片;所述目标检测模块,用于采用第二分辨率,检测所述待检测图片中的识别码得到检测结果。
其中,所述第一分辨率大于所述第二分辨率。
在其中一实施例中,所述检测结果还包括识别码类型;
所述解码模块,用于根据所述识别码类型对所述采样图像进行解码,得到与所述识别码对应的识别结果。
在其中一实施例中,所述装置还包括二值化模块;
所述二值化模块,用于对所述采样图像进行二值化处理,得到二值化图像;
所述解码模块,用于解码所述二值化图像,得到与所述识别码对应的识别结果。
在其中一实施例中,所述目标检测模块,用于通过神经网络模型,检测所述待检测图片中的识别码得到检测结果;所述神经网络模型的训练过程中使用的正样本对应的目标码与识别码的交并比大于预设值。
在一个实施例中,提供了一种计算机设备,该计算机设备可以为服务器,其内部结构图可以如图13所示。该计算机设备包括通过***总线连接的处理器、存储器和网络接口。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作***和计算机程序。该内存储器为非易失性存储介质中的操作***和计算机程序的运行提供环境。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种识别码识别方法。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是终端,其内部结构图可以如图14所示。该计算机设备包括通过***总线连接的处理器、存储器、网络接口、显示屏和输入装置。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作***和计算机程序。该内存储器为非易失性存储介质中的操作***和计算机程序的运行提供环境。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种识别码识别方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏,该计算机设备的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图13、14中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现上述识别码识别方法的步骤。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现上述识别码识别方法的步骤。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (24)
1.一种识别码识别方法,所述方法包括:
获取待检测图片;
检测所述待检测图片中的识别码得到检测结果,所述检测结果包括与所述识别码对应的目标码的目标信息;所述目标码是通过检测的方式检测到的、认定为识别码的码;其中,若通过设置图片的方式获取待检测图片,则采用第一分辨率,检测所述待检测图片中的识别码得到检测结果;若通过扫描的方式获取待检测图片,则采用第二分辨率,检测所述待检测图片中的识别码得到检测结果;所述第一分辨率大于所述第二分辨率;通过设置图片的方式获取待检测图片包括:通过预设指令将预设图片设置为待检测图片;
根据所述目标信息对所述目标码进行采样,得到采样图像;所述采样图像是通过神经网络模型进行采样得到的,所述神经网络模型的隐藏层中、与所述目标码的边缘区域对应的权重大于预设值;所述隐藏层包括所述目标码的各特征区域对应的权重,所述预设值根据各特征区域对应的权重确定;
对所述采样图像进行解码,得到与所述识别码对应的识别结果。
2.根据权利要求1所述的方法,其特征在于,所述根据所述目标信息对所述目标码进行采样,得到采样图像,包括:当所述目标码满足分辨率条件时,根据所述目标信息对所述目标码进行上采样,得到采样图像。
3.根据权利要求2所述的方法,其特征在于,若通过设置图片的方式获取待检测图片,则
所述根据所述目标信息对所述目标码进行采样,得到采样图像,包括:当所述目标码满足分辨率条件时,根据所述目标信息对所述目标码进行上采样,得到采样图像。
4.根据权利要求2所述的方法,其特征在于:当所述目标码的分辨率小于预设值时,根据所述目标信息对所述目标码进行上采样,得到采样图像。
5.根据权利要求2所述的方法,其特征在于,所述根据所述目标信息对所述目标码进行上采样,得到采样图像,包括以下两项中的任意一项:
根据所述目标信息对所述目标码中每相邻的四个像素点进行双线性插值,得到采样图像;
基于图像超分辨率重建技术对所述目标码进行上采样,得到采样图像。
6.根据权利要求5所述的方法,其特征在于,通过神经网络模型,基于图像超分辨率重建技术对所述目标码进行上采样,得到采样图像。
7.根据权利要求6所述的方法,其特征在于,在训练所述神经网络模型之前,对训练样本中的目标码的标签区域进行过滤。
8.根据权利要求1所述的方法,其特征在于,所述获取待检测图片,包括以下两种方式中的任意一种:
通过设置图片的方式获取待检测图片;
通过扫描的方式获取待检测图片。
9.根据权利要求1所述的方法,其特征在于,所述检测结果还包括识别码类型;
所述对所述采样图像进行解码,得到与所述识别码对应的识别结果,包括:根据所述识别码类型对所述采样图像进行解码,得到与所述识别码对应的识别结果。
10.根据权利要求1所述的方法,其特征在于,所述对所述采样图像进行解码,得到与所述识别码对应的识别结果,包括:
对所述采样图像进行二值化处理,得到二值化图像;
解码所述二值化图像,得到与所述识别码对应的识别结果。
11.根据权利要求1所述的方法,其特征在于:通过神经网络模型,检测所述待检测图片中的识别码得到检测结果;所述神经网络模型的训练过程中使用的正样本对应的目标码与识别码的交并比大于预设值。
12.一种识别码识别装置,所述装置包括:
图片获取模块,用于获取待检测图片;
目标检测模块,用于检测所述待检测图片中的识别码得到检测结果,所述检测结果包括与所述识别码对应的目标码的目标信息;所述目标码是通过检测的方式检测到的、认定为识别码的码;其中,若通过设置图片的方式获取待检测图片,则采用第一分辨率,检测所述待检测图片中的识别码得到检测结果;若通过扫描的方式获取待检测图片,则采用第二分辨率,检测所述待检测图片中的识别码得到检测结果;所述第一分辨率大于所述第二分辨率;通过设置图片的方式获取待检测图片包括:通过预设指令将预设图片设置为待检测图片;
采样模块,用于根据所述目标信息对所述目标码进行采样,得到采样图像;所述采样图像是通过神经网络模型进行采样得到的,所述神经网络模型的隐藏层中、与所述目标码的边缘区域对应的权重大于预设值;所述隐藏层包括所述目标码的各特征区域对应的权重,所述预设值根据各特征区域对应的权重确定;
解码模块,用于对所述采样图像进行解码,得到与所述识别码对应的识别结果。
13.根据权利要求12所述的装置,其特征在于,所述采样模块用于:
当所述目标码满足分辨率条件时,根据所述目标信息对所述目标码进行上采样,得到采样图像。
14.根据权利要求13所述的装置,其特征在于,所述图片获取模块,用于:
通过设置图片的方式获取待检测图片;
所述采样模块,用于:
当所述目标码满足分辨率条件时,根据所述目标信息对所述目标码进行上采样,得到采样图像。
15.根据权利要求13所述的装置,其特征在于:所述采样模块,用于:
当所述目标码的分辨率小于预设值时,根据所述目标信息对所述目标码进行上采样,得到采样图像。
16.根据权利要求13所述的装置,其特征在于,所述采样模块,用于实现以下两项中的任意一项:
根据所述目标信息对所述目标码中每相邻的四个像素点进行双线性插值,得到采样图像;
基于图像超分辨率重建技术对所述目标码进行上采样,得到采样图像。
17.根据权利要求16所述的装置,其特征在于,所述采样模块,用于:
通过神经网络模型,基于图像超分辨率重建技术对所述目标码进行上采样,得到采样图像。
18.根据权利要求17所述的装置,其特征在于,所述装置还包括过滤模块,所述过滤模块,用于:
在训练所述神经网络模型之前,对训练样本中的目标码的标签区域进行过滤。
19.根据权利要求12所述的装置,其特征在于,所述图片获取模块,用于实现以下两种方式中的任意一种:
通过设置图片的方式获取待检测图片;
通过扫描的方式获取待检测图片。
20.根据权利要求12所述的装置,其特征在于,所述检测结果还包括识别码类型;所述解码模块,用于:
根据所述识别码类型对所述采样图像进行解码,得到与所述识别码对应的识别结果。
21.根据权利要求12所述的装置,其特征在于,所述装置还包括二值化模块,所述二值化模块,用于:
对所述采样图像进行二值化处理,得到二值化图像;
解码所述二值化图像,得到与所述识别码对应的识别结果。
22.根据权利要求12所述的装置,其特征在于,所述目标检测模块,用于:
通过神经网络模型,检测所述待检测图片中的识别码得到检测结果;所述神经网络模型的训练过程中使用的正样本对应的目标码与识别码的交并比大于预设值。
23.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至11中任一项所述方法的步骤。
24.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至11中任一项所述的方法的步骤。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810934332.5A CN109325491B (zh) | 2018-08-16 | 2018-08-16 | 识别码识别方法、装置、计算机设备和存储介质 |
PCT/CN2019/098862 WO2020034850A1 (zh) | 2018-08-16 | 2019-08-01 | 识别码识别方法、装置、计算机设备和存储介质 |
JP2020551561A JP7164127B2 (ja) | 2018-08-16 | 2019-08-01 | 識別コードの識別方法並びに、その装置、コンピュータ機器及びコンピュータプログラム |
EP19849577.2A EP3764282A4 (en) | 2018-08-16 | 2019-08-01 | IDENTIFICATION PROCESS FOR IDENTIFICATION CODE, DEVICE, COMPUTER DEVICE AND INFORMATION MEDIA |
US17/003,507 US11494577B2 (en) | 2018-08-16 | 2020-08-26 | Method, apparatus, and storage medium for identifying identification code |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810934332.5A CN109325491B (zh) | 2018-08-16 | 2018-08-16 | 识别码识别方法、装置、计算机设备和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109325491A CN109325491A (zh) | 2019-02-12 |
CN109325491B true CN109325491B (zh) | 2023-01-03 |
Family
ID=65264104
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810934332.5A Active CN109325491B (zh) | 2018-08-16 | 2018-08-16 | 识别码识别方法、装置、计算机设备和存储介质 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11494577B2 (zh) |
EP (1) | EP3764282A4 (zh) |
JP (1) | JP7164127B2 (zh) |
CN (1) | CN109325491B (zh) |
WO (1) | WO2020034850A1 (zh) |
Families Citing this family (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109325491B (zh) | 2018-08-16 | 2023-01-03 | 腾讯科技(深圳)有限公司 | 识别码识别方法、装置、计算机设备和存储介质 |
CN110147864B (zh) * | 2018-11-14 | 2022-02-22 | 腾讯科技(深圳)有限公司 | 编码图案的处理方法和装置、存储介质、电子装置 |
CN110070092A (zh) * | 2019-03-15 | 2019-07-30 | 平安科技(深圳)有限公司 | 车型识别方法、装置、计算机设备及存储介质 |
CN110188605B (zh) * | 2019-04-18 | 2021-07-06 | 浙江大华技术股份有限公司 | 目标物体识别方法、装置、***、计算机设备和存储介质 |
CN110493600B (zh) * | 2019-08-23 | 2023-07-04 | 腾讯科技(深圳)有限公司 | 图像编码方法、装置、计算机设备及存储介质 |
CN110991201B (zh) * | 2019-11-25 | 2023-04-18 | 浙江大华技术股份有限公司 | 条码检测方法及相关装置 |
CN111476050B (zh) * | 2020-04-02 | 2023-10-10 | 北京致胜宏达科技有限公司 | 一种条码识别方法、装置、电子设备及存储介质 |
CN111612115B (zh) * | 2020-06-15 | 2023-10-20 | 支付宝(杭州)信息技术有限公司 | 交通卡的计次方法、装置、扫码设备和计次卡服务器 |
CN111767754B (zh) * | 2020-06-30 | 2024-05-07 | 创新奇智(北京)科技有限公司 | 一种识别码的识别方法、装置、电子设备及存储介质 |
CN112069853A (zh) * | 2020-09-16 | 2020-12-11 | 福州大学 | 基于深度学习的二维条码图像超分辨方法 |
GB2614688A (en) * | 2020-09-30 | 2023-07-12 | Snap Inc | Location-guided scanning of visual codes |
JP7217996B2 (ja) * | 2020-10-27 | 2023-02-06 | 株式会社コジマプラスチックス | 作業管理システム及び教師データの生成方法 |
CN113160170A (zh) * | 2021-04-19 | 2021-07-23 | 国网山东省电力公司威海供电公司 | 电力巡检销钉级故障识别检测方法、***、介质及设备 |
CN113378598B (zh) * | 2021-06-21 | 2023-04-25 | 北方工业大学 | 一种基于深度学习的动态条码检测方法 |
CN113486898B (zh) * | 2021-07-08 | 2024-05-31 | 西安电子科技大学 | 一种基于改进ShuffleNet的雷达信号RD图像干扰辨识方法及*** |
CN113468906B (zh) * | 2021-07-12 | 2024-03-26 | 深圳思谋信息科技有限公司 | 图形码提取模型构建方法、识别方法、装置、设备和介质 |
CN113780492A (zh) * | 2021-08-02 | 2021-12-10 | 南京旭锐软件科技有限公司 | 一种二维码二值化方法、装置、设备及可读存储介质 |
CN113627207B (zh) * | 2021-08-02 | 2024-03-22 | 深圳思谋信息科技有限公司 | 条码识别方法、装置、计算机设备和存储介质 |
CN113608793A (zh) * | 2021-08-10 | 2021-11-05 | 深圳豪杰创新电子有限公司 | Bios参数修改方法、装置、工具和可读存储介质 |
CN113658164B (zh) * | 2021-08-24 | 2024-05-24 | 凌云光技术股份有限公司 | 一种二维码信息提取准确性的评估方法及装置 |
CN113920294B (zh) * | 2021-10-20 | 2024-06-11 | 广东亿迅科技有限公司 | 一种海量***的识别方法、***及存储介质 |
CN113709006B (zh) * | 2021-10-29 | 2022-02-08 | 上海闪马智能科技有限公司 | 一种流量确定方法、装置、存储介质及电子装置 |
CN114419306A (zh) * | 2021-11-23 | 2022-04-29 | 西南交通大学 | 基于改进型ssd的小目标物体高精度检测方法、***及装置 |
CN114663404A (zh) * | 2022-03-25 | 2022-06-24 | 广州中科云图智能科技有限公司 | 一种线路缺陷识别方法、装置、电子设备及存储介质 |
EP4290403B1 (de) | 2022-06-07 | 2024-07-31 | Sick Ag | Lesen eines eindimensionalen optischen codes |
CN117438056B (zh) * | 2023-12-20 | 2024-03-12 | 达州市中心医院(达州市人民医院) | 用于消化内镜影像数据的编辑筛选与存储控制方法和*** |
Family Cites Families (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003337941A (ja) | 2002-05-20 | 2003-11-28 | Matsushita Electric Ind Co Ltd | 画像認識装置と画像認識方法とプログラム |
JP2008027157A (ja) | 2006-07-20 | 2008-02-07 | Nippon Telegr & Teleph Corp <Ntt> | 2次元コードの処理装置、2次元コードの処理方法およびこの方法のプログラム |
JP2009272982A (ja) | 2008-05-09 | 2009-11-19 | Konica Minolta Business Technologies Inc | ファクシミリ装置 |
US8881984B2 (en) * | 2009-12-31 | 2014-11-11 | Samsung Electrônica da Amazônia Ltda. | System and automatic method for capture, reading and decoding barcode images for portable devices having digital cameras |
JP5482327B2 (ja) | 2010-03-12 | 2014-05-07 | 富士通株式会社 | 撮像装置、撮像方法および撮像プログラム |
US8905314B2 (en) * | 2010-09-30 | 2014-12-09 | Apple Inc. | Barcode recognition using data-driven classifier |
JP5412465B2 (ja) * | 2011-04-27 | 2014-02-12 | 京セラドキュメントソリューションズ株式会社 | 画像処理装置 |
US9152834B2 (en) * | 2012-08-09 | 2015-10-06 | Symbol Technologies, Llc | Image capture based on scanning resolution setting compared to determined scanning resolution relative to target distance in barcode reading |
CN104781834B (zh) | 2012-11-13 | 2018-01-19 | 共同印刷株式会社 | 二维码、二维码的生成***以及分析程序 |
CN103530590B (zh) * | 2013-10-19 | 2016-02-24 | 高韬 | Dpm二维码识别*** |
CN104573601A (zh) * | 2013-10-28 | 2015-04-29 | 江苏联海通信技术有限公司 | 一种复杂环境下器件dpm二维码识别*** |
CN104751093B (zh) * | 2013-12-31 | 2018-12-04 | 阿里巴巴集团控股有限公司 | 用于获取宿主设备显示的图像识别码的方法和装置 |
JP6262610B2 (ja) | 2014-07-04 | 2018-01-17 | Kddi株式会社 | 情報登録装置及び情報継続登録装置並びに方法及びプログラム |
CN104751097B (zh) | 2015-03-30 | 2018-05-11 | 深圳市道通科技股份有限公司 | 一种车辆识别码的检测处理方法及装置 |
CN105046186B (zh) * | 2015-08-27 | 2018-06-29 | 北京恒华伟业科技股份有限公司 | 一种二维码的识别方法及装置 |
KR101871379B1 (ko) * | 2016-08-25 | 2018-06-26 | 서울과학기술대학교 산학협력단 | 바코드 인식 장치 |
CN106548110A (zh) * | 2016-10-25 | 2017-03-29 | 广东欧珀移动通信有限公司 | 图片处理方法及装置 |
CN106610835A (zh) * | 2016-12-23 | 2017-05-03 | 广东欧珀移动通信有限公司 | 识别码处理方法、装置和计算机设备 |
CN107067006B (zh) * | 2017-04-20 | 2022-03-18 | 金电联行(北京)信息技术有限公司 | 一种服务于数据采集的验证码识别方法及*** |
CN107194318B (zh) * | 2017-04-24 | 2020-06-12 | 北京航空航天大学 | 目标检测辅助的场景识别方法 |
CN107155110A (zh) * | 2017-06-14 | 2017-09-12 | 福建帝视信息科技有限公司 | 一种基于超分辨率技术的图片压缩方法 |
CN107491709A (zh) * | 2017-08-29 | 2017-12-19 | 努比亚技术有限公司 | 一种码图识别方法、终端和计算机可读存储介质 |
CN107609525B (zh) * | 2017-09-19 | 2020-05-22 | 吉林大学 | 基于剪枝策略构建卷积神经网络的遥感图像目标检测方法 |
CN109711508B (zh) * | 2017-10-25 | 2020-06-05 | 北京京东尚科信息技术有限公司 | 图像处理方法和装置 |
CN107944325B (zh) * | 2017-11-23 | 2020-01-03 | 维沃移动通信有限公司 | 一种扫码方法、扫码装置及移动终端 |
US20190188729A1 (en) * | 2017-12-18 | 2019-06-20 | Beijing Jingdong Shangke Information Technology Co., Ltd. | System and method for detecting counterfeit product based on deep learning |
CN108366253B (zh) * | 2018-01-11 | 2020-01-31 | 福建联迪商用设备有限公司 | 摄像头功能的测试方法及智能模块 |
CN108268641B (zh) * | 2018-01-18 | 2020-11-13 | 大象慧云信息技术有限公司 | ***信息识别方法及***信息识别装置、设备和存储介质 |
CN109325491B (zh) * | 2018-08-16 | 2023-01-03 | 腾讯科技(深圳)有限公司 | 识别码识别方法、装置、计算机设备和存储介质 |
-
2018
- 2018-08-16 CN CN201810934332.5A patent/CN109325491B/zh active Active
-
2019
- 2019-08-01 JP JP2020551561A patent/JP7164127B2/ja active Active
- 2019-08-01 WO PCT/CN2019/098862 patent/WO2020034850A1/zh active Application Filing
- 2019-08-01 EP EP19849577.2A patent/EP3764282A4/en active Pending
-
2020
- 2020-08-26 US US17/003,507 patent/US11494577B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
CN109325491A (zh) | 2019-02-12 |
JP7164127B2 (ja) | 2022-11-01 |
US20200394376A1 (en) | 2020-12-17 |
WO2020034850A1 (zh) | 2020-02-20 |
US11494577B2 (en) | 2022-11-08 |
JP2021516827A (ja) | 2021-07-08 |
EP3764282A4 (en) | 2021-05-26 |
EP3764282A1 (en) | 2021-01-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109325491B (zh) | 识别码识别方法、装置、计算机设备和存储介质 | |
CN103400099B (zh) | 终端和二维码识别方法 | |
CN112102204B (zh) | 图像增强方法、装置及电子设备 | |
CN103279730B (zh) | 移动终端处理可视化图形编码的方法和装置 | |
CN112329702B (zh) | 一种快速人脸密度预测和人脸检测方法、装置、电子设备及存储介质 | |
CN111968064B (zh) | 一种图像处理方法、装置、电子设备及存储介质 | |
CN113168684A (zh) | 提升低亮度图像的质量的方法、***和计算机可读介质 | |
CN111161181A (zh) | 图像数据的增强方法、模型的训练方法、设备和存储介质 | |
CN111914654B (zh) | 一种文本版面分析方法、装置、设备和介质 | |
CN110766007B (zh) | 证件遮挡检测方法、装置、设备及可读存储介质 | |
CN111275034A (zh) | 从图像中提取文本区域的方法、装置、设备和存储介质 | |
CN112819720A (zh) | 图像处理方法、装置、电子设备及存储介质 | |
CN113888431A (zh) | 图像修复模型的训练方法、装置、计算机设备及存储介质 | |
CN110751004B (zh) | 二维码检测方法、装置、设备及存储介质 | |
CN112052702A (zh) | 一种识别二维码的方法和装置 | |
CN115240203A (zh) | 业务数据处理方法、装置、设备及存储介质 | |
CN114519788A (zh) | 图像处理方法、装置、电子设备及计算机可读存储介质 | |
Anvari et al. | A survey on deep learning based document image enhancement | |
CN112633200A (zh) | 基于人工智能的人脸图像比对方法、装置、设备及介质 | |
CN112036342A (zh) | 单证抓拍方法、设备及计算机存储介质 | |
CN116798041A (zh) | 图像识别方法、装置和电子设备 | |
CN112861836B (zh) | 文本图像处理方法、文本及卡证图像质量评价方法和装置 | |
Pal et al. | Super-resolution of textual images using autoencoders for text identification | |
CN111709338B (zh) | 一种用于表格检测的方法、装置及检测模型的训练方法 | |
CN111401366B (zh) | 字符识别方法、装置、计算机设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |