CN108734459A - 一种3d超市商品核验*** - Google Patents
一种3d超市商品核验*** Download PDFInfo
- Publication number
- CN108734459A CN108734459A CN201810964580.4A CN201810964580A CN108734459A CN 108734459 A CN108734459 A CN 108734459A CN 201810964580 A CN201810964580 A CN 201810964580A CN 108734459 A CN108734459 A CN 108734459A
- Authority
- CN
- China
- Prior art keywords
- commodity
- shopping cart
- shopping
- light
- rendering
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000009877 rendering Methods 0.000 claims abstract description 86
- 230000003993 interaction Effects 0.000 claims abstract description 7
- 238000005303 weighing Methods 0.000 claims description 22
- 238000005286 illumination Methods 0.000 claims description 19
- 230000001105 regulatory effect Effects 0.000 claims description 19
- 238000001514 detection method Methods 0.000 claims description 14
- 230000004044 response Effects 0.000 claims description 14
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 claims description 12
- 239000000178 monomer Substances 0.000 claims description 10
- 230000002159 abnormal effect Effects 0.000 claims description 9
- 238000003708 edge detection Methods 0.000 claims description 4
- 230000037396 body weight Effects 0.000 claims description 3
- 201000010099 disease Diseases 0.000 claims description 3
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 claims description 3
- 230000001960 triggered effect Effects 0.000 claims description 3
- 210000003205 muscle Anatomy 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 11
- 230000000694 effects Effects 0.000 description 9
- 238000005516 engineering process Methods 0.000 description 9
- 238000000034 method Methods 0.000 description 9
- 239000007788 liquid Substances 0.000 description 6
- 238000005057 refrigeration Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 239000002826 coolant Substances 0.000 description 3
- IJGRMHOSHXDMSA-UHFFFAOYSA-N Atomic nitrogen Chemical compound N#N IJGRMHOSHXDMSA-UHFFFAOYSA-N 0.000 description 2
- LFQSCWFLJHTTHZ-UHFFFAOYSA-N Ethanol Chemical compound CCO LFQSCWFLJHTTHZ-UHFFFAOYSA-N 0.000 description 2
- 238000001816 cooling Methods 0.000 description 2
- 235000013399 edible fruits Nutrition 0.000 description 2
- VLKZOEOYAKHREP-UHFFFAOYSA-N n-Hexane Chemical compound CCCCCC VLKZOEOYAKHREP-UHFFFAOYSA-N 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- VYPSYNLAJGMNEJ-UHFFFAOYSA-N Silicium dioxide Chemical compound O=[Si]=O VYPSYNLAJGMNEJ-UHFFFAOYSA-N 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 239000000956 alloy Substances 0.000 description 1
- 229910045601 alloy Inorganic materials 0.000 description 1
- XAGFODPZIPBFFR-UHFFFAOYSA-N aluminium Chemical compound [Al] XAGFODPZIPBFFR-UHFFFAOYSA-N 0.000 description 1
- 229910052782 aluminium Inorganic materials 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000000712 assembly Effects 0.000 description 1
- 238000000429 assembly Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000001680 brushing effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000005094 computer simulation Methods 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 235000019441 ethanol Nutrition 0.000 description 1
- 235000013305 food Nutrition 0.000 description 1
- 238000007710 freezing Methods 0.000 description 1
- 230000008014 freezing Effects 0.000 description 1
- 230000008570 general process Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000007257 malfunction Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 229910052757 nitrogen Inorganic materials 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000000741 silica gel Substances 0.000 description 1
- 229910002027 silica gel Inorganic materials 0.000 description 1
- 239000002904 solvent Substances 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/64—Three-dimensional objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K17/00—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations
- G06K17/0022—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisious for transferring data to distant stations, e.g. from a sensing device
- G06K17/0029—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisious for transferring data to distant stations, e.g. from a sensing device the arrangement being specially adapted for wireless interrogation of grouped or bundled articles tagged with wireless record carriers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/08—Payment architectures
- G06Q20/20—Point-of-sale [POS] network systems
- G06Q20/208—Input by product or record sensing, e.g. weighing or scanner processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
- G06T7/62—Analysis of geometric attributes of area, perimeter, diameter or volume
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/141—Control of illumination
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
- G06T2207/10012—Stereo images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10141—Special mode during image acquisition
- G06T2207/10152—Varying illumination
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Business, Economics & Management (AREA)
- Geometry (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- Strategic Management (AREA)
- Computer Graphics (AREA)
- General Business, Economics & Management (AREA)
- Software Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Engineering & Computer Science (AREA)
- Cash Registers Or Receiving Machines (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明提供了一种3D超市商品核验***,包括:主机,以及与所述主机均电性连接的3D图像采集装置、显示控制装置和购物清单获取装置;所述主机包括处理器、网络连接组件和供电组件;所述处理器与所述网络连接组件和所述供电组件电性连接,并且通过连接总线连接所述3D图像采集装置、所述显示控制装置和所述购物清单信息获取装置,接交互数据和发送控制指令。本发明实现了对于购物车内的商品的无损无搬运的在购物车内的直接核验,缩短了核验时间、提高了购物结算效率,避免了由于人工逐件核验极易出现少算或多算的情况,提高了用户体验,给核验结算人员和消费者均带来了方便。
Description
技术领域
本发明属于超市购物结算技术领域,尤其涉及一种3D超市商品核验***。
背景技术
在开放式的购物环境中,例如超市,一般是指商品开放陈列、顾客自我选购、排队收银结算,以经营生鲜食品、日杂用品为主的商店。是一种消费者自助选购、统一收银结算的零售企业。
目前,在开放式的购物环境中,购物结算的方法为通过人工进行对消费者的购物车内的商品,需要进行逐件的去核验,一般过程为:商品取出查看---逐个扫码---核对商品与清单是否一致---最终结算,需要进行人工的对货物进行清点,并且将货物逐件拿出检查,核验时间长、购物结算效率低,并且人工逐件核验极易出现少算或多算的情况,用户体验差,给核验结算人员和消费者均带来了不便。
发明内容
基于上述问题,本发明的主要目的在于提供一种3D超市商品核验***,以解决现有技术中的缺陷和不足。
为解决上述问题,本发明提供一种3D超市商品核验***,包括:
主机,以及与所述主机均电性连接的3D图像采集装置、显示控制装置和购物清单获取装置;
所述主机包括处理器、网络连接组件和供电组件;所述处理器与所述网络连接组件和所述供电组件电性连接,并且通过连接总线连接所述3D图像采集装置、所述显示控制装置和所述购物清单信息获取装置,接交互数据和发送控制指令;
所述购物清单获取装置,用于获取用户购物车内的商品对应的购物清单;其中,首先获取用户的购物清单对应的清单编码,其次通过所述网络连接组件从云端服务器中获得与所述清单编码对应的购物清单以及与所述购物清单中商品对应的商品信息;
所述3D图像采集装置,用于对在图像采集区域内的购物车进行3D图像采集,获得车内3D图像;对所述车内3D图像进行识别,获得所述车内3D图像对应的当前商品总体积;
所述处理器根据所述商品信息中的每个商品的单体体积,计算得到购物清单中的所有商品的总体体积,并根据所述总体体积和所述单体体积,确定所述购物车内所有商品的以不同形式堆叠的预测堆叠体积,并构建与所述购物清单对应的预测堆叠体积数据库;
所述处理器判断所述预测堆叠体积数据库中是否存在与所述当前商品总体积相同的组合形式的预测堆叠体积;若是,则判定未出现异常情况;若否,则判定出现异常情况,生成一提示信息,以便于提示管理人员根据所述提示信息进行排查。
优选地,所述3D超市商品核验***还包括支撑调节装置和方位图像采集装置;所述方位图像采集装置与所述处理器电性连接,用于对所述图像采集区域内的所述购物车进行方位图像采集,得到方位高度预判图像;所述处理器对所述方位高度预判图像进行识别,获得所述购物车内商品对应的方位信息和高度信息;所述处理器通过所述支撑调节装置调节3D图像采集装置,移动至与所述方位信息和所述高度信息相适应的图像采集位置,以便于在所述图像采集位置上对在图像采集区域内的购物车进行3D图像采集;
所述支撑调节装置长度方向的一端与所述主机的上端连接,另一端与所述3D图像采集装置连接,用于支撑和调节所述3D图像采集装置达到对所述购物车内商品进行3D图像采集的高度和角度;
所述显示控制装置和购物清单获取装置均设于所述支撑调节装置上。
优选地,所述支撑调节装置包括支撑杆、垂直升降单元、水平移动单元和延长轴;
所述垂直升降单元与所述支撑杆连接,用于调节所述支撑杆在垂直方向的升降;
所述水平移动单元与所述支撑杆和所述延长轴均连接,以便于以所述支撑杆为轴在水平方向调整所述延长轴的摆动角度;
所述角度调节单元一端连接于所述延长轴,另一端与所述3D图像采集装置连接。
优选地,所述3D超市商品核验***还包括照明装置;所述照明装置包括LED照明灯和光线传感器;
所述LED照明灯设于所述支撑杆上,所述光线传感器设于所述水平移动单元上,并且所述LED照明灯和所述光线传感器均与所述主机电性连接;
所述处理器通过光线传感器获取所述购物车内的当前光线亮度值,进而将所述当前光线亮度值与预设光线阈值范围进行比对;
若所述当前光线亮度值达到所述预设光线阈值范围,则控制开启LED照明灯,以便于在照明条件下,进行图像采集,并且提供为用户提供照明。
优选地,所述3D超市商品核验***还包括闪光灯装置;所述闪光灯装置包括光线检测装置和辅助LED闪光灯组件;所述光线检测装置和所述辅助LED闪光灯组件均与所述主机的所述处理器电性连接;
通过所述光线检测装置对所述购物车内的区域进行对焦测光,获得拍摄参数;
通过所述3D图像采集装置,根据所述拍摄参数,向与所述3D图像采集装置连接的辅助LED闪光灯组件发送闪光指令;
通过所述3D图像采集装置对在所述图像采集区域内的购物车进行基于所述拍摄参数的3D图像采集,并且同时所述辅助LED闪光灯组件根据所述闪光指令进行同步闪光,获得闪光补光后的所述车内3D图像。
优选地,所述辅助LED闪光灯组件包括设于所述延长轴上的第一LED闪光灯以及设于所述支撑杆上的第二LED闪光灯;
所述第一LED闪光灯,用于根据所述闪光指令对所述购物车内的商品进行垂直方向的闪光补光;
所述第二LED闪光灯,用于根据所述闪光指令对所述购物车内的商品进行侧方向的闪光补光。
优选地,所述3D超市商品核验***还包括称重装置;
所述称重装置包括重量传感器和称重平台;所述重量传感器设于所述称重平台中并且与所述主机的所述处理器电性连接;所述称重平台上设有所述图像采集区域;
所述处理器根据所获取到的所述购物清单计算得出商品的清单总重,病通过所述重量传感器获取所述称重平台上的所述图像采集区域内的所述购物车内的商品的净重,作为车内商品实际总重;
若所述车内商品实际总重和所述清单总重的重量相同,则判定所述购物车内的商品与所述购物清单内的商品相一致。
优选地,所述主机还包括红外传感器,所述红外传感器与所述主机的所述处理器电性连接;
所述红外传感器用于感知所述购物车是否完全进入所述图像采集区域内;
所述购物清单获取装置接收与所述购物车内的商品对应的购物清单,生成一购物车移动提示信息,以提示用户将所述购物车推入所述图像采集区域内;当用户将所述购物车完全推入所述图像采集区域内时,触发所述红外传感器,生成一购物车核验指令,以便于进行对所述购物车内的商品进行核验。
优选地,所述购物清单获取装置包括编码图像采集组件,用于对在所述图像采集区域内的所述购物车进行图像采集,获得编码识别图像;
所述处理器根据所述购物车核验指令,控制开启所述编码图像采集组件,对在所述图像采集区域内的所述购物车进行图像采集,获得编码识别图像;
所述处理器定位所述编码识别图像中的所述购物车中的二维码,并对所述二维码进行边缘检测,得到包含有所述二维码的最小截图;
对所述最小截图进行扫码识别,获取所述最小截图对应的购物车编码,以便于根据所述购物车编码获取与所述购物车对应的车体重量,进而计算得出所述购物车内的商品的净重。
优选地,所述购物清单获取装置包括RFID射频信息读取器;所述RFID射频信息读取器与所述处理器电性连接;
所述处理器根据所述购物车核验指令,通过所述RFID射频信息读取器,获取所述购物车对应的RFID标签;
所述处理器根据所述RFID标签获取所述购物车对应的购物车编码。
本发明提供一种3D超市商品核验***,包括:主机,以及与所述主机均电性连接的3D图像采集装置、显示控制装置和购物清单获取装置。其中,主机包括处理器、连接总线和网络连接组件;所述处理器通过所述连接总线连接所述3D图像采集装置、所述显示控制装置和所述购物清单信息获取装置,接交互数据和发送控制指令。本发明通过主机中的处理器控制3D图像采集装置对在图像采集区域内的购物车进行3D图像采集,从而得到车内3D图像;进而通过识别,获得当前商品总体积;再根据购物清单构建包含多种不同组合形式的预测堆叠体积的预测堆叠体积数据库;进而判断预测堆叠体积数据库中是否存在与当前商品总体积相同的组合形式的预测堆叠体积;如果存在,则判定无异常;如果不存在,则判断出现异常,提示工作人员进行进一步核查。本发明实现了对于购物车内的商品的无损无搬运的在购物车内的直接核验,通过利用实感技术的3D图像识别,基于购物车内商品的总体积核验商品是否与购物清单一致,从而实现核验,缩短了核验时间、提高了购物结算效率,避免了由于人工逐件核验极易出现少算或多算的情况,提高了用户体验,给核验结算人员和消费者均带来了方便。
附图说明
图1为本申请中第一实施例中3D超市商品核验***的左视示意图;
图2为本申请中第一实施例中3D超市商品核验***的主视示意图;
图3为本申请中第一实施例中3D超市商品核验***的线路连接示意图;
图4为本申请中第二实施例中3D超市商品核验***的左视示意图;
图5为本申请中第三实施例中3D超市商品核验***的左视示意图;
图6为本申请中第三实施例中3D超市商品核验***的线路连接示意图;
图7为本申请中第四实施例中3D超市商品核验***的左视示意图;
图8为本申请中第四实施例中3D超市商品核验***的线路连接示意图;
图9为本申请中第五实施例中3D超市商品核验***的左视示意图;
图10为本申请中第五实施例中3D超市商品核验***的线路连接示意图;
图11为本申请中第六实施例中3D超市商品核验***的编码图像采集组件的线路连接示意图;
图12为本申请中第六实施例中3D超市商品核验***的RFID射频信息读取器的线路连接示意图。
附图标记:
名称 | 编号 | 名称 | 编号 |
3D超市商品核验*** | 1 | 水平移动单元 | 153 |
主机 | 11 | 延长轴 | 154 |
处理器 | 111 | 方位图像采集装置 | 16 |
供电组件 | 112 | 照明装置 | 17 |
网络连接组件 | 113 | LED照明灯 | 171 |
红外传感器 | 114 | 光线传感器 | 172 |
3D图像采集装置 | 12 | 闪光灯装置 | 18 |
显示控制装置 | 13 | 光线检测装置 | 181 |
购物清单获取装置 | 14 | 辅助LED闪光灯组件 | 182 |
编码图像采集组件 | 141 | 第一LED闪光灯 | 1821 |
RFID射频信息读取器 | 142 | 第二LED闪光灯 | 1822 |
支撑调节装置 | 15 | 称重装置 | 19 |
支撑杆 | 151 | 重量传感器 | 191 |
垂直升降单元 | 152 | 称重平台 | 192 |
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
下面详细描述本发明的实施例,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。
在本发明中,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”、“固定”等术语应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或成一体;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通或两个元件的相互作用关系。对于本领域的普通技术人员而言,可以根据具体情况理解上述术语在本发明中的具体含义。
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
实施例1:
参考图1,本实施例提供一种3D超市商品核验***1,包括:主机11,以及与所述主机11均电性连接的3D图像采集装置12、显示控制装置13和购物清单获取装置14;
所述主机11包括处理器111、网络连接组件113和供电组件112;所述处理器111与所述网络连接组件113和所述供电组件112电性连接,并且通过连接总线连接所述3D图像采集装置12、所述显示控制装置13和所述购物清单信息获取装置,接交互数据和发送控制指令;
所述购物清单获取装置14,用于获取用户购物车内的商品对应的购物清单;其中,首先获取用户的购物清单对应的清单编码,其次通过所述网络连接组件113从云端服务器中获得与所述清单编码对应的购物清单以及与所述购物清单中商品对应的商品信息;
所述3D图像采集装置12,用于对在图像采集区域内的购物车进行3D图像采集,获得车内3D图像;对所述车内3D图像进行识别,获得所述车内3D图像对应的当前商品总体积;对所述车内3D图像进行识别,获得所述车内3D图像对应的当前商品总体积;
所述处理器111根据所述商品信息中的每个商品的单体体积,计算得到购物清单中的所有商品的当前商品总体积,并根据所述当前商品总体积和所述单体体积,确定所述购物车内所有商品的以不同形式堆叠的预测堆叠体积,并构建与所述购物清单对应的预测堆叠体积数据库;
所述处理器111判断所述预测堆叠体积数据库中是否存在与所述当前商品总体积相同的组合形式的预测堆叠体积;若是,则判定未出现异常情况;若否,则判定出现异常情况,生成一提示信息,以便于提示管理人员根据所述提示信息进行排查。
上述,本实施例所提供的3D超市商品核验***1,可以适用于开放式的购物环境,例如商场、超市等场所,即无人值守,用户可进行自由拿取货物。在本实施例中,可以为开放式的购物超市,用户开始购物后,通过购物车放置所购买的商品,并且,可通过自助扫码的方式进行自行结算,在结算后,得到一电子或纸质的购物清单,进而再将购物车推至图像采集区域内进行核验,再核验通过后,结束购物结算流程。
上述,图像采集区,可以为用户核验的专用区域,当需要进入核验流程时,则推该购物车进入该区域,从而进行核验步骤。
上述,3D图像采集,可以通过相关的3D图像采集装置12实现。
3D图像采集装置12,在本实施例中,可以为多角度3D图像采集装置12,利用基于英特尔实感立体深度技术的图像采集装置进行采集。
上述,英特尔实感技术,即为通过视觉、听觉、触觉、语音,甚至感情、情境等多重感官方式,让计算设备能够感知人类意图,让人与设备之间的交互变得更加自然。在本实施例中,可采用“主动立体成像原理”,模仿了人眼的“视差原理”,通过打出一束红外光,以左红外传感器114和右红外传感器114追踪这束光的位置,然后用三角定位原理来计算出3D图像中的“深度”信息。
上述,3D图像采集装置12可以为Intel的3D感知摄像头,其可以提供精准的深度信息,并且也兼顾普通红绿蓝摄像头功能。通过3D感知摄像头,可以实现手势控制、增强现实、虚拟现实、脸部扫描、三维扫描等功能,同时还可以做语音输入。在本实施例中,利用3D感知摄像头,实现对于购物车内的商品进行立体的三维扫描建模,以得到车内商品3D图像。
上述,通过3D图像建模,对购物车内的商品进行识别,从而获取到其对应的当前商品总体积。
上述,购物清单,为用户在自行或根据管理人员的指示进行支付后,生成的购物清单,或者通过其他方式生成;购物清单,可通过扫码的方式,逐件的生成,并且在清单中可以为二维码,通过二维码扫描,从而使核验的相关装置获得该购物清单。
上述,购物清单中可以为用户所购买商品的品种,以及品种对应的数量。其中,在一些情况下,每一种商品的大小、形状、包装材质的软硬、角度、所占用空间、弹性等等参数均有很大差距,将这些商品堆叠在一起时,总体积有时并不等于所有商品的单体体积之和,有可能为大于单体体积之和,也有可能小于单体体积之和。通过计算机建模,参考其单体体积,可以预测出,购物清单中所有商品在堆叠在一起时的体积的可能性(预测堆叠体积),从而将上述这些可能性对应的预测堆叠体积,构建成一数据库,即为预测堆叠体积数据库。
上述,构建的预测堆叠体积数据库中,包含有多个不同的预测组合形式,不同的组合形式可能由于堆叠顺序、方位、角度等不同,导致堆叠后,其中具有一定空隙,其最终的堆叠的外观总体积不同。所以,构建一包含有计算机预测的所有堆叠情况的数据库,并将数据库中的数据与当前商品总体积进行比较,如果数据库中包含有与其匹配或相同的预测堆叠体积,则判定未出现异常情况;若否,则判定出现异常,并生成提示信息,例如通过语音扬声器提示“体积参数异常!”,以提示管理人员进行故障排查或查看购物车中商品是否与清单一致。
上述,主机11可以为控制终端,其中,可以包含有机箱,内部可以包括处理器111、连接总线和网络连接组件113;此外,还可以包括有外接键盘或者其他控制装置。
此外,处理器111由于需要在短时间内进行对不同用户的购物车内商品进行快速核验,所以进行运算量较大,在利用处理器111去进行运算建模和识别时,需要有强大的制冷***,才能保证处理器111的运算效率,防止由于温度过高引起降低性能甚至烧毁的情况发生。
本实施例中,优选的,所述机箱还包括有液态制冷装置;所述液态制冷装置包括冷水块、与冷水块连接的进水管、出水管,以及与所述进水管和出水管的另一端连接的制冷循环组件;进水管---冷水块---出水管---制冷循环装置依次连接,并且所述进水管的另一端与所述制冷循环装置连接,组成一闭合环路,所述闭合环路中设有冷却液;所述冷却液可以为液氮、水、乙醇、正己烷等可进行制冷的冰点较低的溶剂;所述冷水块设于所述处理器111上,并且与所述处理器111贴合,在处理器111与冷水块贴合位置可设置导热层,导热层可以为导热硅胶或者为合金铝导热层,用于将处理器111中的热量迅速与冷水块进行热交换,达到降温效果。此外,制冷循环组件可在处理器111根据运算量或***资源的占用情况或者当前处理器111的温度进行判断,当温度、运算量、资源占用情况达到一阈值,启动制冷循环组件,使冷却液进行高速循环,从而实现快速的热交换效果,达到降温制冷的目的,从而使处理器111保持在适合运行的温度范围内工作,保证了核验***的稳定运行和对大量数据的处理。
上述,显示控制装置13可以为具有触屏功能的显示屏,可使用户实时获知当前核验情况,并且可在核验过程中,获知清单中识别到了某些商品的品种规格数量等信息,在显示屏中,和实时显示所识别到的商品的数量和规格等等信息,并且可以在工作人员进行基本的操作控制。
上述,购物清单获取装置14,可以为根据购物清单的种类对应的装置,例如,扫码装置,图像采集装置、RFID刷卡装置、纸质小票读取装置,也可以为OCR识别装置等等。
本实施例通过主机11中的处理器111控制3D图像采集装置12对在图像采集区域内的购物车进行3D图像采集,从而得到车内3D图像;进而通过识别,获得当前商品总体积;再根据购物清单构建包含多种不同组合形式的预测堆叠体积的预测堆叠体积数据库;进而判断预测堆叠体积数据库中是否存在与当前商品总体积相同的组合形式的预测堆叠体积;如果存在,则判定无异常;如果不存在,则判断出现异常,提示工作人员进行进一步核查。本发明实现了对于购物车内的商品的无损无搬运的在购物车内的直接核验,通过利用实感技术的3D图像识别,基于购物车内商品的总体积核验商品是否与购物清单一致,从而实现核验,缩短了核验时间、提高了购物结算效率,避免了由于人工逐件核验极易出现少算或多算的情况,提高了用户体验,给核验结算人员和消费者均带来了方便。
实施例2:
参考图2,基于上述实施例1,本实施例提供一种3D超市商品核验***1,所述3D超市商品核验***1还包括支撑调节装置15和方位图像采集装置16;
所述方位图像采集装置16与所述处理器111电性连接,用于对所述图像采集区域内的所述购物车进行方位图像采集,得到方位高度预判图像;所述处理器111对所述方位高度预判图像进行识别,获得所述购物车内商品对应的方位信息和高度信息;所述处理器111通过所述支撑调节装置15调节3D图像采集装置12,移动至与所述方位信息和所述高度信息相适应的图像采集位置,以便于在所述图像采集位置上对在图像采集区域内的购物车进行3D图像采集;
所述支撑调节装置15长度方向的一端与所述主机11的上端连接,另一端与所述3D图像采集装置12连接,用于支撑和调节所述3D图像采集装置12达到对所述购物车内商品进行3D图像采集的高度和角度;
所述显示控制装置13和购物清单获取装置14均设于所述支撑调节装置15上。
所述支撑调节装置15包括支撑杆151、垂直升降单元152、垂水平移动单元153和延长轴154;
所述垂直升降单元152与所述支撑杆151连接,用于调节所述支撑杆151在垂直方向的升降;
所述垂水平移动单元153与所述支撑杆151和所述延长轴154均连接,以便于以所述支撑杆151为轴在水平方向调整所述延长轴154的摆动角度;
所述角度调节单元一端连接于所述延长轴154,另一端与所述3D图像采集装置12连接。
上述,控制3D图像采集装置12进行移动,移动至相应的位置。具体的,3D图像采集装置12可在设备上具有滑道或机械臂,从而可进行相应位置的移动。在本实施例中,优选的,可以包括垂直升降单元152和垂水平移动单元153,通过垂直和水平的移动,以实现调节该3D图像采集装置12的可视范围或者图像的采集范围,从而可进一步提高图像采集的质量。在本实施例中,通过根据位信息和高度信息,控制多角度3D图像采集装置12移动至相应的图像采集位置,从而进一步在图像采集位置上进行图像采集,提高了图像采集的质量,采集到更加适应于当前的位置和高度的视野的图像,进一步在一定程度上提高了识别的效果和效率。
实施例3:
参考图3,基于上述实施例2,本实施例提供一种3D超市商品核验***1,其中,所述3D超市商品核验***1还包括照明装置17;所述照明装置17包括LED照明灯171和光线传感器172;
所述LED照明灯171设于所述支撑杆151上,所述光线传感器172设于所述垂水平移动单元153上,并且所述LED照明灯171和所述光线传感器172均与所述主机11电性连接;
所述处理器111通过光线传感器172获取所述购物车内的当前光线亮度值,进而将所述当前光线亮度值与预设光线阈值范围进行比对;
若所述当前光线亮度值达到所述预设光线阈值范围,则控制开启LED照明灯171,以便于在照明条件下,进行图像采集,并且提供为用户提供照明。
上述,用户在进行对于购物车商品核验时,可能由于光线的客观原因,无法看清例如图像采集区域,无法看清显示控制装置13的屏幕、无法进行购物小票的获取,或者无法及时的看清自己购物车内的商品等等,在本实施例中,提供光线传感器172,进行对当前光线的情况进行掌握、分析和判断,当光线较差时,控制LED照明灯171,提供照明效果,一方面可进行照明,提供光源,另一方面,也可以在图像采集时进行补光,以便于达到更好的照相效果。
上述,光线传感器172为用于获取购物车内当前光线的传感器,可获取到当前光线亮度值。
上述,预设光线阈值范围,为预设的,表征当前光线可接受的范围的数据。将光线亮度值与阈值范围进行比对,从而判断光线亮度是否在阈值范围内。如果被包含于内,则可判定光线不足,反之,则判定光线足够。
如果光线不足,即当前光线亮度值达到阈值范围内,则控制开启LED照明灯171,以便于进行图像采集。从而可使图像在更适合于当前光线的条件下进行采集,从而得到质量更好的图像。LED照明灯171,一方面,可实现对于图像采集时的补光效果,另一方面,可对于进行核验的消费者或者其他用户提供一定的照明效果,提高用户体验。
实施例4:
参考图4,基于上述实施例2,本实施例提供一种3D超市商品核验***1,其中,所述3D超市商品核验***1还包括闪光灯装置18;所述闪光灯装置18包括光线检测装置181和辅助LED闪光灯组件182;所述光线检测装置181和所述辅助LED闪光灯组件182均与所述主机11的所述处理器111电性连接;
通过所述光线检测装置181对所述购物车内的区域进行对焦测光,获得拍摄参数;
通过所述3D图像采集装置12,根据所述拍摄参数,向与所述3D图像采集装置12连接的辅助LED闪光灯组件182发送闪光指令;
通过所述3D图像采集装置12对在所述图像采集区域内的购物车进行基于所述拍摄参数的3D图像采集,并且同时所述辅助LED闪光灯组件182根据所述闪光指令进行同步闪光,获得闪光补光后的所述车内3D图像。
所述辅助LED闪光灯组件182包括设于所述延长轴154上的第一LED闪光灯1821以及设于所述支撑杆151上的第二LED闪光灯1822;
所述第一LED闪光灯1821,用于根据所述闪光指令对所述购物车内的商品进行垂直方向的闪光补光;
所述第二LED闪光灯1822,用于根据所述闪光指令对所述购物车内的商品进行侧方向的闪光补光。
上述,在进行图像获取时,可能存在拍摄光线暗淡,无法获取到高质量的可进行识别的图像,所以光线的明暗对于图像采集是重要的条件之一。本实施例中,通过光线检测装置181,对多角度3D图像采集装置12的需要进行图像采集的区域,即购物车内的区域进行光线检测,对焦测光,从而得到一更适合当前场景光线的拍摄参数。该拍摄参数中,可以包含有焦距、光圈、曝光度、快门速度等参数。
上述,辅助LED闪光灯可以为一个,也可以为多角度设有不同亮度的辅助LED闪光灯,也可以为多个可调节补光强度的辅助LED闪光灯。根据拍摄参数,可获知需要的光线,即需要辅助LED闪光灯进行补充的光线强度、图像采集速度、景深、光圈、焦距等等信息,所以通过多角度3D图像采集装置12根据拍摄参数想辅助LED闪光灯发送一补光指令。优选的,在本实施例中,设置为上下两个:第一LED闪光灯1821,用于根据所述闪光指令对所述购物车内的商品进行垂直方向的闪光补光;第二LED闪光灯1822,用于根据所述闪光指令对所述购物车内的商品进行侧方向的闪光补光;从而通过两个闪光灯,达到不同方位的补光,以实现更好的图像采集效果。
通过3D图像采集装置12进行图像采集,并且利用辅助LED闪光灯进行同步闪光。
本实施例中,在购物车完整进入图像采集区域后,通过光线检测装置181进行对焦测光,获得拍摄参数,并可根据该拍摄参数进一步进行图像采集和同步闪光,从而可在光线适合的条件下获得的车内3D图像,更有助于进一步的识别和判断,在一定程度上提高了购物结算和核验的效率。此外,光线检测装置181与辅助LED闪光灯连接,并且设于适用于购物车补光区域,而多角度3D图像采集装置12可设置于区别于所述光线检测装置181与辅助LED闪光灯的位置,对于购物车内商品进行图像采集,此时,光线检测装置181可获取到更适用于辅助LED闪光灯当前位置,更适应于当前环境的拍摄参数,而多角度3D图像采集装置12可在更适应于当前环境的拍摄参数条件下进行拍摄,同时利用辅助LED闪光灯进行同步闪光,从而达到更好的图像采集效果。
实施例5:
参考图5,基于上述实施例1,本实施例提供一种3D超市商品核验***1,所述3D超市商品核验***1还包括称重装置19;
所述称重装置19包括重量传感器191和称重平台192;所述重量传感器191设于所述称重平台192中并且与所述主机11的所述处理器111电性连接;所述称重平台192上设有所述图像采集区域;
所述处理器111根据所获取到的所述购物清单计算得出商品的清单总重,病通过所述重量传感器191获取所述称重平台192上的所述图像采集区域内的所述购物车内的商品的净重,作为车内商品实际总重;
若所述车内商品实际总重和所述清单总重的重量相同,则判定所述购物车内的商品与所述购物清单内的商品相一致。
上述,称重装置19,可进行对于待核验的购物车内商品的初核,例如:
接收与购物车内的商品对应的购物清单,生成一购物车移动提示信息,以提示用户将所述购物车推入所述称重识别区域内的称重平台192上;所述购物清单包括所述购物车内的商品品种、商品数量,以及对应的预称商品重量;接收所述购物车完全进入所述称重识别区域内触发红外传感器114所生成的购物车核验指令;根据所述购物车核验指令,通过重量传感器191获取所述称重识别区域内的所述购物车内的商品的重量,作为车内商品实际总重;根据所述购物清单中的所有商品品种和对应的预称商品重量计算得出商品的清单总重;若所述车内商品实际总重和所述清单总重的重量相同,则判定重量核验未出现异常。
上述,如果车内商品实际总重和清单总重的重量均相同,则可判定,清单中的商品总重,实际称重的数值一致,即可确认购物车内的商品与购物清单商品一致,即可结束核验。通过利用重量层面的参数,去核验所购得商品,并且比较图像识别预测的商品总重、清单商品总重以及实际称重的总重数据相一致,从而确定核验通过,大大增加了核验的准确性,避免了漏掉货物或多算货物的情况,为管理人员和消费者均提供了方便。
此外,也可在进行比较时增加对于商品的图像识别,所获得的信息,进行综合核验:
通过预先训练的商品确认分析模型对所述车内3D图像进行识别,以确定所述购物车内的当前商品信息;所述当前商品信息包括商品品种,以及与所述商品品种对应的商品数量;根据所述当前商品信息中的所述商品品种和与所述商品品种对应的商品数量,以及与所述商品品种对应的商品重量,计算得出当前商品总重;
根据所述购物清单计算得出商品的清单总重;
通过重量传感器191获取所述称重识别区域内的所述购物车内的商品的净重,作为车内商品实际总重;
若所述当前商品总重、所述车内商品实际总重和所述清单总重的重量均相同,则判定所述购物车内的商品与所述购物清单内的商品相一致,结束核验。
本实施例所提供的方法通过在购物车进入称重识别区域内后,将车内商品实际总重和根据购物清单得到的清单总重进行比较,如果两者相同,则判定重量核验未出现异常。本实施例实现了对于购物车内的商品在无损无搬运的情况下在购物车内的直接进行核验,通过对购物车内商品的重量的核验,基于购物车内商品的总重量和清单中所有商品的总重量核验商品是否与购物清单一致,从而实现核验,缩短了核验时间、提高了购物结算效率,避免了由于人工逐件核验极易出现少算或多算的情况,提高了用户体验,给核验结算人员和消费者均带来了方便。
实施例6:
参考图6,基于上述实施例1,本实施例提供一种3D超市商品核验***1,所述主机11还包括红外传感器114,所述红外传感器114与所述主机11的所述处理器111电性连接;
所述红外传感器114用于感知所述购物车是否完全进入所述图像采集区域内;
所述购物清单获取装置14接收与所述购物车内的商品对应的购物清单,生成一购物车移动提示信息,以提示用户将所述购物车推入所述图像采集区域内;当用户将所述购物车完全推入所述图像采集区域内时,触发所述红外传感器114,生成一购物车核验指令,以便于进行对所述购物车内的商品进行核验。
上述,红外传感器114与所述处理器111连接,并且实时监测所述图像采集区域。当购物车完全进入该区域,则可触发红外传感器114,生成一购物车核验指令,以便于进行对所述购物车内的商品进行核验。此外,红外传感器114可设置多个,分别设置于图像采集区域的不同位置,以便于进行信号采集。
所述购物清单获取装置14包括编码图像采集组件141,用于对在所述图像采集区域内的所述购物车进行图像采集,获得编码识别图像;
所述处理器111根据所述购物车核验指令,控制开启所述编码图像采集组件141,对在所述图像采集区域内的所述购物车进行图像采集,获得编码识别图像;
所述处理器111定位所述编码识别图像中的所述购物车中的二维码,并对所述二维码进行边缘检测,得到包含有所述二维码的最小截图;
对所述最小截图进行扫码识别,获取所述最小截图对应的购物车编码,以便于根据所述购物车编码获取与所述购物车对应的车体重量,进而计算得出所述购物车内的商品的净重。
上述,编码图像采集装置,可以为摄像头,相机等可以进行图像采集的装置,用于采集购物车的车身上的相关识别位置,该相关位置包括明显的二维码标识,例如,购物车的车身或者车把上。
上述,编码识别图像,可以为包含有二维码的购物车的图像。
上述,对所述编码识别图像进行识别,定位找到其中的二维码,并进行边缘检测,找到包含有二维码的范围的轮廓线,并根据轮廓线截取得到最小截图。通过截取包含二维码的最小截图,减少图像识别过程中的运算量,提高识别效率,减少高质量的图片在识别和交互过程中对***资源的浪费。
此外,购物清单获取装置14也可以为如下方案:
所述购物清单获取装置14包括RFID射频信息读取器142;所述RFID射频信息读取器142与所述处理器111电性连接;
所述处理器111根据所述购物车核验指令,通过所述RFID射频信息读取器142,获取所述购物车对应的RFID标签;
所述处理器111根据所述RFID标签获取所述购物车对应的购物车编码。
上述,需要说明的是,射频识别,RFID(Radio Frequency Identification)技术,又称无线射频识别,是一种通信技术,可通过无线电讯号识别特定目标并读写相关数据,而无需识别***与特定目标之间建立机械或光学接触。射频的话,一般是微波,1-100GHz,适用于短距离识别通信。
在本实施例中,通过将购物车推到指定的称重识别区域内的相关位置,从而可进行基于射频技术的对于购物车的RFID标签进行识别,从而得到购物车的购物车编码或者通过图像识别技术,对购物车进行图像获取,并对所获取图像中的二维码进行识别,进而得到购物车编码,均可实现非接触式的对于表征购物车的唯一身份信息即购物车编码进行获得,从而在进一步对于购物车内商品的净重的计算过程中,提高了核验的准确度,同时图像采集和RFID技术均为非接触式的ID的获取,可实现自动的对于购物车的信息的获取,提高了核验的效率,为消费者和管理人员的核验流程提供了方便,提高了用户体验。
Claims (10)
1.一种3D超市商品核验***,其特征在于,包括:
主机,以及与所述主机均电性连接的3D图像采集装置、显示控制装置和购物清单获取装置;
所述主机包括处理器、网络连接组件和供电组件;所述处理器与所述网络连接组件和所述供电组件电性连接,并且通过连接总线连接所述3D图像采集装置、所述显示控制装置和所述购物清单信息获取装置,接交互数据和发送控制指令;
所述购物清单获取装置,用于获取用户购物车内的商品对应的购物清单;其中,首先获取用户的购物清单对应的清单编码,其次通过所述网络连接组件从云端服务器中获得与所述清单编码对应的购物清单以及与所述购物清单中商品对应的商品信息;
所述3D图像采集装置,用于对在图像采集区域内的购物车进行3D图像采集,获得车内3D图像;对所述车内3D图像进行识别,获得所述车内3D图像对应的当前商品总体积;
所述处理器根据所述商品信息中的每个商品的单体体积,计算得到购物清单中的所有商品的总体体积,并根据所述总体体积和所述单体体积,确定所述购物车内所有商品的以不同形式堆叠的预测堆叠体积,并构建与所述购物清单对应的预测堆叠体积数据库;
所述处理器判断所述预测堆叠体积数据库中是否存在与所述当前商品总体积相同的组合形式的预测堆叠体积;若是,则判定未出现异常情况;若否,则判定出现异常情况,生成一提示信息,以便于提示管理人员根据所述提示信息进行排查。
2.如权利要求1所述3D超市商品核验***,其特征在于,所述3D超市商品核验***还包括支撑调节装置和方位图像采集装置;所述方位图像采集装置与所述处理器电性连接,用于对所述图像采集区域内的所述购物车进行方位图像采集,得到方位高度预判图像;所述处理器对所述方位高度预判图像进行识别,获得所述购物车内商品对应的方位信息和高度信息;所述处理器通过所述支撑调节装置调节3D图像采集装置,移动至与所述方位信息和所述高度信息相适应的图像采集位置,以便于在所述图像采集位置上对在图像采集区域内的购物车进行3D图像采集;
所述支撑调节装置长度方向的一端与所述主机的上端连接,另一端与所述3D图像采集装置连接,用于支撑和调节所述3D图像采集装置达到对所述购物车内商品进行3D图像采集的高度和角度;
所述显示控制装置和购物清单获取装置均设于所述支撑调节装置上。
3.如权利要求2所述3D超市商品核验***,其特征在于,所述支撑调节装置包括支撑杆、垂直升降单元、水平移动单元和延长轴;
所述垂直升降单元与所述支撑杆连接,用于调节所述支撑杆在垂直方向的升降;
所述水平移动单元与所述支撑杆和所述延长轴均连接,以便于以所述支撑杆为轴在水平方向调整所述延长轴的摆动角度;
所述角度调节单元一端连接于所述延长轴,另一端与所述3D图像采集装置连接。
4.如权利要求3所述3D超市商品核验***,其特征在于,所述3D超市商品核验***还包括照明装置;所述照明装置包括LED照明灯和光线传感器;
所述LED照明灯设于所述支撑杆上,所述光线传感器设于所述水平移动单元上,并且所述LED照明灯和所述光线传感器均与所述主机电性连接;
所述处理器通过光线传感器获取所述购物车内的当前光线亮度值,进而将所述当前光线亮度值与预设光线阈值范围进行比对;
若所述当前光线亮度值达到所述预设光线阈值范围,则控制开启LED照明灯,以便于在照明条件下,进行图像采集,并且提供为用户提供照明。
5.如权利要求3所述3D超市商品核验***,其特征在于,所述3D超市商品核验***还包括闪光灯装置;所述闪光灯装置包括光线检测装置和辅助LED闪光灯组件;所述光线检测装置和所述辅助LED闪光灯组件均与所述主机的所述处理器电性连接;
通过所述光线检测装置对所述购物车内的区域进行对焦测光,获得拍摄参数;
通过所述3D图像采集装置,根据所述拍摄参数,向与所述3D图像采集装置连接的辅助LED闪光灯组件发送闪光指令;
通过所述3D图像采集装置对在所述图像采集区域内的购物车进行基于所述拍摄参数的3D图像采集,并且同时所述辅助LED闪光灯组件根据所述闪光指令进行同步闪光,获得闪光补光后的所述车内3D图像。
6.如权利要求5所述3D超市商品核验***,其特征在于,所述辅助LED闪光灯组件包括设于所述延长轴上的第一LED闪光灯以及设于所述支撑杆上的第二LED闪光灯;
所述第一LED闪光灯,用于根据所述闪光指令对所述购物车内的商品进行垂直方向的闪光补光;
所述第二LED闪光灯,用于根据所述闪光指令对所述购物车内的商品进行侧方向的闪光补光。
7.如权利要求1所述3D超市商品核验***,其特征在于,所述3D超市商品核验***还包括称重装置;
所述称重装置包括重量传感器和称重平台;所述重量传感器设于所述称重平台中并且与所述主机的所述处理器电性连接;所述称重平台上设有所述图像采集区域;
所述处理器根据所获取到的所述购物清单计算得出商品的清单总重,病通过所述重量传感器获取所述称重平台上的所述图像采集区域内的所述购物车内的商品的净重,作为车内商品实际总重;
若所述车内商品实际总重和所述清单总重的重量相同,则判定所述购物车内的商品与所述购物清单内的商品相一致。
8.如权利要求1所述3D超市商品核验***,其特征在于,所述主机还包括红外传感器,所述红外传感器与所述主机的所述处理器电性连接;
所述红外传感器用于感知所述购物车是否完全进入所述图像采集区域内;
所述购物清单获取装置接收与所述购物车内的商品对应的购物清单,生成一购物车移动提示信息,以提示用户将所述购物车推入所述图像采集区域内;当用户将所述购物车完全推入所述图像采集区域内时,触发所述红外传感器,生成一购物车核验指令,以便于进行对所述购物车内的商品进行核验。
9.如权利要求1所述3D超市商品核验***,其特征在于,所述购物清单获取装置包括编码图像采集组件,用于对在所述图像采集区域内的所述购物车进行图像采集,获得编码识别图像;
所述处理器根据所述购物车核验指令,控制开启所述编码图像采集组件,对在所述图像采集区域内的所述购物车进行图像采集,获得编码识别图像;
所述处理器定位所述编码识别图像中的所述购物车中的二维码,并对所述二维码进行边缘检测,得到包含有所述二维码的最小截图;
对所述最小截图进行扫码识别,获取所述最小截图对应的购物车编码,以便于根据所述购物车编码获取与所述购物车对应的车体重量,进而计算得出所述购物车内的商品的净重。
10.如权利要求1所述3D超市商品核验***,其特征在于,所述购物清单获取装置包括RFID射频信息读取器;所述RFID射频信息读取器与所述处理器电性连接;
所述处理器根据所述购物车核验指令,通过所述RFID射频信息读取器,获取所述购物车对应的RFID标签;
所述处理器根据所述RFID标签获取所述购物车对应的购物车编码。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810964580.4A CN108734459A (zh) | 2018-08-23 | 2018-08-23 | 一种3d超市商品核验*** |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810964580.4A CN108734459A (zh) | 2018-08-23 | 2018-08-23 | 一种3d超市商品核验*** |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108734459A true CN108734459A (zh) | 2018-11-02 |
Family
ID=63943040
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810964580.4A Pending CN108734459A (zh) | 2018-08-23 | 2018-08-23 | 一种3d超市商品核验*** |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108734459A (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109214806A (zh) * | 2018-11-20 | 2019-01-15 | 北京京东尚科信息技术有限公司 | 自助结算方法、装置以及存储介质 |
CN110035232A (zh) * | 2019-03-27 | 2019-07-19 | 阿里巴巴集团控股有限公司 | 一种基于目标对象的图像获取方法、装置及电子设备 |
CN111553989A (zh) * | 2020-04-13 | 2020-08-18 | 上海携旅信息技术有限公司 | 售票机的身份证验证方法、***、设备和介质 |
CN112785289A (zh) * | 2021-01-27 | 2021-05-11 | 支付宝(杭州)信息技术有限公司 | 购物结算方法、装置和购物车 |
CN115907600A (zh) * | 2022-12-29 | 2023-04-04 | 广州捷世通物流股份有限公司 | 一种基于物联网的逆向物流运输方法及*** |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101625784A (zh) * | 2009-07-16 | 2010-01-13 | 西安交通大学 | 一种超市购物结账装置及自助结账方法 |
WO2016135142A1 (en) * | 2015-02-23 | 2016-09-01 | Pentland Firth Software GmbH | System and method for the identification of products in a shopping cart |
US20160300455A1 (en) * | 2013-10-03 | 2016-10-13 | Digitized Concepts, Llc | Apparatus, System, and Method for Self-Service Shopping |
CN107862814A (zh) * | 2017-11-01 | 2018-03-30 | 北京旷视科技有限公司 | 自动结算***及自动结算方法 |
CN107945428A (zh) * | 2017-10-20 | 2018-04-20 | 北京火星盒子网络信息技术有限公司 | 商品核验方法和商品核验设备 |
CN108428129A (zh) * | 2018-04-18 | 2018-08-21 | 阜阳师范学院 | 一种基于射频技术的快捷购物***及方法 |
-
2018
- 2018-08-23 CN CN201810964580.4A patent/CN108734459A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101625784A (zh) * | 2009-07-16 | 2010-01-13 | 西安交通大学 | 一种超市购物结账装置及自助结账方法 |
US20160300455A1 (en) * | 2013-10-03 | 2016-10-13 | Digitized Concepts, Llc | Apparatus, System, and Method for Self-Service Shopping |
WO2016135142A1 (en) * | 2015-02-23 | 2016-09-01 | Pentland Firth Software GmbH | System and method for the identification of products in a shopping cart |
CN107945428A (zh) * | 2017-10-20 | 2018-04-20 | 北京火星盒子网络信息技术有限公司 | 商品核验方法和商品核验设备 |
CN107862814A (zh) * | 2017-11-01 | 2018-03-30 | 北京旷视科技有限公司 | 自动结算***及自动结算方法 |
CN108428129A (zh) * | 2018-04-18 | 2018-08-21 | 阜阳师范学院 | 一种基于射频技术的快捷购物***及方法 |
Non-Patent Citations (1)
Title |
---|
李根;朱其祥;: "基于RFID技术的智能购物车***设计", 赤峰学院学报(自然科学版) * |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109214806A (zh) * | 2018-11-20 | 2019-01-15 | 北京京东尚科信息技术有限公司 | 自助结算方法、装置以及存储介质 |
CN109214806B (zh) * | 2018-11-20 | 2022-01-04 | 北京京东尚科信息技术有限公司 | 自助结算方法、装置以及存储介质 |
US11861584B2 (en) | 2018-11-20 | 2024-01-02 | Beijing Jingdong Shangke Information Technology Co, Ltd. | Self-service settlement method, apparatus and storage medium |
CN110035232A (zh) * | 2019-03-27 | 2019-07-19 | 阿里巴巴集团控股有限公司 | 一种基于目标对象的图像获取方法、装置及电子设备 |
CN111553989A (zh) * | 2020-04-13 | 2020-08-18 | 上海携旅信息技术有限公司 | 售票机的身份证验证方法、***、设备和介质 |
CN111553989B (zh) * | 2020-04-13 | 2023-01-31 | 上海携旅信息技术有限公司 | 售票机的身份证验证方法、***、设备和介质 |
CN112785289A (zh) * | 2021-01-27 | 2021-05-11 | 支付宝(杭州)信息技术有限公司 | 购物结算方法、装置和购物车 |
CN115907600A (zh) * | 2022-12-29 | 2023-04-04 | 广州捷世通物流股份有限公司 | 一种基于物联网的逆向物流运输方法及*** |
CN115907600B (zh) * | 2022-12-29 | 2023-08-25 | 广州捷世通物流股份有限公司 | 一种基于物联网的逆向物流运输方法及*** |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108734459A (zh) | 一种3d超市商品核验*** | |
JP6707724B6 (ja) | 自律店舗追跡システム | |
CN108875669B (zh) | 一种基于可见光与红外图像融合的商品识别技术 | |
CN108765708A (zh) | 一种无人自动售货机 | |
JP2020115344A6 (ja) | 自律店舗追跡システム | |
KR102506341B1 (ko) | 거울을 가상화하는 디바이스들, 시스템들 및 방법들 | |
Wang et al. | A review on vision-based analysis for automatic dietary assessment | |
CN109166007A (zh) | 一种基于自动售货机的商品推荐方法及其装置 | |
CN108921048A (zh) | 一种购物结算方法、装置和用户终端 | |
CN106952402A (zh) | 一种数据处理方法及装置 | |
CN102854148A (zh) | 基于多光谱图像技术的生鲜牛肉嫩度检测分级*** | |
CN107397530A (zh) | 一种中医体质与情感辨别调理*** | |
CN109598605A (zh) | 一种基于实体抵押物的远程智能评估及贷款自助*** | |
CN109754009A (zh) | 物品识别方法、装置、售货***和存储介质 | |
CN109059798B (zh) | 一种基于多视角深度信息的三维体扫描仪 | |
CN109243112A (zh) | 一种开放式环境购物控制方法和装置 | |
CN110547636A (zh) | 智能化妆镜 | |
CN109145716A (zh) | 基于脸部识别的登机口检验平台 | |
CN206773817U (zh) | 自动服装售卖机及服装售卖*** | |
CN110689389A (zh) | 基于计算机视觉的购物清单自动维护方法及装置、存储介质、终端 | |
CN109166257B (zh) | 一种购物车商品核验方法及其装置 | |
CN208796351U (zh) | 一种无人自动售货机 | |
CN113610005A (zh) | 物品识别方法、电子设备、可读存储介质及产品 | |
CN109300265A (zh) | 无人超市管理*** | |
CN108921642A (zh) | 一种基于计算机视觉的智能果蔬结算装置及方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20220629 Address after: Room 368, 302, 211 Fute North Road, China (Shanghai) pilot Free Trade Zone, Pudong New Area, Shanghai Applicant after: Shanghai Yuepu Investment Center (L.P.) Address before: 518000 floor 33, Yantian modern industry service center, 3018 Shayan Road, Shatoujiao street, Yantian District, Shenzhen City, Guangdong Province Applicant before: SHENZHEN MALONG TECHNOLOGY Co.,Ltd. |
|
TA01 | Transfer of patent application right | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20181102 |
|
WD01 | Invention patent application deemed withdrawn after publication |