CN108981885A - 一种开放式购物环境中的购物车商品核验方法及其装置 - Google Patents

一种开放式购物环境中的购物车商品核验方法及其装置 Download PDF

Info

Publication number
CN108981885A
CN108981885A CN201810964710.4A CN201810964710A CN108981885A CN 108981885 A CN108981885 A CN 108981885A CN 201810964710 A CN201810964710 A CN 201810964710A CN 108981885 A CN108981885 A CN 108981885A
Authority
CN
China
Prior art keywords
shopping cart
commodity
shopping
weight
rendering
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810964710.4A
Other languages
English (en)
Inventor
马修·罗伯特·斯科特
黄鼎隆
马咪娜
殷乐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Malong Technologies Co Ltd
Original Assignee
Shenzhen Malong Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Malong Technologies Co Ltd filed Critical Shenzhen Malong Technologies Co Ltd
Priority to CN201810964710.4A priority Critical patent/CN108981885A/zh
Publication of CN108981885A publication Critical patent/CN108981885A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01GWEIGHING
    • G01G19/00Weighing apparatus or methods adapted for special purposes not provided for in the preceding groups
    • G01G19/40Weighing apparatus or methods adapted for special purposes not provided for in the preceding groups with provisions for indicating, recording, or computing price or other quantities dependent on the weight
    • G01G19/413Weighing apparatus or methods adapted for special purposes not provided for in the preceding groups with provisions for indicating, recording, or computing price or other quantities dependent on the weight using electromechanical or electronic computing means
    • G01G19/414Weighing apparatus or methods adapted for special purposes not provided for in the preceding groups with provisions for indicating, recording, or computing price or other quantities dependent on the weight using electromechanical or electronic computing means using electronic computing means only
    • G01G19/4144Weighing apparatus or methods adapted for special purposes not provided for in the preceding groups with provisions for indicating, recording, or computing price or other quantities dependent on the weight using electromechanical or electronic computing means using electronic computing means only for controlling weight of goods in commercial establishments, e.g. supermarket, P.O.S. systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K17/00Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations
    • G06K17/0022Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisious for transferring data to distant stations, e.g. from a sensing device
    • G06K17/0029Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisious for transferring data to distant stations, e.g. from a sensing device the arrangement being specially adapted for wireless interrogation of grouped or bundled articles tagged with wireless record carriers

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Mathematical Physics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • Cash Registers Or Receiving Machines (AREA)

Abstract

本发明提供了一种开放式购物环境中的购物车商品核验方法及其装置,其中所述方法包括:接收购物清单,生成购物车移动提示信息;接收购物车核验指令;根据指令,通过重量传感器获取车内商品实际总重;计算得出商品的清单总重;若所述车内商品实际总重和所述清单总重的重量相同,则判定重量核验未出现异常。本发明缩短了商品的核验时间、提高了购物结算效率,避免了由于人工逐件核验极易出现少算或多算的情况,提高了用户体验,给核验结算人员和消费者均带来了方便。

Description

一种开放式购物环境中的购物车商品核验方法及其装置
技术领域
本发明涉及购物结算技术领域,更具体地说,涉及一种开放式购物环境中的购物车商品核验方法及其装置。
背景技术
在开放式的购物环境中,例如超市,一般是指商品开放陈列、顾客自我选购、排队收银结算,以经营生鲜食品、日杂用品为主的商店。是一种消费者自助选购、统一收银结算的零售企业。
目前,在开放式的购物环境中,购物结算的方法为通过人工进行对消费者的购物车内的商品,需要进行逐件的去核验,一般过程为:商品取出查看---逐个扫码---核对商品与清单是否一致---最终结算,需要进行人工的对货物进行清点,并且将货物逐件拿出检查,核验时间长、购物结算效率低,并且人工逐件核验极易出现少算或多算的情况,用户体验差,给核验结算人员和消费者均带来了不便。
发明内容
有鉴于此,本发明提供一种开放式购物环境中的购物车商品核验方法及其装置以解决现有技术的不足。
为解决上述问题,本发明提供一种开放式购物环境中的购物车商品核验方法,包括:
接收与购物车内的商品对应的购物清单,生成一购物车移动提示信息,以提示用户将所述购物车推入称重识别区域内;所述购物清单包括所述购物车内的商品品种、商品数量,以及对应的预称商品重量;
接收所述购物车完全进入所述称重识别区域内触发红外传感器所生成的购物车核验指令;
根据所述购物车核验指令,通过重量传感器获取所述称重识别区域内的所述购物车内的商品的重量,作为车内商品实际总重;
根据所述购物清单中的所有商品品种和对应的预称商品重量计算得出商品的清单总重;
若所述车内商品实际总重和所述清单总重的重量相同,则判定重量核验未出现异常。
优选地,所述“根据所述购物车核验指令,通过重量传感器获取所述称重识别区域内的所述购物车内的商品的重量,作为车内商品实际总重”包括:
根据所述购物车核验指令,获取所述购物车对应的购物车编码;
根据所述购物车编码获取所述购物车对应的车体重量;
通过所述重量传感器获取所述称重识别区域内的所述购物车的车体货物总重;
根据所述车体货物总重减去所述车体重量,得到车内商品实际总重。
优选地,所述“根据所述购物车核验指令,获取所述购物车对应的购物车编码”包括:
根据所述购物车核验指令,开启编码图像采集装置,对在所述称重识别区域内的所述购物车进行图像采集,获得编码识别图像;
定位所述编码识别图像中的所述购物车中的二维码,并对所述二维码进行边缘检测,得到包含有所述二维码的最小截图;
对所述最小截图进行扫码识别,获取所述最小截图对应的购物车编码。
优选地,所述“根据所述购物车核验指令,获取所述购物车对应的购物车编码”包括:
根据所述购物车核验指令,基于射频技术,获取所述购物车对应的RFID标签;
根据所述RFID标签获取所述购物车对应的购物车编码。
优选地,所述“若所述车内商品实际总重和所述清单总重的重量相同,则判定重量核验未出现异常”之后,还包括:
开启多角度3D图像采集装置;
对在称重识别区域内的购物车进行3D图像采集,获得车内3D图像;
对所述车内3D图像进行识别,获得所述车内3D图像对应的当前商品总体积;
根据与所述购物车内的商品对应的购物清单,获取所述购物清单中的每个商品的单体体积,计算得到购物清单中的所有商品的总体体积,并根据所述总体体积和所述单体体积,确定所述购物车内所有商品的以不同形式堆叠的预测堆叠体积,并构建与所述购物清单对应的预测堆叠体积数据库;
判断所述预测堆叠体积数据库中是否存在与所述当前商品总体积相同的组合形式的预测堆叠体积;
若是,则判定体积核验未出现异常情况;
若否,则判定体积核验出现异常情况,生成一提示信息,以便于提示管理人员根据所述提示信息进行排查。
优选地,所述“开启多角度3D图像采集装置”之后,还包括:
通过光线检测装置对所述购物车进行对焦测光,获得拍摄参数;
所述“对在称重识别区域内的购物车进行3D图像采集,获得车内3D图像”包括:
通过所述多角度3D图像采集装置,根据所述拍摄参数,向与所述多角度3D图像采集装置连接的辅助LED补光灯发送补光指令;
通过所述多角度3D图像采集装置对在所述称重识别区域内的购物车进行基于所述拍摄参数的3D图像采集,并且同时所述辅助LED补光灯根据所述补光指令进行同步补光,获得补光后的所述车内3D图像。
优选地,所述“对在称重识别区域内的购物车进行3D图像采集,获得车内3D图像”之前,还包括:
通过方位图像采集装置,对所述称重识别区域内的所述购物车进行方位图像采集,得到方位高度预判图像;
对所述方位高度预判图像进行识别,获得所述购物车内商品对应的方位信息和高度信息;
控制所述多角度3D图像采集装置移动至与所述方位信息和所述高度信息相适应的图像采集位置,以便于在所述图像采集位置上对在称重识别区域内的购物车进行3D图像采集。
此外,为解决上述问题,本发明还提供一种开放式购物环境中的购物车商品核验装置,包括:接收模块、获取模块、计算模块和判定模块;
所述接收模块,用于接收与购物车内的商品对应的购物清单,生成一购物车移动提示信息,以提示用户将所述购物车推入称重识别区域内;所述购物清单包括所述购物车内的商品品种、商品数量,以及对应的预称商品重量;
所述接收模块,还用于接收所述购物车完全进入所述称重识别区域内触发红外传感器所生成的购物车核验指令;
所述获取模块,用于根据所述购物车核验指令,通过重量传感器获取所述称重识别区域内的所述购物车内的商品的重量,作为车内商品实际总重;
所述计算模块,用于根据所述购物清单中的所有商品品种和对应的预称商品重量计算得出商品的清单总重;
所述判定模块,用于若所述车内商品实际总重和所述清单总重的重量相同,则判定重量核验未出现异常。
此外,为解决上述问题,本发明还提供一种用户终端,包括存储器以及处理器,所述存储器用于存储开放式购物环境中的购物车商品核验程序,所述处理器运行所述开放式购物环境中的购物车商品核验程序以使所述用户终端执行如上述所述开放式购物环境中的购物车商品核验方法。
此外,为解决上述问题,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有开放式购物环境中的购物车商品核验程序,所述开放式购物环境中的购物车商品核验程序被处理器执行时实现如上述所述开放式购物环境中的购物车商品核验方法。
本发明提供的一种开放式购物环境中的购物车商品核验方法及其装置。其中,本发明所提供的方法通过在购物车进入称重识别区域内后,将车内商品实际总重和根据购物清单得到的清单总重进行比较,如果两者相同,则判定重量核验未出现异常。本发明实现了对于购物车内的商品在无损无搬运的情况下在购物车内的直接进行核验,通过对购物车内商品的重量的核验,基于购物车内商品的总重量和清单中所有商品的总重量核验商品是否与购物清单一致,从而实现核验,缩短了核验时间、提高了购物结算效率,避免了由于人工逐件核验极易出现少算或多算的情况,提高了用户体验,给核验结算人员和消费者均带来了方便。
附图说明
图1为本发明开放式购物环境中的购物车商品核验方法实施例方案涉及的硬件运行环境的结构示意图;
图2为本发明开放式购物环境中的购物车商品核验方法第一实施例的流程示意图;
图3为本发明开放式购物环境中的购物车商品核验方法第二实施例的流程示意图;
图4为本发明开放式购物环境中的购物车商品核验方法通过图像识别获取购物车编码的第三实施例的流程示意图;
图5为本发明开放式购物环境中的购物车商品核验方法通过射频技术获取购物车编码第三实施例的流程示意图;
图6为本发明开放式购物环境中的购物车商品核验方法第四实施例的流程示意图;
图7为本发明开放式购物环境中的购物车商品核验方法第五实施例的流程示意图;
图8为本发明开放式购物环境中的购物车商品核验方法第六实施例的流程示意图;
图9为本发明开放式购物环境中的购物车商品核验装置的功能模块示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
下面详细描述本发明的实施例,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。
在本发明中,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”、“固定”等术语应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或成一体;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通或两个元件的相互作用关系。对于本领域的普通技术人员而言,可以根据具体情况理解上述术语在本发明中的具体含义。
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
如图1所示,图1是本发明实施例方案涉及的终端的硬件运行环境的结构示意图。
本发明实施例终端可以是PC,也可以是平板电脑、便携计算机等可移动式终端设备。
如图1所示,该终端可以包括:处理器1001,例如CPU,网络接口1004,用户接口1003,存储器1005,通信总线1002。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏、输入单元比如键盘、遥控器,可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器,也可以是稳定的存储器,例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
此外,终端包括图像采集设备,具体可以为摄像头,相机等,在本发明中,为多角度3D图像采集装置,基于英特尔实感立体深度技术的图像采集装置进行采集,可以为Intel的3D感知摄像头。
此外,终端还包括重力传感设备,用以对购物车中的商品的质量进行获取。
可选地,终端还可以包括RF(Radio Frequency,射频)电路,传感器、音频电路、WiFi模块等等。此外,移动终端还可配置陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
本领域技术人员可以理解,图1中示出的终端并不构成对终端的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种计算机可读存储介质的存储器1005中可以包括操作***、数据接口控制程序、网络连接程序以及开放式购物环境中的购物车商品核验程序。
本发明提供的一种开放式购物环境中的购物车商品核验方法及其装置。其中,所述方法实现了对于购物车内的商品在无损无搬运的情况下在购物车内的直接进行核验,通过对购物车内商品的重量的核验,基于购物车内商品的总重量和清单中所有商品的总重量核验商品是否与购物清单一致,从而实现核验,缩短了核验时间、提高了购物结算效率,避免了由于人工逐件核验极易出现少算或多算的情况,提高了用户体验,给核验结算人员和消费者均带来了方便。
实施例1:
参照图2,本发明第一实施例提供一种开放式购物环境中的购物车商品核验方法,包括:
步骤S100,接收与购物车内的商品对应的购物清单,生成一购物车移动提示信息,以提示用户将所述购物车推入称重识别区域内;所述购物清单包括所述购物车内的商品品种、商品数量,以及对应的预称商品重量;
上述,本实施例所提供的开放式购物环境中的购物车商品核验方法,可以适用于开放式的购物环境,例如商场、超市等场所,即无人值守,用户可进行自由拿取货物。在本实施例中,可以为开放式的购物超市,用户开始购物后,通过购物车放置所购买的商品,并且,可通过自助扫码的方式进行自行结算,在结算后,得到一电子或纸质的购物清单,进而再将购物车推至称重识别区域内进行核验,再核验通过后,结束购物结算流程。
上述,核验步骤,可以为用户进行支付前后,对用户购物车内的商品进行核查检验的步骤。此外,也可以为购物前,或者购物时对用户购物车进行核验的步骤。
上述,称重识别区域,可以为对于用户购物车内商品进行核验的专用区域,当需要进入核验流程时,则推该购物车进入该区域,从而进行核验步骤。该区域,下设有可进行称重的称重装置,当购物车推入该区域,触发重量传感器,获取该购物车的重量,实现称重。
上述,购物清单的接收,可以为用户自行输入的清单,其中输入的方式可以为,用户的二维码,在核验设备上的扫描器进行扫码,核验设备接收到该购物清单。
上述,购物移动提示,可以为根据接收到购物清单之后,所生成并进行通过语音或图像进行播放的提示,例如,“请您将购物车推到采集区域内!”,以提示用户将购物车推到所述称重识别区域内,并且称重识别区域可作出具有明显指示的标示线。
步骤S200,接收所述购物车完全进入所述称重识别区域内触发红外传感器所生成的购物车核验指令;
上述,红外传感器,为用于感知购物车完全进入称重识别区域的传感器,当用户将购物车完全推入称重识别区域后,触发所述红外传感器,生成一购物车核验指令。
上述,对于购物车是否完全进入称重识别区域的判断,通过红外传感器进行感知,由于购物车不完全进入该区域,会造成核验数据的不准确,无法进行正常核验,所以需要在进行核验前,进行对购物车的进入称重识别区域的情况进行判断。
例如,可设置一阈值,当重量未达到一定阈值,则判定出现未完全进入该区域的情况;或者通过摄像头进行图像采集,从而进行进一步的判断;或者在本实施例中,利用红外传感器,当购物车完全进入该区域后,触发红外传感器,生成相关指令。
步骤S300,根据所述购物车核验指令,通过重量传感器获取所述称重识别区域内的所述购物车内的商品的重量,作为车内商品实际总重;
上述重量,为刨除购物车等于车内商品无关的相关质量,所得到的净重,即为车内商品实际总重。
步骤S400,根据所述购物清单中的所有商品品种和对应的预称商品重量计算得出商品的清单总重;
清单总重,为依据购物清单所计算得出的总重量。
步骤S500,若所述车内商品实际总重和所述清单总重的重量相同,则判定重量核验未出现异常。
上述,如果车内商品实际总重和清单总重的重量均相同,则可判定,清单中的商品总重,实际称重的数值一致,即可确认购物车内的商品与购物清单商品一致,即可结束核验。通过利用重量层面的参数,去核验所购得商品,并且比较图像识别预测的商品总重、清单商品总重以及实际称重的总重数据相一致,从而确定核验通过,大大增加了核验的准确性,避免了漏掉货物或多算货物的情况,为管理人员和消费者均提供了方便。
此外,也可在进行比较时增加对于商品的图像识别,所获得的信息,进行综合核验:
通过预先训练的商品确认分析模型对所述车内3D图像进行识别,以确定所述购物车内的当前商品信息;所述当前商品信息包括商品品种,以及与所述商品品种对应的商品数量;根据所述当前商品信息中的所述商品品种和与所述商品品种对应的商品数量,以及与所述商品品种对应的商品重量,计算得出当前商品总重;
根据所述购物清单计算得出商品的清单总重;
通过重量传感器获取所述称重识别区域内的所述购物车内的商品的净重,作为车内商品实际总重;
若所述当前商品总重、所述车内商品实际总重和所述清单总重的重量均相同,则判定所述购物车内的商品与所述购物清单内的商品相一致,结束核验。
本实施例所提供的方法通过在购物车进入称重识别区域内后,将车内商品实际总重和根据购物清单得到的清单总重进行比较,如果两者相同,则判定重量核验未出现异常。本实施例实现了对于购物车内的商品在无损无搬运的情况下在购物车内的直接进行核验,通过对购物车内商品的重量的核验,基于购物车内商品的总重量和清单中所有商品的总重量核验商品是否与购物清单一致,从而实现核验,缩短了核验时间、提高了购物结算效率,避免了由于人工逐件核验极易出现少算或多算的情况,提高了用户体验,给核验结算人员和消费者均带来了方便。
实施例2:
参照图3,本发明第二实施例提供一种开放式购物环境中的购物车商品核验方法,基于上述图2所示的第一实施例,所述步骤S300,“根据所述购物车核验指令,通过重量传感器获取所述称重识别区域内的所述购物车内的商品的重量,作为车内商品实际总重”包括:
步骤S310,根据所述购物车核验指令,获取所述购物车对应的购物车编码;
步骤S320,根据所述购物车编码获取所述购物车对应的车体重量;
步骤S330,通过所述重量传感器获取所述称重识别区域内的所述购物车的车体货物总重;
步骤S340,根据所述车体货物总重减去所述车体重量,得到车内商品实际总重。
上述,购物车编码,为每一购物车对应的编号,或ID。
在本实施例中,即在开放式的购物环境中,有些购物车中可能额外设置有广告显示牌、儿童踩踏板等等,并且,购物车也包括很多种,例如推拉式塑料框车,金属大型的购物车等等,每一种购物车,每一个购物车的重量可能均有不同,所以在进行称重核验时,为提高准确度,对每一种、每一个购物车均设定一购物车编码,并且根据该编码,对应的设有一车重。通过获取购物车编码,进而可获取到与该购物车对应的车体重量,从而进行计算时,可得到更加准确的商品的净重。
实施例3:
参照图4-5,本发明第三实施例提供一种开放式购物环境中的购物车商品核验方法,基于上述图3所示的第二实施例,所述步骤S310,“根据所述购物车核验指令,获取所述购物车对应的购物车编码”包括:
步骤S311,根据所述购物车核验指令,开启编码图像采集装置,对在所述称重识别区域内的所述购物车进行图像采集,获得编码识别图像;
上述,编码图像采集装置,可以为摄像头,相机等可以进行图像采集的装置,用于采集购物车的车身上的相关识别位置,该相关位置包括明显的二维码标识,例如,购物车的车身或者车把上。
上述,编码识别图像,可以为包含有二维码的购物车的图像。
步骤S312,定位所述编码识别图像中的所述购物车中的二维码,并对所述二维码进行边缘检测,得到包含有所述二维码的最小截图;
上述,对所述编码识别图像进行识别,定位找到其中的二维码,并进行边缘检测,找到包含有二维码的范围的轮廓线,并根据轮廓线截取得到最小截图。通过截取包含二维码的最小截图,减少图像识别过程中的运算量,提高识别效率,减少高质量的图片在识别和交互过程中对***资源的浪费。
步骤S313,对所述最小截图进行扫码识别,获取所述最小截图对应的购物车编码。
此外,本实施例中,所述步骤S310,还可以通过如下方式实现:
所述步骤S310,“根据所述购物车核验指令,获取所述购物车对应的购物车编码”包括:
步骤S314,根据所述0购0物车核验指令,基于射频技术,获取所述购物车对应的RFID标签;
步骤S315,根据所述RFID标签获取所述购物车对应的购物车编码。
上述,需要说明的是,射频识别,RFID(Radio Frequency Identification)技术,又称无线射频识别,是一种通信技术,可通过无线电讯号识别特定目标并读写相关数据,而无需识别***与特定目标之间建立机械或光学接触。射频的话,一般是微波,1-100GHz,适用于短距离识别通信。
在本实施例中,通过将购物车推到指定的称重识别区域内的相关位置,从而可进行基于射频技术的对于购物车的RFID标签进行识别,从而得到购物车的购物车编码或者通过图像识别技术,对购物车进行图像获取,并对所获取图像中的二维码进行识别,进而得到购物车编码,均可实现非接触式的对于表征购物车的唯一身份信息即购物车编码进行获得,从而在进一步对于购物车内商品的净重的计算过程中,提高了核验的准确度,同时图像采集和RFID技术均为非接触式的ID的获取,可实现自动的对于购物车的信息的获取,提高了核验的效率,为消费者和管理人员的核验流程提供了方便,提高了用户体验。
实施例4:
参照图6,本发明第四实施例提供一种开放式购物环境中的购物车商品核验方法,基于上述图2所示的第一实施例,所述步骤S500,“若所述车内商品实际总重和所述清单总重的重量相同,则判定重量核验未出现异常”之后,还包括:
步骤S600,开启多角度3D图像采集装置;
步骤S700,对在称重识别区域内的购物车进行3D图像采集,获得车内3D图像;
上述,3D图像采集,可以通过相关的3D图像采集装置实现。
3D图像采集装置,在本实施例中,可以为多角度3D图像采集装置,利用基于英特尔实感立体深度技术的图像采集装置进行采集。
上述,英特尔实感技术,即为通过视觉、听觉、触觉、语音,甚至感情、情境等多重感官方式,让计算设备能够感知人类意图,让人与设备之间的交互变得更加自然。在本实施例中,可采用“主动立体成像原理”,模仿了人眼的“视差原理”,通过打出一束红外光,以左红外传感器和右红外传感器追踪这束光的位置,然后用三角定位原理来计算出3D图像中的“深度”信息。
上述,多角度3D图像采集装置可以为Intel的3D感知摄像头,其可以提供精准的深度信息,并且也兼顾普通红绿蓝摄像头功能。通过3D感知摄像头,可以实现手势控制、增强现实、虚拟现实、脸部扫描、三维扫描等功能,同时还可以做语音输入。在本实施例中,利用3D感知摄像头,实现对于购物车内的商品进行立体的三维扫描,以得到车内3D图像。
步骤S800,对所述车内3D图像进行识别,获得所述车内3D图像对应的当前商品总体积;
上述,通过3D图像建模,对购物车内的商品进行识别,从而获取到其对应的当前商品总体积。
步骤S900,根据与所述购物车内的商品对应的购物清单,获取所述购物清单中的每个商品的单体体积,计算得到购物清单中的所有商品的总体体积,并根据所述总体体积和所述单体体积,确定所述购物车内所有商品的以不同形式堆叠的预测堆叠体积,并构建与所述购物清单对应的预测堆叠体积数据库;
上述,购物清单中可以为用户所购买商品的品种,以及品种对应的数量。其中,在一些情况下,每一种商品的大小、形状、包装材质的软硬、角度、所占用空间、弹性等等参数均有很大差距,将这些商品堆叠在一起时,总体积有时并不等于所有商品的单体体积之和,有可能为大于单体体积之和,也有可能小于单体体积之和。通过计算机建模,参考其单体体积,可以预测出,购物清单中所有商品在堆叠在一起时的体积的可能性(预测堆叠体积),从而将上述这些可能性对应的预测堆叠体积,构建成一数据库,即为预测堆叠体积数据库。
步骤S1000,判断所述预测堆叠体积数据库中是否存在与所述当前商品总体积相同的组合形式的预测堆叠体积;
步骤S1100,若是,则判定体积核验未出现异常情况;
步骤S1200,若否,则判定体积核验出现异常情况,生成一提示信息,以便于提示管理人员根据所述提示信息进行排查。
上述,构建的预测堆叠体积数据库中,包含有多个不同的预测组合形式,不同的组合形式可能由于堆叠顺序、方位、角度等不同,导致堆叠后,其中具有一定空隙,其最终的堆叠的外观总体积不同。所以,构建一包含有计算机预测的所有堆叠情况的数据库,并将数据库中的数据与当前商品总体积进行比较,如果数据库中包含有与其匹配或相同的预测堆叠体积,则判定未出现异常情况;若否,则判定出现异常,并生成提示信息,例如通过语音扬声器提示“体积参数异常!”,以提示管理人员进行故障排查或查看购物车中商品是否与清单一致。
本实施例所提供的方法通过对在称重识别区域内的购物车进行3D图像采集,从而得到车内3D图像;进而通过识别,获得当前商品总体积;再根据购物清单构建包含多种不同组合形式的预测堆叠体积数据库;进而判断预测堆叠体积数据库中是否存在与当前商品总体积相同的组合形式的预测堆叠体积;如果存在,则判定无异常;如果不存在,则判断出现异常,提示工作人员进行进一步核查。本实施例实现了对于购物车内的商品的无损无搬运的在购物车内的直接核验,通过3D图像识别,基于购物车内商品的总体积核验商品是否与购物清单一致,从而实现核验,缩短了核验时间、提高了购物结算效率,避免了由于人工逐件核验极易出现少算或多算的情况,提高了用户体验,给核验结算人员和消费者均带来了方便。
实施例5:
参照图7,本发明第五实施例提供一种开放式购物环境中的购物车商品核验方法,基于上述图6所示的第四实施例,所述步骤S600,“开启多角度3D图像采集装置”之后,还包括:
步骤S1300,通过光线检测装置对所述购物车进行对焦测光,获得拍摄参数;
上述,在进行图像获取时,可能存在拍摄光线暗淡,无法获取到高质量的可进行识别的图像,所以光线的明暗对于图像采集是重要的条件之一。本实施例中,通过光线检测装置,对多角度3D图像采集装置的需要进行图像采集的区域,即购物车内的区域进行光线检测,对焦测光,从而得到一更适合当前场景光线的拍摄参数。该拍摄参数中,可以包含有焦距、光圈、曝光度、快门速度等参数。
所述步骤S700,“对在称重识别区域内的购物车进行3D图像采集,获得车内3D图像”包括:
步骤S710,通过所述多角度3D图像采集装置,根据所述拍摄参数,向与所述多角度3D图像采集装置连接的辅助LED补光灯发送补光指令;
上述,辅助LED补光灯可以为一个,也可以为多角度设有不同亮度的辅助LED补光灯,也可以为多个可调节补光强度的辅助LED补光灯。根据拍摄参数,可获知需要的光线,即需要LED补光灯进行补光的光线强度,所以通过多角度3D图像采集装置根据拍摄参数想辅助LED补光灯发送一补光指令。
步骤S720,通过所述多角度3D图像采集装置对在所述称重识别区域内的购物车进行基于所述拍摄参数的3D图像采集,并且同时所述辅助LED补光灯根据所述补光指令进行同步补光,获得补光后的所述车内3D图像。
通过多角度3D图像采集装置进行图像采集,并且利用辅助LED补光灯进行同步补光。
本实施例中,在购物车完整进入称重识别区域后,通过光线检测装置进行对焦测光,获得拍摄参数,并可根据该拍摄参数进一步进行图像采集和同步补光,从而可在光线适合的条件下获得的车内3D图像,更有助于进一步的识别和判断,在一定程度上提高了购物结算和核验的效率。此外,光线检测装置与辅助LED补光灯连接,并且设于适用于购物车补光区域,而多角度3D图像采集装置可设置于区别于所述光线检测装置与辅助LED补光灯的位置,对于购物车内商品进行图像采集,此时,光线检测装置可获取到更适用于辅助LED补光灯当前位置,更适应于当前环境的拍摄参数,而多角度3D图像采集装置可在更适应于当前环境的拍摄参数条件下进行拍摄,同时利用辅助LED补光灯进行同步补光,从而达到更好的图像采集效果。
此外,在所述步骤S700,“对在图像采集区域内的购物车进行3D图像采集,获得车内3D图像”之前,还可以包括:
步骤A,通过光线传感器获取所述购物车内的当前光线亮度值;
步骤B,将所述当前光线亮度值与预设光线阈值范围进行比对;
步骤C,若所述当前光线亮度值达到所述预设光线阈值范围,则开启补光LED照明灯,以便于在补光条件下,对在图像采集区域内的购物车进行3D图像采集。
上述,光线传感器为用于获取购物车内当前光线的传感器,可获取到当前光线亮度值。
上述,预设光线阈值范围,为预设的,表征当前光线可接受的范围的数据。将光线亮度值与阈值范围进行比对,从而判断光线亮度是否在阈值范围内。如果被包含于内,则可判定光线不足,反之,则判定光线足够。
如果光线不足,即当前光线亮度值达到阈值范围内,则控制开启补光LED照明灯,以便于进行图像采集。从而可使图像在更适合于当前光线的条件下进行采集,从而得到质量更好的图像。
实施例6:
参照图8,本发明第六实施例提供一种开放式购物环境中的购物车商品核验方法,基于上述图6所示的第四实施例,所述步骤S700,“对在称重识别区域内的购物车进行3D图像采集,获得车内3D图像”之前,还包括:
步骤S1400,通过方位图像采集装置,对所述称重识别区域内的所述购物车进行方位图像采集,得到方位高度预判图像;
在本实施例中,由于图像采集区域包含区域大小,可能存在多角度3D图像采集装置无法获得完整的车内的商品的车内3D图像的情况,即由于购物车进入图像采集区域,是由消费者自行推入的,可能存在一定的偏差,导致无法获得高质量的可进行完整识别的图像。所以,在步骤S20,进行获得车内3D图像之前,需要对其购物车所放置的方位进行判断。或者,购物车内商品的高度堆叠的位置不同,比如位置较低,则如果多角度3D图像采集装置为固定位置,则可能无法采集到清晰的车内3D图像。
上述,方位采集装置,可以包括进行图像采集的摄像头,也可以包括用于测量高度的红外传感器,从而通过摄像头获得方位高度判断图像或者通过红外传感器获得到表征高度的信号。方位采集装置的位置可以设置于区别于多角度3D图像采集装置,也可以设于与多角度3D图像采集装置的旁边并与多角度3D图像采集装置相连接。
步骤S1500,对所述方位高度预判图像进行识别,获得所述购物车内商品对应的方位信息和高度信息;
上述,通过图像识别,得到方位信息和高度信息,其中方位信息,可以为定位信息,即对于图像采集区域定义的坐标范围,方位信息即为在坐标范围内的所处于的坐标位置。
步骤S1600,控制所述多角度3D图像采集装置移动至与所述方位信息和所述高度信息相适应的图像采集位置,以便于在所述图像采集位置上对在称重识别区域内的购物车进行3D图像采集。
上述,控制多角度3D图像采集装置进行移动,移动至相应的位置。具体的,多角度3D图像采集装置可在设备上具有滑道或机械臂,从而可进行相应位置的移动,通过移动,可调节多角度3D图像采集装置的可视范围或者图像的采集范围,从而可进一步提高图像采集的质量。在本实施例中,通过根据位信息和高度信息,控制多角度3D图像采集装置移动至相应的图像采集位置,从而进一步在图像采集位置上进行图像采集,提高了图像采集的质量,采集到更加适应于当前的位置和高度的视野的图像,进一步在一定程度上提高了识别的效果和效率。
此外,参考图9,本发明还提供一种开放式购物环境中的购物车商品核验装置,包括:接收模块10、获取模块20、计算模块30和判定模块40;
所述接收模块10,用于接收与购物车内的商品对应的购物清单,生成一购物车移动提示信息,以提示用户将所述购物车推入称重识别区域内;所述购物清单包括所述购物车内的商品品种、商品数量,以及对应的预称商品重量;
所述接收模块20,还用于接收所述购物车完全进入所述称重识别区域内触发红外传感器所生成的购物车核验指令;
所述获取模块30,用于根据所述购物车核验指令,通过重量传感器获取所述称重识别区域内的所述购物车内的商品的重量,作为车内商品实际总重;
所述计算模块40,用于根据所述购物清单中的所有商品品种和对应的预称商品重量计算得出商品的清单总重;
所述判定模块50,用于若所述车内商品实际总重和所述清单总重的重量相同,则判定重量核验未出现异常。
此外,本发明还提供一种用户终端,包括存储器以及处理器,所述存储器用于存储开放式购物环境中的购物车商品核验程序,所述处理器运行所述开放式购物环境中的购物车商品核验程序以使所述用户终端执行如上述所述开放式购物环境中的购物车商品核验方法。
此外,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有开放式购物环境中的购物车商品核验程序,所述开放式购物环境中的购物车商品核验程序被处理器执行时实现如上述所述开放式购物环境中的购物车商品核验方法。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种开放式购物环境中的购物车商品核验方法,其特征在于,包括:
接收与购物车内的商品对应的购物清单,生成一购物车移动提示信息,以提示用户将所述购物车推入称重识别区域内;所述购物清单包括所述购物车内的商品品种、商品数量,以及对应的预称商品重量;
接收所述购物车完全进入所述称重识别区域内触发红外传感器所生成的购物车核验指令;
根据所述购物车核验指令,通过重量传感器获取所述称重识别区域内的所述购物车内的商品的重量,作为车内商品实际总重;
根据所述购物清单中的所有商品品种和对应的预称商品重量计算得出商品的清单总重;
若所述车内商品实际总重和所述清单总重的重量相同,则判定重量核验未出现异常。
2.如权利要求1所述开放式购物环境中的购物车商品核验方法,其特征在于,所述“根据所述购物车核验指令,通过重量传感器获取所述称重识别区域内的所述购物车内的商品的重量,作为车内商品实际总重”包括:
根据所述购物车核验指令,获取所述购物车对应的购物车编码;
根据所述购物车编码获取所述购物车对应的车体重量;
通过所述重量传感器获取所述称重识别区域内的所述购物车的车体货物总重;
根据所述车体货物总重减去所述车体重量,得到车内商品实际总重。
3.如权利要求2所述开放式购物环境中的购物车商品核验方法,其特征在于,所述“根据所述购物车核验指令,获取所述购物车对应的购物车编码”包括:
根据所述购物车核验指令,开启编码图像采集装置,对在所述称重识别区域内的所述购物车进行图像采集,获得编码识别图像;
定位所述编码识别图像中的所述购物车中的二维码,并对所述二维码进行边缘检测,得到包含有所述二维码的最小截图;
对所述最小截图进行扫码识别,获取所述最小截图对应的购物车编码。
4.如权利要求2所述开放式购物环境中的购物车商品核验方法,其特征在于,所述“根据所述购物车核验指令,获取所述购物车对应的购物车编码”包括:
根据所述购物车核验指令,基于射频技术,获取所述购物车对应的RFID标签;
根据所述RFID标签获取所述购物车对应的购物车编码。
5.如权利要求1所述开放式购物环境中的购物车商品核验方法,其特征在于,所述“若所述车内商品实际总重和所述清单总重的重量相同,则判定重量核验未出现异常”之后,还包括:
开启多角度3D图像采集装置;
对在称重识别区域内的购物车进行3D图像采集,获得车内3D图像;
对所述车内3D图像进行识别,获得所述车内3D图像对应的当前商品总体积;
根据与所述购物车内的商品对应的购物清单,获取所述购物清单中的每个商品的单体体积,计算得到购物清单中的所有商品的总体体积,并根据所述总体体积和所述单体体积,确定所述购物车内所有商品的以不同形式堆叠的预测堆叠体积,并构建与所述购物清单对应的预测堆叠体积数据库;
判断所述预测堆叠体积数据库中是否存在与所述当前商品总体积相同的组合形式的预测堆叠体积;
若是,则判定体积核验未出现异常情况;
若否,则判定体积核验出现异常情况,生成一提示信息,以便于提示管理人员根据所述提示信息进行排查。
6.如权利要求5所述开放式购物环境中的购物车商品核验方法,其特征在于,所述“开启多角度3D图像采集装置”之后,还包括:
通过光线检测装置对所述购物车进行对焦测光,获得拍摄参数;
所述“对在称重识别区域内的购物车进行3D图像采集,获得车内3D图像”包括:
通过所述多角度3D图像采集装置,根据所述拍摄参数,向与所述多角度3D图像采集装置连接的辅助LED补光灯发送补光指令;
通过所述多角度3D图像采集装置对在所述称重识别区域内的购物车进行基于所述拍摄参数的3D图像采集,并且同时所述辅助LED补光灯根据所述补光指令进行同步补光,获得补光后的所述车内3D图像。
7.如权利要求5所述开放式购物环境中的购物车商品核验方法,其特征在于,所述“对在称重识别区域内的购物车进行3D图像采集,获得车内3D图像”之前,还包括:
通过方位图像采集装置,对所述称重识别区域内的所述购物车进行方位图像采集,得到方位高度预判图像;
对所述方位高度预判图像进行识别,获得所述购物车内商品对应的方位信息和高度信息;
控制所述多角度3D图像采集装置移动至与所述方位信息和所述高度信息相适应的图像采集位置,以便于在所述图像采集位置上对在称重识别区域内的购物车进行3D图像采集。
8.一种开放式购物环境中的购物车商品核验装置,其特征在于,包括:接收模块、获取模块、计算模块和判定模块;
所述接收模块,用于接收与购物车内的商品对应的购物清单,生成一购物车移动提示信息,以提示用户将所述购物车推入称重识别区域内;所述购物清单包括所述购物车内的商品品种、商品数量,以及对应的预称商品重量;
所述接收模块,还用于接收所述购物车完全进入所述称重识别区域内触发红外传感器所生成的购物车核验指令;
所述获取模块,用于根据所述购物车核验指令,通过重量传感器获取所述称重识别区域内的所述购物车内的商品的重量,作为车内商品实际总重;
所述计算模块,用于根据所述购物清单中的所有商品品种和对应的预称商品重量计算得出商品的清单总重;
所述判定模块,用于若所述车内商品实际总重和所述清单总重的重量相同,则判定重量核验未出现异常。
9.一种用户终端,其特征在于,包括存储器以及处理器,所述存储器用于存储开放式购物环境中的购物车商品核验程序,所述处理器运行所述开放式购物环境中的购物车商品核验程序以使所述用户终端执行如权利要求1-7中任一项所述开放式购物环境中的购物车商品核验方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有开放式购物环境中的购物车商品核验程序,所述开放式购物环境中的购物车商品核验程序被处理器执行时实现如权利要求1-7中任一项所述开放式购物环境中的购物车商品核验方法。
CN201810964710.4A 2018-08-23 2018-08-23 一种开放式购物环境中的购物车商品核验方法及其装置 Pending CN108981885A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810964710.4A CN108981885A (zh) 2018-08-23 2018-08-23 一种开放式购物环境中的购物车商品核验方法及其装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810964710.4A CN108981885A (zh) 2018-08-23 2018-08-23 一种开放式购物环境中的购物车商品核验方法及其装置

Publications (1)

Publication Number Publication Date
CN108981885A true CN108981885A (zh) 2018-12-11

Family

ID=64548015

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810964710.4A Pending CN108981885A (zh) 2018-08-23 2018-08-23 一种开放式购物环境中的购物车商品核验方法及其装置

Country Status (1)

Country Link
CN (1) CN108981885A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112381512A (zh) * 2020-11-15 2021-02-19 周岳 一种核验***及核验方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007333499A (ja) * 2006-06-14 2007-12-27 Matsushita Electric Ind Co Ltd 電子計測装置
CN205862481U (zh) * 2016-08-09 2017-01-04 成都易科士信息产业有限公司 一种基于超高频射频识别的餐饮行业智能称重结算***
CN106781121A (zh) * 2016-12-14 2017-05-31 朱明� 基于视觉分析的超市自助结账智能***
CN206891563U (zh) * 2017-06-13 2018-01-16 沈阳民兴科技发展有限公司 智能pc电子秤防伪追溯***
CN107862814A (zh) * 2017-11-01 2018-03-30 北京旷视科技有限公司 自动结算***及自动结算方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007333499A (ja) * 2006-06-14 2007-12-27 Matsushita Electric Ind Co Ltd 電子計測装置
CN205862481U (zh) * 2016-08-09 2017-01-04 成都易科士信息产业有限公司 一种基于超高频射频识别的餐饮行业智能称重结算***
CN106781121A (zh) * 2016-12-14 2017-05-31 朱明� 基于视觉分析的超市自助结账智能***
CN206891563U (zh) * 2017-06-13 2018-01-16 沈阳民兴科技发展有限公司 智能pc电子秤防伪追溯***
CN107862814A (zh) * 2017-11-01 2018-03-30 北京旷视科技有限公司 自动结算***及自动结算方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112381512A (zh) * 2020-11-15 2021-02-19 周岳 一种核验***及核验方法

Similar Documents

Publication Publication Date Title
CN109166007A (zh) 一种基于自动售货机的商品推荐方法及其装置
JP2021507203A (ja) 重量モニタリングに基づく商品検知システムおよび商品検知方法
CN106851238B (zh) 白平衡控制方法、白平衡控制装置及电子装置
KR102506341B1 (ko) 거울을 가상화하는 디바이스들, 시스템들 및 방법들
US10587864B2 (en) Image processing device and method
CN103955272B (zh) 一种终端设备用户姿态检测***
EP1594085A1 (en) Unauthorized person detection device and unauthorized person detection method
CN109035629A (zh) 一种基于开放式自动售货机的购物结算方法和装置
CN107018323B (zh) 控制方法、控制装置和电子装置
US20060204137A1 (en) Portable terminal and information-processing device, and system
CN104272731B (zh) 用于处理3d信息的设备和方法
US9393697B1 (en) System and method using foot recognition to create a customized guest experience
CN108985861A (zh) 一种基于开放式购物环境的购物结算控制方法和装置
CN110168562A (zh) 基于深度的控制方法、基于深度的控制装置和电子装置
JP2016040649A (ja) 商品等提供システム、商品等提供方法、及び商品等提供プログラム
CN109059798B (zh) 一种基于多视角深度信息的三维体扫描仪
CN110494864B (zh) 3d模型的集成
CN108734459A (zh) 一种3d超市商品核验***
CN109044295A (zh) 一种基于人脸识别的智能体测仪及体测方法
CN109166257A (zh) 一种购物车商品核验方法及其装置
CN108324247B (zh) 一种指定位置皮肤皱纹评估方法及***
CN109241883A (zh) 一种基于自动售货机的退货控制方法及其装置
CN107895397A (zh) 一种虚拟显示方法及装置
KR102026625B1 (ko) 의류매장용 개인 맞춤형 의류 추천방법
CN111609926B (zh) 杂散光强度检测方法、装置、检测终端及可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20181211

RJ01 Rejection of invention patent application after publication