CN109146380A - 一种基于相对位置的库存分析*** - Google Patents
一种基于相对位置的库存分析*** Download PDFInfo
- Publication number
- CN109146380A CN109146380A CN201810967162.0A CN201810967162A CN109146380A CN 109146380 A CN109146380 A CN 109146380A CN 201810967162 A CN201810967162 A CN 201810967162A CN 109146380 A CN109146380 A CN 109146380A
- Authority
- CN
- China
- Prior art keywords
- image
- access mechanism
- article
- shelf
- collecting device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
- G06Q10/087—Inventory or stock management, e.g. order filling, procurement or balancing against orders
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K17/00—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations
- G06K17/0022—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisious for transferring data to distant stations, e.g. from a sensing device
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/08—Payment architectures
- G06Q20/20—Point-of-sale [POS] network systems
- G06Q20/203—Inventory monitoring
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/08—Payment architectures
- G06Q20/20—Point-of-sale [POS] network systems
- G06Q20/208—Input by product or record sensing, e.g. weighing or scanner processing
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Accounting & Taxation (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Strategic Management (AREA)
- Finance (AREA)
- General Business, Economics & Management (AREA)
- Economics (AREA)
- Marketing (AREA)
- Quality & Reliability (AREA)
- Tourism & Hospitality (AREA)
- Operations Research (AREA)
- Human Resources & Organizations (AREA)
- Entrepreneurship & Innovation (AREA)
- Development Economics (AREA)
- General Engineering & Computer Science (AREA)
- Warehouses Or Storage Devices (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明涉及一种基于相对位置的库存分析***,包括位置采集装置和图像采集装置。所述位置采集装置能够采集到所述存取机构运动的第一绝对位置;所述图像采集装置能够自所述存取机构运动起,连续追踪所述存取机构并采集所述存取机构的图像信息,当所述图像采集装置采集到所述存取机构发生物品变化的一刻,所述位置采集装置采集到所述存取机构的第二绝对位置,计算***基于第一绝对位置、第二绝对位置和所述图像信息判断所述物品与所述货架的对应关系;所述计算***采取所述第一相对位置与所述绝对位置对库存位置变化和所述存取机构进行归类分析,能够随时随地依据所述物品与所述库存位置的变化来动态划分需要进行分析与计算的区域。
Description
技术领域
本发明涉及库存管理***和方法,尤其涉及一种基于相对位置的库存分析***。
背景技术
随着经济全球化的快速发展,企业面临着愈发激烈的市场竞争。库存控制在企业活动中占有极其重要的地位,库存量太大或太小都会降低企业竞争力。为了保证企业既能快速响应顾客需求,又能保持合理库存水平,必须研究企业库存控制,制定适当的库存分析方法,有效解决库存问题。现有的库存在补充和更新货品时,都是预先在补货区(距离货架区较近)提前备好货源。在现有技术中,都是基于人工对其进行库存分析,即人工记录和录入***,浪费时间和人力成本。而且,目前已有大量的无人超市逐步登陆市场,显然这种模式已不能满足当前要求,因此,需要一种库存分析***以解决当前的技术问题。
CN101482615B公开的用于确定多个平台上的多个货品的相对位置的***。该***包括存储器、接口和处理器。存储器可存储第一货品、第二货品、第一时间段、第二时间段。接口可操作地与用户和天线相通信。天线能够在一段时间内检测货品。处理器可操作地经由接口从天线接收第一货品、、第二货品、第一时间段、第二时间段。处理器可确定各个时间段是否交叠。如果各个时间段相交叠,则处理器可向用户告知货品在同一平台上,否则告知货品在相继的平台上。
CN107077659A提供了一种智能库存管理***、服务器、方法、终端和程序产品,用于降低库存管理的复杂程度;其包括:智能机器终端拍摄物品,并将拍摄到的图像发送到智能库存管理服务器;所述智能库存管理服务器根据所述智能机器终端拍摄到的图像识别确定所述图像中的物品及存量;并将所述物体识别模块识别出的物品及存量信息入库。其虽然利用物体识别技术,减少了人工录入的工作量,提高了物品信息入库的准确性,降低了库存管理的复杂程度;但是不能实时地准确评估库存变化。除非有人工介入统计与盘点,否则库存数量仍然是混乱不堪的。
CN104361039A提供了一种基于Qt开发的嵌入式智能冰箱的辅助方法,其包括以下步骤:步骤1、显示过期提醒预览和留言信息;步骤2、食材库存管理,以数据和用户操作为基础,查看当前库存中的所有食材详细信息,并且对食材信息进行编辑和删除的统一管理;并对所有食材进行分类管理,根据生产日期、剩余保质期和过期日期进行排序,以查看各个食材信息;步骤3、过期提醒,通过对库存上的食材信息的剩余保质期进行统计,对剩余保质期少于5天的食材给予直观的信息预览,具体显示食材过期日期和剩余保质期,并实时显示和更新;步骤4、食谱的查询和食谱的推荐,提供海量食谱数据,以及提供各式美味佳肴的制作方法,并根据现有食材或自定义食材进行搜索,获取特定的食谱;根据库存食材或者当前时令季节和健康营养信息,推荐不同口味和功效的食谱;步骤5、购物清单,将现有食材或者将自定义食材信息添加至购物清单,对该购物清单中的食材进行的统计和管理,并且在数据挖掘的基础上提供缺货提醒列表,提供购物的选择;步骤6、食材识别和存取,对食材进行识别并存储。该技术方案不能实时统计库存消耗,在频繁取用食品的厨房及厨房库房内不能起到有效管理库存的效果。
此外,为了准确管理厨房库存,大型酒店和餐厅一般有专人来管理库存(即库存管理员),仅当餐厅提供订单(相当于本发明下文所述的取食信息)之时,库存管理员才会根据订单(取食信息)向相关人员提供相关食品。此后,由库存管理员以手动方式检查订单与食品之间的对应关系。这种方式不仅效率低下,而且由于食品种类极其庞杂,经常出现大量丢失情况。
公开号为CN105531715A的中国专利文献公开了一种基于图像检测的库存更新方法,其中,通过比对拿取货品之前与拿取货品之后的图像来确定库存的更新和购物清单。该方法存在的问题在于,一旦用户取走了物品,但又送回到不恰当的位置时,那么购物清单与库存更新是不准确的。另外,当用户在类型相近似且摆放位置相近似的区域做反复对比时,会对拍照和计算带来挑战,倘若用户以双手同时拿取物品,又放回一件物品至错误位置时,购物清单与库存更新经常都会出现差错。其省略了结算环节,但由此也引发了其他问题。因此,这种自动购物方式存在改进空间。
公开号为CN104637198A的中国专利文献公开了一种具有自主跟踪功能的智能结算购物车***,由MCU微控制器,可控直流电机,压力称重传感器,RFID阅读器,摄像头,无线收发器,触摸显示屏,条码扫描器,银联刷卡器构成自主跟踪和自助结算两大子***,其特征在于:MCU微控制器1通过压力称重传感器感应的车体重量控制可控直流电机的驱动力大小,以适当速度移动购物车;通过条码扫描器自行扫描物品,触摸显示屏实时显示物品信息和当前所购物品总价,无线收发器实现MCU微控制器与超市后台服务器关于物品信息的实时交互,消费者通过银联刷卡器自行刷卡结算。在该***中,RFID射频卡作为购物车跟踪的信号源,与购物车建立点到点的单线联系;摄像头随时拍摄购物车周围环境,通过路径识别算法自主规避障碍物,选择跟踪路径;由驱动电机驱动的驱动轮可以左右偏转,根据路径识别算法提供的路径信息,由MCU微控制器控制驱动轮的转向。
公告号为CN202904765U的中国专利文献提供一种商场自助智能购物车,包括车架,安装在车架下方的车轮,安装在车架上方的车篮、推杆,推杆下端连接车篮底部的外侧面,其之间的夹角为40-60度,车篮上端和推杆之间安装触摸显示屏,触摸显示屏左侧安装扫描仪、右侧安装刷卡槽,车篮上端安装自动开合感应门。其有益效果是,车篮上端安装自动开合感应门,自动开合感应门上安装感应仪可以感应到所放入的物品,避免在购物过程中错买或多买的麻烦。
通过研究以上技术方案,本领域技术人员即使将其结合,也无法得到令人满意的针对“人与智能搬运机器同时出现的仓储式超市”的库存管理方案。
发明内容
有鉴于前述传统大型仓储式超市的固有问题以及无人超市的其他问题,本发明致力于提供一种库存管理***及方法,本发明可以用于一种库存无人超市。在本发明中并非要绝对避免使用RFID标签,但是考虑到RFID标签的成本问题,本发明更多地采取普适的图像识别手段。但本发明并不排斥RFID,对于以智能搬运设备为代表的存取机构,RFID与图形二维码都是存取设备身份识别的优选方式。这也是因为目前绝大多数仓储式超市已经配备了视频监控管理***,而且监控***的精度越来越好,能够达到毫米级别的图像精度,而这种低成本图像识别解决方案仍然在高速发展。
有鉴于此,本发明公开一种基于相对位置的库存分析***,包括位置采集装置,用于采集仓库区不动点和/或存取机构的绝对位置,图像采集装置,用于采集仓库区不动点和/或所述存取机构的图像信息,所述位置采集装置能够在所述存取机构运动的一刻,采集到所述存取机构运动的第一绝对位置,所述图像采集装置能够自所述存取机构运动起,连续追踪所述存取机构并采集所述存取机构的图像信息,当所述图像采集装置采集到所述存取机构发生物品变化的一刻,所述位置采集装置采集到所述存取机构的第二绝对位置,计算***基于第一绝对位置和第二绝对位置分析所述存取机构的第一相对位置,并基于所述第一相对位置和所述图像信息判断所述物品与所述货架的对应关系;其中,所述***采取所述第一相对位置与所述绝对位置对库存位置变化和所述存取机构进行归类分析,将仓储区域与当前和其互动的所述存取机构彼此关联起来,使得能够随时随地依据所述物品与所述库存位置的变化来动态划分需要进行分析与计算的区域。
根据一种优选的实施方式,所述图像采集装置中的至少一个为可采集变焦图像的变焦图像采集装置,用于拍摄至少一个所述不动点和/或所述存取机构的变焦图像,所述计算***首先基于所述变焦图像计算出所述存取机构相对于所述不动点的第二相对位置,然后基于所述第一相对位置和所述第二相对位置修正相对位置信息误差生成修正后的第三相对位置,最后基于所述第三相对位置和所述图像信息判断所述物品与所述货架的对应关系。
根据一种优选的实施方式,所述图像采集装置在收到拍摄指令时起,对所述存取机构拍摄至少一张第一拍摄图像,所述计算***能够基于所述第一拍摄图像的焦距、亮度、清晰度、所述存取机构与所述图像采集装置的距离,以使得所述图像采集装置能够调整焦距、亮度和/或清晰度进而拍摄至少一张第二拍摄图像,所述计算***基于所述第一相对位置、第二相对位置和/或第三相对位置和所述第二拍摄图像判断所述物品与所述货架的对应关系。
根据一种优选的实施方式,所述图像采集装置包括至少一个第一图像采集装置,用于采集第一图像,并由所述计算***基于所述第一图像来确定至少一个所述存取机构在货架所在区域内的绝对位置以及所述存取机构相对于至少一个载有至少一种物品的货架的相对位置;所述图像采集装置包括至少一个第二图像采集装置,用于探测至少一个存取机构的手部的第二图像,所述第二图像是在所述存取机构的手进入所述货架的至少一个库存位置之前拍摄的;所述图像采集装置包括至少一个第三图像采集装置,其用于探测至少一个存取机构的手部的第三图像,所述第三图像是在所述存取机构的手从所述货架的至少一个库存位置移出之后拍摄的;其中,基于所述第二图像与所述第三图像的比较来确定相应存取机构持有物品的状态,响应于存取机构持有物品的状态而识别在所述存取机构的绝对位置周围的、处于预定相对位置的货架的至少一个库存位置的变化,并由此判断所述物品与所述库存位置的变化之间的对应关系。
根据一种优选的实施方式,至少一个第四图像采集装置,其布置于货物暂存单元,用于探测物品进入所述货物暂存单元的动作,其中,响应于物品进入所述货物暂存单元的动作,由此确认进入所述货物暂存单元的所述物品与所述库存位置的变化之间的对应关系。
根据一种优选的实施方式,所述第四图像采集装置还被配置用于:响应于存取机构的手部进入所述货物暂存单元的动作而拍摄手部的第四图像和第五图像,其中,所述第四图像是在所述存取机构的手进入所述货物暂存单元之前拍摄的,所述第五图像是在所述存取机构的手从所述货物暂存单元移出之后拍摄的,其中,基于第四图像与第五图像的比较来确定相应存取机构移出物品的状态,响应于存取机构持有物品的状态而识别在所述存取机构的绝对位置周围的、处于预定相对位置的货架的至少一个库存位置的变化,并由此判断所述物品的移出与所述库存位置的变化之间的对应关系。
根据一种优选的实施方式,所述第二图像采集装置在探测到一个存取机构的手部的第二图像之时,所述***至少还会分析基于第二图像与第三图像的比较而确定的所述存取机构持有物品的情况和/或所述存取机构所携带的货物暂存单元的第四图像采集装置探测到的物品进入所述货物暂存单元的动作,当分析结果表明所述存取机构没有持有物品或仅持有一件物品时,所述***才准予所似乎存取机构存取位于所述存取机构的绝对位置近旁的、处于预定相对位置的所述特定仓储区的至少一个库存位置中的物品。
根据一种优选的实施方式,所述***还包括:使用至少一个第五图像采集装置,其布置于存取机构进出通道中,用以采集用于支付和/或注册的识别标识,其中,所述第五图像采集装置仅响应于第四图像采集装置提供图像的事件而启动。
根据一种优选的实施方式,响应于第四图像采集装置提供图像的事件并根据配备所述第四图像采集装置的货物暂存单元相对于进出通道的位置,第五图像采集装置调整其光学采集方向和焦距。
根据一种优选的实施方式,所述第一图像是在所述第二图像采集装置拍摄到所述存取机构的手部的第二图像之后才由所述第一图像采集装置拍摄的,其中,所述第二图像是在所述存取机构的手进入货架的至少一个库存位置之前拍摄的。
根据一种优选的实施方式,从基于第一图像确定绝对位置的最初时间点开始,所述货物暂存单元响应于存取机构持有物品的状态而设定介绍定时周期,在经过所述特定的介绍定时周期之后,若第四图像采集装置未能采集到物品进入所述货物暂存单元的动作,则通过所述货物暂存单元向持有物品的存取机构发出有关商品属性的提示,其中,所述提示可以呈电子信号、语音、图像或视频的形式。
根据一种优选的实施方式,所述***包括:所述***还包括计算***,所述计算***通过网络与输入组件、输出组件和/或直接地与第一图像采集装置、第二图像采集装置、第三图像采集装置、第四图像采集装置、第五图像采集装置、第六图像采集装置、第七图像采集装置、第八图像采集装置和/或货物暂存单元中的至少一个通信连接。
绝对位置是指针对应用该库存管理***的超市或仓库所建立的坐标系内的位置,其坐标原点例如可以是超市或仓库占地面的一个角落例如东南角,也可以是某结算柜台所在的位置。相对位置是指超市内的货架之间的彼此相对位置,也可以是存取机构或人员与货架之间的相对位置。
考虑到人员或存取机构在绝大多数情况下都仅能操作其可存取的处于近旁的货架。在本发明中,同时采取相对位置与绝对位置对库存位置变化和人员/存取机构进行归类分析,使得超市随时随地依据“变化发生地”来动态划分需要进行分析与计算的区域,能够准确地将货架与当前与其互动的人员或存取机构彼此关联起来,解决大量动态人员与动态存取机构同时进行购物或库存整理时的困难。换而言之,通过本发明先根据位置将库存变化与人员或存取机构进行对应,这对大型超市库存管理的实时性有着决定性的作用。对于拥有成千上万库存位置的超市而言,由于把“库存变化”与“绝对位置”和“相对位置”率先进行了关联,从而大大降低了图像识别的运算量,由此能够在不增设大量计算***的情况下完成实时库存分析。也由此很大程度上避免了库存数据的混乱无序。
通过该方式,不仅可以分析库存位置处的物品的增减情况,还可以分析相应物品是否放回到货架上的正确的库存位置。在这里,存取机构可以是人,也可以是机器设备。对于人而言,图像识别的对象是人的手臂;对于机器设备而言,图像识别的对象是机械手或类似物;从而使得本发明能够灵活应对机器与人并存的超市环境。
本发明提供了针对人员与智能搬运设备共存的仓储式超市内的库存管理***及方法,其至少具有如下优势:
(1)将库存位置分隔为多个计算分析区域,本发明不仅可以分析库存位置处的物品的增减情况,还可以分析相应物品是否放回到货架上的正确的库存位置;
(2)将库存位置分隔为多个计算分析区域,采用归类分析方法,减少监控设备,最大限度发挥监控设备的工作潜力;
(3)本发明可以在物品放入到货物暂存单元后,确认进入该货物暂存单元的所述物品与所述库存位置的变化之间的对应关系,使得对库存位置的变化的统计更加准确,提高了***的实用性;
(4)本发明可以在从货物暂存单元的移出物品之时再一次分析出该过程可能导致的库存位置的变化,使得库存位置能够更加全面、准确地进行更新。
附图说明
图1是本发明的***的一个优选实施方式的模块示意图。
附图标记列表
11:第一图像采集装置 12:第二第图像采集装置
13:第三图像采集装置 14:第四图像采集装置
15:第五图像采集装置 16:第六图像采集装置
17:第七图像采集装置 18:第八图像采集装置
21:指示标记 22:位置错误标记
30:计算*** 40:货物暂存单元
50:位置采集装置 60:图像采集装置
60a:变焦图像采集装置
具体实施方式
下面结合附图进行详细说明。
为了便于理解,在可能的情况下,使用相同附图标记来表示各附图中共同的相似元件。
实施例1
本发明公开了一种基于相对位置的库存分析***,在不造成冲突或者矛盾的情况下,其他实施例的优选实施方式可以作为本实施例的补充。
该***包括,位置采集装置50,用于采集仓库区不动点和/或存取机构的绝对位置;和图像采集装置60,用于采集仓库区不动点和/或存取机构的图像信息。位置采集装置50能够在存取机构运动的一刻,采集到存取机构运动的第一绝对位置,图像采集装置60能够自存取机构运动起,连续追踪存取机构并采集存取机构的图像信息,当图像采集装置60采集到存取机构发生物品变化的一刻,位置采集装置50采集到存取机构的第二绝对位置,计算***30基于第一绝对位置和第二绝对位置分析存取机构的第一相对位置,并基于第一相对位置和图像信息判断物品与货架的对应关系;其中,计算***30采取第一相对位置与绝对位置对库存位置变化和存取机构进行归类分析,将仓储区域与当前和其互动的存取机构彼此关联起来,使得能够随时随地依据物品与库存位置的变化来动态划分需要进行分析与计算的区域。考虑到人员或存取机构在绝大多数情况下都仅能操作其可存取的处于近旁的货架(典型情况下是2米左右范围内的货架)。在本发明中,同时采取相对位置与绝对位置对库存位置变化和人员/存取机构进行归类分析,使得超市随时随地依据“变化发生地”来动态划分需要进行分析与计算的区域,能够准确地将货架与当前与其互动的人员或存取机构彼此关联起来,解决大量动态人员与动态存取机构同时进行购物或库存整理时的困难。换而言之,通过本发明先根据位置将库存变化与人员或存取机构进行对应,这对大型超市库存管理的实时性有着决定性的作用。对于拥有成千上万库存位置的超市而言,由于把“库存变化”与“绝对位置”和“相对位置”率先进行了关联,从而大大降低了图像识别的运算量,由此能够在不增设大量计算***的情况下完成实时库存分析。也由此很大程度上避免了库存数据的混乱无序。通过该方式,不仅可以分析库存位置处的物品的增减情况,还可以分析相应物品是否放回到货架上的正确的库存位置。在这里,存取机构可以是人,也可以是机器设备。对于人而言,图像识别的对象是人的手臂;对于机器设备而言,图像识别的对象是机械手或类似物;从而使得本发明能够灵活应对机器与人并存的超市环境。将库存位置分隔为多个计算分析区域,本发明不仅可以分析库存位置处的物品的增减情况,还可以分析相应物品是否放回到货架上的正确的库存位置;将库存位置分隔为多个计算分析区域,采用归类分析方法,减少监控设备,最大限度发挥监控设备的工作潜力。
不动点,指仓库区域内静止的可作为参照物的物体,比如货架、建筑物立柱和办公桌。
优选的,图像采集装置60中的至少一个为可采集变焦图像的变焦图像采集装置60a,用于拍摄至少一个不动点和/或存取机构的变焦图像。计算***30首先基于变焦图像计算出存取机构相对于不动点的第二相对位置,然后基于第一相对位置和第二相对位置修正相对位置信息误差生成修正后的第三相对位置,最后基于第三相对位置和图像信息判断物品与货架的对应关系。计算***30建立不动点在变焦图像的空间位置A1。通过在计算***中预先设立不动点的位置信息,建立不动点实际的空间位置A2。计算***能够建立A1和A2的映射关系(a,b),且能满足A2=aA1+b。计算***30提取变焦图像中不动点和存取机构的位置信息,将存取机构在变焦图像中的位置B1映射到A2中,即B0=aB1+b,B0即为存取机构在实际空间A2中的相对与不动点的第二相对位置。第一相对位置是存取机构在不同时间相对自己的位置,而第二相对位置是存取机构相对其中至少一个不动点的位置,计算***30将第一相对位置和第二相对位置修正为第三相对位置,能够降低在因图像采集装置分辨率不够和采集时间误差等因素带来的位置采集的***误差,从而有效的将相对位置和图像信息判断物品与货架的对应关系,提升***的有效性。
优选的,图像采集装置60在收到拍摄指令时起,对存取机构拍摄至少一张第一拍摄图像,图像采集装置60基于第一拍摄图像的焦距、亮度、清晰度、存取机构与图像采集装置的距离,图像采集装置60能够调整焦距、亮度和/或清晰度进而拍摄至少一张第二拍摄图像,计算***30基于第一相对位置、第二相对位置和/或第三相对位置和第二拍摄图像判断物品与货架的对应关系。例如,图像采集装置60在收到拍摄指令时起,拍摄一张第一拍摄图像,并由计算***30获取第一拍摄图像的预览图像,分析第一拍摄图像的焦距、亮度、清晰度、存取机构与图像采集装置的距离,调整图像采集装置60能够调整焦距、亮度和/或清晰度进而拍摄至少一张第二拍摄图像,计算***30基于第一相对位置、第二相对位置和/或第三相对位置和第二拍摄图像判断物品与货架的对应关系。
实施例2
实施例2是在实施例1的基础上进一步的改进,在不造成冲突或者矛盾的情况下,其他实施例的优选实施方式可以作为本实施例的补充。
根据一个优选实施方式,参见图1,该***可以包括:第一图像采集装置11,其用于采集第一图像,并由该***基于所述第一图像来确定至少一个存取机构在货架所在区域内的绝对位置以及该存取机构相对于至少一个载有至少一种物品的货架的相对位置。优选地,地面上可以设有相应的用于识别的基准点和/或基准线辅助***确定绝对位置和相对位置。绝对位置是指针对应用该库存管理***的超市或仓库所建立的坐标系内的位置,其坐标原点例如可以是超市或仓库占地面的一个角落例如东南角,也可以是某结算柜台所在的位置。相对位置是指超市内的货架之间的彼此相对位置,也可以是存取机构或人员与货架之间的相对位置。
根据一个优选实施方式,该***还可以包括:第二图像采集装置12,其用于探测至少一个存取机构的手部的第二图像,所述第二图像是在该存取机构的手进入货架的至少一个库存位置之前拍摄的。优选地,对于一个货架,其可以具有至少一个库存位置。一个货架可以分为多层。每层可以是一个库存位置。或者,一层在水平方向上可以分为多个区域,每个区域可以是一个库存位置。应当注意地是,这些区域之间的分隔线可以是可图像识别的分隔装置和/或不可图像识别的虚拟分隔线。分隔装置例如是间壁和/或喷涂的基准线。不可图像识别的虚拟分割线可以是在货架、与该货架对应的第二图像采集装置12和/或第三图像采集装置13固定好后,摆放相应的物品,然后由***采集该货架的图像信息对货架进行分割,以得到至少包含一类物品的至少一个库存位置。例如,第二图像采集装置12需要对日常用品货区进行图像采集,日常货区共计两层两列,各货架单元分别存放有毛巾、肥皂、香皂和盆子,则第二图像采集装置12可以按毛巾、肥皂、香皂和盆子分别对货架进行分割,也可以按肥皂和香皂(大小和形状相似)的组合、毛巾、盆子分别对货架进行分割。从而有区别的预先对货品与货架进行关联,降低分析因***因货品与货架关系不定而导致分析***工作负荷,同时,也减少了图像采集装置的布置量。
根据一个优选实施方式,该***还可以包括:第三图像采集装置13,其用于探测至少一个存取机构的手部的第三图像,所述第三图像是在该存取机构的手从该货架的至少一个库存位置移出之后拍摄的。
根据一个优选实施方式,该***可以基于第二图像与第三图像的比较来确定相应存取机构持有物品的状态,响应于存取机构持有物品的状态而识别在该存取机构的绝对位置周围的、处于预定相对位置的货架的至少一个库存位置的变化,并由此判断所述物品与所述库存位置的变化之间的对应关系。随后采取相对位置与绝对位置对库存位置变化和人员/存取机构进行归类分析,准确地将货架与当前与其互动的人员或存取机构彼此关联起来,使得能够随时随地依据所述物品与所述库存位置的变化来动态划分需要进行分析与计算的区域。由于把“库存变化”与“绝对位置”和“相对位置”率先进行了关联,从而大大降低了图像识别的运算量,由此能够在不增设大量计算***的情况下完成实时库存分析。
比如,绝对位置周围有多个货架,但是通过绝对位置不能准确地确定实际发生变化的库存位置,而相对位置可以涉及到两者之间的距离,只有在相应存取机构在与一个货架的距离小于等于预设距离之时,才有可能出现该存取机构与处于相对位置的货架发生物品转移关系的情况。在该存取机构与存放该物品的对应的库存位置距离近的情况下,该存取机构将该物品放回到对应的库存位置时,则该库存位置的变化只包括数量的增加,而不包括品类的增加。在该存取机构与存放该物品的对应的库存位置距离远的情况下,该存取机构有可能因为其自身操作错误而未将物品放回到该物品的对应的库存位置。因此,在将物品放回到货架上且未放回到其对应的库存位置的情况下,则处于预定相对位置的货架的至少一个库存位置的变化可以包括:该库存位置存放物品的品类增加和存放物品的数量增加。优选地,持有物品的状态可以包括物品的种类和/或数量。优选地,在判断所述物品与所述库存位置的变化之间的对应关系之前,可以基于从各种输入装置接收到的数据来识别从货架的库存位置移除和/或放入货架的库存位置中的物品的身份。例如,通过图像采集装置可以采集在相应存取机构的手经过平面进入库存位置中之前所述手的一连串图像并且还采集在该手离开库存位置后该手的一连串图像。基于所述图像的比较,可以确定相应存取机构是否从库存位置移除物体或将物体放入库存位置中。例如,基于对图像的分析,可以确定相应存取机构在手进入库存位置时没有拿着物体,但是在手从库存位置移出时拿着物体(相应存取机构从库存位置移除物体)。同样地,可以使用图像分析来识别是否在手进入库存位置之前相应存取机构在他们的手上拿有物体但在手从库存位置移出时没有拿有物体(相应存取机构将物体放入库存位置中)。也就是说,本发明用于比较的第二图像和第三图像不仅仅只是包括单张图像的情况,还可能是一连串的第二图像和一连串的第三图像的综合比对。将库存位置分隔为多个计算分析区域,本发明不仅可以分析库存位置处的物品的增减情况,还可以分析相应物品是否放回到货架上的正确的库存位置。
优选地,本发明的管理***还公开了第四图像采集装置14,其布置于货物暂存单元40,用于探测物品进入该货物暂存单元40的动作,其中,响应于物品进入该货物暂存单元40的动作,由此确认进入该货物暂存单元40的所述物品与所述库存位置的变化之间的对应关系。优选地,当且仅当所述确认步骤之后,将代表所述物品的物品标识符添加至提货清单,所述提货清单与至少一个存取机构相关联。通过将物品标识符添加到提货清单,在用户逛超市的过程中根据放入到货物暂存单元40中的物品实时地进行提货清单地核算,最后可以直接根据提货清单进行费用的结算,避免了再次将物品依次移出扫描条码进行结算造成耗时长的问题。优选地,货物暂存单元40例如是存取机构专用存货框、购物车、购物筐和购物袋中的至少一种。
优选地,所述第四图像采集装置14还可以被配置用于:响应于存取机构的手部进入该货物暂存单元40的动作而拍摄手部的第四图像和第五图像,其中,所述第四图像是在该存取机构的手进入该货物暂存单元40之前拍摄的,所述第五图像是在该存取机构的手从该货物暂存单元40移出之后拍摄的,其中,基于第四图像与第五图像的比较来确定相应存取机构移出物品的状态,响应于存取机构持有物品的状态而识别在该存取机构的绝对位置周围的、处于预定相对位置的货架的至少一个库存位置的变化,并由此判断所述物品的移出与所述库存位置的变化之间的对应关系。在此,通过物品的移出以及库存位置的变化两者来确定某物品从货物暂存单元返回至库存位置。由此可首先基于第一图像所确定的绝对位置和相对位置来确认发生变化的库存位置,同时基于第二图像、第三图像、第四与第五图像来分析确定所返回的物品。此时可相应更新库存位置或者启动货物清理程序,例如招唤人工介入清除不符合货架货物的物品,或者以自动进给方式将错误的物品送入回收通道。例如,通过在天花板安装可移动的机械手臂或者带机械手臂的自动清理车将不符合货架货物的物品或者错误的物品进行归位整理或者放入回收通道。优选地,当基于第二、第三、第四与第五图像确定返回的物品之后,将代表所述物品的物品标识符从提货清单移除,所述提货清单与至少一个存取机构相关联。优选地,第四图像是该存取机构的手在未持有物品的情况下该手进入该货物暂存单元40之前拍摄的。第五图像是在该存取机构的手从该货物暂存单元40将物品移出之后拍摄的。
根据一个优选实施方式,所述第四图像采集装置14还可以被配置用于:响应于存取机构抵达结算区域而启动,采集货物暂存单元40内的物品占用货物暂存单元40的空间大小,由该***根据空间大小指示结算区域的提供设备为该存取机构提供匹配大小的袋。通过该方式,可以为该存取机构提供适宜大小的袋,避免在结算区域因为判断所需的袋的大小而浪费过多的时间,提高结算效率。
根据一个优选实施方式,本发明还公开了第五图像采集装置15,其布置于存取机构进出通道中,用以采集用于支付和/或注册的识别标识。优选地,所述识别标识可以是RFID、二维码、指纹、人体轮廓、人脸轮廓、虹膜图像和典型的热特性图像中的至少一种。比如,在一个存取机构被检测到持有一个货物暂存单元40后,则***将该货物暂存单元40与该存取机构关联。在费用结算之时,在该存取机构是未注册用户的情况下,则可以在结算之时或之前提醒该存取机构的拥有方注册或者以远程方式直接完成支付。在存取机构的拥有方或作为自然人的用户注册之时,可以要求拥有方或用户选定一种识别标志作为以后费用结算之时的凭证,并根据用户选定的识别标识要求用户录入对应的信息。假设用户选择通过虹膜图像、图形二维码或RFID进行支付,则该存取机构在费用结算之时,将图形二维码(张贴于存取机构)或相应的眼部朝向第五图像采集装置15的采集区域,在通过***的验证之后,使用绑定的支付账号完成费用结算;或者使得存取机构的RFID或其图形二维码录入***用以结算。
根据一个优选实施方式,第五图像采集装置15仅响应于第四图像采集装置14提供图像的事件而启动。优选地,响应于第四图像采集装置14提供图像的事件并根据配备该第四图像采集装置14的货物暂存单元40相对于进出通道的位置,第五图像采集装置15调整其光学采集方向和焦距。
根据一个优选实施方式,所述第一图像是在所述第二图像采集装置12拍摄到该存取机构的手部的第二图像之后才由所述第一图像采集装置11拍摄的,其中,所述第二图像是在该存取机构的手进入货架的至少一个库存位置之前拍摄的。由此,使得无人超市可以同时应对多人进店采购的场景,仅当存在第一图像的存取机构再次进行物品存取或放回时,***才会启动一系列负责的图像分析操作。换而言之,***对于存取机构的追踪始于其尝试触及货架上的物品之时。
优选地,从基于第一图像确定绝对位置的最初时间点开始,该货物暂存单元40响应于存取机构持有物品的状态而设定介绍定时周期(例如5秒),在经过该特定的定时周期之后,若第四图像采集装置14未能采集到物品进入该货物暂存单元40的动作,则通过该货物暂存单元40向持有物品的存取机构发出有关商品属性的提示,其中,所述提示可以呈电子信号、语音、图像或视频的形式。在该货物暂存单元判断其持有方为人员而非呈搬运设备形式的存取机构时,该货物暂存单元40可以提示该存取机构从货架上取下但未装入该货物暂存单元40的商品售价为20元,据其保质期截止时间还有十个月。优选地,该货物暂存单元40响应于介绍定时周期之设定,还设定提醒定时周期(例如30秒),在经过了提醒定时周期之后,若第四图像采集装置14未能采集到物品进入该货物暂存单元40的动作,则通过该货物暂存单元40向持有物品的存取机构发出提示将当前物品正确装入该货物暂存单元40内的提示,其中,该提示可采取指向容纳口的箭头这样的图形方式。优选地,在经过了该提醒定时周期之后,在第四图像采集装置14未能采集到物品进入该货物暂存单元40的动作的情况下,则该***还通过指示标记21指示将当前物品放回到货架上的正确位置。其中,该指示标记21可以采取指向当前物品的同类物品所在区域的箭头这样的图形方式。更具体地,比如,指示标记21为绿色荧光箭头且能按照预设频率闪烁。在该货物暂存单元判断其持有方为呈搬运设备形式的存取机构而非作为自然人的人员时,由该货物暂存单元40将相关商品介绍信息以电子信号方式传送至该存取机构,由其向远程用户发出提示,以尽快完成采购决定。
优选地,该***还包括第六图像采集装置16,第六图像采集装置16在经过了该提醒定时周期之后,在第四图像采集装置14未能采集到物品进入该货物暂存单元40的动作的情况下启动,用于采集与物品关联的货架的第六图像和货架的第七图像,其中,所述第六图像是在该存取机构持有物品的手进入货架之前拍摄的,所述第七图像是在该存取机构持有物品的手从货架移出之后拍摄的,基于第六图像和第七图像比较来二次判断所述物品与所述库存位置的变化之间的对应关系。第六图像采集装置16只在在经过了该提醒定时周期之后,在第四图像采集装置14未能采集到物品进入该货物暂存单元40的动作的情况下启动,是因为物品回放到货架上所需的环境信息更多且分析难度相比从货架上取出物品更大。优选地,在通过第二、第三图像进行一次判断的情况下,还通过第六与第七图像进行二次判断,得到的所述物品与所述库存位置的变化之间的对应关系更加准确可靠。优选地,在两次判断的结果不一致之时,可以安排人工核对或者由智能机器人现场核对。优选地,第六图像和第七图像与第二图像和第三图像的主要区别在于,第六图像和第七图像的对象是货架。而第二图像和第三图像的对象是手。设置第六图像采集装置16的意义在于识别相应存取机构将从货架上的物品拿出后再放置到其他货架上时也能相应地进行跟踪。比如,一个存取机构在一个库存位置拿取相应的物品后,在另一个库存位置看到了同类型的另一个物品,其更具有吸引力,然后,用户则希望将相应的物品移出,更换另一个物品,但是,此时该存取机构很可能已经不在拿取相应的物品的对应货架附近,导致其将物品送还到对应库存位置的意愿低,可能直接将相应的物品放置在当前位置的货架上,这会导致相应的物品可能会放置在非对应的货架上的非对应库存位置。由此,优选地,在持有物品的存取机构未按照指示标记21将该物品放回到货架上的正确位置之时,所述***通过语音方式向其播放劝导提醒。例如,尊敬的客户,您未将某商品放回到其正确位置,为了维护良好的购物环境,避免给他人造成误导,请您根据指示标记21将某商品放回到正确位置,谢谢您的配合。优选地,在播放劝导提醒之后且相应的物品仍未被放回到正确位置的情况下,在该物品的错误位置下显示位置错误标记22,其中,位置错误标记22可以采取感叹号、叉号或者文字形式中的至少一种。优选地,在未被放回到正确位置的物品从显示位置错误标记22的货架上取下之后,通过语音和/或图形方式指示该物品的正确位置和/或正确售价。比如,通过在闪烁的指示标记21以及语音:尊敬的顾客,您好,您手上的物品被放置在了错误的位置上,其正确位置为闪烁的指示标记21所在位置,请参考正确位置处的对应价签进行购买,谢谢!通过该方式,可以让员工快速找到错放的物品,以及快速将其放回到正确位置,提高工作效率。同时,还可以避免因价签和实际物品不对应给购物者造成错误的购物导向,提高用户体验。而且,通过该方式,由于能够快速知道物品的正确位置,在用户步行到正确位置的所需移动的距离不远的情况下,即使看了实际价签和/或正确售价之后用户选择不购买该物品,一些用户会辅助地将该物品放回到其正确位置,降低了员工的工作量。优选地,该***还可以包括指示显示器,指示显示器可以用于在错放的物品的正确位置不在其错放的货架上时,通过指示显示器为拿起错放的物品的存取机构播放其正确的售价。
根据一个优选实施方式,位置错误标记22可以通过至少两种不同的视觉状态以分级显示方式区分错误的偏差程度。偏差程度例如是距离偏差、价格偏差和效用偏差中的至少一种。以此直观地给员工或者购物者进行提示。比如,在位置错误标记22可以通过分级显示方式区分距离偏差时,通过第一颜色、不同于第一颜色的第二颜色以及不同于第一和第二颜色的第三颜色以分三档方式区分距离偏差的偏差程度。在将该物品从当前的错误位置放回到其正确位置的所需路程小于等于第一路程阈值之时,将位置错误标记22配置为第一颜色,在将该物品从当前的错误位置放回到其正确位置的所需路程大于第一路程阈值且小于等于第二路程阈值之时,将位置错误标记22配置为第二颜色,在将该物品从当前的错误位置放回到其正确位置的所需路程大于第三路程阈值之时,将位置错误标记22配置为第三颜色。优选地,第一颜色、第二颜色和第三颜色可以分别为蓝色、黄色和红色。第一路程阈值例如是5米。第二路程阈值例如是20米。第三路程阈值例如是40米。优选地,效用偏差例如是增肥与减肥、通便与止泻一类的偏差。应当注意的是,本发明还可以通过其他方式或者多种方式的组合来实现不同的视觉状态,而不是仅仅只能以不同的颜色来实现。比如,本发明还可以通过数字和颜色的组合来实现。具体地,这里还是以距离偏差为例,在将该物品从当前的错误位置放回到其正确位置的所需路程小于等于第一路程阈值之时,将位置错误标记22配置为第一颜色并显示第一数字,在将该物品从当前的错误位置放回到其正确位置的所需路程大于第一路程阈值且小于等于第二路程阈值之时,将位置错误标记22配置为第二颜色并显示第二数字,在将该物品从当前的错误位置放回到其正确位置的所需路程大于第三路程阈值之时,将位置错误标记22配置为第三颜色并显示第三数字。第一数字例如是1,第二数字例如是2,第三数字例如是3。
根据一个优选实施方式,该***还包括第七图像采集装置17,第七图像采集装置17用于在该***通过货架上的指示标记21指示将当前物品放回到货架上的正确位置之前采集第八图像,由该***根据第八图像分析该正确位置对应的指示标记21的可视情况,仅在该指示标记21位于拿起当前物品的存取机构的可视范围内的情况下才显示该指示标记21。优选地,在该指示标记21不位于拿起当前物品的存取机构的可视范围内的情况下,或者说,在拿起当前物品的存取机构与该对应的指示标记21之间有阻碍视线的固定障碍物的情况下,通过语音方式指示该物品的正确位置和/或正确售价。通过该方式,可以在物品的正确位置不在可视范围内的情况下不给他人造成误导。优选地,该***还根据第八图像分析拿起当前物品的存取机构的身份情况,仅在该指示标记21位于拿起当前物品的存取机构的可视范围内且该存取机构的身份是整理存取机构的情况下才显示该指示标记21。比如,分析人员的身份情况可以通过人脸识别、穿特定的工作装和携带电子标签中的至少一种。
根据一个优选实施方式,在显示该指示标记21之前,该***还根据第八图像分析拿起当前物品的存取机构的可视范围内需要同时显示的指示标记21的第一显示数量,在第一显示数量大于等于两个之时,通过将相应的位置错误标记22和指示标记21以分组的方式进行关联,并在同一组位置错误标记22和指示标记21之间采用视觉上关联且不同组之间采用视觉上区分地方式进行设置。比如,同一组中,位置错误标记22至少部分地与指示标记21发出相同颜色标记,不同组之间的颜色标记不同。又比如,同一组中,位置错误标记22与指示标记21显示相同数字标记,不同组之间的数字标记不同。再比如,同一组中,位置错误标记22与指示标记21显示相同图形标记,不同组之间的图形标记不同。图形标记例如是圆圈、三角形或者四边形。
根据一个优选实施方式,该***还可以包括:第八图像采集装置18,其用于采集货架设置位置错误标记22的至少部分区域的第九图像,并由该***根据第九图像分析实际的位置错误标记22的显示和该***中位置错误标记22的设定的匹配情况,其中,在两者不匹配之时,定位不匹配的位置错误标记22所在的货架并通知维护人员。通过该方式,可以快速地识别和定位到位置错误标记22发生故障的货架,并快速地进行维护,减少漏标或者错标的情况。
优选地,第二图像采集装置12在探测到一个存取机构的手部的第二图像之时,其还会对以下两者进行分析:“基于第二图像与第三图像的比较而确定的该存取机构持有物品的情况”和“该存取机构所携带的货物暂存单元40的第四图像采集装置14探测到的物品进入该货物暂存单元40的动作”,当分析结果表明该存取机构没有持有物品或仅持有一件物品时,该***才准予该存取机构存取位于该存取机构的绝对位置近旁的、处于预定相对位置的货架的至少一个库存位置中的物品。通过该方式,可以有序地对仓库库存进行分析,减少货品重复记录或漏记的情况发生。
根据一个优选实施方式,本发明中提到的各图像采集装置可以使用任何类型的相机及其他可替代的成像设备。例如,所述相机中的一者或多者可以是RGB相机。相机中的一者或多者可以是深度感测相机。
优选地,为了采集到所需的图像,各图像采集装置可以是一个或者多个,在某图像采集装置是多个之时,其可以分散地设于多个位置中。比如,一些图像采集装置可以位于头顶上,例如在天花板上以采集存取机构和/或场所内相应位置的图像。又比如,一些图像采集装置可以位于库存位置上或内部。例如,可以位于库存位置的外部部分上并且被定位成采集存取机构和/或库存位置周围的位置的图像。再比如,一些图像采集装置可以设置在价签所在区域,朝向对侧货架以采集对侧货架上的图像信息。
根据一个优选实施方式,本发明的***还包括计算***30。计算***30可以是在本地、远程或其任何组合。同样地,计算***30可以被配置以通过网络与输入组件、输出组件和/或直接地与第一、第二、第三、第四、第五、第六、第七、第八图像采集装置和货物暂存单元40中的至少一个通信。本领域的人员可以想到的是,通信可以是通过有线的和/或无线的方式。优选地,计算***30例如是一个或者多个服务器。服务器中可以包括处理器和存储器。该***可以包括或提供图像处理(例如,用于用户识别、表情识别和/或物品识别)、库存追踪和/或位置确定。
实施例3
本实施例是对实施例2的进一步改进,重复的内容不再赘述。在不造成冲突或者矛盾的情况下,其他实施例的优选实施方式可以作为本实施例的补充。
本发明还公开了一种库存管理方法,该方法可以由本发明的***以及其他可替代的实现。比如,通过使用***中的各个零部件实现本发明的方法。
根据一个优选实施方式,该方法可以包括:使用至少一个第一图像采集装置11,其用于采集第一图像,并由该管理***基于所述第一图像来确定至少一个存取机构在货架所在区域内的绝对位置以及该存取机构相对于至少一个载有至少一种物品的货架的相对位置;使用至少一个第二图像采集装置12,其用于探测至少一个存取机构的手部的第二图像,所述第二图像是在该存取机构的手进入货架的至少一个库存位置之前拍摄的;使用至少一个第三图像采集装置13,其用于探测至少一个存取机构的手部的第三图像,所述第三图像是在该存取机构的手从该货架的至少一个库存位置移出之后拍摄的;其中,基于第二图像与第三图像的比较来确定相应存取机构持有物品的状态,响应于存取机构持有物品的状态而识别在该存取机构的绝对位置周围的、处于预定相对位置的货架的至少一个库存位置的变化,并由此判断所述物品与所述库存位置的变化之间的对应关系。
根据一个优选实施方式,所述方法还可以包括:使用至少一个第四图像采集装置14,其布置于货物暂存单元40,用于探测物品进入该货物暂存单元40的动作,其中,响应于物品进入该货物暂存单元40的动作,由此确认进入该货物暂存单元40的所述物品与所述库存位置的变化之间的对应关系。
实施例4
本实施例是对实施例1、2、3或者其结合的进一步改进,重复的内容不再赘述。在不造成冲突或者矛盾的情况下,其他实施例的优选实施方式可以作为本实施例的补充。
根据一个优选实施方式,在条码扫描器前,应安装一道屏蔽门,屏蔽门以人员使用的个人的各类可供支付的二维码为开关,一次仅供一人进入,扫码后,门随即关闭。该人员以适当速度移动购物车,通过条码扫描器,自行扫描物品,触摸显示屏显示待付款物品信息和当前所购物品总价,该人员确认无误后,***自动在之前扫描的二维码账户上结算。确认结算无误后,条码扫描器后的屏蔽门打开,同时,条码扫描器前的屏蔽门开始扫描下一人员的二维码。通过该方式,避免了人员偷拿商品或结算有误的问题,可以降低超市的亏损额。
实施例5
本实施例是对实施例1、2、3、4或者其结合的进一步改进,重复的内容不再赘述。在不造成冲突或者矛盾的情况下,其他实施例的优选实施方式可以作为本实施例的补充。
根据一个优选实施方式,货架上设有至少一个重量采集装置,用于采集相应人员的手进入货架的至少一个库存位置之前和该手从该货架的至少一个库存位置移出之后的重量差,并在该***基于第二图像与第三图像的比较来确定相应人员持有物品的状态之后,通过***中记录的该确定的物品的重量和该重量差来核对物品的状态。
此外,本发明还可以通过在货架上直接安装重量采集装置,通过采集装置采集到的重量差来初步判断物品的状态。本领域的人员可以想到的是,这种情况下,一个货架上的多个物品的重量应该有一定区别,以便实现识别的物品的状态的目的。
实施例6
本实施例可以是对实施例1、2、3、4、5或者其结合的进一步改进和/或补充,重复的内容不再赘述。在不造成冲突或者矛盾的情况下,其他实施例的优选实施方式的整体和/或部分内容可以作为本实施例的补充。
本实施例还公开了一种无人超市***,该***的技术特征和一种库存管理***全部或者部分相同,以达到相应的技术效果。
本实施例还公开了一种无人超市的库存管理***,该***的技术特征和一种库存管理***全部或者部分相同,以达到相应的技术效果。
本实施例还公开了一种无人超市的库存管理方法,该方法的技术特征和一种库存管理方法全部或者部分相同,以达到相应的技术效果。
虽然已经详细描述了本发明,但是在本发明的精神和范围内的修改对于本领域技术人员将是显而易见的。这样的修改也被认为是本公开的一部分。鉴于前面的讨论、本领域的相关知识以及上面结合背景讨论的参考或信息(均通过引用并入本文),进一步的描述被认为是不必要的。此外,应该理解,本发明的各个方面和各个实施例的各部分均可以整体或部分地组合或互换。而且,本领域的普通技术人员将会理解,前面的描述及其附图仅仅是作为示例,并不意图限制本发明。
已经出于示例和描述的目的给出了本公开的前述讨论。这并不意图将本公开限制于本文公开的形式。在前述的具体实施方式中,例如,为了简化本公开的目的,本公开的各种特征在一个或多个实施例、配置或方面中被组合在一起。实施例、配置或方面的特征可以以除上面讨论的那些之外的替代实施例、配置或方面组合。本公开的该方法不应被解释为反映本公开需要比每个权利要求中明确记载的更多特征的意图。相反,如以下权利要求所反映的,创造性方面在于少于单个前述公开的实施例、配置或方面的所有特征。因此,以下权利要求由此被并入本具体实施方式中,其中每个权利要求其自身作为本公开的单独实施例。
Claims (10)
1.一种基于相对位置的库存分析***,包括:
位置采集装置(50),用于采集仓库区不动点和/或存取机构的绝对位置,
图像采集装置(60),用于采集仓库区不动点和/或所述存取机构的图像信息,
其特征在于,
所述位置采集装置(50)能够在所述存取机构运动的一刻,采集到所述存取机构运动的第一绝对位置,
所述图像采集装置(60)能够自所述存取机构运动起,连续追踪所述存取机构并采集所述存取机构的图像信息,当所述图像采集装置(60)采集到所述存取机构发生物品变化的一刻,所述位置采集装置(50)采集到所述存取机构的第二绝对位置,计算***(30)基于所述第一绝对位置和所述第二绝对位置分析所述存取机构的第一相对位置,并基于所述第一相对位置和所述图像信息判断所述物品与所述货架的对应关系;
其中,所述计算***(30)采取所述第一相对位置与所述绝对位置对库存位置变化和所述存取机构进行归类分析,将仓储区域与当前和其互动的所述存取机构彼此关联起来,使得能够随时随地依据所述物品与所述库存位置的变化来动态划分需要进行分析与计算的区域。
2.如权利要求1所述的***,其特征在于,所述图像采集装置(60)至少包括可采集变焦图像的变焦图像采集装置(60a),用于拍摄至少一个所述不动点和/或所述存取机构的变焦图像,
所述计算***(30)首先基于所述变焦图像计算出所述存取机构相对于所述不动点的第二相对位置,然后基于所述第一相对位置和所述第二相对位置修正相对位置信息误差生成修正后的第三相对位置,最后基于所述第三相对位置和所述图像信息判断所述物品与所述货架的对应关系。
3.如权利要求1或2所述的***,其特征在于,所述图像采集装置(60)在收到拍摄指令时起,对所述存取机构拍摄至少一张第一拍摄图像,
所述图像采集装置(60)能够基于所述第一拍摄图像的焦距、亮度、清晰度、所述存取机构与所述图像采集装置(60)的距离,调整焦距、亮度和/或清晰度进而拍摄至少一张第二拍摄图像,
所述计算***(30)基于所述第二拍摄图像、所述第一相对位置、第二相对位置和/或第三相对位置判断所述物品与所述货架的对应关系。
4.权利要求1-3之一所述的***,其特征在于,所述图像采集装置(60)包括至少一个用于采集第一图像的第一图像采集装置(11),并由所述计算***(30)基于所述第一图像来确定至少一个所述存取机构在货架所在区域内的绝对位置以及所述存取机构相对于至少一个载有至少一种物品的货架的相对位置;
所述图像采集装置(60)包括用于探测至少一个存取机构的手部的第二图像的至少一个第二图像采集装置(12),所述第二图像是在所述存取机构的手进入所述货架的至少一个库存位置之前拍摄的;
所述图像采集装置(60)包括用于探测至少一个存取机构的手部的第三图像的至少一个第三图像采集装置(13),所述第三图像是在所述存取机构的手从所述货架的至少一个库存位置移出之后拍摄的;
其中,所述计算***(30)基于所述第二图像与所述第三图像的比较来确定相应存取机构持有物品的状态,响应于存取机构持有物品的状态而识别在所述存取机构的绝对位置周围的、处于预定相对位置的货架的至少一个库存位置的变化,并由此判断所述物品与所述库存位置的变化之间的对应关系。
5.如权利要求1-4之一所述的***,其特征在于,所述***还包括布置于货物暂存单元(40)的用于探测物品进入所述货物暂存单元(40)的动作至少一个第四图像采集装置(14),
其中,所述计算***(30)响应于物品进入所述货物暂存单元(40)的动作,由此确认进入所述货物暂存单元(40)的所述物品与所述库存位置的变化之间的对应关系。
6.如权利要求1-5之一所述的***,其特征在于,所述第四图像采集装置(14)还被配置用于:响应于存取机构的手部进入所述货物暂存单元(40)的动作而拍摄手部的第四图像和第五图像,其中,所述第四图像是在所述存取机构的手进入所述货物暂存单元(40)之前拍摄的,所述第五图像是在所述存取机构的手从所述货物暂存单元(40)移出之后拍摄的,
其中,所述计算***(30)基于第四图像与第五图像的比较来确定相应存取机构移出物品的状态,响应于存取机构持有物品的状态而识别在所述存取机构的绝对位置周围的、处于预定相对位置的货架的至少一个库存位置的变化,并由此判断所述物品的移出与所述库存位置的变化之间的对应关系。
7.如权利要求1-6之一所述的***,其特征在于,所述第二图像采集装置(12)在探测到一个存取机构的手部的第二图像之时,所述计算***(30)基于所述第二图像与所述第三图像的比较而确定的所述存取机构持有物品的情况,
当分析结果为所述存取机构没有持有物品或仅持有一件物品时,所述库存分析***才准予所述存取机构存取位于所述存取机构的绝对位置近旁的、处于预定相对位置的所述特定仓储区的至少一个库存位置中的物品。
8.如权利要求1-7之一所述的***,其特征在于,所述***还包括布置于存取机构进出通道用以采集用于支付和/或注册的识别标识的至少一个第五图像采集装置(15),
所述第五图像采集装置(15)响应于第四图像采集装置(14)提供图像的事件而启动。
9.如权利要求1-8之一所述的***,其特征在于,响应于第四图像采集装置(14)提供图像的事件并根据配备所述第四图像采集装置(14)的货物暂存单元(40)相对于进出通道的位置,第五图像采集装置(15)调整其光学采集方向和焦距。
10.如权利要求1-9之一所述的***,其特征在于,所述第一图像是在所述第二图像采集装置(12)拍摄到所述存取机构的手部的第二图像之后由所述第一图像采集装置(11)拍摄的,其中,所述第二图像是在所述存取机构的手进入货架的至少一个库存位置之前拍摄的。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810105158 | 2018-02-01 | ||
CN2018101051583 | 2018-02-01 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109146380A true CN109146380A (zh) | 2019-01-04 |
CN109146380B CN109146380B (zh) | 2020-10-30 |
Family
ID=64188238
Family Applications (8)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010492368.XA Active CN111626681B (zh) | 2018-02-01 | 2018-08-23 | 一种用于库存管理的图像识别*** |
CN202011056497.0A Withdrawn CN111950967A (zh) | 2018-02-01 | 2018-08-23 | 一种基于热特性图像的库存管理*** |
CN202210274487.7A Pending CN114548882A (zh) | 2018-02-01 | 2018-08-23 | 一种适用于智能库存管理的信息管理***及方法 |
CN201810967162.0A Active CN109146380B (zh) | 2018-02-01 | 2018-08-23 | 一种基于相对位置的库存分析*** |
CN201810967152.7A Active CN108846621B (zh) | 2018-02-01 | 2018-08-23 | 一种基于策略模块的库存管理*** |
CN201810967161.6A Active CN109214751B (zh) | 2018-02-01 | 2018-08-23 | 一种基于库存位置变化的智能库存管理*** |
CN201810967891.6A Active CN109089082B (zh) | 2018-02-01 | 2018-08-23 | 一种基于热特性图像的图像采集*** |
CN202210274981.3A Withdrawn CN114819797A (zh) | 2018-02-01 | 2018-08-23 | 一种用于库存管理***的图像采集装置及信息采集*** |
Family Applications Before (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010492368.XA Active CN111626681B (zh) | 2018-02-01 | 2018-08-23 | 一种用于库存管理的图像识别*** |
CN202011056497.0A Withdrawn CN111950967A (zh) | 2018-02-01 | 2018-08-23 | 一种基于热特性图像的库存管理*** |
CN202210274487.7A Pending CN114548882A (zh) | 2018-02-01 | 2018-08-23 | 一种适用于智能库存管理的信息管理***及方法 |
Family Applications After (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810967152.7A Active CN108846621B (zh) | 2018-02-01 | 2018-08-23 | 一种基于策略模块的库存管理*** |
CN201810967161.6A Active CN109214751B (zh) | 2018-02-01 | 2018-08-23 | 一种基于库存位置变化的智能库存管理*** |
CN201810967891.6A Active CN109089082B (zh) | 2018-02-01 | 2018-08-23 | 一种基于热特性图像的图像采集*** |
CN202210274981.3A Withdrawn CN114819797A (zh) | 2018-02-01 | 2018-08-23 | 一种用于库存管理***的图像采集装置及信息采集*** |
Country Status (1)
Country | Link |
---|---|
CN (8) | CN111626681B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110349359A (zh) * | 2019-07-22 | 2019-10-18 | 北京三快在线科技有限公司 | 添加待售商品的方法和*** |
CN112308491A (zh) * | 2020-11-09 | 2021-02-02 | 湖北普罗劳格科技股份有限公司 | 货物库存监测方法、装置、设备及计算机可读存储介质 |
Families Citing this family (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11354761B2 (en) * | 2018-10-16 | 2022-06-07 | Toyota Motor North America, Inc. | Smart realtor signs synchronized with vehicle |
CN109685012B (zh) * | 2018-12-25 | 2020-12-18 | 秒针信息技术有限公司 | 生物的视频监控方法及装置 |
CN109919111B (zh) * | 2019-03-13 | 2023-07-04 | 创新先进技术有限公司 | 确定摄像头对应的货柜区域的方法、装置、货柜及*** |
TWI710968B (zh) * | 2019-03-29 | 2020-11-21 | 國立勤益科技大學 | 商品影像辨識與數量監控系統 |
CN110245580B (zh) * | 2019-05-24 | 2022-09-23 | 北京百度网讯科技有限公司 | 一种检测图像的方法、装置、设备和计算机存储介质 |
CN112150229B (zh) * | 2019-06-28 | 2024-05-07 | 汉朔科技股份有限公司 | 一种实体商店商品信息展示与定位***和方法 |
CN111242542B (zh) * | 2020-01-09 | 2023-04-25 | 中通云仓科技有限公司 | 一种生鲜库存信息获取装置及生鲜物流数据的控制方法 |
CN113772219B (zh) * | 2020-06-05 | 2023-09-01 | 西安京迅递供应链科技有限公司 | 一种菜品备料***及其使用方法 |
CN111507315A (zh) * | 2020-06-15 | 2020-08-07 | 杭州海康威视数字技术股份有限公司 | 一种物品取放事件检测方法、装置及设备 |
CN111757069B (zh) * | 2020-07-10 | 2022-03-15 | 广州博冠智能科技有限公司 | 一种基于智能门铃的监控防盗方法及装置 |
CN112101867A (zh) * | 2020-09-15 | 2020-12-18 | 四川精益达工程检测有限责任公司 | 一种用于货架上物品的信息生成方法及*** |
CN112699979B (zh) * | 2021-01-04 | 2024-06-14 | 北京国腾联信科技有限公司 | 一种货物移动检测方法、装置及电子设备 |
CN112883958B (zh) * | 2021-01-11 | 2023-12-05 | 壹药网科技(上海)股份有限公司 | 药品货位盘点方法 |
JP2022127123A (ja) * | 2021-02-19 | 2022-08-31 | トヨタ自動車株式会社 | 棚在庫管理システム、棚在庫管理方法、及びプログラム |
CN113450053B (zh) * | 2021-07-02 | 2022-05-24 | 深圳市好伙计科技有限公司 | 基于大数据的食材供应管理方法及*** |
CN113379359B (zh) * | 2021-07-12 | 2024-02-09 | 江苏蓝针智能科技有限公司 | 一种基于图像识别的机加工件库存管理*** |
CN113551478B (zh) * | 2021-07-30 | 2023-04-07 | 珠海格力电器股份有限公司 | 一种食品剩余保质期的更新方法、装置及冰箱 |
CN113945063A (zh) * | 2021-10-15 | 2022-01-18 | 福建瑞雪制冷设备有限公司 | 一种基于物联网的冷库控制方法、***及其存储介质 |
TWI813317B (zh) * | 2022-05-31 | 2023-08-21 | 大佳雲端科技股份有限公司 | 半自動智慧倉儲管理系統 |
CN116187899B (zh) * | 2022-12-08 | 2023-09-26 | 深圳数利通数字科技有限公司 | 一种箱码输送对接wms*** |
CN115796748B (zh) * | 2023-02-08 | 2023-05-02 | 山东鼎信数字科技有限公司 | 一种不锁库的门店盘点方法、***、装置以及存储介质 |
CN116374552B (zh) * | 2023-04-23 | 2023-11-21 | 国网山东省电力公司宁津县供电公司 | 一种基于重力感应的物料盘点装置及其使用方法 |
CN116911746B (zh) * | 2023-09-14 | 2023-11-21 | 南京红禄果科技有限公司 | 仓库管理方法及管理*** |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102369560A (zh) * | 2008-08-08 | 2012-03-07 | 实耐宝公司 | 基于图像的库存控制***和方法 |
CN105531715A (zh) * | 2013-06-26 | 2016-04-27 | 亚马逊科技公司 | 检测物品交互和移动 |
CN106022589A (zh) * | 2016-05-13 | 2016-10-12 | 中国建设银行股份有限公司 | 生成操作列表的方法和***、金库计算机***和移动终端 |
CN106672042A (zh) * | 2016-11-16 | 2017-05-17 | 南京亿猫信息技术有限公司 | 智能购物车以及该购物车购物和退货过程的判断方法 |
CN106934692A (zh) * | 2017-03-03 | 2017-07-07 | 陈维龙 | 物品信息处理***、方法及装置 |
CN107077659A (zh) * | 2016-09-26 | 2017-08-18 | 达闼科技(北京)有限公司 | 一种智能库存管理***、服务器、方法、终端和程序产品 |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060289637A1 (en) * | 2005-06-28 | 2006-12-28 | Media Cart Holdings, Inc. | Media enabled shopping cart system with basket inventory |
KR100830833B1 (ko) * | 2006-08-14 | 2008-05-20 | 인태환 | 온도, 습도 및 영상 취득 시스템 |
KR100932769B1 (ko) * | 2008-12-12 | 2009-12-21 | (주)대성에스이 | 범용부스바 통신장치 및 방법 |
US8350675B2 (en) * | 2010-04-30 | 2013-01-08 | Symbol Technologies, Inc. | Triggering a radio frequency identification scan using image recognition |
KR101172747B1 (ko) * | 2010-08-16 | 2012-08-14 | 한국표준과학연구원 | 열화상 좌표를 이용한 보안용 카메라 추적 감시 시스템 및 방법 |
EP3970922A1 (en) * | 2012-06-12 | 2022-03-23 | Snap-On Incorporated | An inventory control system having advanced functionalities |
US9824387B2 (en) * | 2013-03-15 | 2017-11-21 | Proximity Concepts, LLC | Systems and methods involving proximity, mapping, indexing, mobile, advertising and/or other features |
US10984372B2 (en) * | 2013-05-24 | 2021-04-20 | Amazon Technologies, Inc. | Inventory transitions |
JP6264380B2 (ja) * | 2013-09-06 | 2018-01-24 | 日本電気株式会社 | 販売促進システム、販売促進方法、販売促進プログラム及び棚システム |
CN104079894A (zh) * | 2014-07-24 | 2014-10-01 | 成都市晶林科技有限公司 | 一种危险品仓库管理***及方法 |
CN106096882A (zh) * | 2016-06-10 | 2016-11-09 | 中山市科全软件技术有限公司 | 一种全自动无人超市装置 |
CN106709422A (zh) * | 2016-11-16 | 2017-05-24 | 南京亿猫信息技术有限公司 | 超市购物车手部识别方法及其识别*** |
CN206505517U (zh) * | 2016-12-30 | 2017-09-19 | 珠海兆泓科技有限公司 | 用于仓库监控的摄像机和仓库管控*** |
CN107256468A (zh) * | 2017-04-21 | 2017-10-17 | 仓智(上海)智能科技有限公司 | 基于智能机器人的仓库管理***及管理方法 |
CN107798115A (zh) * | 2017-11-03 | 2018-03-13 | 深圳天珑无线科技有限公司 | 移动终端的图像识别搜索方法、***及移动终端 |
-
2018
- 2018-08-23 CN CN202010492368.XA patent/CN111626681B/zh active Active
- 2018-08-23 CN CN202011056497.0A patent/CN111950967A/zh not_active Withdrawn
- 2018-08-23 CN CN202210274487.7A patent/CN114548882A/zh active Pending
- 2018-08-23 CN CN201810967162.0A patent/CN109146380B/zh active Active
- 2018-08-23 CN CN201810967152.7A patent/CN108846621B/zh active Active
- 2018-08-23 CN CN201810967161.6A patent/CN109214751B/zh active Active
- 2018-08-23 CN CN201810967891.6A patent/CN109089082B/zh active Active
- 2018-08-23 CN CN202210274981.3A patent/CN114819797A/zh not_active Withdrawn
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102369560A (zh) * | 2008-08-08 | 2012-03-07 | 实耐宝公司 | 基于图像的库存控制***和方法 |
CN105531715A (zh) * | 2013-06-26 | 2016-04-27 | 亚马逊科技公司 | 检测物品交互和移动 |
CN106022589A (zh) * | 2016-05-13 | 2016-10-12 | 中国建设银行股份有限公司 | 生成操作列表的方法和***、金库计算机***和移动终端 |
CN107077659A (zh) * | 2016-09-26 | 2017-08-18 | 达闼科技(北京)有限公司 | 一种智能库存管理***、服务器、方法、终端和程序产品 |
CN106672042A (zh) * | 2016-11-16 | 2017-05-17 | 南京亿猫信息技术有限公司 | 智能购物车以及该购物车购物和退货过程的判断方法 |
CN106934692A (zh) * | 2017-03-03 | 2017-07-07 | 陈维龙 | 物品信息处理***、方法及装置 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110349359A (zh) * | 2019-07-22 | 2019-10-18 | 北京三快在线科技有限公司 | 添加待售商品的方法和*** |
CN110349359B (zh) * | 2019-07-22 | 2021-11-16 | 北京三快在线科技有限公司 | 添加待售商品的方法和*** |
CN112308491A (zh) * | 2020-11-09 | 2021-02-02 | 湖北普罗劳格科技股份有限公司 | 货物库存监测方法、装置、设备及计算机可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN109214751A (zh) | 2019-01-15 |
CN114548882A (zh) | 2022-05-27 |
CN108846621B (zh) | 2020-06-30 |
CN111626681B (zh) | 2023-09-12 |
CN111950967A (zh) | 2020-11-17 |
CN108846621A (zh) | 2018-11-20 |
CN109089082B (zh) | 2020-09-29 |
CN111626681A (zh) | 2020-09-04 |
CN109146380B (zh) | 2020-10-30 |
CN109089082A (zh) | 2018-12-25 |
CN109214751B (zh) | 2022-04-01 |
CN114819797A (zh) | 2022-07-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109146380A (zh) | 一种基于相对位置的库存分析*** | |
JP6764547B1 (ja) | カメラを用いた追跡及び許可延長システム | |
CN108460933B (zh) | 一种基于图像处理的管理***及方法 | |
US12008874B2 (en) | Apparatus for securing camera to a retail shelving unit | |
US11749072B2 (en) | Varied detail levels of shopping data for frictionless shoppers | |
JP2020115344A6 (ja) | 自律店舗追跡システム | |
RU2671767C2 (ru) | Управляемый компьютером киоск с автоматической оплатой, не требующий присутствия продавца | |
US11394927B2 (en) | Store device network that transmits power and data through mounting fixtures | |
US20220230216A1 (en) | Smart shelf that combines weight sensors and cameras to identify events | |
KR20210055038A (ko) | 자율 매장 추적 시스템 | |
WO2012132324A1 (ja) | 店舗システム並びにその制御方法及び制御プログラムが格納された非一時的なコンピュータ可読媒体 | |
CN207965926U (zh) | 无人自助便利店 | |
CN110111034A (zh) | 一种厨房库存管理***和方法 | |
CN109903189A (zh) | 一种可识别带芯片餐盘的餐台*** | |
Falcão | Human Object Ownership Tracking in Autonomous Retail | |
CN116935530A (zh) | 一种具有连续称重***的称重售货机 | |
Lisboa De Menezes Falcão | Human Object Ownership Tracking in Autonomous Retail |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20200410 Address after: 417099 Di Xing Road, Loudi, Hunan Applicant after: HUNAN UNIVERSITY OF HUMANITIES, SCIENCE AND TECHNOLOGY Address before: 417000 10 Xueyuan Road 704 Nan Feng Yuan 704, Lou Xing District, Loudi, Hunan Applicant before: He Guihe |
|
TA01 | Transfer of patent application right | ||
GR01 | Patent grant | ||
GR01 | Patent grant |