CN110111034A - 一种厨房库存管理***和方法 - Google Patents

Abstract

本发明涉及一种厨房库存管理***和方法，该***包括：第一图像采集装置，其用于采集第一图像，并由该***基于第一图像来确定操作者在库房内的位置以及操作者在对应位置能够触及到的所有库存位置内存放的食品的注册图像组成的第一注册图像集；第二图像采集装置，其用于探测操作者的手的第二图像；和/或第三图像采集装置，其用于探测操作者的手的第三图像；在操作者领取食品之时，计算设备基于第二图像、第三图像和第一注册图像集的比较来确定操作者持有食品的种类，根据操作者持有食品的种类判断其与操作者关联的取食信息的第一匹配情况，在第一匹配情况为通过之时，根据操作者持有食品的状态将对应的库存位置的库存状态进行更新。

Description

一种厨房库存管理***和方法

技术领域

本发明涉及管理***和方法，尤其涉及一种厨房库存管理***和方法。

背景技术

随着食品种类的丰富以及各种餐厅的规模扩大，对应的厨房库房也越来越大，储存的食物的种类繁多，如何智能、准确、高效地对厨房库存进行管理就成为一个热点问题。关于厨房库存管理，众所周知的一个问题是盗窃情况严重，因此在厨房和库房内布置大量监控设备已经是所有大型餐厅的必备做法。随着目前监控设备精度提升，也就具备了对物品周转进行实时监控的条件。可是，在做出本发明之前，发明人检索了市面上的几乎所有监控***，都没有看到能够将监控***用于管理库存的技术方案。

CN107077659A提供了一种智能库存管理***、服务器、方法、终端和程序产品，用于降低库存管理的复杂程度；其包括：智能机器终端拍摄物品，并将拍摄到的图像发送到智能库存管理服务器；所述智能库存管理服务器根据所述智能机器终端拍摄到的图像识别确定所述图像中的物品及存量；并将所述物体识别模块识别出的物品及存量信息入库。其虽然利用物体识别技术，减少了人工录入的工作量，提高了物品信息入库的准确性，降低了库存管理的复杂程度；但是不能实时地准确评估库存变化。除非有人工介入统计与盘点，否则库存数量仍然是混乱不堪的。

CN104361039A提供了一种基于Qt开发的嵌入式智能冰箱的辅助方法，其包括以下步骤：步骤1、显示过期提醒预览和留言信息；步骤2、食材库存管理，以数据和用户操作为基础，查看当前库存中的所有食材详细信息，并且对食材信息进行编辑和删除的统一管理；并对所有食材进行分类管理，根据生产日期、剩余保质期和过期日期进行排序，以查看各个食材信息；步骤3、过期提醒，通过对库存上的食材信息的剩余保质期进行统计，对剩余保质期少于5天的食材给予直观的信息预览，具体显示食材过期日期和剩余保质期，并实时显示和更新；步骤4、食谱的查询和食谱的推荐，提供海量食谱数据，以及提供各式美味佳肴的制作方法，并根据现有食材或自定义食材进行搜索，获取特定的食谱；根据库存食材或者当前时令季节和健康营养信息，推荐不同口味和功效的食谱；步骤5、购物清单，将现有食材或者将自定义食材信息添加至购物清单，对该购物清单中的食材进行的统计和管理，并且在数据挖掘的基础上提供缺货提醒列表，提供购物的选择；步骤6、食材识别和存取，对食材进行识别并存储。该技术方案不能实时统计库存消耗，在频繁取用食品的厨房及厨房库房内不能起到有效管理库存的效果。

此外，为了准确管理厨房库存，大型酒店和餐厅一般有专人来管理库存(即库存管理员)，仅当餐厅提供订单(相当于本发明下文所述的取食信息)之时，库存管理员才会根据订单(取食信息)向相关人员提供相关食品。此后，由库存管理员以手动方式检查订单与食品之间的对应关系。这种方式不仅效率低下，而且由于食品种类极其庞杂，经常出现大量丢失情况。

发明内容

针对现有技术之不足，本发明提供了一种基于图像处理的厨房库存管理***和方法，本发明采取普适的图像识别手段，通过在初始判断食品的种类之时，先与操作者能够触及的部分食品的注册图像对比识别食品的种类，然后根据食品的种类和取食信息中记载的食品种类比对，不仅能够大幅减少比较的数量，降低计算开销、提升***流畅性和降低***的硬件成本，还能够提高配食过程和库存状态更新的准确性。

根据一个优选实施方式，本发明公开了一种基于图像处理的厨房库存管理***，所述***包括：第一图像采集装置，其用于采集第一图像，并由该***基于所述第一图像来确定至少一个操作者在库房内的位置以及对应操作者在对应位置能够触及到的所有库存位置内存放的食品的注册图像组成的第一注册图像集；第二图像采集装置，其用于探测至少一个操作者的手的第二图像，所述第二图像是在对应操作者的手进入货架的至少一个库存位置之前拍摄的；和/或第三图像采集装置，其用于探测至少一个操作者的手的第三图像，所述第三图像是在对应操作者的手从该货架的至少一个库存位置移出之后拍摄的；其中，在对应操作者取食之时，计算设备基于所述第二图像、所述第三图像和所述第一注册图像集的比较来确定对应操作者持有食品的种类，根据对应操作者持有食品的种类判断其与对应操作者关联的取食信息的第一匹配情况，在第一匹配情况为通过之时，根据对应操作者持有食品的状态将对应的库存位置的库存状态进行更新。本发明在初始判断食品的种类之时，并未直接使用厨房库房中所有食品的注册图像组成的第三注册图像集来比较，因为第三注册图像集的数量大，特别是在大型餐厅的情况下，厨房中库存的食品的种类繁多，而且还可能存在大量的相似包装，导致计算开销增大且判断的准确率降低。而且，本发明也未直接使用的取食信息中所有食品的注册图像组成的第二注册图像集来比较，因为第二注册图像集中存在待识别食品的相似包装的情况下，会增大判断错误的几率。因此，本发明在初始判断食品的种类之时，使用对应操作者在对应位置能够触及到的所有库存位置内存放的食品的注册图像组成的第一注册图像集进行比较，即本发明先与操作者能够触及的部分食品的注册图像对比识别食品的种类，然后根据食品的种类和取食信息中记载的食品种类比对，不仅能够大幅减少比较的数量，降低计算开销、提升***流畅性和降低***的硬件成本，还能够提高配食过程和库存状态更新的准确性。

根据一个优选实施方式，所述根据对应操作者持有食品的种类判断其与对应操作者关联的取食信息的第一匹配情况的处理还包括：在第一匹配情况为失败之时，将匹配失败的信息反馈给对应操作者。通过该方式，本发明可以让操作者快速知道拿到了不属于取食信息中的食品，以提升配食过程的准确性，降低在该环节和/或其他环节清点食品所需的劳动成本。

根据一个优选实施方式，所述***还包括：第四图像采集装置，其布置于食品容纳器，所述第四图像采集装置被配置用于：响应于对应操作者的手进入该食品容纳器的动作而拍摄对应操作者的手的第四图像和第五图像，其中，所述第四图像是在对应操作者的手进入该食品容纳器之前拍摄的，所述第五图像是在对应操作者的手从该食品容纳器移出之后拍摄的，其中，基于所述第四图像、所述第五图像和取食信息中所有食品的注册图像组成的第二注册图像集的比较来核对对应操作者放入的食品的种类，根据对应操作者放入的食品的种类判断其与取食信息的第二匹配情况，在第二匹配情况为失败之时，将匹配失败的信息反馈给对应操作者。此处，相当于在操作者将食品放入到食品容纳器之后，通过食品容纳器上的第四图像采集装置采集的图像再次对食品的种类进行核对，但是，此处核对时，使用的是取食信息中所有食品的注册图像组成的第二注册图像集。通过该方式，本发明通过一个不同与第一注册图像集的第二注册图像集对食品的种类进行二次核验，进一步提升配食过程的准确性和库存状态更新的准确性。

根据一个优选实施方式，所述第四图像采集装置还被配置于：在对应操作者将食品放入食品容纳器中之后，识别食品的身份标识，其中，基于所述食品的身份标识和所述取食信息中所有食品的身份标识组成的身份标识集的比较来核对对应操作者放入的食品的种类与取食信息的第三匹配情况，在第三匹配情况为失败之时，将匹配失败的信息反馈给对应操作者。由于一些食品包装存在相似度高的情况，但是食品的身份标识是唯一的，且在食品被放入食品容纳器后由于食品相对于食品容纳器基本处于静止状态，相比其他阶段更容易准确识别食品的身份标识。由此，通过该方式，本发明使用一种不通过第一注册图像集和第二注册图像集的方式对食品的种类进行再次核验，更进一步提升配食过程的准确性和库存状态更新的准确性。

根据一个优选实施方式，所述身份标识是食品批准文号、二维码、条形码和电子标签中的至少一个。通过该方式，可以快速、准确地对食品的种类进行核实。

根据一个优选实施方式，将匹配失败的信息反馈给对应操作者之时，由***根据对应操作者的实时位置为其计算一条能在最短路程和/或最短时间内将匹配失败的食品归还至相应库存位置和拿取取食信息中其余待取食品并送至指定的出食窗口的最优路径。由于收到匹配失败的信息后，对应操作者将需要把拿错的食品归还到对应的库存位置，中间需要花费额外的时间，通过该方式，可以辅助地帮助操作者保证配食过程的效率，进而使采用了本***的厨房库房高效、稳定地运作。

根据一个优选实施方式，在对应操作者归还食品之时，计算设备基于所述第二图像、所述第三图像和所述第一注册图像集的比较来确定对应操作者持有食品的种类，根据对应操作者持有食品的种类判断其与库存位置的食品的第四匹配情况，在第四匹配情况为通过之时，根据操作者持有食品的状态将对应的库存位置的库存状态进行更新。通过该方式，不仅能够大幅减少比较的数量，降低计算开销、提升***流畅性和降低***的硬件成本，还能够提高归还食品过程和库存状态更新的准确性。

根据一个优选实施方式，所述第一图像是在所述第二图像采集装置拍摄到对应操作者的手的第二图像之后才由所述第一图像采集装置拍摄的，其中，所述第二图像是在对应操作者的手进入货架的至少一个库存位置之前拍摄的。通过该方式，使得不用经常拍摄第一图像而占用***的存储开销。

根据一个优选实施方式，本发明还公开了一种基于图像处理的厨房库存管理方法，所述方法包括：使用至少一个第一图像采集装置，其用于采集第一图像，并由该***基于所述第一图像来确定至少一个操作者在库房内的位置以及对应操作者在对应位置能够触及到的所有库存位置内存放的食品的注册图像组成的第一注册图像集；使用至少一个第二图像采集装置，其用于探测至少一个操作者的手的第二图像，所述第二图像是在对应操作者的手进入货架的至少一个库存位置之前拍摄的；和/或使用至少一个第三图像采集装置，其用于探测至少一个操作者的手的第三图像，所述第三图像是在对应操作者的手从该货架的至少一个库存位置移出之后拍摄的；其中，在对应操作者领取食品之时，计算设备基于所述第二图像、所述第三图像和所述第一注册图像集的比较来确定对应操作者持有食品的种类，根据对应操作者持有食品的种类判断其与对应操作者关联的取食信息的第一匹配情况，在第一匹配情况为通过之时，根据对应操作者持有食品的状态将对应的库存位置的库存状态进行更新。

根据一个优选实施方式，所述根据对应操作者持有食品的种类判断其与对应操作者关联的取食信息的第一匹配情况的处理还包括：在第一匹配情况为失败之时，将匹配失败的信息反馈给对应操作者。

本发明提供一种基于图像处理的厨房库存管理***和方法至少具有如下优势：

(1)本发明先与操作者能够触及的部分食品的注册图像对比识别食品的种类，然后根据食品的种类和取食信息中记载的食品种类比对，不仅能够大幅减少比较的数量，降低计算开销、提升***流畅性和降低***的硬件成本，还能够提高配食过程和库存状态更新的准确性；

(2)本发明可以让操作者快速知道拿到了不属于取食信息中的食品，以提升配食过程的准确性，降低在该环节和/或其他环节清点食品所需的劳动成本；

(3)本发明通过一个不同与第一注册图像集的第二注册图像集对食品的种类进行二次核验，进一步提升配食过程的准确性和库存状态更新的准确性；

(4)本发明使用一种不通过第一注册图像集和第二注册图像集的方式对食品的种类进行再次核验，更进一步提升配食过程的准确性和库存状态更新的准确性；

(5)本发明主要采用图像处理而不用其他方式能够充分利用现有投资，在不增设其他额外的设备的情况下，仅仅通过对图像监控中心进行设备升级的方式来实现。

附图说明

图1是本发明的***的一个优选实施方式的模块示意图。

附图标记列表

11：第一图像采集装置 12：第二第图像采集装置

13：第三图像采集装置 14：第四图像采集装置

15：第五图像采集装置 21：指示标记

30：计算设备 40：食品容纳器

具体实施方式

下面结合附图进行详细说明。

实施例1

本实施例公开了一种基于图像处理的厨房库存管理***，在不造成冲突或者矛盾的情况下，其他实施例的优选实施方式可以作为本实施例的补充。根据一个优选实施方式，参见图1，该***可以包括：第一图像采集装置11，其可以用于采集第一图像，并由该***基于第一图像来确定至少一个操作者在库房内的位置以及对应操作者在对应位置能够触及到的所有库存位置内存放的食品的注册图像组成的第一注册图像集。优选地，操作者可以是人和/或机器。优选地，手可以是人的手和/或机器的机械手。优选地，库房内的地面上可以设有相应的用于识别的基准点和/或基准线辅助该***确定对应操作者的位置。优选地，一种食品的注册图像是预先保存在***中的该食品的图像。本发明可以通过图像采集装置预先从多个角度拍摄一种食品的包装图像，用于构成该食品的注册图像。

优选地，该***还可以包括：第二图像采集装置12，其用于探测至少一个操作者的手的第二图像，第二图像是在对应操作者的手进入货架的至少一个库存位置之前拍摄的。优选地，对于一个货架，其可以具有至少一个库存位置。一个货架可以分为多层。每层可以是一个库存位置。或者，一层在水平方向上可以分为多个区域，每个区域可以是一个库存位置。应当注意地是，这些区域之间的分隔线可以是肉眼可见的分隔装置和/或肉眼不可见的虚拟分隔线。分隔装置例如是间壁和/或喷涂的基准线。肉眼不可见地虚拟分割线可以是在货架的位置和与该货架对应的第二图像采集装置12的固定好后，摆放对应食品，然后由***采集该货架的图像信息对货架进行分割，以得到对应食品的至少一个库存位置。

优选地，该***还可以包括：第三图像采集装置13，其可以用于探测至少一个操作者的手的第三图像，第三图像是在对应操作者的手从该货架的至少一个库存位置移出之后拍摄的。

根据一个优选实施方式，在对应操作者领取食品之时，计算设备30可以基于第二图像、第三图像和第一注册图像集的比较来确定对应操作者持有食品的种类，根据对应操作者持有食品的种类判断其与对应操作者关联的取食信息的第一匹配情况，在第一匹配情况为通过之时，根据对应操作者持有食品的状态将对应的库存位置的库存状态进行更新。优选地，持有食品的状态包括食品的种类和数量。优选地，在对应操作者领取食品之时，计算设备30可以基于第二图像、第三图像和第一注册图像集的比较来确定对应操作者持有食品的状态，但是在比较第一匹配情况之时，仅比较食品的种类，因为食品的数量可能需要多次拿取才能和取食信息中记载的食品数量匹配。优选地，计算设备30基于第二图像、第三图像和第一注册图像集的比较不能确定对应操作者持有食品的种类的情况下，计算设备30还可以基于第二图像、第三图像和取食信息中所有食品的注册图像组成的第二注册图像集的比较来确定对应操作者持有食品的种类。优选地，在计算设备30基于第二图像、第三图像和第二注册图像集的比较不能确定对应操作者持有食品的种类的情况下，计算设备30还可以基于第二图像、第三图像和厨房库房中所有食品的注册图像组成的第三注册图像集的比较来确定对应操作者持有食品的种类。优选地，在计算设备30基于第二图像、第三图像和第一注册图像集的比较不能确定对应操作者持有食品的种类的情况下，计算设备30还可以基于第二图像、第三图像和厨房库房中所有食品的注册图像组成的第三注册图像集的比较来确定对应操作者持有食品的种类。

根据一个优选实施方式，在对应操作者归还食品之时，计算设备30基于第二图像、第三图像和第一注册图像集的比较来确定对应操作者持有食品的种类，根据对应操作者持有食品的种类判断其与库存位置的食品的第四匹配情况，在第四匹配情况为通过之时，根据操作者持有食品的状态将对应的库存位置的库存状态进行更新。

优选地，操作者是领取食品还是归还食品可以根据图像对比得出。例如，通过图像采集装置可以采集在相应人员的手经过平面进入库存位置中之前所述手的一连串图像并且还采集在该手离开库存位置后该手的一连串图像。基于所述图像的比较，可以确定对应操作者是否从库存位置领取食品或将食品还到对应库存位置中。例如，可以基于对第二图像和第三图像的分析，判断对应操作者在手进入库存位置时没有拿着食品，但是在手从库存位置移出时拿着食品则对应操作者是在领取食品。同样地，可以基于对第二图像和第三图像的分析，判断对应操作者在手进入库存位置时拿着食品，但是在手从库存位置移出时没有拿着食品，则对应操作者是在归还食品。应当注意的是，本发明内提到的采集的各图像不仅仅只是包括单张图像的情况，还可能是拍摄了一连串的多张图像集。进而可以从中择优选取和/或随机选取至少一张进行比较。比如，拍摄一连串的第二图像和一连串的第三图像。

根据一个优选实施方式，根据对应操作者持有食品的种类判断其与对应操作者关联的领取食品信息的第一匹配情况的处理还可以包括：在第一匹配情况为失败之时，将匹配失败的信息反馈给对应操作者。通过该方式，可以让操作者知晓其拿错了食品，以便及时进行纠正。优选地，本发明中，将匹配失败的信息反馈给对应操作者可以通过图形和/或声音的方式进行。比如，通过在货架和/或食物容纳器40的红色频闪灯将匹配失败的信息反馈给对应操作者。又比如，在操作者为机器时，还可以通过电信号将匹配失败的信息反馈给对应操作者。

根据一个优选实施方式，***还可以包括：第四图像采集装置14，其可以布置于食品容纳器40和/或厨房库房顶部。优选地，第四图像采集装置14可以被配置用于：响应于对应操作者的手进入该食品容纳器40的动作而拍摄对应操作者的手的第四图像和第五图像。优选地，第四图像是在对应操作者的手进入该食品容纳器40之前拍摄的，第五图像是在对应操作者的手从该食品容纳器40移出之后拍摄的。优选地，计算设备30可以基于第四图像、第五图像和取食信息中所有食品的注册图像组成的第二注册图像集的比较来核对对应操作者放入的食品的种类，根据对应操作者放入的食品的种类判断其与取食信息的第二匹配情况，在第二匹配情况为失败之时，将匹配失败的信息反馈给对应操作者。

根据一个优选实施方式，第四图像采集装置还可以被配置于：在对应操作者将食品放入食品容纳器40中之后，识别食品的身份标识。优选地，计算设备30基于食品的身份标识和取食信息中所有食品的身份标识组成的身份标识集的比较来核对对应操作者放入的食品的种类与取食信息的第三匹配情况，在第三匹配情况为失败之时，将匹配失败的信息反馈给对应操作者。

根据一个优选实施方式，第四图像采集装置还可以被配置于：在对应操作者将取食信息中的一种食品放入食物容纳器40之后，分析操作者的运动，在操作者离开对应位置之时，识别食品容纳器40中该种食品的数量与取食信息的第四匹配情况，在第四匹配情况为失败之时，将匹配失败的信息反馈给对应操作者。由于一些食品的数量可能是多盒，操作者一次不能全部拿取，由此，操作者可能是分批次地进行拿取，进而操作者可能发生漏取或者多取的情况。为了减少这种情况的发生，如果是人进行操作，则会多次清点，这样会浪费大量时间，而通过该方式，可以减少清点时间，提高配食过程的准确性和效率。而如果是机器进行操作，通过该环节进行核验后，也能够减少出现数量出错的情况，提高配食过程的准确性。

根据一个优选实施方式，所述第四图像采集装置14还可以被配置用于：响应于对应食品容纳器抵达指定出食窗口而启动，采集对应食品容纳器40内的物品占用食品容纳器40的空间大小，由该计算设备30根据空间大小将本次配食所需的袋的最小型号指示位于出食窗口区域的供袋设备和/或显示设备。通过该方式，可以辅助地为该用户选择适宜大小的袋，避免在结算区域因为判断所需的袋的大小而浪费过多的时间，提高结算效率。而且，还可以避免拿的袋偏大导致资源的浪费。优选地，供袋设备为用户提供袋的操作响应于用户的需求而进行。通过该方式，可以在一些用户自备容纳袋之时减少资源的浪费。该实施方式尤为适合以糕点店为代表的自取式联锁销售店面。

根据一个优选实施方式，身份标识可以是食品批准文号、二维码、条形码和电子标签中的至少一个。优选地，食品批准文号是食品监督管理部门对特定生产企业按法定标准、生产工艺和生产条件对某一食品的法律认可凭证。每一个生产企业的每一个品种都有一个特定的批准文号。

根据一个优选实施方式，本发明还公开了第五图像采集装置15，其布置于出食窗口，用以采集用于支付和/或注册的识别标识，在用户完成支付之后，才将该出食窗口的隔离装置打开，使用户能够取走食品。优选地，所述识别标识可以是二维码、指纹、人体轮廓、人脸轮廓、虹膜图像和典型的热特性图像中的至少一种。优选地，用户可以先使用识别标识完成支付，然后，在出食之前，第五图像采集装置15再次采集该识别标识，在由***判断识别标识与出食窗口的待取食品匹配的情况下，才将该出食窗口的隔离措施解除。这样可以防止食品被他人误取。隔离措施例如是活动隔板。优选地，注册是用户第一次在***中进行登记的过程。比如，在一个用户领取食品时，先根据对应取食信息为之分配一个食品容纳器40，然后***将该食品容纳器40与该用户和/或该取食信息关联，并由操作者携带该食品容纳器40进行配食。在费用结算之时，在该用户是未注册用户的情况下，则可以在结算时提醒用户注册或者直接出示付款的二维码。在用户注册之时，可以要求用户选定一种识别标志作为以后费用结算之时的凭证，并根据用户选定的识别标识要求用户录入对应的信息。假设用户选择通过虹膜图像进行支付，则该人员在费用结算之时，将相应的眼部朝向第五图像采集装置15的采集区域，在通过***的验证之后，使用绑定的支付账号完成费用结算。在餐厅较大的时候，常常费用结算区域有较多地人员排队结账，浪费了过多的时间，通过该方式，可以提高餐厅的服务效率。

根据一个优选实施方式，当用户在***中进行注册之时，要求用户预留一个联系方式，由计算设备30根据取食信息对应地生成菜单清单和/或注意事项，并通过该联系方式将该菜单清单和/或注意事项发送给用户。通过该方式，可以让用户方便查询菜单清单，特别是在将食品包装丢弃地情况下，以便一些记忆力不好地用户能够准确地了解菜单数量和注意事项。

根据一个优选实施方式，该计算设备30还根据菜单清单和/或注意事项建立一个定时表以定期通过该联系方式发送菜单提醒，便于用户分时、准时地享用多种不同食品。

根据一个优选实施方式，将匹配失败的信息反馈给对应操作者之时，由***根据对应操作者的实时位置为其计算一条能在最短路程和/或最短时间内将匹配失败的食品归还至对应库存位置和拿取取食信息中其余待取食品并送至指定的出食窗口的最优路径。

根据一个优选实施方式，第一图像是在第二图像采集装置12拍摄到对应操作者的手的第二图像之后才由第一图像采集装置11拍摄的，其中，第二图像是在对应操作者的手进入货架的至少一个库存位置之前拍摄的。由此，使得库房可以同时应对多个操作者在库房内配食的场景，仅当操作者再次进行领取食品或归还食品时，***才会启动一系列负责的图像分析操作。换而言之，***对于操作者的追踪始于其尝试触及货架上的食品之时。

优选地，在操作者是人的情况下，从基于第一图像确定该操作者的位置的最初时间点开始，该食品容纳器40响应于操作者持有食品的状态而设定介绍定时周期(例如5秒)，在经过该特定的定时周期之后，若第四图像采集装置14未能采集到食品进入该食品容纳器40的动作，则通过该食品容纳器40向持有食品的操作者发出有关食品属性的提示，其中，所述提示可以呈语音、图像或视频的形式。例如该食品容纳器40可以提示该操作者从货架上取下但未装入该食品容纳器40的食品的名称和/或生产厂家。通过该方式，可以在操作者未能及时读取到食品信息之时快速地提供提示，提高配食过程的效率。优选地，该食品容纳器40响应于介绍定时周期之设定，还设定提醒定时周期(例如30秒)，在经过了提醒定时周期之后，若第四图像采集装置14未能采集到食品进入该食品容纳器40的动作，则通过该食品容纳器40向持有食品的操作者发出提示将当前食品正确装入该食品容纳器内的提示，其中，该提示可采取指向容纳口的箭头这样的图形方式。优选地，在在经过了该提醒定时周期之后，在第四图像采集装置14未能采集到食品进入该食品容纳器40的动作的情况下，则该***还通过指示标记21指示将当前食品放回到货架上的正确位置。其中，该指示标记21可以采取指向当前食品的同类食品所在区域的箭头这样的图形方式。更具体地，比如，指示标记21为绿色荧光箭头且能按照预设频率闪烁。

根据一个优选实施方式，本发明中提到的各图像采集装置可以使用任何类型的相机及其他可替代的成像设备。例如，所述相机中的一者或多者可以是RGB相机。相机中的一者或多者可以是深度感测相机。

优选地，为了采集到所需的图像，各图像采集装置可以是一个或者多个，在某图像采集装置是多个之时，其可以分散地设于多个位置中。比如，一些图像采集装置可以位于头顶上，例如在天花板上以采集操作者和/或库房内相应位置的图像。又比如，一些图像采集装置可以位于库存位置上或内部。例如，可以位于库存位置的外部部分上并且被定位成采集操作者和/或库存位置周围的位置的图像。

根据一个优选实施方式，本发明的计算设备30可以是在本地、远程或其任何组合。同样地，计算设备30可以被配置以通过网络与输入组件、输出组件和/或直接地与第一、第二、第三、第四、第五图像采集装置和食品容纳器40中的至少一个通信。本领域的人员可以想到的是，通信可以是通过有线的和/或无线的方式。优选地，计算设备30例如是一个或者多个服务器。服务器中可以包括处理器和存储器。该***可以包括或提供图像处理(例如，用于操作者识别、用户识别和/或食品识别)、库存追踪和/或位置确定。

实施例2

本实施例可以是对实施例1的进一步改进和/或补充，重复的内容不再赘述。在不造成冲突或者矛盾的情况下，其他实施例的优选实施方式的整体和/或部分内容可以作为本实施例的补充。

本实施例还公开了一种基于图像处理的厨房库存管理方法，该方法可以由本发明的***和/或其他可替代的零部件实现。比如，通过使用本发明的***中的各个零部件实现本发明的方法。

根据一个优选实施方式，该方法可以包括：使用至少一个第一图像采集装置11，其可以用于采集第一图像，并可以由该***基于第一图像来确定至少一个操作者在库房内的位置以及对应操作者在对应位置能够触及到的所有库存位置内存放的食品的注册图像组成的第一注册图像集。

该方法还可以包括：使用至少一个第二图像采集装置12，其可以用于探测至少一个操作者的手的第二图像，第二图像是在对应操作者的手进入货架的至少一个库存位置之前拍摄的。

该方法还可以包括：使用至少一个第三图像采集装置13，其可以用于探测至少一个操作者的手的第三图像，第三图像是在对应操作者的手从该货架的至少一个库存位置移出之后拍摄的。

该方法还可以包括：在对应操作者领取食品之时，计算设备30可以基于第二图像、第三图像和第一注册图像集的比较来确定对应操作者持有食品的种类，根据对应操作者持有食品的种类判断其与对应操作者关联的取食信息的第一匹配情况，在第一匹配情况为通过之时，根据对应操作者持有食品的状态将对应的库存位置的库存状态进行更新。

实施例3

本实施例可以是对实施例1、2或者其结合的进一步改进和/或补充，重复的内容不再赘述。在不造成冲突或者矛盾的情况下，其他实施例的优选实施方式的整体和/或部分内容可以作为本实施例的补充。

本实施例还公开了一种智能厨房***，该***的技术特征和一种基于图像处理的厨房库存管理***全部或者部分相同，以达到相应的技术效果。

本实施例还公开了一种厨房的配食管理***，该***的技术特征和一种基于图像处理的厨房库存管理***全部或者部分相同，以达到相应的技术效果。

本实施例还公开了一种厨房的配食管理方法，该方法的技术特征和一种基于图像处理的厨房库存管理方法全部或者部分相同，以达到相应的技术效果。

本发明利用了餐厅、食堂或仓库内的大量现有监控设备，仅仅在监控中心进行改造，或者在库存位置的相关热点位置增设少量监控设备即可实现对库存更为精确的实时管理。通过本发明所公开的技术方案，减少了食物的无谓消耗和盗窃，也可简化在如糕点店这样的店面销售环节的结算效率。

需要注意的是，上述具体实施例是示例性的，本领域技术人员可以在本发明公开内容的启发下想出各种解决方案，而这些解决方案也都属于本发明的公开范围并落入本发明的保护范围之内。本领域技术人员应该明白，本发明说明书及其附图均为说明性而并非构成对权利要求的限制。本发明的保护范围由权利要求及其等同物限定。

Claims (10)

1.一种厨房库存管理***，其特征在于，所述***包括：

第一图像采集装置(11)，其用于采集第一图像，并由该***基于所述第一图像来确定至少一个操作者在库房内的位置以及对应操作者在对应位置能够触及到的所有库存位置内存放的食品的注册图像组成的第一注册图像集；

第二图像采集装置(12)，其用于探测至少一个操作者的手的第二图像，所述第二图像是在对应操作者的手进入货架的至少一个库存位置之前拍摄的；和/或

第三图像采集装置(13)，其用于探测至少一个操作者的手的第三图像，所述第三图像是在对应操作者的手从该货架的至少一个库存位置移出之后拍摄的；

其中，在对应操作者领取食品之时，计算设备(30)基于所述第二图像、所述第三图像和所述第一注册图像集的比较来确定对应操作者持有食品的种类，根据对应操作者持有食品的种类判断其与对应操作者关联的取食信息的第一匹配情况，在第一匹配情况为通过之时，根据对应操作者持有食品的状态将对应的库存位置的库存状态进行更新。

2.如权利要求1所述的***，其特征在于，所述根据对应操作者持有食品的种类判断其与对应操作者关联的取食信息的第一匹配情况的处理还包括：在第一匹配情况为失败之时，将匹配失败的信息反馈给对应操作者。

3.如权利要求2所述的***，其特征在于，所述***还包括：

第四图像采集装置(14)，其布置于食品容纳器(40)，所述第四图像采集装置(14)被配置用于：响应于对应操作者的手进入该食品容纳器(40)的动作而拍摄对应操作者的手的第四图像和第五图像，

其中，所述第四图像是在对应操作者的手进入该食品容纳器(40)之前拍摄的，所述第五图像是在对应操作者的手从该食品容纳器(40)移出之后拍摄的，

其中，基于所述第四图像、所述第五图像和取食信息中所有食品的注册图像组成的第二注册图像集的比较来核对对应操作者放入的食品的种类，根据对应操作者放入的食品的种类判断其与取食信息的第二匹配情况，在第二匹配情况为失败之时，将匹配失败的信息反馈给对应操作者。

4.如权利要求3所述的***，其特征在于，所述第四图像采集装置还被配置于：在对应操作者将食品放入食品容纳器(40)中之后，识别食品的身份标识，其中，基于所述食品的身份标识和所述取食信息中所有食品的身份标识组成的身份标识集的比较来核对对应操作者放入的食品的种类与取食信息的第三匹配情况，在第三匹配情况为失败之时，将匹配失败的信息反馈给对应操作者。

5.如权利要求4所述的***，其特征在于，所述身份标识是食品批准文号、二维码、条形码和电子标签中的至少一个。

6.如权利要求2至5之一所述的***，其特征在于，将匹配失败的信息反馈给对应操作者之时，由***根据对应操作者的实时位置为其计算一条能在最短路程和/或最短时间内将匹配失败的食品归还至相应库存位置和拿取取食信息中其余待取食品并送至指定的出食窗口的最优路径。

7.如权利要求1至5之一所述的***，其特征在于，在对应操作者归还食品之时，计算设备(30)基于所述第二图像、所述第三图像和所述第一注册图像集的比较来确定对应操作者持有食品的种类，根据对应操作者持有食品的种类判断其与库存位置的食品的第四匹配情况，在第四匹配情况为通过之时，根据操作者持有食品的状态将对应的库存位置的库存状态进行更新。

8.如权利要求1至5之一所述的***，其特征在于，所述第一图像是在所述第二图像采集装置(12)拍摄到对应操作者的手的第二图像之后才由所述第一图像采集装置(11)拍摄的，其中，所述第二图像是在对应操作者的手进入货架的至少一个库存位置之前拍摄的。

9.一种基于图像处理的厨房库存管理方法，其特征在于，所述方法包括：

使用至少一个第一图像采集装置(11)，其用于采集第一图像，并由该***基于所述第一图像来确定至少一个操作者在库房内的位置以及对应操作者在对应位置能够触及到的所有库存位置内存放的食品的注册图像组成的第一注册图像集；

使用至少一个第二图像采集装置(12)，其用于探测至少一个操作者的手的第二图像，所述第二图像是在对应操作者的手进入货架的至少一个库存位置之前拍摄的；和/或

使用至少一个第三图像采集装置(13)，其用于探测至少一个操作者的手的第三图像，所述第三图像是在对应操作者的手从该货架的至少一个库存位置移出之后拍摄的；

其中，在对应操作者领取食品之时，计算设备(30)基于所述第二图像、所述第三图像和所述第一注册图像集的比较来确定对应操作者持有食品的种类，根据对应操作者持有食品的种类判断其与对应操作者关联的取食信息的第一匹配情况，在第一匹配情况为通过之时，根据对应操作者持有食品的状态将对应的库存位置的库存状态进行更新。

10.如权利要求9所述的方法，其特征在于，所述根据对应操作者持有食品的种类判断其与对应操作者关联的取食信息的第一匹配情况的处理还包括：在第一匹配情况为失败之时，将匹配失败的信息反馈给对应操作者。