CN103604273A - 智能冰箱食品管理的方法 - Google Patents
智能冰箱食品管理的方法 Download PDFInfo
- Publication number
- CN103604273A CN103604273A CN201310568186.6A CN201310568186A CN103604273A CN 103604273 A CN103604273 A CN 103604273A CN 201310568186 A CN201310568186 A CN 201310568186A CN 103604273 A CN103604273 A CN 103604273A
- Authority
- CN
- China
- Prior art keywords
- intelligent refrigerator
- food
- data
- background server
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)
Abstract
本发明涉及智能冰箱食品管理的方法，包括：a.智能冰箱关门后采集箱体内的食品图像；b.判断是否将食品图像上传到后台服务器，不上传执行步骤c，上传执行步骤e；c.智能冰箱对食品图像进行图像识别，然后显示食品名称；d.存储步骤c得到的数据并与后台服务器中的数据同步；e.将食品图像上传到后台服务器中进行图像识别，后台服务器将识别出的食品名称反馈到智能冰箱中进行显示；f.后台服务器存储将步骤e的数据，并使智能冰箱和后台服务器中的数据同步。本发明能够让用户在不需要手动操作时即可对冰箱内的食品进行查看，明显方便了用户对冰箱内食品的管理，并且有效提升了用户使用的交互性、体验感和实用性。
Description
技术领域
本发明涉及智能冰箱食品管理的方法。
背景技术
随着计算机技术与信息技术的发展，图像识别技术获得了越来越广泛的应用。例如医疗诊断中各种医学图片的分析与识别、天气预报中的卫星云图识别、指纹识别、脸谱识别等，图像识别技术越来越多地渗透到我们的日常生活中。图像识别技术的涵义很广，主要指通过计算机或者其它软件平台，采用数学技术方法，对一个***前端获取的图像按照特定目的进行相应的处理。图像识别包括诸如生物特征识别（人脸识别、指纹识别等）技术、智能交通中的动态对象识别、手写识别等。随着计算机技术及人工智能技术的发展，图像识别技术越来越成为人工智能的基础技术，它涉及的技术领域也越来越广泛，应用越来越深入。
同时，家电智能化的浪潮，催生了智能冰箱的产生。智能冰箱对硬件技术和软件技术均进行了升级和革新。如何有效地进行冰箱内食品管理是智能冰箱的核心功能，也是用户非常关注的问题。在智能冰箱的食品管理研究过程中，智能冰箱已经具有了多摄像头进行拍照、远程查看进行食品管理等功能，还有配备了RFID（射频电子标签）、触摸操作等方式进行食品添加、食品删除等功能。尽管这些设备和功能解决了智能冰箱食品管理的部分问题，但是依然没有从根本上解决冰箱内食品管理操作繁琐的问题，仍然需要用户通过人工操作对冰箱内的食品入库、出库来完成食品管理。
发明内容
本发明提供了一种智能冰箱食品管理的方法，用户不需要手动操作即可对冰箱内的食品进行查看，方便对冰箱内食品的管理。
本发明智能冰箱食品管理的方法，包括：
a.智能冰箱关门后，通过设于智能冰箱内的摄像头采集箱体内的食品图像；
b.智能冰箱的处理设备根据智能冰箱***的负载情况以及智能冰箱与后台服务器之间的网络畅通情况，判断是否将采集到的食品图像上传到后台服务器，如果不上传执行步骤c，如果上传执行步骤e；
c.通过智能冰箱的内置软件对所述食品图像进行图像识别和对比，然后输出并显示食品图像中各种食品的名称；
d.将步骤c得到的数据存储在智能冰箱的存储器中，并将该数据通过网络更新后台服务器中的数据，使智能冰箱和后台服务器中的数据同步；
e.将所述食品图像通过网络上传到后台服务器中进行图像识别和对比，由后台服务器识别出食品图像中的各种食品，并将所述食品名称通过网络反馈到智能冰箱中进行显示；
f.后台服务器将步骤e得到的数据进行存储，并通过网络更新智能冰箱中的数据，使智能冰箱和后台服务器中的数据同步。
智能冰箱本地和后台服务器都可以进行食品图像的识别，图像识别的功能可以通过目前已有的图像识别软件实现。当智能冰箱的处理器负载过大或内存消耗过多，则将采集的食品图像上传到后台服务器中进行识别和处理，以减轻智能冰箱的负载，反之则在本地进行处理。将最终得到的智能冰箱中和后台服务器的食品名称进行同步，一方面可以作为备份使用，另一方面也可以针对不同用户长期的食品特点和喜好进行一些诸如菜品推荐、饮食建议等功能处理。当然，这些处理因为需要大量的***资源和网络数据，因此通常是在后台服务器中完成的。
优选的，在智能冰箱内设有至少两个摄像头，更多的摄像头能够从不同的角度对智能冰箱内的食品图像进行采集，从而减少死角，并且能够多角度更清楚的拍摄到视频图像，减少图像识别的误差。
进一步的，所述摄像头通过USB接口与智能冰箱连接，方便安装和维护。
具体的，所述的后台服务器由相连接的数据服务器和处理服务器群构成。将不同功能的服务器从物理上分开，而不是集成于一台服务器上，能够减少单个服务器的负荷，同时也便于针对不同的问题对服务器进行维护。
优选的，所述的处理服务器群为分布式架构。分布式***是将数据分散的存储于多***立的服务器节点上，所有的服务器节点通过网络连接成为一个整体，对于客户端而言与面对单一的服务器完全一样，但实际上一个流程运行的不同功能是在不同的服务器节点上完成的。分布式的架构不但解决了传统集中式存储***中单存储服务器的瓶颈问题，还提高了***的可靠性、可用性和扩展性。
优选的，当智能冰箱关门，并延时设定的时长后（如5分钟），再进行所述的食品图像采集。因为当用户关上冰箱门可能是完成了一次操作，也可能是临时关闭一下。因此当关闭冰箱门并等待一定时间后，才认为是处于了稳定状态，可以进行食品图像采集了。
在此基础上，为了让每个用户的智能冰箱能够与后台服务器顺利的关联，并且防止数据传输中可能出现的错误，优选的，智能冰箱先在后台服务器中注册后，再进行步骤a所述的食品图像采集。通过注册，将智能冰箱和后台服务器一对一的关联在一起，进行数据传输和同步。
本发明智能冰箱食品管理的方法，能够让用户在不需要手动操作时即可对冰箱内的食品进行查看，明显方便了用户对冰箱内食品的管理，并且还能够根据同步的食品数据进行更多的功能应用和处理，有效提升了用户使用的交互性、体验感和实用性。
以下结合实施例的具体实施方式，对本发明的上述内容再作进一步的详细说明。但不应将此理解为本发明上述主题的范围仅限于以下的实例。在不脱离本发明上述技术思想情况下，根据本领域普通技术知识和惯用手段做出的各种替换或变更，均应包括在本发明的范围内。
附图说明
图1为本发明智能冰箱食品管理的方法的框图。
具体实施方式
如图1所示本发明智能冰箱食品管理的方法，包括：
a.先将智能冰箱在后台服务器中机型注册，使智能冰箱和后台服务器进行一对一的关联。在智能冰箱的箱体内设有多个通过USB接口连接的摄像头。当智能冰箱关门后延时5分钟，通过所述的多个摄像头采集箱体内的食品图像。后台服务器由相连接的数据服务器和处理服务器群构成，其中处理服务器群为分布式架构。数据服务器负责对各种数据的存储，处理服务器群负责对数据的处理、分析和判断；
b.智能冰箱的处理设备根据智能冰箱***的负载情况以及智能冰箱与后台服务器之间的网络畅通情况，判断是否将采集到的食品图像上传到后台服务器，如果不上传执行步骤c，如果上传执行步骤e；
c.通过智能冰箱的内置软件对所述食品图像进行图像识别和对比，然后输出并显示食品图像中各种食品的名称；
d.将步骤c得到的数据存储在智能冰箱的存储器中，并将该数据通过网络更新后台服务器的数据服务器中的数据，使智能冰箱和后台服务器中的数据同步；
e.将所述食品图像通过网络上传到后台服务器的数据服务器中，并通过处理服务器群进行图像识别和对比，识别出食品图像中的各种食品，并将所述食品名称通过网络反馈到智能冰箱中进行显示；
f.后台服务器将步骤e得到的数据存储到数据服务器中，并通过网络更新智能冰箱中的数据，使智能冰箱和后台服务器中的数据同步。
Claims (7)
1.智能冰箱食品管理的方法，其特征包括：
a.智能冰箱关门后，通过设于智能冰箱内的摄像头采集箱体内的食品图像；
b.智能冰箱的处理设备根据智能冰箱***的负载情况以及智能冰箱与后台服务器之间的网络畅通情况，判断是否将采集到的食品图像上传到后台服务器，如果不上传执行步骤c，如果上传执行步骤e；
c.通过智能冰箱的内置软件对所述食品图像进行图像识别和对比，然后输出并显示食品图像中各种食品的名称；
d.将步骤c得到的数据存储在智能冰箱的存储器中，并将该数据通过网络更新后台服务器中的数据，使智能冰箱和后台服务器中的数据同步；
e.将所述食品图像通过网络上传到后台服务器中进行图像识别和对比，由后台服务器识别出食品图像中的各种食品，并将所述食品名称通过网络反馈到智能冰箱中进行显示；
f.后台服务器将步骤e得到的数据进行存储，并通过网络更新智能冰箱中的数据，使智能冰箱和后台服务器中的数据同步。
2.如权利要求1所述的智能冰箱食品管理的方法，其特征为：在智能冰箱内设有至少两个摄像头。
3.如权利要求2所述的智能冰箱食品管理的方法，其特征为：所述摄像头通过USB接口与智能冰箱连接。
4.如权利要求1所述的智能冰箱食品管理的方法，其特征为：所述的后台服务器由相连接的数据服务器和处理服务器群构成。
5.如权利要求4所述的智能冰箱食品管理的方法，其特征为：所述的处理服务器群为分布式架构。
6.如权利要求1所述的智能冰箱食品管理的方法，其特征为：当智能冰箱关门，并延时设定的时长后，再进行所述的食品图像采集。
7.如权利要求1至6之一所述的智能冰箱食品管理的方法，其特征为：智能冰箱先在后台服务器中注册后，再进行步骤a所述的食品图像采集。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310568186.6A CN103604273B (zh) | 2013-11-13 | 2013-11-13 | 智能冰箱食品管理的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310568186.6A CN103604273B (zh) | 2013-11-13 | 2013-11-13 | 智能冰箱食品管理的方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN103604273A true CN103604273A (zh) | 2014-02-26 |
| CN103604273B CN103604273B (zh) | 2016-01-20 |
Family
ID=50122519
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201310568186.6A Active CN103604273B (zh) | 2013-11-13 | 2013-11-13 | 智能冰箱食品管理的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN103604273B (zh) |
Cited By (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104197632A (zh) * | 2014-09-19 | 2014-12-10 | 合肥美的电冰箱有限公司 | 一种智能调温冰箱 |
| CN104457133A (zh) * | 2014-11-28 | 2015-03-25 | 合肥华凌股份有限公司 | 食品管理方法和食品管理*** |
| CN104896868A (zh) * | 2015-06-18 | 2015-09-09 | 合肥美菱股份有限公司 | 一种根据远程图像识别管理冰箱食品列表的方法 |
| CN105117450A (zh) * | 2015-08-17 | 2015-12-02 | 四川长虹电器股份有限公司 | 智能推荐食品的冰箱及方法 |
| CN105184231A (zh) * | 2015-08-14 | 2015-12-23 | 北京京东尚科信息技术有限公司 | 一种储物空间的图像采集***及方法 |
| CN105338243A (zh) * | 2015-10-27 | 2016-02-17 | 合肥华凌股份有限公司 | 冰箱内部环境图像采集控制方法及装置 |
| CN105953520A (zh) * | 2016-05-06 | 2016-09-21 | 青岛海尔股份有限公司 | 智能冰箱控制方法及其控制*** |
| CN106091568A (zh) * | 2016-06-29 | 2016-11-09 | 合肥华凌股份有限公司 | 一种基于并行多线程的智能冰箱食品管理方法、***及智能冰箱 |
| WO2017190517A1 (zh) * | 2016-05-06 | 2017-11-09 | 青岛海尔股份有限公司 | 冰箱及其间室的分区控制方法、分区控制装置 |
| CN107786398A (zh) * | 2016-08-31 | 2018-03-09 | 阿里巴巴集团控股有限公司 | 数据交互方法和装置，及智能终端、操作***、智能冰箱 |
| CN107798277A (zh) * | 2016-09-05 | 2018-03-13 | 合肥美的智能科技有限公司 | 食材识别***和方法、食材模型训练方法、冰箱和服务器 |
| CN107886028A (zh) * | 2016-09-29 | 2018-04-06 | 九阳股份有限公司 | 一种冰箱的食材录入方法及食材录入装置 |
| CN107968817A (zh) * | 2017-11-13 | 2018-04-27 | 福州瑞芯微电子股份有限公司 | 一种普通设备与人工智能设备交互方法和*** |
| CN109425191A (zh) * | 2017-08-24 | 2019-03-05 | 合肥美的智能科技有限公司 | 智能冰箱及智能冰箱*** |
| CN112912940A (zh) * | 2019-10-04 | 2021-06-04 | Ism机电工业及贸易股份公司 | 智能小冰箱***及其方法 |
| US11506448B2 (en) | 2018-11-14 | 2022-11-22 | Samsung Electronics Co.. Ltd. | Method and device for managing food in refrigerator |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20040243347A1 (en) * | 1995-04-17 | 2004-12-02 | Lehman Michael G. | Time and work tracker for servers |
| US20060283944A1 (en) * | 2005-06-18 | 2006-12-21 | Charles Holley | Spec-trac |
| CN101403559A (zh) * | 2008-10-30 | 2009-04-08 | 中山大学 | 一种人性化的数字家居冰箱控制*** |
| JP2011203932A (ja) * | 2010-03-25 | 2011-10-13 | Hitachi Information Systems Ltd | 食材管理発注システム |
| CN102833340A (zh) * | 2012-08-31 | 2012-12-19 | 澳柯玛股份有限公司 | 基于云服务器的智能物联网络平台 |
| US20130018843A1 (en) * | 2011-07-14 | 2013-01-17 | Robert Marten Bultman | Storing data following a power outage and without a proper time source |
| CN102889750A (zh) * | 2012-10-31 | 2013-01-23 | 昆山黄昆纺织机械有限公司 | 一种智能冰箱 |
| CN102981477A (zh) * | 2012-11-26 | 2013-03-20 | 四川长虹电器股份有限公司 | 基于多摄像头切换技术的冰箱内部查看方法 |
| CN103234323A (zh) * | 2012-07-27 | 2013-08-07 | 博西华电器（江苏）有限公司 | 智能冰箱、包含该智能冰箱的冰箱***及其控制方法 |
-
2013
- 2013-11-13 CN CN201310568186.6A patent/CN103604273B/zh active Active
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20040243347A1 (en) * | 1995-04-17 | 2004-12-02 | Lehman Michael G. | Time and work tracker for servers |
| US20060283944A1 (en) * | 2005-06-18 | 2006-12-21 | Charles Holley | Spec-trac |
| CN101403559A (zh) * | 2008-10-30 | 2009-04-08 | 中山大学 | 一种人性化的数字家居冰箱控制*** |
| JP2011203932A (ja) * | 2010-03-25 | 2011-10-13 | Hitachi Information Systems Ltd | 食材管理発注システム |
| US20130018843A1 (en) * | 2011-07-14 | 2013-01-17 | Robert Marten Bultman | Storing data following a power outage and without a proper time source |
| CN103234323A (zh) * | 2012-07-27 | 2013-08-07 | 博西华电器（江苏）有限公司 | 智能冰箱、包含该智能冰箱的冰箱***及其控制方法 |
| CN102833340A (zh) * | 2012-08-31 | 2012-12-19 | 澳柯玛股份有限公司 | 基于云服务器的智能物联网络平台 |
| CN102889750A (zh) * | 2012-10-31 | 2013-01-23 | 昆山黄昆纺织机械有限公司 | 一种智能冰箱 |
| CN102981477A (zh) * | 2012-11-26 | 2013-03-20 | 四川长虹电器股份有限公司 | 基于多摄像头切换技术的冰箱内部查看方法 |
Cited By (20)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104197632A (zh) * | 2014-09-19 | 2014-12-10 | 合肥美的电冰箱有限公司 | 一种智能调温冰箱 |
| CN104457133A (zh) * | 2014-11-28 | 2015-03-25 | 合肥华凌股份有限公司 | 食品管理方法和食品管理*** |
| CN104896868A (zh) * | 2015-06-18 | 2015-09-09 | 合肥美菱股份有限公司 | 一种根据远程图像识别管理冰箱食品列表的方法 |
| CN105184231A (zh) * | 2015-08-14 | 2015-12-23 | 北京京东尚科信息技术有限公司 | 一种储物空间的图像采集***及方法 |
| CN105117450A (zh) * | 2015-08-17 | 2015-12-02 | 四川长虹电器股份有限公司 | 智能推荐食品的冰箱及方法 |
| CN105338243A (zh) * | 2015-10-27 | 2016-02-17 | 合肥华凌股份有限公司 | 冰箱内部环境图像采集控制方法及装置 |
| CN105953520A (zh) * | 2016-05-06 | 2016-09-21 | 青岛海尔股份有限公司 | 智能冰箱控制方法及其控制*** |
| EP3438577A4 (en) * | 2016-05-06 | 2019-05-08 | Qingdao Haier Joint Stock Co., Ltd | INTELLIGENT REFRIGERATOR AND CONTROL METHOD AND CONTROL SYSTEM THEREOF |
| WO2017190517A1 (zh) * | 2016-05-06 | 2017-11-09 | 青岛海尔股份有限公司 | 冰箱及其间室的分区控制方法、分区控制装置 |
| WO2017190518A1 (zh) * | 2016-05-06 | 2017-11-09 | 青岛海尔股份有限公司 | 智能冰箱及其控制方法和控制*** |
| WO2018000980A1 (zh) * | 2016-06-29 | 2018-01-04 | 合肥华凌股份有限公司 | 一种基于并行多线程的智能冰箱食品管理方法、***及智能冰箱 |
| CN106091568A (zh) * | 2016-06-29 | 2016-11-09 | 合肥华凌股份有限公司 | 一种基于并行多线程的智能冰箱食品管理方法、***及智能冰箱 |
| CN107786398A (zh) * | 2016-08-31 | 2018-03-09 | 阿里巴巴集团控股有限公司 | 数据交互方法和装置，及智能终端、操作***、智能冰箱 |
| CN107786398B (zh) * | 2016-08-31 | 2021-02-23 | 斑马智行网络(香港)有限公司 | 数据交互方法和装置，及智能终端、操作***、智能冰箱 |
| CN107798277A (zh) * | 2016-09-05 | 2018-03-13 | 合肥美的智能科技有限公司 | 食材识别***和方法、食材模型训练方法、冰箱和服务器 |
| CN107886028A (zh) * | 2016-09-29 | 2018-04-06 | 九阳股份有限公司 | 一种冰箱的食材录入方法及食材录入装置 |
| CN109425191A (zh) * | 2017-08-24 | 2019-03-05 | 合肥美的智能科技有限公司 | 智能冰箱及智能冰箱*** |
| CN107968817A (zh) * | 2017-11-13 | 2018-04-27 | 福州瑞芯微电子股份有限公司 | 一种普通设备与人工智能设备交互方法和*** |
| US11506448B2 (en) | 2018-11-14 | 2022-11-22 | Samsung Electronics Co.. Ltd. | Method and device for managing food in refrigerator |
| CN112912940A (zh) * | 2019-10-04 | 2021-06-04 | Ism机电工业及贸易股份公司 | 智能小冰箱***及其方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN103604273B (zh) | 2016-01-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103604273B (zh) | 智能冰箱食品管理的方法 | |
| KR102545768B1 (ko) | 메타 데이터를 처리하기 위한 장치 및 방법 | |
| CN107278369A (zh) | 人员查找的方法、装置及通信*** | |
| US20160044136A1 (en) | Virtual gateway | |
| CN104896868A (zh) | 一种根据远程图像识别管理冰箱食品列表的方法 | |
| CN105574910A (zh) | 电子设备和用于在电子设备中提供过滤器的方法 | |
| CN103604271A (zh) | 一种基于智能冰箱的食品识别方法 | |
| KR102272108B1 (ko) | 영상 처리 장치 및 방법 | |
| KR101782590B1 (ko) | 이미지 분석기반의 관계형 태그생성 및 추천 방법 | |
| CN108073402A (zh) | 基于Linux***的kafka集群自动部署方法和装置 | |
| CN107527186B (zh) | 电子阅读管理方法、装置和终端设备 | |
| CN102880634A (zh) | 基于云的智能人脸识别检索方法 | |
| CN111080968A (zh) | 一种独居老人意外发生联动控制预警方法及*** | |
| CN105323107A (zh) | 网络接口卡信息管理方法及网络接口卡信息管理*** | |
| CN105471945A (zh) | 一种云存储在地震综合解释中的应用方法 | |
| CN105323484A (zh) | 一种快速拍照的方法及电子设备 | |
| CN104158885A (zh) | 一种基于位置信息流式加载应用的方法和*** | |
| CN102752294A (zh) | 基于设备能力的多终端数据同步方法和*** | |
| CN113223121A (zh) | 视频生成方法、装置、电子设备及存储介质 | |
| CN111259839A (zh) | 目标对象行为监测方法、装置、设备、***及存储介质 | |
| CN111007735A (zh) | 一种基于社区车牌识别的智能家居设备联动方法及*** | |
| CN110351521A (zh) | 监控方法、监控装置、电子设备和介质 | |
| CN104038518A (zh) | 信息处理方法、服务器和终端设备 | |
| CN106161555A (zh) | 基于云节点服务器的rfid的智能家居*** | |
| CN110659540A (zh) | 一种交通灯检测方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant |