CN116957979A - 一种货品陈列监管方法、货柜及服务器 - Google Patents
一种货品陈列监管方法、货柜及服务器 Download PDFInfo
- Publication number
- CN116957979A CN116957979A CN202310946934.3A CN202310946934A CN116957979A CN 116957979 A CN116957979 A CN 116957979A CN 202310946934 A CN202310946934 A CN 202310946934A CN 116957979 A CN116957979 A CN 116957979A
- Authority
- CN
- China
- Prior art keywords
- container
- camera
- image
- storage space
- real
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 58
- 238000012545 processing Methods 0.000 claims description 53
- 238000004891 communication Methods 0.000 claims description 37
- 238000004590 computer program Methods 0.000 claims description 25
- 238000011156 evaluation Methods 0.000 claims description 21
- 230000002829 reductive effect Effects 0.000 claims description 8
- 238000012544 monitoring process Methods 0.000 claims description 7
- 230000009467 reduction Effects 0.000 claims description 5
- 238000012856 packing Methods 0.000 description 23
- 235000013361 beverage Nutrition 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 230000001133 acceleration Effects 0.000 description 5
- 235000020965 cold beverage Nutrition 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000010295 mobile communication Methods 0.000 description 4
- 230000013011 mating Effects 0.000 description 3
- 238000012549 training Methods 0.000 description 3
- 239000000428 dust Substances 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- KLDZYURQCUYZBL-UHFFFAOYSA-N 2-[3-[(2-hydroxyphenyl)methylideneamino]propyliminomethyl]phenol Chemical compound OC1=CC=CC=C1C=NCCCN=CC1=CC=CC=C1O KLDZYURQCUYZBL-UHFFFAOYSA-N 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000012512 characterization method Methods 0.000 description 1
- 230000002860 competitive effect Effects 0.000 description 1
- 201000001098 delayed sleep phase syndrome Diseases 0.000 description 1
- 208000033921 delayed sleep phase type circadian rhythm sleep disease Diseases 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 235000012171 hot beverage Nutrition 0.000 description 1
- 235000015243 ice cream Nutrition 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000004806 packaging method and process Methods 0.000 description 1
- 230000036961 partial effect Effects 0.000 description 1
- 239000011347 resin Substances 0.000 description 1
- 229920005989 resin Polymers 0.000 description 1
- 230000001932 seasonal effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 239000012780 transparent material Substances 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Chemical compound O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30232—Surveillance
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Finance (AREA)
- Strategic Management (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Accounting & Taxation (AREA)
- Development Economics (AREA)
- Entrepreneurship & Innovation (AREA)
- Game Theory and Decision Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Economics (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
本申请涉及一种货品陈列监管方法、货柜及服务器。在货品陈列监管方法中,货柜侧的摄像头可以针对货柜内的储物空间进行图像采集,并对采集到的实时图像进行去畸变处理,或者传输给服务器由服务器进行去畸变处理,从而得到消除畸变或者是畸变较小的还原图像,然后根据还原图像评估货柜内的货品陈列情况,实现对货柜货品陈列情况的监督,促导货柜管理人员积极地、及时地对货柜内的货品进行理货,提升货柜陈列的整洁性与美观性,进而提升店铺与产品形象,提升产品销量,增强店铺与品牌的市场竞争力。
Description
技术领域
本申请涉及计算机领域,尤其是涉及一种货品陈列监管方法、货柜及服务器。
背景技术
随着经济发展,零售业的规模持续扩大,竞争也日益激烈,尤其是对线下零售而言:一方面,相较于线上零售,线下零售本就因为铺面租金等因素具有成本高昂的特点,另一方面,城市中店铺林立,店铺所提供的服务同质化严重,难以从中脱颖而出。想要在角逐中生存下来并取得进一步发展,向消费者树立良好的店铺形象、品牌形象是必不可少的,在这种情况下,货柜中货品的陈列不仅影响货柜的有效利用率,更是向消费者进行店铺形象展示、产品形象展示的关键手段。
所以,如何对货柜中货品的陈列情况进行管理是目前亟待解决的技术问题。
发明内容
为了对货柜中的货品陈列情况进行监管,本申请提供了一种货品陈列监管方法、货柜及服务器。
第一方面,本申请提供一种货品陈列监管方法,包括:
控制摄像头对货柜内的储物空间进行图像采集,以获取所述货柜内部的实时图像;
将所述实时图像上传至服务器,以供所述服务器根据所述储物空间的尺寸信息及所述摄像头的图像采集位置信息对所述实时图像进行去畸变处理,并根据去畸变处理得到的还原图像评估所述货柜内的货品陈列情况,所述图像采集位置信息表征所述摄像头采集所述实时图像时同所述储物空间的相对位置。
通过采用上述技术方案,货柜侧的摄像头可以针对货柜内的储物空间进行图像采集,并将采集到的实时图像传输给服务器。服务器在接收到货柜发送的实时图像后,可以根据货柜中储物空间的尺寸以及摄像头采集到实时图像时同储物空间的相对位置对实时图像进行去畸变处理,从而得到消除畸变或者是畸变较小的还原图像。进一步地,服务器侧根据还原图像评估货柜内的货品陈列情况,实现对货柜货品陈列情况的监督,促导货柜管理人员积极地、及时地对货柜内的货品进行理货,提升货柜陈列的整洁性与美观性,进而提升店铺与产品形象,提升产品销量,增强店铺与品牌的市场竞争力。
可选地,所述货柜包括提供所述储物空间的柜体及同所述柜体转动连接的柜门,所述柜门至少部分区域透明,所述摄像头设置于所述柜门朝向所述柜体的一侧;所述控制摄像头对货柜内的储物空间进行图像采集包括:
监测所述柜门的状态;
在所述柜门处于开启状态的情况下,控制所述摄像头对所述储物空间进行图像采集。
通过采用上述技术方案,货柜除了用以提供储物空间的柜体以外,还设置有至少部分区域透明柜门,摄像头设置在柜门朝向柜体的一侧,货柜可以在柜门开启的状态下控制摄像头采集实时图像,柜门开启时,摄像头相对于柜体的距离也被拉开,这样可以方便摄像头采集储物空间的图像,更加全面地呈现储物空间全景。同时,柜门与柜体一起形成封闭式空间,可以防止灰尘进入储物空间内,有利于保持货柜内部清洁;而且,因为柜门至少部分区域透明,因此消费者可以透过柜门观察柜内情况,实现产品展示。
可选地,所述在所述柜门处于开启状态的情况下,控制所述摄像头对所述储物空间进行图像采集包括:
在所述柜门处于开启状态的情况下,监测所述柜门的开门角度;
在所述开门角度达到预设开门角度时,控制所述摄像头对所述储物空间进行图像采集。
通过采用上述技术方案,货柜控制摄像头在柜门处于预设开门角度时进行图像采集,即让摄像头在固定的图像采集位置进行图像采集,这样由该摄像头采集到的全部实时图像中,因摄像头图像采集位置而引起的图像畸变是相同的,在这种情况下服务器只需要设置一种去畸变处理模型即可对该货柜的所有实时图像进行去畸变处理,而不需要针对不同的图像采集位置分别设置去畸变模型,节省了去畸变处理时从众多去畸变模型中查找选择目标模型的时间,提高了处理实时图像得到还原图像的效率,也降低了构建去畸变模型的工作量,减少了存储去畸变模型所占用的存储资源。
可选地,所述将所述实时图像上传至服务器之后,所述货品陈列方法还包括:
接收所述服务器发送的理货提示信息;
根据理货提示信息发出理货提示。
通过采用上述技术方案,在将实时图像传输至服务器后,货柜还可以接收服务器发送的理货提示信息,理货提示信息表征着货柜内当前物品陈列情况不达标,所以货柜根据理货提示信息发出理货提示,让该货柜的管理者及时对货柜内的货品进行整理,提升货柜的整洁性。
第二方面,本申请提供一种货品陈列监管方法,包括:
接收货柜发送的实时图像;
根据所述货柜中储物空间的尺寸信息及摄像头的图像采集位置信息对所述实时图像进行去畸变处理得到还原图像,所述图像采集位置信息表征所述摄像头采集所述实时图像时同所述储物空间的相对位置;
根据所述还原图像对所述货柜内的货品陈列情况进行评估。
通过采用上述技术方案,货柜侧的摄像头可以针对货柜内的储物空间进行图像采集,并将采集到的实时图像传输给服务器。服务器在接收到货柜发送的实时图像后,可以根据储物空间的尺寸以及摄像头采集到实时图像时同储物空间的相对位置对实时图像进行去畸变处理,从而得到消除畸变或者是畸变较小的还原图像。进一步地,服务器侧根据还原图像评估货柜内的货品陈列情况,实现对货柜货品陈列情况的监督,促导货柜管理人员积极地、及时地对货柜内的货品进行理货,提升货柜陈列的整洁性与美观性,进而提升店铺与产品形象,提升产品销量,增强店铺与品牌的市场竞争力。
可选地,所述根据所述货柜中储物空间的尺寸信息及摄像头的图像采集位置信息对所述实时图像进行去畸变处理得到还原图像之前,还包括:
针对每种尺寸的货柜,建立若干与图像采集位置关联的去畸变处理模型;
所述根据所述储物空间的尺寸信息及摄像头的图像采集位置信息对所述实时图像进行去畸变处理得到还原图像包括:
根据所述储物空间的尺寸信息与所述摄像头的图像采集位置信息从若干所述去畸变处理模型中选择一个作为目标模型;
采用目标模型对所述实时图像进行去畸变处理,以得到所述还原图像。
通过采用上述技术方案,服务器侧预先针对每种尺寸的货柜设置一个或多个去畸变模型,在接收到货柜的实时图像后,服务器可以选择出与实时图像对应的去畸变模型作为目标模型,该目标模型与储物空间的尺寸以及摄像头的图像采集位置相匹配,可以对实时图像去畸变,将实时图像还原成畸变小甚至是无畸变的还原图像,方便后续评估货柜内的货品陈列情况。这种去畸变方案中,在去畸变模型设置完成后,服务器可以全自动地对实时图像进行去畸变处理,无需人工人员,提升了图像处理效率与图像处理成本。
可选地,所述根据所述还原图像对所述货柜内的货品陈列情况进行评估之后,所述货品陈列监管方法还包括:
若评估结果表征所述货柜内货品陈列情况不达标,则向所述货柜与管理者终端中的至少一个发送理货提示信息,以提示所述货柜的管理者对所述货柜进行理货处理,所述管理者终端为所述货柜的管理者的用户终端。
通过采用上述技术方案,在根据还原图像对货柜内货品的陈列情况进行评估后,如果货柜内货品陈列情况不达标,则服务器可以直接向货柜和/或货柜对应的管理者终端发送理货提示信息,让该货柜的管理者及时对货柜内的货品进行整理,提升货柜的整洁性。
第三方面,本申请提供一种货品陈列监管方法,包括:
控制摄像头对货柜内的储物空间进行图像采集,以获取所述货柜内部的实时图像;
根据所述储物空间的尺寸信息及摄像头的图像采集位置信息对所述实时图像进行去畸变处理得到还原图像,所述图像采集位置信息表征所述摄像头采集所述实时图像时同所述货柜的储物空间的相对位置;
根据所述还原图像对所述货柜内的货品陈列情况进行评估;
若评估结果表征所述货柜内货品陈列情况不达标,则发出理货提示。
通过采用上述技术方案,货柜的摄像头可以针对货柜内的储物空间进行图像采集,并根据货柜中储物空间的尺寸以及摄像头采集到实时图像时同储物空间的相对位置对实时图像进行去畸变处理,从而得到消除畸变或者是畸变较小的还原图像,然后根据还原图像评估货柜内的货品陈列情况,实现对货柜货品陈列情况的监督,促导货柜管理人员积极地、及时地对货柜内的货品进行理货,提升货柜陈列的整洁性与美观性,进而提升店铺与产品形象,提升产品销量,增强店铺与品牌的市场竞争力。
第四方面,本申请提供一种货柜,包括柜体、摄像头以及设于所述柜体上的工控机,所述柜体内设有储物空间,所述摄像头被配置为对所述储物空间进行图像采集;
所述工控机包括第一处理器、第一存储器以及第一通信总线,所述第一存储器、所述摄像头分别通过所述第一通信总线与所述第一处理器通信连接,所述第一存储器中存储有第一计算机程序、第二计算机程序中的至少一个,其中,所述第一计算机程序可供所述第一处理器执行,以实现前述第一方面中任一项所述的货品陈列监管方法;所述第二计算机程序可供所述第一处理器执行,以实现前述第三方面中的货品陈列监管方法。
第五方面,本申请提供一种服务器,包括第二处理器、第二存储器以及第二通信总线,所述第二处理器与所述第二存储器通过所述第二通信总线通信连接,所述第二存储器中存储有第三计算机程序,所述第三计算机程序可供所述第二处理器执行,以实现前述第二方面中的货品陈列监管方法。
第六方面,本申请还提供一种计算机可读存储介质,该计算机可读存储介质中存储有第一计算机程序、第二计算机程序以及第三计算机程序中的至少一个,其中,所述第一计算机程序可供一个或多个处理器执行,以实现前述第一方面中任一项所述的货品陈列监管方法;所述第二计算机程序可供一个或多个处理器执行,以实现前述第三方面中的货品陈列监管方法;所述第三计算机程序可供一个或多个处理器执行,以实现前述第二方面中的货品陈列监管方法。
通过采用上述技术方案,提供了货品陈列监管方法的计算机程序的载体。
综上所述,本申请包括以下至少有益技术效果:
通过对货柜内的储物空间进行图像采集、图像去畸变处理,然后根据处理得到的图像实现货品陈列情况的评估、监督,促导货柜管理人员积极地、及时地对货柜内的货品进行理货,提升了货柜陈列的整洁性与美观性,增强了店铺与品牌的市场竞争力。
附图说明
图1为本申请实施例中提供的货柜的一种示意图;
图2为本申请实施例中提供的货柜的一种硬件结构示意图;
图3为本申请实施例中提供的货品陈列监管***的一种示意图;
图4为本申请实施例中提供的服务器的一种硬件结构示意图;
图5为本申请实施例中提供的货品陈列监管方法的一种流程示意图;
图6为本申请实施例中提供的货柜控制摄像头采集实时图像的一种流程示意图;
图7为本申请实施例中示出的管理者终端的一种交互界面示意图。
附图标记说明:
10-货柜;11-柜体;110-搁板;1100-储物空间;12-柜门;13-摄像头;14-工控机;141-第一处理器;142-第一存储器;143-第一通信总线;20-服务器;21-第二处理器;22-第二存储器;23-第二通信总线;3-货品陈列监管***。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本申请,并不用于限定本申请。
总所周知,商店中货品的陈列情况会在很大程度上影响消费者的购买欲望,好的陈列会为货品及货品所属的品牌加分,而杂乱无章、邋遢无序的货品陈列会降低消费者对货品本身、货品所属品牌以及货品所在商铺的信赖程度,从而影响品牌与商铺形象。所以很多品牌尤其是饮料品牌,为了更好地管控自己的货品在线下零售店中的陈列情况,都推出了专用货柜,例如专用的冷饮柜、热饮柜,当一个线下零售店引入这类品牌的货品时,会同时引入专用货柜,让该品牌的货品可以被摆放在专门为这些货品定制的专用货柜中,从而提升货品陈列的美观程度与整洁程度。甚至一些品牌还会聘请专业人员为专用货柜设计陈列方案,然后在线下全面推行,进而提升货品陈列的规范性与一致性,增强品牌形象。
可见,货柜不仅仅是起到储存货品的作用,更重要的,其还起到了展示货品形象、展示商铺与品牌形象的作用。所以,促使货柜管理者规范地进行货品陈列是非常必要的,对此,本实施例提供一种货品陈列监管方案,为了便于本领域技术人员进行方案理解,这里先对本实施例提供的货柜进行介绍:
首先请参见图1示出的一种货柜10的示意图:货柜10包括柜体11,柜体11通常为长方体,其一侧开口,剩余侧面封闭形成用于放置货品的储物空间1100。通常情况下,一个货柜10内的储物空间1100会被水平设置的至少一个搁板110分割成至少两个子空间。一些示例中,货柜10内除了水平设置的搁板110以外,还可以竖直设置若干个隔板,隔板用于对空间进行竖直分割,形成数量更多的子空间。在一些示例中,隔板和/或搁板110分割形成的各个子空间的内部环境参数可以独立控制,例如部分冷饮柜中不同子空间的温度不同。可以理解的是,这里所说的环境参数并不仅限于温度,如环境参数可以包括温度、湿度、光照亮度、光照色温等几种中的至少一种。
一些示例中的货柜10为开放式货柜,即柜体11的开口不会被封闭,柜体11内的储物空间1100始终与外部环境连通,这种货柜10也被称为“无门货柜”、“非封闭式货柜”。另外一些示例中,货柜10可以为封闭式货柜,请继续参见图1,这些货柜10除了柜体11以外还具有柜门12,柜门12与柜体11活动连接,在柜门12关闭的状态下,柜门12将储物空间0100与外部环境隔绝,可以防止外部灰尘、水汽等进入柜内;在柜门12开启的状态下,储物空间0100与外部环境连通,柜外的人们可以接触到柜内货品,可以实现货品取放。在本实施例的一些示例中,为了便于消费者或者潜在消费者可以直观地了解货柜10内的货品,柜门12的至少部分区域可以采用透明材料形成,例如,玻璃柜门、树脂柜门等。在图1所示的货柜10中,柜门12与柜体11转动连接,但本实施例也不排除柜门12滑动连接于柜体11上的情况。而且,虽然图2中货柜10仅有一扇柜门12,但在本实施例的其他一些示例中,货柜10也可以为双开门货柜(对开门、上下同侧开门均可)或多开门货柜。
请结合图2,货柜10还包括摄像头13与工控机14。摄像头13,也被称为“图像采集模块”、“图像采集模组”、“摄像模组”,其被配置为在工控机14的控制下对储物空间1100进行图像采集。本实施例提供的货柜10上可以仅设置一个摄像头13,也可以设置多个摄像头13从而形成摄像头群组。对于摄像头13的内容,本实施例中并不做具体限制,其可以为普通的数字摄像头,也可以采用诸如高速摄像头、运动摄像头、红外摄像头等几种中的任意一种来实施。另外,对于摄像头13的形态,本实施例中不做严格限制,不过通常出于避免影响货柜10的整体视觉效果的目的,货柜10上会选择体积相对较小的摄像头13。
在本实施例的一些示例中,摄像头13被设置在柜门12上,例如设置在柜门12朝向柜体11的一侧,即柜门12的里侧。本领域技术人员可以理解的是,如果柜门12至少部分区域透明,那么摄像头13也可以被设置在柜门12远离柜体11的一侧,即柜门12的外侧。还有一些示例中,摄像头13还可以被设置在柜体11上,例如,在货柜10没有柜门12的情况下,摄像头13可以被固定在柜体11上。当然,本领域技术人员可以理解的是,在本实施例的其他一些示例中,摄像头13也可以相对于货柜本体(即柜体11或者柜体11与柜门12的结合体)独立设置,即摄像头13与货柜本体没有物理连接关系,仅与货柜10的工控机14通信连接。
工控机14,即工业控制计算机,其用于工业生产过程的测量、控制和管理的计算机的总称,是工业自动化设备和信息产业基础设备的核心。在本实施例中,工控机14包括第一处理器141、第一存储器142以及第一通信总线143,第一处理器141与第一存储器142通过第一通信总线143通信连接。在本实施例中,摄像头13也连接于该第一通信总线143上从而实现与第一处理器141、第一存储器142的通信连接。摄像头13可以在第一处理器141的控制下进行图像采集,在一些示例中,第一处理器141可以控制将摄像头13采集到的图像数据存储在第一存储器142中。
在上述示例中,货柜10包括摄像头13,还有另外一些示例中,货柜10本身不包括摄像头13,摄像头13作为外接设备与货柜10通信连接,并提供图像采集功能。
可以理解的是,货柜10除了包括上述部件以外,还可以包括其他部件,例如包括但不限于压缩机、温控器、人流量感应器等部件中的至少一种。通常,在柜体11的底部设置有关门容纳压缩机的压缩机腔,在一些示例中,可以将工控机14也设置在该压缩机腔中,另外一些示例中,工控机14也可以被设置在柜体11的顶部、柜体11的背面等不容易被消费者观看到的部位。
一些示例中,货柜10可以是冷藏柜、冷冻柜或者是保温货柜;货柜10可以用于容纳饮品(包括瓶装饮料、灌装饮料、袋装饮料、盒装饮料)、雪糕、冰淇淋以及其他对储藏温度有要求的货品。还有一些示例中,货柜10也可以是普通的不具备温控功能的储存柜。
下面提出一种包括前述货柜10的货品陈列监管***3,请参见图3示出的货品陈列监管***3的一种***示意图:
货品陈列监管***3包括服务器20以及若干前述货柜10(在图3中示出了货品陈列监管***3中的三个货柜10,但在本实施例其他一些示例中,货品陈列监管***3中可以包含数量更多或更少的货柜10),货柜10与服务器20通信连接,例如二者通过以太网、局域网中的至少一种实现通信连接。
如图4所示,服务器20包括第二处理器21、第二存储器22以及第二通信总线23,第二通信总线23用于实现第二处理器21与第二存储器22间的通信连接。可以理解的是,为了实现服务器20与货柜10的通信,服务器20中还会包括通过第二通信总线23与第二处理器21通信连接的第二通信单元(图4中未示出),第二通信单元可以包括RF(Radio Frequency,射频)模块、WiFi(Wireless Fidelity,无线保真)模块、蓝牙模块、有线通信模块中的至少一种。射频模块可以通过无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协议,包括但不限于GSM(Global System of Mobile communication,全球移动通讯***)、GPRS(General Packet Radio Service,通用分组无线服务)、CDMA2000(CodeDivision Multiple Access 2000,码分多址2000)、WCDMA(Wideband Code DivisionMultiple Access,宽带码分多址)、TD-SCDMA(Time Division-Synchronous CodeDivision Multiple Access,时分同步码分多址)、FDD-LTE(Frequency DivisionDuplexing-Long Term Evolution,频分双工长期演进)和TDD-LTE(Time DivisionDuplexing-Long Term Evolution,分时双工长期演进)、5G(5th Generation MobileCommunication Technology,第五代移动通信技术)等。对应地,货柜10的工控机14中也还包括第一通信单元(图2中未示出),第一通信单元通过第一通信总线143与第一处理器141通信连接,第一通信单元页同样可以包括RF模块、WiFi模块、蓝牙模块、有线通信模块中的至少一种。
图3提供的货品陈列监管***3可以实现货品陈列监管方法,达到促使货柜10的管理者及时理货,在货柜10内规范陈列货品,保持货柜10整洁的效果,下面结合图5对该货品陈列监管方法进行介绍:
S502:货柜控制摄像头对货柜内的储物空间进行图像采集,以获取货柜内部的实时图像。
货柜10可以通过摄像头13对储物空间1100进行图像采集,也即针对储物空间1100进行拍摄,采集到的图像可以呈现储物空间1100的实时情况,所以,本实施例中将摄像头13采集到的图像称为实时图像。本领域技术人员可以理解的是,根据前述介绍可知货柜10侧用于图像采集的摄像头13可以是货柜10自带的器件,也可以是外接器件。
在本实施例的一些示例中,摄像头13的图像采集动作可以在任何情况下执行,图像采集的过程与货柜10本身的状态没有关系。如货柜10为开放式,或者是货柜10的柜门12透明,又或者摄像头13被安装在货柜10的内部,在这些情况下,第一处理器141可以在任何时刻控制摄像头13进行图像采集。例如,货柜10需要定时向服务器20发送实时图像,则在定时周期到达时,第一处理器141可以控制摄像头13进行图像采集;又例如,服务器20可以定时或者不定时地向货柜10发送查询指令,让货柜10上报当前的实时图像。
在本实施例的另外一些示例中,针对带有柜门12的封闭式货柜,摄像头13进行图像采集的过程与柜门12的状态有关,例如请结合图6示出的货柜10控制摄像头13进行图像采集的方案的一种流程示意图:
S602:监测柜门的状态。
在本实施例的一些示例中,货柜10上设置有若干传感器,这些传感器中的至少部分可以用于实现开门感应,用于实现开门感应的传感器可以包括但不限于加速度传感器、方向传感器、红外传感器、亮度传感器、声传感器、压力传感器等几种中的至少一种,用于实现开门感应的传感器可以安装在柜门12上,也可以安装在柜体11上同柜门12配合的门框上,还有一些示例中,可以同时设置在柜门12与门框上。
在一种可选的示例中,开门感应可以通过安装在柜门12上的加速度传感器,加速度传感器用于检测柜门12运动的加速度,由于人拉开柜门12的动作通常不是匀速执行的,所以,如果加速度传感器检测到了与开门动作相匹配的加速度,则可以认为柜门12打开了。
在另一种可选的示例中,开门感应可以通过设置在门框上或者设置在柜门12的门框配合区域(即柜门12上用于与门框配合的区域)的亮度传感器实现,因为当柜门12处于关闭状态时,该亮度传感器检测到的亮度很低,但当柜门12处于开启状态时,因为没有柜门12的遮挡,该亮度传感器可以检测到较高的亮度。
还有一种可选的示例中,开门感应可以通过设置在门框上或者设置在柜门12的门框配合区域的压力传感器实现:在柜门12处于关闭状态时,该压力传感器可以检测到较大的压力,但是当柜门12开启后,该压力传感器检测到的压力可能接近于0。
对于通过上除其他传感器或者上述传感器的组合实现开门感应的方式这里不再赘述。
S604:判断柜门是否处于开启状态。
货柜10可以周期性获取用于实现开门感应的传感器的数据,并根据获取到的数据确定柜门12的状态,判定柜门12是否处于开启状态,若判定结果为是,则执行S606,否则继续执行S602。
S606:监测柜门的开门角度。
在本实施例中,当确定柜门12处于开启状态时,货柜10还会确定柜门12的开门角度,开门角度是用于衡量柜门12相对于柜体11旋转的角度的参数。货柜10可以通过角度传感器来检测柜门12的开门角度,在本实施例的一些示例中,货柜10检测柜门12是否处于开启状态的过程也可以通过角度传感器实现。
S608:判断柜门的开门角度是否达到预设开门角度。
货柜10判定柜门12的开门角度是否达到预设开门角度,在判断结果为是的情况下,执行S610,否则继续执行S606。
预设开门角度是预先设置的,其为便于摄像头13对储物空间1100进行图像采集的角度,在该角度下,摄像头13与储物空间1100间具有相对合适的空间位置关系,可以让摄像头13尽可能全面地对储物空间1100进行取景,或者可以让摄像头13以较小的畸变进行图像采集。可以理解的是,预设开门角度的大小与摄像头13本身安装位置,摄像头13本身的视野范围,储物空间1100的尺寸有关。在本实施例的一些示例中,预设开门角度可以为由货柜10的厂商经过实验、计算等方式确定的经验值。另外,预设开门角度可以是一个具体的角度值,也可以是一个角度范围,如果预设开门角度是一个具体的角度值,那么只有柜门12的开门角度恰好等于该角度值的时候,才会认为柜门12的开门角度达到预设开门角度;如果预设开门角度是一个角度范围,那么只要柜门12的开门角度处于该角度范围内,就可以认定柜门12的开门角度达到了预设开门角度。
S610:控制摄像头对储物空间进行图像采集。
在确定柜门12的开门角度达到预设开门角度后,货柜10可以控制摄像头13进行图像采集,并获取摄像头13采集到的图像数据,即获取摄像头13采集到的实时图像。
在上述示例中,摄像头13仅会在柜门12开启,且柜门12的开门角度达到预设开门角度的情况下才会进行图像采集,但在本实施例的其他一些示例中,货柜10只要确定柜门12处于开启状态时,就可以控制摄像头13进行图像采集,并不限定摄像头13只能在柜门12达到预设开门角度的情况下才能拍摄图像。例如,货柜10在检测到柜门12开启后,可以控制摄像头13在任意一个随机的时刻进行图像采集,或者在任意几个随机的时刻进行图像采集。
S504:货柜将实时图像上传至服务器。
货柜10通过摄像头13得到储物空间1100的实时图像后,可以控制第一通信单元将该实时图像上传至服务器20。
S506:服务器根据储物空间的尺寸信息及摄像头的图像采集位置信息对实时图像进行去畸变处理得到还原图像。
服务器20接收到来自货柜10的实时图像后,可以对该实时图像进行去畸变处理,从而减小甚至是消除实时图像中的空间畸变,得到畸变较小甚至是无畸变的还原图像,以供后续根据还原图像来评估货柜10的货品陈列情况。
可以理解的是,实时图像中的畸变一方面与储物空间1100的尺寸有关,另一方面与摄像头13进行图像采集时相对于储物空间1100的空间位置有关。不同规格的货柜10通常具有不同尺寸的储物空间1100,即便是控制摄像头13在相同的位置进行图像采集,呈现在实时图像中的图像畸变的程度也不同。针对同一货柜10,摄像头13在不同位置处采集到的实时图像中的畸变也不同。所以,服务器20在对实时图像进行去畸变处理时,会根据上传该实时图像的货柜10的储物空间1100的尺寸,以及该实时图像被采集时摄像头13的图像采集位置进行。
毫无疑义的是,对于任意一个货柜10而言,在其规格确定的情况下,其内部的储物空间1100的尺寸也就随之确定,并且此后储物空间1100的尺寸始终不变。在本实施例的一些示例中,货柜10可以在向服务器20发送实时图像的同时,将自身的规格也一并发送给服务器20,服务器20得到货柜10的规格也就相当于得到了该货柜10的储物空间1100的尺寸信息。在本实施例的另外一些示例中,货柜10可以直接将自己储物空间1100的尺寸信息随着实时图像一起发送给服务器20,在这种情况下,服务器20可以直接得到货柜10中储物空间1100的尺寸信息。还有一些示例中,服务器20可以存储各货柜10中储物空间1100的尺寸信息与货柜10的规格中的至少一种,在这种情况下,货柜10并不需要向服务器20发送储物空间1100的尺寸信息或者用于表征储物空间1100尺寸信息的其他信息,服务器20在接收到某一货柜10发送的实时图像时,先确定发送实时图像的是哪一个货柜10,然后通过查询数据库就可以确定出该货柜10的规格/储物空间1100的尺寸信息。
本实施例中将摄像头13采集实时图像时相对于储物空间1100的相对位置称为图像采集位置信息。在一些示例中,可以以储物空间1100中的一个点作为参考原点,如以储物空间1100的某一个顶点或者是以储物空间1100的中心作为参考原点,然后确定摄像头13拍摄实时图像时相对于该参考原点的坐标位置作为摄像头13对应的图像采集位置信息;在另一些示例中摄像头13被安装在柜门12上,在这些情况下,摄像头13的图像采集位置信息也可以通过实时图像被采集时刻柜门12的开门角度表征。在一些示例中,货柜10发送实时图像的时候,也会将该实时图像对应的图像采集位置信息发送给服务器20。不过,本领域技术人员可以理解的是,如果货柜10侧总是控制摄像头13在一个固定位置处进行实时图像的采集,那么只要货柜10与服务器20预先约定清楚该固定位置,则货柜10不需要在发送实时图像的时候一并发送图像采集位置信息。
在本实施例的一些示例中,服务器20中可以预先建立并存储若干去畸变处理模型,一个去畸变处理模型用于对一种规格的货柜10在一种图像采集位置信息下的实时图像进行去畸变处理,例如,请参见以下表1,其示出了服务器20中去畸变处理模型同:
表1
服务器20中针对A规格的货柜10,设置有Ma1与Ma2两种去畸变处理模型,其中,去畸变处理模型Ma1对应于图像采集位置信息a1,而畸变处理模型Ma2对应于图像采集位置信息a2。同时,针对B规格的货柜10,设置有Mb1与Mb2两种去畸变处理模型,其中,去畸变处理模型Ma1对应于图像采集位置信息b1,而畸变处理模型Ma2对应于图像采集位置信息b2。针对C规格的货柜10,设置有Mc1这一种去畸变处理模型,其对应的图像采集位置信息c1。
在本实施例的一些示例中,去畸变处理模型可以由图像处理工程师建立并存储。还有另外一些示例中,去畸变处理模型可以基于机器学习建立,例如由图像处理工程师提供初始模型,并向初始模型输入多个训练集(即摄像头13在相同的图像采集位置处针对同一规格的货柜10内部储物空间1100所采集到的多个图像),利用训练集对初始模型进行不断地迭代更新,并在迭代更新后利用测试集检测当前模型进行图像去畸变处理的性能,直至模型的性能达到预设要求后,停止训练,并将最新模型作为最终的去畸变处理模型。本实施例中的去畸变处理模型也通过其他任何可行的方式建立,这里不再赘述。
服务器20在接收到实时图像后,可以确定发送实时图像的货柜10的规格,以及实时图像对应的图像采集位置信息,然后根据货柜10的规格以及摄像头13的图像采集位置信息从存储的各去畸变处理模型中为该实时图像选择一个作为目标模型,随后再利用目标模型对实时图像进行处理,得到还原图像。本领域技术人员可以理解的是,如果服务器20针对某规格的货柜10仅设置了一种去畸变处理模型,例如针对C规格的货柜10,那么货柜10侧的摄像头13就只能在一种空间位置处进行图像采集,以摄像头13被设置在柜门12上为例,摄像头13就必须在柜门12处于预设开门角度(该预设开门角度也可以被扩展为一个角度范围)的情况下进行实时图像的采集。如果服务器20针对某规格的货柜10设置了两种或多种去畸变处理模型,那么货柜10侧的摄像头13就有两个或多个图像采集位置,那么对应地,在上报实时图像时,货柜10也需要随之上报实时图像对应的图像采集位置信息。
S508:服务器根据还原图像对货柜内的货品陈列情况进行评估。
服务器20对实时图像进行去畸变处理得到对应的还原图像后,可以基于还原图像对货柜10中货品的陈列情况进行评估。
在本实施例的一些示例中,服务器20可以将还原图像显示给监管人员,由监管人员根据还原图像呈现的图像内容来评估还原图像对应的货品陈列情况是否达标,服务器20只需要接收监管人员给出的评估结果即可。
在本实施例的另外一些示例中,服务器20将还原图像显示给监管人员后,可以提示监管人员从若干维度对货品陈列情况进行打分,然后服务器20根据预设的算法来确定还原图像对应的最终分值,例如服务器20计算还原图像对应的货品陈列情况在所有维度下的总分值、平均分值、加权平均分值等。计算出最终分值后,服务器20可以将该最终分值与预设分值阈值进行比较,预设分值阈值表征的是货品陈列情况达标与不达标间临界情况对应的分值,所以,如果最终分值低于预设分值阈值,则说明还原图像对应的货柜10中的货品陈列情况不达标;如果最终分值不低于预设分值阈值,则说明还原图像对应的货柜10中的货品陈列情况达标。
可以理解的是,前述两种评估方式中都是需要监管人员参与的,因此这两种评估方案无法避免监管人员主观好误对评估结果准确性的影响,尤其是第一种评估方案中,监管人员可以在无确定评价体系、无确定评价标准的情况下完全凭主观印象决定一个货柜10的货品陈列情况是否达标。为了减小,甚至是消除监管人员主观因素对评估结果准确性的影响,本实施例还提供另外一种评估方案:
针对任意一种货柜10,监管人员可以向服务器20提供标准图像,标准图像是在完全按照标准对货柜10中的货品进行陈列情况下采集到的储物空间1100的图像。服务器20可以将获取到的还原图像与标准图像进行比对,确定还原图像与标准图像的相似度,然后根据相似度的高低来评估货品陈列情况是否达标:如果二者的相似度低于预设相似度阈值,则说明还原图像对应的货柜10中的货品陈列情况不达标;如果相似度大于等于预设相似度阈值,则说明还原图像对应的货柜10中的货品陈列情况达标。
本领域技术人员可以理解的是,为了吸引消费者,提升消费者的购物兴趣,商铺中相同货柜10在不同时段内的货品陈列方案是可以变化的,例如可以应季节变化而变化,或者是跟随节日庆典氛围的变化而变化,又或者是根据货品包装的更新而变化。所以,货柜10中货品的标准陈列方案可能不只一种,在这些情况下,如果服务器20根据标准图像评估货柜10中货品陈列的标准情况,那么监管人员只需要向服务器20提供相应的标准图像就可以改变服务器20的评估标准。
在一些示例中,服务器20每一次根据还原图像评估货品陈列情况后,都可以对评过结果进行存储记录,以供监管人员查看;或者,服务器20也可以仅记录表征货品陈列情况不达标的评估结果供监管人员查看;还有一些示例中,针对各个货柜10,服务器20可以周期性(例如周期可以为一周、一个月或一个季度)输出陈列情况总结,在该陈列情况总结中体现货柜10在近期货品陈列的整体情况。
在本实施例的一些示例中,如果货柜10中的货品陈列情况不达标,服务器20还可以对该货柜10的管理者发出提示,以提醒货柜10的管理者及时进行理货。在一些示例中,服务器20可以向货柜10发送理货提示信息,在货柜10接收到该理货提示信息后,通过自己的输出单元,包括但不限于显示屏、扬声器、指示灯、蜂鸣器等几种中的至少一种,向管理者发出理货提示,管理者通过听觉或者视觉接收到货柜10发出的理货提示后,可以明白提示的含义,然后管理者及时理货,使得货品陈列达标。
在本实施例的另外一些示例中,如果货柜10中的货品陈列情况不达标,服务器20可以向管理者终端发送理货提示信息,管理者终端可以是管理者的用户终端,包括但不限于手机、PAD(平板电脑)、PDA(个人数字助理)、笔记本电脑、穿戴式设备、台式电脑等几种中的至少一种。管理者终端从服务器20侧接收到理货提示信息后,可以向管理者发出理货提示。在这些示例中,货柜10的管理者即便不在货柜10的周边,也可以了解针对货柜10的理货需求。在一些示例中,管理者终端可以通过手机等便携式终端来实施,因为管理者会携带这便携式终端移动,所以当便携式终端根据理货提示信息发出理货提示后,理货提示能够被管理者及时了解,例如在图7中,管理者的手机可以在接收到理货提示信息后通过显示界面向管理者发出理货提示。需要说明的是,本实施例中的管理者并不一定是对货柜10管理具有最高权限的人,而是指能够对货柜10中的货品进行理货的人,或者是能够调度人员来对货柜10中的货品进行理货的人。
在本实施例的一些示例中,服务器20在确定货柜10的货品陈列情况不达标时,可以同时向管理者终端与货柜10发出提示信息。
本领域技术人员可以理解的是,有些时候,一个管理者需要同时管理两个或两个以上的货柜10。例如,以货柜10为冷饮柜进行示例性说明,街边零售店中一般会部署1~2个冷饮柜,大型店铺、超市则会部署的更多,在这种情况下一个管理者可能要同时管理多个货柜10。如果理货提示由货柜10自己发出,那么管理者可以直接确定有理货需求的就是发出理货提示的货柜10;如果理货提示由管理者终端发出,则管理者终端应当向管理者指出有理货需求的是哪一个货柜10。一些示例中,服务器20向管理者终端发出理货提示信息时,会在理货提示信息中携带对应货柜10的标识信息,这样管理者终端就可以根据货柜10的标识信息发出理货提示,以使管理者根据理货提示确定当前需要对哪一个货柜10进行理货处理。
在前述示例中,货品陈列监管方法需要货柜10与服务器20配合实现,货柜10主要负责实时图像的采集与处理,而服务器20则负责对实时图像的处理与对货品陈列情况的评估,为了便于后续介绍,下文将这种由货柜10与服务器20配合实现的货品陈列监管方法称为“第一货品陈列监管方法”。在本实施例的另外一些示例中,货品陈列监管方法也可以由货柜10自己独立实现,例如,在这些示例示例中,货柜10控制摄像头13采集到实时图像后,可以在本地对实时图像进行去畸变处理得到还原图像,然后根据还原图像对本货柜10内货品的陈列情况进行评估。一些示例中,货柜10还可以在评估结果表征货品陈列情况不达标的情况下,发出理货提示,和/或向管理者终端发送理货提示信息,以使管理者终端根据理货提示信息发出理货提示,进而让本货柜10的管理者及时根据理货提示进行理货处理。为了便于介绍,下文将这种不需要服务器20参与的货品陈列监管方法称为“第二货品陈列监管方法”。
对于第二货品陈列监管方法中货柜10自己对实时图像进行去畸变处理的细节、根据还原图像评估货品陈列情况的细节,可以参照前述示例中第一货品陈列监管方法对服务器20侧相关处理过程的介绍,这里不再赘述。
考虑到货柜10本身的处理资源、存储资源有限,因此在本实施例的一些示例中,货柜10侧虽然会存储针对实时图像的去畸变处理模型,但一般仅会存储储量较少的去畸变处理模型,例如部分示例中,一个货柜10仅存储一种去畸变处理模型。在这种情况下,摄像头13必须在指定的图像采集位置处采集实时图像,例如,如果摄像头13安装在货柜10的柜门12上,货柜10存储的去畸变处理模型是针对摄像头13在柜门12的开门角度为60°时的去畸变处理模型,那么该货柜10就只能控制摄像头13在柜门12的开门角度为60°时采集实时图像。
本实施例还提供一种计算机可读存储介质,该计算机可读存储介质中存储有第一计算机程序、第二计算机程序以及第三计算机程序中的至少一个,其中,第一计算机程序可供一个或多个处理器执行以实现前述第一货品陈列监管方法中货柜10侧的流程,第二计算机程序可供一个或多个处理器执行以实现前述第一货品陈列监管方法中服务器20侧的流程,第三计算机程序可供一个或多个处理器执行以实现前述第二货品陈列监管方法的流程。
在本实施例的一些示例中,货柜10的第一存储器142中存储有第一计算机程序,服务器20的第二存储器22中存储有第二计算机程序,货柜10与服务器20通过配合可以实现前述第一货品陈列监管方法。在本实施例的另一些示例中,货柜10的第一存储器142中存储有第三计算机程序,第一处理器141执行第三计算机程序可以实现前述第二货品陈列监管方法。
在本实施例中,存储器(第一存储器142与第二存储器22中的至少一个)可用于存储指令、程序、代码、代码集或指令集。存储器可以包括存储程序区和存储数据区,其中,存储程序区可存储用于实现操作***的指令、用于至少一个功能的指令,以及用于实现上述实施例提供的货品陈列监管方法方法的指令等;存储数据区可存储上述实施例提供的货品陈列监管方法方法中涉及到的数据等。
处理器可以包括一个或者多个处理核心。处理器通过运行或执行存储在存储器内的指令、程序、代码集或指令集,调用存储在存储器内的数据,执行本申请的各种功能和处理数据。处理器可以为特定用途集成电路(Application Specific Integrated Circuit,ASIC)、数字信号处理器(Digital Signal Processor,DSP)、数字信号处理装置(DigitalSignal Processing Device,DSPD)、可编程逻辑装置(Programmable Logic Device,PLD)、现场可编程门阵列(Field Programmable Gate Array,FPGA)、中央处理器(CentralProcessing Unit,CPU)、控制器、微控制器和微处理器中的至少一种。可以理解地,对于不同的设备,用于实现上述处理器功能的电子器件还可以为其它,本申请实施例不作具体限定。
以上所述,以上实施例仅用以对本申请的技术方案进行了详细介绍,但以上实施例的说明只是用于帮助理解本申请的方法及其核心思想,不应理解为对本申请的限制。本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本申请的保护范围之内。
Claims (10)
1.一种货品陈列监管方法,其特征在于,包括:
控制摄像头对货柜内的储物空间进行图像采集,以获取所述货柜内部的实时图像;
将所述实时图像上传至服务器,以供所述服务器根据所述储物空间的尺寸信息及所述摄像头的图像采集位置信息对所述实时图像进行去畸变处理,并根据去畸变处理得到的还原图像评估所述货柜内的货品陈列情况,所述图像采集位置信息表征所述摄像头采集所述实时图像时同所述储物空间的相对位置。
2.如权利要求1所述的货品陈列监管方法,其特征在于,所述货柜包括提供所述储物空间的柜体及同所述柜体转动连接的柜门,所述柜门至少部分区域透明,所述摄像头设置于所述柜门朝向所述柜体的一侧;所述控制摄像头对货柜内的储物空间进行图像采集包括:
监测所述柜门的状态;
在所述柜门处于开启状态的情况下,控制所述摄像头对所述储物空间进行图像采集。
3.如权利要求2所述的货品陈列监管方法,其特征在于,所述在所述柜门处于开启状态的情况下,控制所述摄像头对所述储物空间进行图像采集包括:
在所述柜门处于开启状态的情况下,监测所述柜门的开门角度;
在所述开门角度达到预设开门角度时,控制所述摄像头对所述储物空间进行图像采集。
4.如权利要求1至3任一项所述的货品陈列监管方法,其特征在于,所述将所述实时图像上传至服务器之后,所述货品陈列方法还包括:
接收所述服务器发送的理货提示信息;
根据理货提示信息发出理货提示。
5.一种货品陈列监管方法,其特征在于,包括:
接收货柜发送的实时图像;
根据所述货柜中储物空间的尺寸信息及摄像头的图像采集位置信息对所述实时图像进行去畸变处理得到还原图像,所述图像采集位置信息表征所述摄像头采集所述实时图像时同所述储物空间的相对位置;
根据所述还原图像对所述货柜内的货品陈列情况进行评估。
6.如权利要求5所述的货品陈列监管方法,其特征在于,所述根据所述货柜中储物空间的尺寸信息及摄像头的图像采集位置信息对所述实时图像进行去畸变处理得到还原图像之前,还包括:
针对每种尺寸的货柜,建立若干与图像采集位置关联的去畸变处理模型;
所述根据所述储物空间的尺寸信息及摄像头的图像采集位置信息对所述实时图像进行去畸变处理得到还原图像包括:
根据所述储物空间的尺寸信息与所述摄像头的图像采集位置信息从若干所述去畸变处理模型中选择一个作为目标模型;
采用目标模型对所述实时图像进行去畸变处理,以得到所述还原图像。
7.如权利要求5或6所述的货品陈列监管方法,其特征在于,所述根据所述还原图像对所述货柜内的货品陈列情况进行评估之后,所述货品陈列监管方法还包括:
若评估结果表征所述货柜内货品陈列情况不达标,则向所述货柜与管理者终端中的至少一个发送理货提示信息,以提示所述货柜的管理者对所述货柜进行理货处理,所述管理者终端为所述货柜的管理者的用户终端。
8.一种货品陈列监管方法,其特征在于,包括:
控制摄像头对货柜内的储物空间进行图像采集,以获取所述货柜内部的实时图像;
根据所述储物空间的尺寸信息及摄像头的图像采集位置信息对所述实时图像进行去畸变处理得到还原图像,所述图像采集位置信息表征所述摄像头采集所述实时图像时同所述货柜的储物空间的相对位置;
根据所述还原图像对所述货柜内的货品陈列情况进行评估;
若评估结果表征所述货柜内货品陈列情况不达标,则发出理货提示。
9.一种货柜,其特征在于,包括柜体、摄像头以及设于所述柜体上的工控机,所述柜体内设有储物空间,所述摄像头被配置为对所述储物空间进行图像采集;
所述工控机包括第一处理器、第一存储器以及第一通信总线,所述第一存储器、所述摄像头分别通过所述第一通信总线与所述第一处理器通信连接,所述第一存储器中存储有第一计算机程序、第二计算机程序中的至少一个,其中,所述第一计算机程序可供所述第一处理器执行,以实现如权利要求1至4任一项所述的货品陈列监管方法;所述第二计算机程序可供所述第一处理器执行,以实现如权利要求8所述的货品陈列监管方法。
10.一种服务器,其特征在于,包括第二处理器、第二存储器以及第二通信总线,所述第二处理器与所述第二存储器通过所述第二通信总线通信连接,所述第二存储器中存储有第三计算机程序,所述第三计算机程序可供所述第二处理器执行,以实现如权利要求5至7任一项所述的货品陈列监管方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310946934.3A CN116957979A (zh) | 2023-07-29 | 2023-07-29 | 一种货品陈列监管方法、货柜及服务器 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310946934.3A CN116957979A (zh) | 2023-07-29 | 2023-07-29 | 一种货品陈列监管方法、货柜及服务器 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116957979A true CN116957979A (zh) | 2023-10-27 |
Family
ID=88460220
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310946934.3A Pending CN116957979A (zh) | 2023-07-29 | 2023-07-29 | 一种货品陈列监管方法、货柜及服务器 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116957979A (zh) |
Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102610020A (zh) * | 2012-01-11 | 2012-07-25 | 广州市地下铁道总公司 | 硬币双面图像识别装置及其识别方法 |
CN108416901A (zh) * | 2018-03-27 | 2018-08-17 | 合肥美的智能科技有限公司 | 智能货柜内货品识别方法及装置、智能货柜 |
CN108765702A (zh) * | 2018-05-23 | 2018-11-06 | 济南每日优鲜便利购网络科技有限公司 | 自动售货机 |
CN108986310A (zh) * | 2018-07-10 | 2018-12-11 | 合肥美的智能科技有限公司 | 一种自动售货机及其管理方法 |
CN109285273A (zh) * | 2017-07-19 | 2019-01-29 | 吴贵文 | 鲜活农产品自动售卖***及其方法 |
CN109767575A (zh) * | 2018-12-12 | 2019-05-17 | 北京戴纳实验科技有限公司 | 一种智能货柜的管理*** |
CN111590562A (zh) * | 2020-04-28 | 2020-08-28 | 上海悠络客电子科技股份有限公司 | 一种基于机器人的无人店货柜监控*** |
CN111932775A (zh) * | 2020-04-22 | 2020-11-13 | 金华苏夏信息技术有限公司 | 基于图像捕捉的售货机查缺*** |
CN112990115A (zh) * | 2021-04-21 | 2021-06-18 | 广州市玄武无线科技股份有限公司 | 一种用于冰柜陈列识别的拍摄方法及*** |
CN113033286A (zh) * | 2021-01-28 | 2021-06-25 | 上海耳序信息技术有限公司 | 一种货柜内商品的识别方法及装置 |
CN114387497A (zh) * | 2021-12-31 | 2022-04-22 | 合肥美的智能科技有限公司 | 补货信息的推送方法、装置、服务器和可读存储介质 |
CN114399258A (zh) * | 2022-01-27 | 2022-04-26 | 黄峰 | 一种智能货架、基于智能货架组成的仓储***及其管理方法 |
CN114500832A (zh) * | 2021-12-31 | 2022-05-13 | 合肥美的智能科技有限公司 | 储物柜、图像采集方法、可读存储介质和计算机程序产品 |
CN114511820A (zh) * | 2022-04-14 | 2022-05-17 | 美宜佳控股有限公司 | 货架商品检测方法、装置、计算机设备及存储介质 |
-
2023
- 2023-07-29 CN CN202310946934.3A patent/CN116957979A/zh active Pending
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102610020A (zh) * | 2012-01-11 | 2012-07-25 | 广州市地下铁道总公司 | 硬币双面图像识别装置及其识别方法 |
CN109285273A (zh) * | 2017-07-19 | 2019-01-29 | 吴贵文 | 鲜活农产品自动售卖***及其方法 |
CN108416901A (zh) * | 2018-03-27 | 2018-08-17 | 合肥美的智能科技有限公司 | 智能货柜内货品识别方法及装置、智能货柜 |
CN108765702A (zh) * | 2018-05-23 | 2018-11-06 | 济南每日优鲜便利购网络科技有限公司 | 自动售货机 |
CN108986310A (zh) * | 2018-07-10 | 2018-12-11 | 合肥美的智能科技有限公司 | 一种自动售货机及其管理方法 |
CN109767575A (zh) * | 2018-12-12 | 2019-05-17 | 北京戴纳实验科技有限公司 | 一种智能货柜的管理*** |
CN111932775A (zh) * | 2020-04-22 | 2020-11-13 | 金华苏夏信息技术有限公司 | 基于图像捕捉的售货机查缺*** |
CN111590562A (zh) * | 2020-04-28 | 2020-08-28 | 上海悠络客电子科技股份有限公司 | 一种基于机器人的无人店货柜监控*** |
CN113033286A (zh) * | 2021-01-28 | 2021-06-25 | 上海耳序信息技术有限公司 | 一种货柜内商品的识别方法及装置 |
CN112990115A (zh) * | 2021-04-21 | 2021-06-18 | 广州市玄武无线科技股份有限公司 | 一种用于冰柜陈列识别的拍摄方法及*** |
CN114387497A (zh) * | 2021-12-31 | 2022-04-22 | 合肥美的智能科技有限公司 | 补货信息的推送方法、装置、服务器和可读存储介质 |
CN114500832A (zh) * | 2021-12-31 | 2022-05-13 | 合肥美的智能科技有限公司 | 储物柜、图像采集方法、可读存储介质和计算机程序产品 |
CN114399258A (zh) * | 2022-01-27 | 2022-04-26 | 黄峰 | 一种智能货架、基于智能货架组成的仓储***及其管理方法 |
CN114511820A (zh) * | 2022-04-14 | 2022-05-17 | 美宜佳控股有限公司 | 货架商品检测方法、装置、计算机设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11188973B2 (en) | In-store item alert architecture | |
JP6224065B2 (ja) | 貯蔵装置の取出し、充填、および/または充填状態を検出するための充填状態検出装置を有する品物用貯蔵装置 | |
JP2019070467A (ja) | 冷蔵庫 | |
US20220284684A1 (en) | Augmented reality feedback of inventory for an appliance | |
CN208225185U (zh) | 一种自助购物柜及自助购物*** | |
EP3734205B1 (en) | Intelligent refrigerator and information reminder method based on intelligent refrigerator | |
CN105718854B (zh) | 远程食材管理*** | |
JP2018035983A (ja) | 食品貯蔵庫、庫内撮影システム | |
JP2015523293A (ja) | 充填状態検出装置およびユーザ検出装置を含む貯蔵設備をモニタリングし、制御するためのコンピュータネットワーク | |
CN105823778A (zh) | 物品识别方法、装置及*** | |
US20200149797A1 (en) | Food management system | |
US20220252338A1 (en) | Refrigerator appliance having a weight-detecting drawer assembly | |
CN109241883A (zh) | 一种基于自动售货机的退货控制方法及其装置 | |
JP2019138493A (ja) | 冷蔵庫、商品発注方法及び商品発注システム | |
CN110123082A (zh) | 一种智能自助生鲜柜及其控制方法 | |
US9949576B2 (en) | Smart refrigerated counter system | |
CN109187618B (zh) | 物流箱监测机构及*** | |
CN116957979A (zh) | 一种货品陈列监管方法、货柜及服务器 | |
CN210493494U (zh) | 一种智能自助生鲜柜 | |
CN110969763A (zh) | 一种卧式冷冻设备及其进销存管理使用方法 | |
US20220318816A1 (en) | Speech, camera and projector system for monitoring grocery usage | |
KR20080000291A (ko) | 지그비를 이용한 쇼케이스 관리 시스템 | |
TWI601083B (zh) | 基於離線商務模式的購物系統 | |
CN209750551U (zh) | 一种展示货架 | |
US20220268513A1 (en) | Refrigerator appliance having a weight-detecting shelf assembly |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |