JP7424764B2

JP7424764B2 - theft deterrent device

Info

Publication number: JP7424764B2
Application number: JP2019122038A
Authority: JP
Inventors: 健一郎廣戸
Original assignee: Nomura Research Institute Ltd
Current assignee: Nomura Research Institute Ltd
Priority date: 2019-06-28
Filing date: 2019-06-28
Publication date: 2024-01-30
Anticipated expiration: 2039-06-28
Also published as: JP2021009488A

Description

本発明は、盗難抑止装置に関する。 The present invention relates to a theft deterrent device.

従来、店舗のＰＯＳなどのレジスタにおける省力化、省人化に係る技術が多く提案されている（例えば、特許文献１、２参照）。近年では、店舗におけるレジ精算を完全に廃止したシステムも登場している（例えば、非特許文献１参照）。 BACKGROUND ART Many technologies have been proposed to save labor and manpower at registers such as POS in stores (for example, see Patent Documents 1 and 2). In recent years, systems have been introduced that completely eliminate cash register payments at stores (for example, see Non-Patent Document 1).

特開平１０－１６２２４４号公報Japanese Patent Application Publication No. 10-162244 特開２０１０－０３９５４５号公報Japanese Patent Application Publication No. 2010-039545

https://www.amazon.com/b?ie=UTF8&node=16008589011、２０１９年６月２５日検索https://www.amazon.com/b?ie=UTF8&node=16008589011, retrieved June 25, 2019

非特許文献１に記載されるようなシステムでは、レジ精算を完全に廃止する代わりに、店舗内に莫大な数のセンサを設け、客の挙動をリアルタイムでトラックしている。したがって、初期費用が高くなることから導入へのハードルは高い。 In the system described in Non-Patent Document 1, instead of completely abolishing cash register payment, a huge number of sensors are installed in the store to track customer behavior in real time. Therefore, the hurdles to introduction are high due to the high initial cost.

本発明はこうした課題に鑑みてなされたものであり、その目的は、店舗におけるレジスタの省人化を図りつつ、システム導入の費用を抑えることができる盗難抑止技術の提供にある。 The present invention has been made in view of these problems, and its purpose is to provide a theft prevention technique that can reduce the cost of introducing the system while reducing the manpower required for registers in stores.

本発明のある態様は、盗難抑止装置に関する。この盗難抑止装置は、セルフ式のレジスタを備える店舗における客の存否を判定する判定手段と、判定手段によって客が一人も存在しないと判定されている不存在期間が到来するごとに、その不存在期間の直前の、判定手段によって客が存在すると判定されている存在期間における商品の減少数を取得する取得手段と、取得手段によって取得された減少数と、存在期間においてレジスタで決済された商品の数と、が整合しない場合、所定の対策処理を実行する実行手段と、を備える。 One aspect of the present invention relates to a theft deterrent device. This theft deterrent device includes a determination means for determining the presence or absence of a customer in a store equipped with a self-service cash register, and a determination means for determining the presence or absence of a customer at a store equipped with a self-service cash register. An acquisition means for acquiring the decreased number of products in the existence period in which the customer is determined to exist by the determination means immediately before the period , the decreased number acquired by the acquisition means, and the number of products settled at the register during the existence period. and execution means for executing a predetermined countermeasure process if the numbers do not match.

なお、以上の構成要素の任意の組み合わせや、本発明の構成要素や表現を装置、方法、システム、コンピュータプログラム、コンピュータプログラムを格納した記録媒体などの間で相互に置換したものもまた、本発明の態様として有効である。 Note that the present invention also includes any combination of the above-mentioned constituent elements, and mutual substitution of constituent elements and expressions of the present invention among devices, methods, systems, computer programs, recording media storing computer programs, etc. It is effective as an aspect of

本発明によれば、店舗におけるレジスタの省人化を図りつつ、システム導入の費用を抑えることができる。 According to the present invention, it is possible to reduce the manpower required for registering at a store while reducing the cost of introducing the system.

実施の形態に係る方式が導入された店舗の模式図である。1 is a schematic diagram of a store in which a system according to an embodiment has been introduced. 売り場の様子を示す模式図である。It is a schematic diagram showing the state of the sales floor. 客がセルフレジで精算を行っているときの様子を示す図である。FIG. 3 is a diagram illustrating a situation where a customer is paying at a self-checkout. 実施の形態に係る盗難抑止装置のハードウエア構成図である。FIG. 1 is a hardware configuration diagram of a theft deterrent device according to an embodiment. 実施の形態に係る盗難抑止装置の機能および構成を示すブロック図である。1 is a block diagram showing the functions and configuration of a theft deterrent device according to an embodiment. FIG. 図５の盗難抑止装置の各部が行う処理を説明するための模式図である。FIG. 6 is a schematic diagram for explaining processing performed by each part of the theft deterrent device in FIG. 5;

以下、各図面に示される同一または同等の構成要素、部材、処理には、同一の符号を付するものとし、適宜重複した説明は省略する。また、各図面において説明上重要ではない部材の一部は省略して表示する。 Hereinafter, the same or equivalent components, members, and processes shown in each drawing will be denoted by the same reference numerals, and redundant explanations will be omitted as appropriate. Further, in each drawing, some members that are not important for the explanation are omitted.

実施の形態では、決済業務を無人化または省人化するコンセプトとして、既存の無人店舗より低コストで実現可能な、盗難抑止機能付きセルフレジ店舗という方式を提案する。この方式は、既存の無人店舗のようにほぼリアルタイムで客をトラッキングするのではなく、客がピックアップした商品と支払い済み商品とに差異が発生した際に、事後的にオペレータの目視やＡＩなどにより確認するというコンセプトで実現される。この方式によると、人の位置を取得するための大量のセンサが不要になるため、より低コストで実現可能である。特に、この方式は、閉鎖商圏の店舗などの比較的来客が少なく店舗に客がいない時間帯が頻繁に生じる店舗に適用された場合、無人化または省人化によるコストダウンの恩恵を得ることができると同時に盗難を効果的に抑制できるので好適である。 In this embodiment, as a concept for making payment operations unmanned or labor-saving, we propose a system of self-checkout stores with theft prevention function, which can be realized at a lower cost than existing unmanned stores. This method does not track customers in near real time like existing unmanned stores, but instead uses operators' visual inspection and AI to detect discrepancies between the products picked up by customers and the products they have already paid for. It is realized with the concept of confirmation. This method eliminates the need for a large number of sensors to obtain the position of a person, so it can be realized at a lower cost. In particular, when this method is applied to stores with relatively few customers, such as stores in closed commercial areas, where there are frequent periods when there are no customers in the store, it is possible to benefit from cost reductions due to unmanned operations or labor savings. This is preferable because it can effectively suppress theft at the same time.

図１は、実施の形態に係る方式が導入された店舗２の模式図である。店舗２には、店舗の出入り口６と、セルフレジ４と、商品棚８、１０と、が配置されており、店舗２内には客１８がいる。加えて、店舗２には複数の監視カメラ１２、１４、１６が設置されている。店舗２はセルフ式のレジスタであるセルフレジ４を備え、基本的にセルフレジ４には店員はいない。店舗２は無人の店舗であってもよいし、セルフレジ４以外の場所には商品の棚出しや廃棄を担当する管理用の店員がいてもよい。セルフレジ４および監視カメラ１２、１４、１６は、図１では不図示の盗難抑止装置１０２とイントラネットやＷｉＦｉやインターネットなどのネットワークを介して接続される。盗難抑止装置１０２は店舗２に設けられてもよいし、店舗２の外のデータセンタや管理サイトに設けられてもよい。 FIG. 1 is a schematic diagram of a store 2 in which the system according to the embodiment has been introduced. A store entrance 6, a self-checkout register 4, and product shelves 8 and 10 are arranged in the store 2, and there are customers 18 inside the store 2. In addition, a plurality of surveillance cameras 12, 14, and 16 are installed in the store 2. The store 2 is equipped with a self-service register 4, and basically there is no clerk at the self-register 4. The store 2 may be an unmanned store, or there may be a management clerk in charge of stocking and disposing of products at a location other than the self-checkout register 4. The self-checkout register 4 and the surveillance cameras 12, 14, and 16 are connected to a theft deterrent device 102 (not shown in FIG. 1) via a network such as an intranet, WiFi, or the Internet. The theft deterrent device 102 may be provided in the store 2, or may be provided in a data center or management site outside the store 2.

客１８が出入り口６から入店すると、出入り口６に備えられた客識別センサにより客１８の客ＩＤが取得され、取得された客ＩＤを含む入店信号が盗難抑止装置１０２に送信される。このような客識別センサは公知であり、例えば顔認証、指紋認証、客１８のスマートフォンなどの携帯端末との通信などにより実現される。なお、このような入店時のＩＤ認証は行われなくてもよく、あるいは、ＩＤ認証の代わりに出入り口６付近に入退店を把握するセンサを設置し、客が店舗２内にいるかいないかを判定してもよい。客１８が商品棚８、１０から商品を取ると、備え付けの棚センサによりいつどの商品が何個取られたかを示す情報が取得され、盗難抑止装置１０２に送信される。このような棚センサ自体は公知であり、例えば重量センサ、ＴｏＦセンサ、スライダ、カメラなどにより実現される。 When a customer 18 enters the store through the entrance/exit 6, the customer ID of the customer 18 is acquired by a customer identification sensor provided at the entrance/exit 6, and an entry signal including the acquired customer ID is transmitted to the theft deterrent device 102. Such a customer identification sensor is publicly known, and is realized by, for example, face authentication, fingerprint authentication, communication with a mobile terminal such as a smartphone of the customer 18, or the like. Note that such ID authentication may not be required when entering the store, or instead of ID authentication, a sensor may be installed near the entrance/exit 6 to detect when a customer enters or leaves the store, and it is possible to detect whether or not a customer is inside the store 2. may be determined. When a customer 18 takes a product from the product shelves 8, 10, information indicating when and how many products were taken is acquired by a built-in shelf sensor and transmitted to the theft deterrent device 102. Such a shelf sensor itself is well known and is realized by, for example, a weight sensor, a ToF sensor, a slider, a camera, or the like.

客１８が店舗２内で買い物をしている間、監視カメラ１２、１４、１６は店舗２内の映像を記録し、盗難抑止装置１０２に送信する。客１８は購入希望の商品を商品棚８、１０から取り、セルフレジ４で精算などの決済処理を行う。決済が完了すると客１８は出入り口６から出て行く。客１８が出入り口６から退店すると、出入り口６に備えられた客識別センサにより客１８の客ＩＤが取得され、取得された客ＩＤを含む退店信号が盗難抑止装置１０２に送信される。なお、このような退店時のＩＤ認証は行われなくてもよい。 While the customer 18 is shopping inside the store 2, the surveillance cameras 12, 14, 16 record images inside the store 2 and transmit them to the theft deterrent device 102. The customer 18 takes the product he or she wishes to purchase from the product shelves 8 and 10 and performs payment processing such as payment at the self-checkout register 4. When the payment is completed, the customer 18 exits through the doorway 6. When the customer 18 leaves the store through the entrance/exit 6, the customer ID of the customer 18 is acquired by a customer identification sensor provided at the entrance/exit 6, and a store exit signal including the acquired customer ID is transmitted to the theft deterrent device 102. Note that such ID authentication does not need to be performed when leaving the store.

図２および図３は実施の形態に係る方式を説明するための図である。図２は、売り場の様子を示す模式図である。売り場には、３種類の商品Ａ、Ｂ、Ｃがそれぞれ棚に陳列されている。例えば、商品Ａは、監視カメラ２２が監視している棚２０に置かれている。客がこれらの棚から商品Ａを一個、商品Ｂを一個、商品Ｃを一個、取ったとする。 2 and 3 are diagrams for explaining the system according to the embodiment. FIG. 2 is a schematic diagram showing the state of the sales floor. In the sales floor, three types of products A, B, and C are displayed on shelves. For example, product A is placed on a shelf 20 that is monitored by a surveillance camera 22. Suppose that a customer takes one product A, one product B, and one product C from these shelves.

図３は、客１８がセルフレジ４で精算を行っているときの様子を示す図である。客１８は棚から取った商品Ａ一個と商品Ｂ一個とをセルフレジ４に登録し、その代金を支払うが、商品Ｃ一個を万引き、すなわち支払いせずに持ち出そうとしている。盗難抑止装置１０２は、店舗２に客１８が入店した後の商品の減少数を把握する。盗難抑止装置１０２は、売り場での商品の減少数と客１８の商品の購入数とを突合し、それらが整合しない（例えば、一致しない）場合、セルフレジ４または遠隔の監視装置にアラートを出力し、客１８自身または管理者が確認できるようにする。図３の例では、客１８がセルフレジ４で精算する際に、盗難抑止装置１０２はセルフレジ４のディスプレイに客１８への警告を表示させる。該警告は、警告内容を示すテキストと、監視カメラで撮像した客１８の代表的な画像と、を含む。 FIG. 3 is a diagram showing the customer 18 making payment at the self-checkout register 4. Customer 18 registers one item A and one item B that he took from the shelf at the self-checkout register 4 and pays for them, but he tries to shoplift one item C, that is, takes it out without paying for it. The theft deterrent device 102 grasps the decrease in the number of products after the customer 18 enters the store 2. The theft deterrent device 102 compares the reduced number of products on the sales floor with the number of products purchased by the customer 18, and if they do not match (for example, do not match), outputs an alert to the self-checkout register 4 or a remote monitoring device, The customer 18 or the administrator can confirm this. In the example of FIG. 3, when the customer 18 pays the bill at the self-checkout register 4, the theft deterrent device 102 displays a warning to the customer 18 on the display of the self-checkout register 4. The warning includes text indicating the content of the warning and a representative image of the customer 18 taken by a surveillance camera.

本実施の形態では、来客のリアルタイムのトラッキングは行わない。したがって、大量のＴｏＦセンサを設けることが不要となる。また、売り場では棚センサにより商品の増減数を把握し、また増減の前後を監視カメラで録画し、後で確認しやすいようにＡＩ（Artificial Intelligence）などを用いて編集する。 In this embodiment, real-time tracking of visitors is not performed. Therefore, it becomes unnecessary to provide a large number of ToF sensors. Additionally, in the sales floor, shelf sensors are used to track increases and decreases in the number of products, and surveillance cameras record before and after increases and decreases, and the data is edited using AI (Artificial Intelligence) to make it easier to check later.

客１８が店舗２に入店してからセルフレジ４で精算するまで店舗２に他の客の来店が無かった場合、被疑者は客１８に絞られるので、客１８がセルフレジ４で精算しているときに警告を出力することができる。他の客の来店があった場合は、客１８など全ての客の精算が終了した後に商品数の突合を行い、違算がある場合に店舗２の管理者に警告を行う。管理者は監視カメラ２２等の映像を確認して被疑者を特定し、所定の盗難対応処理を行う。 If there were no other customers in store 2 from the time customer 18 entered store 2 until the time he paid at self-checkout 4, the suspect would be narrowed down to customer 18, so customer 18 would have paid at self-checkout 4. A warning can be output when When other customers come to the store, the number of products is compared after all customers including customer 18 have finished paying, and if there is a miscalculation, a warning is given to the manager of store 2. The administrator checks the images from the surveillance camera 22, etc., identifies the suspect, and performs predetermined theft response processing.

図４は、実施の形態に係る盗難抑止装置１０２のハードウエア構成図である。盗難抑止装置１０２は、メモリ１１０と、プロセッサ１１２と、通信インタフェース１１４と、ディスプレイ１１６と、入力インタフェース１１１８と、を備える。これらの要素はそれぞれバス１２０に接続され、バス１２０を介して互いに通信する。 FIG. 4 is a hardware configuration diagram of the theft deterrent device 102 according to the embodiment. Theft deterrent device 102 includes a memory 110, a processor 112, a communication interface 114, a display 116, and an input interface 1118. These elements are each connected to a bus 120 and communicate with each other via the bus 120.

メモリ１１０は、データやプログラムを記憶するための記憶領域である。データやプログラムは、メモリ１１０に恒久的に記憶されてもよいし、一時的に記憶されてもよい。プロセッサ１１２は、メモリ１１０に記憶されているプログラムを実行することにより、盗難抑止装置１０２の各種機能を実現する。通信インタフェース１１４は、盗難抑止装置１０２の外部との間でデータの送受信を行うためのインタフェースである。通信インタフェース１１４はネットワークと接続され、ネットワークを介して、セルフレジ４や監視カメラ１２、１４、１６や出入り口６の客識別センサや商品棚８、１０の棚センサとデータをやりとりする。ディスプレイ１１６は、各種情報を表示するためのデバイスである。入力インタフェース１１８は、本サービスの管理者からの入力を受け付けるためのデバイスである。 Memory 110 is a storage area for storing data and programs. Data and programs may be stored permanently or temporarily in memory 110. The processor 112 implements various functions of the theft deterrent device 102 by executing programs stored in the memory 110. The communication interface 114 is an interface for transmitting and receiving data to and from the outside of the theft deterrent device 102. The communication interface 114 is connected to a network, and exchanges data with the self-checkout register 4, surveillance cameras 12, 14, and 16, customer identification sensors at the doorway 6, and shelf sensors on the product shelves 8 and 10 via the network. Display 116 is a device for displaying various information. The input interface 118 is a device for receiving input from the administrator of this service.

図５は、実施の形態に係る盗難抑止装置１０２の機能および構成を示すブロック図である。ここに示す各ブロックは、ハードウエア的には、コンピュータのＣＰＵをはじめとする素子や機械装置で実現でき、ソフトウエア的にはコンピュータプログラム等によって実現されるが、ここでは、それらの連携によって実現される機能ブロックを描いている。したがって、これらの機能ブロックはハードウエア、ソフトウエアの組合せによっていろいろなかたちで実現できることは、本明細書に触れた当業者には理解されるところである。 FIG. 5 is a block diagram showing the functions and configuration of the theft deterrent device 102 according to the embodiment. In terms of hardware, each block shown here can be realized by elements and mechanical devices such as a computer's CPU, and in terms of software, it can be realized by computer programs, etc., but here, we will explain how they are realized by their cooperation. It depicts the functional blocks that will be implemented. Therefore, those skilled in the art who have been exposed to this specification will understand that these functional blocks can be realized in various ways by combining hardware and software.

盗難抑止装置１０２は、存否判定部１２０と、減少数取得部１２２と、整合判定部１２４と、警告実行部１２６と、映像データ保持部１２８と、を備える。映像データ保持部１２８は、店舗２に設置された監視カメラ１２、１４、１６、２２、３４から取得された映像データを保持する。 The theft deterrent device 102 includes a presence/absence determination section 120, a decrease number acquisition section 122, a consistency determination section 124, a warning execution section 126, and a video data storage section 128. The video data holding unit 128 holds video data acquired from the surveillance cameras 12 , 14 , 16 , 22 , and 34 installed in the store 2 .

図６は、図５の盗難抑止装置１０２の各部が行う処理を説明するための模式図である。以下、図５および図６を参照して盗難抑止装置１０２の各部の機能を説明する。 FIG. 6 is a schematic diagram for explaining the processing performed by each part of the theft deterrent device 102 of FIG. 5. As shown in FIG. The functions of each part of the theft deterrent device 102 will be described below with reference to FIGS. 5 and 6.

店舗２では、店舗２内に客が存在すると判定されている存在期間と、店舗２内に客が存在しないと判定されている不存在期間と、が繰り返される。図６において「不存在期間」とされていない期間は全て存在期間である。図６には二つの不存在期間とそれらで区切られた三つの存在期間とが示されている。 In the store 2, an existence period in which it is determined that there is a customer in the store 2 and a non-existence period in which it is determined that there is no customer in the store 2 are repeated. In FIG. 6, all periods that are not marked as "non-existing periods" are existing periods. FIG. 6 shows two periods of absence and three periods of existence separated by them.

存否判定部１２０は、店舗２における客の存否を判定する。存否判定部１２０は、出入り口６の客識別センサから受信する入店信号および退店信号に基づいて、店舗２内の客の存否および存在するのであればその人数を判定してもよい。あるいはまた、存否判定部１２０は、監視カメラ１２、１４、１６、２２、３４からリアルタイムで得られる映像を解析することで、店舗２内の客の存否および存在するのであればその人数を判定してもよい。 The presence/absence determination unit 120 determines the presence or absence of customers in the store 2 . The presence/absence determination unit 120 may determine whether or not there are customers in the store 2 and, if so, the number of customers, based on the store entry signal and store exit signal received from the customer identification sensor at the entrance/exit 6. Alternatively, the presence/absence determination unit 120 analyzes images obtained in real time from the surveillance cameras 12, 14, 16, 22, and 34 to determine the presence or absence of customers in the store 2, and if so, the number of customers. It's okay.

減少数取得部１２２は、不存在期間が到来するごとに、その不存在期間の直前の存在期間における商品３６の減少数を取得する。減少数取得部１２２は、不存在期間が到来すると、棚３２に陳列されている商品３６の個数を、棚センサ３０により、または棚３２を監視する監視カメラ３４からの映像により、取得する。減少数取得部１２２は、今回の不存在期間において取得された商品３６の個数を、前回の不存在期間において取得された商品３６の個数から減算した結果を、商品３６の減少数として算出する。 The decrease number acquisition unit 122 acquires the decrease in the number of products 36 in the existence period immediately before the non-existence period every time the non-existence period arrives. When the non-existence period arrives, the decrease number acquisition unit 122 acquires the number of products 36 displayed on the shelf 32 using the shelf sensor 30 or the video from the surveillance camera 34 that monitors the shelf 32. The decrease number acquisition unit 122 calculates the result of subtracting the number of products 36 acquired in the current non-existence period from the number of products 36 acquired in the previous non-existence period as the decreased number of products 36.

なお、本実施の形態では商品の個数を不存在期間の間で比較することによって減少数を算出する場合を説明したが、これに限られない。他の実施の形態では、存在期間において棚３２から商品３６がとられる度に棚センサ３０がどの商品が何個とられたかを示す情報を生成して盗難抑止装置１０２に送信してもよい。減少数取得部１２２は、そのように受信した情報を集計することによって減少数を算出してもよい。 In this embodiment, a case has been described in which the decrease in the number of products is calculated by comparing the number of products between periods of non-existence, but the present invention is not limited to this. In another embodiment, each time an item 36 is taken from the shelf 32 during the existence period, the shelf sensor 30 may generate information indicating which item and how many items have been taken and send it to the theft deterrent device 102. The decrease number acquisition unit 122 may calculate the decrease number by totaling the information received in this way.

図６の例では、存在期間の始めに甲が、次に乙が来店し、商品３６がとられたことを棚センサ３０が検知する事象が二回発生した後、まず乙が精算して退店し、存在期間の終わりに甲が精算して退店する。 In the example of FIG. 6, after an event occurs twice in which the shelf sensor 30 detects that the product 36 has been taken by Party A and then Party B at the beginning of the existence period, Party B first makes payment and leaves the store. At the end of the period of existence, Party A will settle the account and leave the store.

整合判定部１２４は、減少数取得部１２２によって取得された減少数と、存在期間においてセルフレジ４で決済された商品の数と、が整合するか否かを判定する。仮に乙が商品３６を３個購入し、甲が商品３６を２個購入した場合、商品３６の減少数＝５個、決済された商品３６の数＝５個となるので、減少数取得部１２２は整合すると判定する。 The consistency determination unit 124 determines whether the decrease number acquired by the decrease number acquisition unit 122 matches the number of products paid for at the self-checkout register 4 during the existence period. If Party B purchases 3 products 36 and Party A purchases 2 products 36, the number of products 36 decreased = 5 and the number of products 36 paid for = 5. Therefore, the decreased number acquisition unit 122 is determined to be consistent.

仮に図６に示されるように乙が商品３６を２個購入すると共に１個を精算せずに持ち出し、甲が商品３６を２個購入した場合、商品３６の減少数＝５個、決済された商品３６の数＝４個となるので、減少数取得部１２２は整合しないと判定する。 As shown in Figure 6, if Party B purchases two items of item 36 and takes one item out without paying for it, and Party A purchases two items of item 36, the number of items 36 will decrease by 5 and the payment will be made. Since the number of products 36=4, the decreased number acquisition unit 122 determines that they do not match.

警告実行部１２６は、整合判定部１２４において整合しないと判定された場合、所定の警告処理を実行する。警告実行部１２６は、例えば、棚センサ３０の出力から、数が整合しないと判定された商品３６が棚３２から取られた時刻を特定し、特定された時刻に基づいて映像データ保持部１２８から、当該商品３６が当該棚３２から取られたときの画像または映像あるいはその前後の画像または映像を取得する。図６の例では、商品３６の数が整合しないと判定された場合、警告実行部１２６はまず商品３６の個数の変動を棚センサ３０が検知した時刻ｔ１およびｔ２を特定する。次に警告実行部１２６は、映像データ保持部１２８に保持される監視カメラ３４の映像のなかから時刻ｔ１およびｔ２にそれぞれ対応する映像部分４０、３８を選択して取得する。各映像部分の幅は任意に設定されてもよい。このように取得された映像部分３８、４０は、甲または乙が商品３６を棚３２から取るときの様子を映している蓋然性が高い。 The warning executing unit 126 executes a predetermined warning process when the matching determining unit 124 determines that there is no match. For example, the warning execution unit 126 identifies, from the output of the shelf sensor 30, the time at which the product 36 determined to be inconsistent in number was taken from the shelf 32, and sends the information from the video data storage unit 128 based on the identified time. , acquire an image or video when the product 36 is taken from the shelf 32, or images or videos before and after that. In the example of FIG. 6, when it is determined that the number of products 36 does not match, the warning execution unit 126 first specifies times t1 and t2 when the shelf sensor 30 detects a change in the number of products 36. Next, the warning execution unit 126 selects and acquires video portions 40 and 38 corresponding to times t1 and t2, respectively, from the video of the surveillance camera 34 held in the video data storage unit 128. The width of each video portion may be set arbitrarily. There is a high probability that the video portions 38 and 40 obtained in this manner show the situation when Party A or Party B takes the product 36 from the shelf 32.

警告実行部１２６は、数が整合しない商品３６の情報と、数が整合しない商品３６が発生した存在期間に店舗２に入店した客「甲」、「乙」の客ＩＤと、取得された映像部分３８、４０と、を盗難抑止装置１０２のディスプレイ１１６に表示させるか、またはネットワークを介して管理センタに送信する。以下、管理センタで管理担当者が確認する場合を説明するが、盗難抑止装置１０２のディスプレイ１１６で店員が確認する場合も同様の処理が行われる。管理担当者は、まず、セルフレジ４の映像を確認する。その後、送られてきた映像部分３８、４０を見ることで商品３６の減少時点の映像を確認する。それでも誰のせいかわからない場合、管理担当者は、商品３６の減少時点で写っていた客の映像を全部確認する。あるいはまた、この作業を行うために機械学習を用いてもよい。このような作業により、「甲」、「乙」のうちどちらが疑わしいかを判定する。図６の例では「乙」が疑わしいと判定され、「乙」の客ＩＤがブラックリストに登録されるか、「乙」のアカウントが停止されるか、または「乙」に対する他の不正対応処理が行われる。 The warning execution unit 126 generates information about the products 36 whose numbers do not match, the customer IDs of customers "A" and "B" who entered the store 2 during the existence period in which the products 36 whose numbers do not match occurred, and the obtained customer IDs. The video portions 38, 40 are displayed on the display 116 of the theft deterrent device 102 or transmitted via the network to a management center. In the following, a case will be described in which a person in charge of management checks the information at the management center, but the same process is performed when a store clerk checks the information on the display 116 of the theft deterrent device 102. The person in charge of management first checks the image of the self-checkout register 4. Thereafter, by looking at the sent video parts 38 and 40, the video at the time when the product 36 is reduced can be confirmed. If it is still unclear who is at fault, the person in charge of management checks all images of the customers that were shown at the time when the number of products 36 decreased. Alternatively, machine learning may be used to perform this task. Through this process, it is determined which of "A" and "B" is more suspicious. In the example in Figure 6, "B" is determined to be suspicious, and "B"'s customer ID is registered in the blacklist, "B"'s account is suspended, or other fraudulent actions are taken against "B". will be held.

なお、減少数取得部１２２によって取得された減少数よりも存在期間においてセルフレジ４で決済された商品の数のほうが大きい場合（客が不利な場合）もある。例えば、客が間違えて同じ商品３６を二回セルフレジ４に読み込んだ場合、実際に購入する個数は１なのに２個分の決済が行われる。このような場合に、減少数よりも決済された商品の数のほうが大きくなる。この場合、警告実行部１２６は、セルフレジ４で決済が行われているときにセルフレジ４に客への注意喚起を出力させる。これにより、客が店舗２から去る前に、重複読み込みの可能性を客に知らせ、適切な是正処理をその場で行わせることができる。 Note that there may be cases where the number of products paid for at the self-checkout register 4 during the existence period is greater than the number of decreases acquired by the decrease number acquisition unit 122 (if the customer is at a disadvantage). For example, if a customer mistakenly loads the same product 36 into the self-checkout register 4 twice, payment for two items will be made even though the actual number to be purchased is one. In such a case, the number of settled products is greater than the number of decreases. In this case, the warning execution unit 126 causes the self-checkout register 4 to output a warning to the customer while the payment is being made at the self-checkout register 4. Thereby, before the customer leaves the store 2, it is possible to notify the customer of the possibility of duplicate reading and have him or her take appropriate corrective action on the spot.

また、店舗２の管理上、定期的に棚３２への品出しや期限切れ商品の廃棄を店員が行う必要がある。これらの作業においても棚センサ３０は商品３６の増減を検知する。しかしながら、この増減は客の行動によるものではないから、減少数の計算において補償する必要がある。例えば、不存在期間における減少数の算出において、品出しにより商品３６の個数が増えたのであればその分減算し、あるいは廃棄により商品３６の個数が減ったのであればその分加算する。 Furthermore, for the management of the store 2, store staff members must periodically stock the shelves 32 and dispose of expired products. Even during these operations, the shelf sensor 30 detects an increase or decrease in the number of products 36. However, since this increase/decrease is not due to customer behavior, it is necessary to compensate for this in calculating the number of decreases. For example, in calculating the decrease in the number of products 36 during the period of non-existence, if the number of products 36 increases due to stock removal, that amount is subtracted, or if the number of products 36 decreases due to disposal, that amount is added.

あるいはまた、減少数取得部１２２は、店舗２の店員が商品３６に対して作業を行っている間は、当該商品３６の減少数のカウントを中止する。例えば、存在期間においてリアルタイムに商品３６の個数の増減を検出する場合、棚３２への品出しや期限切れ商品の廃棄が行われている間は、棚センサ３０による検出を中止してもよい。なお、上記は商品の品出しや廃棄の作業中に客がその商品をとらないことが前提となる。 Alternatively, the decrease number acquisition unit 122 stops counting the decrease number of the product 36 while the store clerk at the store 2 is working on the product 36. For example, when detecting an increase or decrease in the number of products 36 in real time during the existence period, detection by the shelf sensor 30 may be stopped while products are being put on the shelf 32 or expired products are being discarded. Note that the above is based on the premise that the customer does not take the product while it is being stocked or disposed of.

上述の実施の形態において、保持部の例は、ハードディスクや半導体メモリである。また、本明細書の記載に基づき、各部を、図示しないＣＰＵや、インストールされたアプリケーションプログラムのモジュールや、システムプログラムのモジュールや、ハードディスクから読み出したデータの内容を一時的に記憶する半導体メモリなどにより実現できることは本明細書に触れた当業者には理解される。 In the embodiments described above, examples of the holding unit are a hard disk or a semiconductor memory. Further, based on the description of this specification, each part may be implemented by a CPU (not shown), an installed application program module, a system program module, a semiconductor memory that temporarily stores the contents of data read from a hard disk, etc. Those skilled in the art will understand that this can be done.

本実施の形態に係る盗難抑止装置１０２によると、セルフレジ４を備える店舗２において、盗難の可能性を事後的に検出して対処することで、店舗２での盗難を抑制することができる。加えて、そのような抑制効果を、リアルタイムに客の行動を監視しなくても実現することができる。 According to the theft deterrent device 102 according to the present embodiment, theft at the store 2 equipped with the self-checkout register 4 can be suppressed by detecting and dealing with the possibility of theft after the fact. Additionally, such a restraining effect can be achieved without monitoring customer behavior in real time.

また、本実施の形態に係る盗難抑止装置１０２では、棚センサ３０などの方法で売り場の商品残量を把握し、セルフレジ４で決済数量を把握し、不存在期間の到来などの適切なタイミングで締め処理を行い、違算なければ問題無いと判定し、違算があれば違算が生じた商品をピックアップした全ての客の映像を簡単に確認するシステムを提供することができる。これにより、管理担当者や店員は盗難かどうか判断することができ、また、証拠保全を図ることができる。 In addition, the theft deterrent device 102 according to the present embodiment uses a method such as the shelf sensor 30 to grasp the remaining amount of products on the sales floor, and the self-checkout register 4 to grasp the payment quantity, and at an appropriate timing such as when a period of non-existence has arrived. It is possible to provide a system that performs closing processing, and if there is no miscalculation, it is determined that there is no problem, and if there is a miscalculation, it is possible to easily check the images of all the customers who picked up the products for which the miscalculation occurred. This allows the management person or store clerk to determine whether or not the item has been stolen, and also to preserve evidence.

以上、実施の形態に係る盗難抑止装置１０２の構成と動作について説明した。この実施の形態は例示であり、各構成要素や各処理の組み合わせにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解される。 The configuration and operation of the theft deterrent device 102 according to the embodiment have been described above. This embodiment is merely an example, and those skilled in the art will understand that various modifications can be made to the combinations of each component and each process, and that such modifications are also within the scope of the present invention.

図６では存在期間に二人の客が来店する場合を説明したが、これに限られず、例えば三人以上の客が来店した場合も同様に、事後的に盗難の可能性を検出することができる。また、存在期間を通じて客が一人しかいなかった場合、警告実行部１２６は、商品の数が整合しない場合にその客がセルフレジ４で決済処理を行っている際にセルフレジ４からその場で警告を出力させてもよい。客が一人しかいなければ、不整合の原因はその一人の客以外にはないので、その場での警告が可能となる。 Although the case in which two customers visit the store during the existence period is explained in FIG. 6, the possibility of theft can be detected after the fact. can. In addition, if there is only one customer throughout the existence period, the warning execution unit 126 issues an on-the-spot warning from the self-checkout register 4 when the customer is processing payment at the self-checkout register 4 if the number of products does not match. You may also output it. If there is only one customer, the cause of the inconsistency is only that one customer, so an on-the-spot warning can be issued.

実施の形態では、監視カメラ３４の映像の一部を選択して確認する場合を説明したが、これに限られず、例えば商品の数が整合しない場合、ＡＩ等により監視カメラ１２、１４、１６、２２、３４からの映像をつなぎ合わせて確認・証拠保全を行ってもよい。例えば、警告実行部１２６は、複数の監視カメラ１２、１４、１６、２２、３４の映像のなかから、疑わしい客が映っているフレームのみを抽出してつなぎ合わせてもよい。 In the embodiment, a case has been described in which a part of the video of the surveillance camera 34 is selected and checked, but the invention is not limited to this. For example, if the number of products does not match, the surveillance cameras 12, 14, 16, The videos from 22 and 34 may be joined together for confirmation and evidence preservation. For example, the warning execution unit 126 may extract only the frames in which the suspicious customer is seen from the images of the plurality of surveillance cameras 12, 14, 16, 22, and 34 and stitch them together.

実施の形態において、店舗２に商品３６が納品されると、盗難抑止装置１０２は不図示の商品データベースにアクセスし、その商品３６に対応付けて納品有りフラグを登録してもよい。納品有りフラグには有効期限が設定され、該期限を過ぎると納品有りフラグは消去される。減少数取得部１２２は、納品有りフラグが登録されている商品３６の個数の増加を検出した場合、それを棚出しによるものであると認識する。この場合、棚出しの際に棚センサ３０をリセットする必要がなくなる。 In the embodiment, when the product 36 is delivered to the store 2, the theft deterrent device 102 may access a product database (not shown) and register a delivery flag in association with the product 36. An expiration date is set for the delivery flag, and the delivery flag is deleted after the expiration date. When the decrease number acquisition unit 122 detects an increase in the number of products 36 for which the delivery flag is registered, it recognizes this as being due to removal from the shelves. In this case, there is no need to reset the shelf sensor 30 when taking out the shelves.

２店舗、４セルフレジ、１０２盗難抑止装置。 2 stores, 4 self-checkout registers, 102 theft deterrent devices.

Claims

セルフ式のレジスタを備える店舗における客の存否を判定する判定手段と、
前記判定手段によって客が一人も存在しないと判定されている不存在期間が到来するごとに、その不存在期間の直前の、前記判定手段によって客が存在すると判定されている存在期間における商品の減少数を取得する取得手段と、
前記取得手段によって取得された前記減少数と、前記存在期間において前記レジスタで決済された商品の数と、が整合しない場合、所定の対策処理を実行する実行手段と、を備える盗難抑止装置。 A determination means for determining the presence or absence of a customer in a store equipped with a self-service register;
Each time a period of non-existence in which it is determined by the determination means that no customer exists, the number of products decreases in the period of existence in which the determination means determines that there are no customers, immediately before the period of non-existence. an acquisition means for acquiring the number;
A theft deterrent device comprising: an execution unit that executes a predetermined countermeasure process when the number of decreases acquired by the acquisition unit and the number of products settled at the register during the period of existence do not match.

前記取得手段は、棚に置かれている商品を検知する棚センサを用いて商品の前記減少数を取得する、請求項１に記載の盗難抑止装置。 The theft deterrent device according to claim 1, wherein the obtaining means obtains the reduced number of products using a shelf sensor that detects products placed on a shelf .

前記店舗に設置された監視カメラから取得された映像データを保持する保持手段をさらに備え、
前記実行手段は、前記棚センサの出力から、数が整合しないと判定された商品が棚から取られた時刻を特定し、特定された前記時刻に基づいて前記保持手段から、当該商品が当該棚から取られたときの画像または映像あるいはその前後の画像または映像を取得する、請求項２に記載の盗難抑止装置。 Further comprising a holding means for holding video data acquired from a surveillance camera installed in the store,
The execution means specifies, from the output of the shelf sensor, the time at which the product determined to be inconsistent in number is taken from the shelf, and based on the specified time, the product is removed from the shelf by the holding means. 3. The theft deterrent device according to claim 2, wherein the theft deterrent device acquires the image or video taken from the computer , or the images or videos before and after the image or video taken from the computer.

前記取得手段は、前記店舗の店員が商品に対して作業を行っている間は、当該商品の前記減少数のカウントを中止する、請求項１から３のいずれか一項に記載の盗難抑止装置。 The theft deterrent device according to any one of claims 1 to 3 , wherein the acquisition means stops counting the decreased number of products while a clerk at the store is working on the products. .

前記取得手段によって取得された前記減少数よりも前記存在期間において前記レジスタで決済された商品の数のほうが大きい場合、前記実行手段は、前記レジスタで決済が行われているときに前記レジスタに注意喚起を出力させる、請求項１から４のいずれか一項に記載の盗難抑止装置。 If the number of products settled at the register during the period of existence is greater than the decreased number acquired by the acquisition means, the execution means may cause the execution means to pay attention to the register when the payment is being made at the register . The theft deterrent device according to any one of claims 1 to 4 , which outputs a warning.