JP2020087094A - 自動販売機決済システム、自動販売機、自動販売機決済方法及びプログラム - Google Patents
自動販売機決済システム、自動販売機、自動販売機決済方法及びプログラム Download PDFInfo
- Publication number
- JP2020087094A JP2020087094A JP2018222208A JP2018222208A JP2020087094A JP 2020087094 A JP2020087094 A JP 2020087094A JP 2018222208 A JP2018222208 A JP 2018222208A JP 2018222208 A JP2018222208 A JP 2018222208A JP 2020087094 A JP2020087094 A JP 2020087094A
- Authority
- JP
- Japan
- Prior art keywords
- vending machine
- face
- customer
- face authentication
- feature vector
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 57
- 239000013598 vector Substances 0.000 claims abstract description 276
- 230000008569 process Effects 0.000 claims description 36
- 238000003384 imaging method Methods 0.000 claims description 13
- 230000008859 change Effects 0.000 claims description 6
- 238000000605 extraction Methods 0.000 description 42
- 238000012545 processing Methods 0.000 description 36
- 239000000284 extract Substances 0.000 description 21
- 238000010586 diagram Methods 0.000 description 18
- 239000004973 liquid crystal related substance Substances 0.000 description 16
- 238000004891 communication Methods 0.000 description 15
- 230000006870 function Effects 0.000 description 15
- 230000033001 locomotion Effects 0.000 description 15
- 238000003860 storage Methods 0.000 description 15
- 238000003702 image correction Methods 0.000 description 8
- 230000004048 modification Effects 0.000 description 8
- 238000012986 modification Methods 0.000 description 8
- 238000004364 calculation method Methods 0.000 description 4
- 238000009826 distribution Methods 0.000 description 4
- 238000003825 pressing Methods 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 208000029152 Small face Diseases 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 1
- 238000012935 Averaging Methods 0.000 description 1
- 235000013361 beverage Nutrition 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 210000004709 eyebrow Anatomy 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 210000001061 forehead Anatomy 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 238000010187 selection method Methods 0.000 description 1
- 238000012706 support-vector machine Methods 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Landscapes
- Control Of Vending Devices And Auxiliary Devices For Vending Devices (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)
Abstract
Description
なお、このプログラムは、コンピュータが読み取り可能な記憶媒体に記録することができる。記憶媒体は、半導体メモリ、ハードディスク、磁気記録媒体、光記録媒体等の非トランジェント(non-transient)なものとすることができる。本発明は、コンピュータプログラム製品として具現することも可能である。
第1の実施形態について、図面を用いてより詳細に説明する。
続いて、図3を参照しつつ、第1の実施形態に係る自動販売機決済システムの概略動作を説明する。
図4は、自動販売機10の概略の一例を示す図である。図4に示すように、自動販売機10には、商品サンプル11と商品を選択するための選択ボタン12が含まれる。顧客は、選択ボタン12を押下することで希望する商品の選択を行う。
図5は、第1の実施形態に係る自動販売機10のハードウェア構成の一例を示す図である。自動販売機10は、図5に例示する構成を備える。例えば、自動販売機10は、内部バスにより相互に接続される、CPU(Central Processing Unit)21、メモリ22、表示モジュール23、カメラモジュール24、アンテナ25に接続された無線通信モジュール26等を備える。
自動販売機10は、顔認証サーバ20に顔認証を要求し、顔認証サーバ20による認証が成功した顧客が購入する商品の決済を決済サーバ30に要求する機能を有する。自動販売機10は、当該機能を実現するため下記の処理モジュールを備える。
FV={X1、Y1、X2、Y2} ・・・(1)
FV={X1、Y1、X2、Y2、・・・、X5、Y5} ・・・(2)
図11は、第1の実施形態に係る顔認証サーバ20のハードウェア構成の一例を示す図である。顔認証サーバ20は、所謂、コンピュータであり、図11に例示する構成を備える。例えば、顔認証サーバ20は、CPU31、メモリ32に加え、入出力インターフェイス33及び通信手段であるNIC(Network Interface Card)34等を備える。
顔認証サーバ20は、顧客IDと、顧客IDに対応する人物の顔画像から生成された2つの特徴ベクトルと、を関連付けて記憶するデータベースにアクセスし、要求された人物の顔認証を行う機能を有する。顔認証サーバ20は、当該機能を実現するため下記の処理モジュールを備える。
決済サーバ30は、顔認証サーバ20と同様に情報処理装置(コンピュータ)により構成され、その機能の実現は当業者にとって明らかであるので、決済サーバ30に関する詳細な説明は省略する。
続いて、図面を参照しつつ、自動販売機決済システムの動作について説明する。
上記自動販売機決済システムの構成や動作は例示であって、下記の変形例があり得る。
例えば、図14等のシーケンス図では、現金決済と、ICカード及び顔認証による決済と、に関する動作を分離している。つまり、現金が投入された場合には、顧客は現金による決済を希望するものと判断され、図17に示す決済選択画面には「現金」による支払いに関する選択肢が表示されていない。しかし、現金、ICカード及び顔認証による決済選択方法を統一することもできる。
上記実施形態では、特徴ベクトル生成部305は、概略特徴ベクトルの生成と詳細特徴ベクトルの生成に同種の特徴量(例えば、特徴点の座標位置)を用いる場合を説明した。しかし、2つの特徴ベクトルをなす各要素は異なる種類の特徴量であってもよい。より具体的には、詳細特徴ベクトル及び認証特徴ベクトルのそれぞれは、概略特徴ベクトル及び絞込特徴ベクトルそれぞれに含まれる特徴量とは異なる種類の特徴量を要素として含んでもよい。
続いて、第2の実施形態について図面を参照して詳細に説明する。
続いて、第3の実施形態について図面を参照して詳細に説明する。
第1乃至第3の実施形態にて説明した自動販売機決済システムの構成及び動作は例示であって、種々の変形が可能である。例えば、自動販売機決済システム及びその構成装置は、以下のような構成又は動作であってもよい。
11 商品サンプル
12 選択ボタン
13 現金投入口
14 ICカードリーダ
15 液晶パネル
16 排出口
17 タブレット
20、101 顔認証サーバ
21、31 CPU(Central Processing Unit)
22、32 メモリ
23 表示モジュール
24 カメラモジュール
25 アンテナ
26 無線通信モジュール
30、102 決済サーバ
33 入出力インターフェイス
34 NIC(Network Interface Card)
301、401 通信制御部
302 自動販売機制御部
303 決済制御部
304 顔画像抽出部
305 特徴ベクトル生成部
306、402 記憶部
403 候補生成部
404 顔認証部
501、502 顔画像
Claims (8)
- 顧客IDと、前記顧客IDに対応する人物の顔画像から生成された第1の特徴ベクトルと、を関連付けて記憶するデータベースにアクセスし、要求された人物の顔認証を行う、顔認証サーバと、
商品購入に関する決済を行う、決済サーバと、
前記顔認証サーバに顔認証を要求し、前記顔認証サーバによる認証が成功した顧客が購入する商品の決済を前記決済サーバに要求する、自動販売機と、
を含み、
前記自動販売機は、
自装置周辺に存在し、且つ商品を購入しようとする顧客の顔画像であって、所定の条件を満たす顔画像から第2の特徴ベクトルを生成し、
前記商品を購入しようとする顧客を撮像した画像データから抽出した顔画像が前記所定の条件を満たさないと判断した場合には、前記顔認証による決済が失敗したことを表すメッセージと、前記顔画像の再撮像を知らせるメッセージとを含む画面を表示手段に表示し、
前記顔認証サーバは、
前記第1及び第2の特徴ベクトルに基づき、前記商品を購入しようとする顧客の顔認証を行う、
自動販売機決済システム。 - 前記自動販売機は、
前記商品を購入しようとする顧客の顔画像のサイズが所定の大きさよりも大きい場合に、前記所定の条件をみたすと判断する、請求項1の自動販売機決済システム。 - 前記自動販売機は、
撮像した画像データから複数の顔画像を検出した場合には、所定の条件を満たさないと判断する、請求項1又は2の自動販売機決済システム。 - 前記自動販売機は、
所定期間の間に得られる複数の画像データそれぞれに含まれる顔画像に変化がある場合に、前記所定の条件をみたすと判断する請求項1乃至3のいずれか一項に記載の自動販売機決済システム。 - 前記自動販売機は、
前記顔画像の再撮像を知らせるメッセージに変えて、他の決済手段の選択を促すメッセージを含む画面を前記表示手段に表示する、請求項1乃至4のいずれか一項に記載の自動販売機決済システム。 - 顧客ID(Identifier)と、前記顧客IDに対応する人物の顔画像から生成された第1の特徴ベクトルと、を関連付けて記憶するデータベースにアクセスし、要求された人物の顔認証を行う、顔認証サーバと、
商品購入に関する決済を行う、決済サーバと、に接続され、
前記顔認証サーバに顔認証を要求し、前記顔認証サーバによる認証が成功した顧客が購入する商品の決済を前記決済サーバに要求する、装置であって、
自装置周辺に存在し、且つ商品を購入しようとする顧客の顔画像であって、所定の条件を満たす顔画像から第2の特徴ベクトルを生成し、
前記顔認証サーバに対して、前記第1及び第2の特徴ベクトルに基づき、前記商品を購入しようとする顧客の顔認証を行うように要求し、
前記商品を購入しようとする顧客を撮像した画像データから抽出した顔画像が前記所定の条件を満たさないと判断した場合には、前記顔認証による決済が失敗したことを表すメッセージと、前記顔画像の再撮像を知らせるメッセージとを含む画面を表示手段に表示する、
自動販売機。 - 顧客ID(Identifier)と、前記顧客IDに対応する人物の顔画像から生成された第1の特徴ベクトルと、を関連付けて記憶するデータベースにアクセスし、要求された人物の顔認証を行う、顔認証サーバと、
商品購入に関する決済を行う、決済サーバと、
前記顔認証サーバに顔認証を要求し、前記顔認証サーバによる認証が成功した顧客が購入する商品の決済を前記決済サーバに要求する、自動販売機と、
を含む自動販売機決済システムにおいて、
自装置周辺に存在し、且つ商品を購入しようとする顧客の顔画像であって、所定の条件を満たす顔画像から第2の特徴ベクトルを生成するステップと、
前記商品を購入しようとする顧客を撮像した画像データから抽出した顔画像が前記所定の条件を満たさないと判断した場合には、前記顔認証による決済が失敗したことを表すメッセージと、前記顔画像の再撮像を知らせるメッセージとを含む画面を表示手段に表示するステップと、
前記第1及び第2の特徴ベクトルに基づき、前記商品を購入しようとする顧客の顔認証を行うステップと、
を含む、自動販売機決済方法。 - 顧客ID(Identifier)と、前記顧客IDに対応する人物の顔画像から生成された第1の特徴ベクトルと、を関連付けて記憶するデータベースにアクセスし、要求された人物の顔認証を行う、顔認証サーバと、商品購入に関する決済を行う、決済サーバと、に接続され、前記顔認証サーバに顔認証を要求し、前記顔認証サーバによる認証が成功した顧客が購入する商品の決済を前記決済サーバに要求する、自動販売機に搭載されたコンピュータに、
自装置周辺に存在し、且つ商品を購入しようとする顧客の顔画像であって、所定の条件を満たす顔画像から第2の特徴ベクトルを生成する処理と、
前記顔認証サーバに対して、前記第1及び第2の特徴ベクトルに基づき、前記商品を購入しようとする顧客の顔認証を行うように要求する処理と、
前記商品を購入しようとする顧客を撮像した画像データから抽出した顔画像が前記所定の条件を満たさないと判断した場合には、前記顔認証による決済が失敗したことを表すメッセージと、前記顔画像の再撮像を知らせるメッセージとを含む画面を表示手段に表示する処理と、
を実行させるプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018222208A JP7239149B2 (ja) | 2018-11-28 | 2018-11-28 | 自動販売機決済システム、自動販売機、自動販売機決済方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018222208A JP7239149B2 (ja) | 2018-11-28 | 2018-11-28 | 自動販売機決済システム、自動販売機、自動販売機決済方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020087094A true JP2020087094A (ja) | 2020-06-04 |
JP7239149B2 JP7239149B2 (ja) | 2023-03-14 |
Family
ID=70908366
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018222208A Active JP7239149B2 (ja) | 2018-11-28 | 2018-11-28 | 自動販売機決済システム、自動販売機、自動販売機決済方法及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7239149B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113536270A (zh) * | 2021-07-26 | 2021-10-22 | 网易(杭州)网络有限公司 | 一种信息验证的方法、装置、计算机设备及存储介质 |
WO2021260941A1 (ja) * | 2020-06-26 | 2021-12-30 | 日本電気株式会社 | サーバ装置、端末、システム、サーバ装置の制御方法及び記憶媒体 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005332150A (ja) * | 2004-05-19 | 2005-12-02 | Glory Ltd | 自動販売装置および自動販売システム |
JP2006330936A (ja) * | 2005-05-24 | 2006-12-07 | Matsushita Electric Works Ltd | 顔認証装置 |
JP2010128903A (ja) * | 2008-11-28 | 2010-06-10 | Yamaha Motor Co Ltd | 自動販売機 |
JP2011203992A (ja) * | 2010-03-25 | 2011-10-13 | Sony Corp | 情報処理装置、情報処理方法、およびプログラム |
WO2017203605A1 (ja) * | 2016-05-24 | 2017-11-30 | 楽天株式会社 | 情報処理システム、情報処理方法、及び情報処理プログラム |
-
2018
- 2018-11-28 JP JP2018222208A patent/JP7239149B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005332150A (ja) * | 2004-05-19 | 2005-12-02 | Glory Ltd | 自動販売装置および自動販売システム |
JP2006330936A (ja) * | 2005-05-24 | 2006-12-07 | Matsushita Electric Works Ltd | 顔認証装置 |
JP2010128903A (ja) * | 2008-11-28 | 2010-06-10 | Yamaha Motor Co Ltd | 自動販売機 |
JP2011203992A (ja) * | 2010-03-25 | 2011-10-13 | Sony Corp | 情報処理装置、情報処理方法、およびプログラム |
WO2017203605A1 (ja) * | 2016-05-24 | 2017-11-30 | 楽天株式会社 | 情報処理システム、情報処理方法、及び情報処理プログラム |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021260941A1 (ja) * | 2020-06-26 | 2021-12-30 | 日本電気株式会社 | サーバ装置、端末、システム、サーバ装置の制御方法及び記憶媒体 |
JP7040690B1 (ja) * | 2020-06-26 | 2022-03-23 | 日本電気株式会社 | サーバ装置、システム、サーバ装置の制御方法及びコンピュータプログラム |
CN113536270A (zh) * | 2021-07-26 | 2021-10-22 | 网易(杭州)网络有限公司 | 一种信息验证的方法、装置、计算机设备及存储介质 |
CN113536270B (zh) * | 2021-07-26 | 2023-08-08 | 网易(杭州)网络有限公司 | 一种信息验证的方法、装置、计算机设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
JP7239149B2 (ja) | 2023-03-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20210365979A1 (en) | Providing Hands-Free Data for Interactions | |
EP3374915B1 (en) | Facial template and token pre-fetching in hands free service requests | |
TW201837763A (zh) | 基於物聯網的信息處理方法及裝置 | |
CN109215254B (zh) | 实体店铺应用***、用户信息处理方法及装置 | |
US20180150831A1 (en) | Augmented Reality Headset and Digital Wallet | |
US11495058B2 (en) | Motion based account recognition | |
US20180150844A1 (en) | User Authentication and Authorization for Electronic Transaction | |
JP7180869B2 (ja) | 自動販売機決済システム、自動販売機、顔認証サーバ、自動販売機決済方法及びプログラム | |
US11978105B2 (en) | System, method, and apparatus for processing clothing item information for try-on | |
US10916105B2 (en) | Processing system for providing enhanced reality interfaces at an automated teller machine (ATM) terminal platform | |
US20180374099A1 (en) | Biometric analysis of users to determine user locations | |
CN112396004B (zh) | 用于人脸识别的方法、装置和计算机可读存储介质 | |
US20220148006A1 (en) | Identification processing apparatus, settlement terminal, and settlement system | |
JP7239149B2 (ja) | 自動販売機決済システム、自動販売機、自動販売機決済方法及びプログラム | |
TWI476702B (zh) | 使用者辨識系統及辨識使用者的方法 | |
US11651416B2 (en) | Goods purchase analysis assist system | |
US20210065196A1 (en) | Cash handling system and cash transaction method | |
JP2014074972A (ja) | 顔画像による本人認証支援システム | |
CN113807910A (zh) | 减少餐馆的服务错误的***、方法和介质 | |
Wójtowicz et al. | Face-based Passive Customer Identification Combined with Multimodal Context-aware Payment Authorization: Evaluation at Point of Sale. | |
KR102424316B1 (ko) | 셀프서비스형 식당용 셀프 결제 시스템 및 방법 | |
US20240256644A1 (en) | System, server apparatus, authentication method, and storage medium | |
US20230162193A1 (en) | Sales support apparatus, sales support method, and nontransitory computer-readable storage medium | |
TW202226102A (zh) | 提供用於特定***交易的生物辨識認證之支付終端 | |
TW202230241A (zh) | 電子結算方法及系統 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190215 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211007 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220830 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220913 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221111 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230131 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230222 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7239149 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |