KR102439875B1 - 무인 상점 운영 방법 및 이를 이용한 무인 상점 시스템 - Google Patents
무인 상점 운영 방법 및 이를 이용한 무인 상점 시스템 Download PDFInfo
- Publication number
- KR102439875B1 KR102439875B1 KR1020200019152A KR20200019152A KR102439875B1 KR 102439875 B1 KR102439875 B1 KR 102439875B1 KR 1020200019152 A KR1020200019152 A KR 1020200019152A KR 20200019152 A KR20200019152 A KR 20200019152A KR 102439875 B1 KR102439875 B1 KR 102439875B1
- Authority
- KR
- South Korea
- Prior art keywords
- user
- product
- unmanned shop
- unmanned
- unit
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0631—Resource planning, allocation, distributing or scheduling for enterprises or organisations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0633—Workflow analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
- G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0631—Resource planning, allocation, distributing or scheduling for enterprises or organisations
- G06Q10/06316—Sequencing of tasks or work
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
- G06Q10/087—Inventory or stock management, e.g. order filling, procurement or balancing against orders
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/08—Payment architectures
- G06Q20/14—Payment architectures specially adapted for billing systems
- G06Q20/145—Payments according to the detected use or quantity
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/08—Payment architectures
- G06Q20/18—Payment architectures involving self-service terminals [SST], vending machines, kiosks or multimedia terminals
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/08—Payment architectures
- G06Q20/20—Point-of-sale [POS] network systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/08—Payment architectures
- G06Q20/20—Point-of-sale [POS] network systems
- G06Q20/206—Point-of-sale [POS] network systems comprising security or operator identification provisions, e.g. password entry
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/08—Payment architectures
- G06Q20/20—Point-of-sale [POS] network systems
- G06Q20/208—Input by product or record sensing, e.g. weighing or scanner processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/30—Payment architectures, schemes or protocols characterised by the use of specific devices or networks
- G06Q20/32—Payment architectures, schemes or protocols characterised by the use of specific devices or networks using wireless devices
- G06Q20/327—Short range or proximity payments by means of M-devices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/38—Payment protocols; Details thereof
- G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
- G06Q20/401—Transaction verification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/38—Payment protocols; Details thereof
- G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
- G06Q20/401—Transaction verification
- G06Q20/4014—Identity check for transactions
- G06Q20/40145—Biometric identity checks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0251—Targeted advertisements
- G06Q30/0254—Targeted advertisements based on statistics
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0251—Targeted advertisements
- G06Q30/0261—Targeted advertisements based on user location
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/30—Individual registration on entry or exit not involving the use of a pass
- G07C9/32—Individual registration on entry or exit not involving the use of a pass in combination with an identity check
- G07C9/37—Individual registration on entry or exit not involving the use of a pass in combination with an identity check using biometric data, e.g. fingerprints, iris scans or voice recognition
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/30—Individual registration on entry or exit not involving the use of a pass
- G07C9/38—Individual registration on entry or exit not involving the use of a pass with central registration
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07F—COIN-FREED OR LIKE APPARATUS
- G07F9/00—Details other than those peculiar to special kinds or types of apparatus
- G07F9/001—Interfacing with vending machines using mobile or wearable devices
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07F—COIN-FREED OR LIKE APPARATUS
- G07F9/00—Details other than those peculiar to special kinds or types of apparatus
- G07F9/002—Vending machines being part of a centrally controlled network of vending machines
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07F—COIN-FREED OR LIKE APPARATUS
- G07F9/00—Details other than those peculiar to special kinds or types of apparatus
- G07F9/006—Details of the software used for the vending machines
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07F—COIN-FREED OR LIKE APPARATUS
- G07F9/00—Details other than those peculiar to special kinds or types of apparatus
- G07F9/009—User recognition or proximity detection
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07F—COIN-FREED OR LIKE APPARATUS
- G07F9/00—Details other than those peculiar to special kinds or types of apparatus
- G07F9/02—Devices for alarm or indication, e.g. when empty; Advertising arrangements in coin-freed apparatus
- G07F9/026—Devices for alarm or indication, e.g. when empty; Advertising arrangements in coin-freed apparatus for alarm, monitoring and auditing in vending machines or means for indication, e.g. when empty
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07F—COIN-FREED OR LIKE APPARATUS
- G07F9/00—Details other than those peculiar to special kinds or types of apparatus
- G07F9/10—Casings or parts thereof, e.g. with means for heating or cooling
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Accounting & Taxation (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Strategic Management (AREA)
- Theoretical Computer Science (AREA)
- General Business, Economics & Management (AREA)
- Finance (AREA)
- Economics (AREA)
- Human Resources & Organizations (AREA)
- Development Economics (AREA)
- Entrepreneurship & Innovation (AREA)
- Marketing (AREA)
- Game Theory and Decision Science (AREA)
- Computer Security & Cryptography (AREA)
- Quality & Reliability (AREA)
- Tourism & Hospitality (AREA)
- Operations Research (AREA)
- Educational Administration (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Probability & Statistics with Applications (AREA)
- General Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Software Systems (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Computer Hardware Design (AREA)
- Signal Processing (AREA)
- Control Of Vending Devices And Auxiliary Devices For Vending Devices (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Warehouses Or Storage Devices (AREA)
Abstract
본 발명의 일 실시예에 의하면, 무인 상점 장치 및 서버를 포함하는 무인 상점 시스템을 운영하는 방법에 있어서, 무인 상점 장치에 인접한 사용자를 식별하는 사용자 식별 단계, 무인 상점 장치의 도어부를 제어하여 무인 상점 장치의 도어를 언락(unlock)하는 도어 개방 단계, 카메라부에서 촬영된 이미지 분석에 기초하여, 사용자가 선택하여 무인 상점 장치의 상품 수납부에서 이탈된 상품을 식별하는 구매 상품 식별 단계, 및 사용자의 식별 정보에 기초하여 결제를 처리하는 결제 처리 단계를 포함하는 무인 상점 운영 방법을 제공할 수 있다.
Description
본 발명은 무인 상점 운영 방법, 이를 이용한 무인 상점 장치 및 시스템에 관한 것이다. 보다 구체적으로, 본 발명은 인공지능 기반의 사용자 행동 인식 기술을 이용하여 무인 스마트 자판기 형태로 제공가능한 무인 상점에서 사용자가 물건을 집어가면 바로 결제되는 그립앤고(GRIP AND GO) 기능을 구현할 수 있는 무인 상점 운영 방법 및 시스템에 관한 것이다.
1인 가구 증가는 늦은 시간 싱글족 쇼핑을 증가하고 이를 대응하기 위해서 무인 편의점 및 무인 할인 마트 등이 점차 증가하고 있다. 또한, 최저시급의 증가로 인건비 부담이 커지고 고령화로 인한 노동인구의 감소로 인해서 이러한 무인 상점의 보급은 점차 늘어날 것으로 예상된다. 또한, 언택트(untact) 문화의 확산으로 혼자 편안하게 쇼핑을 즐기고 사람과의 접촉 비용을 줄이고자 하는 풍토가 확산되고 있다.
또한, 이미지 인식 및 인공 지능 기반의 처리 기술의 발달에 따라 사용자의 얼굴이나 행동을 보다 정확하게 인식가능하며, 결제 기술에서도 모바일 장치 등을 활용하여 보다 다양하고 간편한 결제를 지원 가능하다.
따라서, 이와 같은 기술들을 이용하여 무인 상점 또는 무인 자판기에서 사용자 편의성 및 판매율을 높이고, 인공 지능 기술을 활용할 수 있는 무인 상점 운영을 위한 새로운 기술 및 장치가 요구된다.
본 발명은 인공 지능 기반의 스마트 자판기를 이용한 무인 상점 시스템을 제공하는 것을 목적으로 한다.
또한, 본 발명은 재고 관련 정보 및 주변의 사용자 정보에 기초하여 판매 상품의 가격 결정 및 마케팅 대상을 결정함으로써, 재고 관리를 자동으로 효율적으로 관리하며, 한정된 물리적 공간을 효율적으로 활용가능한 무인 상점 장치 및 시스템을 제공하는 것을 목적으로 한다.
또한, 본 발명은 복수의 카메라를 이용하여 사용자가 물건을 집는 동작을 자동으로 파악하고, 사용자의 얼굴 인식을 통해 사용자 인증을 수행함으로써, 보다 편리한 그립앤고(GRIP AND GO) 경험을 제공하는 것을 목적으로 한다.
또한, 본 발명은 사용자의 모바일 장치와 무인 스마트 자판기를 이용하여 사람과의 접촉 비용을 줄이고 편하게 제품 구매를 완료할 수 있는 언택트 스토어를 제공하는 것을 목적으로 한다.
또한, 본 발명은 무인 상점 장치 주변에 위치한 사용자 정보를 활용함으로써 가격을 실시간으로 결정함으로써, 위치 및 주변 상황 기반의 능동적인 마케팅 및 재고 관리를 가능하게 해주는 방법 및 시스템을 제공하는 것을 목적으로 한다.
본 발명의 해결 과제들은 이상에서 언급한 내용들로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.
본 발명의 일 실시예에 따르면, 무인 상점 장치 및 서버를 포함하는 무인 상점 시스템을 운영하는 방법에 있어서, 상기 무인 상점 장치에 인접한 사용자를 식별하는 사용자 식별 단계; 상기 무인 상점 장치의 도어부를 제어하여 상기 무인 상점 장치의 도어를 언락(unlock)하는 도어 개방 단계; 카메라부에서 촬영된 이미지 분석에 기초하여, 상기 사용자가 선택하여 상기 무인 상점 장치의 상품 수납부에서 이탈된 상품을 식별하는 구매 상품 식별 단계; 및 상기 사용자의 식별 정보에 기초하여 결제를 처리하는 결제 처리 단계를 포함하는 무인 상점 운영 방법을 제공할 수 있다.
여기서, 상기 사용자 식별 단계는, 상기 무인 상점 장치로부터 상기 사용자의 모바일 장치로 무선 신호를 전송하는 단계; 상기 사용자의 모바일 장치에서 무선 신호의 강도가 미리 결정된 기준 이상인지 여부를 판단하는 단계; 및 상기 무선 신호의 강도가 미리 결정된 기준 이상인 경우 상기 사용자와 관련된 식별 정보를 상기 서버로 전송하여 사용자 인증을 수행하는 단계를 포함하는 무인 상점 운영 방법을 제공할 수 있다.
또한, 상기 무선 신호의 강도가 미리 결정된 기준 이상인 경우 상기 사용자의 모바일 장치에 상기 무인 상점 장치의 도어를 언락(unlock)하기 위한 언락 버튼을 활성화하는 단계를 더 포함할 수 있다.
또한, 상기 사용자 식별 단계는, 상기 무인 상점 장치의 카메라부로부터 촬영된 상기 사용자의 얼굴 이미지에 기초하여 사용자 인증을 수행하는 단계를 더 포함할 수 있다.
또한, 상기 사용자 식별 단계는, 상기 사용자의 식별 정보에 기초하여 상기 사용자가 관리(administration) 권한을 갖고 있는지 여부를 판단하는 단계를 더 포함하고, 상기 사용자가 관리 권한을 갖고 있는 경우 상기 상품 수납부에 추가되는 상품 정보에 기초하여 재고 정보를 업데이트하는 단계를 포함할 수 있다.
또한, 상기 사용자 식별 단계는, 상기 무인 상점 장치로부터 상기 무선 신호를 수신한 모바일 장치가 복수 개인 경우, 상기 복수의 모바일 장치 중 수신한 무선 신호의 강도가 가장 센 모바일 장치만을 활성화시키는 단계를 더 포함할 수 있다.
또한, 상기 구매 상품 식별 단계는, 상기 무인 상점 장치 내의 상하좌우에 각각 설치된 적어도 4개의 카메라의 촬영 이미지를 획득하는 단계; 및 상기 4개의 촬영 이미지 중 적어도 하나의 촬영 이미지가 상기 사용자에 의해 가려진 폐색 영역에 의해 상기 사용자가 선택한 상품을 식별할 수 없는 경우, 나머지 촬영 이미지에 기초하여 상기 사용자가 선택하여 상기 상품 수납부에서 이탈된 상품을 식별하는 단계를 포함할 수 있다.
또한, 상기 구매 상품 식별 단계는 상기 카메라부에서 촬영된 이미지 분석에 더하여, 상기 상품 수납부에 설치된 무게 센서의 측정 값에 기초하여 상기 사용자가 선택하여 상기 상품 수납부에서 이탈된 상품을 식별하는 단계를 포함할 수 있다.
또한, 상기 상품 수납부에 진열된 각 상품의 가격 정보를 표시하기 위한 디스플레이부에서, 상기 가격 정보를 실시간으로 업데이트하는 단계를 더 포함할 수 있다.
또한, 상기 가격 정보는 해당 상품의 재고 개수, 유통기한, 시간 구간 및 상기 무인 상점 장치가 존재하는 위치로부터 미리 결정된 기준 내에 위치하는 상기 무인 상점 장치 관련 앱을 설치한 사용자의 수에 기초하여 할인율이 결정될 수 있다.
또한, 상기 가격 정보는 상기 무인 상점 장치의 카메라로부터 촬영된 이미지에 기초하여 상기 무인 상점 장치가 설치된 공간을 지나가는 사람의 빈도수에 기초하여 결정될 수 있다.
또한, 상기 사용자가 잡거나 터치한 상품을 인식하는 단계; 및 상기 인식된 상품과 관련된 정보를 상기 디스플레이부의 적어도 일부 영역에 표시하는 단계를 더 포함할 수 있다.
또한, 해당 상품의 재고 개수, 유통기한 및 시간 구간 중 적어도 하나에 기초하여 상기 디스플레이부의 적어도 일부 영역에서 광고하는 제품 정보를 변경하는 단계를 더 포함할 수 있다.
또한, 상기 할인율에 기초하여 결정된 상기 가격 정보를 상기 무인 상점 장치가 존재하는 위치로부터 미리 결정된 기준 내에 위치하는 상기 무인 상점 장치 관련 앱을 설치한 사용자 중 적어도 일부에 알림하는 단계를 더 포함할 수 있다.
본 발명의 다른 실시예에 따르면, 무인 상점 장치 및 서버를 포함하는 무인 상점 시스템에 있어서, 상기 무인 상점 장치에 인접한 사용자를 식별하도록 구성된 사용자 식별부; 상기 무인 상점 장치의 도어를 락(lock) 또는 언락(unlock)하도록 제어되는 도어부; 상기 무인 상점 장치 내에 설치된 적어도 하나의 카메라를 포함하는 카메라부; 카메라부에서 촬영된 이미지 분석에 기초하여, 상기 사용자가 선택하여 상기 무인 상점 장치의 상품 수납부에서 이탈된 상품을 식별하도록 구성된 구매 상품 식별부; 및 상기 사용자의 식별 정보에 기초하여 결제를 처리하도록 구성된 결제 처리부를 포함하는 무인 상점 시스템을 제공할 수 있다.
또한, 상기 사용자 식별부는, 상기 무인 상점 장치의 카메라부로부터 촬영된 상기 사용자의 얼굴 이미지에 기초하여 사용자 인증을 수행하도록 구성될 수 있다.
또한, 상기 사용자 식별부는, 상기 사용자의 식별 정보에 기초하여 상기 사용자가 관리(administration) 권한을 갖고 있는지 여부를 판단하도록 구성되고, 상기 사용자가 관리 권한을 갖고 있는 경우 상기 상품 수납부에 추가되는 상품 정보에 기초하여 재고 정보를 업데이트하도록 구성되는 재고 정보 처리부를 더 포함할 수 있다.
또한, 상기 무인 상점 장치로부터 상기 사용자의 모바일 장치로 무선 신호를 전송하기 위한 통신부를 더 포함하고, 상기 사용자 식별부는, 상기 무인 상점 장치로부터 무선 신호를 수신한 모바일 장치가 복수 개인 경우, 상기 복수의 모바일 장치 중 수신한 무선 신호의 강도가 가장 센 모바일 장치만을 활성화시키도록 구성될 수 있다.
또한, 상기 카메라부는 상기 무인 상점 장치 내의 상하좌우에 각각 설치된 적어도 4개의 카메라를 포함하고, 상기 구매 상품 식별부는, 상기 무인 상점 장치 내의 상하좌우에 각각 설치된 적어도 4개의 카메라의 촬영 이미지를 획득하고, 상기 4개의 촬영 이미지 중 적어도 하나의 촬영 이미지가 상기 사용자에 의해 가려진 폐색 영역에 의해 상기 사용자가 선택한 상품을 식별할 수 없는 경우, 나머지 촬영 이미지에 기초하여 상기 사용자가 선택하여 상기 상품 수납부에서 이탈된 상품을 식별하도록 구성될 수 있다.
또한, 상기 상품 수납부에 진열된 각 상품의 가격 정보를 표시하기 위한 디스플레이부를 더 포함하고, 상기 가격 정보는 실시간으로 업데이트될 수 있다.
또한, 상기 가격 정보는 해당 상품의 재고 개수, 유통기한, 시간 구간 및 상기 무인 상점 장치가 존재하는 위치로부터 미리 결정된 기준 내에 위치하는 상기 무인 상점 장치 관련 앱을 설치한 사용자의 수에 기초하여 할인율이 결정될 수 있다.
또한, 상기 가격 정보는 상기 무인 상점 장치의 카메라로부터 촬영된 이미지에 기초하여 상기 무인 상점 장치가 설치된 공간을 지나가는 사람의 빈도수에 기초하여 결정될 수 있다.
본 발명에 의하면, 인공 지능 기반의 스마트 자판기를 이용한 무인 상점 시스템을 제공할 수 있다.
또한, 본 발명에 의하면, 재고 관련 정보 및 주변의 사용자 정보에 기초하여 판매 상품의 가격 결정 및 마케팅 대상을 결정함으로써, 재고 관리를 자동으로 효율적으로 관리하며, 한정된 물리적 공간을 효율적으로 활용가능한 무인 상점 장치 및 시스템을 제공할 수 있다.
또한, 본 발명에 의하면, 복수의 카메라를 이용하여 사용자가 물건을 집는 동작을 자동으로 파악하고, 사용자의 얼굴 인식을 통해 사용자 인증을 수행함으로써, 보다 편리한 그립앤고(GRIP AND GO) 경험을 제공할 수 있다.
또한, 본 발명에 의하면, 사용자의 모바일 장치와 무인 스마트 자판기를 이용하여 사람과의 접촉 비용을 줄이고 편하게 제품 구매를 완료할 수 있는 언택트 스토어를 제공할 수 있다.
또한, 본 발명에 의하면, 무인 상점 장치 주변에 위치한 사용자 정보를 활용함으로써 가격을 실시간으로 결정함으로써, 위치 및 주변 상황 기반의 능동적인 마케팅 및 재고 관리를 가능하게 해주는 방법 및 시스템을 제공할 수 있다.
본 발명의 효과들은 이상에서 언급한 내용들로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.
도 1은 본 발명의 일 실시예에 따른 무인 상점 장치의 구성을 설명하기 위한 블록도이다.
도 2는 본 발명의 일 실시예에 따른 무인 상점 장치 또는 무인 상점 서버의 처리부의 구체적인 구성을 설명하기 위한 블록도이다.
도 3a 및 도 3b는 본 발명의 일 실시예에 따른 무인 상점 장치의 구성을 설명하기 위한 예시도이다.
도 4는 본 발명의 일 실시예에 따른 무인 상점 시스템의 운영 방법을 설명하기 위한 흐름도이다.
도 5는 본 발명의 다른 실시예에 따른 무인 상점 시스템의 운영 방법을 설명하기 위한 흐름도이다.
도 6은 본 발명의 일 실시예에 따라 복수의 사용자가 존재할 때 활성 사용자를 인식하는 방법을 설명하기 위한 예시도이다.
도 7은 본 발명의 일 실시예에 따라 상품의 할인율을 결정하기 위한 방법을 설명하기 위한 예시도이다.
도 8a 및 도 8b는 본 발명의 일 실시예에 따른 무인 상점 장치의 외형을 나타내는 예시도이다.
도 2는 본 발명의 일 실시예에 따른 무인 상점 장치 또는 무인 상점 서버의 처리부의 구체적인 구성을 설명하기 위한 블록도이다.
도 3a 및 도 3b는 본 발명의 일 실시예에 따른 무인 상점 장치의 구성을 설명하기 위한 예시도이다.
도 4는 본 발명의 일 실시예에 따른 무인 상점 시스템의 운영 방법을 설명하기 위한 흐름도이다.
도 5는 본 발명의 다른 실시예에 따른 무인 상점 시스템의 운영 방법을 설명하기 위한 흐름도이다.
도 6은 본 발명의 일 실시예에 따라 복수의 사용자가 존재할 때 활성 사용자를 인식하는 방법을 설명하기 위한 예시도이다.
도 7은 본 발명의 일 실시예에 따라 상품의 할인율을 결정하기 위한 방법을 설명하기 위한 예시도이다.
도 8a 및 도 8b는 본 발명의 일 실시예에 따른 무인 상점 장치의 외형을 나타내는 예시도이다.
이하, 첨부된 도면을 참조하여 본 발명에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다.
본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다.
본 명세서에서 사용되는 "포함한다(comprises)", "포함하는(comprising)"은 언급된 구성 요소, 단계, 동작 및/또는 소자는 하나 이상의 다른 구성 요소, 단계, 동작 및/또는 소자의 존재 또는 추가를 배제하지 않는다.
또한, 본 발명에서 사용되는 제1, 제2 등과 같이 서수를 포함하는 용어는 구성 요소들을 설명하는데 사용될 수 있지만, 구성 요소들은 용어들에 의해 한정되어서는 안 된다. 이와 같은 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만 사용된다. 또한, 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
또한, 본 발명의 실시예에 나타나는 구성부들은 서로 다른 특징적인 기능들을 나타내기 위해 독립적으로 도시되는 것으로, 각 구성부들이 분리된 하드웨어나 하나의 소프트웨어 구성단위로 이루어짐을 의미하지 않는다. 즉, 각 구성부는 설명의 편의상 각각의 구성부로 나열하여 기술되고, 각 구성부 중 적어도 두 개의 구성부가 합쳐져 하나의 구성부로 이루어지거나, 하나의 구성부가 복수 개의 구성부로 나뉘어져 기능을 수행할 수 있다. 이러한 각 구성부의 통합된 실시예 및 분리된 실시예도 본 발명의 본질에서 벗어나지 않는 한 본 발명의 권리 범위에 포함된다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 실시예를 상세하게 설명한다. 본 발명의 구성 및 그에 따른 작용 효과는 이하의 상세한 설명을 통해 명확하게 이해될 것이다.
도 1은 본 발명의 일 실시예에 따른 무인 상점 장치의 구성을 설명하기 위한 블록도이다.
도 1을 참조하면, 무인 상점 장치(100)는 상품 수납부(110), 디스플레이부(120), 카메라부(130), 도어부(140), 처리부(150), 통신부(160), 오디오 출력부(170), 냉장부(180)를 포함할 수 있으며, 필요 및 기능에 따라 일부 구성 요소는 생략되거나 다른 구성 요소가 부가될 수도 있다.
상품 수납부(110)는 다양한 상품을 보관 및 진열할 수 있도록 복수의 층과 행열로 구성될 수 있으며, 예컨대 상품의 종류, 포장 상태, 크기에 따라 각 층 또는 행열의 배열 간격이 조절될 수 있는 선반 형태를 가질 수 있으며, 다양한 상품들을 진열할 수 있으면 되고 이들 형태로 제한되지 않는다.
디스플레이부(120)는 가격 정보, 이벤트 정보 등을 포함하는 상품 관련 정보, 사용자 관련 정보, 결제 정보 등을 디스플레이하도록 구성될 수 있다. 디스플레이부(120)는 예컨대 액정 디스플레이(LCD; liquid crystal display), 발광 다이오드(LED; light emitting diode) 디스플레이, 유기 발광 다이오드(OLED; organic LED) 디스플레이, 마이크로 LED, 마이크로 전자기계 시스템(MEMS; micro electro mechanical systems) 디스플레이, 전자 종이(electronic paper) 디스플레이 중 어느 하나일 수 있으며, 투명 디스플레이 또는 터치 스크린(touch screen) 등 다양한 형태로 구성될 수 있으며, 이들에 제한되지 않는다.
보다 구체적으로 디스플레이부(120)는 제품 설명 등의 제품의 구체적인 정보, 제품 할인 이벤트와 같이 사용자에게 전달하기 위한 사용자 전달 정보 등을 제공하기 위해 무인 상점 장치(100)의 상단에 위치할 수 있는 제1 디스플레이부(121) 및 각 판매 상품의 가격 및 간단한 정보를 제공하기 위해 상품 수납부(110)에 인접하여 위치할 수 있는 제2 디스플레이부(122)를 포함할 수 있다.
카메라부(130)는 무인 상점 장치(100)의 전면에 위치하는 사용자의 얼굴 촬영 또는 무인 상점 장치(100)의 전면을 지나가는 사용자들을 촬영하기 위해 무인 상점 장치(100)의 전면에 위치한 전면 카메라부(131) 및 사용자가 상품 구매를 위해 상품을 쥐고, 파지하고, 터치하고, 이동시키는 다양한 액션을 촬영하도록 무인 상점 장치(100)의 실내에 위치하는 실내 카메라부(132)를 포함할 수 있으며, 여기서 전면 카메라부(131) 및 실내 카메라부(132)는 소형 카메라 또는 다양한 센서를 포함할 수 있으며, 거리 측정을 위해 스테레오 카메라 등의 깊이 카메라를 포함할 수도 있다.
또한, 실내 카메라부(132)는 예컨대, 무인 상점 장치(100) 내의 상하좌우에 각각 설치된 적어도 4개의 카메라를 포함할 수 있다. 이와 같이, 상하좌우 각 방향에서 촬영된 이미지를 이용하면, 4개 방향에서의 촬영 이미지 중 적어도 하나의 촬영 이미지에서는 사용자에 의해 가려진 폐색 영역에 의해 사용자가 선택한 상품을 식별할 수 없는 경우, 나머지 사용자에 의해 가려지지 않은 촬영 이미지에 기초하여 사용자가 선택하여 상품 수납부(110)에서 이탈된 상품을 식별할 수 있다. 예컨대, 사용자가 오른 손을 이용하여 상품을 우측에서 쥔 경우, 사용자가 쥔 상품의 우측 영역의 대부분은 사용자의 손에 의해 가려져 우측 카메라에 의해 촬영된 이미지에서는 상품의 선택 여부를 명확히 파악할 수 없으나, 나머지 방향에서의 카메라, 예컨대 좌측 카메라 또는 상하측 카메라에서 촬영된 이미지에서는 사용자의 손과 함께 파지된 상품이 같이 나타나, 선택되어 파지된 상품을 식별할 수 있다. 이와 같이 복수의 방향에서 촬영된 이미지를 복합적으로 이용하여 사용자가 파지한 상품을 보다 정확하게 파악할 수 있다.
또한, 실내 카메라부(132)를 통한 이미지 인식 정보뿐만 아니라 상품 수납부(110) 내에 설치된 무게 센서를 함께 활용하여 사용자가 선택하여 파지함으로써 상품 수납부에서 이탈된 상품을 보다 정확하게 파악할 수 있다.
도어부(140)는 무인 상점 장치(100)의 전면에 존재하여 내부 상품들을 보호하기 위해 구성된 여닫이 형태 또는 슬라이드 형태 등 다양한 형태로 구성될 수 있으며, 내부 상품들이 잘 보이도록 투명한 유리 등으로 구성될 수 있다. 도어부(140)는 사용자 인증에 따라 자동으로 언락(unlock)되어 오픈되도록 제어될 수 있으며, 상품 구매가 완료된 후에 자동으로 락(lock)되어 닫힐 수 있도록 제어될 수 있다.
처리부(150)는 서버와의 데이터 통신 처리, 서버로부터 수신한 명령에 따른 동작 제어, 사용자 단말과의 데이터 통신 처리, 디스플레이부(120)에 표시할 정보 처리, 카메라부(130)에서 촬영된 영상 처리 및 사용자의 액션 인식, 결제 처리 등과 관련된 각종 처리를 실행하도록 구성된다. 예컨대, 처리부(150)는 중앙 처리 장치(CPU), 어플리케이션 프로세서(AP) 등을 포함할 수 있으며, 적어도 하나의 다른 구성요소에 관계된 명령 또는 데이터를 저장할 수 있는 메모리를 내부에 포함하거나, 장치 내의 메모리부 또는 필요한 경우 외부 메모리와 통신하여 필요한 정보에 액세스할 수 있다. 보다 구체적인 처리부(150)의 구성에 대해서는 도 2를 참조하여 후술할 것이다.
통신부(160)는 무인 상점을 운영하기 위한 서버 또는 모바일 스마트폰과 같은 사용자 장치로부터 필요한 정보를 송수신하거나 획득한 정보를 외부 서버 또는 외부 사용자 장치로 송신하도록 구성되며, 여기서, 네트워크는 유선 또는 무선으로 연결되는 네트워크일 수 있다.
여기서, 네트워크는 대용량, 장거리 음성 및 데이터 서비스가 가능한 대형 통신망의 고속 기간망인 통신망일 수 있으며, 인터넷(Internet) 또는 고속의 멀티미디어 서비스를 제공하기 위한 차세대 유선망 및 무선망을 포함할 수 있다. 네트워크가 무선 통신망일 경우, 셀룰러 통신 또는 근거리 통신을 포함할 수 있다. 예컨대, 셀룰러 통신은 LTE(Long-Term Evolution), LTE-A(LTE Advanced), 5G(5th Generation), CDMA(Code Division Multiple Access), WCDMA(Wideband CDMA), UMTS(Universal Mobile Telecommunications System), WiBro(Wireless Broadband), 또는 GSM(Global System for Mobile Communications) 등 중 적어도 하나를 포함할 수 있다. 또한, 근거리 통신은 Wi-Fi(Wireless Fidelity), 블루투스(Bluetooth), 지그비(Zigbee) 또는 NFC(Near Field Communication) 등 적어도 하나를 포함할 수 있다. 그러나, 통신 방법은 이에 한정되는 것은 아니며 차후 개발되는 무선 통신의 기술도 포함될 것이다.
오디오 출력부(170)는 사용자에게 알람, 알림 또는 효과음 등을 소리로 제공할 수 있으며, 판매 상품 또는 결제 관련 정보를 알림음으로 출력하도록 구성될 수 있으며, 디스플레이부(120)와 연동하여 사용자에게 필요한 정보를 알리는 것도 가능하다.
마지막으로 냉장부(180)는 무인 상점 장치(100) 내의 상품이 예컨대 음료, 신선 식품 등을 포함하는 경우 해당 상품의 온도를 낮추어 냉장을 유지하는 기능을 수행할 수 있다. 필요에 따라, 냉장부(180)의 전원은 온, 오프 될 수 있다.
도 2는 본 발명의 일 실시예에 따른 무인 상점 장치 또는 무인 상점 서버의 처리부의 구체적인 구성을 설명하기 위한 블록도이다.
일 실시예에 따르면, 처리부(150)는 이미지 처리부(151), 사용자 식별부(152), 액션 인식부(153), 재고 처리부(154), 도어락 제어부(155), 가격 결정부(156), 사용자 알림 처리부(157) 및 결제 처리부(158)를 포함할 수 있으며, 처리부(150)의 일부 구성 요소는 무인 상점 장치(100) 또는 무인 상점 서버(200) 중 어느 하나 또는 양 쪽 모두에 위치할 수 있으며, 무인 상점 서버(200)의 처리부에서 처리된 결과를 무인 상점 장치(100)의 처리부에서 수신하여 무인 상점 장치(100)를 제어 또는 출력하도록 구성될 수 있다. 처리부(150)에 포함된 프로그램 또는 프로그램 모듈들은 운영 체제(operating system), 어플리케이션 프로그램(application program) 또는 프로그램 등의 형태로 구성될 수 있으며, 널리 사용되는 다양한 종류의 저장 장치 상에 물리적으로 저장될 수 있다. 이와 같은 프로그램 또는 프로그램 모듈은 하나 이상의 루틴(routine), 서브루틴(subroutine), 프로그램(program), 오브젝트(object), 콤포넌트(component), 명령(instructions), 데이터 구조(data structure) 및 특정 작업(task)을 수행하거나 특정 데이터 유형을 실행하기 위한 다양한 형태를 포함할 수 있으며, 이들 형태로 제한되지 않는다.
먼저 이미지 처리부(151)는 카메라부(130)에서 촬영된 이미지를 처리하고 분석하기 위한 이미지 프로세서 등을 포함하며, 여기서 처리된 이미지 인식 결과가 사용자 식별부(152) 및 액션 인식부(153) 등에서 활용될 수 있다.
사용자 식별부(152)는 무인 상점 장치(100)의 전면 카메라부(131)를 통한 얼굴 인식을 통해 전면 또는 인접하여 존재하는 사용자를 식별하고, 사용자 인증을 수행하도록 구성될 수 있다. 또한, 사용자 식별부(152)는 전면 카메라부(131)를 통해 촬영된 영상을 통해 무인 상점 장치(100)가 설치된 공간을 지나가는 사람을 식별하여 이동하는 사람의 빈도수를 결정할 수 있다.
또한, 사용자 식별부(152)는 무인 상점 장치(100)로부터 사용자 모바일 장치로 예컨대 블루투스(Bluetooth) 신호 등의 무선 신호를 전송하고, 사용자 모바일 장치에서 무선 신호의 강도가 미리 결정된 기준 이상인지 여부를 판단하고, 무선 신호의 강도가 미리 결정된 기준 이상인 경우에 해당 사용자와 관련된 식별 정보를 무인 상점 서버(300)로 전송하여 사용자 인증을 수행하도록 구성될 수 있다. 또한, 사용자 식별부(152)는 무선 신호의 강도가 미리 결정된 기준 이상인 경우 해당 사용자 모바일 장치에 무인 상점 장치(100)의 도어를 언락(unlock)하기 위한 언락 버튼을 활성화시키도록 구성될 수 있다. 여기서, 무선 신호는 블루투스 신호뿐만 아니라, WiFi 신호, 자력계(Mangnetometor) 신호, 퓨전 센서 신호 등 실내 계측 기술에서 사용되는 신호 등을 포함할 수 있다.
또한, 사용자 식별부(152)는 무인 상점 장치(100)로부터 복수의 사용자 모바일 장치로 블루투스 신호 등의 무선 신호가 전송된 경우, 복수의 사용자 모바일 장치 중 무선 신호의 강도가 가장 센 모바일 장치만을 활성화시키도록 구성될 수 있으며, 이때 해당 모바일 장치에만 언락 버튼을 활성화시킴으로써 단일 사용자만이 무인 상점 장치(100)를 이용하도록 알려줄 수 있다.
또한, 사용자 식별부(152)는 사용자의 식별 정보에 기초하여 사용자가 관리(administration) 권한을 갖고 있는 관리자인지 또는 일반 고객인지 여부를 판단하도록 구성되고, 식별된 사용자가 관리 권한을 갖고 있는 경우 상품 수납부(110)에 추가되어 채워지는 상품 정보에 기초하여 재고 처리부(154)를 통해 재고 정보를 업데이트할 수 있다.
액션 인식부(153)는 사용자가 상품 구매를 위해 상품을 쥐고, 파지하고, 터치하고, 이동시키는 다양한 액션을 인식하여, 사용자가 선택하여 쥐고 이동시킴으로써, 상품 수납부(110)에서 이탈하여 결제되는 상품을 인식하도록 구성될 수 있다.
또한, 액션 인식부(153)는 사용자가 구매하는 상품을 명확히 인식하기 위해 폐색(occlusion) 저항성을 갖는 이미지 처리 방법을 이용할 수 있다. 실내 카메라부(132)의 상하좌우 각 방향에서 촬영된 이미지를 이용하면, 4개 방향에서의 촬영 이미지 중 적어도 하나의 촬영 이미지에서는 사용자에 의해 가려진 폐색 영역에 의해 상기 사용자가 선택한 상품을 식별할 수 없는 경우, 나머지 사용자에 의해 가려지지 않은 촬영 이미지에 기초하여 사용자가 선택하여 상품 수납부(110)에서 이탈된 상품을 정확하게 식별할 수 있다. 예컨대, 사용자가 손을 이용하여 상품의 일부 영역을 가린 경우에도, 사용자가 가리지 않은 방향의 카메라들에서 촬영된 이미지 인식을 통해 사용자에 의해 파지된 상품을 명확하게 식별할 수 있으며, 이때 종래 데이터들을 학습하여 인공 지능 기반의 인식 기술을 활용할 수 있다.
또한, 액션 인식부(153)는 실내 카메라부(132)를 통한 이미지 인식 정보뿐만 아니라 상품 수납부(110) 내에 설치된 무게 센서의 측정 값을 함께 활용하여 사용자가 선택하여 파지함으로써 상품 수납부에서 이탈된 상품을 인식하도록 구성될 수 있다.
또한, 액션 인식부(153)를 통해 사용자가 잡거나 터치한 상품을 인식할 때, 인식된 상품과 관련된 정보를 디스플레이부(120)의 일부 영역에 표시할 수 있다. 이에 따라, 사용자는 해당 상품의 터치를 통해 관련 정보를 확인가능함으로써 구매 의사 결정에 도움을 줄 수 있다.
재고 처리부(154)는 사용자가 구매한 상품의 종류 및 인식을 인식하여 재고 정보를 반영하고, 관리자가 채워 넣은 상품의 종류 및 인식을 인식함으로써 재고 정보를 업데이트하도록 구성되고, 이와 같은 재고 정보가 가격 결정부(156)의 가격 결정에 활용될 수 있다.
도어락 제어부(155)는 사용자 인증 및 상품 구매 완료 판단 등에 기초하여 도어부(140)의 도어의 언락 또는 락을 제어하도록 구성될 수 있다.
가격 결정부(156)는 해당 상품의 재고 개수, 유통기한, 시간 구간 및 상기 무인 상점 장치가 존재하는 위치로부터 미리 결정된 기준 내에 위치하는 무인 상점 장치 관련 앱을 설치한 사용자의 수에 기초하여 결정된 할인율을 포함하는 가격 관련 정보를 생성하도록 구성될 수 있다. 여기서, 미리 결정된 기준은 동일한 빌딩 내에 있는 사용자를 판별하거나, 예컨대 50m, 100m와 같은 일정 거리로 설정될 수 있다. 이때, 가격의 결정은 종래 데이터들을 학습하여 인공 지능 기반 기술을 활용할 수 있다. 또한, 앱 사용자의 기 저장된 구매 이력, 선호 상품 등의 정보를 고려하여 앱 설치 사용자의 수에 웨이트 정보를 추가로 반영할 수 있다.
또한, 가격 정보는 전면 카메라부(131)로부터 촬영된 이미지에 기초하여 무인 상점 장치(100)가 설치된 공간을 지나가는 사람의 빈도수를 추가로 반영하여 결정될 수 있다. 무인 상점 장치(100) 주변의 사람 빈도수는 예비 고객의 수를 나타낼 수 있어, 무인 상점 장치 관련 앱을 설치하지 않는 사람이더라도 주변 사람의 이동 빈도수가 높으면 예비 고객의 상품 구매 가능성이 높아질 것으로 판단할 수 있다.
또한, 가격 결정부(156)에 의해 실시간 변경되는 각 상품의 가격 정보가 디스플레이부(120)에 표시되어 사용자에게 실시간 업데이트된 정보를 제공할 수 있다.
또한, 해당 상품의 재고 개수, 유통기한 및 시간 구간 중 적어도 하나에 기초하여 예컨대 할인율이 높은 상품을 디스플레이부(120)의 적어도 일부 영역에서 광고하고, 이에 따라 할인율 또는 가격 변동에 따라 광고하는 대상을 실시간 자동으로 변경하도록 제어함으로써 광고 효과를 높일 수 있다.
사용자 알림 처리부(157)는 할인율에 기초하여 결정된 가격 정보를 무인 상점 장치(100)가 존재하는 위치로부터 미리 결정된 기준 내에 위치하는 무인 상점 장치 관련 앱을 설치한 사용자 중 적어도 일부에 알림하도록 구성될 수 있다. 알림을 수신할 사용자의 선택은 사용자의 위치, 예컨대, 현재 사용자의 위치가 무인 상점 장치(100)가 존재하는 빌딩과 동일한 빌딩인지 여부를 고려할 수 있고, 또한 사용자의 선호도, 예컨대 알림하는 상품이 사용자의 선호 상품 또는 구매 이력에 포함된 상품인지 여부 등을 종합적으로 고려하여 판단할 수 있다.
마지막으로 결제 처리부(158)은 사용자의 식별 정보에 기초하여 구매한 상품의 결제를 처리하도록 구성될 수 있다. 이때, 결제 수단은 해당 앱에 설정된 정보 또는 일반 신용카드 결제, 모바일 결제 등 다양한 결제 수단을 활용할 수 있다.
도 3a 및 도 3b는 본 발명의 일 실시예에 따른 무인 상점 장치의 구성을 설명하기 위한 예시도이다.
도 3a를 참조하면, 무인 상점 장치(100)의 전면 상단에 제1 디스플레이부(121)가 위치하여 판매 제품 또는 상품의 구체적인 정보뿐만 아니라 사용자에 대한 인사, 제품 할인 이벤트와 같이 사용자에게 전달하기 위한 사용자 전달 정보를 표시할 수 있다. 상품 수납부(110)에 다양한 상품들이 진열되고, 상품 수납부(110)에 인접하여 각 상품의 가격과 간단한 상품 정보를 표시할 수 있는 제2 디스플레이부(122)가 위치할 수 있다.
또한, 무인 상점 장치(100)의 전면 상단에 전면 카메라부(131)가 위치하여 무인 상점 장치(100) 전면 또는 인접하여 위치한 사용자에 대한 이미지를 획득할 수 있다. 또한, 도어부(140)를 통해 내부의 상품을 보호하고, 사용자 인증을 통해 도어의 언락 또는 락 제어를 통해 도어를 오픈하거나 닫을 수 있다.
도 3b를 참조하면, 예컨대 무인 상점 장치(100) 내부의 상, 하, 좌, 우에 각각 하나의 카메라를 포함하는 실내 카메라부(132)가 설치될 수 있고, 이와 같이 4개의 방향에서 얻은 이미지를 통해, 4개 방향에서의 촬영 이미지 중 적어도 하나의 촬영 이미지에서는 사용자에 의해 가려진 폐색 영역에 의해 사용자가 선택한 상품을 식별할 수 없는 경우, 나머지 가려지지 않은 촬영 이미지에 기초하여 사용자가 선택하여 상품 수납부(110)에서 이탈된 상품을 정확히 식별할 수 있다
도 4는 본 발명의 일 실시예에 따른 무인 상점 시스템의 운영 방법을 설명하기 위한 흐름도이다. 도 4는 사용자의 앱 내에서 활성화되는 언락 버튼을 통한 활성화 방식을 예시로 한다.
먼저 무인 상점 장치(100)에서 상점과 사용자의 모바일 장치 사이의 거리가 근접하였는지 주기적으로 인식하기 위해 블루투스 신호를 발생시킨다.(S401)
고객의 모바일 장치가 될 수 있는 사용자 단말(200)은 블루투스 신호 강도가 미리 결정된 기준 값 이상인 경우, 해당 앱을 통해 사용자 ID 및 블루투스 신호를 발생시킨 무인 상점 장치 ID를 무인 상점 서버(300)에 전달한다.(S402) 이와 같은 구성을 통해 사용자가 무인 상점 장치(100)와 특정 거리 이하인 경우에만 상품 구매 프로세스를 활성화시킬 수 있다.
무인 상점 서버(300)는 수신한 사용자 ID 및 무인 상점 장치 ID를 확인한 후에, 사용자 단말(200)에 언락 버튼을 활성화시키는 신호를 전달한다.(S403)
사용자 단말(200)에서 앱을 통해 언락 버튼이 활성화되고(S404), 사용자는 터치 등의 동작을 통해 언락 버튼을 입력함으로써 인증을 완료할 수 있다.(S405)
이에 따라 무인 상점 서버(300)에서 무인 상점 장치(100)에 사용자 ID가 전달되고(S406), 무인 상점 장치(100)의 도어를 언락하여 전면 유리창 등을 오픈할 수 있다.(S407)
사용자는 오픈된 도어를 통해 구매하고자 하는 상품을 선택하여 잡을 수 있고, 이때, 무인 상점 장치(100)의 실내에 상하좌우에 배치된 실내 카메라가 활성화되어 사용자 액션을 트래킹하고 구매하는 상품을 인식할 수 있다.(S408)
일정 기간 이상 사용자의 액션이 인식되지 않으면 상품 구매가 종료되거나 포기한 것으로 판단되어 도어를 락하고 자동으로 닫을 수 있다.(S409)
사용자가 가져간 상품 정보를 서버에 전송하고(S410), 무인 상점 서버(300)는 미리 설정된 시간 이후에 사용자가 구매한 것으로 판단되는 상품 금액을 결제 처리하고 결제 정보를 사용자 단말에 전달할 수 있다.(S411) 만약, 사용자가 해당 제품을 다시 상품 수납부(110)에 올려놓은 것으로 판단되는 경우 해당 상품의 결제는 취소되어 환불될 수 있다.
사용자 단말(200)에 결제 정보가 표시되어(S412) 사용자는 결제가 올바르게 됐는지 확인할 수 있다.
도 5는 본 발명의 다른 실시예에 따른 무인 상점 시스템의 운영 방법을 설명하기 위한 흐름도이다. 도 5는 사용자의 얼굴 인식에 기초하여 도어를 언락하여 오픈하는 방식을 예시로 한다.
먼저 무인 상점 장치(100)에서 상점과 사용자의 모바일 장치 사이의 거리가 근접하였는지 주기적으로 인식하기 위해 블루투스 신호를 발생시킨다.(S501)
사용자 단말(200)은 블루투스 신호 강도가 미리 결정된 기준 값 이상인 경우, 해당 앱을 통해 사용자 ID 및 블루투스 신호를 발생시킨 무인 상점 장치 ID를 무인 상점 서버(300)에 전달한다.(S502) 이와 같은 구성을 통해 사용자가 무인 상점 장치(100)와 특정 거리 이하인 경우에만 상품 구매 프로세스를 활성화시킬 수 있다.
무인 상점 서버(300)는 수신한 사용자 ID 및 무인 상점 장치 ID를 확인한 후에, 사용자 ID가 얼굴 정보가 저장된 고객의 ID인 경우 무인 상점 장치(100)에 얼굴 인식 명령을 전달할 수 있다.(S503)
무인 상점 장치(100)의 전면 카메라부(131)를 이용하여 사용자의 얼굴을 촬영하고, 촬영된 이미지를 무인 상점 서버(300)에 전달할 수 있다.(S504)
무인 상점 서버(300)에서 얼굴 정보가 올바르게 매칭되는 경우 언락 명령을 무인 상점 장치(100)에 전달할 수 있다.(S505)
이에 따라 무인 상점 장치(100)는 언락 명령을 수신하여 도어를 오픈할 수 있다.(S506)
사용자는 오픈된 도어를 통해 구매하고자 하는 상품을 선택하여 잡을 수 있고, 이때, 무인 상점 장치(100)의 실내에 상하좌우에 배치된 실내 카메라가 활성화되어 사용자 액션을 트래킹하고 구매하는 상품을 인식할 수 있다.(S507)
일정 기간 이상 사용자의 액션이 인식되지 않으면 상품 구매가 종료되거나 포기한 것으로 판단되어 도어를 락하고 자동으로 닫을 수 있다.(S508)
사용자가 가져간 상품 정보를 서버에 전송하고(S509), 무인 상점 서버(300)는 미리 설정된 시간 이후에 사용자가 구매한 것으로 판단되는 상품 금액을 결제 처리하고 결제 정보를 사용자 단말에 전달할 수 있다.(S510)
사용자 단말(200)에 결제 정보가 표시되어(S511) 사용자는 결제가 올바르게 됐는지 확인할 수 있다.
도 6은 본 발명의 일 실시예에 따라 복수의 사용자가 존재할 때 활성 사용자를 인식하는 방법을 설명하기 위한 예시도이다.
무인 상점 장치(100)를 동시에 복수의 사용자가 이용하는 경우 각 구매 상품이나 결제 처리의 오류가 발생할 수 있어, 동 시간대에 한 명의 사용자만이 점유하도록 설정할 필요가 있다.
도 6을 참조하면, 무인 상점 장치(100)로부터 블루투스 신호와 같이 무선 신호를 발생하여 전송하는 경우, 근처에 있는 3명의 사용자(201, 202, 203)이 모두 블루투스 신호를 수신할 수 있다. 이때, 각 사용자(201, 202, 203)가 수신한 신호 크기를 무인 상점 서버(300)로 전송하고, 무인 상점 서버(300)에서 사용자(201)의 신호 크기는 28, 사용자(202)의 신호 크기는 18, 사용자(203)의 신호 크기는 9로 판단하고, 가장 큰 신호 크기를 갖는 사용자(201)만이 무인 상점 장치(100)를 이용하도록 제어할 수 있다.
예컨대, 가장 큰 신호 크기를 갖는 사용자(201)의 모바일 장치에만 무인 상점 장치(100)의 도어를 언락(unlock)하기 위한 언락 버튼을 활성화시킴으로써, 가장 인접한 사용자(201)이 먼저 무인 상점 장치(100)를 이용하도록 안내할 수 있다.
도 7은 본 발명의 일 실시예에 따라 상품의 할인율을 결정하기 위한 방법을 설명하기 위한 예시도이다.
도 7을 참조하면, 각 상품, 상품 A, 상품 B, 상품 C에 대해, 재고 개수, 유통기한, 미리 설정된 기준 내 앱 설치된 사용자의 수로 설정될 수 있는 유효 고객 수와, 전면 카메라로 인식되어 앱 설치 여부와 상관없이 주변 이동 고객의 빈도수에 기초하여 설정될 수 있는 예비 고객 수 등을 고려하여 상품의 할인율을 결정할 수 있다.
여기서, 유통 기한도 여유 있고, 주변 유효 고객 수 및 예비 고객수가 비교적 큰 상품 A의 경우 할인을 적용하지 않고, 유통 기한이 매우 임박하였고, 유효 고객 수나 예비 고객수도 비교적 작은 경우인 상품 B의 경우 재고 상품을 빨리 판매하기 위해 할인율을 40% 적용할 수 있다.
도 8a 및 도 8b는 본 발명의 일 실시예에 따른 무인 상점 장치의 외형을 나타내는 예시도이다.
도 8a 및 도 8b를 참조하면 필요에 따라 다양한 형태 및 외형을 갖는 자판기의 형태를 갖도록 무인 상점 장치가 구성될 수 있음을 파악할 수 있을 것이다.
이상 본 발명의 실시예에 따른 무인 상점 운영 방법 및 무인 상점 시스템을 구체적인 다양한 실시 형태로서 설명하였으나, 이는 예시에 불과한 것으로서, 본 발명은 이에 한정되지 않는 것이며, 본 명세서에 개시된 기초 사상에 따르는 최광의 범위를 갖는 것으로 해석되어야 한다. 당업자는 개시된 실시형태들을 조합, 치환하여 적시되지 않은 형상의 패턴을 실시할 수 있으나, 이 역시 본 발명의 범위를 벗어나지 않는 것이다. 이외에도 당업자는 본 명세서에 기초하여 개시된 실시형태를 용이하게 변경 또는 변형할 수 있으며, 이러한 변경 또는 변형도 본 발명의 권리범위에 속함은 명백하다.
100: 무인 상점 장치 110: 상품 수납부
120: 디스플레이부 130: 카메라부
140: 도어부 150: 처리부
160: 통신부 170: 오디오 출력부
180: 냉장부
200: 사용자 단말
300: 무인 상점 서버
120: 디스플레이부 130: 카메라부
140: 도어부 150: 처리부
160: 통신부 170: 오디오 출력부
180: 냉장부
200: 사용자 단말
300: 무인 상점 서버
Claims (22)
- 무인 상점 장치 및 서버를 포함하는 무인 상점 시스템을 운영하는 방법에 있어서,
상기 무인 상점 장치에 인접한 사용자를 식별하는 사용자 식별 단계;
상기 무인 상점 장치의 도어부를 제어하여 상기 무인 상점 장치의 도어를 언락(unlock)하는 도어 개방 단계;
카메라부에서 촬영된 이미지 분석에 기초하여, 상기 사용자가 선택하여 상기 무인 상점 장치의 상품 수납부에서 이탈된 상품을 식별하는 구매 상품 식별 단계; 및
상기 사용자의 식별 정보에 기초하여 결제를 처리하는 결제 처리 단계
를 포함하고,
상기 구매 상품 식별 단계는,
상기 무인 상점 장치 내의 상하좌우에 각각 설치된 적어도 4개의 카메라의 촬영 이미지를 획득하는 단계; 및
상기 4개의 상하좌우 각 방향에서 촬영된 촬영 이미지 중 적어도 하나의 촬영 이미지가 상기 사용자에 의해 가려진 폐색 영역에 의해 상기 사용자가 선택한 상품을 식별할 수 없는 경우, 나머지 가려지지 않은 촬영 이미지들에 기초하여 상기 사용자가 선택하여 상기 상품 수납부에서 이탈된 상품을 식별하는 단계를 포함하는 것이고,
상기 상품 수납부에 진열된 각 상품의 가격 정보를 표시하기 위한 디스플레이부에서, 상기 가격 정보를 실시간으로 업데이트하는 단계를 더 포함하고,
상기 가격 정보에 적용되는 할인율은 해당 상품의 재고 개수, 유통기한 및 상기 무인 상점 장치가 존재하는 위치로부터 미리 결정된 기준 내에 위치하는 상기 무인 상점 장치 관련 앱을 설치한 사용자의 수로 설정되는 유효 고객수, 및 상기 무인 상점 장치의 카메라로부터 촬영된 이미지에 기초하여 상기 무인 상점 장치가 설치된 공간을 지나가는 사람의 빈도수로 설정되는 예비 고객수에 기초하여 결정되는 것인, 무인 상점 운영 방법. - 제1항에 있어서, 상기 사용자 식별 단계는,
상기 무인 상점 장치로부터 상기 사용자의 모바일 장치로 무선 신호를 전송하는 단계;
상기 사용자의 모바일 장치에서 무선 신호의 강도가 미리 결정된 기준 이상인지 여부를 판단하는 단계; 및
상기 무선 신호의 강도가 미리 결정된 기준 이상인 경우 상기 사용자와 관련된 식별 정보를 상기 서버로 전송하여 사용자 인증을 수행하는 단계
를 포함하는 무인 상점 운영 방법. - 제2항에 있어서, 상기 무선 신호의 강도가 미리 결정된 기준 이상인 경우 상기 사용자의 모바일 장치에 상기 무인 상점 장치의 도어를 언락(unlock)하기 위한 언락 버튼을 활성화하는 단계를 더 포함하는 무인 상점 운영 방법.
- 제2항에 있어서, 상기 사용자 식별 단계는,
상기 무인 상점 장치의 카메라부로부터 촬영된 상기 사용자의 얼굴 이미지에 기초하여 사용자 인증을 수행하는 단계를 더 포함하는 무인 상점 운영 방법. - 제1항에 있어서, 상기 사용자 식별 단계는, 상기 사용자의 식별 정보에 기초하여 상기 사용자가 관리(administration) 권한을 갖고 있는지 여부를 판단하는 단계를 더 포함하고,
상기 사용자가 관리 권한을 갖고 있는 경우 상기 상품 수납부에 추가되는 상품 정보에 기초하여 재고 정보를 업데이트하는 단계를 포함하는 것인, 무인 상점 운영 방법. - 제2항에 있어서, 상기 사용자 식별 단계는,
상기 무인 상점 장치로부터 상기 무선 신호를 수신한 모바일 장치가 복수 개인 경우, 상기 복수의 모바일 장치 중 수신한 무선 신호의 강도가 가장 센 모바일 장치만을 활성화시키는 단계를 더 포함하는 것인, 무인 상점 운영 방법. - 삭제
- 제1항에 있어서, 상기 구매 상품 식별 단계는 상기 카메라부에서 촬영된 이미지 분석에 더하여, 상기 상품 수납부에 설치된 무게 센서의 측정 값에 기초하여 상기 사용자가 선택하여 상기 상품 수납부에서 이탈된 상품을 식별하는 단계를 포함하는 것인, 무인 상점 운영 방법.
- 삭제
- 삭제
- 삭제
- 제1항에 있어서, 상기 사용자가 잡거나 터치한 상품을 인식하는 단계; 및
상기 인식된 상품과 관련된 정보를 상기 디스플레이부의 적어도 일부 영역에 표시하는 단계
를 더 포함하는 무인 상점 운영 방법. - 제1항에 있어서, 해당 상품의 재고 개수, 유통기한 및 시간 구간 중 적어도 하나에 기초하여 상기 디스플레이부의 적어도 일부 영역에서 광고하는 제품 정보를 변경하는 단계를 더 포함하는 무인 상점 운영 방법.
- 제1항에 있어서, 상기 할인율에 기초하여 결정된 상기 가격 정보를 상기 무인 상점 장치가 존재하는 위치로부터 미리 결정된 기준 내에 위치하는 상기 무인 상점 장치 관련 앱을 설치한 사용자 중 적어도 일부에 알림하는 단계를 더 포함하는 무인 상점 운영 방법.
- 무인 상점 장치 및 서버를 포함하는 무인 상점 시스템에 있어서,
상기 무인 상점 장치에 인접한 사용자를 식별하도록 구성된 사용자 식별부;
상기 무인 상점 장치의 도어를 락(lock) 또는 언락(unlock)하도록 제어되는 도어부;
상기 무인 상점 장치 내에 설치된 적어도 하나의 카메라를 포함하는 카메라부;
카메라부에서 촬영된 이미지 분석에 기초하여, 상기 사용자가 선택하여 상기 무인 상점 장치의 상품 수납부에서 이탈된 상품을 식별하도록 구성된 구매 상품 식별부; 및
상기 사용자의 식별 정보에 기초하여 결제를 처리하도록 구성된 결제 처리부
를 포함하고,
상기 구매 상품 식별부는,
상기 무인 상점 장치 내의 상하좌우에 각각 설치된 적어도 4개의 카메라의 상하좌우 각 방향에서 촬영된 촬영 이미지를 획득하고, 상기 4개의 촬영 이미지 중 적어도 하나의 촬영 이미지가 상기 사용자에 의해 가려진 폐색 영역에 의해 상기 사용자가 선택한 상품을 식별할 수 없는 경우, 나머지 가려지지 않은 촬영 이미지들에 기초하여 상기 사용자가 선택하여 상기 상품 수납부에서 이탈된 상품을 식별하도록 구성되는 것이고,
상기 상품 수납부에 진열된 각 상품의 가격 정보를 표시하기 위한 디스플레이부를 더 포함하고, 상기 가격 정보는 실시간으로 업데이트되는 것이고,
상기 가격 정보에 적용되는 할인율은 해당 상품의 재고 개수, 유통기한 및 상기 무인 상점 장치가 존재하는 위치로부터 미리 결정된 기준 내에 위치하는 상기 무인 상점 장치 관련 앱을 설치한 사용자의 수로 설정되는 유효 고객수, 및 상기 무인 상점 장치의 카메라로부터 촬영된 이미지에 기초하여 상기 무인 상점 장치가 설치된 공간을 지나가는 사람의 빈도수에 기초하여 결정되는 것인, 무인 상점 시스템. - 제15항에 있어서, 상기 사용자 식별부는,
상기 무인 상점 장치의 카메라부로부터 촬영된 상기 사용자의 얼굴 이미지에 기초하여 사용자 인증을 수행하도록 구성되는 것인, 무인 상점 시스템. - 제15항에 있어서, 상기 사용자 식별부는, 상기 사용자의 식별 정보에 기초하여 상기 사용자가 관리(administration) 권한을 갖고 있는지 여부를 판단하도록 구성되고,
상기 사용자가 관리 권한을 갖고 있는 경우 상기 상품 수납부에 추가되는 상품 정보에 기초하여 재고 정보를 업데이트하도록 구성되는 재고 정보 처리부를 더 포함하는 것인, 무인 상점 시스템. - 제15항에 있어서, 상기 무인 상점 장치로부터 상기 사용자의 모바일 장치로 무선 신호를 전송하기 위한 통신부를 더 포함하고,
상기 사용자 식별부는, 상기 무인 상점 장치로부터 무선 신호를 수신한 모바일 장치가 복수 개인 경우, 상기 복수의 모바일 장치 중 수신한 무선 신호의 강도가 가장 센 모바일 장치만을 활성화시키도록 구성되는 것인, 무인 상점 시스템. - 삭제
- 삭제
- 삭제
- 삭제
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020200019152A KR102439875B1 (ko) | 2020-02-17 | 2020-02-17 | 무인 상점 운영 방법 및 이를 이용한 무인 상점 시스템 |
PCT/KR2021/001978 WO2021167326A1 (ko) | 2020-02-17 | 2021-02-16 | 무인 상점 운영 방법 및 이를 이용한 무인 상점 시스템 |
US17/544,318 US11935022B2 (en) | 2020-02-17 | 2021-12-07 | Unmanned store operation method and unmanned store system using same |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020200019152A KR102439875B1 (ko) | 2020-02-17 | 2020-02-17 | 무인 상점 운영 방법 및 이를 이용한 무인 상점 시스템 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20210104427A KR20210104427A (ko) | 2021-08-25 |
KR102439875B1 true KR102439875B1 (ko) | 2022-09-02 |
Family
ID=77391459
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020200019152A KR102439875B1 (ko) | 2020-02-17 | 2020-02-17 | 무인 상점 운영 방법 및 이를 이용한 무인 상점 시스템 |
Country Status (3)
Country | Link |
---|---|
US (1) | US11935022B2 (ko) |
KR (1) | KR102439875B1 (ko) |
WO (1) | WO2021167326A1 (ko) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102367182B1 (ko) | 2021-09-13 | 2022-02-23 | 김혁제 | 휴대폰 용품 판매점 운영 시스템 및 그 방법 |
CN117455595B (zh) * | 2023-11-07 | 2024-06-11 | 浙江云伙计科技有限公司 | 一种基于视觉ai的无人智能值守方法及*** |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101747834B1 (ko) * | 2016-03-14 | 2017-06-14 | 주식회사 자하스마트 | 동시 출입 기록이 가능한 공동현관 출입 제어 시스템 및 방법 |
KR102001806B1 (ko) * | 2019-02-21 | 2019-07-18 | 이한승 | 도어를 개방하여 상품을 선택할 수 있는 스마트 자판기 |
KR102061423B1 (ko) * | 2018-07-19 | 2019-12-31 | 이충근 | 무인 편의점 모니터링 시스템 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO1996032683A1 (en) * | 1995-04-13 | 1996-10-17 | Helfgott & Karas, P.C. | Sales promotion data processor system and interactive changeable display particularly useful therein |
US8781622B2 (en) * | 2010-06-02 | 2014-07-15 | Utique, Inc. | Mobile device assisted retail system and process in a vending unit, retail display or automated retail store |
US20130284806A1 (en) * | 2011-10-19 | 2013-10-31 | Ran Margalit | Automated purchasing system |
US10176456B2 (en) * | 2013-06-26 | 2019-01-08 | Amazon Technologies, Inc. | Transitioning items from a materials handling facility |
US10353982B1 (en) * | 2013-08-13 | 2019-07-16 | Amazon Technologies, Inc. | Disambiguating between users |
KR20150093289A (ko) * | 2014-02-06 | 2015-08-18 | 지민수 | 고객 응대 및 가격 조정 기능을 구비한 무인 점포 시스템 |
JP2017521780A (ja) * | 2014-07-01 | 2017-08-03 | ロニー ヘイ | コンピュータ制御式の無人自動チェックアウト式店舗アウトレット及び関連方法 |
US20180308564A1 (en) * | 2015-10-16 | 2018-10-25 | Touchpoint Medical, Inc. | Point-of-care workstation/cart with smartphone interface |
KR20190021183A (ko) * | 2017-08-22 | 2019-03-05 | 주식회사 마이샵온샵 | 무인 상점 관리 방법 및 시스템 |
KR20190134859A (ko) | 2018-04-27 | 2019-12-05 | 한국과학기술원 | 인공지능 무인상점에서 웨어러블 장치를 이용한 사용자 흥미도 기반 개인 맞춤형 제품 정보 제공 방법 및 장치 |
US10282852B1 (en) * | 2018-07-16 | 2019-05-07 | Accel Robotics Corporation | Autonomous store tracking system |
KR20200013175A (ko) * | 2018-07-20 | 2020-02-06 | 총-위엔 차이 | Ai 자동문 양방향 인터넷 및 ai 자동문 |
-
2020
- 2020-02-17 KR KR1020200019152A patent/KR102439875B1/ko active IP Right Grant
-
2021
- 2021-02-16 WO PCT/KR2021/001978 patent/WO2021167326A1/ko active Application Filing
- 2021-12-07 US US17/544,318 patent/US11935022B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101747834B1 (ko) * | 2016-03-14 | 2017-06-14 | 주식회사 자하스마트 | 동시 출입 기록이 가능한 공동현관 출입 제어 시스템 및 방법 |
KR102061423B1 (ko) * | 2018-07-19 | 2019-12-31 | 이충근 | 무인 편의점 모니터링 시스템 |
KR102001806B1 (ko) * | 2019-02-21 | 2019-07-18 | 이한승 | 도어를 개방하여 상품을 선택할 수 있는 스마트 자판기 |
Also Published As
Publication number | Publication date |
---|---|
US11935022B2 (en) | 2024-03-19 |
WO2021167326A1 (ko) | 2021-08-26 |
US20220101291A1 (en) | 2022-03-31 |
KR20210104427A (ko) | 2021-08-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2018203512A1 (en) | Methods, systems and devices for detecting user interactions | |
US20170301173A1 (en) | Vending machine | |
WO2019128048A1 (zh) | 信息处理方法及装置、电子设备及存储介质 | |
CN104321796B (zh) | 使用智能设备的顾客辅助请求*** | |
KR102369205B1 (ko) | 전자 디스플레이들을 머천다이징하기 위한 시스템들 및 방법들 | |
US9306660B2 (en) | Dynamic interactive zone driven proximity awareness system | |
US11935022B2 (en) | Unmanned store operation method and unmanned store system using same | |
US11734688B2 (en) | System to determine group association between users | |
WO2019128066A1 (zh) | 信息处理方法及装置、电子设备及存储介质 | |
US20180240151A1 (en) | Electronic routing and messaging in a venue based on wait times | |
CN107004334A (zh) | 用于改进顾客体验和数据分析的商店智能传感器平台 | |
US20180315116A1 (en) | System for autonomous configuration of product displays | |
KR101707979B1 (ko) | 근거리 무선 통신 장치를 이용한 통합 플랫폼 시스템 | |
US11785416B2 (en) | Enhanced algorithms for improved user experience using internet of things sensor integration | |
US20230237428A1 (en) | Order fulfillment using routes | |
US20120130920A1 (en) | Commodity processing supporting system and commodity processing supporting method | |
WO2020163217A1 (en) | Systems, method and apparatus for frictionless shopping | |
KR20200079721A (ko) | 스마트 의류 관리 시스템 및 그 방법 | |
KR20200132897A (ko) | 시착될 의류들의 정보를 처리하기 위한 매장 시스템, 및 방법 및 장치 | |
US20170316190A1 (en) | System and method for supporting operations in a retail store | |
WO2017155800A1 (en) | Image in-stock checker | |
KR102412555B1 (ko) | 로봇과 사용자간의 인터랙션을 위한 방법 및 시스템 | |
KR20210015008A (ko) | 성인용품 판매시스템 및 그 시스템의 구동방법 | |
WO2017209627A1 (en) | Vending machine system for facilitating consumer interactions | |
GB2508087A (en) | Shopping aid |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E902 | Notification of reason for refusal | ||
AMND | Amendment | ||
E601 | Decision to refuse application | ||
AMND | Amendment | ||
GRNT | Written decision to grant | ||
X701 | Decision to grant (after re-examination) |