KR102433323B1 - 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템 및 방법 - Google Patents

생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템 및 방법 Download PDF

Info

Publication number
KR102433323B1
KR102433323B1 KR1020200062500A KR20200062500A KR102433323B1 KR 102433323 B1 KR102433323 B1 KR 102433323B1 KR 1020200062500 A KR1020200062500 A KR 1020200062500A KR 20200062500 A KR20200062500 A KR 20200062500A KR 102433323 B1 KR102433323 B1 KR 102433323B1
Authority
KR
South Korea
Prior art keywords
server
user
authentication
market
biometric information
Prior art date
Application number
KR1020200062500A
Other languages
English (en)
Other versions
KR20210145891A (ko
Inventor
김진성
Original Assignee
(주)이매지니어스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)이매지니어스 filed Critical (주)이매지니어스
Priority to KR1020200062500A priority Critical patent/KR102433323B1/ko
Publication of KR20210145891A publication Critical patent/KR20210145891A/ko
Application granted granted Critical
Publication of KR102433323B1 publication Critical patent/KR102433323B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Shopping interfaces
    • G06Q30/0643—Graphical representation of items or shoppers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/30—Payment architectures, schemes or protocols characterised by the use of specific devices or networks
    • G06Q20/34—Payment architectures, schemes or protocols characterised by the use of specific devices or networks using cards, e.g. integrated circuit [IC] cards or magnetic cards
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/38—Payment protocols; Details thereof
    • G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
    • G06Q20/401—Transaction verification
    • G06Q20/4014—Identity check for transactions
    • G06Q20/40145—Biometric identity checks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0609—Buyer or seller confidence or verification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0631—Item recommendations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/10—Geometric effects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20084—Artificial neural networks [ANN]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • H04N2005/2726—Means for inserting a foreground image in a background image, i.e. inlay, outlay for simulating a person's appearance, e.g. hair style, glasses, clothes

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Computer Security & Cryptography (AREA)
  • Software Systems (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Biomedical Technology (AREA)
  • Mathematical Physics (AREA)
  • Computing Systems (AREA)
  • Molecular Biology (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Computer Hardware Design (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

본 발명은 인증 서버에 관한 것이다. 보다 상세하게는 본 발명은 고객이 자신의 단말에 설치된 사용자 어플리케이션을 이용하여 생체정보 기반 본인 인증을 수행함과 더불어, 생체정보를 기반으로 자신에게 적합한 개인화된 상품 추천 서비스를 이용할 수 있도록 하는 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템 및 방법에 관한 것이다.
본 발명의 실시예에 따르면, 온라인 오픈마켓과 같은 전자 상거래 방식으로 소정의 상품을 구매하고자 하는 고객은 자신이 소지한 스마트폰 등을 이용하여 안면인식을 통한 생체정보와 아울러 신용카드와 같은 금융결제수단을 이용하여 다중 본인 인증을 수행함으로써 계정 도용이 최소화하고 안정적인 전자 상거래를 이용할 수 있도록 하는 효과가 있다.

Description

생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템 및 방법{ELECTRONIC COMMERCIAL SYSTEM FOR PROVIDING AUTHENTICATION MEANS USING BIOMETRIC INFORMATION AND VIRTUAL FITTING SERVICE BASED ON AUGMENTED REALITY AND METHOD THEREOF}
본 발명은 인증 서버에 관한 것으로, 특히 고객이 자신의 단말에 설치된 사용자 어플리케이션을 이용하여 생체정보 기반 본인 인증을 수행함과 더불어, 생체정보를 기반으로 자신에게 적합한 개인화된 상품 추천 서비스를 이용할 수 있도록 하는 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템 및 방법에 관한 것이다.
전자정보기술의 발전에 따라, 종래 원격지간 전화통화 기능 또는 메시지 전송기능만을 제한적으로 제공하는 모바일 단말장치는 현재 그 성능이 대폭 활용됨에 따라, 인터넷 접속, 전자문서 생성 등의 다양한 기능을 제공할 수 있게 되었다.
특히, 인터넷 보급이 급격하게 증가됨에 따라 인터넷이라는 동질의 매체를 통하여 전 세계인을 대상으로 하는 전자 상거래가 개발되어 사용되고 있다. 전자 상거래는 일반적으로 기업과 기업간, 기업과 개인간, 개인과 개인간 자동화된 정보 체계 환경 아래서 모바일 단말 및 전자적 기술 수단을 이용하여 상품 거래뿐만 아니라, 고객 마케팅, 광고, 조달, 서비스, 생산 및 수송 등을 행하는 일련의 활동을 포함하는 것으로 그 개념이 점차 확대되고 있다.
이에, 최근에는 전자 상거래를 이용하고자 하는 고객이 거치형PC가 아닌, 휴대하고 있는 모바일 단말을 이용하여 언제, 어디서나 정보통신망을 통해 온라인 상에서 운영중인 다수의 전자 상거래 서버, 즉 온라인 쇼핑몰에 접속하고, 그로부터 상품정보를 제공받아 모바일 단말 상에서 확인하여 상품을 직접 주문 및 구매하는 소위, 모바일 커머스의 비중이 점차적으로 커지고 있다.
이러한 모바일 단말을 이용한 전자 상거래에서는 고객이 스마트폰, 태블릿PC 등을 이용하여 인터넷 상의 온라인 쇼핑몰에 접속하고, 등록된 계정 및 패스워드를 통해 본인 인증을 수행하여 상품을 선택 및 신용카드 등의 결제수단에 대한 정보를 입력하여 결제를 요청하면, 온라인 쇼핑몰은 고객이 제시한 결제수단에 대하여 이를 발행한 은행, 신용 카드사 또는 선불 카드 발행 회사 등의 금융기관에 인증을 요청하고, 금융기관이 자체적으로 구축한 인증절차를 통해 결제를 요청한 결제 수단에 대한 인증처리를 수행하여 거래를 승인하는 절차로 진행된다.
그러나, 현재 패스워드에 의한 본인 인증 방식에 있어서, 악의적인 해킹 등에 의한 계정 도용 및 패스워드의 유출시 타인에 의한 무단 결제 등에 따른 피해가 발생할 가능성이 있으며, 이에 온라인 쇼핑몰 업체에서는 아이핀, 공인인증서 등의 강화된 인증 수단을 도입하여 본인 및 결제수단에 대한 인증을 강화하고 있으나, 기본적으로 텍스트 형태의 계정 및 패스워드로는 이러한 계정 도용문제를 해결하는 데는 한계가 있다.
공개특허공보 제10-2006-0057369호(공개일자: 2006.05.26.)
본 발명은 전술한 문제점을 해결하기 위해 안출된 것으로, 본 발명은 스마트폰과 같은 모바일 단말에 탑재된 카메라 등을 이용하여 고객의 안면외형과 같은 생체정보를 획득하고, 딥 러닝 기반 생체정보 분석을 통해 본인에 대한 인증과 더불어 금융기관에서 운영하는 결제수단 인증절차와 연동하여 다중 본인 인증 절차를 구현함으로써, 계정 도용의 위험이 현저히 낮은 보다 안전한 인증 서버를 제공하는 데 과제가 있다.
또한, 본 발명은 증강현실 기술에 기반하여 고객에 대하여 확보된 생체정보를 상품 구매 추천에 실질적으로 활용함으로써, 개인화된 상품 추천 서비스를 구현한 전자 상거래 시스템을 제공하는데 다른 과제가 있다.
전술한 과제를 해결하기 위해, 본 발명의 실시예에 따른 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템은 복수의 오픈마켓을 운영하고, 인증된 사용자 단말의 요청에 따라 상기 오픈마켓에서 판매중인 하나 이상의 상품에 대한 구매절차를 처리하는 마켓 서버, 상기 마켓 서버의 요청에 따라, 사용자의 카드 또는 계좌정보를 이용하여 금융기관 서버를 통해 사용자에 대한 제1 인증절차를 수행하는 인증 서버 및 상기 마켓 서버의 요청에 따라, 사용자의 생체정보를 이용하여 사용자에 대한 제2 인증절차를 수행하는 가상피팅 서버를 포함하고, 상기 인증 서버는, 상기 제1 및 제2 인증절차를 취합하여 모두 본인 인증된 사용자에 대한 로그인 절차 및 상품 구매 결제 절차를 승인할 수 있다.
상기 마켓 서버는, 상기 사용자 단말에 설치된 사용자 어플리케이션에 의해 사용자 단말과 데이터 통신을 수행하는 단말 연동부, 업체 단말의 요청에 따라 복수의 상품에 대한 상품정보가 게시되는 오픈마켓을 서버상에 등록하는 마켓 등록부, 등록된 오픈마켓을 상기 사용자 단말에 제공하고, 상기 오픈마켓에서 발생하는 상품 거래건에 대한 거래 절차를 수행하는 마켓 운영부 및 하나 이상의 등록된 오픈마켓 별 게시된 상품정보를 포함하는 마켓정보를 저장하는 마켓 데이터 베이스를 포함할 수 있다.
상기 인증 서버는, 상기 마켓 서버에 등록된 사용자에 대한 생체정보를 저장하는 생체정보 데이터 베이스, 인증절차 진행시, 상기 금융기관 서버에 사용자의 카드 또는 계좌정보 제공을 통해 상기 제1 인증절차를 수행하는 카드정보 검증부, 상기 인증절차 진행시, 상기 생체정보 데이터 베이스에 기 저장된 사용자별 생체정보를 참조하여 비교를 통해 상기 제2 인증절차를 수행하는 생체정보 판독부 및 상기 마켓 서버의 요청에 따라, 현재 접속한 사용자가 제공하는 생체정보, 카드 또는 계좌정보를 이용하여 상기 인증절차를 요청받고, 제1 및 제2 인증절차의 승인시 해당 사용자에 대한 인증을 완료하는 인증부를 포함할 수 있다.
상기 가상피팅 서버는, 상기 사용자 단말의 요청에 따라, 상기 마켓 서버에 등록된 하나 이상의 오픈마켓에서 취급하는 하나 이상의 관련상품을 검색 및 추출하는 브랜드 추출부, 추출된 관련상품에 대한 입체 상품 모델을 생성하는 증강현실 엔진 및 상기 인증 서버를 참조하여 해당 사용자의 생체정보를 추출 및 딥 러닝 엔진에 입력하고, 상기 딥 러닝 엔진에 의해 해당 사용자의 안면에 적합한 형태로 상기 입체 상품 모델을 보정하여 상기 사용자 단말에 제공하는 가상 피팅부를 포함할 수 있다.
상기 증강현실 엔진은, 상기 관련상품의 이미지에 깊이정보를 설정하여 입체 이미지를 생성하는 3D 모델 생성 기능, 상기 입체 이미지를 3D 가상 공간상의 좌표를 갖는 입체 상품 모델로 렌더링하는 3D 이미지 렌더링 기능 및 딥 러닝 엔진에 의해 렌더링된 입체 상품 모델의 각 부분과, 상기 사용자 단말의 화면상에 표시되는 사용자의 안면의 각 부위를 중첩 배치하여 상기 사용자 단말에 표시되도록 하는 가상 피팅 제공 기능을 포함할 수 있다.
상기 딥 러닝 엔진은, 상기 사용자 단말의 화면상에 표시되는 사용자의 안면과, 상기 안면을 이루는 각 부위를 식별하고, 각 부위의 이동을 추적하는 사용자 안면 추적 기능, 사용자의 안면형태를 반영하는 복수의 얼굴 특징점을 추출하는 얼굴 특징점 추출 기능 및 추출된 복수의 얼굴 특징점간 거리를 통해 상기 안면의 각 부위의 길이를 산출하는 얼굴 수치 측정 기능을 포함하고, 상기 가상 피팅부는, 산출된 안면의 각 부위 및 위치에 따라 상기 입체 상품 모델의 크기를 확대 또는 축소하거나 3차원 좌표상의 각도를 변환하고, 상기 딥 러닝 엔진에 의해 식별된 안면의 각 부위에 대응하여 상기 입체 상품 모델의 각 부분을 매칭할 수 있다.
상기 사용자 단말은, 탑재된 카메라 장치의 제어를 통해 사용자에 대한 생체정보를 획득하여 상기 인증 서버에 제공하는 생체정보 관리모듈, 사용자로부터 입력되는 카드 또는 계좌정보를 상기 마켓 서버에 등록 요청하는 결제수단 관리모듈 및 상기 오픈마켓에 등록된 하나 이상의 상품에 대하여 상기 가상피팅 서버에서 제공하는 가상 피팅 서비스를 통해 가상 피팅 화면을 제공하고, 사용자에 의해 선택된 상품에 대한 상품 구매절차를 수행하는 쇼핑모듈을 포함할 수 있다.
생체정보 관리모듈은, 상기 카메라 장치의 구동을 제어하여 사용자의 안면을 촬영하는 카메라 제어부, 촬영중인 안면 이미지로부터 깊이정보를 추출하는 깊이정보 처리부, 사용자의 안면을 이루는 각 부위별 존재하는 복수의 특징점을 추출하는 특징점 추출부 및 추출된 특징점을 단방향 해싱하여 각 부위별 해싱코드를 생성하고, 상기 생체정보에 반영하는 해싱부를 포함할 수 있다.
결제수단 관리모듈은, 사용자로부터 카드번호 또는 계좌번호를 입력받아 상기 인증 서버에 제공하여 해당 사용자의 카드 또는 계좌정보의 등록을 요청하는 카드등록 요청부 및 카드 또는 계좌번호의 생성, 수정 및 삭제 중, 어느 하나의 관리기능을 제공하는 카드 관리부를 포함할 수 있다.
상기 쇼핑모듈은, 상기 카메라 장치의 구동을 제어하여 사용자의 안면을 실시간으로 촬영하는 촬영부, 사용자에 의해 입력되는 키워드를 매개로 하여 상기 오픈마켓에 등록된 하나 이상의 상품의 검색을 요청하는 상품 검색부, 상기 오픈마켓에서 추출되거나, 사용자가 선택한 상품에 대한 가상 피팅을 상기 가상피팅 서버에 요청하고, 상기 가상피팅 서버로부터 3D 이미지로 렌더링된 입체 상품 모델과 사용자의 안면의 각 부위를 중첩 배치하여 사용자 단말의 화면상에 표시하는 가상 착용부, 현재 촬영중인 사용자의 생체정보를 상기 가상피팅 서버에 제공하여 오픈마켓에 등록된 상품에 대한 추천정보를 요청하는 상품 추천부 및 사용자에 의해 선택된 하나 이상의 상품에 대한 구매를 상기 마켓 서버에 요청하는 구매 요청부를 포함할 수 있다.
또한, 전술한 과제를 해결하기 위해, 본 발명의 다른 양태의 실시예에 따른 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 방법은, 복수의 오픈마켓을 운영하고, 인증된 사용자 단말의 요청에 따라 상기 오픈마켓에서 판매중인 하나 이상의 상품에 대한 구매절차를 처리하는 마켓 서버, 상기 마켓 서버의 요청에 따라 사용자의 카드 또는 계좌정보를 이용하여 금융기관 서버를 통해 사용자에 대한 제1 인증절차를 수행하는 인증 서버 및 상기 마켓 서버의 요청에 따라 사용자의 생체정보를 이용하여 사용자에 대한 제2 인증절차를 수행하는 가상피팅 서버를 포함하는 전자 상거래 시스템에 의한 전자 상거래 방법으로서, 상기 마켓 서버가 사용자 단말의 요청에 따라 계정을 생성하고, 사용자로부터 입력되는 카드 또는 계좌정보를 상기 인증 서버에 제공하여 등록 요청하는 단계, 상기 인증 서버가 외부의 금융기관 서버에 상기 카드 또는 계좌정보를 통해 해당 사용자에 대한 카드 또는 계좌의 확인을 요청하고, 본인임이 확인되면 사용자에 대한 카드 또는 계좌정보를 저장하고 상기 마켓 서버에 본인 인증결과를 회신하는 단계 및 상기 마켓 서버가 해당 사용자에 대한 회원 등록을 수행하고, 상기 사용자 단말로부터 사용자의 안면을 촬영하여 추출된 특징점에 따른 생체정보를 제공받는 단계 및 상기 마켓 서버가 상기 가상피팅 서버에 해당 사용자에 생체정보에 대한 등록을 요청하는 단계를 포함할 수 있다.
상기 마켓 서버가 상기 가상피팅 서버에 해당 사용자에 생체정보에 대한 등록을 요청하는 단계 이후, 상기 마켓 서버가 상기 사용자 단말로부터 오픈마켓 이용을 위한 로그인을 요청 받으면, 상기 인증 서버에 사용자에 대한 본인 인증을 요청하는 단계, 상기 인증 서버가 상기 금융기관 서버에 사용자 본인 인증을 위해 입력된 생체정보, 카드정보 및 계좌정보 중, 상기 카드정보 또는 계좌정보를 제공하여 제1 인증절차를 요청하고, 상기 가상피팅 서버에 상기 생체정보를 제공하여 제2 인증절차를 요청하는 단계, 상기 인증 서버가 상기 금융기관 서버 및 가상 피팅 서버로부터 제1 및 제2 인증절차에 따른 인증결과를 회신받고, 상기 제1 및 제2 인증절차에 따른 두 인증결과를 취합하여 본인 인증 결과를 확정하는 단계, 상기 인증 서버가 상기 마켓 서버에 해당 사용자에 대한 본인 인증결과를 회신하는 단계 및 상기 마켓 서버가 상기 사용자 단말의 로그인을 승인하고, 상기 오픈마켓을 제공하는 단계를 포함할 수 있다.
상기 마켓 서버가 상기 사용자 단말의 로그인을 승인하고, 상기 오픈마켓을 제공하는 단계 이후, 상기 마켓 서버가 상기 사용자 단말로부터 키워드를 입력받고, 상기 가상피팅 서버에 가상피팅 서비스를 요청하는 단계, 상기 가상피팅 서버가 상기 키워드에 대응하는 상품의 브랜드를 상기 마켓 서버로부터 검색하여 하나 이상의 상품을 추출하고, 탑재된 증강현실 엔진 및 딥 러닝 엔진을 통해 입체 상품 모델을 생성하고 상기 마켓 서버에 회신하는 단계 및 상기 마켓 서버가 상기 입체 상품 모델을 사용자 단말에 제공하여 입체 상품 모델과 사용자의 안면을 중첩하여 사용자 단말의 화면상에 표시함으로써 가상피팅 서비스를 제공하는 단계를 포함할 수 있다.
상기 마켓 서버가 상기 사용자 단말의 로그인을 승인하고, 상기 오픈마켓을 제공하는 단계 이후, 상기 마켓 서버가 상기 사용자 단말로부터 선택된 상품에 대한 결제를 요청받고, 상기 사용자 단말에 본인 인증을 요청하는 단계, 상기 마켓 서버가 상기 사용자 단말로부터 현재 사용자의 안면을 촬영하여 생성한 현재 생체정보를 제공받고, 상기 인증 서버에 해당 사용자에 대한 본인 인증을 요청하는 단계, 상기 인증 서버가 상기 금융기관 서버에 해당 사용자의 저장된 카드 또는 계좌정보를 제공하여 제1 인증절차를 요청하고, 상기 가상피팅 서버에 현재 생체정보를 제공하여 제2 인증절차를 요청하는 단계, 상기 인증 서버가 상기 금융기관 서버 및 가상 피팅 서버로부터 제1 및 제2 인증절차에 따른 인증결과를 회신받고, 상기 제1 및 제2 인증절차에 따른 두 인증결과를 취합하여 본인 인증 결과를 확정하는 단계, 상기 인증 서버가 상기 금융기관 서버에 상기 카드 또는 계좌정보에 기초하여 상기 상품에 대한 결제처리를 요청하고, 상기 금융기관 서버로부터 결제승인을 수신하는 단계, 상기 인증 서버가 상기 마켓 서버로 결제결과를 회신하고, 상기 사용자 단말에 결제 완료를 보고하는 단계를 포함할 수 있다.
본 발명의 실시예에 따르면, 온라인 오픈마켓과 같은 전자 상거래 방식으로 소정의 상품을 구매하고자 하는 고객은 자신이 소지한 스마트폰 등을 이용하여 안면인식을 통한 생체정보와 아울러 신용카드와 같은 금융결제수단을 이용하여 다중 본인 인증을 수행함으로써 계정 도용이 최소화하고 안정적인 전자 상거래를 이용할 수 있도록 하는 효과가 있다.
또한, 본 발명의 실시예에 따르면, 고객의 본인 인증에 이용되는 생체정보를 활용하여 고객의 외모에 따른 개인화된 상품 추천 서비스를 제공할 수 있는 효과가 있다.
도 1은 본 발명의 실시예에 따른 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템 및 이와 연결되는 시스템 전체 구조를 개략적으로 나타낸 도면이다.
도 2는 본 발명의 실시예에 따른 사용자 어플리케이션의 구조를 나타낸 도면이다.
도 3은 본 발명의 실시예에 따른 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템의 구조를 나타낸 도면이다.
도 4는 본 발명의 실시예에 따른 전자 상거래 시스템에 탑재되는 증강현실 엔진의 구조를 나타낸 도면이다.
도 5는 본 발명의 실시예에 따른 전자 상거래 시스템에 탑재되는 딥 러닝 엔진의 구조를 나타낸 도면이다.
도 6 내지 도 9는 본 발명의 실시예에 따른 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 방법을 나타낸 도면이다.
명세서 전체에서 어떤 부분이 어떤 구성요소를 "구비" 또는 "포함" 한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 또한, 명세서에 기재된 "...부(Unit)", "...서버(Server)" 및 "...시스템(System)" 등의 용어는 하나 또는 그 이상의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어, 소프트웨어 또는, 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.
또한 본 명세서에서 "실시예"라는 용어는 예시, 사례 또는 도해의 역할을 하는 것을 의미하나, 발명의 대상은 그러한 예에 의해 제한되지 않는다. 또한 "포함하는", "구비하는", "갖는" 및 다른 유사한 용어가 사용되고 있으나, 청구범위에서 사용되는 경우 임의의 추가적인 또는 다른 구성요소를 배제하지 않는 개방적인 전환어(Transition word)로서 "포함하는(Comprising)"이라는 용어와 유사한 방식으로 포괄적으로 사용될 수 있다.
본 명세서에 설명된 다양한 기법은 하드웨어 또는 소프트웨어와 함께 구현되거나, 적합한 경우에 이들 모두의 조합과 함께 구현될 수 있다. 본 명세서에 사용된 바와 같은 "...부(Unit)", "...서버(Server)" 및 "...시스템(System)" 등의 용어는 마찬가지로 컴퓨터 관련 엔티티(Entity), 즉 하드웨어, 하드웨어 및 소프트웨어의 조합, 소프트웨어 또는 실행 시의 소프트웨어와 등가로 취급할 수 있다. 또한, 본 발명의 프로그램에서 실행되는 각 기능은 모듈단위로 구성될 수 있고, 하나의 물리적 메모리에 기록되거나, 둘 이상의 메모리 및 기록매체 사이에 분산되어 기록될 수 있다.
이하의 설명에서, 설명의 편의상 "생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템"의 용어는, "전자 상거래 시스템" 또는 "시스템"으로 약식 표기될 수 있다.
이하, 도면을 참조하여 본 발명의 실시예에 따른 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템 및 방법을 설명한다.
도 1은 본 발명의 실시예에 따른 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템 및 이와 연결되는 시스템 전체 구조를 개략적으로 나타낸 도면이다.
도 1을 참조하면, 본 발명의 실시예에 따른 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템에서는, 시스템을 통해 본인 인증을 수행하고 오픈마켓을 이용하고자 하는 고객이 소지하고, 정보 통신망을 통해 온라인 상의 마켓에 포함되는 사용자 어플리케이션이 설치 및 실행되는 하나 이상의 사용자 단말(100) 및 정보통신망을 통해 사용자 단말(100)과 연결되어 사용자 단말(100)로부터 제공되는 생체정보 및 고객에 의해 등록된 결제수단에 의한 중복인증을 통해 본인을 수행하고, 등록된 하나 이상의 온라인 오픈마켓을 제공하는 복수의 서버로 구성되는 전자 상거래 시스템(200)으로 이루어질 수 있다.
사용자 단말(100)은 고객의 소지한 스마트폰, 태블릿PC 등의 모바일 장치로서, 본 발명의 시스템이 배포하는 전용 어플리케이션이 설치 및 실행되어 정보통신망을 통해 전자 상거래 시스템(200)에 접속하고, 각 서버를 통해 본인 인증 및 오픈마켓을 이용할 수 있을 뿐만 아니라, 고객에게 개인화된 추천정보를 통해 상품 추천을 제공받을 수 있다.
특히, 사용자 단말(100)에 설치되는 사용자 어플리케이션은 고객의 생체정보 및 결제수단에 의한 본인 인증 절차의 중복 수행을 요청하고, 본인 인증이 완료되면 오픈마켓에서 판매중인 다수의 상품에 대한 상품정보를 수신하여 화면상에 표시하고, 고객에 의해 선택된 상품에 대한 주문절차를 온라인 상에서 수행할 수 있다.
뿐만 아니라, 본 발명의 실시예에 따른 사용자 단말(100)은 탑재된 카메라를 통해 고객의 모습을 촬영하여 고객의 안면영상을 획득하고, 고객이 착용하는 상품, 예를 들면 의복, 안경, 귀걸이 및 목걸이 등의 의류상품에 대하여 증강현실 기술을 통해 가상 피팅 서비스를 제공할 수 있다.
상세하게는, 고객이 구매하고자 하는 상품이 안경인 경우, 사용자 단말(100)은 고객이 자신의 얼굴을 직접 촬영한 생체정보를 전자 상거래 시스템(200)에 제공하면, 전자 상거래 시스템(200)은 오픈마켓에서 판매중인 다양한 디자인의 안경상품 중에서 고객의 안면형태 분석에 따른 적합한 디자인의 상품을 하나 이상의 도출한 결과인 추천정보를 사용자 단말(100)에 제공할 수 있다.
이에 따라, 사용자 단말(100)은 추천정보에 포함되는 모델링 데이터를 이용하여 증강현실 기술 기반으로 자신의 얼굴과 중첩하여 화면상에 표시함으로써, 고객이 안경상품을 마치 직접 착용한 것과 같이 가상의 착용모습을 직접 확인한 후 안경구매를 결정할 수 있도록 한다.
전술한 사용자 단말(100)로는, PCS(Personal Communication System), GSM(Global System for Mobile communications), PDC(Personal Digital Cellular), PHS(Personal Handyphone System), PDA(Personal Digital Assistant), IMT(International Mobile Telecommunication)-2000, CDMA(Code Division Multiple Access)-2000, W-CDMA(W-Code Division Multiple Access), Wibro(Wireless Broa데이터 베이스and Internet) 단말, 스마트폰(smartphone), 스마트 패드(smartpad), 타블렛 PC(Tablet PC) 등과 같은 모든 종류의 핸드헬드(Handheld) 기반의 무선 통신 장치 및 거치형PC, 노트북과 같은 컴퓨팅 장치를 포함하는 장치가 이용될 수 있다.
전자 상거래 시스템(200)은 정보통신망을 통해 연결된 하나 이상의 사용자 단말(100)에 대한 생체정보를 이용한 본인 인증을 수행하고, 본인 인증된 사용자 단말(100)에 오픈마켓을 제공함과 아울러, 생체정보를 이용한 증강현실 기반의 가상피팅 서비스를 제공할 수 있다.
이를 위해, 본 발명의 전자 상거래 시스템(200)은, 오픈마켓을 운영하는 마켓 서버(300), 사용자에 대한 인증절차를 수행하는 인증 서버(400) 및 가상 피팅 서비스를 제공하는 가상피팅 서버(500)를 포함할 수 있다.
마켓 서버(300)는 다양한 종류의 상품을 판매하는 업체가 오픈마켓을 개설하여 마켓 웹 사이트를 운영하는 온라인 쇼핑몰의 서버 장치로서, 회원 가입된 사용자에 대한 본인 인증을 요청하고, 본인 인증 절차가 완료된 고객 단말(100)에 오픈마켓의 접속 및 상품 구매를 허가할 수 있다.
이러한 오픈마켓에 게시된 상품에 대한 상품정보는 시스템 운영측이 제작한 웹 사이트 상에 링크(Link)되어 사용자 단말(100)에 제공될 수 있고, 또는 해당 마켓 서버(300)의 홈페이지로 접속한 사용자 단말(100)을 각 오픈마켓의 웹 페이지로 리다이렉션(redirection)하는 방식으로 사용자 단말(100)에 제공될 수 있다.
인증 서버(400)는 전자 상거래 시스템(200)에 접속 시도하는 사용자 단말(100)에 대한 인증절차를 수행할 수 있다. 마켓 서버(300)는 오픈마켓을 이용하고자 하는 사용자 단말(100)의 접속 요청에 따라 인증 서버(400)에 해당 사용자에 대한 본인 인증 절차를 수행할 것을 요청할 수 있다. 이에 인증 서버(400)는 사용자 단말(100)에 인증을 위한 생체정보, 카드정보 또는 계좌정보를 요청할 수 있고, 사용자 단말(100)로부터 생체정보, 카드정보 및 계좌정보를 제공받아 각각 생체정보 분석 및 금융기관 서버(600)으로부터의 인증요청에 따른 회신에 따라 두 기술적 수단에 의한 인증 절차를 수행하며, 모두 정상적으로 인증된 경우에만 본인 인증을 확정할 수 있다. 이를 위해 인증 서버(400)는 각 사용자 단말(100)로부터 생체정보를 수집 및 등록함과 더불어, 회원 등록된 사용자의 결제 수단의 발급 및 결제승인 기관인 금융기관 서버(600)와 연계되어야 한다.
가상피팅 서버(500)는 마켓 서버(300)와 연계한 서비스로서, 오픈 마켓을 이용하는 고객들이 쇼핑 중이거나, 상품 구매 전, 자신의 외모와 어울리는 상품을 추천 받거나 선택한 상품에 대한 가상피팅 서비스를 제공할 수 있다.
이를 위해, 가상피팅 서버(500)는 사용자 단말(100)로부터 가상피팅 서비스가 요청되면 인증 서버(400)에 해당 사용자의 생체정보를 요청함과 아울러, 딥 러닝 엔진을 이용하여 사용자의 안면형상을 분석하고, 또한 증강현실 엔진을 이용하여 사용자와 어울리는 하나 이상의 상품 브랜드를 추출하고, 해당 상품에 대한 3D 상품 모델을 생성하고, 3D 렌더링을 수행하여 현재 사용자 단말상에 표시되는 고객의 얼굴상에 3D 상품 모델을 매핑함으로써 증강현실 기반 가상 피팅 서비스를 제공할 수 있다.
전술한 마켓 서버(300), 인증 서버(400) 및 가상피팅 서버(500)로는 다수의 마켓 및 상품에 대한 정보를 처리하고, 사용자 단말(100)의 요청에 따른 인증 또는 가싱 피팅 등을 구현하기 위한 각 절차들을 지연 없이 처리하기 위한 고성능의 프로세서 및 대용량의 저장공간을 갖는 워크스테이션 등을 포함하는 서버 장치가 이용될 수 있다.
전술한 구조에 따라, 본 발명의 실시예에 따른 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템은 온라인을 통해 다수의 고객이 자신의 스마트폰을 통해 생체정보를 이용하여 본인 인증을 수행하여 오픈마켓을 이용할 수 있고, 또한 생체정보를 이용한 개인화된 상품 추천 서비스 및 가상 피팅 서비스를 이용할 수 있다.
이하, 도면을 참조하여 본 발명의 실시예에 따른 전자 상거래 시스템과 연동하는 고객 단말의 사용자 어플리케이션에 대하여 상세히 설명한다.
도 2는 본 발명의 실시예에 따른 사용자 어플리케이션의 구조를 나타낸 도면이다.
도 2를 참조하면, 본 발명의 실시예에 따른 사용자 어플리케이션(101)은 사용자 단말에 탑재된 카메라 장치의 제어를 통해 사용자에 대한 생체정보를 획득하여 인증 서버에 제공하는 생체정보 관리모듈(110), 사용자로부터 입력되는 카드 또는 계좌정보를 상기 마켓 서버에 등록 요청하는 결제수단 관리모듈(120) 및 오픈마켓에 등록된 하나 이상의 상품에 대하여 가상피팅 서버에서 제공하는 가상 피팅 서비스를 통해 가상 피팅 화면을 제공하고, 사용자에 의해 선택된 상품에 대한 상품 구매절차를 수행하는 쇼핑모듈(130)을 포함할 수 있다.
생체정보 관리모듈(110)은 본 발명의 시스템상에서 사용자가 본인 인증 및 가상피팅 서비스에 이용되는 사용자의 생체정보를 생성하고, 인증 서버를 통해 저장 및 관리할 수 있다. 전술한 기능을 구현하기 위해, 생체정보 관리모듈(110)은 카메라 제어부(111), 깊이정보 처리부(112), 특징점 추출부(113) 및 해싱부(114)를 포함할 수 있다.
먼저, 카메라 제어부(111)는 사용자 단말에 탑재된 카메라 장치를 구동하여 촬영모드로 전환하고, 이를 제어하여 사용자의 안면을 촬영할 수 있다. 촬영에 따른 정지영상은 사용자 단말의 저장소에 임시 저장될 수 있다.
깊이정보 처리부(112)는 카메라 장치에 의해 촬영된 정지영상에 등장하는 사용자에 대한 안면 이미지로부터 깊이정보를 추출할 수 있다. 안면 이미지에는 메타정보 형태로 각 영역에 대한 깊이정보(depth)가 포함될 수 있고, 깊이정보 처리부(112)는 안면 이미지에 대응하는 3D 정보인 깊이정보를 추출하게 된다.
특징점 추출부(113)는 사용자의 안면을 이루는 각 부위별 존재하는 복수의 특징점을 추출할 수 있다. 안면 이미지에는 사용자의 눈, 코, 입 및 귀 등의 부위가 포함되며, 각 부위는 복수의 특징점이 서로 연결되어 폐곡선을 이룸에 따라 특정될 수 있다. 특징정 추출부(113)는 서로 연결됨에 따라 각 부위를 이루는 복수의 특징점을 각 부위별 소정개씩 추출할 수 있다.
해싱부(114)는 추출된 특징점을 단방향 해싱하여 각 부위별 해싱코드를 생성하고, 상기 생체정보에 반영할 수 있다. 추출된 특징점들은 각 부위별로 해싱부(114)에 정의된 단방향 해싱함수에 의해 임의의 해싱코드로 변환되고, 그 해싱코드들은 사용자의 생체정보로서 본인 인증 또는 가상피팅 서비스를 위해 인증 서버에 제공될 수 있다.
또한, 본 발명의 실시예예 따른 사용자 어플리케이션(101)의 결제수단 관리모듈(120)은 사용자의 오픈마켓을 이용한 쇼핑활동에 따라 요구되는 결제절차를 마켓 서버에 요청할 수 있다. 전술한 기능을 구현하기 위해, 결제수단 관리모듈(120)은 카드등록 요청부(121) 및 카드 관리부(122)를 포함할 수 있다.
카드등록 요청부(121)는 사용자로부터 카드번호 또는 계좌번호를 입력받아 인증 서버에 제공하여 해당 사용자의 카드 또는 계좌정보의 등록을 요청할 수 있다. 상품 구매에 대한 결제를 위해서는 사용자의 카드 또는 계좌정보가 요구되며, 사용자는 사용자 단말에 카드 또는 계좌정보와 기타 결제를 위한 정보를 포함하는 카드 또는 계좌정보를 사용자 단말에 등록할 수 있다. 이러한 카드 또는 계좌정보는 사용자 단말의 저장소에 암호화되어 저장될 수 있다.
여기서, 등록 가능한 카드 또는 계좌정보는 상품 구매뿐만 아니라, 본인 인증시에도 활용될 수 있고, 이를 위해 연계된 금융기관에 미리 등록되어 있어야 한다.
카드 관리부(122)는 등록된 카드 또는 계좌번호의 생성, 수정 및 삭제 등의 관리기능을 제공할 수 있다. 사용자는 자신이 이용하는 카드 또는 계좌정보가 추가되거나 변경되는 경우 그 내용을 반영해야 하며, 카드 관리부(122)는 사용자의 입력에 따라 카드 또는 계좌정보에 대한 관리기능을 제공할 수 있다.
또한, 본 발명의 실시예에 따른 사용자 어플리케이션(101)의 쇼핑모듈(130)은 생체정보, 카드정보 및 계좌정보를 이용하여 사용자가 실제 오픈마켓을 이용할 수 있도록 지원할 수 있다. 이러한 쇼핑모듈(130)은 촬영부(131), 상품 검색부(132), 가상 착용부(133), 상품 추천부(134) 및 구매 요청부(135)를 포함할 수 있다.
촬영부(131)는 사용자에 의해 가상 피팅 서비스가 선택되면, 사용자 단말에 탑재된 카메라 장치의 구동을 제어하여 사용자의 안면을 실시간으로 촬영할 수 있다. 본 발명의 실시예에서 가상피팅 서비스는 증강현실 기술에 기반하여 현재 사용자의 얼굴에 추천 또는 선택된 상품에 대한 3D 모델을 중첩 표시하는 서비스로서, 가상피팅 서비스가 시작되면 촬영부(131)는 카메라 장치를 구동하여 사용자의 안면 이미지를 실시간으로 촬영할 수 있다.
상품 검색부(132)는 사용자 단말이 오픈마켓에 접속함에 따라, 오픈마켓에서 제공하는 인터페이스를 통해 사용자로부터 상품 검색을 위한 키워드를 입력받고, 그 키워드를 오픈마켓에 전송함으로써, 그 키워드를 매개로 하여 오픈마켓에 등록된 하나 이상의 상품의 검색을 요청할 수 있다.
가상 착용부(133)는 오픈마켓에서 추출되거나, 사용자가 선택한 상품에 대한 가상 피팅을 마켓 서버를 통해 가상피팅 서버에 요청하고, 가상피팅 서버로부터 3D 이미지로 렌더링된 입체 상품 모델과 사용자의 안면의 각 부위를 중첩 배치하여 사용자 단말의 화면상에 표시할 수 있다. 사용자의 입력에 따라 가상피팅 서비스가 시작되면 촬영부(131)는 사용자의 안면 이미지를 생성하고, 이와 연계하여 가상 착용부(133)는 오픈마켓에서 추천정보에 따라 추출되거나 사용자가 선택한 상품에 대한 가상 피팅을 요청할 수 있다. 이에 마켓 서버는 해당 가상 피팅 건에 대한 3D 상품 모델을 가상피팅 서버에 요청할 수 있고, 가상피팅 서버는 마켓 서버에 저장된 상품정보를 추출하여 렌더링 작업을 통해 3D 상품 모델을 생성하여 사용자 단말에 제공할 수 있다.
이에, 가상 착용부(133)는 3D 상품 모델과 현재 화면상에 표시되는 사용자의 안면 이미지를 중첩하여 표시함으로써 가상피팅을 구현하게 된다.
상품 추천부(134)는 현재 촬영중인 사용자의 생체정보를 가상피팅 서버에 제공하여 오픈마켓에 등록된 상품에 대한 추천정보를 요청할 수 있다. 생체정보는 본인 인증에 활용될 뿐만 아니라, 마켓 서버에 등록된 다양한 상품에 대한 추천정보를 생성하는 데 활용될 수 있고, 상품 추천부(134)는 현재 촬영중인 사용자의 안면 이미지를 가상피팅 서버에 제공하거나, 이전에 저장된 생체정보를 통해 상품에 대한 추천정보를 요청할 수 있고, 이에 가상피팅 서버는 사용자의 안면 특징에 적합한 하나 이상의 상품을 추출하여 추천정보를 상품 추천부(134)에 회신할 수 있다.
구매 요청부(135)는 사용자에 의해 선택된 하나 이상의 상품에 대한 구매를 마켓 서버에 요청할 수 있다. 사용자가 구매하고자 하는 상품을 선택하면, 구매 요청부(135)는 마켓 서버에 해당 상품의 구매절차를 요청하고, 이에 마켓 서버는 구매내용 입력 및 결제 절차를 처리할 수 있다. 이때, 결제 단계에서는 구매 요청부(135)는 전술한 결제수단 관리모듈(120)에 요청하여 카드 또는 계좌 정보에 의한 결제를 요청할 수 있고, 결제수단 관리모듈(120)은 카드 또는 계좌 정보를 마켓 서버에 제공하여 결제 절차를 진행할 수 있다.
이하, 도면을 참조하여 본 발명의 실시예에 따른 전자 상거래 시스템 및 이를 이루는 각 서버를 상세히 설명한다.
도 3은 본 발명의 실시예에 따른 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템의 구조를 나타낸 도면이다.
도 3을 참조하면, 본 발명의 실시예에 따른 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템(200)은 복수의 오픈마켓을 운영하고, 인증된 사용자 단말(100)의 요청에 따라 오픈마켓에서 판매중인 하나 이상의 상품에 대한 구매절차를 처리하는 마켓 서버(300), 마켓 서버(300)의 요청에 따라, 사용자의 카드 또는 계좌정보를 이용하여 금융기관 서버(600)를 통해 사용자에 대한 제1 인증절차를 수행하고, 사용자의 생체정보를 이용하여 사용자에 대한 제2 인증절차를 수행하는 인증 서버(400) 및 마켓 서버(300)의 요청에 따라, 사용자의 생체정보를 이용한 증강현실 가상피팅 서비스를 제공하는 가상피팅 서버(500)를 포함할 수 있고, 또한, 인증 서버(400)는 제1 및 제2 인증절차를 취합하여 모두 본인 인증된 사용자에 대한 로그인 절차 및 상품 구매 결제 절차를 승인하는 생체정보를 이용한 인증 수단을 포함할 수 있다.
상세하게는, 마켓 서버(300)는 하나 이상의 오픈마켓을 운영하는 서버로서, 정보통신망을 통해 접속하는 하나 이상의 사용자 단말(100)의 요청에 따라 본인 인증된 사용자의 경우 오픈마켓의 이용을 승인할 수 있다. 이때, 사용자에 대한 본인 인증절차는 인증 서버(400)를 통해 이루어지며, 마켓 서버(300)는 인증 서버(400)와 연동하여 인증과 관련된 절차를 처리할 수 있다.
또한, 마켓 서버(300)는 오픈마켓에서 판매되는 상품들에 대한 가상피팅 서비스를 제공할 수 있고, 이를 위해 인증 서버(400)와 연동하여 생체정보와 관련된 절차를 처리할 수 있다.
전술한 기능을 구현하기 위해, 마켓 서버(300)는, 단말 연동부(310), 마켓 등록부(320) 및 마켓 운영부(330)를 포함할 수 있다.
단말 연동부(310)는 정보통신망을 통해 사용자 단말(100)에 설치된 사용자 어플리케이션에 의해 접속된 사용자 단말(100)과 데이터 통신을 수행할 수 있고, 인증을 위한 생체정보, 금융정보를 수신하거나, 인증결과, 결제정보 등을 회신할 수 있다.
마켓 등록부(320)는 업체 단말(700)의 요청에 따라 복수의 상품에 대한 상품정보가 게시되는 오픈마켓을 서버상에 등록할 수 있다. 본 발명의 시스템을 통해 오픈마켓을 운영하고자 하는 업체측에서는 업체 단말을 통해 업체명, 업종, 판매 상품 등의 정보를 입력하여 오픈마켓을 등록 및 운영할 수 있다.
마켓 운영부(330)는 등록된 오픈마켓을 사용자 단말(100)에 제공하고, 오픈마켓에서 발생하는 상품 거래건에 대한 거래 절차를 수행할 수 있다. 사용자 단말(100)은 본인 인증 이후 오픈마켓을 이용할 수 있고, 마켓 운영부(330)는 사용자 단말(100)에 등록된 다수의 오픈마켓의 접속을 위한 URL을 제공할 수 있다. 또한, 마켓 운영부(330)는 업체 단말(700)에 오픈마켓 생성, 갱신 및 삭제 등의 마켓 운영 기능과, 상품의 추가, 갱신 및 삭제 등 상품 관리 기능을 제공할 수 있다.
마켓 데이터 베이스(340)는 하나 이상의 등록된 오픈마켓 별 게시된 상품정보를 포함하는 마켓정보를 저장할 수 있다. 마켓 데이터 베이스(340)에는 오픈마켓의 운영을 위한 웹 페이지 정보와, 각 오픈마켓에서 판매되는 상품정보 및 회원정보 등이 저장될 수 있고, 마켓 운영부(330)의 요청에 따라 요구되는 각종 정보를 저장할 수 있다.
인증 서버(400)는 본 발명의 전자 상거래 시스템에서 각 서버와의 연동을 통해 인증과 관련된 절차를 수행할 수 있다. 본 발명의 시스템은 계정 및 패스워드를 이용한 통상의 본인 인증 방식 이외에도 안면 인식을 통한 생체정보 및 금융정보를 이용한 본인 인증을 수행 및 취합하여 인증 절차를 진행하는 것을 특징으로 한다.
전술한 기능을 구현하기 위해, 인증 서버(400)는 생체정보 데이터 베이스(410), 카드정보 검증부(420), 생체정보 판독부(430) 및 인증부(440)를 포함할 수 있다.
생체정보 데이터 베이스(410)는 마켓 서버(300)에 등록된 사용자에 대한 생체정보를 저장할 수 있다. 여기서, 생체정보는 각 사용자별로 사용자 단말(100)에서 제공될 수 있고, 사용자의 안면 이미지에 기초하여 생성될 수 있다. 특히, 본 발명의 실시예에 따른 생체정보는 안면 이미지에 대한 JPG, BMP, RAW 등의 이미지 포맷이 아닌, 가상피팅 서버(500)의 딥 러닝 엔진(540)에 의해 추출된 특징점을 해싱함수 등으로 변환한 해싱코드의 형태일 수 있다.
카드정보 검증부(420)는 마켓 서버(300)의 요청에 따른 인증절차 진행시, 금융기관 서버(600)에 해당 사용자의 카드 또는 계좌정보를 제공하여 1차 인증절차를 수행할 수 있다.
생체정보 판독부(430)는 인증절차 진행시, 생체정보 데이터 베이스(410)에 기 저장된 사용자별 생체정보를 참조하여 비교를 통해 제2 인증절차를 수행할 수 있다. 여기서, 생체정보 판독부(430)는 사용자 단말(100)로부터 제공되는 현재 생체정보 및 생체정보 데이터 베이스(410)에 저장된 생체정보를 가상피팅 서버(500)에 제공하여 전술한 해싱코드로 변환하고 비교를 통해 본인 여부를 인증할 수 있다.
인증부(440)는 마켓 서버(300)의 요청에 따라, 현재 접속한 사용자가 제공하는 생체정보, 카드 또는 계좌정보를 이용하여 인증절차를 요청받고, 전술한 제1 및 제2 인증절차의 결과를 취합하여 모두 정상적으로 완료되면 해당 사용자에 대한 인증을 완료할 수 있다.
가상피팅 서버(500)는 마켓 서버(300)의 요청에 따라 상품 구매시 사용자의 생체정보를 이용한 가상 피팅 서비스를 제공함과 아울러, 인증 서버(400)에 의한 본인 인증시에도 생체정보를 활용할 수 있도록 지원할 수 있다.
전술한 기능을 구현하기 위해, 가상피팅 서버(500)는 브랜드 추출부(510), 증강현실 엔진(520), 가상 피팅부(530) 및 딥 러닝 엔진(540)을 포함할 수 있다.
브랜드 추출부(510)는 사용자 단말의 요청에 따라, 마켓 서버에 등록된 하나 이상의 오픈마켓에서 취급하는 하나 이상의 관련상품을 검색 및 추출할 수 있다. 사용자 단말(100)은 오픈마켓 상에서 키워드 검색 방법 등을 통해 상품을 검색할 수 있고, 가상피팅 서버(500)는 그 키워드와 관련된 브랜드의 상품을 마켓 데이터 베이스(340)에서 하나 이상 추출할 수 있다.
증강현실 엔진(520)은 추출된 관련상품에 대한 입체 상품 모델을 생성할 수 있다. 본 발명의 실시예에 따른 가상피팅 서버(500)는 오픈마켓에서 판매중인 상품을 사용자가 가상으로 착용하는 가상피팅 서비스를 제공하는 것을 특징으로 하며, 마켓 데이터 베이스(340)에 저장된 상품정보는 평면 이미지임에 따라, 이에 깊이정보를 설정하여 3D 상품 모델을 생성 및 렌더링하여 가상 피팅을 구현할 수 있다.
가상 피팅부(530)는 인증 서버(400)를 참조하여 해당 사용자의 생체정보를 추출 및 딥 러닝 엔진(540)에 입력하여 사용자의 안면을 추적 및 특징점을 추출하도록 하고, 딥 러닝 엔진(540)에 의해 해당 사용자의 안면에 적합한 형태로 입체 상품 모델을 보정하여 피팅 정보로서 사용자 단말에 제공함으로써 사용자 단말(100)상에서 현재 사용자의 얼굴에 중첩되어 표시되도록 한다.
한편, 본 발명의 실시예에 따른 전자 상거래 시스템(200)은, 각 사용자들에 대한 민감한 개인정보인 생체정보를 외부의 유출 위험으로부터 보안수준을 강화하기 위한 데이터 관리 수단을 더 포함할 수 있다.
상세하게는, 인증서버(400)의 생체정보 데이터 베이스(410)는 데이터를 일정 크기로 균등 분할하여 복수의 분산 데이터 베이스(810)에 나누어 저장하는 분산 관리 서버(800)를 더 포함할 수 있다.
이러한 분산 관리 서버(800)는 일정 주기마다 생체정보 데이터 베이스(410)에 각 사용자별로 저장된 생체정보를 추출하여 단방향 암호화 기법을 이용하여 일정크기로 분할하고 연결된 복수의 분산 데이터 베이스(810)에 각각 나누어 보관할 수 있다. 또한, 분산 관리 서버(800)는 인덱스 데이터(index data)를 이용하여 각 분산 데이터 베이스(810)에 나누어 저장된 파편화된 데이터(fragment data)를 수집 및 원 데이터로 복원하여 인증 서버(410)에 제공할 수 있다.
이에 따라 생체정보 데이터 베이스(410)에는 각 생체정보에 대한 인덱스 데이터만이 저장될 수 있고, 인증 서버(410)는 본인 인증 등 생체정보의 필요시 인덱스 데이터를 이용하여 분산 관리 서버(800)에 생체정보를 요청하여 임시 저장하고, 절차가 종료되면 삭제할 수 있다.
이하, 도면을 참조하여 본 발명의 실시예에 따른 전자 상거래 시스템에 이용되는 증강현실 엔진 및 딥 러닝 엔진의 기능을 상세히 설명한다.
도 4는 본 발명의 실시예에 따른 전자 상거래 시스템에 탑재되는 증강현실 엔진의 구조를 나타낸 도면이고, 도 5는 본 발명의 실시예에 따른 전자 상거래 시스템에 탑재되는 딥 러닝 엔진의 구조를 나타낸 도면이다.
먼저 도 4를 참조하면, 본 발명의 실시예에 따른 증강현실 엔진(540)은 인공지능 기술에 기반하여 마켓 서버로부터 추출된 상품에 대하여 사용자 단말에서의 증강현실 서비스를 구현하고, 개인화된 추천정보를 제공하기 위해 상품에 대한 3D 상품 모델 및 가상피팅 서비스를 제공할 수 있다.
상세하게는, 증강현실 엔진(540)은 마켓 서버에 대한 브랜드 검색에 따라 추출된 하나 이상의 상품에 대한 상품정보에는 상품에 대한 2D 이미지가 포함되어 있고, 증강현실 엔진(540)은 평면의 상품 이미지에 깊이정보를 설정하여 입체 이미지를 생성하는 3D 모델 생성 기능(521)과, 생성된 입체 이미지를 3D 가상 공간상의 좌표를 갖는 입체 상품 모델로 렌더링하는 3D 이미지 렌더링 기능(522)과, 딥 러닝 엔진에 의해 렌더링된 입체 상품 모델의 각 부분과, 사용자 단말의 화면상에 표시되는 사용자의 안면의 각 부위를 중첩 배치하여 사용자 단말의 화면상에 표시되도록 하는 가상 피팅 제공 기능(523)을 제공할 수 있다.
도 5를 참조하면, 본 발명의 딥 러닝 엔진(540)은 사용자 단말의 화면상에 표시되는 사용자의 안면과, 안면을 이루는 각 부위를 식별하고, 각 부위의 이동을 추적하는 사용자 안면 추적 기능(541)과, 사용자의 안면형태를 반영하는 복수의 얼굴 특징점을 추출하는 얼굴 특징점 추출 기능(542)과, 추출된 복수의 얼굴 특징점간 거리를 통해 안면의 각 부위의 길이를 산출하는 얼굴 수치 측정 기능(543)을 제공할 수 있다.
이에 따라, 본 발명의 가상피팅 서버는 산출된 안면의 각 부위 및 위치에 따라 입체 상품 모델의 크기를 확대 또는 축소하거나 3차원 좌표상의 각도를 변환하고, 딥 러닝 엔진(540)에 의해 식별된 안면의 각 부위에 대응하여 입체 상품 모델의 각 부분을 매칭함으로써 가상피팅 서비스를 구현할 수 있고, 사용자는 이러한 가상피팅 서비스에 의해 자신에게 가장 어울리는 상품에 대한 추천정보를 이용할 수 있게 된다.
이하, 도면을 참조하여 본 발명의 실시예에 따른 생체정보를 이용한 인증 수단을 제공하는 전자 상거래 방법을 설명한다.
도 6 내지 도 9는 본 발명의 실시예에 따른 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 방법을 나타낸 도면이다.
도 6을 참조하면, 본 발명의 실시예에 따른 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 방법 중, 회원 등록 절차에 관한 것으로서, 먼저 사용자 단말(100)이 전자 상거래 시스템의 마켓 서버(300)에 계정명, 패스워드 및 기타 개인정보를 입력하고, 회원 가입을 요청하면(S100), 마켓 서버(300)는 해당 사용자에 대하여 공지의 회원 등록 절차에 따라 계정을 생성한다(S110).
이어서, 사용자 단말(100)이 본인인증을 위해 생성된 계정에 대한 카드 또는 계좌번호를 입력하면 마켓 서버(300)는 해당 계정과 카드 또는 계좌번호를 인증 서버(400)에 전송하여 본인 인증을 요청한다(S130).
이에 따라, 인증 서버(400)는 입력된 카드 또는 계좌번호와 같은 금융정보를 이용하여 연계된 금융기관 서버(600)에 해당 사용자의 본인 여부 확인을 요청하고(S140), 금융기관 서버(600)는 사용자에 대한 카드 또는 계좌번호를 이용하여 실명확인을 통해 본인 여부 확인 결과를 인증 서버(400)에 회신한다(S150).
다음으로, 인증 서버(400)는 금융기관 서버(600)의 회신에 따라 해당 사용자에 대하여 마켓 서버(300)에 본인 인증결과를 회신하고(S160), 마켓 서버(300)는 해당 사용자에 대한 회원 등록 절차를 완료한다(S170).
이후, 본 발명의 실시예에 따른 생체정보를 이용한 본인 인증 서비스를 이용하고자 하는 사용자는 회원 등록 이후, 사용자 단말(100)을 통해 자신의 안면을 촬영한 이미지에 기초하여 생성된 생체정보를 마켓 서버(300)에 제공하고(S180), 이에 따라 마켓 서버(300)는 해당 계정별로 가상피팅 서버(500)에 생체정보를 전송하여 가상피팅 서버(500)에 사용자의 생체정보를 등록하게 된다(S190).
도 7은 본 발명의 실시예에 따른 본인 인증 절차를 나타낸 도면으로서, 도 7을 참조하면, 본 발명의 실시예에 따른 전자 상거래 시스템이 제공하는 오픈마켓을 이용하고자 하는 사용자는 자신의 사용자 단말(100)을 이용하여 마켓 서버(300)에 로그인을 요청한다(S200).
본 발명의 실시예에서 마켓 서버(300)는 계정 로그인 절차를 진행할 수는 있으나 본인 인증 절차를 직접 수행하지는 않으며, 이에 마켓 서버(300)는 인증 서버(400)에 해당 사용자의 본원 인증을 요청하게 된다(S210). 이때, 인증 서버(400)는 사용자 단말(100)로부터 직접 또는 마켓 서버(300)를 거쳐 현재 사용자 단말(100)이 촬영한 사용자의 안면 이미지에 기초한 생체정보를 전달받아 가상피팅 서버(500)에 제공할 수 있다(S220).
이에 따라, 가상피팅 서버(500)는 해당 사용자에 대하여 현재 전달된 생체정보와, 기 등록된 생체정보를 비교하여 본인 인증을 수행한다.
여기서, 가상피팅 서버(500)는 생체정보를 이미지와 이미지를 영상처리 기법을 통해 그 유사도를 비교하는 방식이 아닌, 안면 이미지로부터 추출된 복수의 특징점을 해싱함수를 통해 변환한 해싱코드를 비교하여 유사도를 산출하여 본인 여부를 판단할 수 있도록 하며. 그 인증결과를 인증 서버(400)에 회신한다(S230).
아울러, 인증 서버(400)는 상기의 생체정보 인증 방식뿐만 아니라, 해당 사용자의 저장된 카드 또는 계좌번호 등을 포함하는 금융정보를 금융기관 서버(600)에 전달하여 금융정보에 기반한 인증결과를 회신받게 된다(S240).
다음으로, 인증 서버(400)는 각 생체정보 및 금융정보를 취합하여 모두 승인된 사용자에 대해서만 정상적으로 본인 인증이 완료되었음을 마켓 서버(300)에 회신하고(S270), 이에 따라 마켓 서버(300)는 해당 사용자 단말(100)에 현재 운영중인 오픈마켓을 제공함으로써 상품 구매가 가능하도록 한다(S280).
도 8은 본 발명의 실시예에 따른 가상피팅 서비스 제공 방법을 나타낸 도면으로서, 도 8을 참조하면 본 발명의 시스템에 회원 가입되고 생체정보를 등록한 사용자는 쇼핑 중 원하는 상품에 대한 증강현실 기반 가상피팅 서비스를 이용할 수 있고, 먼저 마켓 서버(300)에서 제공하는 웹 페이지 또는 오픈마켓 페이지에 검색하고자 하는 상품에 대한 키워드를 입력하여 상품을 검색할 수 있다(S300).
특히 마켓 서버(300)는 해당 키워드를 통해 검색된 상품들에 대한 가싱 피팅 서비스를 가상피팅 서버(500)에 요청할 수 있다. 가상 피팅 서버(500)는 키워드를 이용하여 마켓 서버(300)에 등록된 각 오픈마켓에서 판매중인 상품정보가 저장된 데이터 베이스에서 검색하여 상품에 대한 브랜드를 검색하고(S320), 해당 브랜드에 대응하는 하나 이상의 상품을 추출할 수 있다(S330).
다음으로, 가상피팅 서버(500)는 탑재된 증강현실 엔진을 통해 추출된 상품정보에 포함된 상품 이미지를 이용하여 3D 상품 모델을 생성 및 3D 렌더링을 수행하고, 사용자의 생체정보를 추출하여 3D 상품 모델이 사용자 안면에 매핑되도록 보정하여 가상 피팅을 수행한다(S340).
이어서, 가상피팅 서버(500)는 3D 상품 모델을 포함하는 피팅정보를 마켓 서버(300)에 회신하고(S350), 마켓 서버(300)는 해당 사용자 단말에 피팅정보를 제공한다(S360). 이러한 피팅정보는 사용자 단말(100)상에 현재 표시되고 있는 사용자의 안면상에 3D 상품 모델이 중첩 표시되도록 함으로써 가싱피팅 서비스가 구현되게 된다.
도 9는 본 발명의 실시예에 따른 전자 상거래 방법에 따른 결제 절차를 나타낸 도면으로서, 도 9를 참조하면, 본 발명의 시스템을 통해 구매하고자 하는 상품에 대한 결제를 진행 하고자 하는 사용자는 사용자 단말(100)을 통해 마켓 서버(300)에 결제를 요청하면(S400), 마켓 서버(300)는 사용자 단말(100)에 본인 인증을 요청한다(S410). 이에 사용자 단말(100)은 사용자의 안면을 촬영하여 현재 생체정보를 생성하고 이를 마켓 서버(300)에 제공한다(S420).
다음으로, 마켓 서버(300)는 사용자 단말(100)로부터 수신한 생체정보를 인증 서버(400)에 전달하여 본인 인증을 요청하고(S430), 인증 서버(400)는 현재 생체 정보를 가상피팅 서버(500)에 제공하게 된다(S440).
이에 따라, 가상피팅 서버(500)는 해당 사용자에 대하여 기저장된 생체정보와 제공된 현재 생체정보를 비교하여 동일 내지 일정 수준 이상의 유사도를 갖는지 판단하고, 동일하거나 일정 수준 이상의 유사도를 갖는 경우 본인임을 인증하여 그 인증결과 인증 서버(400)에 회신한다(S450).
다음으로, 인증 서버(400)는 금융기관 서버(600)에 해당 사용자의 등록된 카드 또는 계좌번호 등의 금융정보를 제공하여 본인 인증을 요청하고(S460), 이에 금융기관 서버(600)는 그 금융정보를 이용하여 본인 인증을 수행 및 인증결과를 인증 서버(400)에 회신한다(S470).
이어서, 인증 서버(400)는 전술한 생체정보에 의한 본인 인증결과 및 금융정보에 의한 본인 인증결과를 취합하여(S480), 모두 정상적으로 인증된 경우 금융기관 서버(600)에 해당 결제건에 대한 결제를 요청한다(S490). 이에 따라, 금융기관 서버(600)는 카드 또는 계좌번호를 통해 상품 대금에 대한 결제를 수행하고, 그 승인내역을 인증 서버(400)에 전송한다(S500).
또한, 인증 서버(400)는 금융기관 서버(60)로부터 전송된 승인내역에 따라, 마켓 서버(300)에 결제결과를 회신하고(S520), 이에 마켓 서버(300)는 그 결제결과에 따라 상품 구매 절차를 처리하고, 사용자 단말(100)에 결제 완료를 보고한다(S530).
상기한 설명에 많은 사항이 구체적으로 기재되어 있으나 이것은 발명의 범위를 한정하는 것이라기보다 바람직한 실시예의 예시로서 해석되어야 한다. 따라서 발명은 설명된 실시예에 의하여 정할 것이 아니고 특허청구범위와 특허청구범위에 균등한 것에 의하여 정하여져야 한다.
100 : 사용자 단말 110 : 상세정보 관리 모듈
120 : 결제수단 관리모듈 130 : 쇼핑 모듈
200 : 전자 상거래 시스템 300 : 마켓 서버
310 : 단말 연동부 320 : 마켓 등록부
330 : 마켓 운영부 340 : 마켓 데이터 베이스
400 : 인증 서버 410 : 생체인증 데이터 베이스
420 : 카드정보 검증부 430 : 생체정보 판독부
440 : 인증부 500 : 가상피팅 서버
510 : 딥 러닝 엔진 520 : 증강현실 엔진
530 : 가상 피팅부 540 : 딥 러닝 엔진
600 : 금융기관 서버 800 : 분산 관리 서버
810 : 분산 데이터 베이스

Claims (14)

  1. 복수의 오픈마켓을 운영하고, 인증된 사용자 단말의 요청에 따라 상기 오픈마켓에서 판매중인 하나 이상의 상품에 대한 구매절차를 처리하는 마켓 서버;
    상기 마켓 서버의 요청에 따라, 사용자의 카드 또는 계좌정보를 이용하여 금융기관 서버를 통해 사용자에 대한 제1 인증절차를 수행하고, 사용자가 제공하는 생체정보를 이용하여 사용자에 대한 제2 인증절차를 수행하는 인증 서버; 및
    상기 마켓 서버의 요청에 따라, 사용자가 제공하는 생체정보를 이용한 증강현실 가상피팅 서비스를 제공하고, 사용자가 제공하는 생체정보를 상기 인증 서버에 제공하여 상기 제2 인증절차를 지원하는 가상피팅 서버를 포함하고,
    상기 인증 서버는,
    상기 제1 및 제2 인증절차를 취합하여 모두 본인 인증된 사용자에 대한 로그인 절차 및 상품 구매 결제 절차를 승인하고,
    상기 인증 서버는,
    상기 마켓 서버에 등록된 사용자에 대한 생체정보를 저장하는 생체정보 데이터 베이스;
    인증절차 진행시, 상기 금융기관 서버에 사용자의 카드 또는 계좌정보 제공을 통해 상기 제1 인증절차를 수행하는 카드정보 검증부;
    상기 인증절차 진행시, 상기 생체정보 데이터 베이스에 기 저장된 사용자별 생체정보를 참조하여 비교를 통해 상기 제2 인증절차를 수행하는 생체정보 판독부; 및
    상기 마켓 서버의 요청에 따라, 현재 접속한 사용자가 제공하는 생체정보와, 카드 또는 계좌정보를 이용하여 상기 인증절차를 요청받고, 제1 및 제2 인증절차의 승인시 해당 사용자에 대한 인증을 완료하는 인증부
    를 포함하는 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템.
  2. 제 1 항에 있어서,
    상기 마켓 서버는,
    상기 사용자 단말에 설치된 사용자 어플리케이션에 의해 사용자 단말과 데이터 통신을 수행하는 단말 연동부;
    업체 단말의 요청에 따라 복수의 상품에 대한 상품정보가 게시되는 오픈마켓을 서버상에 등록하는 마켓 등록부;
    등록된 오픈마켓을 상기 사용자 단말에 제공하고, 상기 오픈마켓에서 발생하는 상품 거래건에 대한 거래 절차를 수행하는 마켓 운영부; 및
    하나 이상의 등록된 오픈마켓 별 게시된 상품정보를 포함하는 마켓정보를 저장하는 마켓 데이터 베이스
    를 포함하는 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템.
  3. 삭제
  4. 제 1 항에 있어서,
    상기 가상피팅 서버는,
    상기 사용자 단말의 요청에 따라, 상기 마켓 서버에 등록된 하나 이상의 오픈마켓에서 취급하는 하나 이상의 관련상품을 검색 및 추출하는 브랜드 추출부;
    추출된 관련상품에 대한 입체 상품 모델을 생성하는 증강현실 엔진; 및
    상기 인증 서버를 참조하여 해당 사용자의 생체정보를 추출 및 딥 러닝 엔진에 입력하고, 상기 딥 러닝 엔진에 의해 해당 사용자의 안면에 적합한 형태로 상기 입체 상품 모델을 보정하여 상기 사용자 단말에 제공하는 가상 피팅부
    를 포함하는 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템.
  5. 제 4 항에 있어서,
    상기 증강현실 엔진은,
    상기 관련상품의 이미지에 깊이정보를 설정하여 입체 이미지를 생성하는 3D 모델 생성 기능;
    상기 입체 이미지를 3D 가상 공간상의 좌표를 갖는 입체 상품 모델로 렌더링하는 3D 이미지 렌더링 기능; 및
    딥 러닝 엔진에 의해 렌더링된 입체 상품 모델의 각 부분과, 상기 사용자 단말의 화면상에 표시되는 사용자의 안면의 각 부위를 중첩 배치하여 상기 사용자 단말에 표시되도록 하는 가상 피팅 제공 기능
    을 포함하는 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템.
  6. 제 5 항에 있어서,
    상기 딥 러닝 엔진은,
    상기 사용자 단말의 화면상에 표시되는 사용자의 안면과, 상기 안면을 이루는 각 부위를 식별하고, 각 부위의 이동을 추적하는 사용자 안면 추적 기능;
    사용자의 안면형태를 반영하는 복수의 얼굴 특징점을 추출하는 얼굴 특징점 추출 기능; 및
    추출된 복수의 얼굴 특징점간 거리를 통해 상기 안면의 각 부위의 길이를 산출하는 얼굴 수치 측정 기능을 포함하고,
    상기 가상 피팅부는,
    산출된 안면의 각 부위 및 위치에 따라 상기 입체 상품 모델의 크기를 확대 또는 축소하거나 3차원 좌표상의 각도를 변환하고, 상기 딥 러닝 엔진에 의해 식별된 안면의 각 부위에 대응하여 상기 입체 상품 모델의 각 부분을 매칭하는 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템.
  7. 제 1 항에 있어서,
    상기 사용자 단말은,
    탑재된 카메라 장치의 제어를 통해 사용자에 대한 생체정보를 획득하여 상기 인증 서버에 제공하는 생체정보 관리모듈;
    사용자로부터 입력되는 카드 또는 계좌정보를 상기 마켓 서버에 등록 요청하는 결제수단 관리모듈; 및
    상기 오픈마켓에 등록된 하나 이상의 상품에 대하여 상기 가상피팅 서버에서 제공하는 가상 피팅 서비스를 통해 가상 피팅 화면을 제공하고, 사용자에 의해 선택된 상품에 대한 상품 구매절차를 수행하는 쇼핑모듈
    을 포함하는 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템.
  8. 제 7 항에 있어서,
    생체정보 관리모듈은,
    상기 카메라 장치의 구동을 제어하여 사용자의 안면을 촬영하는 카메라 제어부;
    촬영중인 안면 이미지로부터 깊이정보를 추출하는 깊이정보 처리부;
    사용자의 안면을 이루는 각 부위별 존재하는 복수의 특징점을 추출하는 특징점 추출부; 및
    추출된 특징점을 단방향 해싱하여 각 부위별 해싱코드를 생성하고, 상기 생체정보에 반영하는 해싱부
    를 포함하는 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템.
  9. 제 7 항에 있어서,
    결제수단 관리모듈은,
    사용자로부터 카드번호 또는 계좌번호를 입력받아 상기 인증 서버에 제공하여 해당 사용자의 카드 또는 계좌정보의 등록을 요청하는 카드등록 요청부; 및
    카드 또는 계좌번호의 생성, 수정 및 삭제 중, 어느 하나의 관리기능을 제공하는 카드 관리부
    를 포함하는 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템.
  10. 제 7 항에 있어서,
    상기 쇼핑모듈은,
    상기 카메라 장치의 구동을 제어하여 사용자의 안면을 실시간으로 촬영하는 촬영부;
    사용자에 의해 입력되는 키워드를 매개로 하여 상기 오픈마켓에 등록된 하나 이상의 상품의 검색을 요청하는 상품 검색부;
    상기 오픈마켓에서 추출되거나, 사용자가 선택한 상품에 대한 가상 피팅을 상기 가상피팅 서버에 요청하고, 상기 가상피팅 서버로부터 3D 이미지로 렌더링된 입체 상품 모델과 사용자의 안면의 각 부위를 중첩 배치하여 사용자 단말의 화면상에 표시하는 가상 착용부;
    현재 촬영중인 사용자의 생체정보를 상기 가상피팅 서버에 제공하여 오픈마켓에 등록된 상품에 대한 추천정보를 요청하는 상품 추천부; 및
    사용자에 의해 선택된 하나 이상의 상품에 대한 구매를 상기 마켓 서버에 요청하는 구매 요청부
    를 포함하는 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템.
  11. 복수의 오픈마켓을 운영하고, 인증된 사용자 단말의 요청에 따라 상기 오픈마켓에서 판매중인 하나 이상의 상품에 대한 구매절차를 처리하는 마켓 서버, 상기 마켓 서버의 요청에 따라 사용자의 카드 또는 계좌정보를 이용하여 금융기관 서버를 통해 사용자에 대한 제1 인증절차를 수행하고, 사용자의 기 저장된 생체정보를 제공하여 사용자에 대한 제2 인증절차를 수행하는 인증 서버 및 상기 마켓 서버의 요청에 따라 사용자가 제공하는 생체정보를 이용한 증강현실 가상피팅 서비스를 제공하고, 사용자가 제공하는 생체정보를 상기 인증 서버에 제공하여 상기 제2 인증절차를 지원하는 가상피팅 서버를 포함하는 전자 상거래 시스템에 의한 전자 상거래 방법으로서,
    상기 마켓 서버가 사용자 단말의 요청에 따라 계정을 생성하고, 사용자로부터 입력되는 카드 또는 계좌정보를 상기 인증 서버에 제공하여 등록 요청하는 단계;
    상기 인증 서버가 외부의 금융기관 서버에 상기 카드 또는 계좌정보를 통해 해당 사용자에 대한 카드 또는 계좌의 확인을 요청하고, 본인임이 확인되면 사용자에 대한 카드 또는 계좌정보를 저장하고 상기 마켓 서버에 본인 인증결과를 회신하는 단계; 및
    상기 마켓 서버가 해당 사용자에 대한 회원 등록을 수행하고, 상기 사용자 단말로부터 사용자의 안면을 촬영하여 추출된 특징점에 따른 생체정보를 제공받는 단계; 및
    상기 마켓 서버가 상기 가상피팅 서버에 해당 사용자에 생체정보에 대한 등록을 요청하는 단계;
    상기 마켓 서버가 상기 사용자 단말로부터 오픈마켓 이용을 위한 로그인을 요청 받으면, 상기 인증 서버에 사용자에 대한 본인 인증을 요청하는 단계;
    상기 인증 서버가 상기 금융기관 서버에 사용자 본인 인증을 위해 입력된 생체정보, 카드정보 및 계좌정보 중, 상기 카드정보 또는 계좌정보를 제공하여 제1 인증절차를 요청하고, 상기 가상피팅 서버로부터 상기 생체정보를 제공받아 제2 인증절차를 요청하는 단계;
    상기 인증 서버가 상기 금융기관 서버 및 가상 피팅 서버로부터 제1 및 제2 인증절차에 따른 인증결과를 회신받고, 상기 제1 및 제2 인증절차에 따른 두 인증결과를 취합하여 본인 인증 결과를 확정하는 단계;
    상기 인증 서버가 상기 마켓 서버에 해당 사용자에 대한 본인 인증결과를 회신하는 단계; 및
    상기 마켓 서버가 상기 사용자 단말의 로그인을 승인하고, 상기 오픈마켓을 제공하는 단계
    를 포함하는 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 방법.
  12. 삭제
  13. 제 11 항에 있어서,
    상기 마켓 서버가 상기 사용자 단말의 로그인을 승인하고, 상기 오픈마켓을 제공하는 단계 이후,
    상기 마켓 서버가 상기 사용자 단말로부터 키워드를 입력받고, 상기 가상피팅 서버에 가상피팅 서비스를 요청하는 단계;
    상기 가상피팅 서버가 상기 키워드에 대응하는 상품의 브랜드를 상기 마켓 서버로부터 검색하여 하나 이상의 상품을 추출하고, 탑재된 증강현실 엔진 및 딥 러닝 엔진을 통해 입체 상품 모델을 생성하고 상기 마켓 서버에 회신하는 단계; 및
    상기 마켓 서버가 상기 입체 상품 모델을 사용자 단말에 제공하여 입체 상품 모델과 사용자의 안면을 중첩하여 사용자 단말의 화면상에 표시함으로써 가상피팅 서비스를 제공하는 단계
    를 포함하는 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 방법.
  14. 제 13 항에 있어서,
    상기 마켓 서버가 상기 사용자 단말의 로그인을 승인하고, 상기 오픈마켓을 제공하는 단계 이후,
    상기 마켓 서버가 상기 사용자 단말로부터 선택된 상품에 대한 결제를 요청받고, 상기 사용자 단말에 본인 인증을 요청하는 단계;
    상기 마켓 서버가 상기 사용자 단말로부터 현재 사용자의 안면을 촬영하여 생성한 현재 생체정보를 제공받고, 상기 인증 서버에 해당 사용자에 대한 본인 인증을 요청하는 단계;
    상기 인증 서버가 상기 금융기관 서버에 해당 사용자의 저장된 카드 또는 계좌정보를 제공하여 제1 인증절차를 요청하고, 상기 가상피팅 서버에 현재 생체정보를 제공하여 제2 인증절차를 요청하는 단계;
    상기 인증 서버가 상기 금융기관 서버 및 가상 피팅 서버로부터 제1 및 제2 인증절차에 따른 인증결과를 회신받고, 상기 제1 및 제2 인증절차에 따른 두 인증결과를 취합하여 본인 인증 결과를 확정하는 단계;
    상기 인증 서버가 상기 금융기관 서버에 상기 카드 또는 계좌정보에 기초하여 상기 상품에 대한 결제처리를 요청하고, 상기 금융기관 서버로부터 결제승인을 수신하는 단계;
    상기 인증 서버가 상기 마켓 서버로 결제결과를 회신하고, 상기 사용자 단말에 결제 완료를 보고하는 단계
    를 포함하는 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 방법.
KR1020200062500A 2020-05-25 2020-05-25 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템 및 방법 KR102433323B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200062500A KR102433323B1 (ko) 2020-05-25 2020-05-25 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200062500A KR102433323B1 (ko) 2020-05-25 2020-05-25 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템 및 방법

Publications (2)

Publication Number Publication Date
KR20210145891A KR20210145891A (ko) 2021-12-03
KR102433323B1 true KR102433323B1 (ko) 2022-08-19

Family

ID=78866708

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200062500A KR102433323B1 (ko) 2020-05-25 2020-05-25 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR102433323B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102487091B1 (ko) 2022-09-14 2023-01-10 주식회사 로원홀딩스 Ar을 이용한 명품 커머스의 피팅 서비스 제공 방법
KR102487090B1 (ko) 2022-09-14 2023-01-10 주식회사 로원홀딩스 Vr을 이용한 명품 쇼핑 커머스 서비스 제공 방법

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230061046A (ko) 2021-10-28 2023-05-08 주식회사 엘지에너지솔루션 배터리 진단 방법 및 이를 적용한 배터리 시스템
KR102632812B1 (ko) * 2022-06-27 2024-02-01 네이버 주식회사 라이브 방송 제공 방법 및 시스템
KR102638455B1 (ko) * 2022-06-27 2024-02-19 네이버 주식회사 라이브 방송 제공 방법 및 시스템

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101638453B1 (ko) * 2009-09-10 2016-07-12 에스케이텔레콤 주식회사 그룹에 속한 고객을 대상으로 하는 애플리케이션 오픈마켓 시스템 및 방법, 그리고 이에 적용되는 장치
JP2017167859A (ja) 2016-03-16 2017-09-21 株式会社三井住友銀行 決済認証システム、方法、及びプログラム
KR101878968B1 (ko) * 2017-06-29 2018-07-16 주식회사 에스티씨 생체 정보를 이용한 금융 결제 시스템 및 이를 이용한 금융결제방법
KR102060972B1 (ko) * 2019-01-31 2019-12-31 주식회사 일 증강현실 기반 주얼리 가상착용 시스템 및 그 방법
JP2020504888A (ja) 2016-11-16 2020-02-13 ゴラン，メイア ユーザ認証のためのシステム、方法およびソフトウェア

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060057369A (ko) 2004-11-23 2006-05-26 엘지전자 주식회사 생체정보를 이용한 이동통신 단말기의 전자결제 시스템 및그 동작방법
KR20200025291A (ko) * 2018-08-30 2020-03-10 홍은비 사용자 단말기를 이용한 퍼스널 컬러진단을 통한 쇼핑서비스 제공방법 및 그 시스템
KR20200034028A (ko) * 2018-09-13 2020-03-31 정형록 인공지능 기반 가상 피팅 시스템 및 방법
KR102627930B1 (ko) * 2018-11-07 2024-01-23 엔에이치엔 주식회사 정보의 단방향 암호화 이미지 생성 장치 및 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101638453B1 (ko) * 2009-09-10 2016-07-12 에스케이텔레콤 주식회사 그룹에 속한 고객을 대상으로 하는 애플리케이션 오픈마켓 시스템 및 방법, 그리고 이에 적용되는 장치
JP2017167859A (ja) 2016-03-16 2017-09-21 株式会社三井住友銀行 決済認証システム、方法、及びプログラム
JP2020504888A (ja) 2016-11-16 2020-02-13 ゴラン，メイア ユーザ認証のためのシステム、方法およびソフトウェア
KR101878968B1 (ko) * 2017-06-29 2018-07-16 주식회사 에스티씨 생체 정보를 이용한 금융 결제 시스템 및 이를 이용한 금융결제방법
KR102060972B1 (ko) * 2019-01-31 2019-12-31 주식회사 일 증강현실 기반 주얼리 가상착용 시스템 및 그 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102487091B1 (ko) 2022-09-14 2023-01-10 주식회사 로원홀딩스 Ar을 이용한 명품 커머스의 피팅 서비스 제공 방법
KR102487090B1 (ko) 2022-09-14 2023-01-10 주식회사 로원홀딩스 Vr을 이용한 명품 쇼핑 커머스 서비스 제공 방법

Also Published As

Publication number Publication date
KR20210145891A (ko) 2021-12-03

Similar Documents

Publication Publication Date Title
KR102433323B1 (ko) 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템 및 방법
US10915906B2 (en) System and method for facilitating secure self payment transactions of retail goods
KR102116325B1 (ko) 블록체인 기반 정품 및 거래 인증 시스템 및 방법
US11769185B2 (en) Systems and methods for SMS e-commerce assistant
US9824357B2 (en) Focus-based challenge-response authentication
RU2728828C2 (ru) Системы и способы для аутентификации пользователя на основании биометрических данных и данных устройства
US12003508B2 (en) Systems, methods, and computer program products for authenticating devices
CN105229596A (zh) 高级验证技术和应用
KR102275132B1 (ko) 사용자 어플리케이션을 이용한 전자 상거래 중개 시스템 및 방법
CN116547682A (zh) 用于对装置进行认证的***、方法和计算机程序产品
KR20190021406A (ko) 1차 지불 수단의 확대를 가능하게 하는 방법 및 디바이스
CN113168621A (zh) 用于生成令牌化图像的***、方法和设备
US10672054B2 (en) System and method for purchase recommendation for wallet linked user

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right