KR102038551B1 - 얼굴 인식을 이용한 컴퓨팅 장치에 대한 로그인 - Google Patents

얼굴 인식을 이용한 컴퓨팅 장치에 대한 로그인 Download PDF

Info

Publication number
KR102038551B1
KR102038551B1 KR1020180080248A KR20180080248A KR102038551B1 KR 102038551 B1 KR102038551 B1 KR 102038551B1 KR 1020180080248 A KR1020180080248 A KR 1020180080248A KR 20180080248 A KR20180080248 A KR 20180080248A KR 102038551 B1 KR102038551 B1 KR 102038551B1
Authority
KR
South Korea
Prior art keywords
program
authentication
login
user information
user
Prior art date
Application number
KR1020180080248A
Other languages
English (en)
Inventor
이영
황동혁
최성복
김지현
Original Assignee
주식회사 테르텐
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 테르텐 filed Critical 주식회사 테르텐
Priority to KR1020180080248A priority Critical patent/KR102038551B1/ko
Application granted granted Critical
Publication of KR102038551B1 publication Critical patent/KR102038551B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/45—Structures or tools for the administration of authentication
    • G06K9/00221—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/32—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials
    • H04L9/3226—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials using a predetermined code, e.g. password, passphrase or PIN
    • H04L9/3231—Biological data, e.g. fingerprint, voice or retina

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Biomedical Technology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Collating Specific Patterns (AREA)

Abstract

얼굴 인식을 이용한 자동 로그인 방법이 개시된다. 상기 방법은 인증 프로그램이 제1사용자 정보를 수신하여 제1메모리 영역에 등록하고, 상기 인증 프로그램이 사용자의 제1인증 이미지로부터 제1인증 패턴을 생성하여 상기 제1메모리 영역에 등록하고, 상기 컴퓨팅 장치가 부팅된 후 로그인 프로그램이 상기 인증 프로그램을 호출하고, 호출된 인증 프로그램이 카메라에 의해 촬영된 상기 사용자의 제2인증 이미지로부터 제2인증 패턴을 생성하고, 상기 인증 프로그램이 상기 제2인증 패턴과 상기 제1메모리 영역으로부터 읽혀진 상기 제1인증 패턴을 비교하고, 인증 패턴들이 일치할 때, 상기 인증 프로그램이 상기 제1메모리 영역으로부터 전송된 상기 제1사용자 정보를 상기 로그인 프로그램으로 전송하고, 상기 로그인 프로그램이 제2메모리 영역에 저장된 제2사용자 정보를 읽어와서, 상기 제1사용자 정보와 상기 제2사용자 정보를 비교하고, 상기 제1사용자 정보와 상기 제2사용자 정보가 일치할 때 상기 인증 프로그램이 상기 로그인 프로그램으로부터 전송된 제1메시지에 따라 상기 컴퓨팅 장치에 자동 로그인한다.

Description

얼굴 인식을 이용한 컴퓨팅 장치에 대한 로그인{LOGIN TO A COMPUTING DEVICE BASED ON FACIAL RECOGNITION}
본 발명은 컴퓨팅 장치에 대한 사용자 인증에 관한 것으로, 특히 사용자의 얼굴 인식에 기초하여 컴퓨팅 장치에 로그인하는 방법, 상기 방법을 수행할 수 있는 컴퓨터 프로그램, 및 상기 컴퓨터 프로그램을 실행할 수 있는 컴퓨티 시스템에 관한 것이다.
컴퓨터 보안에서, 로그인(또는 로그온(logon), 사인-인(sign-in) 또는 사인-온(sign-on))과 로그아웃(또는 로그오프(log off), 사인 아웃(sign out), 또는 사인 오프(sign off))은 접근 허가 증명을 얻기 위해 사용자 인증으로 개인이 컴퓨터 시스템에 접근하는 작업을 말한다. 컴퓨터 보안에서 로그인과 로그아웃은 중요한 역할을 담당한다. 사용자는 접근을 얻기 위해 컴퓨터 시스템에 로그인할 수 있으며 상기 접근이 더 이상 필요하지 않을 때 상기 사용자는 컴퓨터 시스템으로부터 로그아웃할 수 있다.
공개특허공보: 공개번호 10-2014-0075756 (2014.06.19.공개)
본 발명이 이루고자 하는 기술적인 과제는 컴퓨팅 장치에 저장된 데이터 보안을 위해 사용자의 얼굴 인식 결과에 기초하여 상기 컴퓨팅 장치에 미리 저장된 사용자 정보를 로그인 프로그램으로 전송하고, 상기 로그인 프로그램으로 하여금 수신된 사용자 정보를 이용하여 상기 사용자를 인증하고, 인증 결과에 따라 상기 컴퓨팅 장치에 자동 로그인할 수 있는 방법, 상기 방법을 수행할 수 있는 컴퓨터 프로그램, 및 상기 컴퓨터 프로그램을 실행할 수 있는 컴퓨티 시스템을 제공하는 것이다.
본 발명에 따른 로그인 방법은 컴퓨팅 장치에서 실행 중인 인증 프로그램이 상기 컴퓨팅 장치와 결합된 입력 장치를 통해 사용자에 의해 입력된 제1사용자 정보를 수신하여 상기 인증 프로그램에 의해 액세스되는 제1메모리 영역에 등록하는 단계; 상기 인증 프로그램이 상기 컴퓨팅 장치와 결합된 카메라에 의해 촬영된 상기 사용자의 제1인증 이미지로부터 제1인증 패턴을 생성하고, 생성된 제1인증 패턴을 상기 제1메모리 영역에 등록하는 단계; 상기 컴퓨팅 장치가 부팅된 후, 상기 컴퓨팅 장치에서 실행 중인 로그인 프로그램이 상기 인증 프로그램을 호출하는 단계; 호출된 인증 프로그램이 상기 카메라에 의해 촬영된 상기 사용자의 제2인증 이미지로부터 제2인증 패턴을 생성하는 단계; 상기 인증 프로그램이 상기 제2인증 패턴과 상기 제1메모리 영역으로부터 전송된 상기 제1인증 패턴을 비교하는 단계; 상기 제1인증 패턴과 상기 제2인증 패턴이 일치할 때, 상기 인증 프로그램이 상기 제1메모리 영역으로부터 전송된 상기 제1사용자 정보를 상기 로그인 프로그램으로 전송하는 단계; 상기 로그인 프로그램이 상기 제1사용자 정보를 수신한 후, 상기 로그인 프로그램이 상기 로그인 프로그램에 의해서 액세스 가능한 제2메모리 영역에 저장된 제2사용자 정보를 읽어와서, 상기 제1사용자 정보와 상기 제2사용자 정보를 비교하는 단계; 및 상기 제1사용자 정보와 상기 제2사용자 정보가 일치할 때, 상기 인증 프로그램이 상기 로그인 프로그램으로부터 전송된 제1메시지에 따라 상기 컴퓨팅 장치에 자동 로그인하는 단계를 포함한다.
본 발명에 따른 컴퓨팅 장치와 결합되어 상기 컴퓨팅 장치에 자동 로그인을 위해 데이터 저장 장치에 저장된 인증 프로그램은 등록 단계에서, 상기 인증 프로그램이 상기 컴퓨팅 장치와 결합된 입력 장치를 통해 사용자에 의해 입력된 제1사용자 정보를 제1메모리 영역에 등록하는 단계; 상기 등록 단계에서, 상기 인증 프로그램이 상기 컴퓨팅 장치와 결합된 카메라에 의해 촬영된 상기 사용자의 제1얼굴 이미지를 상기 제1메모리 영역에 등록하는 단계; 인증 단계에서, 상기 컴퓨팅 장치가 부팅된 후, 상기 인증 프로그램이 상기 컴퓨팅 장치에서 실행 중인 로그인 프로그램에 의해 실행되는 단계; 상기 인증 단계에서, 상기 인증 프로그램이 상기 카메라에 의해 촬영된 상기 사용자의 제2얼굴 이미지를 수신하는 단계; 상기 인증 프로그램이 상기 제1메모리 영역으로부터 상기 제1얼굴 이미지를 읽어와서 상기 제1얼굴 이미지와 상기 제2얼굴 이미지를 비교하는 단계; 상기 제1얼굴 이미지와 상기 제2얼굴 이미지가 일치할 때, 상기 인증 프로그램이 상기 제1메모리 영역으로부터 읽혀진 상기 제1사용자 정보를 상기 로그인 프로그램으로 전송하는 단계; 및 상기 인증 프로그램이 상기 로그인 프로그램으로부터 자동 로그인을 지시하는 메시지를 수신하고 상기 메시지에 응답하여 상기 컴퓨팅 장치에 자동 로그인하는 단계를 포함한다.
본 발명에 따른 컴퓨팅 장치와 결합되어 상기 컴퓨팅 장치에 자동 로그인 작동을 위해 데이터 저장 장치에 저장된 자동 로그인 관리 프로그램은 인증 프로그램과 감시 프로그램을 포함하는 상기 자동 로그인 관리 프로그램 이 상기 컴퓨팅 장치에 셋업되는 단계; 상기 인증 프로그램이 사용자의 제1사용자 정보를 수신하여 제1메모리 영역에 등록하는 단계; 상기 인증 프로그램이 상기 사용자의 제1얼굴 이미지를 수신하여 상기 제1메모리 영역에 등록하는 단계; 로그인 프로그램에 의해 상기 인증 프로그램이 호출되는 단계; 상기 인증 프로그램이 상기 사용자의 제2얼굴 이미지를 수신하는 단계; 상기 인증 프로그램이 상기 제1메모리 영역으로부터 상기 제1얼굴 이미지를 읽어와서 상기 제1얼굴 이미지와 상기 제2얼굴 이미지를 비교하는 단계; 상기 제1얼굴 이미지와 상기 제2얼굴 이미지가 일치할 때, 상기 인증 프로그램이 상기 제1메모리 영역으로부터 읽혀진 상기 제1사용자 정보를 상기 로그인 프로그램으로 전송하는 단계; 상기 인증 프로그램이 상기 로그인 프로그램으로부터 자동 로그인을 지시하는 메시지를 수신하고 상기 메시지에 응답하여 상기 컴퓨팅 장치에 상기 자동 로그인 작동을 수행하는 단계; 및 상기 감시 프로그램이 미리 정해진 시간 내에 입력 이벤트가 발생하는지를 감시하는 단계를 포함한다.
본 발명에 따른 컴퓨팅 장치에서 실행되는 로그인 프로그램, 인증 프로그램, 및 감시 프로그램을 이용하여 사용자를 상기 컴퓨팅 장치에 자동 로그인하는 서비스 제공 방법은 상기 로그인 프로그램을 이용하여 상기 사용자의 제2사용자 정보를 제2메모리 영역에 저장하는 단계; 상기 인증 프로그램을 이용하여 상기 사용자의 제1사용자 정보를 제1메모리 영역에 저장하는 단계; 상기 인증 프로그램을 이용하여 상기 사용자의 제1얼굴 이미지를 상기 제1메모리 영역에 저장하는 단계; 상기 컴퓨팅 장치가 부팅된 후, 상기 로그인 프로그램이 상기 인증 프로그램을 호출하는 단계; 상기 인증 프로그램이 상기 사용자의 제2얼굴 이미지를 수신하는 단계; 상기 인증 프로그램이 상기 제1메모리 영역으로부터 상기 제1얼굴 이미지를 읽어와서, 상기 제1얼굴 이미지와 상기 제2얼굴 이미지를 비교하는 단계; 상기 제1얼굴 이미지와 상기 제2얼굴 이미지가 일치할 때, 상기 인증 프로그램이 상기 제1메모리 영역으로부터 상기 제1사용자 정보를 읽어와서 상기 제1사용자 정보를 상기 로그인 프로그램으로 전송하는 단계; 상기 로그인 프로그램이 상기 제1사용자 정보를 수신한 후, 상기 로그인 프로그램이 상기 제2메모리 영역으로부터 상기 제2사용자 정보를 읽어와서, 상기 제1사용자 정보와 상기 제2사용자 정보를 비교하는 단계; 상기 제1사용자 정보와 상기 제2사용자 정보가 일치할 때, 상기 로그인 프로그램이 제1메시지를 상기 인증 프로그램으로 전송하는 단계; 및 상기 인증 프로그램이 상기 제1메시지에 따라 상기 사용자를 상기 컴퓨팅 장치에 자동 로그인하는 단계를 포함한다.
본 발명의 실시 예에 따른 로그인 방법에서 인증 프로그램은, 사용자의 얼굴 인식에 기초하여 상기 사용자자 정당한 사용자일 때, 컴퓨팅 장치에 미리 저장된 사용자 정보를 로그인 프로그램으로 전송하고, 상기 로그인 프로그램으로 하여금 상기 인증 프로그램으로부터 전송받은 상기 사용자 정보를 이용하여 상기 사용자가 정당한 사용자인지를 다시 인증하고, 인증의 결과에 따라 상기 컴퓨팅 장치에 자동으로 로그인하게 할 수 있다.
따라서 사용자의 얼굴 인식에 기초하여 컴퓨팅 장치에 로그인하는 방법은 상기 컴퓨팅 장치에 대한 보안을 강화할 수 있는 효과가 있다.
본 발명의 상세한 설명에서 인용되는 도면을 보다 충분히 이해하기 위하여 각 도면의 상세한 설명이 제공된다.
도 1은 본 발명의 실시 예들에 따라 얼굴 인식을 이용하여 컴퓨팅 장치에 자동 로그인을 수행할 수 있는 컴퓨팅 시스템의 블록도를 나타낸다.
도 2는 본 발명의 실시 예들에 따른 도 1에 도시된 컴퓨팅 시스템의 작동을 설명하는 플로우 차트이다.
도 3은 본 발명의 실시 예들에 따른 도 1에 도시된 컴퓨팅 시스템의 작동을 설명하는 플로우 차트이다.
도 4는 도 1에 도시된 컴퓨팅 장치에서 실행되는 로그인 GUI의 실시 예를 나타낸다.
도 5는 발명의 실시 예들에 따라 얼굴 인식을 이용하여 컴퓨팅 장치에 자동 로그인을 수행할 수 있는 컴퓨팅 시스템의 블록도를 나타낸다.
본 명세서에서 인증 이미지는 사용자 인증 또는 자동 로그인을 위한 이미지를 의미하고, 상기 이미지는 이미지 신호들 또는 이미지 데이터를 의미하고, 이미지는 하나의 이미지 또는 복수 개의 이미지들을 총칭한다.
본 발명에서 하나의 이미지는 사용자의 얼굴 이미지 또는 피사체(subject for photography)에 대한 이미지를 의미하고, 복수 개의 이미지들은 사용자의 얼굴 이미지와, 상기 사용자가 소지하는 대상(object)의 이미지("대상 이미지"라 한다)를 포함한다. 또한, 복수 개의 이미지들은 복수 개의 피사체들(예컨대, 손가락과 스마트폰, 또는 주먹진 손과 펴진 손)에 대한 이미지들을 의미할 수 있다. 여기서 대상은 카메라에 의해 촬영될 수 있는 피사체, 예컨대, 스마트폰, 볼펜, 책, 또는 사용자의 신체의 일부 등을 의미한다.
인증 이미지는 사용자 인증 또는 자동 로그인을 위한 패턴(또는 인증 패턴)으로 식별(또는 결정)될 수 있다. 여기서 패턴(또는 인증 패턴)은 피사체들 각각을 식별하기 위한 유일무이한 정보(또는, 특징들)를 의미한다고 가정한다.
본 발명의 인증 프로그램은 사용자의 신원(identity)를 결정하기 위해 얼굴 인식 기술(또는 얼굴 인식 알고리즘)을 이용하여 상기 사용자의 얼굴 이미지 또는 상기 얼굴 이미지에 해당하는 얼굴 패턴을 분석할 수 있다.
예컨대, 얼굴 인식을 수행하는 인증 프로그램(또는 얼굴 인식 프로그램)은 카메라(또는 이미지 센서)에 의해 촬영된 이미지로부터 사람의 얼굴을 검출하는 얼굴 검출 과정, 검출된 얼굴에 다양한 보정들(예컨대, 촬영된 얼굴에 영향을 주는 조명에 대한 보정, 촬영된 얼굴에 해당하는 신호들에 포함된 잡음 신호 제거, 촬영된 얼굴의 회전, 및 촬영된 얼굴의 크기 보정, 등)을 수행하는 얼굴 정렬 과정, 상기 얼굴 정렬 과정을 통해 정렬된 얼굴로부터 특정한 사람의 얼굴과 다른 사람의 얼굴을 구별하는데 필요한 고유한 특징들(이를 "얼굴 패턴"이라 한다.)을 추출하는 얼굴 특징 추출 과정, 및 추출된 고유한 특징들과 상기 다른 사람의 얼굴의 고유한 특징들과의 유사도를 비교하는 인식 과정을 수행한다.
예컨대, 얼굴 패턴은 사용자의 눈의 크기, 사용자의 두 눈들 사이의 거리, 사용자의 두 눈썹들 사이의 거리, 사용자의 코의 크기와 모양, 사용자의 눈과 코의 상대적 위치, 사용자의 입의 크기와 모양, 사용자의 귀의 위치, 크기, 및 모양, 등과 같은 특징들을 포함한다. 마찬가지로, 대상 패턴은 대상 이미지에 포함된 대상을 다른 대상과 구별할 수 있는 크기, 모양, 및/또는 컬러, 등과 같은 특징들을 포함한다.
실시 예들에 따라 본 발명의 인증 프로그램은 사용자의 신원를 결정하기 위해 이미지 처리 기술(또는 이미지 처리 알고리즘)을 이용하여 피사체의 이미지 또는 상기 피사체의 이미지에 해당하는 피사체의 패턴을 분석할 수 있다.
도 1은 본 발명의 실시 예들에 따라 얼굴 인식을 이용하여 컴퓨팅 장치에 자동 로그인을 수행할 수 있는 컴퓨팅 시스템의 블록도를 나타낸다. 도 1을 참조하면, 컴퓨팅 시스템(100)은 컴퓨팅 장치(200), 카메라(240), 및 제1입력 장치(250)를 포함할 수 있고, 실시 예들에 따라 컴퓨팅 시스템(100)은 제2입력 장치(260)와 출력 장치(270)를 더 포함할 수 있다.
컴퓨팅 시스템(100) 또는 컴퓨팅 장치(200)는 PC(personal computer), 워크스테이션(workstation), 또는 모바일 장치(mobile device or portable device)일 수 있고, 상기 PC는 데스크탑 컴퓨터, 노트북 컴퓨터, 랩탑 컴퓨터, 또는 휴대용 (hand-held) 컴퓨터, 등을 의미할 수 있고, 상기 모바일 장치는 스마트폰, 인터넷 모바일 장치(internet mobile device(MID)), 사물 인터넷(Internet of Things (IoT)) 장치, 또는 PDA(personal digital assistant)일 수 있으나 이에 한정되는 것은 아니다.
컴퓨팅 장치(200)는 프로세서(210), 메모리 컨트롤러(220), 제1메모리 영역 (230), 제2메모리 영역(232), 및 입력 입터페이스(255)를 포함한다. 실시 예들에 따라, 제1메모리 영역(230)과 제2메모리 영역(232)은 컴퓨팅 장치(200)의 내부 또는 외부에 배치된 하나의 메모리 장치에 포함될 수 있고, 서로 다른 메모리 장치들에 포함될 수 있다.
프로세서(210)는 CPU(entral processing unit), GPU(Graphic Processing Unit), GPGPU(General-Purpose computing on Graphics Processing Units), 또는 AP (application processor)를 의미할 수 있고, 프로세서(210)는 메모리 컨트롤러 (220), 메모리 장치, 및/또는 입력 입터페이스(255) 각각의 작동을 제어할 수 있다.
프로세서(210)는 운영 체계(operation system(OS); 212)를 실행할 수 있고, OS(212)는 로그인 프로그램(214), 인증 프로그램(216), 및 감시 프로그램 (monitoring program; 218)을 실행할 수 있다. 실시 예들에 따라, 로그인 프로그램 (214)은 인증 프로그램(216)을 포함할 수 있다. 자동 로그인 관리 프로그램(또는 자동 로그인 관리 프로그램 세트)은 인증 프로그램(216)과 감시 프로그램(218)을 총칭할 수 있다.
프로그램 셋 업 과정에서, 인증 프로그램(216)과 감시 프로그램(218)은 OS (212)의 제어에 따라 컴퓨팅 장치(200)에 설치될 수 있다. 인증 프로그램(216)의 확장자는 dll(dynamic-link library)이고, 감시 프로그램(218)의 확장자는 exe이다. 프로그램 셋 업 과정에서, 인증 프로그램(216)은 로그인 프로그램(214)에 dll 파일로서 삽입되거나 머지(merge)될 수 있다.
실시 예들에 따라, 인증 프로그램(216)을 포함하는 로그인 프로그램(214)이 컴퓨팅 장치(200)로 로드 또는 다운로드되어 OS(212)에 의해 설치될 수 있다.
예컨대, 인증 프로그램(216)은 Microsoft®의 GINA(graphical identification and authentication) 또는 GINA dll일 수 있으나 이에 한정되는 것은 아니다.
본 명세서에서 각 프로그램(214, 216, 및 218)은 소프트웨어 모듈(software module)을 의미할 수 있고, 여기서 소프트웨어 모듈은 명령들(instructions) 또는 프로그램 코드들을 포함하는 파일(file)을 의미하거나, dll과 같이 애플리케이션 프로그램의 일부인 하나의 실행가능한 파일(single executable file)을 의미할 수 있다.
로그인 프로그램(214)은 로그인 프로그램(214)을 대체할 수 있는 프로그램(예컨대, 인증 프로그램(216))이 컴퓨팅 장치(200) 내에 존재하는지(또는 설치되어 있는지)를 판단하고, 판단의 결과에 따라 상기 프로그램이 컴퓨팅 장치(200) 내에 존재한다고 판단될 때, 로그인 프로그램(214)은 상기 프로그램을 호출(call)하여 실행할 수 있다.
인증 프로그램(216)은 인증 이미지(예컨대, 얼굴 이미지 및/또는 대상 이미지)로부터 인증 패턴(예컨대, 얼굴 패턴 및/또는 대상 패턴)을 생성하고, 생성된 인증 패턴을 제1메모리 영역(230)에 저장(또는 등록)하고, 사용자 정보(URI)를 제1메모리 영역(230)에 저장하고, 비교 대상이 되는 인증 패턴들을 비교하고, 제1메모리 영역(230)으로부터 읽혀진 사용자 정보(URI)를 로그인 프로그램(214)으로 전송(또는 삽입)한다.
실시 예들에 따라, 인증 프로그램(216)은 인증 이미지 자체를 제1메모리 영역(230)에 저장한 후, 비교 대상이 되는 인증 이미지들 각각으로부터 인증 패턴을 추출하고, 추출된 인증 패턴들의 일치 여부 또는 유사도를 판단할 수 있다.
감시 프로그램(218)은 인증 프로그램(216)에 의해 자동 로그인이 수행됨을 모니터(또는 감시)하고, 모니터(또는 감시) 결과에 응답하여 미리 정해진 시간 내에 입력 이벤트가 발생했는지를 판단하고, 상기 미리 정해진 시간 내에 상기 입력 이벤트가 발생하지 않을 경우 로그아웃 또는 화면 잠금을 지시하는 메시지 (message)를 로그인 프로그램(214)으로 전송할 수 있다.
메시지는 특정한 작업(예컨대, 자동 로그인, 로그아웃, 또는 화면 잠금, 등)을 지시하는 신호, 인터럽트, 알림, 또는 명령(instruction)을 총칭한다.
인증 프로그램(216)은 로그인 프로그램(214)으로부터 전송된 자동 로그인을 위한 메시지를 받을 수 있다. 인증 프로그램(216)은 인공 지능(artificial intelligence) 또는 기계 학습(machine learning) 알고리즘을 통해 카메라(240)에 의해 촬영된 이미지에 포함된 인증 이미지 또는 인증 이미지에 해당하는 인증 패턴을 학습하고 인식할 수 있다.
로그인 프로그램(214)은 (i) 입력 장치(250 또는 260)를 이용하여 사용자가 입력한 사용자 정보(URI)를 제2메모리 영역(232)에 저장(또는 등록)할 수 있고, (ⅱ) 인증 프로그램(216)의 설치 여부를 확인할 수 있고, 인증 프로그램(216)이 설치된 경우 인증 프로그램(216)의 실행을 위해 인증 프로그램(216)을 호출할 수 있고, (ⅲ) 인증 프로그램(216)으로부터 전송된 제1사용자 정보와 제2메모리 영역 (232)으로부터 읽혀진 제2사용자 정보를 비교하고 비교 결과에 해당하는 메시지를 인증 프로그램(216)으로 전송할 수 있고, (ⅳ) 감시 프로그램(218)으로부터 전송된 로그아웃 또는 화면 잠금을 지시하는 메시지에 응답하여 컴퓨팅 장치(200)를 로그아웃하거나 컴퓨팅 장치(200)에 대한 화면 잠금을 제어할 수 있다.
사용자 정보(URI)는 사용자가 컴퓨팅 장치(200)에 로그인하기 위해 필요한 정보를 의미하고, 사용자 정보(URI)는 사용자 이름(또는 e-메일 주소)과 패스워드를 포함할 수 있다. 상기 패스워드는 문자 또는 사용자의 생체 정보일 수 있고, 상기 생체 정보는 사용자의 지문 정보, 사용자의 홍채 정보, 사용자의 제스처, 또는 사용자의 목소리일 수 있으나 이에 한정되는 것은 아니다. 컴퓨팅 장치(200)는 입력 장치들(250과 260) 이외에 상체 정보를 획득하여 프로세서(210)로 전송할 수 있는 생체 정보 입력 장치를 더 포함할 수 있다.
메모리 컨트롤러(220)는, 프로세서(210)의 제어에 따라, 프로세서(210)와 메모리 장치 사이에서 주고받는 정보를 인터페이싱할 수 있다. 메모리 컨트롤러(220)는 메모리 장치에 정보를 저장할 수 있고, 상기 메모리 장치로부터 정보를 읽을 수 있다.
본 명세서에서 메모리 장치는 제1메모리 영역(230)과 제2메모리 영역(232) 모두를 포함하는 하나의 메모리 장치를 의미할 수 있고, 제1메모리 영역(230)을 포함하는 제1메모리 장치와 제2메모리 영역(232)을 포함하는 제2메모리 장치를 포함할 수 있다. 즉, 메모리 장치는 하나의 메모리 장치 또는 복수 개의 메모리 장치들을 총칭한다. 예컨대, 각 메모리 영역(230과 232)은 보안 메모리 영역(secure memory region)을 의미할 수 있다.
메모리 장치는 정보(예컨대, 얼굴 패턴, 대상 패턴, 및 사용자 정보)를 일시적으로 또는 영구적으로 저장할 수 있는 데이터 저장 장치(또는 데이터 저장 매체)를 의미하고, 휘발성 메모리 장치와 불휘발성 메모리 장치를 총칭한다. 상기 휘발성 메모리 장치는 DRAM(dynamic random access memory)일 수 있고, 상기 불휘발성 메모리 장치는 하드디스크 드라이브(harddisk drive(HDD)) 또는 플래시-기반 메모리 장치인 솔리드 스테이트 드라이브(solid state drive(SSD))일 수 있다.
메모리 장치는 컴퓨팅 장치(200)의 내부에 배치될 수 있고 컴퓨팅 장치(200)의 외부에 배치될 수 있다.
카메라(240)는 대상(object) 또는 피사체에 대한 이미지(또는 이미지 데이터)를 생성할 수 있는 이미징 장치(imging device)를 의미할 수 있고, PC 처럼 컴퓨팅 장치(200)의 외부에 배치될 수 있고, 모바일 장치처럼 컴퓨팅 장치(210)의 내부에 배치될 수 있다. 카메라(240)는 웹 카메라 또는 CMOS 이미지 센서로 구현될 수 있고, 컬러 이미지와 깊이(depth) 이미지를 포함하는 복합 이미지, 또는 컬러 이미지를 생성할 수 있다.
실시 예들에 따라, 카메라(240)와 프로세서(210) 사이에는 ISP(image signal processor)가 배치될수 있고, 상기 ISP는 카메라(240)에 의해 생성된 이미지 신호들을 프로세서(210)가 처리할 수 있는 이미지(또는 이미지 데이터)로 변환할 수 있다.
제1입력 장치(250)는 사용자 정보(URI)를 입력할 수 있는 키보드, 키패드, 터치 패드, 또는 터치스크린으로 구현될 수 있다.
입력 인터페이스(255)는 프로세서(210)와 제1입력 장치(250) 사이에서 주고받는 정보를 인터페이싱할 수 있다. 실시 예들에 따라, 입력 인터페이스(255)는 블루투스 페어링(bluetooth pairing)을 수행할 수 있는 하드웨어 또는 상기 블루투스 페어링을 수행하기 위해 프로세서(210)에 실행되는 컴퓨터 프로그램(또는 소프트웨어 모듈)을 의미할 수 있다.
제2입력 장치(260)는 컴퓨터 마우스일 수 있다. 실시 예들에 따라, 키보드 (250)가 블루투스 키보드이고 컴퓨터 마우스(260)가 블루투스 마우스일 때, 블루투스 키보드(250)와 블루투스 마우스(260)는 입력 인터페이스(255)를 통해 프로세서 (210)와 정보를 주고받을 수 있다.
실시 예들에 따라, 제1입력 장치(250)는 컴퓨팅 장치(200)와 통신할 수 있는 모바일 장치(예컨대, 스마트폰)에 포함된 블루투스 송수신기를 의미할 수 있다. 상기 모바일 장치의 블루투스 송수신기와 컴퓨팅 장치(200)가 블루투스 통신 프로토콜을 통해 블루투스 페어링(bluetooth pairing)되어 있을 때, 입력 인터페이스 (255)는 상기 블루 투스 송수신기를 포함하는 상기 모바일 장치의 사용자에 의해 입력된 사용자 정보(URI)를 수신하여 프로세서(210)로 전송할 수 있다.
도 2는 본 발명의 실시 예들에 따른 도 1에 도시된 컴퓨팅 시스템의 작동을 설명하는 플로우 차트이다.
도 1과 도 2를 참조하면, 제1등록 단계에서, 사용자가 사용자 정보(URI)를 제1입력 장치(250)에 입력하면, 제2사용자 정보(URI)로서 사용되는 사용자 정보 (URI)는 입력 인터페이스(255)를 통해 프로세서(210)에서 실행되는 로그인 프로그램(214)으로 전송된다.
로그인 프로그램(214)은 제2사용자 정보(URI)를 메모리 컨트롤러(220)를 통해 제2메모리 영역(232)에 저장(또는 등록)한다(S101). 제2메모리 영역(232)은 OS (212) 또는 로그인 프로그램(214)에 의해서만 액세스되는 보안 메모리 영역이므로, 인증 프로그램(216)은 제2메모리 영역(232)을 액세스할 수 없다.
실시 예들에 따라, 로그인 프로그램(214)은 암호키를 이용하여 제2사용자 정보(URI)를 암호화하고, 암호화된 제2사용자 정보를 메모리 컨트롤러(220)를 통해 제2메모리 영역(232)에 저장(또는 등록)할 수 있다(S101).
로그인 프로그램(214)은, 인증 프로그램(216)으로부터 전송된 제1사용자 정보(URI)의 수신에 응답하여, 제2메모리 영역(232)에 저장된 암호화된 제2사용자 정보를 리드(read)하고, 암호화된 제2사용자 정보를 상기 암호키를 이용하여 복호화하고, 복호화된 제2사용자 정보(URI)와 제1사용자 정보(URI)를 비교하고, 비교 결과(예컨대, 성공 또는 실패)를 지시하는 메시지를 인증 프로그램(216)으로 전송할 수 있다.
제1등록 단계 이후에, 인증 프로그램(216)과 감시 프로그램(218)은 컴퓨팅 장치(200)의 프로세서(210)에 의해 컴퓨팅 장치(200)에 설치(또는 셋업)된다.
인증 프로그램(216)이 컴퓨팅 장치(200)에 설치(또는 셋업)된 후, 제2등록 단계에서 컴퓨팅 장치(200)가 부팅(booting)되거나 파워-온(power-on)되면, OS (212)는 상기 부팅 또는 상기 파워-온을 감지하고, 로그인 프로그램(214)의 실행을 위해 로그인 프로그램(214)를 호출한다.
로그인 프로그램(214)은 자동 로그인을 수행하는 본 발명에 따른 인증 프로그램(216)이 컴퓨팅 장치(200)에 설치되어 있는지를 확인(또는 판단)하고, 인증 프로그램(216)이 컴퓨팅 장치(200)에 설치되어 있을 때, 로그인 프로그램(214)은 인증 프로그램(216)을 호출한다. 따라서, 인증 프로그램(216)이 호출(또는 실행)됨에 따라 로그인 프로그램(214) 대신에 인증 프로그램(216)이 로그인 또는 자동 로그인에 관여한다.
예컨대, 로그인 프로그램(214)이 실행될 때 인증 프로그램(216)은 로그인 프로그램(214)으로부터 인터럽트 신호를 수신할 수 있는 대기(standby) 상태에 있을 수 있고, 인증 프로그램(216)이 실행될 때 로그인 프로그램(214)은 인증 프로그램(216)으로부터 인터럽트 신호를 수신할 수 있는 대기 상태에 있을 수 있다.
예컨대, 로그인 프로그램(214)이 포그라운드(foreground)에서 실행될 때 인증 프로그램(216)은 백그라운드(background)에서 실행될 수 있고, 인증 프로그램(216)이 포그라운드에서 실행될 때 로그인 프로그램(214)은 백그라운드에서 실행될 수 있다.
예컨대, 인증 프로그램(216)이 호출(또는 실행)되면, 인증 프로그램(216)은 사용자 정보(URI)를 입력할 수 있는 제1사용자 인터페이스와, 사용자의 얼굴을 등록할 수 있는 제2사용자 인터페이스를 포함하는 사용자 인터페이스를 출력 장치(예컨대, 디스플레이 장치; 270)를 통해 사용자에게 제공한다. 실시 예들에 따라 상기 제1사용자 인터페이스, 상기 제2사용자 인터페이스, 및 상기 사용자 인터페이스 각각은 그래픽 사용자 인터페이스(graphical user interface(GUI))일 수 있으나 이에 한정되는 것은 아니다.
인증 프로그램(216) 또는 사용자는 카메라(240)의 작동을 제어하는 카메라 드라이버 또는 카메라 API(Application Programming Interface)를 실행시킬 수 있다.
제2등록 단계에서, 사용자가 제1입력 장치(250)를 통해 제1사용자 인터페이스에 사용자 정보(URI)를 입력하면, 제1사용자 정보(URI)로서 사용되는 사용자 정보(URI)는 입력 인터페이스(255)를 통해 로그인 프로그램(214) 대신에 인증 프로그램(216)으로 전송(또는 입력)된다. 인증 프로그램(216)은 제1사용자 정보(URI)를 메모리 컨트롤러(220)를 통해 제1메모리 영역(230)에 저장(또는 등록)한다(S103). 제1메모리 영역(230)은 인증 프로그램(216)에 의해서만 액세스되는 보안 메모리 영역이므로, 로그인 프로그램(214)은 제1메모리 영역(230)을 액세스할 수 없다.
제2등록 단계에서, 사용자가 제2사용자 인터페이스를 조작하여 카메라(240)를 이용하여 사용자의 얼굴을 촬영하면, 카메라(240)는 상기 사용자의 얼굴에 해당하는 제1얼굴 이미지(IM1)를 생성한다. 제1얼굴 이미지(IM1)는 프로세서(210)에서 실행되는 인증 프로그램(216)으로 전송되고, 인증 프로그램(216)은 제1얼굴 이미지 (IM1)로부터 제1얼굴 패턴(FP1)을 생성하고, 메모리 컨트롤러(220)를 통해 제1얼굴 패턴(FP1)을 제1메모리 영역(230)에 저장(또는 등록)한다(S105).
실시예들에 따라, 인증 프로그램(216)은 얼굴 이미지 자체를 제1메모리 영역 (230)에 저장한 후 단계(S125)에서 제1메모리 영역(230)으로부터 리드된 상기 얼굴 이미지로부터 얼굴 패턴을 추출할 수 있다.
제2등록 단계에서, 단계(S105)는 단계(S103)보다 먼저 수행될 수 있다.
제2등록 단계가 완료된 후, 인증 단계 또는 자동 로그인 단계에서, 컴퓨팅 장치(200)가 다시 부팅되거나 다시 파워-온되면, OS(212)는 상기 부팅 또는 상기 파워-온을 감지하고, 로그인 프로그램(214)을 실행하기 위해 로그인 프로그램(214)를 호출한다.
인증 단계 또는 자동 로그인 단계에서, 로그인 프로그램(214)은 자동 로그인을 수행하는 인증 프로그램(216)이 컴퓨팅 장치(200)에 설치되어 있는지를 확인(또는 판단)하고, 인증 프로그램(216)이 컴퓨팅 장치(200)에 설치되어 있을 때, 로그인 프로그램(214)은 인증 프로그램(216)을 실행시키기 위해 인증 프로그램(216)을 호출한다(S110).
자동 로그인은 제2등록 단계 이후(즉, 제1사용자 정보(URI)와 제1얼굴 패턴 (FP1)이 제1메모리 영역(230)에 저장된 후)에 컴퓨팅 장치(200)에 로그인하기 위해 사용자가 입력 장치(250 또는 260)를 통해 사용자 정보(URI)를 별도로 입력하지 않더라도 인증 프로그램(216)의 메시지에 따라 컴퓨팅 장치(200)에 자동으로 로그인하는 것을 의미한다. 따라서 자동 로그인 이후에, 사용자는 컴퓨팅 장치(200)의 메모리 장치에 저장되고 상기 사용자에게 액세스가 허용된 리소스(예컨대, 문서, 파일, 또는 이미지)를 사용할 수 있다.
컴퓨팅 장치(200)에 유선 또는 무선으로 연결된 카메라(240)는 사용자의 얼굴을 촬영하고, 상기 사용자의 얼굴에 대한 제2얼굴 이미지(IMi, i=2)를 생성하고, 제2얼굴 이미지(IM2)를 프로세서(210)로 전송한다. 프로세서(210)에서 실행 중인 인증 프로그램(216)은 제2얼굴 이미지(IM2)로부터 제2얼굴 패턴(FPi, i=2)을 생성한다(S120).
제2얼굴 이미지(IM2)가 수신되거나 제2얼굴 패턴(FP2)이 생성됨에 따라, 인증 프로그램(216)은 제1메모리 영역(230)에 저장된 제1얼굴 패턴(FP1)를 읽어와서, 제1얼굴 패턴(FP1)과 제2얼굴 패턴(FP2)을 비교한다(S125).
제1얼굴 패턴(FP1)과 제2얼굴 패턴(FP2)이 일치할 때(S125의 YES), 예컨대, 제1얼굴 패턴(FP1)과 제2얼굴 패턴(FP2)과의 유사도가 높을 때(S125의 YES), 인증 프로그램(216)은 제1메모리 영역(230)에 저장된 제1사용자 정보(URI)를 읽어와서 제1사용자 정보(URI)를 로그인 프로그램(214)으로 전송한다(S130).
실시 예들에 따라, 인증 프로그램(216)은 제1얼굴 이미지(IM1) 자체를 제1메모리 영역(230)에 저장하고, 제1메모리 영역(230)에 저장된 제1얼굴 이미지(IM1)를 리드하고, 제1얼굴 이미지(IM1)로부터 제1얼굴 패턴(FP1)을 생성하고, 제1얼굴 패턴(FP1)과 제2얼굴 패턴(FP2)를 비교할 수도 있다.
실시 예들에 따라, 인증 프로그램(216)이 암호키를 이용하여 제1사용자 정보 (URI)를 암호화하고, 암호화된 제1사용자 정보를 제1메모리 영역(230)에 저장한 경우, 제1얼굴 패턴(FP1)과 제2얼굴 패턴(FP2)이 일치할 때(S125의 YES), 인증 프로그램(216)은 제1메모리 영역(230)으로부터 암호화된 제1사용자 정보를 읽어와서, 상기 암호화된 제1사용자 정보를 상기 암호키를 이용하여 복호화하고, 복호화된 제1사용자 정보(URI)를 로그인 프로그램(214)으로 전송할 수 있다(S130).
제1사용자 정보(URI)가 수신됨에 따라 로그인 프로그램(214)은 제2메모리 영역(232)에 저장된 제2사용자 정보(URI)를 읽어와서, 제1사용자 정보(URI)와 제2사용자 정보(URI)를 비교한다(S140). 앞에서 설명한 바와 같이, 로그인 프로그램 (214)은 암호화된 제2사용자 정보를 암호키를 이용하여 복호화한 후 복호화된 제2사용자 정보와 제1사용자 정보를 비교할 수 있다.
제1사용자 정보(URI)와 제2사용자 정보(URI)가 일치할 때(S150의 YES), 로그인 프로그램(214)은 인증(또는 일치) 또는 성공을 지시하는 메시지를 인증 프로그램(216)으로 전송한다. 따라서, 인증 프로그램(216)은 상기 메지시에 응답하여 컴퓨팅 장치(200)에 자동 로그인한다(S155). 컴퓨팅 장치(200)에 자동 로그인됨에 따라, 바탕 화면이 디스플레이 장치(270)에서 디스플레이된다.
즉, 사용자가 컴퓨팅 장치(200)에 로그인하기 위해 사용자 정보(URI)를 제1입력 장치(250)로 새로 입력하지 않더라도 인증 프로그램(216)은 로그인 프로그램 (214)으로부터 전송된 인증(또는 일치) 또는 성공을 지시하는 메시지에 따라 컴퓨팅 장치(200)에 자동으로 로그인한다(S155).
제1얼굴 패턴(FP1)과 제2얼굴 패턴(FP2)이 일치하지 않을 때(S125의 NO), 예컨대, 제1얼굴 패턴(FP1)과 제2얼굴 패턴(FP2)과의 유사도가 낮을 때(S125의 NO), 인증 프로그램(216)은 제1메모리 영역(230)에 저장된 제1사용자 정보(URI)를 로그인 프로그램(214)으로 전송하지 않는다(S145). 따라서 사용자는 컴퓨팅 장치(200)에 로그인할 수 없다.
인증 프로그램(216)은 제1얼굴 패턴(FP1)과 제2얼굴 패턴(FP2)과의 유사도(또는 유사 정도를 나타내는 값)와 기준 유사도(또는 기준 값)를 비교하고, 상기 유사도가 상기 기준 유사도보다 높을 때에는 단계(S130)을 수행하고, 그렇지 않을 때 단계(S145)를 수행한다.
또한, 제1사용자 정보(URI)와 제2사용자 정보(URI)가 일치하지 않을 때 (S150의 NO), 로그인 프로그램(214)은 불인증(또는 불일치) 또는 실패를 지시하는 메시지를 인증 프로그램(216)으로 전송한다. 따라서 인증 프로그램(216)은 컴퓨팅 장치(200)로의 로그인을 거부한다(S145). 사용자는 컴퓨팅 장치(200)에 로그인할 수 없다.
실행 파일(executable file)로 구현될 수 있는 감시 프로그램(218)은, 컴퓨팅 장치(200)로의 자동 로그인을 모니터(또는 감시)하고, 모니터(또는 감시) 결과에 따라 감시 프로그램(218)에 포함된 소프트웨어 카운터(또는 소프트웨어 타이머)를 작동(또는 시작)시킨다.
감시 프로그램(216)은 제1입력 장치(250), 제2입력 장치(260), 및/또는 카메라(240)로부터 출력 신호(이를 "입력 이벤트"라 한다.)가 발생하는지를 모니터하고, 모니터 결과에 따라 메시지를 생성한다(S160).
예컨대, 감시 프로그램(216)은 소프트웨어 카운터(또는 소프트웨어 타이머)에 의해 계산(또는 측정)된 미리 정해진 시간 이내에 입력 이벤트가 발생하는지를 판단한다(S170). 상기 미리 정해진 시간 이내에 상기 입력 이벤트가 발생하면(S170의 YES), 예컨대 사용자가 컴퓨팅 장치(200)를 현재 사용하고 있다고 판단될 때, 자동 로그인은 그대로 유지된다(S175).
그러나 상기 미리 정해진 시간 이내에 상기 입력 이벤트가 발생하지 않으면 (S170의 NO), 예컨대 사용자가 컴퓨팅 장치(200)를 현재 사용하고 있지 않다고 판단될 때, 감시 프로그램(218)은 로그아웃 또는 화면 잠금을 지시하는 메시지를 생성하고, 상기 메시지를 로그인 프로그램(214)으로 전송한다. 로그인 프로그램(218)은 상기 메시지에 응답하여 컴퓨팅 장치(200)에 대한 로그아웃 또는 화면 잠금을 수행한다(S180).
컴퓨팅 장치(200)에 대한 로그아웃 또는 화면 잠금이 수행된 후, 컴퓨팅 장치(200)에 대한 자동 로그인은 아래의 단계들에 따라 다시 수행된다.
로그아웃 또는 화면 잠금을 지시하는 메시지에 따라 실행되는 로그인 프로그램(214)은 자동 로그인을 수행하는 인증 프로그램(216)이 컴퓨팅 장치(200)에 설치되어 있는지를 다시 확인(또는 판단)하고, 인증 프로그램(216)이 컴퓨팅 장치(200)에 설치되어 있을 때, 인증 프로그램(216)을 실행시키기 위해 로그인 프로그램 (214)은 인증 프로그램(216)을 다시 호출한다(S110).
카메라(240)에 의해 사용자의 얼굴이 다시 촬영되면, 카메라(240)는 상기 사용자의 얼굴에 대한 제3얼굴 이미지(IMi, i=3)를 생성하고, 제3얼굴 이미지(IM3)를 프로세서(210)로 전송한다. 프로세서(210)에서 실행되는 인증 프로그램(216)은 제3얼굴 이미지(IM3)로부터 제3얼굴 패턴(FPi, i=3)을 생성한다(S120). 각 얼굴 이미지(IM1, IM2, 및 IM3)는 각 시점에 카메라(240)에 의해 촬영된 사용자의 얼굴에 대한 이미지이다.
제3얼굴 이미지(IM3)가 수신되거나 제3얼굴 패턴(FP3)이 생성됨에 따라, 인증 프로그램(216)은 제1메모리 영역(230)에 저장된 제1얼굴 패턴(FP1)를 읽어와서, 제1얼굴 패턴(FP1)과 제3얼굴 패턴(FP3)을 비교한다(S125).
제1얼굴 패턴(FP1)과 제3얼굴 패턴(FP3)이 일치할 때(S125의 YES), 인증 프로그램(216)은 제1메모리 영역(230)에 저장된 제1사용자 정보(URI)를 읽어와서 제1사용자 정보(URI)를 로그인 프로그램(214)으로 전송한다(S130). 실시 예들에 따라, 인증 프로그램(216)은 복호화된 제1사용자 정보(URI)를 로그인 프로그램(214)으로 전송한다(S130).
제1사용자 정보(URI)가 수신됨에 따라 로그인 프로그램(214)은 제2메모리 영역(232)에 저장된 제2사용자 정보(URI)를 읽어와서, 제1사용자 정보(URI)와 제2사용자 정보(URI)를 비교한다(S140). 실시 예에 따라, 로그인 프로그램(214)은 암호화된 제2사용자 정보를 복호화하고, 제1사용자 정보(URI)와 복호화된 제2사용자 정보(URI)를 비교한다(S140).
제1사용자 정보(URI)와 제2사용자 정보(URI)가 일치할 때(S150의 YES), 로그인 프로그램(214)은 인증(또는 일치)를 지시하는 메시지를 인증 프로그램(216)으로 새롭게 전송한다. 따라서, 인증 프로그램(216)은 상기 메지시에 응답하여 컴퓨팅 장치(200)에 자동 로그인한다(S155). 그후, 앞에서 설명된 단계들(S160, S170, S175, 및 S180)이 수행된다.
도 2에서는 사용자의 얼굴 인식을 통해 컴퓨팅 장치(200)에 자동 로그인하는 방법(S100)이 설명되었으나, 본 발명은 사용자의 얼굴 대신에 상기 사용자의 신체의 일부 또는 상기 사용자가 소지하는 대상을 인식하여 컴퓨팅 장치(200)에 자동 로그인하는 방법에도 적용될 수 있다.
따라서, 도 1의 각 이미지(IM1과 IMi)는 사용자의 신체의 일부 이미지 또는 대상 이미지를 의미할 수 있고, 제1메모리 영역(230)에 저장되는 FP1은 상기 이미지에 해당하는 패턴을 의미할 수 있고, FPi는 IMi에 해당하는 패턴을 의미할 수 있다.
도 3은 본 발명의 실시 예들에 따른 도 1에 도시된 컴퓨팅 시스템의 작동을 설명하는 플로우 차트이다.
도 2를 참조하여 설명된 제1등록 단계는 이미 수행되었고, 인증 프로그램 (216)과 감시 프로그램(218)은 이미 컴퓨팅 장치(200)에 설치되었다고 가정한다.
인증 프로그램(216)이 컴퓨팅 장치(200)에 설치된 후, 컴퓨팅 장치(200)가 부팅되거나 파워-온되면, OS(212)는 상기 부팅 또는 상기 파워-온을 감지하고, 로그인 프로그램(214)를 호출하고, 호출된 로그인 프로그램(214)은 인증 프로그램 (216)을 다시 호출한다.
호출된 인증 프로그램(216)은 제1모드(MODE1)와 제2모드(MODE2) 중에서 어느 하나를 선택할 수 있는 옵션(또는 GUI))을 디스플레이 장치(270)를 통해 사용자에게 제공한다. 사용자는 상기 옵션(또는 GUI)를 이용하여 제1모드(MODE1) 또는 제2모드(MODE2)를 선택할 수 있다(S205).
제1모드(MODE1)는 도 2를 참조하여 설명된 얼굴 인식을 이용하여 컴퓨팅 장치(200)에 자동 로그인하는 방법(S100)이고, 제2모드(MODE2)는 복수 개의 인증 이미지들에 해당하는 인증 패턴들을 이용하여 컴퓨팅 장치(200)에 자동 로그인하는 방법(S200)이다.
도 3에서는 설명의 편의를 위한 복수 개의 인증 이미지들은 2개이고, 2개의 인증 이미지들은 사용자의 얼굴 이미지와 대상 이미지이고, 상기 대상 이미지는 스마트폰 이미지라고 가정한다. 물론, 본 발명은 더 강화된 보안을 위해, 3개 이상의 인증 이미지들을 이용하여 컴퓨팅 장치(200)에 자동 로그인하는 방법에 적용될 수 있다.
사용자가 인증 프로그램(216)에 의해 제공되는 제2모드(MODE2)를 선택했다고 가정한다.
도 1 내지 도 3을 참조하면, 제2등록 단계에서, 사용자가 제1입력 장치(250)를 통해 제1사용자 인터페이스에 사용자 정보(URI)를 입력하면, 제1사용자 정보 (URI)로 불리는 사용자 정보(URI)는 입력 인터페이스(255)를 통해 프로세서(210)에서 실행되는 인증 프로그램(216)으로 전송된다. 인증 프로그램(216)은 제1사용자 정보(URI)를 메모리 컨트롤러(220)를 통해 제1메모리 영역(230)에 저장(또는 등록)한다(S210).
제2등록 단계에서, 사용자가 제2사용자 인터페이스를 조작하여 카메라(240)를 이용하여 사용자의 얼굴을 촬영하면, 카메라(240)는 상기 사용자의 얼굴에 해당하는 제1얼굴 이미지(IM1)를 생성한다. 제1얼굴 이미지(IM1)는 프로세서(210)에서 실행되는 인증 프로그램(216)으로 전송되고, 인증 프로그램(216)은 제1얼굴 이미지 (IM1)로부터 제1얼굴 패턴(FP1)을 생성하고, 메모리 컨트롤러(220)를 통해 제1얼굴 패턴(FP1)을 제1메모리 영역(230)에 저장(또는 등록)한다(S215).
사용자가 제2사용자 인터페이스를 조작하여 카메라(240)를 이용하여 자신이 소지하고 있는 스마트폰을 촬영하면, 카메라(240)는 상기 스마트폰에 해당하는 제1스마트폰 이미지(OIMi, i=1)를 생성한다. 제1스마트폰 이미지(OIM1)는 프로세서 (210)에서 실행되는 인증 프로그램(216)으로 전송되고, 인증 프로그램(216)은 제1스마트폰 이미지(IM1)로부터 제1스마트폰 패턴(OPi, i=1)을 생성하고, 메모리 컨트롤러(220)를 통해 제1스마트폰 패턴(OP1)을 제1메모리 영역(230)에 저장(또는 등록)한다(S220).
제2등록 단계에서, 단계들(S210, S215, 및 S220)이 수행되는 순서는 실시 예들에 따라 다양하게 변경될 수 있다.
제2등록 단계가 완료된 후, 인증 단계 또는 자동 로그인 단계에서, 컴퓨팅 장치(200)가 다시 부팅되거나 다시 파워-온되면, OS(212)는 상기 부팅 또는 상기 파워-온을 감지하고, 대기 상태에 있는 로그인 프로그램(214)를 호출한다.
인증 단계 또는 자동 로그인 단계에서, 로그인 프로그램(214)은 자동 로그인을 수행하는 인증 프로그램(216)이 컴퓨팅 장치(200)에 설치되어 있는지를 확인(또는 판단)하고, 인증 프로그램(216)이 컴퓨팅 장치(200)에 설치되어 있을 때, 로그인 프로그램(214)은 대기 상태의 인증 프로그램(216)을 다시 호출한다(S223). 따라서 인증 프로그램(216)은 실행된다.
인증 단계 또는 자동 로그인 단계를 수행하기 위해, 사용자가 카메라(240)를 이용하여 상기 사용자의 얼굴과 스마트폰을 순차적으로 또는 병렬적으로 촬영하면, 카메라(240)는 상기 사용자의 얼굴에 대한 제2얼굴 이미지(IMi, i=2)와 상기 스마트폰에 대한 제2스마트폰 이미지(OIMi, i=2)를 생성하고, 제2얼굴 이미지(IM2)와 제2스마트폰 이미지(OIM2)를 프로세서(210)로 전송하고, 인증 프로그램(216)은 제2얼굴 이미지(IM2)로부터 제2얼굴 패턴(FPi, i=2)을 생성하고 제2스마트폰 이미지 (OIM2)로부터 제2스마트폰 패턴(OP2)를 생성한다(S225).
각 이미지(IM2와 OIM2)가 수신되거나 각 패턴(FP2와 OP2)이 생성됨에 따라, 인증 프로그램(216)은 제1메모리 영역(230)에 저장된 제1얼굴 패턴(FP1)과 제1스마트폰 패턴(OP1)을 읽어와서, 제1얼굴 패턴(FP1)과 제2얼굴 패턴(FP2)을 비교하고 (S230), 제1스마트폰 패턴(OP1)과 제2스마트폰 패턴(OP2)을 비교한다(S235).
실시 예들에 따라, 인증 프로그램(216)이 제1얼굴 이미지(IM1)와 제1스마트폰 이미지(OIM1)를 제1메모리 영역(230)에 저장한 경우, 각 이미지(IM2와 OIM2)가 수신되거나 각 패턴(FP2와 OP2)이 생성됨에 따라 인증 프로그램(216)은 제1메모리 영역(230)에 저장된 제1얼굴 이미지(IM1)와 제1스마트폰 이미지(OIM1)를 읽어와서, 제1얼굴 이미지(IM1)에 해당하는 제1얼굴 패턴(FP1)과 제1스마트폰 이미지(OIM1)에 해당하는 제1스마트폰 패턴(OP1)을 생성하고, 제1얼굴 패턴(FP1)과 제2얼굴 패턴 (FP2)을 비교하고(S230), 제1스마트폰 패턴(OP1)과 제2스마트폰 패턴(OP2)을 비교한다(S235).
제1얼굴 패턴(FP1)과 제2얼굴 패턴(FP2)이 일치하고(S230의 YES) 제1스마트폰 패턴(OP1)과 제2스마트폰 패턴(OP2)이 일치할 때(S235의 YES), 예컨대 제1얼굴 패턴(FP1)과 제2얼굴 패턴(FP2)과의 유사도가 높고(S230의 YES) 제1스마트폰 패턴(OP1)과 제2스마트폰 패턴(OP2)의 유사도가 높을 때(S235의 YES), 인증 프로그램 (216)은 제1메모리 영역(230)에 저장된 제1사용자 정보(URI)를 읽어와서 제1사용자 정보(URI)를 로그인 프로그램(214)으로 전송한다(S130).
제1사용자 정보(URI)가 수신됨에 따라 로그인 프로그램(214)은 제2메모리 영역(232)에 저장된 제2사용자 정보(URI)를 읽어와서, 제1사용자 정보(URI)와 제2사용자 정보(URI)를 비교한다(S140).
제1사용자 정보(URI)와 제2사용자 정보(URI)가 일치할 때(S150의 YES), 로그인 프로그램(214)은 인증(또는 일치)를 지시하는 메시지를 인증 프로그램(216)으로 전송한다. 따라서, 인증 프로그램(216)은 상기 메지시에 응답하여 컴퓨팅 장치 (200)에 자동 로그인한다(S155). 자동 로그인됨에 따라 바탕 화면이 디스플레이 장치(270)에서 디스플레이된다.
제1얼굴 패턴(FP1)과 제2얼굴 패턴(FP2)이 일치하지 않거나(S230 NO) 제1스마트폰 패턴(OP1)과 제2스마트폰 패턴(OP2)이 일치하지 않을 때(S235의 NO), 인증 프로그램(216)은 제1메모리 영역(230)에 저장된 제1사용자 정보(URI)를 로그인 프로그램(214)으로 전송하지 않는다(S145). 따라서 사용자는 컴퓨팅 장치(200)에 로그인할 수 없다.
또한, 제1사용자 정보(URI)와 제2사용자 정보(URI)가 일치하지 않을 때 (S150의 NO), 로그인 프로그램(214)은 불인증(또는 불일치)를 지시하는 메시지를 인증 프로그램(216)으로 전송한다. 따라서 인증 프로그램(216)은 컴퓨팅 장치(200)로의 로그인을 거부한다(S145).
도 4를 참조하면, 로그인 프로그램(214) 또는 인증 프로그램(216)은 로그인 GUI(214A)를 사용자에게 제공할 수 있다.
예컨대, 제1등록 단계에서 로그인 프로그램(214)에 의해 제공되는 로그인 GUI(214A)는 사용자 이름과 패스워드를 입력할 수 있는 UI들(user interfaces; 216-1과 216-3)와 저장(또는 등록)을 위한 UI(216-5)를 포함한다.
제2등록 단계에서 인증 프로그램(216)에 의해 제공되는 로그인 GUI(214A)는 사용자 이름과 패스워드를 입력할 수 있는 UI들(216-1과 216-3)와 저장(또는 저장)을 위한 UI(216-5)를 포함한다.
인증 단계 또는 자동 로그인 단계에서 인증 프로그램(216)에 의해 제공되는 로그인 GUI(214A)는 사용자 이름과 패스워드를 입력할 수 있는 UI들(216-1과 216-3)와 로그인을 위한 UI(216-5)를 포함한다.
인증 단계 또는 자동 로그인 단계에서, 인증 프로그램(214)은 로그인 프로그램(214)로부터 전송되고 인증(또는 일치)를 지시하는 메시지에 포함된 사용자 정보 (예컨대, 사용자 이름과 패스워드)를 UI들(216-1과 216-3)에 강제로 삽입한 후, 자동 로그인을 위해 UI(216-5)를 자동으로(또는 프로그램적으로) 클릭하게 할 수 있다. 따라서, 사용자가 UI들(216-1과 216-3)에 수동으로 사용자 정보를 입력하지 않고 UI(216-5)를 수동으로 클락하지 않다라도 인증 프로그램(214)에 의해 사용자는 컴퓨팅 장치(200)에 자동적으로 로그인할 수 있다.
도 5는 발명의 실시 예들에 따라 얼굴 인식을 이용하여 컴퓨팅 장치에 자동 로그인을 수행할 수 있는 컴퓨팅 시스템의 블록도를 나타낸다. 도 1과 도 5를 참조하면, 카메라(240)로부터 프로세서(210)로 전송되는 데이터와, 프로세서(210)로부터 메모리 컨트롤러(220)로 전송되는 데이터를 제외하면, 도 1에 도시된 컴퓨팅 시스템(100)의 구조와 도 5에 도시된 컴퓨팅 시스템(100)의 구조는 동일하다.
도 1, 도 2, 및 도 5를 참조하면, 제1등록 단계에서, 사용자가 제1입력 장치 (250)에 사용자 정보(URI)를 입력하면, 제2사용자 정보(URI)로 불리는 사용자 정보 (URI)는 입력 인터페이스(255)를 통해 로그인 프로그램(214)으로 전송된다.
로그인 프로그램(214)은 제2사용자 정보(URI)를 메모리 컨트롤러(220)를 통해 제2메모리 영역(232)에 저장(또는 등록)한다. 실시 예들에 따라, 로그인 프로그램(214)은 암호키를 이용하여 제2사용자 정보(URI)를 암호화하고, 암호화된 제2사용자 정보를 메모리 컨트롤러(220)를 통해 제2메모리 영역(232)에 저장할 수 있다.
로그인 프로그램(214)은, 인증 프로그램(216)으로부터 전송된 제1사용자 정보(URI)의 수신에 응답하여, 제2메모리 영역(232)에 저장된 암호화된 제2사용자 정보를 읽어오고, 암호화된 제2사용자 정보를 상기 암호키를 이용하여 복호화하고, 복호화된 제2사용자 정보(URI)와 제1사용자 정보(URI)를 비교하고, 그 비교 결과(예컨대, 성공 또는 실패)를 지시하는 메시지를 인증 프로그램(216)으로 전송할 수 있다.
제1등록 단계 이후에, 인증 프로그램(216)과 감시 프로그램(218)은 컴퓨팅 장치(200)의 프로세서(210)에 의해 컴퓨팅 장치(200)에 설치(또는 셋업)된다.
인증 프로그램(216)이 컴퓨팅 장치(200)에 설치(또는 셋업)된 후, 제2등록 단계에서 컴퓨팅 장치(200)가 부팅되거나 파워-온되면, OS(212)는 상기 부팅 또는 상기 파워-온을 감지하고, 로그인 프로그램(214)의 실행을 위해 로그인 프로그램 (214)를 호출한다.
로그인 프로그램(214)은 인증 프로그램(216)이 컴퓨팅 장치(200)에 설치되어 있는지를 확인(또는 판단)하고, 인증 프로그램(216)이 설치되어 있을 때, 로그인 프로그램(214)은 인증 프로그램(216)을 실행하기 위해 인증 프로그램(216)을 호출한다.
제2등록 단계에서, 사용자가 제1입력 장치(250)를 통해 제1사용자 인터페이스에 사용자 정보(URI)를 입력하면, 제1사용자 정보(URI)로 불리는 사용자 정보 (URI)는 입력 인터페이스(255)를 통해 로그인 프로그램(214) 대신에 인증 프로그램 (216)으로 전송(또는 입력)된다. 인증 프로그램(216)은 제1사용자 정보(URI)를 메모리 컨트롤러(220)를 통해 제1메모리 영역(230)에 저장(또는 등록)한다.
제2등록 단계에서, 사용자가 제2사용자 인터페이스를 조작하여 카메라(240)를 이용하여 사용자의 얼굴을 포함하는 피사체들을 촬영하면, 카메라(240)는 상기 피사체들을 포함하는 제1이미지(IG1)를 생성한다. 제1이미지(IG1)는 인증 프로그램 (216)으로 전송되고, 인증 프로그램(216)은 제1이미지(IG1)로부터 상기 사용자의 얼굴에 해당하는 제1얼굴 이미지(FI1)을 추출하고, 추출된 제1얼굴 이미지(FI1)를 메모리 컨트롤러(220)를 통해 제1메모리 영역(230)에 저장(또는 등록)한다.
제2등록 단계가 완료된 후, 인증 단계 또는 자동 로그인 단계에서, 컴퓨팅 장치(200)가 다시 부팅되거나 다시 파워-온되면, OS(212)는 상기 부팅 또는 상기 파워-온을 감지하고, 로그인 프로그램(214)을 실행시키기 위해 로그인 프로그램 (214)를 호출한다.
인증 단계 또는 자동 로그인 단계에서, 로그인 프로그램(214)은 인증 프로그램(216)이 컴퓨팅 장치(200)에 설치되어 있는지를 확인(또는 판단)하고, 인증 프로그램(216)이 설치되어 있을 때, 로그인 프로그램(214)은 인증 프로그램(216)을 실행시키기 위해 인증 프로그램(216)을 호출한다.
사용자가 제2사용자 인터페이스를 조작하여 카메라(240)를 이용하여 사용자의 얼굴을 포함하는 피사체들을 다시 촬영하면, 카메라(240)는 상기 피사체들을 포함하는 제2이미지(IGi, i=2)를 생성한다. 제2이미지(IG2)는 인증 프로그램(216)으로 전송되고, 인증 프로그램(216)은 제2이미지(IG2)로부터 상기 사용자의 얼굴에 해당하는 제2얼굴 이미지(FI2)을 추출한다.
제2얼굴 이미지(IG2)가 생성됨에 따라, 인증 프로그램(216)은 제1메모리 영역(230)에 저장된 제1얼굴 이미지(FI1)를 읽어와서, 제1얼굴 이미지(FI1)과 제2얼굴 이미지(FI2)을 비교한다.
제1얼굴 이미지(FI1)과 제2얼굴 이미지(FI2)이 일치할 때, 예컨대, 제1얼굴 이미지(FI1)에 포함된 특징들과 제2얼굴 이미지(FI2)에 포함된 특징들과의 유사도가 높을 때, 인증 프로그램(216)은 제1메모리 영역(230)에 저장된 제1사용자 정보 (URI)를 읽어와서 제1사용자 정보(URI)를 로그인 프로그램(214)으로 전송한다.
제1사용자 정보(URI)가 수신됨에 따라 로그인 프로그램(214)은 제2메모리 영역(232)에 저장된 제2사용자 정보(URI)를 읽어와서, 제1사용자 정보(URI)와 제2사용자 정보(URI)를 비교한다.
제1사용자 정보(URI)와 제2사용자 정보(URI)가 일치할 때, 로그인 프로그램 (214)은 인증(또는 일치) 또는 성공을 지시하는 메시지를 인증 프로그램(216)으로 전송한다. 인증 프로그램(216)은 상기 메지시에 응답하여 컴퓨팅 장치(200)에 자동 로그인한다.
제1얼굴 이미지(FI1)과 제2얼굴 이미지(FI2)이 일치하지 않을 때, 예컨대, 예컨대, 제1얼굴 이미지(FI1)에 포함된 특징들과 제2얼굴 이미지(FI2)에 포함된 특징들과의 유사도가 낮을 때, 인증 프로그램(216)은 제1메모리 영역(230)에 저장된 제1사용자 정보(URI)를 로그인 프로그램(214)으로 전송하지 않는다.
제1사용자 정보(URI)와 제2사용자 정보(URI)가 일치하지 않을 때, 로그인 프로그램(214)은 불인증(또는 불일치) 또는 실패를 지시하는 메시지를 인증 프로그램 (216)으로 전송한다. 따라서 인증 프로그램(216)은 컴퓨팅 장치(200)로의 로그인을 거부한다(S145). 즉, 사용자는 컴퓨팅 장치(200)에 로그인할 수 없다.
도 1 내지 도 5를 참조하여 설명된 얼굴 인식(또는 얼굴 패턴의 비교)에 기초하여 컴퓨팅 장치(200)에 자동 로그인할 수 있는 방법(또는 단계들)을 수행할 수 있는 컴퓨터 프로그램은, 컴퓨팅 장치(200)로 읽을 수 있는 저장 매체(예컨대, 메모리 장치)에 저장되고, 컴퓨팅 장치(200)에 의해 실행될 수 있다.
하드웨어(200 또는 210)와 결합되어 얼굴 인식에 기초하여 컴퓨팅 장치(200)에 자동 로그인하기 위해 저장 매체(예컨대, 메모리 장치)에 저장된 컴퓨터 프로그램은, 도 1 내지 도 5를 참조하여 설명된 얼굴 인식에 기초하여 자동 로그인 방법을 수행할 수 있다. 여기서 컴퓨터 프로그램은 애플리케이션 프로그램을 의미할 수 있다.
본 발명은 도면에 도시된 실시 예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시 예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 등록청구범위의 기술적 사상에 의해 정해져야 할 것이다.
100: 컴퓨팅 시스템
200: 컴퓨팅 장치
210: 프로세서
212: OS(operating system)
214: 로그인 프로그램
216: 인증 프로그램
218: 감시 프로그램
220: 메모리 컨트롤러
230: 제1메모리 영역
232: 제2메모리 영역
240: 카메라
250: 제1입력 장치, 키보드
255: 입력 인터페이스
260: 제2입력 장치, 컴퓨터 마우스
270: 출력 장치, 디스플레이 장치, 스피커

Claims (17)

  1. 컴퓨팅 장치에서 실행 중인 인증 프로그램이 상기 컴퓨팅 장치와 결합된 입력 장치를 통해 사용자에 의해 입력된 제1사용자 정보를 수신하여 상기 인증 프로그램에 의해 액세스되는 제1메모리 영역에 등록하는 단계;
    상기 인증 프로그램이 상기 컴퓨팅 장치와 결합된 카메라에 의해 촬영된 상기 사용자의 제1인증 이미지로부터 제1인증 패턴을 생성하고, 생성된 제1인증 패턴을 상기 제1메모리 영역에 등록하는 단계;
    상기 컴퓨팅 장치가 부팅된 후, 상기 컴퓨팅 장치에서 실행 중인 로그인 프로그램이 상기 인증 프로그램을 호출하는 단계;
    호출된 인증 프로그램이 상기 카메라에 의해 촬영된 상기 사용자의 제2인증 이미지로부터 제2인증 패턴을 생성하는 단계;
    상기 인증 프로그램이 상기 제2인증 패턴과 상기 제1메모리 영역으로부터 전송된 상기 제1인증 패턴을 비교하는 단계;
    상기 제1인증 패턴과 상기 제2인증 패턴이 일치할 때, 상기 인증 프로그램이 상기 제1메모리 영역으로부터 전송된 상기 제1사용자 정보를 상기 로그인 프로그램으로 전송하는 단계;
    상기 로그인 프로그램이 상기 제1사용자 정보를 수신한 후, 상기 로그인 프로그램이 상기 로그인 프로그램에 의해서 액세스 가능한 제2메모리 영역에 저장된 제2사용자 정보를 읽어와서, 상기 제1사용자 정보와 상기 제2사용자 정보를 비교하는 단계; 및
    상기 제1사용자 정보와 상기 제2사용자 정보가 일치할 때, 상기 인증 프로그램이 상기 로그인 프로그램으로부터 전송된 제1메시지에 따라 상기 컴퓨팅 장치에 자동 로그인하는 단계를 포함하는 로그인 방법.
  2. 제1항에 있어서,
    상기 제1인증 이미지는 상기 사용자의 제1얼굴 이미지이고,
    상기 제2인증 이미지는 상기 사용자의 제2얼굴 이미지인 로그인 방법.
  3. 제1항에 있어서,
    상기 제1인증 이미지는 상기 사용자의 제1얼굴 이미지와 제1대상 이미지를 포함하고,
    상기 제2인증 이미지는 상기 사용자의 제2얼굴 이미지와 제2대상 이미지를 포함하고,
    상기 제1사용자 정보를 상기 로그인 프로그램으로 전송하는 단계는,
    상기 제1얼굴 이미지에 대한 제1얼굴 패턴과 상기 제2얼굴 이미지에 대한 제2얼굴 패턴이 일치하고, 상기 제1대상 이미지에 대한 제1대상 패턴과 상기 제2대상 이미지에 대한 제2대상 패턴이 일치할 때, 상기 인증 프로그램이 상기 제1메모리 영역으로부터 리드된 상기 제1사용자 정보를 상기 로그인 프로그램으로 전송하는 로그인 방법.
  4. 제1항에 있어서,
    상기 컴퓨팅 장치에서 실행 중인 감시 프로그램이 자동 로그인 후 미리 설정된 시간 내에 상기 입력 장치로부터 입력 이벤트가 발생하는지를 감시하는 단계; 및
    상기 미리 설정된 시간 내에 상기 입력 이벤트가 발생하지 않을 때, 상기 감시 프로그램으로부터 전송된 제2메시지에 따라 상기 로그인 프로그램이 상기 컴퓨팅 장치를 로그아웃하거나 화면 잠금하는 단계를 더 포함하는 로그인 방법.
  5. 제4항에 있어서,
    상기 로그인 프로그램의 확장자는 dll이고,
    상기 감시 프로그램의 확장자는 exe인 로그인 방법.
  6. 제4항에 있어서,
    상기 로그인 프로그램이 상기 컴퓨팅 장치를 로그아웃하거나 화면 잠금을 한 후, 상기 로그인 프로그램이 상기 인증 프로그램을 다시 호출하는 단계;
    다시 호출된 인증 프로그램이 상기 카메라에 의해 다시 촬영된 상기 사용자의 제3인증 이미지로부터 제3인증 패턴을 생성하는 단계;
    상기 인증 프로그램이 상기 제3인증 패턴과 상기 제1메모리 영역으로부터 리드된 상기 제1인증 패턴을 비교하는 단계;
    상기 제1인증 패턴과 상기 제3인증 패턴이 일치할 때, 상기 인증 프로그램이 상기 제1메모리 영역으로부터 다시 리드된 상기 제1사용자 정보를 상기 로그인 프로그램으로 전송하는 단계;
    상기 로그인 프로그램이 상기 제1사용자 정보를 수신한 후, 상기 로그인 프로그램이 상기 제2메모리 영역에 저장된 상기 제2사용자 정보를 다시 읽어와서, 상기 제1사용자 정보와 상기 제2사용자 정보를 비교하는 단계; 및
    상기 제1사용자 정보와 상기 제2사용자 정보가 일치할 때, 상기 인증 프로그램이 상기 로그인 프로그램으로부터 다시 전송된 상기 제1메시지에 따라 상기 컴퓨팅 장치에 다시 로그인하는 단계를 더 포함하는 로그인 방법.
  7. 제1항에 있어서, 상기 제1사용자 정보와 상기 제2사용자 정보를 비교하는 단계는,
    상기 인증 프로그램이 암호화된 상기 제2사용자 정보를 상기 제2메모리 영역으로부터 읽어와서 복호화하는 단계; 및
    상기 제1사용자 정보와 복호화된 상기 제2사용자 정보를 비교하는 단계를 포함하는 로그인 방법.
  8. 제1항에 있어서,
    상기 로그인 프로그램은 GINA(graphical identification and authentication) 모듈인 로그인 방법.
  9. 제1항의 상기 로그인 방법을 수행할 수 있는 컴퓨터 프로그램을 기록한 상기 컴퓨팅 장치로 읽을 수 있는 기록 매체.
  10. 컴퓨팅 장치와 결합되어 상기 컴퓨팅 장치에 자동 로그인을 위해 데이터 저장 장치에 저장된 인증 프로그램에 있어서,
    등록 단계에서, 상기 인증 프로그램이 상기 컴퓨팅 장치와 결합된 입력 장치를 통해 사용자에 의해 입력된 제1사용자 정보를 제1메모리 영역에 등록하는 단계;
    상기 등록 단계에서, 상기 인증 프로그램이 상기 컴퓨팅 장치와 결합된 카메라에 의해 촬영된 상기 사용자의 제1얼굴 이미지를 상기 제1메모리 영역에 등록하는 단계;
    인증 단계에서, 상기 컴퓨팅 장치가 부팅된 후, 상기 인증 프로그램이 상기 컴퓨팅 장치에서 실행 중인 로그인 프로그램에 의해 실행되는 단계;
    상기 인증 단계에서, 상기 인증 프로그램이 상기 카메라에 의해 촬영된 상기 사용자의 제2얼굴 이미지를 수신하는 단계;
    상기 인증 프로그램이 상기 제1메모리 영역으로부터 상기 제1얼굴 이미지를 읽어와서 상기 제1얼굴 이미지와 상기 제2얼굴 이미지를 비교하는 단계;
    상기 제1얼굴 이미지와 상기 제2얼굴 이미지가 일치할 때, 상기 인증 프로그램이 상기 제1메모리 영역으로부터 읽혀진 상기 제1사용자 정보를 상기 로그인 프로그램으로 전송하는 단계; 및
    상기 인증 프로그램이 상기 로그인 프로그램으로부터 자동 로그인을 지시하는 메시지를 수신하고 상기 메시지에 응답하여 상기 컴퓨팅 장치에 자동 로그인하는 단계를 포함하는 데이터 저장 장치에 저장된 인증 프로그램.
  11. 제10항에 있어서,
    상기 메시지는 제2메모리 영역으로부터 읽혀진 제2사용자 정보와 상기 제1사용자 정보가 일치할 때 상기 로그인 프로그램에 의해 생성된 데이터 저장 장치에 저장된 인증 프로그램.
  12. 제10항에 있어서,
    상기 로그인 프로그램에 의해 상기 컴퓨팅 장치가 로그아웃된 후,
    재인증 단계에서, 상기 인증 프로그램이 상기 로그인 프로그램에 의해 재실행되는 단계;
    상기 재인증 단계에서, 재실행된 인증 프로그램이 상기 카메라에 의해 촬영된 상기 사용자의 제3얼굴 이미지를 수신하는 단계;
    상기 재실행된 인증 프로그램이 상기 제1메모리 영역으로부터 상기 제1얼굴 이미지를 읽어와서 상기 제1얼굴 이미지와 상기 제3얼굴 이미지를 비교하는 단계;
    상기 제1얼굴 이미지와 상기 제3얼굴 이미지가 일치할 때, 상기 재실행된 인증 프로그램이 상기 제1메모리 영역으로부터 다시 읽혀진 상기 제1사용자 정보를 상기 로그인 프로그램으로 전송하는 단계; 및
    상기 재실행된 인증 프로그램이 상기 로그인 프로그램으로부터 자동 로그인을 지시하는 메시지를 다시 수신하고 다시 수신된 메시지에 응답하여 상기 컴퓨팅 장치에 자동 로그인하는 단계를 포함하는 데이터 저장 장치에 저장된 인증 프로그램.
  13. 컴퓨팅 장치와 결합되어 상기 컴퓨팅 장치에 자동 로그인 작동을 위해 데이터 저장 장치에 저장된 자동 로그인 관리 프로그램에 있어서,
    인증 프로그램과 감시 프로그램을 포함하는 상기 자동 로그인 관리 프로그램 이 상기 컴퓨팅 장치에 셋업되는 단계;
    상기 인증 프로그램이 사용자의 제1사용자 정보를 수신하여 제1메모리 영역에 등록하는 단계;
    상기 인증 프로그램이 상기 사용자의 제1얼굴 이미지를 수신하여 상기 제1메모리 영역에 등록하는 단계;
    로그인 프로그램에 의해 상기 인증 프로그램이 호출되는 단계;
    상기 인증 프로그램이 상기 사용자의 제2얼굴 이미지를 수신하는 단계;
    상기 인증 프로그램이 상기 제1메모리 영역으로부터 상기 제1얼굴 이미지를 읽어와서 상기 제1얼굴 이미지와 상기 제2얼굴 이미지를 비교하는 단계;
    상기 제1얼굴 이미지와 상기 제2얼굴 이미지가 일치할 때, 상기 인증 프로그램이 상기 제1메모리 영역으로부터 읽혀진 상기 제1사용자 정보를 상기 로그인 프로그램으로 전송하는 단계;
    상기 인증 프로그램이 상기 로그인 프로그램으로부터 자동 로그인을 지시하는 메시지를 수신하고 상기 메시지에 응답하여 상기 컴퓨팅 장치에 상기 자동 로그인 작동을 수행하는 단계; 및
    상기 감시 프로그램이 미리 정해진 시간 내에 입력 이벤트가 발생하는지를 감시하는 단계를 포함하는 데이터 저장 장치에 저장된 자동 로그인 관리 프로그램.
  14. 제13항에 있어서,
    상기 미리 정해진 시간 내에 상기 입력 이벤트가 발생할 때, 상기 감시 프로그램은 로그인의 유지를 지시하는 제1메시지를 상기 로그인 프로그램으로 전송하고,
    상기 미리 정해진 시간 내에 상기 입력 이벤트가 발생하지 않을 때, 상기 감시 프로그램은 로그아웃 또는 화면 잠금을 지시하는 제2메시지를 상기 로그인 프로그램으로 전송하는 데이터 저장 장치에 저장된 자동 로그인 관리 프로그램.
  15. 제13항에 있어서,
    상기 인증 프로그램의 확장자는 dll이고,
    상기 감시 프로그램의 확장자는 exe은 데이터 저장 장치에 저장된 자동 로그인 관리 프로그램.
  16. 컴퓨팅 장치에서 실행되는 로그인 프로그램, 인증 프로그램, 및 감시 프로그램을 이용하여 사용자를 상기 컴퓨팅 장치에 자동 로그인하는 서비스 제공 방법에 있어서,
    상기 로그인 프로그램을 이용하여 상기 사용자의 제2사용자 정보를 제2메모리 영역에 저장하는 단계;
    상기 인증 프로그램을 이용하여 상기 사용자의 제1사용자 정보를 제1메모리 영역에 저장하는 단계;
    상기 인증 프로그램을 이용하여 상기 사용자의 제1얼굴 이미지를 상기 제1메모리 영역에 저장하는 단계;
    상기 컴퓨팅 장치가 부팅된 후, 상기 로그인 프로그램이 상기 인증 프로그램을 호출하는 단계;
    상기 인증 프로그램이 상기 사용자의 제2얼굴 이미지를 수신하는 단계;
    상기 인증 프로그램이 상기 제1메모리 영역으로부터 상기 제1얼굴 이미지를 읽어와서, 상기 제1얼굴 이미지와 상기 제2얼굴 이미지를 비교하는 단계;
    상기 제1얼굴 이미지와 상기 제2얼굴 이미지가 일치할 때, 상기 인증 프로그램이 상기 제1메모리 영역으로부터 상기 제1사용자 정보를 읽어와서 상기 제1사용자 정보를 상기 로그인 프로그램으로 전송하는 단계;
    상기 로그인 프로그램이 상기 제1사용자 정보를 수신한 후, 상기 로그인 프로그램이 상기 제2메모리 영역으로부터 상기 제2사용자 정보를 읽어와서, 상기 제1사용자 정보와 상기 제2사용자 정보를 비교하는 단계;
    상기 제1사용자 정보와 상기 제2사용자 정보가 일치할 때, 상기 로그인 프로그램이 제1메시지를 상기 인증 프로그램으로 전송하는 단계; 및
    상기 인증 프로그램이 상기 제1메시지에 따라 상기 사용자를 상기 컴퓨팅 장치에 자동 로그인하는 단계를 포함하는 서비스 제공 방법.
  17. 제16항에 있어서,
    상기 자동 로그인 후, 상기 감시 프로그램은 미리 정해진 시간 내에 입력 이벤트가 발생하는지를 감시하는 단계;
    상기 미리 정해진 시간 내에 상기 입력 이벤트가 발생하지 않을 때, 상기 감시 프로그램이 제2메시지를 상기 로그인 프로그램으로 전송하는 단계; 및
    상기 로그인 프로그램이 상기 제2메시지에 따라 로그아웃 또는 화면 잠금을 수행하는 단계를 더 포함하는 서비스 제공 방법.
KR1020180080248A 2018-07-10 2018-07-10 얼굴 인식을 이용한 컴퓨팅 장치에 대한 로그인 KR102038551B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180080248A KR102038551B1 (ko) 2018-07-10 2018-07-10 얼굴 인식을 이용한 컴퓨팅 장치에 대한 로그인

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180080248A KR102038551B1 (ko) 2018-07-10 2018-07-10 얼굴 인식을 이용한 컴퓨팅 장치에 대한 로그인

Publications (1)

Publication Number Publication Date
KR102038551B1 true KR102038551B1 (ko) 2019-11-26

Family

ID=68731220

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180080248A KR102038551B1 (ko) 2018-07-10 2018-07-10 얼굴 인식을 이용한 컴퓨팅 장치에 대한 로그인

Country Status (1)

Country Link
KR (1) KR102038551B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20200302039A1 (en) * 2019-03-21 2020-09-24 Alibaba Group Holding Limited Authentication verification using soft biometric traits

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020017409A (ko) * 2000-08-30 2002-03-07 서평원 암호에 따른 운용자 작업 제한방법
KR20110028821A (ko) * 2009-09-14 2011-03-22 조영미 화면제어기를 이용한 사용자단말 사용제한 통지 및 승인 서비스 시스템 및 그 방법
KR20140075756A (ko) 2011-09-28 2014-06-19 구글 인코포레이티드 얼굴 인식을 기초하여 컴퓨팅 장치에 대한 로그인

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020017409A (ko) * 2000-08-30 2002-03-07 서평원 암호에 따른 운용자 작업 제한방법
KR20110028821A (ko) * 2009-09-14 2011-03-22 조영미 화면제어기를 이용한 사용자단말 사용제한 통지 및 승인 서비스 시스템 및 그 방법
KR20140075756A (ko) 2011-09-28 2014-06-19 구글 인코포레이티드 얼굴 인식을 기초하여 컴퓨팅 장치에 대한 로그인

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20200302039A1 (en) * 2019-03-21 2020-09-24 Alibaba Group Holding Limited Authentication verification using soft biometric traits
US10885171B2 (en) * 2019-03-21 2021-01-05 Advanced New Technologies Co., Ltd. Authentication verification using soft biometric traits
US10922399B2 (en) * 2019-03-21 2021-02-16 Advanced New Technologies Co., Ltd. Authentication verification using soft biometric traits

Similar Documents

Publication Publication Date Title
EP3308312B1 (en) Secure biometric data capture, processing and management
KR102132507B1 (ko) 생체 인식 데이터에 기초한 리소스 관리 기법
US9531710B2 (en) Behavioral authentication system using a biometric fingerprint sensor and user behavior for authentication
US10063541B2 (en) User authentication method and electronic device performing user authentication
EP2911076A1 (en) Biometric authentication
US10951609B2 (en) System to effectively validate the authentication of OTP usage
EP3312759B1 (en) Secure element (se), a method of operating the se, and an electronic device including the se
US11101990B2 (en) Default account authentication
US20110206244A1 (en) Systems and methods for enhanced biometric security
US10013540B2 (en) Authentication based on body movement
KR20140077838A (ko) 정보 처리 장치, 로크 실행 방법 및 로크 실행 시스템
WO2017071498A1 (zh) 一种身份验证方法和装置
US20170126635A1 (en) Controlling Access To Resource Functions At A Control Point Of The Resource Via A User Device
KR102038551B1 (ko) 얼굴 인식을 이용한 컴퓨팅 장치에 대한 로그인
US10621431B2 (en) Camera that uses light from plural light sources disposed on a device
US10262165B2 (en) Authentication of a smart pen and computing device
EP3304391B1 (en) Controlling access to resource functions at a control point of the resource via a user device
WO2016165537A1 (zh) 一种控制智能终端的方法及控制智能终端的装置
KR102248132B1 (ko) 생체정보를 이용한 로그인방법, 장치 및 프로그램
US20210264006A1 (en) Dynamic biometric updating
KR20190052405A (ko) 스마트폰 인증 기능을 이용한 컴퓨터 보안 시스템 및 방법
US11394707B2 (en) Clamshell device authentication operations
CN113918906A (zh) 认证数据传输方法与***
US20200057845A1 (en) User authentication for protected actions
KR20210051517A (ko) 통합 식별 정보를 이용하여 복수의 프로그램에 로그인을 수행하는 전자 장치의 동작 방법

Legal Events

Date Code Title Description
GRNT Written decision to grant