KR102574772B1 - 생체 데이터를 등록 및 인증하기 위한 방법 및 그 전자 장치 - Google Patents

생체 데이터를 등록 및 인증하기 위한 방법 및 그 전자 장치 Download PDF

Info

Publication number
KR102574772B1
KR102574772B1 KR1020160168640A KR20160168640A KR102574772B1 KR 102574772 B1 KR102574772 B1 KR 102574772B1 KR 1020160168640 A KR1020160168640 A KR 1020160168640A KR 20160168640 A KR20160168640 A KR 20160168640A KR 102574772 B1 KR102574772 B1 KR 102574772B1
Authority
KR
South Korea
Prior art keywords
fingerprint
electronic device
touch
sensor
processor
Prior art date
Application number
KR1020160168640A
Other languages
English (en)
Other versions
KR20180067179A (ko
Inventor
이해창
박재형
오지웅
윤필주
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020160168640A priority Critical patent/KR102574772B1/ko
Priority to PCT/KR2017/013203 priority patent/WO2018110847A1/ko
Priority to US16/469,002 priority patent/US11023571B2/en
Publication of KR20180067179A publication Critical patent/KR20180067179A/ko
Application granted granted Critical
Publication of KR102574772B1 publication Critical patent/KR102574772B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/45—Structures or tools for the administration of authentication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/24—Character recognition characterised by the processing or recognition method
    • G06V30/242—Division of the character sequences into groups prior to recognition; Selection of dictionaries
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12—Fingerprints or palmprints
    • G06V40/13—Sensors therefor
    • G06V40/1318—Sensors therefor using electro-optical elements or layers, e.g. electroluminescent sensing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12—Fingerprints or palmprints
    • G06V40/1365—Matching; Classification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12—Fingerprints or palmprints
    • G06V40/1365—Matching; Classification
    • G06V40/1376—Matching features related to ridge properties or fingerprint texture
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/50—Maintenance of biometric data or enrolment thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)

Abstract

본 발명은 전자 장치에서 생체 데이터를 등록 및 인증하기 위한 것으로, 전자 장치는, 터치 센서를 포함하는 디스플레이, 상기 디스플레이의 표시 영역 중 적어도 일부 영역을 통하여 지문 데이터를 획득하기 위한 지문 센서, 및 프로세서를 포함한다. 여기서, 상기 프로세서는, 사용자의 지문 등록을 위한 제1 사용자 입력에 반응하여, 상기 제1 사용자 입력으로부터 상기 터치 센서를 이용하여 제1 터치 정보를 획득하고, 상기 지문 센서를 이용하여 제1 지문 데이터를 획득하고, 상기 제1 터치 정보에 기초하여 상기 제1 지문 데이터를 지문 정보로 등록하고, 상기 등록하는 동작은 상기 제1 터치 정보에 기초하여 상기 제1 지문 데이터를 분류하는 동작을 포함하고, 상기 사용자의 지문 인증을 위한 제2 사용자 입력에 반응하여, 상기 제2 사용자 입력으로부터 상기 터치 센서를 이용하여 제2 터치 정보를 획득하고, 상기 지문 센서를 이용하여 제2 지문 데이터를 획득하고, 상기 제2 터치 정보에 기초하여 상기 지문 정보 중 비교를 위한 후보군을 선택하고, 상기 후보군에 포함되는 지문 데이터를 상기 제2 지문 데이터와 비교하도록 설정될 수 있다.

Description

생체 데이터를 등록 및 인증하기 위한 방법 및 그 전자 장치{METHOD FOR REGSTERING AND AUTHENTICATING BIO DATA AND AN ELECTRONIC DEVICE THEREOF}
본 발명의 다양한 실시예는 생체 데이터를 등록 및 인증하기 위한 방법 및 그 전자 장치에 관한 것이다.
스마트 폰과 같은 휴대용 전자 장치가 점차 고성능화됨에 따라, 전자 장치를 통해 다양한 서비스들이 제공되고 있다. 구체적으로, 전화 통화, 문자 발신 등과 같은 기본적인 서비스에 더하여, 게임, 메신저, 문서 편집, 이미지/동영상 재생 및 편집 등 보다 복잡한 서비스들로 서비스 영역이 확장되고 있다. 전자 장치를 통해 다양한 서비스들이 제공됨에 따라, 단순한 데이터의 입출력 및 처리 외 다양한 기능들이 요구된다. 특히, 모바일 결제 서비스 등 보안(security)을 요구하는 서비스도 제공될 수 있으며, 신뢰성 있는 보안을 보장하기 위해 생체 데이터(예: 지문, 홍채 등)가 활용되기도 한다.
예를 들어, 지문 데이터의 경우, 지문 센서를 통해 획득될 수 있다. 일반적으로, 전자 장치에 내재된 지문 센서의 크기는 손가락의 사이즈에 비해 상대적으로 작다. 따라서, 전자 장치에 사용자의 온전한 지문 정보를 등록하기 위해서, 여러 번 반복하여 지문을 획득해야 하는 번거로움이 존재한다. 그리고, 지문을 이용한 사용자 인증 시, 등록된 지문들과의 유사성이 검사된다. 이때, 등록된 지문들의 개수가 많을수록, 인증을 위한 전력 소모 및 소요 시간은 증가할 수 있다.
본 발명의 다양한 실시예는 생체(bio) 데이터를 효과적으로 인증하기 위한 방법 및 그 전자 장치를 제공한다.
본 발명의 다양한 실시예는 인증의 편의성을 고려하여 지문 데이터를 저장하기 위한 방법 및 그 전자 장치를 제공한다.
본 발명의 다양한 실시예는 생체 정보의 인증 시 검사를 위한 후보 데이터를 줄이기 위한 방법 및 그 전자 장치를 제공한다.
본 발명의 다양한 실시예는 지문 정보의 등록 시 터치 정보를 함께 저장하기 위한 방법 및 그 전자 장치를 제공한다.
본 발명의 다양한 실시예는 터치 정보에 기초하여 지문 데이터를 분류하기 위한 방법 및 그 전자 장치를 제공한다.
본 발명의 다양한 실시예는 터치 정보에 기초하여 지문 인증을 위한 지문 데이터의 후보군을 결정하기 위한 방법 및 그 전자 장치를 제공한다.
본 발명의 다양한 실시예에 따르면, 전자 장치는, 터치 센서를 포함하는 디스플레이, 상기 디스플레이의 표시 영역 중 적어도 일부 영역을 통하여 지문 데이터를 획득하기 위한 지문 센서, 및 프로세서를 포함한다. 여기서, 상기 프로세서는, 사용자의 지문 등록을 위한 제1 사용자 입력에 반응하여, 상기 제1 사용자 입력으로부터 상기 터치 센서를 이용하여 제1 터치 정보를 획득하고, 상기 지문 센서를 이용하여 제1 지문 데이터를 획득하고, 상기 제1 터치 정보에 기초하여 상기 제1 지문 데이터를 지문 정보로 등록하고, 상기 등록하는 동작은 상기 제1 터치 정보에 기초하여 상기 제1 지문 데이터를 분류하는 동작을 포함하고, 상기 사용자의 지문 인증을 위한 제2 사용자 입력에 반응하여, 상기 제2 사용자 입력으로부터 상기 터치 센서를 이용하여 제2 터치 정보를 획득하고, 상기 지문 센서를 이용하여 제2 지문 데이터를 획득하고, 상기 제2 터치 정보에 기초하여 상기 지문 정보 중 비교를 위한 후보군을 선택하고, 상기 후보군에 포함되는 지문 데이터를 상기 제2 지문 데이터와 비교하도록 설정될 수 있다.
본 발명의 다양한 실시예에 따르면, 전자 장치는, 터치 센서를 포함하는 디스플레이, 상기 디스플레이의 표시 영역 중 적어도 일부 영역을 통하여 지문 데이터를 획득하기 위한 지문 센서, 및 프로세서를 포함한다. 여기서, 상기 프로세서는, 지문 등록을 위해 발생하는 터치 입력에 대한 정보를 저장하고, 상기 터치 입력에 대한 정보를 이용하여 지문 인증 시 일치 여부 검사를 위한 후보군을 결정하도록 설정된다.
본 발명의 다양한 실시예에 따르면, 전자 장치는, 컨텐트를 표시하기 위한 표시 영역에 터치 센서를 포함하는 디스플레이, 상기 표시 영역의 적어도 일부 영역에 형성된 지문 센서, 및 프로세서를 포함한다. 여기서, 상기 프로세서는, 상기 표시 영역의 적어도 일부 영역을 통해 하나 이상의 사용자 입력들을 획득하고, 상기 획득하는 동작은 상기 지문 센서를 이용하여 상기 하나 이상의 사용자 입력들에 대한 하나 이상의 지문 데이터 및 상기 사용자 입력들에 대한 하나 이상의 터치 정보를 획득하는 동작을 포함하고, 상기 하나 이상의 터치 정보 및 상기 하나 이상의 지문 데이터를 상기 사용자에 대응하는 하나 이상의 지문 정보로 등록하도록 설정될 수 있다.
본 발명의 다양한 실시예에 따르면, 전자 장치의 동작 방법은, 터치 센서 및 표시 영역 중 적어도 일부 영역을 통하여 지문 데이터를 획득하기 위한 지문 센서를 포함하는 디스플레이를 통해, 지문 등록을 위해 발생하는 터치 입력에 대한 정보를 저장하는 동작, 및 상기 터치 입력에 대한 정보를 이용하여 지문 인증 시 일치 여부 검사를 위한 후보군을 결정하는 동작을 포함한다.
본 발명의 다양한 실시예에 따르면, 비-일시적 컴퓨터 판독 가능한 기록 매체(non-transitory computer readable medium)에 포함된 복수의 명령어들은, 프로세서에 의해 실행되면, 표시 영역 중 적어도 일부 영역을 통하여 지문 데이터를 획득하기 위한 지문 센서가 설치된 디스플레이에서 지문 등록을 위해 발생하는 터치 입력에 대한 정보를 저장하는 동작, 및 상기 터치 입력에 대한 정보를 이용하여 지문 인증 시 일치 여부 검사를 위한 후보군을 결정하는 동작을 상기 프로세서가 수행하도록 설정된다.
다양한 실시예에 따른 방법 및 그 전자 장치는, 지문 등록 시 지문 데이터 및 터치 정보를 함께 저장함으로써, 인증을 위해 검사될 지문 데이터의 후보군을 제한할 수 있다. 이에 따라, 지문 인식 시, 매칭 알고리즘의 속도가 향상될 수 있다.
도 1은 본 발명의 다양한 실시예에서의 네트워크 환경 내의 전자 장치를 도시한다.
도 2는 본 발명의 다양한 실시예에 따른 전자 장치의 블록도를 도시한다.
도 3은 본 발명의 다양한 실시예에 따른 프로그램 모듈의 블록도를 도시한다.
도 4a는 본 발명의 다양한 실시예에 따른 전자 장치의 기능적 구성을 도시한다.
도 4b 및 도 4c는 본 발명의 다양한 실시예에 따른 전자 장치에서 디스플레이 및 생체 센서의 배치의 예들을 도시한다.
도 4d는 본 발명의 다양한 실시예에 따른 전자 장치에서 디스플레이 및 생체 센서의 결합 구조의 예를 도시한다.
도 5a는 본 발명의 다양한 실시예에 따른 전자 장치의 다른 기능적 구성을 도시한다.
도 5b는 본 발명의 다양한 실시예에 따른 전자 장치의 또 다른 기능적 구성을 도시한다.
도 6a 내지 도 6c는 본 발명의 다양한 실시예들에 따른 전자 장치에서 지문 인식을 위한 지문 센서의 예들을 도시한다.
도 7a 및 도 7b는 본 발명의 다양한 실시예들에 따른 전자 장치에서 지문 센서의 설치 예들을 도시한다.
도 8은 본 발명의 다양한 실시예에 따른 전자 장치에서 지문을 등록 및 인증하기 위한 흐름도를 도시한다.
도 9a는 본 발명의 다양한 실시예에 따른 전자 장치에서 지문을 등록하기 위한 흐름도를 도시한다.
도 9b는 본 발명의 다양한 실시예에 따른 전자 장치에서 터치 입력에 따른 측정값 변화를 도시한다.
도 10a는 본 발명의 다양한 실시예에 따른 전자 장치에서 터치 정보에 기초하여 지문 데이터를 저장하기 위한 흐름도를 도시한다.
도 10b는 본 발명의 다양한 실시예에 따른 전자 장치에서 터치 정보에 따른 지문 데이터 분류의 예를 도시한다.
도 10c는 본 발명의 다양한 실시예에 따른 전자 장치에서 터치 정보에 따른 지문 데이터 분류의 다른 예를 도시한다.
도 10d는 본 발명의 다양한 실시예에 따른 전자 장치에서 터치 정보에 따른 지문 데이터 분류의 또 다른 예를 도시한다.
도 11은 본 발명의 다양한 실시예에 따른 전자 장치에서 터치 정보에 기초하여 지문 데이터를 보상하기 위한 흐름도를 도시한다.
도 12는 본 발명의 다양한 실시예에 따른 전자 장치에서 터치 정보를 이용하여 인증을 수행하기 위한 흐름도를 도시한다.
도 13은 본 발명의 다양한 실시예에 따른 전자 장치에서 터치 정보를 이용하여 인증을 수행하기 위한 다른 흐름도를 도시한다.
도 14는 본 발명의 다양한 실시예에 따른 전자 장치에서 지문을 등록 및 인증하기 위한 또 다른 흐름도를 도시한다.
이하, 본 문서의 다양한 실시예들이 첨부된 도면을 참조하여 기재된다. 실시예 및 이에 사용된 용어들은 본 문서에 기재된 기술을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 해당 실시예의 다양한 변경, 균등물, 및/또는 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다. 본 문서에서, "A 또는 B" 또는 "A 및/또는 B 중 적어도 하나" 등의 표현은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. "제1," "제2," "첫째," 또는 "둘째,"등의 표현들은 해당 구성요소들을, 순서 또는 중요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다. 어떤(예: 제1) 구성요소가 다른(예: 제2) 구성요소에 "(기능적으로 또는 통신적으로) 연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 어떤 구성요소가 다른 구성요소에 직접적으로 연결되거나, 다른 구성요소(예: 제 3 구성요소)를 통하여 연결될 수 있다.
본 문서에서, "~하도록 구성된(또는 설정된)(configured to)"은 상황에 따라, 예를 들면, 하드웨어적 또는 소프트웨어적으로 "~에 적합한," "~하는 능력을 가지는," "~하도록 변경된," "~하도록 만들어진," "~를 할 수 있는," 또는 "~하도록 설계된"과 상호 호환적으로(interchangeably) 사용될 수 있다. 어떤 상황에서는, "~하도록 구성된 장치"라는 표현은, 그 장치가 다른 장치 또는 부품들과 함께 "~할 수 있는" 것을 의미할 수 있다. 예를 들면, 문구 "A, B, 및 C를 수행하도록 구성된(또는 설정된) 프로세서"는 해당 동작을 수행하기 위한 전용 프로세서(예: 임베디드 프로세서), 또는 메모리 장치에 저장된 하나 이상의 소프트웨어 프로그램들을 실행함으로써, 해당 동작들을 수행할 수 있는 범용 프로세서(예: CPU(centural processing unit) 또는 AP(application processor))를 의미할 수 있다.
본 문서의 다양한 실시예들에 따른 전자 장치는, 예를 들면, 스마트폰, 태블릿 PC, 이동 전화기, 영상 전화기, 전자책 리더기, 데스크탑 PC, 랩탑 PC, 넷북 컴퓨터, 워크스테이션, 서버, PDA(personal data assistant), PMP(portable multimedia player), MP3(Motion Picture Experts Group-1 audio layer-3) 플레이어, 의료기기, 카메라, 또는 웨어러블 장치 중 적어도 하나를 포함할 수 있다. 웨어러블 장치는 액세서리형(예: 시계, 반지, 팔찌, 발찌, 목걸이, 안경, 콘택트 렌즈, 또는 머리 착용형 장치(head-mounted-device, HMD), 직물 또는 의류 일체형(예: 전자 의복), 신체 부착형(예: 스킨 패드 또는 문신), 또는 생체 이식형 회로 중 적어도 하나를 포함할 수 있다. 어떤 실시예들에서, 전자 장치는, 예를 들면, 텔레비전, DVD(digital video disk) 플레이어, 오디오, 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기, 셋톱 박스, 홈 오토매이션 컨트롤 패널, 보안 컨트롤 패널, 미디어 박스(예: 삼성 HomeSyncTM, 애플TVTM, 또는 구글 TVTM), 게임 콘솔(예: XboxTM, PlayStationTM), 전자 사전, 전자 키, 캠코더, 또는 전자 액자 중 적어도 하나를 포함할 수 있다.
다른 실시예에서, 전자 장치는, 각종 의료기기(예: 각종 휴대용 의료측정기기(혈당 측정기, 심박 측정기, 혈압 측정기, 또는 체온 측정기 등), MRA(magnetic resonance angiography), MRI(magnetic resonance imaging), CT(computed tomography), 촬영기, 또는 초음파기 등), 네비게이션 장치, 위성 항법 시스템(GNSS(global navigation satellite system)), EDR(event data recorder), FDR(flight data recorder), 자동차 인포테인먼트 장치, 선박용 전자 장비(예: 선박용 항법 장치, 자이로 콤파스 등), 항공 전자기기(avionics), 보안 기기, 차량용 헤드 유닛(head unit), 산업용 또는 가정용 로봇, 드론(drone), 금융 기관의 ATM(automatic telling machine), 상점의 POS(point of sales), 또는 사물 인터넷 장치(예: 전구, 각종 센서, 스프링클러 장치, 화재 경보기, 온도조절기, 가로등, 토스터, 운동기구, 온수탱크, 히터, 보일러 등) 중 적어도 하나를 포함할 수 있다. 어떤 실시예에 따르면, 전자 장치는 가구, 건물/구조물 또는 자동차의 일부, 전자 보드(electronic board), 전자 사인 수신 장치(electronic signature receiving device), 프로젝터, 또는 각종 계측 기기(예: 수도, 전기, 가스, 또는 전파 계측 기기 등) 중 적어도 하나를 포함할 수 있다. 다양한 실시예에서, 전자 장치는 플렉서블하거나, 또는 전술한 다양한 장치들 중 둘 이상의 조합일 수 있다. 본 문서의 실시예에 따른 전자 장치는 전술한 기기들에 한정되지 않는다. 본 문서에서, 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치(예: 인공지능 전자 장치)를 지칭할 수 있다.
도 1을 참조하여, 다양한 실시예에서의, 네트워크 환경(100) 내의 전자 장치(101)가 기재된다. 전자 장치(101)는 버스(110), 프로세서(120), 메모리(130), 입출력 인터페이스(150), 디스플레이(160), 및 통신 인터페이스(170)를 포함할 수 있다. 어떤 실시예에서는, 전자 장치(101)는, 구성요소들 중 적어도 하나를 생략하거나 다른 구성요소를 추가적으로 구비할 수 있다. 버스(110)는 구성요소들(110-170)을 서로 연결하고, 구성요소들 간의 통신(예: 제어 메시지 또는 데이터)을 전달하는 회로를 포함할 수 있다. 프로세서(120)는, 중앙처리장치, 어플리케이션 프로세서, 또는 커뮤니케이션 프로세서(communication processor, CP) 중 하나 또는 그 이상을 포함할 수 있다. 프로세서(120)는, 예를 들면, 전자 장치(101)의 적어도 하나의 다른 구성요소들의 제어 및/또는 통신에 관한 연산이나 데이터 처리를 실행할 수 있다.
메모리(130)는, 휘발성 및/또는 비휘발성 메모리를 포함할 수 있다. 메모리(130)는, 예를 들면, 전자 장치(101)의 적어도 하나의 다른 구성요소에 관계된 명령 또는 데이터를 저장할 수 있다. 한 실시예에 따르면, 메모리(130)는 소프트웨어 및/또는 프로그램(140)을 저장할 수 있다. 프로그램(140)은, 예를 들면, 커널(141), 미들웨어(143), 어플리케이션 프로그래밍 인터페이스(application programing interface, API)(145), 및/또는 어플리케이션 프로그램(또는 "어플리케이션")(147) 등을 포함할 수 있다. 커널(141), 미들웨어(143), 또는 API(145)의 적어도 일부는, 운영 시스템으로 지칭될 수 있다. 커널(141)은, 예를 들면, 다른 프로그램들(예: 미들웨어(143), API(145), 또는 어플리케이션 프로그램(147))에 구현된 동작 또는 기능을 실행하는 데 사용되는 시스템 리소스들(예: 버스(110), 프로세서(120), 또는 메모리(130) 등)을 제어 또는 관리할 수 있다. 또한, 커널(141)은 미들웨어(143), API(145), 또는 어플리케이션 프로그램(147)에서 전자 장치(101)의 개별 구성요소에 접근함으로써, 시스템 리소스들을 제어 또는 관리할 수 있는 인터페이스를 제공할 수 있다.
미들웨어(143)는, 예를 들면, API(145) 또는 어플리케이션 프로그램(147)이 커널(141)과 통신하여 데이터를 주고받을 수 있도록 중개 역할을 수행할 수 있다. 또한, 미들웨어(143)는 어플리케이션 프로그램(147)으로부터 수신된 하나 이상의 작업 요청들을 우선 순위에 따라 처리할 수 있다. 예를 들면, 미들웨어(143)는 어플리케이션 프로그램(147) 중 적어도 하나에 전자 장치(101)의 시스템 리소스(예: 버스(110), 프로세서(120), 또는 메모리(130) 등)를 사용할 수 있는 우선 순위를 부여하고, 하나 이상의 작업 요청들을 처리할 수 있다. API(145)는 어플리케이션(147)이 커널(141) 또는 미들웨어(143)에서 제공되는 기능을 제어하기 위한 인터페이스로, 예를 들면, 파일 제어, 창 제어, 영상 처리, 또는 문자 제어 등을 위한 적어도 하나의 인터페이스 또는 함수(예: 명령어)를 포함할 수 있다. 입출력 인터페이스(150)는, 예를 들면, 사용자 또는 다른 외부 기기로부터 입력된 명령 또는 데이터를 전자 장치(101)의 다른 구성요소(들)에 전달하거나, 또는 전자 장치(101)의 다른 구성요소(들)로부터 수신된 명령 또는 데이터를 사용자 또는 다른 외부 기기로 출력할 수 있다.
디스플레이(160)는, 예를 들면, 액정 디스플레이(liquid crystal display, LCD), 발광 다이오드(light emitting diode, LED) 디스플레이, 유기 발광 다이오드(organic light emitting diode, OLED) 디스플레이, 또는 마이크로 전자기계 시스템(MEMS) 디스플레이, 또는 전자종이(electronic paper) 디스플레이를 포함할 수 있다. 디스플레이(160)는, 예를 들면, 사용자에게 각종 콘텐츠(예: 텍스트, 이미지, 비디오, 아이콘, 및/또는 심볼 등)을 표시할 수 있다. 디스플레이(160)는, 터치 스크린을 포함할 수 있으며, 예를 들면, 전자 펜 또는 사용자의 신체의 일부를 이용한 터치, 제스쳐, 근접, 또는 호버링 입력을 수신할 수 있다. 통신 인터페이스(170)는, 예를 들면, 전자 장치(101)와 외부 장치(예: 제1 외부 전자 장치(102), 제2 외부 전자 장치(104), 또는 서버(106)) 간의 통신을 설정할 수 있다. 예를 들면, 통신 인터페이스(170)는 무선 통신 또는 유선 통신을 통해서 네트워크(162)에 연결되어 외부 장치(예: 제2 외부 전자 장치(104) 또는 서버(106))와 통신할 수 있다.
무선 통신은, 예를 들면, LTE(Long Term Evolution), LTE-A(LTE Advance), CDMA(code division multiple access), WCDMA(wideband CDMA), UMTS(universal mobile telecommunications system), WiBro(Wireless Broadband), 또는 GSM(Global System for Mobile Communications) 등 중 적어도 하나를 사용하는 셀룰러 통신을 포함할 수 있다. 한 실시예에 따르면, 무선 통신은, 예를 들면, WiFi(wireless fidelity), 블루투스, 블루투스 저전력(Bluetooth low energy, BLE), 지그비(Zigbee), NFC(near field communication), 자력 시큐어 트랜스미션(Magnetic Secure Transmission), 라디오 프리퀀시(radio frequency, RF), 또는 보디 에어리어 네트워크(body area network, BAN) 중 적어도 하나를 포함할 수 있다. 한실시예에 따르면, 무선 통신은 GNSS를 포함할 수 있다. GNSS는, 예를 들면, GPS(Global Positioning System), Glonass(Global Navigation Satellite System), Beidou Navigation Satellite System(이하 “Beidou”) 또는 Galileo, the European global satellite-based navigation system일 수 있다. 이하, 본 문서에서는, “GPS”는 “GNSS”와 상호 호환적으로 사용될 수 있다. 유선 통신은, 예를 들면, USB(universal serial bus), HDMI(high definition multimedia interface), RS-232(recommended standard232), 전력선 통신, 또는 POTS(plain old telephone service) 등 중 적어도 하나를 포함할 수 있다. 네트워크(162)는 텔레커뮤니케이션 네트워크, 예를 들면, 컴퓨터 네트워크(예: LAN 또는 WAN), 인터넷, 또는 텔레폰 네트워크 중 적어도 하나를 포함할 수 있다.
제1 및 제2 외부 전자 장치(102, 104) 각각은 전자 장치(101)와 동일한 또는 다른 종류의 장치일 수 있다. 다양한 실시예에 따르면, 전자 장치(101)에서 실행되는 동작들의 전부 또는 일부는 다른 하나 또는 복수의 전자 장치(예: 전자 장치(102,104), 또는 서버(106)에서 실행될 수 있다. 한 실시예에 따르면, 전자 장치(101)가 어떤 기능이나 서비스를 자동으로 또는 요청에 의하여 수행해야 할 경우에, 전자 장치(101)는 기능 또는 서비스를 자체적으로 실행시키는 대신에 또는 추가적으로, 그와 연관된 적어도 일부 기능을 다른 장치(예: 전자 장치(102, 104), 또는 서버(106))에게 요청할 수 있다. 다른 전자 장치(예: 전자 장치(102, 104), 또는 서버(106))는 요청된 기능 또는 추가 기능을 실행하고, 그 결과를 전자 장치(101)로 전달할 수 있다. 전자 장치(101)는 수신된 결과를 그대로 또는 추가적으로 처리하여 요청된 기능이나 서비스를 제공할 수 있다. 이를 위하여, 예를 들면, 클라우드 컴퓨팅, 분산 컴퓨팅, 또는 클라이언트-서버 컴퓨팅 기술이 이용될 수 있다.
도 2는 다양한 실시예에 따른 전자 장치(201)의 블록도이다. 전자 장치(201)는, 예를 들면, 도 1에 도시된 전자 장치(101)의 전체 또는 일부를 포함할 수 있다. 전자 장치(201)는 하나 이상의 프로세서(예: AP)(210), 통신 모듈(220), 가입자 식별 모듈(224), 메모리(230), 센서 모듈(240), 입력 장치(250), 디스플레이(260), 인터페이스(270), 오디오 모듈(280), 카메라 모듈(291), 전력 관리 모듈(295), 배터리(296), 인디케이터(297), 및 모터(298)를 포함할 수 있다. 프로세서(210)는, 예를 들면, 운영 체제 또는 응용 프로그램을 구동하여 프로세서(210)에 연결된 다수의 하드웨어 또는 소프트웨어 구성요소들을 제어할 수 있고, 각종 데이터 처리 및 연산을 수행할 수 있다. 프로세서(210)는, 예를 들면, SoC(system on chip) 로 구현될 수 있다. 한 실시예에 따르면, 프로세서(210)는 GPU(graphic processing unit) 및/또는 이미지 신호 프로세서를 더 포함할 수 있다. 프로세서(210)는 도 2에 도시된 구성요소들 중 적어도 일부(예: 셀룰러 모듈(221))를 포함할 수도 있다. 프로세서(210) 는 다른 구성요소들(예: 비휘발성 메모리) 중 적어도 하나로부터 수신된 명령 또는 데이터를 휘발성 메모리에 로드)하여 처리하고, 결과 데이터를 비휘발성 메모리에 저장할 수 있다.
통신 모듈(220)(예: 통신 인터페이스(170))와 동일 또는 유사한 구성을 가질 수 있다. 통신 모듈(220)은, 예를 들면, 셀룰러 모듈(221), WiFi 모듈(223), 블루투스 모듈(225), GNSS 모듈(227), NFC 모듈(228) 및 RF 모듈(229)을 포함할 수 있다. 셀룰러 모듈(221)은, 예를 들면, 통신망을 통해서 음성 통화, 영상 통화, 문자 서비스, 또는 인터넷 서비스 등을 제공할 수 있다. 한 실시예에 따르면, 셀룰러 모듈(221)은 가입자 식별 모듈(예: SIM 카드)(224)을 이용하여 통신 네트워크 내에서 전자 장치(201)의 구별 및 인증을 수행할 수 있다. 한 실시예에 따르면, 셀룰러 모듈(221)은 프로세서(210)가 제공할 수 있는 기능 중 적어도 일부 기능을 수행할 수 있다. 한 실시예에 따르면, 셀룰러 모듈(221)은 커뮤니케이션 프로세서(CP)를 포함할 수 있다. 어떤 실시예에 따르면, 셀룰러 모듈(221), WiFi 모듈(223), 블루투스 모듈(225), GNSS 모듈(227) 또는 NFC 모듈(228) 중 적어도 일부(예: 두 개 이상)는 하나의 integrated chip(IC) 또는 IC 패키지 내에 포함될 수 있다. RF 모듈(229)은, 예를 들면, 통신 신호(예: RF 신호)를 송수신할 수 있다. RF 모듈(229)은, 예를 들면, 트랜시버, PAM(power amp module), 주파수 필터, LNA(low noise amplifier), 또는 안테나 등을 포함할 수 있다. 다른 실시예에 따르면, 셀룰러 모듈(221), WiFi 모듈(223), 블루투스 모듈(225), GNSS 모듈(227) 또는 NFC 모듈(228) 중 적어도 하나는 별개의 RF 모듈을 통하여 RF 신호를 송수신할 수 있다. 가입자 식별 모듈(224)은, 예를 들면, 가입자 식별 모듈을 포함하는 카드 또는 임베디드 SIM을 포함할 수 있으며, 고유한 식별 정보(예: ICCID(integrated circuit card identifier)) 또는 가입자 정보(예: IMSI(international mobile subscriber identity))를 포함할 수 있다.
메모리(230)(예: 메모리(130))는, 예를 들면, 내장 메모리(232) 또는 외장 메모리(234)를 포함할 수 있다. 내장 메모리(232)는, 예를 들면, 휘발성 메모리(예: DRAM, SRAM, 또는 SDRAM 등), 비휘발성 메모리(예: OTPROM(one time programmable ROM), PROM, EPROM, EEPROM, mask ROM, flash ROM, 플래시 메모리, 하드 드라이브, 또는 솔리드 스테이트 드라이브(solid state drive, SSD) 중 적어도 하나를 포함할 수 있다. 외장 메모리(234)는 플래시 드라이브(flash drive), 예를 들면, CF(compact flash), SD(secure digital), Micro-SD, Mini-SD, xD(extreme digital), MMC(multi-media card) 또는 메모리 스틱 등을 포함할 수 있다. 외장 메모리(234)는 다양한 인터페이스를 통하여 전자 장치(201)와 기능적으로 또는 물리적으로 연결될 수 있다.
센서 모듈(240)은, 예를 들면, 물리량을 계측하거나 전자 장치(201)의 작동 상태를 감지하여, 계측 또는 감지된 정보를 전기 신호로 변환할 수 있다. 센서 모듈(240)은, 예를 들면, 제스처 센서(240A), 자이로 센서(240B), 기압 센서(240C), 마그네틱 센서(240D), 가속도 센서(240E), 그립 센서(240F), 근접 센서(240G), 컬러(color) 센서(240H)(예: RGB(red, green, blue) 센서), 생체 센서(240I)(예: 지문 센서, 홍채 센서 등), 온/습도 센서(240J), 조도 센서(240K), UV(ultra violet) 센서(240M) 중의 적어도 하나를 포함할 수 있다. 추가적으로 또는 대체적으로, 센서 모듈(240)은, 예를 들면, 후각(e-nose) 센서, 일렉트로마이오그라피(EMG) 센서, 일렉트로엔씨팔로그램(EEG) 센서, 일렉트로카디오그램(ECG) 센서, IR(infrared) 센서, 홍채 센서 및/또는 지문 센서를 포함할 수 있다. 센서 모듈(240)은 그 안에 속한 적어도 하나 이상의 센서들을 제어하기 위한 제어 회로를 더 포함할 수 있다. 어떤 실시예에서는, 전자 장치(201)는 프로세서(210)의 일부로서 또는 별도로, 센서 모듈(240)을 제어하도록 구성된 프로세서를 더 포함하여, 프로세서(210)가 슬립(sleep) 상태에 있는 동안, 센서 모듈(240)을 제어할 수 있다.
입력 장치(250)는, 예를 들면, 터치 센서(252)(예: 터치 패널), (디지털) 펜 센서(254), 키(256), 또는 초음파 입력 장치(258)를 포함할 수 있다. 터치 센서(252)는, 예를 들면, 정전식, 감압식, 적외선 방식, 또는 초음파 방식 중 적어도 하나의 방식을 사용할 수 있다. 또한, 터치 센서(252)는 제어 회로를 더 포함할 수도 있다. 터치 센서(252)는 택타일 레이어(tactile layer)를 더 포함하여, 사용자에게 촉각 반응을 제공할 수 있다. (디지털) 펜 센서(254)는, 예를 들면, 터치 센서의 일부이거나, 별도의 인식용 쉬트를 포함할 수 있다. 키(256)는, 예를 들면, 물리적인 버튼, 광학식 키, 또는 키패드를 포함할 수 있다. 초음파 입력 장치(258)는 마이크(예: 마이크(288))를 통해, 입력 도구에서 발생된 초음파를 감지하여, 감지된 초음파에 대응하는 데이터를 확인할 수 있다.
디스플레이(260)(예: 디스플레이(160))는 패널(262), 홀로그램 장치(264), 프로젝터(266), 및/또는 이들을 제어하기 위한 제어 회로를 포함할 수 있다. 패널(262)은, 예를 들면, 유연하게, 투명하게, 또는 착용할 수 있게 구현될 수 있다. 패널(262)은 터치 센서(252)와 하나 이상의 모듈로 구성될 수 있다. 홀로그램 장치(264)는 빛의 간섭을 이용하여 입체 영상을 허공에 보여줄 수 있다. 프로젝터(266)는 스크린에 빛을 투사하여 영상을 표시할 수 있다. 스크린은, 예를 들면, 전자 장치(201)의 내부 또는 외부에 위치할 수 있다. 인터페이스(270)는, 예를 들면, HDMI(272), USB(274), 광 인터페이스(optical interface)(276), 또는 D-sub(D-subminiature)(278)를 포함할 수 있다. 인터페이스(270)는, 예를 들면, 도 1에 도시된 통신 인터페이스(170)에 포함될 수 있다. 추가적으로 또는 대체적으로, 인터페이스(270)는, 예를 들면, MHL(mobile high-definition link) 인터페이스, SD카드/MMC(multi-media card) 인터페이스, 또는 IrDA(infrared data association) 규격 인터페이스를 포함할 수 있다.
오디오 모듈(280)은, 예를 들면, 소리와 전기 신호를 쌍방향으로 변환시킬 수 있다. 오디오 모듈(280)의 적어도 일부 구성요소는, 예를 들면, 도 1 에 도시된 입출력 인터페이스(145)에 포함될 수 있다. 오디오 모듈(280)은, 예를 들면, 스피커(282), 리시버(284), 이어폰(286), 또는 마이크(288) 등을 통해 입력 또는 출력되는 소리 정보를 처리할 수 있다. 카메라 모듈(291)은, 예를 들면, 정지 영상 및 동영상을 촬영할 수 있는 장치로서, 한 실시예에 따르면, 하나 이상의 이미지 센서(예: 전면 센서 또는 후면 센서), 렌즈, 이미지 시그널 프로세서(ISP), 또는 플래시(예: LED 또는 xenon lamp 등)를 포함할 수 있다. 전력 관리 모듈(295)은, 예를 들면, 전자 장치(201)의 전력을 관리할 수 있다. 한 실시예에 따르면, 전력 관리 모듈(295)은 PMIC(power management integrated circuit), 충전 IC, 또는 배터리 또는 연료 게이지를 포함할 수 있다. PMIC는, 유선 및/또는 무선 충전 방식을 가질 수 있다. 무선 충전 방식은, 예를 들면, 자기공명 방식, 자기유도 방식 또는 전자기파 방식 등을 포함하며, 무선 충전을 위한 부가적인 회로, 예를 들면, 코일 루프, 공진 회로, 또는 정류기 등을 더 포함할 수 있다. 배터리 게이지는, 예를 들면, 배터리(296)의 잔량, 충전 중 전압, 전류, 또는 온도를 측정할 수 있다. 배터리(296)는, 예를 들면, 충전식 전지 및/또는 태양 전지를 포함할 수 있다.
인디케이터(297)는 전자 장치(201) 또는 그 일부(예: 프로세서(210))의 특정 상태, 예를 들면, 부팅 상태, 메시지 상태 또는 충전 상태 등을 표시할 수 있다. 모터(298)는 전기적 신호를 기계적 진동으로 변환할 수 있고, 진동, 또는 햅틱 효과 등을 발생시킬 수 있다. 전자 장치(201)는, 예를 들면, DMB(digital multimedia broadcasting), DVB(digital video broadcasting), 또는 미디어플로(mediaFloTM) 등의 규격에 따른 미디어 데이터를 처리할 수 있는 모바일 TV 지원 장치(예: GPU)를 포함할 수 있다. 본 문서에서 기술된 구성요소들 각각은 하나 또는 그 이상의 부품(component)으로 구성될 수 있으며, 해당 구성요소의 명칭은 전자 장치의 종류에 따라서 달라질 수 있다. 다양한 실시예에서, 전자 장치(예: 전자 장치(201))는 일부 구성요소가 생략되거나, 추가적인 구성요소를 더 포함하거나, 또는, 구성요소들 중 일부가 결합되어 하나의 개체로 구성되되, 결합 이전의 해당 구성요소들의 기능을 동일하게 수행할 수 있다.
도 3은 다양한 실시예에 따른 프로그램 모듈의 블록도이다. 한 실시예에 따르면, 프로그램 모듈(310)(예: 프로그램(140))은 전자 장치(예: 전자 장치(101))에 관련된 자원을 제어하는 운영 체제 및/또는 운영 체제 상에서 구동되는 다양한 어플리케이션(예: 어플리케이션 프로그램(147))을 포함할 수 있다. 운영 체제는, 예를 들면, AndroidTM, iOSTM, WindowsTM, SymbianTM, TizenTM, 또는 BadaTM를 포함할 수 있다. 도 3을 참조하면, 프로그램 모듈(310)은 커널(320)(예: 커널(141)), 미들웨어(330)(예: 미들웨어(143)), API(360)(예: API(145), 및/또는 어플리케이션(370)(예: 어플리케이션 프로그램(147))을 포함할 수 있다. 프로그램 모듈(310)의 적어도 일부는 전자 장치 상에 프리로드 되거나, 외부 전자 장치(예: 전자 장치(102, 104), 서버(106) 등)로부터 다운로드 가능하다.
커널(320)은, 예를 들면, 시스템 리소스 매니저(321) 및/또는 디바이스 드라이버(323)를 포함할 수 있다. 시스템 리소스 매니저(321)는 시스템 리소스의 제어, 할당, 또는 회수를 수행할 수 있다. 한 실시예에 따르면, 시스템 리소스 매니저(321)는 프로세스 관리부, 메모리 관리부, 또는 파일 시스템 관리부를 포함할 수 있다. 디바이스 드라이버(323)는, 예를 들면, 디스플레이 드라이버, 카메라 드라이버, 블루투스 드라이버, 공유 메모리 드라이버, USB 드라이버, 키패드 드라이버, WiFi 드라이버, 오디오 드라이버, 또는 IPC(inter-process communication) 드라이버를 포함할 수 있다. 미들웨어(330)는, 예를 들면, 어플리케이션(370)이 공통적으로 필요로 하는 기능을 제공하거나, 어플리케이션(370)이 전자 장치 내부의 제한된 시스템 자원을 사용할 수 있도록 API(360)를 통해 다양한 기능들을 어플리케이션(370)으로 제공할 수 있다. 한 실시예에 따르면, 미들웨어(330) 는 런타임 라이브러리(335), 어플리케이션 매니저(341), 윈도우 매니저(342), 멀티미디어 매니저(343), 리소스 매니저(344), 파워 매니저(345), 데이터베이스 매니저(346), 패키지 매니저(347), 커넥티비티 매니저(348), 노티피케이션 매니저(349), 로케이션 매니저(350), 그래픽 매니저(351), 또는 시큐리티 매니저(352) 중 적어도 하나를 포함할 수 있다.
런타임 라이브러리(335)는, 예를 들면, 어플리케이션(370)이 실행되는 동안에 프로그래밍 언어를 통해 새로운 기능을 추가하기 위해 컴파일러가 사용하는 라이브러리 모듈을 포함할 수 있다. 런타임 라이브러리(335)는 입출력 관리, 메모리 관리, 또는 산술 함수 처리를 수행할 수 있다. 어플리케이션 매니저(341)는, 예를 들면, 어플리케이션(370)의 생명 주기를 관리할 수 있다. 윈도우 매니저(342)는 화면에서 사용되는 GUI 자원을 관리할 수 있다. 멀티미디어 매니저(343)는 미디어 파일들의 재생에 필요한 포맷을 파악하고, 해당 포맷에 맞는 코덱을 이용하여 미디어 파일의 인코딩 또는 디코딩을 수행할 수 있다. 리소스 매니저(344)는 어플리케이션(370)의 소스 코드 또는 메모리의 공간을 관리할 수 있다. 파워 매니저(345)는, 예를 들면, 배터리의 용량 또는 전원을 관리하고, 전자 장치의 동작에 필요한 전력 정보를 제공할 수 있다. 한 실시예에 따르면, 파워 매니저(345)는 바이오스(BIOS: basic input/output system)와 연동할 수 있다. 데이터베이스 매니저(346)는, 예를 들면, 어플리케이션(370)에서 사용될 데이터베이스를 생성, 검색, 또는 변경할 수 있다. 패키지 매니저(347)는 패키지 파일의 형태로 배포되는 어플리케이션의 설치 또는 갱신을 관리할 수 있다.
커넥티비티 매니저(348)는, 예를 들면, 무선 연결을 관리할 수 있다. 노티피케이션 매니저(349)는, 예를 들면, 도착 메시지, 약속, 근접성 알림 등의 이벤트를 사용자에게 제공할 수 있다. 로케이션 매니저(350)는, 예를 들면, 전자 장치의 위치 정보를 관리할 수 있다. 그래픽 매니저(351)는, 예를 들면, 사용자에게 제공될 그래픽 효과 또는 이와 관련된 사용자 인터페이스를 관리할 수 있다. 보안 매니저(352)는, 예를 들면, 시스템 보안 또는 사용자 인증을 제공할 수 있다. 한 실시예에 따르면, 미들웨어(330)는 전자 장치의 음성 또는 영상 통화 기능을 관리하기 위한 통화(telephony) 매니저 또는 전술된 구성요소들의 기능들의 조합을 형성할 수 있는 하는 미들웨어 모듈을 포함할 수 있다. 한 실시예에 따르면, 미들웨어(330)는 운영 체제의 종류 별로 특화된 모듈을 제공할 수 있다. 미들웨어(330)는 동적으로 기존의 구성요소를 일부 삭제하거나 새로운 구성요소들을 추가할 수 있다. API(360)는, 예를 들면, API 프로그래밍 함수들의 집합으로, 운영 체제에 따라 다른 구성으로 제공될 수 있다. 예를 들면, 안드로이드 또는 iOS의 경우, 플랫폼 별로 하나의 API 셋을 제공할 수 있으며, 타이젠의 경우, 플랫폼 별로 두 개 이상의 API 셋을 제공할 수 있다.
어플리케이션(370)은, 예를 들면, 홈(371), 다이얼러(372), SMS/MMS(373), IM(instant message)(374), 브라우저(375), 카메라(376), 알람(377), 컨택트(378), 음성 다이얼(379), 이메일(380), 달력(381), 미디어 플레이어(382), 앨범(383), 와치(384), 생체 데이터 수집(385), 헬스 케어(예: 운동량 또는 혈당 등을 측정), 또는 환경 정보(예: 기압, 습도, 또는 온도 정보) 제공 어플리케이션을 포함할 수 있다. 한 실시예에 따르면, 어플리케이션(370)은 전자 장치와 외부 전자 장치 사이의 정보 교환을 지원할 수 있는 정보 교환 어플리케이션을 포함할 수 있다. 정보 교환 어플리케이션은, 예를 들면, 외부 전자 장치에 특정 정보를 전달하기 위한 노티피케이션 릴레이 어플리케이션, 또는 외부 전자 장치를 관리하기 위한 장치 관리 어플리케이션을 포함할 수 있다. 예를 들면, 알림 전달 어플리케이션은 전자 장치의 다른 어플리케이션에서 발생된 알림 정보를 외부 전자 장치로 전달하거나, 또는 외부 전자 장치로부터 알림 정보를 수신하여 사용자에게 제공할 수 있다. 장치 관리 어플리케이션은, 예를 들면, 전자 장치와 통신하는 외부 전자 장치의 기능(예: 외부 전자 장치 자체(또는, 일부 구성 부품)의 턴-온/턴-오프 또는 디스플레이의 밝기(또는, 해상도) 조절), 또는 외부 전자 장치에서 동작하는 어플리케이션을 설치, 삭제, 또는 갱신할 수 있다. 한 실시예에 따르면, 어플리케이션(370)은 외부 전자 장치의 속성에 따라 지정된 어플리케이션(예: 모바일 의료 기기의 건강 관리 어플리케이션)을 포함할 수 있다. 한 실시예에 따르면, 어플리케이션(370)은 외부 전자 장치로부터 수신된 어플리케이션을 포함할 수 있다. 생체 데이터 수집(385)은 생체 센서(240I)를 이용하여 사용자의 데이터 정보, 예를 들어, 지문, 홍채, 심박수, 혈압, 체온 중 적어도 하나를 수집하기 위한 명령어 또는 명령어 세트이다. 특히, 본 발명의 다양한 실시예들에 따라, 생체 데이터 수집(385)은 생체 정보를 등록 및 인증할 때 터치 정보를 함께 획득 및 활용하기 위한 다양한 기능들을 제공할 수 있다. 프로그램 모듈(310)의 적어도 일부는 소프트웨어, 펌웨어, 하드웨어(예: 프로세서(210)), 또는 이들 중 적어도 둘 이상의 조합으로 구현(예: 실행)될 수 있으며, 하나 이상의 기능을 수행하기 위한 모듈, 프로그램, 루틴, 명령어 세트 또는 프로세스를 포함할 수 있다.
상술한 바와 같이, 다양한 실시예들에 따르는 전자 장치는 생체 센서(240I)를 이용하여 생체 데이터를 획득하고, 생체 데이터에 기초하여 생체 정보를 등록할 수 있다. 본 발명은 지문, 홍채, 심박수, 혈압, 체온 등 다양한 종류의 생체 정보에 대하여 적용될 수 있다. 그러나, 이하, 설명의 구체성을 위해, 지문이 생체 정보의 일 예로서 제시된다. 하지만, 다른 생체 정보에 대하여도, 후술되는 다양한 실시예들이 적용될 수 있다.
다양한 실시예들에서, 전자 장치(101)는 사용자의 지문을 등록하고, 등록된 지문 정보에 기초하여 입력되는 지문을 인증함으로써 사용자의 동일성을 판단할 수 있다. 이때, 일반적으로, 지문 등록 시 지문 하나당 약 20개 내외의 지문 이미지들을 저장할 수 있다. 따라서, 지문 인증 시 검사를 수행할 지문 이미지들 개수가 많아지고, 메모리 사용 및 처리 속도 측면에서 성능 저하가 야기될 수 있다.
따라서, 지문 인증 시 검사 대상이 되는 지문 이미지들을 등록된 지문 이미지들의 일부로 제한할 수 있다면, 지문 인증의 효율성이 증대될 수 있다. 이에 따라, 본 발명은, 지문 센서가 디스플레이의 적어도 일부 영역에 형성된 전자 장치에서, 사용자의 지문 정보를 생성할 때 지문 센서를 통해 획득된 지문 데이터 및 디스플레이의 터치 센서를 통해 획득된 터치 정보를 함께 저장하고, 유사한 터치 정보(예: 면적)에 대응하는 지문 이미지들을 클러스터링(clustering)하기 위한 기술을 제안한다. 또한, 본 발명은, 저장된 지문 이미지들 중 터치 영역에 기초하여 매칭 알고리즘을 수행할 후보군을 결정함으로써 지문 인식 속도를 향상시킬 수 있는 기술을 제안한다.
먼저, 이하 설명에서 사용되는 일부 용어를 정의하면 다음과 같다.
'지문'은 생체 정보의 일 예로서, 인체의 손가락의 끝마디에 존재하는 피부 상에 형성된 곡선들에 의한 무늬를 의미할 수 있다. 또한, 지문은 손가락의 끝마디를 물체에 대고 누르면 물체의 표면에 남게 되는 곡선 무늬를 의미하기도 한다.
'지문 데이터'는 전자 장치(101)에 포함된 센서(예: 생체 센서(240I))에 의해 획득된 지문의 전부 또는 일부를 나타내는 데이터를 의미할 수 있다. 구체적으로, 지문 데이터는 센서의 측정 값, 센서의 측정 값으로부터 생성된 데이터, 저장 상태의 데이터 등을 의미할 수 있다. 지문 데이터는 이미지의 형태로 획득될 수 있다. 이에 따라, 지문 데이터를 구성하는 개개의 데이터 단위(chunk)는 '지문 이미지'라 지칭될 수 있다. 즉, 지문 데이터는 적어도 하나의 지문 이미지의 집합이다. 하지만, 본 발명이 적용 가능한 지문 데이터의 형태가 이미지에 제한되는 것은 아니다. 다양한 실시예들에서, 지문 데이터는 지문 센서에 의해 생성되고, 분류되고, 지문 등록을 위해 이용되는 대상일 수 있다.
'지문 정보'는 인증을 위해 사용 가능 상태에 있는 지문 데이터의 집합을 의미할 수 있다. 일 예로, 지문 정보는 동일 손가락의 지문에 대한 지문 데이터의 집합으로서, 지문 등록 절차를 거친 지문 데이터의 집합일 수 있다. 지문 정보는 지문 등록 절차를 통해 생성되며, 지문 등록 어플리케이션을 통해 획득된 지문 데이터 및 다른 적어도 하나의 어플리케이션을 통해 획득된 지문 데이터를 포함할 수 있다. 지문 정보는 '등록된 지문', '등록된 지문 데이터', '템플릿(template)' 또는 이와 동등한 기술적 의미를 가지는 다른 용어로 지칭될 수 있다.
'터치 정보'는 터치 입력에 관련된 정보로서, 측정 값들 또는 측정 값들로부터 도출되는 파라미터들을 포함할 수 있다. 예를 들어, 터치 정보는 터치 입력의 좌표, 면적(area), 장축(major) 길이, 단축(minor) 길이, 방향(orientation), 각도(angle), 곡률, 압력(pressure), 위치 중 적어도 하나를 포함할 수 있다. 여기서, 장축 길이는 터치 접촉(touch contact) 중 상대적으로 긴 차원(longer dimension)의 길이 또는 터치 접촉의 단면적(cross-sectional area)으로 정의될 수 있다. 단축 길이는 터치 접촉 중 상대적으로 짧은 차원(shorter dimension)의 길이로 정의될 수 있다. 방향은 각 측정(angular measurement)으로서의 도구(tool)로서, 터치의 방향으로 정의될 수 있다. 위치는 지문 센서에 대한 상대적 위치로 정의될 수 있다. 다양한 실시예들에서, 터치 정보는 지문 등록 및 인증 시 활용될 수 있다. 예를 들어, 터치 정보는 지문 데이터와 함께 저장될 수 있다. 또는, 터치 정보는 지문 데이터를 분류하기 위해 사용될 수 있다.
도 4a는 본 발명의 다양한 실시예에 따른 전자 장치의 기능적 구성을 도시한다.
도 4a를 참고하면, 전자 장치(101)는, 예를 들어, 디스플레이(410), 메모리(420), 지문 센서(430), 프로세서(440)를 포함할 수 있다. 메모리(420)의 일부는 보안 메모리(422)로 사용되며, 프로세서(440)는 보안 프로세서(432)를 포함할 수 있다.
디스플레이(410)는 전자 장치(101)의 화면 표시를 위한 장치일 수 있다. 예를 들어, 디스플레이(410)는 OLED, QLED(Quantum-Dot light emitting diode), LCD 중 적어도 하나로 구성될 수 있다. 디스플레이(410)는 도 1의 디스플레이(160), 도 2의 디스플레이(260)에 상응하는 구성요소일 수 있다. 또한, 도 4a에 도시되지 아니하였으나, 디스플레이(410)는 터치 센서 및 터치 IC(integrated circuit)를 포함할 수 있다. 터치 센서는 사용자의 터치 입력에 따른 측정 값의 변화를 검출하고, 터치 IC는 측정 값을 프로세서(440)로 제공할 수 있다. 여기서, 측정 값은, 정전 용량 방식의 경우 커패시턴스(capacitance)의 변화량, 저항막 방식의 경우 저항(resistance)의 변화로 인해 발생하는 전압 차이, 초음파 방식의 경우 파동의 진폭 변화, 적외선 방식의 경우 적외선 신호의 세기 중 하나일 수 있다.
메모리(420)는 전자 장치(101)의 동작을 위한 기본 프로그램, 응용 프로그램, 설정 정보 등의 데이터를 저장할 수 있다. 메모리(420)는 휘발성 메모리, 비휘발성 메모리 또는 휘발성 메모리와 비휘발성 메모리의 조합으로 구성될 수 있다. 그리고, 메모리(420)는 프로세서(440)의 요청에 따라 저장된 데이터를 제공할 수 있다. 메모리(420)는 지문 센서(430)를 통해 획득된 지문 데이터를 저장하고, 등록된 지문 정보를 저장할 수 있다. 보안 메모리(422)는 메모리(420)의 물리적 일부로서, 특정 주소 값들의 메모리 영역으로 정의될 수 있다. 보안 메모리(422)는 다른 영역과 달리 제한된 접근을 허용함으로써, 저장된 데이터에 대하 강화된 보호를 제공할 수 있다. 예를 들어, 보안 메모리(422)는 TEE(trust execution environment)를 위해 정의될 수 있다. 한 실시예에 따르면, 메모리(420)에서, 보안 메모리(422) 및 나머지는 서로 다른 보안 레벨(security level)들을 가질 수 있다. 이에 따라, 보안 메모리(422) 외 다른 메모리는 '일반 메모리'라 지칭될 수 있다. 따라서, 한 실시예에 따라, 등록된 지문 정보는 보안 메모리(422)에 저장될 수 있다. 다른 실시예에 따라, 보안 메모리(422)는 등록 전 상태의 수집된 지문 데이터를 저장하기 위해 사용할 수 있다.
지문 센서(430)는 사용자의 지문 데이터를 획득하기 위한 구성 요소일 수 있다. 지문 센서(430)는 사용자의 터치 입력 시 지문에 대한 측정 값들을 생성할 수 있다. 지문 센서(430)는 광학 방식, 상호 커패시턴스(mutual capacitance) 방식, 초음파 방식, 적외선 방식 등 다양한 방식에 따라 구현될 수 있다. 본 발명의 다양한 실시예들에서, 지문 센서(430)는 디스플레이(410)에 통합된 구조를 가진다. 이에 따라, 지문 센서(430)는 '디스플레이에 통합된 지문 센서(display integrated fingerprint-sensor)'라 지칭될 수 있다. 지문 센서(430)의 센싱 동작을 위해, 디스플레이(410)는 빛이 투과할 수 있는 영역을 포함할 수 있다. 이에 따라, 지문 센서(430)는 빛이 투과되는 영역을 통해 지문 데이터를 생성할 수 있다.
예를 들어, 지문 센서(430)는 지문 센싱을 위한 센싱 모듈 또는 전극을, 디스플레이(410)를 보호하기 위해, 디스플레이(410) 위에 구비된 커버 글래스의 표면에 프린팅 또는 식각을 통해 배치한 인/온 커버 글래스(in/on-cover glass) 구조, 지문 센싱을 위한 센싱 모듈 또는 전극을 디스플레이 패널 위에 설치한 오버-디스플레이(over-display) 구조, 지문 센싱을 위한 센싱 모듈 또는 전극을 디스플레이 패널 아래에 설치한 언더-디스플레이(under-display) 구조, 지문 센싱을 위한 센싱 모듈 또는 전극을 디스플레이 패널의 픽셀들 내부 또는 픽셀과 픽셀 사이의 BM(black maker)영역에 설치한 인-디스플레이(in-display) 구조 중 하나에 따라 설계될 수 있다.
프로세서(440)는 전자 장치(101)의 전반적인 동작들을 제어할 수 있다. 예를 들어, 프로세서(440)는 디스플레이(410)의 화면 표시를 제어하고, 지문 센서(430)의 측정 동작을 제어할 수 있다. 프로세서(440)는 도 1의 프로세서(120), 도 2의 프로세서(210)를 포함할 수 있다. 프로세서(440)는 지문 센서(430)에 의해 생성된 측정 값들을 이용하여 지문 데이터를 생성하고, 지문을 등록하고, 지문을 인증할 수 있다. 나아가, 지문 등록 및 인증의 강화된 보안을 제공하기 위해, 프로세서(440)는 보안 프로세서(442)를 포함할 수 있다. 보안 프로세서(442)는 프로세서(440) 내부에 설치된 독립적인 프로세서이거나, 또는 보안을 요하는 처리를 위해 별도로 정의된 명령어 레지스터들의 집합일 수 있다.
본 발명의 다양한 실시예들에 따라, 프로세서(440)는 지문 등록 시 터치 입력에 대한 정보, 즉, 터치 정보를 지문 정보와 함께 메모리(420)에 저장할 수 있다. 다시 말해, 터치 정보는 지문 정보의 속성 정보로서 저장될 수 있다. 또한, 프로세서(440)는 지문 인증 시 발생하는 터치 정보를 이용하여 검사를 위해 사용될 지문 정보를 선별할 수 있다. 여기서, 지문 센서(430)에 대응하는 영역은 디스플레이(410)의 활성 영역 중 지문 센서(430)가 설치된 영역의 전부 또는 일부를 포함하는 물리적 범위를 포함할 수 있다. 예를 들어, 프로세서(440)는 후술하는 다양한 실시예에 따라 지문 등록 및 인증을 위한 기능들을 제어할 수 있다.
도 4a를 참고하여 설명한 전자 장치(101)의 구성에서, 지문 센서(430)는 생체 센서의 일 예이다. 도 4a는 전자 장치(101)의 기능적 구조를 예시하며, 디스플레이(410) 및 생체 센서(예: 지문 센서(430))는 이하 도 4b 및 도 4b와 같이 배치될 수 있다. 도 4b 및 도 4c는 본 발명의 다양한 실시예에 따른 전자 장치에서 디스플레이 및 생체 센서의 배치의 예들을 도시한다. 도 4b 및 도 4c는, 본 발명의 다양한 실시예에 따른 전자 장치(200, 또는 230)의 일 예이다. 도 4b를 참고하면, 전자 장치(101)는, 디스플레이(410)의 적어도 일부 영역에 생체 정보(예: 지문 정보)를 인식하기 위한 생체 센서(450)(예: 지문 센서(430))가 형성될 수 있다. 생체 센서(450)가 디스플레이(410)의 적어도 일부(예: 디스플레이의 활성 영역(active area) 또는 BM(Black Matrix) 영역)에 형성됨으로써 사용자에 대한 생체 정보 획득을 디스플레이(410)에 대한 사용자 입력을 이용하여 수행할 수 있다. 또한, 도 4c를 참조하면, 전자 장치(230)는, 디스플레이(410)의 적어도 일부에 생체 센서(450)(예: 지문 센서(430))를 포함하여, 생체 센서(450)가 차지하는 영역을 디스플레이(410)로 형성하여 디스플레이의 사이즈를 확장할 수 있다.
생체 센서(450)는 상술한 바와 같이 디스플레이(410)에 통합될 수 있다. 한 실시예에 따라, 생체 센서(450) 및 디스플레이(410)는 이하 도 4d와 같이 결합될 수 있다. 도 4d는 본 발명의 다양한 실시예에 따른 전자 장치에서 디스플레이 및 생체 센서의 결합 구조의 예를 도시한다. 도 4d는, 본 발명의 다양한 실시예에 따른 전자 장치(101)의 디스플레이(410)의 적어도 일부 영역에 사용자의 생체 정보를 감지하기 위한 생체 센서(예: 지문 센서(430)) 실장 구조의 일 예이다. 한 실시예에 따르면, 전자 장치(101)는, 글라스(460), 디스플레이(410), 지문 센서(472), 또는 PCB(printed circuit board)(470)를 포함할 수 있다. 한 실시예에 따르면, 전자 장치(101)는, 생체 센서(450)를 실장하기 위한 공간을 확보하기 위한 구조물(466-1 및 466-2)을 더 포함할 수 있다. 이때, 구조물(466-1 및 466-2)은 지문 센서(472)를 보호하기 위한 실링 구조의 적어도 일부를 형성할 수 있다.
한 실시예에 따르면 디스플레이(410)의 일면(예: 상면)(예: 디스플레이의 일면 위의 별도의 층(464), 또는 디스플레이의 픽셀들(411 내지 413)이 형성된 면의 적어도 일부 영역 등)에 생체 정보를 감지 할 수 있는 생체 센서(예: 지문 센서(430), 지문 센서(472))가 형성될 수 있다. 한 실시예에 따르면, 디스플레이(410)의 다른 면(예: 배면)에 생체 센서(예: 지문 센서(430), 지문 센서(472))가 형성될 수 있다. 생체 센서(예: 지문 센서(430), 지문 센서(472))는, 예를 들면, 광학 방식의 이미지 센서, 초음파 방식의 송/수신 모듈 또는 정전 방식의 송/수신 전극 패턴을 포함할 수 있다.
다양한 실시예에 따르면, 생체 센서(예: 지문 센서(430), 지문 센서(472))는 접착층(462) 및 디스플레이(410) 사이, 또는 글라스(460) 및 접착층(462) 사이에 형성될 수 있다. 한 실시예에 따르면, 생체 센서(예: 지문 센서(430), 지문 센서(472))는 정전 방식의 송/수신 전극 패턴으로 형성될 수 있으며, 디스플레이(410)에서 출력되는 빛의 투과율을 높이기 위해 투명한 전극으로 형성될 수 있다. 한 실시예에 따르면, 생체 센서(예: 지문 센서(430), 지문 센서(472))는 초음파 방식의 송/수신 모듈도 포함할 수 있다.
다양한 실시예에 따르면, 전자 장치는, 디스플레이(410)의 다른 면에 생체 센서(예: 지문 센서(430), 지문 센서(472))가 형성될 수 있다. 생체 센서(예: 지문 센서(472)) 및 디스플레이(410) 사이에는 생체 센서 및 디스플레이(410)간의 충격 완화 또는 이물질 유입을 방지하기 위한 탄성체들(468-1 및 468-2)(예: 스폰지 또는 고무 등)가 형성될 수 있다. 한 실시예에 따르면, 생체 센서(예: 지문 센서(430), 지문 센서(472))는, 이미지 센서를 포함할 수 있다. 예를 들어, 이미지 센서는 광원(예: 디스플레이(410) 또는 IR LED)으로 부터 방출되는 빛(예: 가시 광선, 적외선, 또는 자외선)을 사용자의 지문에 출력하고, 사용자 지문에 반사된 빛을 이미지 센서로 감지할 수 있다.
도 4a를 참고하여 설명한 전자 장치(101)는 하나의 프로세서(440)를 포함할 수 있다. 그러나, 다른 실시예들에 따라, 전자 장치(101)는 둘 이상의 프로세서들을 포함할 수 있다. 둘 이상의 프로세서들은 전력 소비 정도, 담당하는 기능 등을 기준으로 구분될 수 있다. 둘 이상의 프로세서들을 포함하는 전자 장치(101)의 구성이 이하 도 5a 및 도 5b를 참고하여 설명된다.
도 5a는 본 발명의 다양한 실시예에 따른 전자 장치의 다른 기능적 구성을 도시한다. 도 5a는 본 발명의 다양한 실시예에 따른 전자 장치(101)의 구성을 예시한다.
도 5a를 참고하면, 전자 장치(101)는, 예를 들어, 적어도 하나의 프로세서(예: 제1 프로세서(540-1), 또는 제2 프로세서(540-2)), 메모리(520), 디스플레이(510), 또는 적어도 하나의 센서(580)를 포함할 수 있다. 한 실시예에 따르면, 제1 프로세서(540-1)는 전자 장치의 전반적인 구동을 제어할 수 있다. 제2 프로세서(540-2)(예: 저전력 프로세서, 또는 센서 허브(HUB))는 전자 장치(101)가 슬립(sleep) 상태인 경우, 제1 프로세서(540-1)를 웨이크 업(wake up)하지 않고, 적어도 하나의 센서(580)를 통해 획득되는 센서 정보, 또는 사용자로부터 획득되는 입력을 처리할 수 있다. 한 실시예에 따르면, 제2 프로세서(540-2)는 생체 센서(582), 터치 센서(584), 또는 디스플레이(510)를 제1 프로세서(540-1)와는 독립적으로 제어할 수도 있다. 한 실시예에 따른 전자 장치(101)는 메모리(520)를 포함할 수 있다. 메모리(520)는 사용자 어플리케이션 등을 저장하기 위한 일반 영역, 또는 지문 센싱을 위한 정보를 등 보안에 민감한 정보를 저장하기 위한 보안 영역을 포함할 수 있다.
한 실시예에 따르면, 디스플레이(510)는 복수의 픽셀들을 포함하는 디스플레이 패널, 및 디스플레이 패널에 포함된 복수의 픽셀들(514) 중 적어도 일부를 제어하여 표시 정보를 제공하도록 설정된 디스플레이 구동 모듈(예: DDI(Display Driver IC)(512))를 포함할 수 있다. 한 실시예에 따르면, 센서(580)는 디스플레이(510)에 대한 사용자의 지문을 감지하기 위한 생체 센서(582)(예: 지문 센서(530)), 또는 디스플레이(510)에 대한 사용자의 터치를 감지하기 위한 터치 센서(584)를 포함할 수 있다. 한 실시예에 따르면 생체 센서(582)는 디스플레이 모듈에서 출력되는 빛을 광원으로 사용하는 광학식 지문 센서(예: 이미지 센서)를 포함할 수 있다.
다양한 실시예에 따르면, 적어도 하나의 센서(580)는 사용자 입력에 응답하여, DDI(512)을 통해 디스플레이 패널에 포함된 복수의 픽셀들(514)을 구동할 수 있다. 한 실시예에 따르면, 적어도 하나의 센서(580)는, 필요에 따라 디스플레이 패널를 제어할 수 있다. 예를 들어, 생체 센서(582)는, 사용자의 생체 정보를 획득하기 위해 디스플레이 패널을 제어하여 디스플레이로부터 방출되는 빛을 이용할 수 있다.
도 5b는 본 발명의 다양한 실시예에 따른 전자 장치의 또 다른 기능적 구성을 도시한다. 도 5b는 본 발명의 다양한 실시예에 따른 전자 장치(101)의 구성을 예시한다.
도 5b를 참고하면, 전자 장치(101)는 복수 개의 컨트롤러들(예: 제1 제어부(591), 제2 제어부(592), 제3 제어부(593), 제4 제어부(594), 또는 제5 제어부(595) 등)을 포함할 수 있고, 각 컨트롤러는 전자 장치(101)에 포함된 모듈(예: 제1 프로세서(540-1), 제2 프로세서(540-2), DDI(512), 또는 생체 센서(582) 등)에 포함될 수 있다. 예를 들면, 전자 장치(101)는 제1 제어부(591)를 이용하여 제1 프로세서(540-1)를 제어하고, 제2 제어부(592)를 이용하여 제2 프로세서(540-2)를 제어할 수 있다. 또한, 전자 장치(101)는 제3 제어부(593), 제4 제어부(594)를 이용하여, 제3 제어부(593), 제4 제어부(594)를 포함하는 모듈을 제어할 수 있다.
한 실시예에 따르면, 하나의 컨트롤러를 이용하여, 전자 장치(101)의 모듈들을 제어할 수 있다. 예를 들면, 전자 장치(101)는, 메인 컨트롤러(예: 제5 제어부(595))를 이용하여, 복수 개의 컨트롤러(예: 제1 제어부(591), 제2 제어부(592), 제3 제어부(593), 제4 제어부(594))를 제어할 수 있다. 또한 전자 장치(101)는, 메인 컨트롤러를 지정할 수 있고, 지정된 메인 컨트롤러에 의해 다른 컨트롤러들을 제어할 수 있다. 예를 들면, 전자 장치는 제5 제어부(595)에서 제1 제어부(591)로 메인 컨트롤러를 변경/지정할 수 있고, 지정된 메인 컨트롤러를 이용하여, 다른 컨트롤러들을 제어할 수 있다.
한 실시예에 따르면, 하나의 컨트롤러를 이용하여, 전자 장치(101)는 모듈들을 직접적으로 제어할 수 있다. 예를 들면, 전자 장치(101)는 제1 프로세서(540-1)에 포함된 제1 제어부(591)를 이용하여 제2 프로세서(540-2), 메모리(520), 디스플레이(510), 및/또는 적어도 하나의 센서(580) 등을 제어할 수 있다. 또한 다른 실시예에 따르면, 전자 장치(101)는 디스플레이(510)와 적어도 하나의 센서(580)를 하나의 컨트롤러에서 제어할 수 있다. 예를 들면, 디스플레이(510)를 광원으로 사용하는 광학식 지문 센서의 경우, 전자 장치(101)는 디스플레이(510)와 센서(580)를 하나의 컨트롤러를 이용하여 제어할 수 있고, 사용자의 생체 정보를 용이하게 획득할 수 있다.
상술한 전자 장치(101)의 구성에서, 지문 센서(430)는 사용자의 지문에 대한 데이터를 생성할 수 있다. 지문 센서(430)는 광학식, 정전식, 또는 초음파식 등의 방식에 따라 동작할 수 있다. 광학식은 감광 다이오드를 이용하여 손가락 표면의 지문의 이미지를 캡쳐하여 지문을 획득하는 방식이고, 정전식은 지문이 전극에 닿는 부분(마루)은 감지되고, 닿지 않는 부분(골)은 감지되지 않는 원리를 이용하는 방식이며, 초음파식은, 예를 들면, 피에조(piezo)를 이용해 초음파를 생성하고, 지문의 골과 마루에 맞고 반사되는 초음파의 경로차를 이용하여 지문을 획득하는 방식일 수 있다. 이하 각 방식에 대하여 도 6a 내지 도 6c를 참고하여 보다 상세히 설명된다.
도 6a 내지 도 6c는 본 발명의 다양한 실시예들에 따른 전자 장치에서 지문 인식을 위한 지문 센서의 예들을 도시한다.
도 6a는 용량형 센서(capacitive sensor)를 예시한다. 도 6a에 도시된 지문 센서(630)는 마이크로-커패시터 플레이트(micro-capacitor plate)(610)를 포함할 수 있다. 지문 센서(630)는 마이크로-커패시터 플레이트(610) 상의 손가락 표면의 마루(ridge)(611)가 위치한 영역의 접촉점(contact point)(614)의 전압과 골(valley)(612)이 위치한 영역의 공기 영역(613)의 전압 차를 검출할 수 있다. 지문 센서(630)는 전압 차에 대한 정보를 프로세서(640)에 전달하고, 프로세서(640)는 지문 센서로부터 전달된 정보로부터 지문 데이터를 생성할 수 있다.
도 6b는 빛을 이용한 구조를 예시한다. 지문 센서(630)는 광원(635)으로부터 발산되어 글래스 프리즘(636) 및 렌즈(637)를 통과한 빛에 대한 정보에 기초하여 터치가 발생한 영역 중 마루(631)의 위치와 골(632)의 위치를 식별할 수 있다. 보다 구체적으로, 광원(635)은 지문을 검출하기 위한 빛을 발산하고, 광원(635)으로부터 발산된 빛은 글래스 프리즘(636)으로 입사될 수 있다. 여기서, 글래스 프리즘(636)으로 입사한 빛은, 접촉이 발생하지 않고 공기 영역(633)에 도달한 경우, 입사각과 동일한 반사각으로 정반사되고, 빛은 광 경로 A를 형성할 수 있다. 반면, 글래스 프리즘(636)으로 입사한 빛이 접촉점(634)에 도달 한 경우, 빛은 반사되지 아니하고 흡수되어 광 경로 B를 형성하지 못할 수 있다. 공기 영역(633)에서 반사된 빛은 렌즈(637)를 통해 굴절되어 광 검출기(639)에 도달할 수 있다. 광 검출기(639)는 빛이 도달한 영역을 접촉이 발생하지 아니한 골(632)이 위치한 영역으로, 빛이 도달하지 아니한 영역을 접촉이 발생한 마루(631)가 위치한 영역으로 식별할 수 있다. 광 검출기(639)는 CCD(charge coupled device) 또는 CMOS(complementary metal-oxide-semiconductor)를 통해 구현될 수 있다.
도 6c는 초음파(ultrasonic wave)를 이용하는 구조를 예시한다. 도 6c에 도시된 바와 같이, 지문 센서(630)는 적어도 하나의 트랜스듀서(transducer)(655)를 포함할 수 있다. 트랜스듀서(655)는 디스플레이 패널(656)로 초음파 신호(671)를 방출하고, 디스플레이 패널(656)로부터 반사된 초음파 신호를 전기 신호로 변환함으로써 디스플레이 패널(656) 상의 터치 패턴을 식별하기 위한 신호를 생성할 수 있다. 보다 구체적으로, 초음파 신호 중 마루가 위치한 영역(651)에서 반사된 초음파 신호는 골이 위치한 영역(652)에서 반사된 초음파 신호보다 빨리 트랜스듀서(655)로 도달하고, 트랜스듀서(655)는 초음파 신호의 도달 시간의 차이가 반영된 전기 신호를 생성할 수 있다. 트랜스듀서(655)는 생성된 전기 신호를 프로세서(640)로 전달하고, 프로세서(640)는 전달된 신호로부터 지문 정보를 획득할 수 있다.
일반적인 경우, 터치 입력과의 거리에 따라 지문의 검출 민감도가 상대적으로 크게 변할 수 있다. 다시 말해, 지문 센서가 터치 입력이 발생하는 위치보다 일정 거리 이상 떨어져서 설치되는 경우, 검출 민감도가 낮아지게 되고, 일정 수준 이상의 정확도를 갖는 지문이 검출되지 않을 수 있다. 따라서, 보다 정밀한 검출을 위하여, 도 6a와 같이 용량형 센서에 기반한 지문 센서는 디스플레이(610)의 디스플레이 패널 외면과 다른 지문 센서들(예: 광 센서, 초음파 센서)에 비하여 상대적으로 근접한 영역(예를 들면, 50㎛) 이내의 깊이를 갖는 영역)에 위치할 수 있다. 반면, 도 6b의 구조는 빛을 이용하기 때문에, 도 6a의 용량형 센서에 비하여, 디스플레이 패널의 표면으로부터 더 큰 깊이를 갖는 영역에 설치될 수 있다. 예를 들어, 광 검출기(639)는 디스플레이 패널의 표면으로부터 1000㎛ 만큼 떨어진 위치에 설치될 수 있다. 또한, 도 6c의 초음파를 이용한 지문 센서는 도 6a 또는 도 6b와 같은 구조의 지문 센서보다 디스플레이 패널의 표면으로부터 더 깊은 영역에 설치될 수 있다.
상술한 전자 장치(101)의 구성에서, 지문 센서(430)는 디스플레이(410)에 통합된 형태로 설치될 수 있다. 한 실시예에 따르면, 지문 센서(430)는 이하 도 7a 또는 도 7b와 같이 설치될 수 있다. 도 7a 및 도 7b는 본 발명의 다양한 실시예들에 따른 전자 장치에서 지문 센서의 설치 예들을 도시한다.
도 7a를 참고하면, 지문 센서(430)는 디스플레이(410)의 패널의 일부 영역에 위치하고, 전자 장치(101)의 지문 인식은 일부 영역을 통해 수행될 수 있다. 지문 센서(430)가 디스플레이 패널의 전체 영역 대신 일부 영역에만 위치함으로써, 생산 공정을 위한 비용을 절감할 수 있다. 여기서, 디스플레이(410) 상 지문 센서(430)가 위치한 영역은 '지문 센서 영역'이라 지칭될 수 있다. 즉, 지문 센서 영역은 디스플레이(410)의 콘텐트 표시 영역 중 지문을 센싱할 수 있는 영역으로, 실시예에 따라 상기 표시 영역 내의 하나의 서브-영역(sub-region), 다수의 시각적으로 구분된(visibly separate) 서브 영역들, 또는 상기 표시 영역의 전체 영역을 포함할 수 있다.
도 7b를 참고하면, 지문 센서(430)는 디스플레이(410)의 패널의 전체에 걸쳐 설치될 수 있다. 즉, 지문 센서(430)는 다수의 센싱 소자들이 나열된 형태로 설치될 수 있다. 이에 따라, 지문 인식은 디스플레이(410)의 전체 영역을 통해 수행될 수 있다. 지문 센서(430)가 디스플레이(410)의 패널의 일부 영역 대신 전체 영역에 위치함으로써, 디스플레이(410)의 패널 중 사용자가 원하는 영역 어디에서든 지문이 입력될 수 있으므로 사용자 경험이 증대될 수 있다.
상술한 바와 같이, 지문 센서(430)는 디스플레이(410)와 통합된 구조를 가질 수 있다. 지문 센서(430)가 디스플레이(410)에 내장됨으로 인해, 사용자가 디스플레이(410)에 지문을 입력함과 동시에, 자연스럽게 터치 입력이 발생할 수 있다. 즉, 지문 데이터를 획득하는 것과 동시에, 디스플레이(410)의 터치 센서로부터 터치 정보가 제공될 수 있다. 터치 정보와 같은 부가 정보를 이용하여, 다양한 실시예에 따른 전자 장치(101)는 후술하는 절차들을 통해, 지문 인식률을 향상시키고, 매칭 속도를 향상시킬 수 있다.
발명의 다양한 실시예들에서, 전자 장치(101)는 터치 센서를 포함하는 디스플레이, 상기 디스플레이의 표시 영역 중 적어도 일부 영역을 통하여 지문 데이터를 획득하기 위한 지문 센서, 및 프로세서를 포함할 수 있다. 여기서, 상기 프로세서는, 사용자의 지문 등록을 위한 제1 사용자 입력에 반응하여, 상기 제1 사용자 입력으로부터 상기 터치 센서를 이용하여 제1 터치 정보를 획득하고, 상기 지문 센서를 이용하여 제1 지문 데이터를 획득하고, 상기 제1 터치 정보에 기초하여 상기 제1 지문 데이터를 지문 정보로 등록하고, 상기 등록하는 동작은 상기 제1 터치 정보에 기초하여 상기 제1 지문 데이터를 분류하는 동작을 포함하고, 상기 사용자의 지문 인증을 위한 제2 사용자 입력에 반응하여, 상기 제2 사용자 입력으로부터 상기 터치 센서를 이용하여 제2 터치 정보를 획득하고, 상기 지문 센서를 이용하여 제2 지문 데이터를 획득하고, 상기 제2 터치 정보에 기초하여 상기 지문 정보 중 비교를 위한 후보군을 선택하고, 상기 후보군에 포함되는 지문 데이터를 상기 제2 지문 데이터와 비교하도록 설정될 수 있다.
여기서, 상기 프로세서는, 상기 제1 터치 정보를 이용하여 상기 제1 지문 데이터 발생 시 상기 전자 장치를 파지한 손을 식별하고, 상기 손에 기초하여 상기 제1 지문 데이터를 분류하도록 설정될 수 있다. 또한, 상기 프로세서는, 상기 제1 터치 정보에 포함된 곡률에 기초하여, 일반 터치 및 팁(tip) 터치를 구분하도록 설정될 수 있다. 상기 프로세서는, 상기 제1 터치 정보에 포함된 면적에 기초하여, 동일 손가락에 의한 지문 데이터를 다수의 그룹들로 분류하도록 설정될 수 있다.
본 발명의 다양한 실시예들에서, 전자 장치(101)는 터치 센서를 포함하는 디스플레이, 상기 디스플레이의 표시 영역 중 적어도 일부 영역을 통하여 지문 데이터를 획득하기 위한 지문 센서, 및 프로세서를 포함할 수 있다. 여기서, 상기 프로세서는, 지문 등록을 위해 발생하는 터치 입력에 대한 정보를 저장하고, 상기 터치 입력에 대한 정보를 이용하여 지문 인증 시 일치 여부 검사를 위한 후보군을 결정하도록 설정될 수 있다.
또한, 상기 프로세서는, 상기 터치 입력에 대한 정보에 기초하여, 상기 지문 등록을 위해 획득한 지문 데이터를 분류하도록 설정될 수 있다. 여기서, 상기 후보군은, 상기 지문 인증을 위해 발생하는 터치 입력에 기초하여 결정될 수 있다. 상기 프로세서는, 상기 지문 인증을 위해 제1 지문 데이터를 획득하고, 상기 후보군에 상기 제1 지문 데이터와 일치하는 지문 데이터가 존재하지 아니하면, 다른 후보군을 결정하도록 설정될 수 있다.
본 발명의 다양한 실시예들에서, 전자 장치(101)는 컨텐트를 표시하기 위한 표시 영역에 터치 센서를 포함하는 디스플레이, 상기 표시 영역의 적어도 일부 영역에 형성된 지문 센서, 및 프로세서를 포함할 수 있다. 여기서, 상기 프로세서는, 상기 표시 영역의 적어도 일부 영역을 통해 하나 이상의 사용자 입력들을 획득하고, 상기 획득하는 동작은 상기 지문 센서를 이용하여 상기 하나 이상의 사용자 입력들에 대한 하나 이상의 지문 데이터 및 상기 사용자 입력들에 대한 하나 이상의 터치 정보를 획득하는 동작을 포함하고, 상기 하나 이상의 터치 정보 및 상기 하나 이상의 지문 데이터를 상기 사용자에 대응하는 하나 이상의 지문 정보로 등록하도록 설정될 수 있다.
상기 프로세서는, 상기 사용자에 대한 인증을 수행하기 위한 사용자 입력을 상기 표시 영역의 적어도 일부 영역을 통해 획득하고, 상기 사용자 입력을 획득하는 동작은 상기 사용자 입력에 대한 지문 데이터 및 상기 사용자 입력에 대한 터치 정보를 획득하는 동작을 포함하도록 설정될 수 있다. 상기 프로세서는, 상기 터치 정보에 적어도 기반하여, 상기 하나 이상의 터치 정보 중 상기 터치 정보에 대응하는 적어도 하나의 터치 정보를 선택하도록 설정될 수 있다. 상기 프로세서는, 상기 하나 이상의 지문 정보 중 상기 지문 데이터에 대응하는 적어도 하나의 지문 정보를 상기 사용자에 대한 인증을 위한 적어도 하나의 후보 지문으로 지정하도록 설정될 수 있다. 상기 프로세서는, 상기 적어도 하나의 후보 지문과 상기 지문 데이터를 비교하도록 설정될 수 있다.
상기 디스플레이는, 빛이 투과할 수 있는 영역을 포함하며, 상기 프로세서는, 상기 빛이 투과되는 영역을 통해 상기 하나 이상의 지문 데이터를 획득하도록 설정될 수 있다. 상기 지문 센서는, 상기 디스플레이의 활성 영역(active area)에 배치될 수 있다. 상기 터치 정보는, 사용자 입력의 면적(area), 장축(major) 길이, 단축(minor) 길이, 방향(orientation), 각도(angle), 곡률, 압력(pressure), 위치 중 적어도 하나를 포함할 수 있다.
상기 프로세서는, 상기 하나 이상의 터치 정보를 상기 하나 이상의 지문 정보의 속성 정보로서 저장하도록 설정될 수 있다. 상기 프로세서는, 상기 하나 이상의 지문 정보를 일반 메모리와 다른 보안 레벨을 가지는 보안 메모리에 저장하도록 설정될 수 있다. 상기 프로세서는, 상기 표시 영역 중 상기 지문 센서가 형성된 제1 영역 및 상기 제1 영역에 인근하는 제2 영역을 통해 상기 하나 이상의 터치 정보를 획득하도록 설정될 수 있다. 상기 프로세서는, 상기 하나 이상의 터치 정보에 포함되는 면적, 위치, 폭, 곡률, 방향, 각도 중 적어도 하나를 인증을 위해 획득한 사용자 입력의 터치 정보와 비교하도록 설정될 수 있다.
도 8은 본 발명의 다양한 실시예에 따른 전자 장치에서 지문을 등록 및 인증하기 위한 흐름도를 도시한다. 도 8은 전자 장치(101)의 동작 방법을 예시한다.
도 8을 참고하면, 동작 801에서, 전자 장치(101)(예: 프로세서(440))는 지문 등록 시 터치 정보 및 지문 정보를 저장할 수 있다. 여기서, 터치 정보는 지문 정보를 구성하는 지문 데이터를 획득할 때 발생한 터치 입력에 대한 정보를 포함할 수 있다. 즉, 전자 장치(101)에 구비된 지문 센서(430)는 디스플레이(410)와 통합된 구조를 가지며, 지문 센서(430)를 통한 지문 입력 시, 디스플레이(410) 상에 터치 입력이 발생할 수 있다. 이에 따라, 프로세서(440)는 지문 입력 시 터치 센서를 이용하여 터치 정보를, 지문 센서(430)를 이용하여 지문 데이터를 획득하고, 함께 저장할 수 있다. 이때, 프로세서(440)는, 지문 데이터로서, 지문 이미지 그대로 저장할 수 있고, 압축된 지문 이미지를 저장할 수 있고, 지문 이미지에서 추출된 특징점을 저장할 수 있고, 또는, 원래의 지문 이미지를 복원할 수 없도록 변환된 형태로 저장할 수 있다. 또한, 프로세서(440)는 터치 IC로부터 제공되는 로우 데이터(raw data)를 모두 저장할 수 있고, 이진수(binary) 형태 또는 자연수로 표현된 면적의 레벨을 저장할 수 있고, 압력 정보를 저장할 수 있고, 또는, 터치 입력으로부터 추출되는 특징을 나타내는 특징 템플릿(feature template)을 저장할 수 있다. 이때, 지문 정보는 높은 보안 레벨을 가지는 저장 공간(예: 보안 메모리(422))에 저장될 수 있다. 다시 말해, 프로세서(440)는 지문 정보를 등록할 수 있다.
동작 803에서, 전자 장치(101)(예: 프로세서(440))는 지문 인증 시 터치 정보에 기초하여 검사를 위한 후보군을 선택하고 비교할 수 있다. 여기서, 터치 정보는 지문 인증을 위한 지문 입력 시 발생한 터치 입력에 대한 정보를 포함할 수 있다. 즉, 프로세서(440)는 지문 인증을 위한 지문 입력 시 발생한 터치 입력과 일정 수준 이상의 유사성을 가지는 터치 정보에 대응하는 지문 정보에 대하여, 비교 동작을 수행할 수 있다. 다시 말해, 후보군은 지문 인증을 위해 발생하는 터치 입력에 기초하여 결정될 수 있다. 여기서, 비교 동작은 특징점의 동일/유사성 판단, 특징점의 위치 동일/유사성 판단, 특징점들 간 위치 관계의 동일/유사성 판단 중 적어도 하나를 포함할 수 있다. 여기서, 특징점은 지문의 고유한 시작점, 끝점, 중심점, 삼중점, 분기점 중 적어도 하나를 포함할 수 있다. 다시 말해, 프로세서(440)는 터치 정보를 이용하여 선택된 후보군에 대한 지문 인증을 수행할 수 있다.
본 발명의 다양한 실시예들에서, 전자 장치의 동작 방법은, 터치 센서 및 표시 영역 중 적어도 일부 영역을 통하여 지문 데이터를 획득하기 위한 지문 센서를 포함하는 디스플레이를 통해, 지문 등록을 위해 발생하는 터치 입력에 대한 정보를 저장하는 동작, 및 상기 터치 입력에 대한 정보를 이용하여 지문 인증 시 일치 여부 검사를 위한 후보군을 결정하는 동작을 포함할 수 있다. 여기서, 상기 후보군을 결정하는 동작은, 상기 터치 입력에 대한 정보에 기초하여, 상기 지문 등록을 위해 획득한 지문 데이터를 분류하는 동작을 포함할 수 있다. 상기 후보군은, 상기 지문 인증을 위해 발생하는 터치 입력에 기초하여 결정될 수 있다.
도 8을 참고하여 설명한 실시예와 같이, 전자 장치(101)는 지문 입력 시 발생하는 터치 입력에 대한 정보를 저장하고, 저장된 터치 입력에 대한 정보, 즉, 터치 정보를 인증 시 활용할 수 있다. 이에 따라, 지문 인증 시 비교 동작의 대상이 되는 지문 데이터의 양이 감소함으로써, 소요 시간 및 소비 전력이 감소할 수 있다. 이때, 지문 등록 동작은 도 9a와 같은 절차를 포함할 수 있다.
도 9a는 본 발명의 다양한 실시예에 따른 전자 장치에서 지문을 등록하기 위한 흐름도를 도시한다. 도 9a는 전자 장치(101)의 동작 방법을 예시한다.
도 9a를 참고하면, 동작 901에서, 전자 장치(101)(예: 프로세서(440))는 터치 센서를 이용하여 터치 입력을 감지할 수 있다. 이때, 터치 입력은 지문 센서가 위치한 영역 및 이의 인근 영역에서 감지될 수 있다. 즉, 터치 입력은 지문 센서가 위치한 영역 외의 영역에서도 발생될 수 있으며, 이에 따라, 프로세서(440)는 지문 센서가 위치한 영역 및 인근 영역에서 터치 입력을 감지할 수 있다. 터치 입력은 디스플레이(410)에 포함된 터치 센서에 의한 측정 값들의 변화에 의해 감지될 수 있다. 예를 들어, 측정 값들의 변화는 도 9b와 같을 수 있다. 도 9b를 참고하면, 터치 센서는 다수의 측정점들에서 측정 값들을 생성할 수 있다. 터치 IC는 측정 값들을 프로세서(440)로 제공한다. 일부 측정점들에서 상대적으로 높은 값들이 측정되면, 프로세서(440)는 해당 위치에서의 터치 입력이 발생함을 감지할 수 있다. 이때, 측정 값들의 변화 정도 및 범위에 따라, 다양한 터치 입력들 902, 904, 906, 908의 면적 등이 구분될 수 있다.
동작 903에서, 전자 장치(101)(예: 프로세서(440))는 지문 데이터를 획득할 수 있다. 전자 장치(101)에 구비된 지문 센서(430)는 디스플레이(410)의 표시 영역 중 적어도 일부 영역에 설치되므로, 지문 센서(430)가 설치된 영역에서 터치 입력이 발생하면, 지문에 대한 센싱이 수행될 수 있다. 즉, 프로세서(440)는 지문 센서(430)를 통해 사용자의 지문을 센싱함으로써, 지문 데이터를 획득할 수 있다. 여기서, 지문 데이터는, 지문에 대한 이미지, 특징점에 대한 정보, 특징점들 간 관계(예: 거리 등)에 대한 정보 중 적어도 하나를 포함할 수 있다.
동작 905에서, 전자 장치(101)(예: 프로세서(440))는 터치 정보 및 지문 데이터를 저장할 수 있다. 지문 데이터를 획득할 때 터치 입력이 발생하였으므로, 지문 데이터에 대응하는 터치 정보가 존재할 수 있다. 따라서, 프로세서(440)는 지문 데이터 및 지문 데이터에 대응하는 터치 정보를 저장할 수 있다. 예를 들어, 프로세서(440)는 일반적인 데이터를 위한 저장 공간과 다른 별도의 저장 공간(예: 보안 메모리(422)에 지문 데이터 및 터치 정보를 저장할 수 있다.
도 9a 및 도 9b를 참고하여 설명한 실시예와 같이, 전자 장치(101)는 지문 센싱 시 발생한 터치 정보를 지문 데이터와 함께 저장할 수 있다. 한 실시예에 따라, 함께 저장되는 터치 정보는 지문 데이터를 분류하기 위해 활용될 수 있다. 이하 도 10a를 참고하여, 터치 정보를 이용한 지문 데이터의 저장 절차가 설명된다.
도 10a는 본 발명의 다양한 실시예에 따른 전자 장치에서 터치 정보에 기초하여 지문 데이터를 저장하기 위한 흐름도를 도시한다. 도 10a는 전자 장치(101)의 동작 방법을 예시한다.
도 10a를 참고하면, 동작 1001에서, 전자 장치(101)(예: 프로세서(440))는 터치 정보에 기초하여 지문 데이터를 분류할 수 있다. 지문 데이터의 분류를 위한 구체적인 기준은 다양한 실시예들에 따라 다르게 정의될 수 있다. 예를 들어, 지문 데이터는 터치 입력의 면적, 위치, 폭, 곡률, 방향, 각도 중 적어도 하나 또는 둘 이상의 조합에 의해 분류될 수 있다.
한 실시예에 따라, 지문 데이터는 터치 입력의 면적에 기초하여 분류될 수 있다. 예를 들어, 도 10b와 같이, 터치 입력의 면적을 레벨로서 평가하고, 지문 데이터가 면적의 레벨에 따라 그룹1(902) 또는 그룹2(904)로 분류될 수 있다. 이때, 동일한 손가락이더라도 터치 상태에 따라 면적이 달라질 수 있으므로, 동일한 손가락의 지문 데이터가 서로 다른 그룹들로 분류될 수 있다. 즉, 프로세서(440)는, 터치 정보에 포함된 면적에 기초하여, 동일 손가락에 의한 지문 데이터를 다수의 그룹들로 분류할 수 있다.
다른 실시예에 따라, 지문 데이터는 면적, 폭(width)(예: 장축 길이 또는 단축 길이), 곡률 중 적어도 하나에 기초하여 분류될 수 있다. 예를 들어, 도 10c와 같이 터치 입력들이 발생한 경우, 이하 <표 1>, <표 2>, <표 3>, <표 4>와 같이 터치 정보가 생성될 수 있다.
항목 값
면적 27~34 mm2
폭 11.2~11.4 mm
곡률 (단축 대비 장축의 비율) 4.5~4.8
<표 1>은 도 10b의 제1 터치 입력(912) 또는 제2 터치 입력(914)에 대한 터치 정보의 예시이다.
항목 값
면적 14~20 mm2
폭 11.2~11.4 mm
곡률 (단축 대비 장축의 비율) 4.5~4.8
<표 2>는 도 10b의 제3 터치 입력(922) 또는 제4 터치 입력(924)에 대한 터치 정보의 예시이다.
항목 값
면적 21~24 mm2
폭 8.9~9.6 mm
곡률 (단축 대비 장축의 비율) 3.4~4.0
<표 3>은 도 10b의 제5 터치 입력(932) 또는 제6 터치 입력(934)에 대한 터치 정보의 예시이다.
항목 값
면적 12~16 mm2
폭 8.6~9.0 mm
곡률 (단축 대비 장축의 비율) 3.0~3.5
<표 4>는 도 10b의 제7 터치 입력(942) 또는 제8 터치 입력(944)에 대한 터치 정보의 예시이다.
<표 1> 내지 <표 4>를 참고하면, 제3 터치 입력(922), 제4 터치 입력(924), 제7 터치 입력(942), 제8 터치 입력(944)의 곡률은 제1 터치 입력(912), 제2 터치 입력(914), 제5 터치 입력(932), 제6 터치 입력(934)의 곡률보다 작다. 이에 따라, 제3 터치 입력(922), 제4 터치 입력(924), 제7 터치 입력(942), 제8 터치 입력(944)은 손가락 끝을 이용한 팁(tip) 터치로, 제1 터치 입력(912), 제2 터치 입력(914), 제5 터치 입력(932), 제6 터치 입력(934)은 손가락의 넓은 면을 이용한 일반 터치로 평가될 수 있다. 이때, 일반 터치들 중, 제1 터치 입력(912), 제2 터치 입력(914)의 면적이 제5 터치 입력(932), 제6 터치 입력(934)의 면적보다 크므로, 제5 터치 입력(932), 제6 터치 입력(934)은 '작음'의 그룹으로 분류되고, 제1 터치 입력(912), 제2 터치 입력(914)은 '큼'의 그룹으로 분류될 수 있다.
또 다른 실시예에 따라, 지문 데이터는 손가락 상 지문 데이터의 위치에 기초하여 분류될 수 있다. 터치 정보를 통해, 프로세서(440)는 터치 입력의 범위 및 터치 센서의 상대적 위치 관계를 파악할 수 있다. 예를 들어, 도 10d와 같이, 제1 지문 데이터(952)는 지문의 상단에서, 제2 지문 데이터(954)는 지문의 중단에서, 제3 지문 데이터(956)는 지문의 하단에서 획득될 수 있다. 따라서, 지문 데이터가 획득된 위치를 적어도 둘(2) 이상의 범위들(예: 상, 중, 하)로 구분하고, 지문 데이터에 대응하는 위치 범위에 따라 지문 데이터가 분류될 수 있다.
이후, 동작 1003에서, 전자 장치(101)(예: 프로세서(440))는 분류 결과에 따라 지문 데이터를 저장할 수 있다. 프로세서(440)는 메모리(420) 내에 지문 데이터를 저장하며, 이때, 대응하는 터치 정보가 지문 데이터의 속성으로서 함께 저장될 수 있다. 나아가, 지문 데이터는 지문 정보로서 저장될 수 있으며, 이 경우, 일반 메모리와 다른 보안 레벨을 가지는 별도의 메모리(예: 보안 메모리(422))에 저장될 수 있다.
도 10a 내지 도 10d를 참고하여 설명한 실시예와 같이, 지문 데이터가 터치 정보에 기초하여 분류될 수 있다. 즉, 지문 등록 절차에서 획득한 터치 정보에 기초하여 특정 손가락에 대한 터치 정보(예: 면적)가 함께 저장될 수 있다. 구체적으로, 터치 정보에 기초하여 특정 손가락의 폭, 곡률, 면적 분포 등이 판단될 수 있고, 전자 장치(101)는 이러한 터치 정보에 기초하여 어느 손가락인지 구분할 수 있다. 경우에 따라, 손가락 별 특징이 명확하면, 터치 정보는 5개의 손가락들로 모두 구분될 수 있고, 또는, 터치 정보는 대, 중, 소 등 3개 단계들로 구분될 수 있다.
추가적으로, 터치 정보를 이용하여 지문 데이터를 보상(compensation)하는 동작이 더 수행될 수 있다. 지문 데이터의 보상 절차가 이하 도 11을 참고하여 설명된다.
도 11은 본 발명의 다양한 실시예에 따른 전자 장치에서 터치 정보에 기초하여 지문 데이터를 보상하기 위한 흐름도를 도시한다. 도 11은 전자 장치(101)의 동작 방법을 예시한다.
도 11을 참고하면, 동작 1101에서, 전자 장치(101)(예: 프로세서(440))는 터치 정보를 이용하여 손가락 방향을 확인할 수 있다. 손가락의 방향은 터치 센서(430)를 중심으로, 터치 입력의 장축 또는 단축의 상대적 각도로서 정의될 수 있다. 즉, 프로세서(440)는 터치 입력의 장축 또는 단축을 확인하고, 단축 또는 단축 및 터치 센서의 특정 일축 간 각도를 계산할 수 있다.
동작 1103에서, 전자 장치(101)(예: 프로세서(440))는 손가락 방향에 기초하여 지문 데이터를 보상할 수 있다. 다시 말해, 프로세서(440)는 지문 데이터를 기준 방향에 일치하도록 회전함으로써, 지문 데이터를 보상할 수 있다. 즉, 프로세서(440)는 지문 데이터를 기준 방향에 정렬할 수 있다. 이에 따라, 추후 지문 인증 시, 동일 방향으로 정렬된 지문 데이터 간 비교 동작이 수행될 수 있다.
도 12는 본 발명의 다양한 실시예에 따른 전자 장치에서 터치 정보를 이용하여 인증을 수행하기 위한 흐름도를 도시한다. 도 12는 전자 장치(101)의 동작 방법을 예시한다.
도 12를 참고하면, 동작 1201에서, 전자 장치(101)(예: 프로세서(440))는 터치 정보 및 지문 데이터를 획득할 수 있다. 다시 말해, 지문 인증을 위해 터치 센서 영역에서 터치 입력을 발생함에 따라, 지문 센서(430)는 지문을 센싱하기 위한 동작을 수행하고, 디스플레이(410) 내의 터치 센서는 터치 입력에 대한 측정 값을 생성할 수 있다. 그리고, 프로세서(440)는 지문 센서(430) 및 터치 센서에 의해 생성된 지문 데이터 및 터치 정보를 수신할 수 있다. 동작 1201에서 획득된 터치 정보는, 등록된 지문 정보에서 이후 검사를 위한 지문 데이터, 즉, 후보군을 선택하기 위해 사용될 수 있다.
동작 1203에서, 전자 장치(101)(예: 프로세서(440))는 터치 정보에 대응하는 후보군을 결정할 수 있다. 구체적으로, 프로세서(440)는 각 후보군에 대응하는 터치 정보를 확인하고, 동작 1201에서 획득된 터치 정보와 가장 유사한 터치 정보에 대응하는 후보군을 선택할 수 있다. 이때, 터치 정보의 유사성은 터치 입력의 면적, 곡률 등에 기초하여 판단될 수 있다. 즉, 프로세서(440)는 지문 인증을 위해 검사할 후보 지문 정보를 선별할 수 있다.
동작 1205에서, 전자 장치(101)(예: 프로세서(440))는 후보군과 지문 데이터를 비교할 수 있다. 즉, 프로세서(440)는 후보군에 포함되는 지문 정보 및 지문 데이터 간 유사도를 측정한다. 여기서, 유사도의 측정을 위해, 국소적 특징(local feature)에 기초한 알고리즘, 전역 특징(global feature)에 기초한 알고리즘, 제곱 차의 합(sum of squared difference)에 기초한 알고리즘, 위상 상관(phase correlation)에 기초한 알고리즘, 또는 이들 중 둘 이상의 결합에 의한 알고리즘이 사용될 수 있다.
동작 1207에서, 전자 장치(101)(예: 프로세서(440))는 후보군 및 지문 데이터의 일치 여부를 판단할 수 있다. 다시 말해, 전자 장치(101)는 후보군에 포함된 지문 정보 중 동작 1201에서 획득된 지문 데이터와 일정 수준 이상의 유사도를 가지는 적어도 하나의 지문 이미지가 존재하는지 판단할 수 있다.
만일, 후보군 및 지문 데이터가 일치하면, 동작 1209에서, 전자 장치(101)(예: 프로세서(440))는 인증 성공을 판단할 수 있다. 즉, 프로세서(440)는 인증의 성공을 선언하고, 이후 필요한 동작(예: 보안 데이터의 처리 등)을 수행할 수 있다. 예를 들어, 인증이 전자 결재에 앞서 사용자 확인을 위해 실행된 경우, 프로세서(440)는 전자 결재를 위한 기능들을 수행할 수 있다.
반면, 후보군 및 지문 데이터가 일치하지 아니하면, 동작 1211에서, 전자 장치(101)(예: 프로세서(440))는 모든 후보군을 검사하였는지 판단할 수 있다. 즉, 프로세서(440)는 등록된 모든 지문 정보를 동작 1201에서 획득된 지문 데이터와 비교하였는지 판단할 수 있다. 다시 말해, 프로세서(440)는 검사할 지문 정보가 남아있는지 확인할 수 있다.
만일, 모든 후보군을 검사하지 아니하였으면, 동작 1213에서, 전자 장치(101)(예: 프로세서(440))는 다른 후보군을 결정할 수 있다. 다른 후보군은 터치 정보의 유사성에 기초하여 결정될 수 있다. 예를 들어, 이미 검사된 후보군을 제외한 나머지 적어도 하나의 후보군 중, 프로세서(440)는 동작 1201에서 획득된 터치 정보와 가장 유사한 터치 정보에 대응하는 후보군을 선택할 수 있다.
반면, 모든 후보군을 검사하였으면, 동작 1215에서, 전자 장치(101)(예: 프로세서(440))는 인증 실패를 판단할 수 있다. 즉, 프로세서(440)는 인증의 실패를 선언하고, 필요한 후속 동작을 수행할 수 있다. 예를 들어, 프로세서(440)는 디스플레이(410)를 통해 인증 실패를 알리는 화면을 표시할 수 있다. 나아가, 프로세서(440)는 지문의 재입력을 요청하는 화면을 표시함으로써, 재인증을 요구할 수 있다.
도 12을 참고하여 설명한 실시예와 같이, 지문 인식 시, 전자 장치(101)는 터치 센서로부터 접촉 영역에 대한 터치 정보를 획득하고, 후보군을 결정할 수 있다. 예를 들어, 전자 장치(101)는 면적 레벨 0에 대한 손가락인지, 아니면 대(大)에 대응하는 손가락인지를 파악하고, 기 저장된 지문 정보 중 매칭 알고리즘을 먼저 수행할 후보군을 결정할 수 있다. 후보군에 대한 매칭 알고리즘을 수행한 결과, 인증이 완료되지 아니하는 경우, 전자 장치(101)는 다음 후보군과 매칭 알고리즘을 수행할 수 있다. 이에, 다른 실시예에 따른 지문 인증 절차가 이하 도 13를 참고하여 설명된다.
도 13은 본 발명의 다양한 실시예에 따른 전자 장치에서 터치 정보를 이용하여 인증을 수행하기 위한 다른 흐름도를 도시한다.
도 13을 참고하면, 동작 1301에서, 전자 장치(101)(예: 프로세서(440))는, 디스플레이(410)의 지문 센서(430)가 내장된 위치에 대한 사용자 입력을 수신할 수 있다. 구체적으로, 프로세서(440)는 디스플레이(410)에 지문 인증을 위한 UI(user interface)를 표시할 수 있다. 여기서, UI는 지문 인증을 위한 지문 입력을 요구하며, 지문 센서(430)가 위치하는 영역의 일부 또는 전부에 표시될 수 있다. 이에 따라, 사용자는 터치 센서 및 지문 센서(430)가 동시에 존재하는 디스플레이(410)상의 UI 표시 영역을 터치하게 되고, 프로세서(440)는 사용자 입력을 수신할 수 있다.
동작 1303에서, 전자 장치(101)(예: 프로세서(440))는 지문 센서(430)를 이용하여 사용자 입력으로부터 지문 데이터를 획득할 수 있다. 다시 말해, 디스플레이(410)에 표시되는 지문 인증을 위한 UI에 따라 사용자 지문 입력이 발생하면, 지문 센서(430)는, 사용자 입력에 근거하여 지문에 대한 측정 값들을 생성하고, 프로세서(440)로 제공할 수 있다. 여기서, 지문 데이터는 지문의 이미지 및 특징점 중 적어도 하나를 추출함으로써 획득될 수 있다.
동작 1305에서, 전자 장치(101)(예: 프로세서(440))는 디스플레이(410)의 터치 센서를 이용하여 사용자 입력의 터치 정보를 획득할 수 있다. 즉, 디스플레이(410)에 표시되는 지문 인증을 위한 UI에 따라 사용자의 터치 입력이 발생하면, 터치 센서는 터치 입력에 대한 측정 값들을 생성하고, 프로세서(440)로 제공할 수 있다. 여기서, 터치 센서는 디스플레이(410)의 전부 또는 일부 영역에 설치되며, 터치 정보는 터치 입력에 대한 좌표, 장축 길이, 단축 길이, 면적, 각도, 압력, 위치 중 적어도 하나를 포함할 수 있다.
동작 1307에서, 전자 장치(101)(예: 프로세서(440))는 터치 정보에 기초하여 메모리(420)에 저장된 복수의 지문 정보들로부터 터치 정보에 대응하는 후보군을 선택할 수 있다. 다시 말해, 프로세서(440)는 이미 저장되어 있는 지문 정보의 후보군들 중에서 터치 정보와 가장 유사한 터치 정보와 함께 저장된 후보군을 결정할 수 있다. 한 실시예에서, 후보군은 손가락의 면적에 따라 선택될 수 있다. 구체적으로, 선택된 후보군은 면적의 레벨들(예: 대, 중, 소)에 따라 분류된 후보군들 중 하나일 수 있다. 또 다른 실시예에서, 후보군은 손가락의 위치에 따라 선택될 수 있다. 구체적으로, 선택된 후보군은 손가락 지문의 상, 중, 하에 따라 분류된 후보군들 중 하나일 수 있다. 여기서, 지문 정보는 지문 등록을 통해 메모리(420)에 기 저장되어 있는 지문들을 의미할 수 있다.
동작 1309에서, 전자 장치(101)(예: 프로세서(440))는 후보군을 대상으로 지문 데이터에 일치하는 지문이 있는지 비교하여 인증을 수행할 수 있다. 즉, 프로세서(440)는 매칭 알고리즘에 따라 후보군들의 우선순위를 결정하고, 결정된 후보군에 따라 저장된 지문 정보를 사용자 입력에 의한 지문 데이터와 비교할 수 있다. 지문 데이터와 지문 정보가 일치하면, 프로세서(440)는 인증의 성공을 판단할 수 있다.
도 14는 본 발명의 다양한 실시예에 따른 전자 장치에서 지문을 등록 및 인증하기 위한 다른 흐름도를 도시한다. 도 14는 전자 장치(101)의 동작 방법을 예시한다.
도 14를 참고하면, 동작 1401에서, 전자 장치(101)(예: 프로세서(440))는 초기 지문 등록 시, 터치 센서의 측정 값 변화량을 기반으로 손가락 정보를 같이 입력할 수 있다. 예를 들어, 프로세서(440)는 디스플레이(410)를 통해 지문 등록을 위한 UI를 표시할 수 있다. 지문 등록을 위한 UI에 따른 사용자 입력에 의해, 프로세서(440)는 터치 정보를 획득할 수 있다. 구체적으로, 터치 IC는 터치 입력에 따른 측정 값 변화량의 로우 데이터(raw data)를 획득하고, 문턱 값(threshold) 이상의 피크(peak)를 검출하고, 피크의 주변으로부터 좌표 계산 영역을 산출하고. 좌표 영역을 통해 좌표들(예: X 좌표 및 Y 좌표)을 계산할 수 있다. 그리고, 터치 IC는 터치 입력에 ID(identifier)를 부여하고, 터치 입력의 발생을 알리는 좌표 이벤트(event)를 프로세서(440)로 보고할 수 있다. 이어, 지문 등록으로서, 지문 센서(430)에 의해 획득된 지문 데이터 및 터치 정보가 함께 메모리(420)에 저장될 수 있다. 이후, 이하 동작 1403부터, 지문 인증을 위한 동작들이 수행될 수 있다.
동작 1403에서, 전자 장치(101)(예: 지문 센서(430))는 사용자의 지문을 인식할 수 있다. 즉, 지문 센서(430)는 사용자 입력의 지문 데이터를 획득할 수 있다. 지문 인증을 위한 UI 영역에 따라 사용자의 입력이 발생하면, 지문 센서(430)는 지문 데이터의 이미지 및 특징점 중 적어도 하나를 추출할 수 있다.
동작 1405에서, 전자 장치(101)(예: 프로세서(440))는 지문 인증 시, 손가락 지문의 위치를 확인할 수 있다. 구체적으로, 프로세서(440)는 터치 IC로부터 제공되는 터치 입력에 대한 데이터에 기초하여 터치 입력의 위치를 확인하고, 지문 센서(430)에 대한 상대적인 터치 입력의 위치를 판단할 수 있다. 이에 따라, 프로세서(440)는 터치 정보에 근거하여 손가락 지문의 어느 위치에 해당하는지 확인할 수 있다.
동작 1407에서, 전자 장치(101)(예: 프로세서(440))는 기 저장된 지문 정보 중 해당 위치에 해당하는 지문의 후보군부터 비교를 수행할 수 있다. 다시 말해, 프로세서(440)는 메모리(420)에 기 저장되어 있는 지문 정보들 중 동작 1403에서 인식한 지문과 동일한 위치의 지문 정보를 후보로서 선택하고, 선택된 후보 및 동작 1403에서 인식한 지문과 일치하는지 비교할 수 있다. 예를 들어, 터치 센서로부터 획득된 터치 영역 중 지문 센서(430)를 통해 획득된 지문이 전체 터치 영역 중 상단에 해당하는 경우, 프로세서(440)는 지문 등록 과정에서 상단에 해당하는 지문 정보와 비교함으로써, 인식 속도를 향상시킬 수 있다.
동작 1409에서, 프로세서(440)(예: 프로세서(440))는 1차 후보군의 불일치 시, 2차 후보군 지문 정보를 검사할 수 있다. 즉, 프로세서(440)는 1차 후보군의 지문 정보와 사용자 입력의 지문 데이터가 불일치하면, 2차 후보군의 지문 정보와 사용자 입력의 지문 데이터를 비교하여 인증을 수행할 수 있다. 여기서 2차 후보군은 1차 후보군 다음으로 지문 데이터와 가장 유사한 지문 정보를 가지는 후보군을 의미할 수 있다. 후보군의 지문 정보와 지문 데이터가 일치하면, 프로세서(440)는 인증의 성공을 판단할 수 있다.
도 14을 참고하여 설명한 실시예와 같이, 지문 등록 및 인증이 수행될 수 있다. 지문 등록 및 지문 인증 시, 각 절차를 위한 UI가 표시될 수 있다. 이때, 지문 등록 시, UI는 특정 손가락에 대한 지문 입력을 요구할 수 있다. 이 경우, 전자 장치(101)는 입력되는 지문을 요구된 손가락에 대한 지문으로 판단할 수 있다. 따라서, 이후 인증 시 동일한 터치 정보에 대응하는 지문 데이터가 획득되면, 전자 장치(101)의 내부에서, 예를 들어, 터치 IC에서 프로세서(440)로 해당 손가락에 대한 지시 신호(예: 플래그(flag))가 전달될 수 있다.
상술한 다양한 실시예들에 따라, 터치 정보를 이용한 지문 등록 및 인증이 수행될 수 있다. 다양한 실시예들에서, 터치 정보는 손가락에 대한 정보를 제공할 수 있다. 다른 실시예에 따라, 지문 입력 시 전자 장치(101)를 파지한 손에 대한 정보가 활용될 수 있다. 즉, 전자 장치(101)는 지문 입력 시 전자 장치(101)를 파지한 손이 어느 손인지 식별하고, 왼손에 대한 입력인지 또는 오른손에 대한 입력인지를 함께 저장할 수 있다. 파지한 손은 손가락의 터치 입력 외 다른 터치 입력이 분포하는 위치, 손가락의 터치 입력의 방향 중 적어도 하나에 기초하여 식별될 수 있다. 구체적인 예로, 디스플레이(410)의 오른쪽 경계에서 손가락 외 터치 입력이 감지되면, 전자 장치(101)는 오른손으로 파지하였음을 추정할 수 있다. 터치 입력이 왼쪽으로 기울어진 방향을 가진다면, 전자 장치(101)는 오른손으로 파지하였음을 추정할 수 있다.
상술한 다양한 실시예들에 따라, 전자 장치(101)는 지문 등록 시 터치 정보를 이용하여 지문 데이터를 분류할 수 있다. 추가적으로, 다른 실시예에 따라, 전자 장치(101)는 지문 등록을 위한 어플리케이션 외에 다른 일반 어플리케이션을 통해 지문 데이터를 수집할 수 있으며, 이 경우에도 터치 정보를 함께 저장할 수 있다. 다시 말해, 전자 장치(101)는 지문 등록 또는 인증 절차 외에도, 지문 데이터를 수집하는 경우, 터치 정보를 획득 및 저장할 수 있다. 예를 들어, 일반 어플리케이션이 실행되는 동안, 지문 센서 영역에서 터치 입력이 발생하면, 전자 장치(101)는 지문 데이터를 수집할 수 있으며, 이때 수집되는 지문 데이터는 터치 정보에 기초하여 분류 및 저장될 수 있다.
본 문서에서 사용된 용어 "모듈"은 하드웨어, 소프트웨어 또는 펌웨어로 구성된 유닛을 포함하며, 예를 들면, 로직, 논리 블록, 부품, 또는 회로 등의 용어와 상호 호환적으로 사용될 수 있다. "모듈"은, 일체로 구성된 부품 또는 하나 또는 그 이상의 기능을 수행하는 최소 단위 또는 그 일부가 될 수 있다. "모듈"은 기계적으로 또는 전자적으로 구현될 수 있으며, 예를 들면, 어떤 동작들을 수행하는, 알려졌거나 앞으로 개발될, ASIC(application-specific integrated circuit) 칩, FPGAs(field-programmable gate arrays), 또는 프로그램 가능 논리 장치를 포함할 수 있다. 다양한 실시예에 따른 장치(예: 모듈들 또는 그 기능들) 또는 방법(예: 동작들)의 적어도 일부는 프로그램 모듈의 형태로 컴퓨터로 판독 가능한 저장 매체(예:메모리(130))에 저장된 명령어로 구현될 수 있다. 명령어가 프로세서(예: 프로세서(120))에 의해 실행될 경우, 프로세서가 명령어에 해당하는 기능을 수행할 수 있다. 컴퓨터로 판독 가능한 기록 매체는, 하드디스크, 플로피디스크, 마그네틱 매체(예: 자기테이프), 광기록 매체(예: CD-ROM, DVD, 자기-광 매체(예: 플롭티컬 디스크), 내장 메모리 등을 포함할 수 있다. 명령어는 컴파일러에 의해 만들어지는 코드 또는 인터프리터에 의해 실행될 수 있는 코드를 포함할 수 있다. 다양한 실시예에 따른 모듈 또는 프로그램 모듈은 전술한 구성요소들 중 적어도 하나 이상을 포함하거나, 일부가 생략되거나, 또는 다른 구성요소를 더 포함할 수 있다. 다양한 실시예에 따른, 모듈, 프로그램 모듈 또는 다른 구성요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱하게 실행되거나, 적어도 일부 동작이 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.
따라서, 한 실시예에 따른 비-일시적 컴퓨터 판독 가능한 기록 매체(non-transitory computer readable medium)는 복수의 명령어들을 포함할 수 있다. 여기서, 복수의 명령어들은, 프로세서에 의해 실행되면, 디스플레이의 표시 영역 중 적어도 일부 영역을 통하여 지문 데이터를 획득하기 위한 지문 센서가 설치된 일부 영역에 제1 어플리케이션을 위한 오브젝트를 표시하는 동작, 오브젝트에 대한 터치 입력에 반응하여, 적어도 하나의 지문 이미지를 포함하는 지문 데이터를 획득하는 동작, 및 지문 데이터 및 제2 어플리케이션을 통해 획득된 기준 지문 이미지를 지문 정보로서 등록하는 동작을 프로세서가 수행하도록 설정될 수 있다. 나아가, 복수의 명령어들은, 터치 입력이 발생함에 반응하여 지문 센서를 활성화하는 동작을 상기 프로세서가 더 수행하도록 설정될 수 있다.
상술한 본 개시의 구체적인 실시예들에서, 개시에 포함되는 구성 요소는 제시된 구체적인 실시예에 따라 단수 또는 복수로 표현되었다. 그러나, 단수 또는 복수의 표현은 설명의 편의를 위해 제시한 상황에 적합하게 선택된 것으로서, 본 개시가 단수 또는 복수의 구성 요소에 제한되는 것은 아니며, 복수로 표현된 구성 요소라 하더라도 단수로 구성되거나, 단수로 표현된 구성 요소라 하더라도 복수로 구성될 수 있다.
한편 본 개시의 상세한 설명에서는 구체적인 실시예에 관해 설명하였으나, 본 개시의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 개시의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.

Claims (23)

  1. 터치 센서를 포함하는 디스플레이, 상기 디스플레이는 빛이 투과할 수 있는 영역을 포함하고;
    상기 디스플레이의 상기 빛이 투과할 수 있는 영역을 통하여 지문 데이터를 획득하도록 설정된 지문 센서; 및
    프로세서를 포함하고, 상기 프로세서는,
    사용자의 지문 등록을 위한 제1 사용자 입력에 대응하여, 상기 제1 사용자 입력으로부터, 상기 터치 센서를 이용하여 제1 터치 정보를 획득하고, 상기 지문 센서를 이용하여 제1 지문 데이터를 획득하고,
    상기 제1 터치 정보에 기초하여 상기 제1 지문 데이터를 지문 정보로 등록하고, 상기 등록하는 동작은 상기 제1 터치 정보에 기초하여 상기 제1 지문 데이터를 분류하는 동작을 포함하고,
    사용자의 지문 인증을 위한 제2 사용자 입력에 대응하여, 상기 제2 사용자 입력으로부터, 상기 터치 센서를 이용하여 제2 터치 정보를 획득하고, 상기 지문 센서를 이용하여 제2 지문 데이터를 획득하고,
    상기 제2 터치 정보에 기초하여 상기 등록된 지문 정보 중 비교를 위한 후보군을 선택하고,
    상기 선택된 후보군에 포함되는 지문 데이터를 상기 제2 지문 데이터와 비교하도록 설정된 전자 장치.
  2. 제1 항에 있어서, 상기 프로세서는,
    상기 제1 터치 정보를 이용하여 상기 제1 지문 데이터 획득 시 상기 전자 장치를 파지한 사용자의 손을 식별하고,
    상기 식별된 손에 기초하여 상기 제1 지문 데이터를 분류하도록 설정된 전자 장치.
  3. 제1 항에 있어서, 상기 프로세서는,
    상기 제1 터치 정보에 포함된 곡률에 기초하여 일반 터치 및 팁(tip) 터치를 구분하도록 설정된 전자 장치.
  4. 제1 항에 있어서, 상기 프로세서는,
    상기 제1 터치 정보에 포함된 면적에 기초하여 동일 손가락에 의한 지문 데이터를 다수의 그룹들로 분류하도록 설정된 전자 장치.
  5. 삭제
  6. 삭제
  7. 삭제
  8. 제1 항에 있어서, 상기 프로세서는,
    상기 선택된 후보군에 상기 제2 지문 데이터와 일치하는 지문 데이터가 존재하지 않으면, 다른 후보군을 선택하도록 설정된 전자 장치.
  9. 삭제
  10. 삭제
  11. 삭제
  12. 삭제
  13. 삭제
  14. 삭제
  15. 제1 항에 있어서,
    상기 지문 센서는, 상기 디스플레이의 활성 영역(active area)에 배치되는 전자 장치.
  16. 제1 항에 있어서,
    상기 제1 터치 정보는, 상기 제1 사용자 입력의 면적(area), 장축(major) 길이, 단축(minor) 길이, 방향(orientation), 각도(angle), 곡률, 압력(pressure), 및 위치 중 적어도 하나를 포함하고,
    상기 제2 터치 정보는, 상기 제2 사용자 입력의 면적, 장축 길이, 단축 길이, 방향, 각도, 곡률, 압력, 및 위치 중 적어도 하나를 포함하는 전자 장치.
  17. 삭제
  18. 제1 항에 있어서, 상기 프로세서는,
    상기 등록되는 지문 정보를 일반 메모리와 다른 보안 레벨을 가지는 보안 메모리에 저장하도록 설정된 전자 장치.
  19. 제1 항에 있어서, 상기 프로세서는,
    상기 디스플레이의 활성 영역 중 상기 지문 센서가 형성된 제1 영역 및 상기 제1 영역에 인접하는 제2 영역 중 적어도 하나를 통해 상기 제1 터치 정보 및 상기 제2 터치 정보를 획득하도록 설정된 전자 장치.
  20. 삭제
  21. 삭제
  22. 삭제
  23. 삭제
KR1020160168640A 2016-12-12 2016-12-12 생체 데이터를 등록 및 인증하기 위한 방법 및 그 전자 장치 KR102574772B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020160168640A KR102574772B1 (ko) 2016-12-12 2016-12-12 생체 데이터를 등록 및 인증하기 위한 방법 및 그 전자 장치
PCT/KR2017/013203 WO2018110847A1 (ko) 2016-12-12 2017-11-20 생체 데이터를 등록 및 인증하기 위한 방법 및 그 전자 장치
US16/469,002 US11023571B2 (en) 2016-12-12 2017-11-20 Method for registering and authenticating biometric data and electronic device thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160168640A KR102574772B1 (ko) 2016-12-12 2016-12-12 생체 데이터를 등록 및 인증하기 위한 방법 및 그 전자 장치

Publications (2)

Publication Number Publication Date
KR20180067179A KR20180067179A (ko) 2018-06-20
KR102574772B1 true KR102574772B1 (ko) 2023-09-05

Family

ID=62558795

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160168640A KR102574772B1 (ko) 2016-12-12 2016-12-12 생체 데이터를 등록 및 인증하기 위한 방법 및 그 전자 장치

Country Status (3)

Country Link
US (1) US11023571B2 (ko)
KR (1) KR102574772B1 (ko)
WO (1) WO2018110847A1 (ko)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102105986B1 (ko) 2018-06-12 2020-05-06 코리아에프티 주식회사 필러튜브 및 이를 포함하는 필러넥
US11074428B2 (en) * 2019-01-30 2021-07-27 Novatek Microelectronics Corp. Fingerprint identification device and method
CN110097043B (zh) * 2019-05-05 2022-04-15 京东方科技集团股份有限公司 传感器像素、超声传感器、oled显示面板和oled显示装置
US10970509B1 (en) * 2020-01-13 2021-04-06 Novatek Microelectronics Corp. Fingerprint recognition apparatus

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150254446A1 (en) * 2014-03-10 2015-09-10 Bio-Key International, Inc. Utilization of biometric data

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101657549B1 (ko) * 2010-03-09 2016-09-20 엘지전자 주식회사 휴대 단말기 및 그 제어방법
KR101549558B1 (ko) 2009-03-18 2015-09-03 엘지전자 주식회사 휴대 단말기 및 그 제어방법
WO2011114520A1 (ja) * 2010-03-19 2011-09-22 富士通株式会社 識別装置、識別方法、及びプログラム
KR102090956B1 (ko) 2013-07-10 2020-04-14 삼성전자주식회사 지문 인식 방법 및 이를 위한 장치
KR20150034832A (ko) 2013-09-24 2015-04-06 삼성전자주식회사 지문인식 센서를 포함하는 전자기기 및 지문인식 센서를 포함하는 전자기기의 사용자 인증 수행 및 사용자 지문 이미지 등록 방법, 및 이 방법을 실행하기 위한 프로그램이 기록되어 있는 비휘발성 기록매체
KR102180226B1 (ko) * 2013-10-30 2020-11-18 삼성전자주식회사 복합 생체 정보를 이용한 보안을 제공하는 전자 장치 및 방법
KR102206054B1 (ko) * 2014-05-09 2021-01-21 삼성전자주식회사 지문 처리 방법 및 그 전자 장치
TWI592854B (zh) 2014-12-18 2017-07-21 指紋卡公司 使用觸控感測器資料的指紋認證
KR101853270B1 (ko) * 2015-02-16 2018-05-02 에코스솔루션(주) 지문인식방법을 채용한 휴대용 보안인증기의 보안 인증방법
US9760758B2 (en) * 2015-12-30 2017-09-12 Synaptics Incorporated Determining which hand is being used to operate a device using a fingerprint sensor
CN105760738B (zh) * 2016-03-15 2017-08-25 广东欧珀移动通信有限公司 一种指纹解锁的方法及终端
US10489004B2 (en) * 2016-09-09 2019-11-26 Sensel Inc. System for detecting and characterizing inputs on a touch sensor

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150254446A1 (en) * 2014-03-10 2015-09-10 Bio-Key International, Inc. Utilization of biometric data

Also Published As

Publication number Publication date
US20190318073A1 (en) 2019-10-17
WO2018110847A1 (ko) 2018-06-21
US11023571B2 (en) 2021-06-01
KR20180067179A (ko) 2018-06-20

Similar Documents

Publication Publication Date Title
US11721127B2 (en) Electronic device and method for identifying falsification of biometric information
CN108701178B (zh) 认证方法及使用认证方法的电子设备
US10725578B2 (en) Apparatus and method for controlling fingerprint sensor
KR102552312B1 (ko) 복수의 지문 센싱 모드를 갖는 전자 장치 및 그 제어 방법
CN108694312B (zh) 用于存储指纹信息的电子设备和方法
US10031218B2 (en) Method and apparatus for sensing fingerprints
US20160321494A1 (en) Fingerprint information processing method and electronic device supporting the same
EP3526959B1 (en) Method of acquiring biometric data and electronic device therefor
US20190324640A1 (en) Electronic device for providing user interface according to electronic device usage environment and method therefor
KR102497477B1 (ko) 개인 정보를 보호하기 위한 방법 및 그 전자 장치
EP3584729B1 (en) Electronic device for performing authentication by using multiple biometric sensors and operation method thereof
KR102574772B1 (ko) 생체 데이터를 등록 및 인증하기 위한 방법 및 그 전자 장치
US10909226B2 (en) Method for controlling biosensor, and electronic device
KR102513147B1 (ko) 전자 장치 및 그의 터치 입력 인식 방법
KR20170094895A (ko) 지문을 인식하기 위한 방법 및 전자 장치
EP3580678B1 (en) Electronic device and method for identifying falsification of biometric information
KR102684523B1 (ko) 생체 센서를 제어하는 방법 및 전자 장치
KR102685894B1 (ko) 복수의 생체 센서를 이용하여 인증을 수행하기 위한 전자 장치 및 그의 동작 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant