KR20070045664A - 이동통신단말기의 제어 방법 - Google Patents

이동통신단말기의 제어 방법 Download PDF

Info

Publication number
KR20070045664A
KR20070045664A KR1020050102206A KR20050102206A KR20070045664A KR 20070045664 A KR20070045664 A KR 20070045664A KR 1020050102206 A KR1020050102206 A KR 1020050102206A KR 20050102206 A KR20050102206 A KR 20050102206A KR 20070045664 A KR20070045664 A KR 20070045664A
Authority
KR
South Korea
Prior art keywords
mobile communication
communication terminal
coordinate value
input
mouth
Prior art date
Application number
KR1020050102206A
Other languages
English (en)
Inventor
김시형
Original Assignee
주식회사 팬택
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 팬택 filed Critical 주식회사 팬택
Priority to KR1020050102206A priority Critical patent/KR20070045664A/ko
Publication of KR20070045664A publication Critical patent/KR20070045664A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72469—User interfaces specially adapted for cordless or mobile telephones for operating the device by selecting functions from two or more displayed items, e.g. menus or icons
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/52—Details of telephonic subscriber devices including functional features of a camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Telephone Function (AREA)

Abstract

이동통신단말기의 제어 방법이 제공된다. 카메라로부터 입력되는 영상 중에서 얼굴영역을 검출하고, 검출된 얼굴영역을 확대한다. 확대한 얼굴영역에서 눈, 코, 입에 대한 좌표를 계산한다. 계산된 좌표값이 메모리에 저장된 좌표값과 일치하는지 확인한다. 일치하면, 일치하는 좌표값에 해당하는 제어명령을 수행한다. 본 발명에 의하면 키패드와 같은 입력부를 사용하지 않고도 사용자의 얼굴표정이나 입 움직임만으로 문자입력, 메뉴이동 등의 제어명령을 수행할 수 있다고 하는 효과가 있다.
카메라, 얼굴, 눈, 코, 입, 메모리, 제어부, 이동통신단말기, SMS.

Description

이동통신단말기의 제어 방법 {Method for controlling mobile phone}
도 1은 본 발명의 일 실시예에 따른 이동통신단말기의 내부구조를 보여주는 내부구성도이다.
도 2는 본 발명의 일 실시예에 따른 이동통신단말기의 제어 방법을 보여주는 흐름도이다.
도 3은 본 발명의 일 실시예에 따른 이동통신단말기의 화면예이다.
*도면의 주요 부분에 대한 부호의 설명*
110 입력부 120 표시부
130 메모리 140 제어부
150 무선회로부 160 음성처리부
170 카메라
본 발명은 이동통신단말기의 제어 방법에 관한 것으로서, 더욱 상세하게는 카메라로부터 입력되는 얼굴영역을 분석하고, 사용자의 얼굴 움직임을 인식하여 문자를 입력하거나 메뉴를 이동하는 등의 제어명령을 수행하도록 하는 이동통신단말기의 제어 방법에 관한 것이다.
종래의 이동통신단말기는 일반적으로 음성통화만이 가능하였으나, 최근들어 통신 기술 및 이동통신단말기 제작 기술이 급속도로 발달함에 따라 다양한 소비자의 욕구를 충족시킬 수 있는 다기능 이동통신단말기가 상용화되고 있다. 최근에 상용화되고 있는 이동통신단말기는 음성을 전달하는 통화기능 이외에 이동통신단말기로 게임이나 인터넷 검색, E-mail, 대금결제 등 다양한 기능이 사용되고 있으며, 최근에는 이동통신단말기에 카메라를 설치하여 이동통신단말기로 사물의 형상을 찍는 카메라폰 기능과 자신의 형상을 카메라로 찍어 상대방에게 전송해 주는 화상 이동통신단말기 기능이 추가되고 있는 실정이다.
종래 카메라 등으로부터 입력된 영상에서 얼굴영역을 검출하는 기술이 있었다. 예를 들어, "Support Vector Machine" 이나 "Back-Propagation Neural Network" 방법이 그것이다. 종래에는 이러한 얼굴정보추출 기술과 이동통신 기술를 접목하여 전자상거래, 전자금융 등에서 필요한 개인 신원 인증에 많이 사용되었다.
한편, 종래 이동통신단말기에 구비된 카메라를 이용하여 이동통신단말기를 제어하고자하는 시도가 있었다. 예를 들어, 대한민국 등록특허 제10-0464040호에서는 얼굴 움직임을 이용한 이동통신단말기의 제어방법이 개시되어 있다. 이 발명은 얼굴의 움직임을 이용하여 커서의 이동을 제어할 수 있는 방법에 관한 것이다.
그러나, 눈, 코, 입 등의 얼굴의 움직임을 이용하여 메뉴이동이나 문자입력 와 같은 제어명령을 수행하도록 하는 이동통신단말기의 제어방법은 아직 제안되어 있지 않다.
본 발명은 이러한 점을 감안하여 이루어진 것으로서, 이동통신단말기의 카메라로부터 입력되는 눈, 코, 입을 비롯한 얼굴의 움직임을 인식하고, 이를 이용하여 메뉴를 이동하거나 문자를 입력하는 등의 제어명령을 수행하도록 하는 이동통신단말기의 제어방법을 제공하는데 그 목적이 있다.
이와 같은 목적을 달성하기 위한 본 발명은 카메라로부터 입력되는 영상 중에서 얼굴영역을 검출하는 제1단계와, 검출된 얼굴영역을 확대하는 제2단계와, 확대한 얼굴영역에서 눈, 코, 입에 대한 좌표를 계산하는 제3단계와, 계산된 좌표값이 메모리에 저장된 좌표값과 일치하는지 확인하는 제4단계와, 일치하면, 일치하는 좌표값에 해당하는 제어명령을 수행하는 제5단계를 구비할 수 있다.
상기 제5단계는 일치하는 좌표값에 해당하는 메뉴이동명령, 문자 입력명령, 또는 이모티콘 입력명령을 수행하는 것일 수 있다.
이하, 첨부된 도면을 참조해서 본 발명의 실시예를 상세히 설명하면 다음과 같다. 우선 각 도면의 구성 요소들에 참조 부호를 부가함에 있어서, 동일한 구성 요소들에 한해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 그리고, 본 발명을 설명함에 있어서, 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
도 1은 본 발명의 일 실시예에 따른 이동통신단말기의 내부구조를 보여주는 내부구성도이다. 이동통신단말기는 입력부(110), 표시부(120), 메모리(130), 제어부(140), 무선회로부(150), 음성처리부(160), 카메라(170) 등을 포함한다.
입력부(110)는 키패드, 조그셔틀, 포인트스틱, 터치스크린 등 다양한 소자가 사용될 수 있으며, 사용자가 원하는 기능을 선택하거나 정보를 입력할 때 사용된다.
표시부(120)는 사용자에게 여러 가지 정보를 보여주기 위한 것으로, LCD(Liquid Crystal Display)가 주로 사용된다.
메모리(130)는 이동통신단말기가 동작하는데 필요한 프로그램과 데이터를 저장하고 있으며, EPROM(Erasable Programmable Read Only Memory), SRAM(Static Random Access Memory), 플래시 메모리 등 다양한 소자가 사용될 수 있다. 본 발명의 일 실시예에서 메모리(130)에는 눈, 코, 입의 좌표값에 대응하는 제어명령이 저장되어 있다.
무선회로부(150)는 무선으로 기지국과 음성 및 제어 정보를 주고받을 수 있도록 하기 위한 회로이다. 외부의 이동통신단말기가 발송하는 호신호를 안테나를 통하여 수신하고 이를 제어부(140)에 전송하거나, 메모리(130)에 저장되어 있는 데 이터를 안테나를 통해 발신자의 이동통신단말기에 전송하는 기능을 수행한다.
음성처리부(160)는 디지털 음성신호를 아날로그 음성신호로 변환하고 증폭하여 스피커(SP)로 출력하거나, 마이크(MIC)로부터의 음성신호를 증폭하고 디지털신호로 변환하는 역할을 한다.
카메라(170)는 사물을 촬영하는 역할을 한다.
제어부(140)는 이동통신단말기의 전체 동작을 제어하는 역할을 한다. 제어부(140)는 마이크로프로세서나 DSP(Digital Signal Processor) 등으로 이루어질 수 있다. 제어부(140)에는 또한 무선회로부(150)로부터의 기저대역신호의 처리를 위한 기저대역신호처리회로가 포함되어 있다.
본 발명의 일 실시예에서 제어부(140)는 카메라(170)부로부터 입력된 영상 중에서 얼굴 영역을 검출하여 눈, 코, 입에 대한 좌표를 계산하고, 메모리(130)에 저장된 좌표값과 비교하여, 일치하는 좌표값에 해당하는 제어명령을 수행한다.
도 2는 본 발명의 일 실시예에 따른 이동통신단말기의 제어 방법을 보여주는 흐름도이다.
카메라(170)로부터 입력되는 영상 중에서 얼굴영역을 검출한다(S210). 검출된 얼굴영역을 확대한다(S220).
확대한 얼굴영역에서 눈, 코, 입에 대한 좌표를 계산한다(S230). 계산된 좌표값이 메모리(130)에 저장된 좌표값과 일치하는지 확인한다(S240). 일치하면, 일치하는 좌표값에 해당하는 제어명령을 수행한다(S250).
S250 단계에서 일치하는 좌표값에 해당하는 제어명령은 메뉴이동명령일 수 있다. 예를 들어, 사용자의 눈, 코, 입에 대한 좌표값이 메모리(130)에 저장된 좌표값과 일치하고, 그 좌표값에 해당하는 제어명령이 "전화번호부" 메뉴로 이동하라는 명령이라면, 제어부(140)는 "전화번호부" 메뉴로 이동하여 해당 화면을 디스플레이한다. 도 3 (a)는 이때의 이동통신단말기 화면예이다. 실제 사용예를 가정하면, 사용자가 "전화번호부"라고 말하면 이 때의 얼굴동작을 인식하여 "전화번호부"로 메뉴이동을 하게 될 것이다.
S250 단계에서 일치하는 좌표값에 해당하는 제어명령은 문자 입력명령일 수 있다. 예를 들어, 사용자의 눈, 코, 입에 대한 좌표값이 메모리(130)에 저장된 좌표값과 일치하고, 그 좌표값에 해당하는 제어명령이 특정 문자를 입력하라는 명령이라면, 제어부(140)는 특정 문자를 입력하게 된다. 도 3 (b)는 이때의 이동통신단말기 화면예이다. 도 3 (b) 의 화면예는 "랑" 이라는 문자가 입력된 예이다. 실제 사용예를 가정하면, SMS 입력 메뉴에서 사용자가 "랑"이라고 말하면 이 때의 얼굴동작을 인식하여 "랑"이라는 문자를 입력하게 될 것이다.
S250 단계에서 일치하는 좌표값에 해당하는 제어명령은 이모티콘 입력명령일 수 있다. 예를 들어, 사용자의 눈, 코, 입에 대한 좌표값이 메모리(130)에 저장된 좌표값과 일치하고, 그 좌표값에 해당하는 제어명령이 특정 이모티콘을 입력하라는 명령이라면, 제어부(140)는 특정 이모티콘을 입력하게 된다. 도 3 (c)는 이때의 이동통신단말기 화면예이다. 도 3 (c) 의 화면예는 "^^" 형태의 이모티콘이 입력된 예이다. 실제 사용예를 가정하면, SMS 입력 메뉴에서 사용자가 웃는 표정을 지으면 이 때의 얼굴동작을 인식하여 "^^" 형태의 이모티콘을 입력하게 될 것이다.
이상 본 발명을 몇 가지 바람직한 실시예를 사용하여 설명하였으나, 이들 실시예는 예시적인 것이며 한정적인 것이 아니다. 본 발명이 속하는 기술분야에서 통상의 지식을 지닌 자라면 본 발명의 사상과 첨부된 특허청구범위에 제시된 권리범위에서 벗어나지 않으면서 다양한 변화와 수정을 가할 수 있음을 이해할 것이다.
이상에서 설명한 바와 같이, 본 발명에 의하면 키패드와 같은 입력부를 사용하지 않고도 사용자의 얼굴표정이나 입 움직임만으로 문자입력, 메뉴이동 등의 제어명령을 수행할 수 있다고 하는 효과가 있다. 따라서, SMS 작성시에 매우 편리하게 문자를 입력할 수 있게 되고, 특히 지체가 부자유한 장애인들에게 유용할 것으로 기대된다.

Claims (4)

  1. 카메라로부터 입력되는 영상 중에서 얼굴영역을 검출하는 제1단계와,
    검출된 얼굴영역을 확대하는 제2단계와,
    확대한 얼굴영역에서 눈, 코, 입에 대한 좌표를 계산하는 제3단계와,
    계산된 좌표값이 메모리에 저장된 좌표값과 일치하는지 확인하는 제4단계와,
    일치하면, 일치하는 좌표값에 해당하는 제어명령을 수행하는 제5단계
    를 구비하는 것을 특징으로 하는 이동통신단말기의 제어 방법.
  2. 제1항에 있어서,
    상기 제5단계는 일치하는 좌표값에 해당하는 메뉴이동명령을 수행하는 것을 특징으로 하는 이동통신단말기의 제어 방법.
  3. 제1항에 있어서,
    상기 제5단계는 일치하는 좌표값에 해당하는 문자 입력명령을 수행하는 것을 특징으로 하는 이동통신단말기의 제어 방법.
  4. 제1항에 있어서,
    상기 제5단계는 일치하는 좌표값에 해당하는 이모티콘 입력명령을 수행하는 것을 특징으로 하는 이동통신단말기의 제어 방법.
KR1020050102206A 2005-10-28 2005-10-28 이동통신단말기의 제어 방법 KR20070045664A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020050102206A KR20070045664A (ko) 2005-10-28 2005-10-28 이동통신단말기의 제어 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020050102206A KR20070045664A (ko) 2005-10-28 2005-10-28 이동통신단말기의 제어 방법

Publications (1)

Publication Number Publication Date
KR20070045664A true KR20070045664A (ko) 2007-05-02

Family

ID=38271360

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050102206A KR20070045664A (ko) 2005-10-28 2005-10-28 이동통신단말기의 제어 방법

Country Status (1)

Country Link
KR (1) KR20070045664A (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100954835B1 (ko) * 2009-08-04 2010-04-30 주식회사 크라스아이디 얼굴변화 검출 시스템 및 얼굴변화 감지에 따른 지능형 시스템
US8587710B2 (en) 2009-09-24 2013-11-19 Pantech Co., Ltd. Apparatus and method for controlling picture using image recognition

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100954835B1 (ko) * 2009-08-04 2010-04-30 주식회사 크라스아이디 얼굴변화 검출 시스템 및 얼굴변화 감지에 따른 지능형 시스템
WO2011016649A2 (ko) * 2009-08-04 2011-02-10 주식회사 크라스아이디 얼굴변화 검출 시스템 및 얼굴변화 감지에 따른 지능형 시스템
WO2011016649A3 (ko) * 2009-08-04 2011-04-28 주식회사 크라스아이디 얼굴변화 검출 시스템 및 얼굴변화 감지에 따른 지능형 시스템
US8587710B2 (en) 2009-09-24 2013-11-19 Pantech Co., Ltd. Apparatus and method for controlling picture using image recognition

Similar Documents

Publication Publication Date Title
KR102053361B1 (ko) 화면 회전을 적응적으로 수행하기 위한 방법 및 그 전자 장치
US20150332439A1 (en) Methods and devices for hiding privacy information
US20060044265A1 (en) HMD information apparatus and method of operation thereof
EP2229674B1 (en) Active display readability enhancement for mobile devices depending on movement
KR20190080377A (ko) 영상 통화 서비스를 제공하는 단말
CN108388786A (zh) 指纹解锁方法及装置
US20170123587A1 (en) Method and device for preventing accidental touch of terminal with touch screen
US20160334936A1 (en) Portable device and method of modifying touched position
CN105204808B (zh) 图片的投射方法、装置及终端设备
CN108833779B (zh) 拍摄控制方法及相关产品
JP2011022687A (ja) 認証機能を有する電子機器および認証方法
KR101571538B1 (ko) 전면 터치 휴대단말기의 콜 발신 방법
WO2017154136A1 (ja) 携帯情報端末及びそれに用いる情報処理方法
CN111522613B (zh) 截屏方法及电子设备
CN110837328B (zh) 一种显示方法及电子设备
US20170293396A1 (en) Information processing apparatus
CN109257489B (zh) 一种显示方法及移动终端
JP4685708B2 (ja) 携帯端末装置
KR20070057351A (ko) 점자를 음성으로 변환하는 이동통신단말기
CN112673612B (zh) 显示方式的切换方法、装置、设备及介质
KR20070045664A (ko) 이동통신단말기의 제어 방법
CN110719361B (zh) 信息发送方法、移动终端和存储介质
CN110071866B (zh) 一种即时通信应用控制方法、可穿戴设备及存储介质
CN109714462B (zh) 一种电话号码的标记方法及其移动终端
CN108628508B (zh) 一种调整剪裁窗口的方法及移动终端

Legal Events

Date Code Title Description
N231 Notification of change of applicant
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid