KR101873741B1 - 휴대 단말기 및 그 제어 방법 - Google Patents

휴대 단말기 및 그 제어 방법 Download PDF

Info

Publication number
KR101873741B1
KR101873741B1 KR1020110109944A KR20110109944A KR101873741B1 KR 101873741 B1 KR101873741 B1 KR 101873741B1 KR 1020110109944 A KR1020110109944 A KR 1020110109944A KR 20110109944 A KR20110109944 A KR 20110109944A KR 101873741 B1 KR101873741 B1 KR 101873741B1
Authority
KR
South Korea
Prior art keywords
screen
touch
touch gesture
function
input
Prior art date
Application number
KR1020110109944A
Other languages
English (en)
Other versions
KR20130045620A (ko
Inventor
이기영
김선용
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020110109944A priority Critical patent/KR101873741B1/ko
Priority to US13/570,093 priority patent/US9417789B2/en
Priority to EP12006284.9A priority patent/EP2590063A3/en
Priority to CN201210407518.8A priority patent/CN103092504B/zh
Publication of KR20130045620A publication Critical patent/KR20130045620A/ko
Application granted granted Critical
Publication of KR101873741B1 publication Critical patent/KR101873741B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40—Circuits
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04812—Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/22—Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Telephone Function (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 터치스크린 화면 상에 표시되는 터치제스처의 궤적선을 사용자가 잘 식별할 수 있도록 하는 휴대 단말기 및 그 제어 방법에 관한 것이다.

Description

휴대 단말기 및 그 제어 방법{MOBILE TERMINAL AND METHOD FOR CONTROLLING THE SAME}
본 발명은 사용자의 편의가 더욱 고려되어 단말기의 사용이 구현될 수 있도록 하는 휴대 단말기 및 그 제어 방법에 관한 것이다.
개인용 컴퓨터, 노트북, 휴대폰 등과 같은 단말기는 다양한 기능을 수행할 수 있도록 구성될 수 있다. 그러한 다양한 기능들의 예로 데이터 및 음성 통신 기능, 카메라를 통해 사진이나 동영상을 촬영하는 기능, 음성 저장 기능, 스피커 시스템을 통한 음악 파일의 재생 기능, 이미지나 비디오의 디스플레이 기능 등이 있다. 일부 단말기는 게임을 실행할 수 있는 추가적 기능을 포함하고, 다른 일부 단말기는 멀티미디어 기기로서 구현되기도 한다. 더욱이 최근의 단말기는 방송이나 멀티캐스트(multicast) 신호를 수신하여 비디오나 텔레비전 프로그램을 시청할 수 있다.
일반적으로 단말기는 이동 가능 여부에 따라 이동 단말기(mobile terminal) 및 고정 단말기(stationary terminal)으로 나뉠 수 있고, 다시 이동 단말기는 사용자의 직접 휴대 가능 여부에 따라 휴대형 단말기(또는 휴대 단말기)(handheld terminal) 및 거치형 단말기(vehicle mount terminal)로 나뉠 수 있다.
현재 디스플레이 기술의 발전으로 인해, 터치스크린을 탑재한 단말기가 많이 출시되고 있다.
이때, 단말기는 터치스크린 화면 상에 사용자의 터치제스처가 입력되면, 상기 입력된 터치제스처의 패턴을 나타내는 궤적선을 표시함으로써, 사용자에게 자신이 입력한 터치제스처의 패턴을 알 수 있도록 하고 있다.
그러나, 터치스크린 화면 상에 상기 궤적선을 표시할 경우에, 상기 궤적선의 색상이 상기 화면 내의 상기 궤적선이 위치한 부분의 색상과 동일할 경우 사용자가 상기 궤적선을 식별하기 어려운 문제점이 있다.
본 발명의 목적은, 터치스크린 화면 상에 표시되는 터치제스처의 궤적선을 사용자가 잘 식별할 수 있도록 하는 휴대 단말기 및 그 제어 방법을 제공하는데 있다.
상기 목적들을 달성하기 위한 본 발명에 따른 휴대 단말기는, 특정 기능이 할당된 하나 이상의 터치제스처가 설정된 메모리와; 화면 상에 상기 터치제스처가 입력되는 터치스크린과; 상기 화면 상에 특정 터치제스처가 입력되면, 상기 화면 상에 상기 입력된 터치제스처의 궤적선을 표시한 후에 상기 메모리에서 상기 입력된 터치제스처에 할당된 기능을 검색하여 실행하는 제어부;를 포함하고, 상기 제어부는, 상기 궤적선이 표시되는 동안에 상기 궤적선이 상기 화면 상에서 식별되도록 제어하는 것을 특징으로 한다.
또한, 본 발명에 따른 휴대 단말기의 제어 방법은, 특정 기능이 할당된 하나 이상의 터치제스처를 설정하는 단계와; 터치스크린 화면 상에 상기 설정된 터치제스처가 입력되면, 상기 입력된 터치제스처의 궤적선을 상기 화면 상에서 식별되도록 표시하는 단계와; 상기 터치제스처의 입력이 완료되면, 상기 터치제스처에 할당된 기능을 실행하는 단계;를 포함하여 이루어진다.
본 발명에 따른 휴대 단말기 및 그 제어 방법은, 터치스크린 화면 상에서 터치제스처의 궤적선이 잘 식별되도록 상기 궤적선 및/또는 상기 화면의 표시 동작을 제어함으로써, 사용자가 현재 터치스크린 화면 상에서 자신이 입력한 터치제스처의 궤적선을 잘 식별할 수 있는 효과가 있다.
도 1은 본 발명의 일 실시예와 관련된 휴대 단말기를 나타낸 블록 구성도(block diagram)이다.
도 2a는 본 발명과 관련된 휴대 단말기의 일 예를 전면에서 바라본 사시도이다.
도 2b는 도 2a에 도시된 휴대 단말기의 후면 사시도이다.
도 3은 본 발명에 따른 터치제스처 설정 과정을 나타낸 흐름도이다.
도 4 내지 도 7은 본 발명에 따른 터치제스처 설정 과정을 나타낸 화면 설명도이다.
도 8은 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 흐름도이다.
도 9는 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제1 실시예 화면 설명도이다.
도 10은 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제2 실시예 화면 설명도이다.
도 11은 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제3 실시예 화면 설명도이다.
도 12는 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제4 실시예 화면 설명도이다.
도 13은 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제5 실시예 화면 설명도이다.
도 14는 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제6 실시예 화면 설명도이다.
도 15는 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제7 실시예 화면 설명도이다.
도 16은 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제8 실시예 화면 설명도이다.
도 17은 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제9 실시예 화면 설명도이다.
도 18은 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제10 실시예 화면 설명도이다.
도 19는 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제11 실시예 화면 설명도이다.
도 20은 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제12 실시예 화면 설명도이다.
도 21은 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제13 실시예 화면 설명도이다.
이하, 본 발명과 관련된 휴대 단말기에 대하여 도면을 참조하여 보다 상세하게 설명한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.
본 명세서에서 설명되는 휴대 단말기에는 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(laptop computer), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 네비게이션 등이 포함될 수 있다. 그러나, 본 명세서에 기재된 실시예에 따른 구성은 휴대 단말기에만 적용 가능한 경우를 제외하면, 디지털 TV, 데스크탑 컴퓨터 등과 같은 고정 단말기에도 적용될 수도 있음을 본 기술분야의 당업자라면 쉽게 알 수 있을 것이다.
도 1은 본 발명의 일 실시예와 관련된 휴대 단말기의 블록 구성도(block diagram)이다.
상기 휴대 단말기(100)는 무선 통신부(110), A/V(Audio/Video) 입력부(120), 사용자 입력부(130), 센싱부(140), 출력부(150), 메모리(160), 인터페이스부(170), 제어부(180) 및 전원 공급부(190) 등을 포함할 수 있다. 도 1에 도시된 구성요소들이 필수적인 것은 아니어서, 그보다 많은 구성요소들을 갖거나 그보다 적은 구성요소들을 갖는 휴대 단말기가 구현될 수도 있다.
이하, 상기 구성요소들에 대해 차례로 살펴본다.
무선 통신부(110)는 휴대 단말기(100)와 무선 통신 시스템 사이 또는 휴대 단말기(100)와 휴대 단말기(100)가 위치한 네트워크 사이의 무선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다. 예를 들어, 무선 통신부(110)는 방송 수신 모듈(111), 이동통신 모듈(112), 무선 인터넷 모듈(113), 근거리 통신 모듈(114) 및 위치정보 모듈(115) 등을 포함할 수 있다.
방송 수신 모듈(111)은 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다.
상기 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다. 상기 방송 관리 서버는, 방송 신호 및/또는 방송 관련 정보를 생성하여 송신하는 서버 또는 기 생성된 방송 신호 및/또는 방송 관련 정보를 제공받아 단말기에 송신하는 서버를 의미할 수 있다. 상기 방송 신호는, TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호를 포함할 뿐만 아니라, TV 방송 신호 또는 라디오 방송 신호에 데이터 방송 신호가 결합한 형태의 방송 신호도 포함할 수 있다.
상기 방송 관련 정보는, 방송 채널, 방송 프로그램 또는 방송 서비스 제공자에 관련한 정보를 의미할 수 있다. 상기 방송 관련 정보는, 이동통신망을 통하여도 제공될 수 있다. 이러한 경우에는 상기 이동통신 모듈(112)에 의해 수신될 수 있다.
상기 방송 관련 정보는 다양한 형태로 존재할 수 있다. 예를 들어, DMB(Digital Multimedia Broadcasting)의 EPG(Electronic Program Guide) 또는 DVB-H(Digital Video Broadcast-Handheld)의 ESG(Electronic Service Guide) 등의 형태로 존재할 수 있다.
상기 방송 수신 모듈(111)은, 예를 들어, DMB-T(Digital Multimedia Broadcasting-Terrestrial), DMB-S(Digital Multimedia Broadcasting-Satellite), MediaFLO(Media Forward Link Only), DVB-H(Digital Video Broadcast-Handheld), DVB-CBMS, OMA-BCAST, ISDB-T(Integrated Services Digital Broadcast-Terrestrial) 등의 디지털 방송 시스템을 이용하여 디지털 방송 신호를 수신할 수 있다. 물론, 상기 방송 수신 모듈(111)은, 상술한 디지털 방송 시스템뿐만 아니라 다른 방송 시스템에 적합하도록 구성될 수도 있다.
방송 수신 모듈(111)을 통해 수신된 방송 신호 및/또는 방송 관련 정보는 메모리(160)에 저장될 수 있다.
이동통신 모듈(112)은, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 상기 무선 신호는, 음성 호 신호, 화상 통화 호 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.
무선 인터넷 모듈(113)은 무선 인터넷 접속을 위한 모듈을 말하는 것으로, 휴대 단말기(100)에 내장되거나 외장될 수 있다. 무선 인터넷 기술로는 WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 등이 이용될 수 있다.
근거리 통신 모듈(114)은 근거리 통신을 위한 모듈을 말한다. 근거리 통신(short range communication) 기술로 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee 등이 이용될 수 있다.
위치 정보 모듈(115)은 휴대 단말기의 위치를 획득하기 위한 모듈로서, 그의 대표적인 예로는 GPS(Global Position System) 모듈이 있다. 현재 기술에 의하면, 상기 GPS모듈(115)은 3개 이상의 위성으로부터 떨어진 거리 정보와 정확한 시간 정보를 산출한 다음 상기 산출된 정보에 삼각법을 적용함으로써, 위도, 경도, 및 고도에 따른 3차원의 현 위치 정보를 정확히 산출할 수 있다. 현재, 3개의 위성을 이용하여 위치 및 시간 정보를 산출하고, 또다른 1개의 위성을 이용하여 상기 산출된 위치 및 시간 정보의 오차를 수정하는 방법이 널리 사용되고 있다. 또한, GPS 모듈(115)은 현 위치를 실시간으로 계속 산출함으로써 속도 정보를 산출할 수 있다.
도 1을 참조하면, A/V(Audio/Video) 입력부(120)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 이에는 카메라(121)와 마이크(122) 등이 포함될 수 있다. 카메라(121)는 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 처리된 화상 프레임은 디스플레이부(151)에 표시될 수 있다.
카메라(121)에서 처리된 화상 프레임은 메모리(160)에 저장되거나 무선 통신부(110)를 통하여 외부로 전송될 수 있다. 카메라(121)는 사용 환경에 따라 2개 이상이 구비될 수도 있다.
마이크(122)는 통화모드 또는 녹음모드, 음성인식 모드 등에서 마이크로폰(Microphone)에 의해 외부의 음향 신호를 입력받아 전기적인 음성 데이터로 처리한다. 처리된 음성 데이터는 통화 모드인 경우 이동통신 모듈(112)을 통하여 이동통신 기지국으로 송신 가능한 형태로 변환되어 출력될 수 있다. 마이크(122)에는 외부의 음향 신호를 입력받는 과정에서 발생되는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다.
사용자 입력부(130)는 사용자가 단말기의 동작 제어를 위한 입력 데이터를 발생시킨다.
사용자 입력부(130)는 본 발명에 따라 표시되는 컨텐트들 중 두 개 이상의 컨텐트를 지정하는 신호를 사용자로부터 수신할 수 있다. 그리고, 두 개 이상의 컨텐트를 지정하는 신호는, 터치입력을 통하여 수신되거나, 하드키 및 소프트 키입력을 통하여 수신될 수 있다.
사용자 입력부(130)는 상기 하나 또는 둘 이상의 컨텐트들을 선택하는 입력을 사용자로부터 수신할 수 있다. 또한, 사용자로부터 휴대 단말기(100)가 수행할 수 있는 기능과 관련된 아이콘을 생성하는 입력을 수신할 수 있다.
상기와 같은, 사용자 입력부(130)는 방향키, 키 패드(key pad), 돔 스위치 (dome switch), 터치 패드(정압/정전), 조그 휠, 조그 스위치 등으로 구성될 수 있다.
센싱부(140)는 휴대 단말기(100)의 개폐 상태, 휴대 단말기(100)의 위치, 사용자 접촉 유무, 휴대 단말기의 방위, 휴대 단말기의 가속/감속 등과 같이 휴대 단말기(100)의 현 상태를 감지하여 휴대 단말기(100)의 동작을 제어하기 위한 센싱 신호를 발생시킨다. 예를 들어 휴대 단말기(100)가 슬라이드 폰 형태인 경우 슬라이드 폰의 개폐 여부를 센싱할 수 있다. 또한, 전원 공급부(190)의 전원 공급 여부, 인터페이스부(170)의 외부 기기 결합 여부 등을 센싱할 수도 있다. 한편, 상기 센싱부(140)는 근접 센서(141)를 포함할 수 있다. 상기 근접 센서(141)에 대해서는 나중에 터치스크린과 관련되어 후술된다.
출력부(150)는 시각, 청각 또는 촉각 등과 관련된 출력을 발생시키기 위한 것으로, 이에는 디스플레이부(151), 음향 출력 모듈(152), 알람부(153), 햅틱 모듈(154) 및 프로젝터 모듈(155) 등이 포함될 수 있다.
디스플레이부(151)는 휴대 단말기(100)에서 처리되는 정보를 표시(출력)한다. 예를 들어, 휴대 단말기가 통화 모드인 경우 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시한다. 휴대 단말기(100)가 화상 통화 모드 또는 촬영 모드인 경우에는 촬영 또는/및 수신된 영상 또는 UI, GUI를 표시한다.
상기와 같은, 디스플레이부(151)는 액정 디스플레이(liquid crystal display, LCD), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display, TFT LCD), 유기 발광 다이오드(organic light-emitting diode, OLED), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다.
이들 중 일부 디스플레이는 그를 통해 외부를 볼 수 있도록 투명형 또는 광투과형으로 구성될 수 있다. 이는 투명 디스플레이라 호칭될 수 있는데, 상기 투명 디스플레이의 대표적인 예로는 TOLED(Transparant OLED) 등이 있다. 디스플레이부(151)의 후방 구조 또한 광 투과형 구조로 구성될 수 있다. 이러한 구조에 의하여, 사용자는 단말기 바디의 디스플레이부(151)가 차지하는 영역을 통해 단말기 바디의 후방에 위치한 사물을 볼 수 있다.
휴대 단말기(100)의 구현 형태에 따라 디스플레이부(151)이 2개 이상 존재할 수 있다. 예를 들어, 휴대 단말기(100)에는 복수의 디스플레이부들이 하나의 면에 이격되거나 일체로 배치될 수 있고, 또한 서로 다른 면에 각각 배치될 수도 있다.
디스플레이부(151)와 터치 동작을 감지하는 센서(이하, '터치 센서'라 함)가 상호 레이어 구조를 이루는 경우(이하, '터치 스크린'이라 함)에, 디스플레이부(151)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 터치 센서는, 예를 들어, 터치 필름, 터치 시트, 터치 패드 등의 형태를 가질 수 있다.
터치 센서는 디스플레이부(151)의 특정 부위에 가해진 압력 또는 디스플레이부(151)의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력신호로 변환하도록 구성될 수 있다. 터치 센서는 터치 되는 위치 및 면적뿐만 아니라, 터치 시의 압력까지도 검출할 수 있도록 구성될 수 있다.
터치 센서에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기(미도시)로 보내진다. 터치 제어기는 그 신호(들)를 처리한 다음 대응하는 데이터를 제어부(180)로 전송한다. 이로써, 제어부(180)는 디스플레이부(151)의 어느 영역이 터치 되었는지 여부 등을 알 수 있게 된다.
상기 근접 센서(141)는 상기 터치스크린에 의해 감싸지는 휴대 단말기의 내부 영역 또는 상기 터치 스크린의 근처에 배치될 수 있다. 상기 근접 센서는 소정의 검출면에 접근하는 물체, 혹은 근방에 존재하는 물체의 유무를 전자계의 힘 또는 적외선을 이용하여 기계적 접촉이 없이 검출하는 센서를 말한다. 근접 센서는 접촉식 센서보다는 그 수명이 길며 그 활용도 또한 높다.
상기 근접 센서의 예로는 투과형 광전 센서, 직접 반사형 광전 센서, 미러 반사형 광전 센서, 고주파 발진형 근접 센서, 정전용량형 근접 센서, 자기형 근접 센서, 적외선 근접 센서 등이 있다. 상기 터치스크린이 정전식인 경우에는 상기 포인터의 근접에 따른 전계의 변화로 상기 포인터의 근접을 검출하도록 구성된다. 이 경우 상기 터치 스크린(터치 센서)은 근접 센서로 분류될 수도 있다.
이하에서는 설명의 편의를 위해, 상기 터치스크린 상에 포인터가 접촉되지 않으면서 근접되어 상기 포인터가 상기 터치스크린 상에 위치함이 인식되도록 하는 행위를 "근접 터치(proximity touch)"라고 칭하고, 상기 터치스크린 상에 포인터가 실제로 접촉되는 행위를 "접촉 터치(contact touch)"라고 칭한다. 상기 터치스크린 상에서 포인터로 근접 터치가 되는 위치라 함은, 상기 포인터가 근접 터치될 때 상기 포인터가 상기 터치스크린에 대해 수직으로 대응되는 위치를 의미한다.
상기 근접센서는, 근접 터치와, 근접 터치 패턴(예를 들어, 근접 터치 거리, 근접 터치 방향, 근접 터치 속도, 근접 터치 시간, 근접 터치 위치, 근접 터치 이동 상태 등)을 감지한다. 상기 감지된 근접 터치 동작 및 근접 터치 패턴에 상응하는 정보는 터치 스크린상에 출력될 수 있다.
음향 출력 모듈(152)은 호신호 수신, 통화모드 또는 녹음 모드, 음성인식 모드, 방송수신 모드 등에서 무선 통신부(110)로부터 수신되거나 메모리(160)에 저장된 오디오 데이터를 출력할 수 있다. 음향 출력 모듈(152)은 휴대 단말기(100)에서 수행되는 기능(예를 들어, 호신호 수신음, 메시지 수신음 등)과 관련된 음향 신호를 출력하기도 한다. 이러한 음향 출력 모듈(152)에는 리시버(Receiver), 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.
알람부(153)는 휴대 단말기(100)의 이벤트 발생을 알리기 위한 신호를 출력한다. 휴대 단말기에서 발생 되는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력, 터치 입력 등이 있다. 알람부(153)는 비디오 신호나 오디오 신호 이외에 다른 형태, 예를 들어 진동으로 이벤트 발생을 알리기 위한 신호를 출력할 수도 있다. 상기 비디오 신호나 오디오 신호는 디스플레이부(151)나 음성 출력 모듈(152)을 통해서도 출력될 수 있으므로, 이 경우 상기 디스플레이부(151) 및 음성출력모듈(152)은 알람부(153)의 일종으로 분류될 수도 있다.
햅틱 모듈(haptic module)(154)은 사용자가 느낄 수 있는 다양한 촉각 효과를 발생시킨다. 햅틱 모듈(154)이 발생시키는 촉각 효과의 대표적인 예로는 진동이 있다. 햅택 모듈(154)이 발생하는 진동의 세기와 패턴 등은 제어가능하다. 예를 들어, 서로 다른 진동을 합성하여 출력하거나 순차적으로 출력할 수도 있다.
햅틱 모듈(154)은, 진동 외에도, 접촉 피부면에 대해 수직 운동하는 핀 배열, 분사구나 흡입구를 통한 공기의 분사력이나 흡입력, 피부 표면에 대한 스침, 전극(eletrode)의 접촉, 정전기력 등의 자극에 의한 효과와, 흡열이나 발열 가능한 소자를 이용한 냉온감 재현에 의한 효과 등 다양한 촉각 효과를 발생시킬 수 있다.
햅틱 모듈(154)은 직접적인 접촉을 통해 촉각 효과의 전달할 수 있을 뿐만 아니라, 사용자가 손가락이나 팔 등의 근 감각을 통해 촉각 효과를 느낄 수 있도록 구현할 수도 있다. 햅틱 모듈(154)은 휴대 단말기(100)의 구성 태양에 따라 2개 이상이 구비될 수 있다.
프로젝터 모듈(155)은, 휴대 단말기(100)를 이용하여 이미지 프로젝트(project) 기능을 수행하기 위한 구성요소로서, 제어부(180)의 제어 신호에 따라 디스플레이부(151)상에 디스플레이되는 영상과 동일하거나 적어도 일부가 다른 영상을 외부 스크린 또는 벽에 디스플레이할 수 있다.
구체적으로, 프로젝터 모듈(155)은, 영상을 외부로 출력하기 위한 빛(일 예로서, 레이저 광)을 발생시키는 광원(미도시), 광원에 의해 발생한 빛을 이용하여 외부로 출력할 영상을 생성하기 위한 영상 생성 수단 (미도시), 및 영상을 일정 초점 거리에서 외부로 확대 출력하기 위한 렌즈(미도시)를 포함할 수 있다. 또한, 프로젝터 모듈(155)은, 렌즈 또는 모듈 전체를 기계적으로 움직여 영상 투사 방향을 조절할 수 있는 장치(미도시)를 포함할 수 있다.
프로젝터 모듈(155)은 디스플레이 수단의 소자 종류에 따라 CRT(Cathode Ray Tube) 모듈, LCD(Liquid Crystal Display) 모듈 및 DLP(Digital Light Processing) 모듈 등으로 나뉠 수 있다. 특히, DLP 모듈은, 광원에서 발생한 빛이 DMD(Digital Micromirror Device) 칩에 반사됨으로써 생성된 영상을 확대 투사하는 방식으로 프로젝터 모듈(151)의 소형화에 유리할 수 있다.
바람직하게, 프로젝터 모듈(155)은, 휴대 단말기(100)의 측면, 정면 또는 배면에 길이 방향으로 구비될 수 있다. 물론, 프로젝터 모듈(155)은, 필요에 따라 휴대 단말기(100)의 어느 위치에라도 구비될 수 있음은 당연하다.
메모리(160)는 제어부(180)의 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 입/출력되는 데이터들(예를 들어, 전화번호부, 메시지, 오디오, 정지영상, 전자도서, 동영상, 송수신 메시지 히스토리 등)의 임시 저장을 위한 기능을 수행할 수도 있다. 상기 메모리(160)에는 상기 데이터들 각각에 대한 사용 빈도(예를 들면, 각 전화번호, 각 메시지, 각 멀티미디어에 대한 사용빈도)도 함께 저장될 수 있다. 또한, 상기 메모리(160)에는 상기 터치스크린 상의 터치 입력시 출력되는 다양한 패턴의 진동 및 음향에 관한 데이터를 저장할 수 있다.
상기와 같은 메모리(160)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory, ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 휴대 단말기(100)는 인터넷(internet)상에서 상기 메모리(160)의 저장 기능을 수행하는 웹 스토리지(web storage)와 관련되어 동작할 수도 있다.
인터페이스부(170)는 휴대 단말기(100)에 연결되는 모든 외부기기와의 통로 역할을 한다. 인터페이스부(170)는 외부 기기로부터 데이터를 전송받거나, 전원을 공급받아 휴대 단말기(100) 내부의 각 구성 요소에 전달하거나, 휴대 단말기(100) 내부의 데이터가 외부 기기로 전송되도록 한다. 예를 들어, 유/무선 헤드셋 포트, 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등이 인터페이스부(170)에 포함될 수 있다.
식별 모듈은 휴대 단말기(100)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(User Identify Module, UIM), 가입자 인증 모듈(Subscriber Identify Module, SIM), 범용 사용자 인증 모듈(Universal Subscriber Identity Module, USIM) 등을 포함할 수 있다. 식별 모듈이 구비된 장치(이하 '식별 장치')는, 스마트 카드(smart card) 형식으로 제작될 수 있다. 따라서 식별 장치는 포트를 통하여 단말기(100)와 연결될 수 있다.
상기 인터페이스부는 휴대 단말기(100)가 외부 크래들(cradle)과 연결될 때 상기 크래들로부터의 전원이 상기 휴대 단말기(100)에 공급되는 통로가 되거나, 사용자에 의해 상기 크래들에서 입력되는 각종 명령 신호가 상기 휴대 단말기로 전달되는 통로가 될 수 있다. 상기 크래들로부터 입력되는 각종 명령 신호 또는 상기 전원은 상기 휴대 단말기가 상기 크래들에 정확히 장착되었음을 인지하기 위한 신호로 동작될 수도 있다.
제어부(controller)(180)는 통상적으로 휴대 단말기의 전반적인 동작을 제어한다. 예를 들어 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련된 제어 및 처리를 수행한다. 제어부(180)는 멀티 미디어 재생을 위한 멀티미디어 모듈(181)을 구비할 수도 있다. 멀티미디어 모듈(181)은 제어부(180) 내에 구현될 수도 있고, 제어부(180)와 별도로 구현될 수도 있다.
상기 제어부(180)는 상기 터치스크린 상에서 행해지는 필기 입력 또는 그림 그리기 입력을 각각 문자 및 이미지로 인식할 수 있는 패턴 인식 처리를 행할 수 있다.
전원 공급부(190)는 제어부(180)의 제어에 의해 외부의 전원, 내부의 전원을 인가받아 각 구성요소들의 동작에 필요한 전원을 공급한다.
도 2a는 본 발명과 관련된 휴대 단말기의 일 예를 전면에서 바라본 사시도이다.
개시된 휴대 단말기(100)는 바 형태의 본체를 구비하고 있다. 다만, 본 발명은 여기에 한정되지 않고, 2 이상의 바디들이 상대 이동 가능하게 결합되는 슬라이드 타입, 폴더 타입, 스윙 타입, 스위블 타입 등 다양한 구조에 적용이 가능하다.
바디는 외관을 이루는 케이스(케이싱, 하우징, 커버 등)를 포함한다. 본 실시예에서, 케이스는 프론트 케이스(101)와 리어 케이스(102)로 구분될 수 있다. 프론트 케이스(101)와 리어 케이스(102)의 사이에 형성된 공간에는 각종 전자부품들이 내장된다. 프론트 케이스(101)와 리어 케이스(102) 사이에는 적어도 하나의 중간 케이스가 추가로 배치될 수도 있다.
케이스들은 합성수지를 사출하여 형성되거나 금속 재질, 예를 들어 스테인레스 스틸(STS) 또는 티타늄(Ti) 등과 같은 금속 재질을 갖도록 형성될 수도 있다.
단말기 바디, 주로 프론트 케이스(101)에는 디스플레이부(151), 음향출력부(152), 카메라(121), 사용자 입력부(130/131,132), 마이크(122), 인터페이스(170) 등이 배치될 수 있다.
디스플레이부(151)는 프론트 케이스(101)의 주면의 대부분을 차지한다. 디스플레이부(151)의 양단부 중 일 단부에 인접한 영역에는 음향출력부(151)와 카메라(121)가 배치되고, 다른 단부에 인접한 영역에는 사용자 입력부(131)와 마이크(122)가 배치된다. 사용자 입력부(132)와 인터페이스(170) 등은 프론트 케이스(101) 및 리어 케이스(102)의 측면들에 배치될 수 있다.
사용자 입력부(130)는 휴대 단말기(100)의 동작을 제어하기 위한 명령을 입력받기 위해 조작되는 것으로서, 복수의 조작 유닛들(131,132)을 포함할 수 있다. 조작 유닛들(131,132)은 조작부(manipulating portion)로도 통칭 될 수 있다.
제1 또는 제2 조작 유닛들(131, 132)에 의하여 입력되는 내용은 다양하게 설정될 수 있다. 예를 들어, 제1 조작 유닛(131)은 시작, 종료, 스크롤 등과 같은 명령을 입력받고, 제2 조작 유닛(132)은 음향출력부(152)에서 출력되는 음향의 크기 조절 또는 디스플레이부(151)의 터치 인식 모드 활성화/비활성화 등과 같은 명령을 입력받을 수 있다.
도 2b는 도 2a에 도시된 휴대 단말기의 후면 사시도이다.
도 2b를 참조하면, 단말기 바디의 후면, 다시 말해서 리어 케이스(102)에는 카메라(121')가 추가로 장착될 수 있다. 카메라(121')는 카메라(121, 도 2a 참조)와 실질적으로 반대되는 촬영 방향을 가지며, 카메라(121)와 같거나 서로 다른 화소를 가지는 카메라일 수 있다.
예를 들어, 카메라(121)는 화상 통화 등의 경우에 사용자의 얼굴을 촬영하여 상대방에 전송함에 무리가 없도록 저 화소를 가지며, 카메라(121')는 일반적인 피사체를 촬영하고 바로 전송하지는 않는 경우가 많기에 고 화소를 가지는 것이 바람직하다. 카메라(121,121')는 회전 또는 팝업(pop-up) 가능하게 단말기 바디에 설치될 수도 있다.
카메라(121')에 인접하게는 플래쉬(123)와 거울(124)이 추가로 배치될 수 있다. 플래쉬(123)는 카메라(121')로 피사체를 촬영하는 경우에 피사체를 향해 빛을 비추게 된다. 거울(124)은 사용자가 카메라(121')를 이용하여 자신을 촬영(셀프 촬영)하고자 하는 경우에, 사용자 자신의 얼굴 등을 비춰볼 수 있게 한다.
단말기 바디의 후면에는 음향 출력 모듈(152')이 추가로 배치될 수도 있다. 음향 출력부(152')는 음향 출력 모듈(152, 도 2a 참조)과 함께 스테레오 기능을 구현할 수 있으며, 통화시 스피커폰 모드의 구현을 위하여 사용될 수도 있다.
통화 등을 위한 안테나 외에 방송신호 수신용 안테나(116)가 단말기 바디의 측면에 추가적으로 배치될 수 있다. 방송 수신부(111, 도 1 참조)의 일부를 이루는 안테나(116)는 단말기 바디에서 인출 가능하게 설치될 수 있다.
단말기 바디에는 휴대 단말기(100)에 전원을 공급하기 위한 전원 공급부(190)가 장착된다. 전원 공급부(190)는 단말기 바디에 내장되거나, 단말기 바디의 외부에서 직접 탈착될 수 있게 구성될 수 있다.
리어 케이스(102)에는 터치를 감지하기 위한 터치 패드(135)가 추가로 장착될 수 있다. 터치 패드(135)는 디스플레이부(151)를 위해 광 투과형으로 구성될 수도 있다. 이 경우에, 디스플레이부(151)가 양면에서(즉, 휴대 단말기의 전면 및 후면 둘 다의 방향으로) 시각 정보를 출력하도록 구성된다면, 터치 패드(135)를 통해서도 상기 시각 정보를 인지할 수 있게 된다. 상기 양면에 출력되는 정보는 상기 터치 패드(135)에 의해 모두 제어될 수도 있다.
한편, 터치 패드(135) 전용 디스플레이가 별도로 장착됨으로써, 리어 케이스(102)에도 터치 스크린이 배치될 수도 있다.
터치 패드(135)는 프론트 케이스(101)의 디스플레이부(151)와 상호 관련되어 작동한다. 터치 패드(135)는 디스플레이부(151)의 후방에 평행하게 배치될 수 있다. 이러한 터치 패드(135)는 디스플레이부(151)와 동일하거나 작은 크기를 가질 수 있다.
여기에 설명되는 다양한 실시예는 예를 들어, 소프트웨어, 하드웨어 또는 이들의 조합된 것을 이용하여 컴퓨터 또는 이와 유사한 장치로 읽을 수 있는 기록매체 내에서 구현될 수 있다.
하드웨어적인 구현에 의하면, 여기에 설명되는 실시예는 ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays, 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors), 기타 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다. 일부의 경우에 본 명세서에서 설명되는 실시예들이 제어부(180) 자체로 구현될 수 있다.
소프트웨어적인 구현에 의하면, 본 명세서에서 설명되는 절차 및 기능과 같은 실시예들은 별도의 소프트웨어 모듈들로 구현될 수 있다. 상기 소프트웨어 모듈들 각각은 본 명세서에서 설명되는 하나 이상의 기능 및 작동을 수행할 수 있다. 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션으로 소프트웨어 코드가 구현될 수 있다. 상기 소프트웨어 코드는 메모리(160)에 저장되고, 제어부(180)에 의해 실행될 수 있다.
본 명세서에서 언급되는 휴대 단말기는 도 1에 도시된 구성요소들 중 적어도 하나를 포함할 수 있다. 또한, 제어부(180)는, 구성요소(예를 들어, 터치 스크린, 무선 통신부, 메모리 등)를 이용한 동작 수행을 위하여 구성요소의 개별 동작 또는 복수의 구성요소들 간의 연계 동작을 제어할 수 있다.
이하, 도 3 내지 도 21을 참조하여, 본 발명에 따라, 터치스크린 화면 상에 입력되는 터치제스처의 궤적선이 상기 화면 상에서 잘 식별되도록 상기 궤적선 및/또는 상기 화면의 표시 동작을 제어하는 과정에 대해 상세히 설명한다.
먼저, 이하의 도 3 내지 도 7을 참조하여, 본 발명에 따른 터치제스처 설정 과정에 대해 먼저 설명한다.
도 3은 본 발명에 따른 터치제스처 설정 과정을 나타낸 흐름도이다.
도 4 내지 도 7은 본 발명에 따른 터치제스처 설정 과정을 나타낸 화면 설명도이다.
먼저, 도 3을 참조하면, 제어부(180)는 터치스크린(151) 또는 사용자 입력부(130)를 통해 휴대 단말기(100)에 구비된 기능들 중에서 터치제스처 설정 기능이 선택되면, 상기 터치제스처 설정 기능을 실행하고, 상기 터치제스처 설정 기능의 실행 화면을 표시한다[S31].
상기 터치제스처 설정 기능은, 사용자가 입력하는 특정 패턴을 가지는 터치제스처에 휴대 단말기(100)의 특정 기능을 맵핑하는 기능으로써, 제어부(180)는 터치스크린(151) 상에 상기 터치제스처 설정 기능을 통해 설정된 터치제스처가 입력되면, 상기 입력된 터치제스처에 맵핑된 기능을 검색하여 실행한다.
제어부(180)는 터치스크린(151) 또는 사용자 입력부(130)를 통해 사용자로부터 상기 터치제스처 설정 기능 실행 화면 내에서 설정하고자 하는 터치제스처 및 상기 터치제스처에 할당할 기능이 설정되면[S32, S33], 상기 설정된 터치제스처 및 기능을 맵핑하여 메모리(160)에 저장한다[S34].
도 4의 (a)는 도 3에서 설명한 상기 터치제스처 설정 기능의 실행 화면(210)을 나타내고 있고, 상기 실행 화면(210) 내에는 터치제스처 설정창(220) 및 기능 설정창(230)이 포함된 것을 나타내고 있다.
이때, 상기 터치제스처 설정창(220) 내에는 접촉 터치(contact touch) 설정을 위한 제1 설정창(220A) 및 근접 터치(proximity touch) 설정을 위한 제2 설정창(220B)을 포함한다.
즉, 제어부(180)는 사용자로부터 제1 설정창(220A)이 선택되면, 터치스크린(151)에 접촉되어 입력되는 사용자의 접촉 터치의 패턴을 인식한다. 또한, 제어부(180)는 사용자로부터 제2 설정창(220B)이 선택되면, 근접센서(141)를 구동시키고 터치스크린(151) 상에 입력되는 사용자의 근접 터치의 패턴을 인식한다.
즉, 사용자는 상기 제1 및 제2 설정창(220A, 220B)의 선택을 통해 입력을 원하는 터치제스처의 타입을 접촉 또는 근접 터치제스처로 설정할 수 있는 것이다.
그 다음으로, 제어부(180)는 터치제스처 설정창(220)을 통해 사용자의 터치제스처(221)가 입력된 후에, 기능 설정창(230)을 통해 사용자로부터 특정 기능(231)이 설정되면, 도 4의 (b)에 도시된 바와 같이, 상기 설정된 터치제스처 및 기능을 맵핑하여 메모리(160)에 저장한다.
이때, 사용자는 상기 기능 설정창(230)을 통해 휴대 단말기(100)에 구비된 모든 기능을 자신이 입력한 터치제스처(221)에 할당할 수 있다.
일 예로, 도 4에서는 상기 기능이 음악(Music) 어플리케이션 실행 기능인 것을 나타내고 있으나, 본 발명의 기능 설정창(230)을 통해 설정 가능한 기능의 종류를 이에 한정하는 것은 아니다.
즉, 본 발명의 기능 설정창(230)을 통해 설정 가능한 기능은, 휴대 단말기(100)에 구비된 모든 실행 가능한 컨텐트와, 컨텐트와 관련된 조작 기능과, 메뉴와, 메뉴와 관련된 조작 기능과, 휴대 단말기(100)의 동작 모드 변경(일 예로, 특정 기능 실행 모드에서 홈스크린 모드로 전환 또는 대기화면 모드로 전환) 등을 포함할 수 있다. 또한, 상기 컨텐트는, 폰북, 메시지, 음악 파일, 동영상 파일, 이미지 파일, 스케줄, 연락처 정보, 문서 파일, 게임 파일, 계산기 파일, 웹페이지 주소 파일, 전자 사전 파일, 어플리케이션, 운영체제 등의 휴대 단말기(100)에서 사용자가 조작하여 사용할 수 있는 모든 데이터를 포함할 수 있다.
그 다음으로, 도 5는 둘 이상의 터치제스처 각각에 둘 이상의 기능들을 맵핑하여 저장하는 과정을 나타내고 있다.
즉, 도 5의 (a)에 도시된 바와 같이, 제어부(180)는 터치제스처 설정창(220)을 통해 서로 다른 패턴의 독립적인 제1 및 제2 터치제스처(221A, 221B)가 입력되고, 기능 설정창(230)을 통해 상기 제1 및 제2 터치제스처(221A, 221B)에 각각 할당할 제1 및 제2 기능이 설정되면, 도 5의 (b)에 도시된 바와 같이, 상기 설정된 제1 및 제2 터치제스처(221A, 221B)에 각각의 제1 및 제2 기능을 맵핑하여 메모리(160)에 저장한다.
이때, 상기 제1 및 제2 터치제스처(221A, 221B)는 둘 다 접촉 터치제스처 또는 둘 다 근접 터치제스처가 될 수 있고, 또한, 어느 하나는 접촉 터치제스처이고, 다른 하나는 근접 터치제스처가 될 수 있다.
또한, 상기 제1 및 제2 터치제스처(221A, 221B)에 각각 할당되는 제1 및 제2 기능 중 어느 하나는 메인 기능이고, 다른 하나는 상기 메인 기능에 종속된 서브 기능이 될 수 있다. 일 예로, 도 5에서는 제1 터치제스처(221A)에 할당된 기능은 메인 기능으로써, 음악(Music) 어플리케이션 실행 기능이고, 제2 터치제스처(221B)에 할당된 기능은 상기 음악(Music) 어플리케이션 실행 기능에 대한 서브 기능으로써, 상기 음악 어플리케이션의 재생 리스트 내의 2번째 음악 파일을 재생하는 기능이 될 수 있다. 즉, 제어부(180)는 화면 상에 상기 제1 및 제2 터치제스처(221A, 221B)가 입력되면, 상기 음악 어플리케이션을 실행하고, 동시에 상기 음악 어플리케이션의 재생 리스트 내의 2번째 음악 파일을 재생하는 것이다.
또한, 상기 제1 및 제2 터치제스처(221A, 221B)에 각각 할당되는 제1 및 제2 기능은 서로 연관되지 않은 독립된 기능이 될 수 있다.
일 예로, 상기 제1 터치제스처(221A)에는 제1 컨텐트의 실행 기능이 할당되고, 상기 제2 터치제스처(221B)에는 제2 컨텐트의 실행 기능이 할당될 수 있다. 이 경우, 제어부(180)는 제1 컨텐트의 실행 화면 상에 상기 제2 터치제스처(221B)가 입력되면, 상기 제1 컨텐트의 실행을 종료하고, 상기 제2 터치제스처(221B)에 할당된 상기 제2 컨텐트를 실행하고, 상기 제2 컨텐트의 실행 화면을 표시할 수 있다. 또한, 제어부(180)는 제2 컨텐트의 실행 화면 상에 상기 제1 터치제스처(221A)가 입력되면, 상기 제2 컨텐트의 실행을 종료하고, 상기 제1 터치제스처(221A)에 할당된 상기 제1 컨텐트를 실행하고, 상기 제1 컨텐트의 실행 화면을 표시할 수 있다.
또한, 상기 제1 터치제스처(221A)에는 제1 컨텐트의 동작 제어 기능이 할당되고, 상기 제2 터치제스처(221B)에는 제2 컨텐트의 동작 제어 기능이 할당될 수 있다. 이 경우, 제어부(180)는 상기 제1 및 제2 컨텐트를 동시에 실행한 상태(멀티태스킹)에서 현재 표시된 상기 제1 컨텐트의 실행 화면 상에 상기 제2 터치제스처(221B)가 입력되면, 상기 제1 컨텐트의 실행 화면을 상기 제2 컨텐트의 실행 화면으로 전환하지 않고도, 상기 제2 터치제스처(221B)에 할당된 상기 제2 컨텐트의 동작 제어 기능을 상기 제2 컨텐트에 반영할 수 있다. 또한, 제어부(180)는 현재 상기 표시된 제2 컨텐트의 실행 화면 상에 상기 제1 터치제스처(221A)가 입력되면, 상기 제2 컨텐트의 실행 화면을 상기 제1 컨텐트의 실행 화면으로 전환하지 않고도, 상기 제1 터치제스처(221A)에 할당된 상기 제1 컨텐트의 동작 제어 기능을 상기 제2 컨텐트에 반영할 수 있다.
일 예로, 상기 제1 컨텐트는 음악이고, 상기 제1 터치제스처(221A)에 할당된 동영상의 동작 제어 기능은 볼륨 업이고, 상기 제2 컨텐트는 문서이고, 상기 제2 터치제스처(221B)에 할당된 문서의 동작 제어 기능은 페이지 이동이라 가정하면, 제어부(180)는 상기 음악의 재생 및 문서의 표시를 동시에 수행한 상태에서, 상기 문서가 표시된 화면 상에 상기 제1 터치제스처(221A)가 입력되면, 상기 문서가 표시된 화면을 상기 음악 재생 화면으로 전환하지 않고도, 현재 재생 중인 음악의 볼륨을 업할 수 있는 것이다.
또한, 제어부(180)는 상기 제1 및 제2 컨텐트를 동시에 실행한 상태에서, 현재 표시된 제1 컨텐트의 실행 화면 상에 상기 제1 및 제2 터치제스처(221A, 221B)가 함께 입력되면, 상기 제1 및 제2 터치제스처(221A, 221B)에 할당된 제1 및 제2 컨텐트의 동작 제어 기능을 상기 제1 및 제2 컨텐트에 동시에 반영할 수 있다.
즉, 상기 제1 컨텐트는 음악이고, 상기 제1 터치제스처(221A)에 할당된 동영상의 동작 제어 기능은 볼륨 업이고, 상기 제2 컨텐트는 문서이고, 상기 제2 터치제스처(221B)에 할당된 문서의 동작 제어 기능은 페이지 이동이라 가정하면, 제어부(180)는 상기 음악의 재생 및 문서의 표시를 동시에 수행한 상태에서, 상기 문서가 표시된 화면 상에 상기 제1 및 제2 터치제스처(221A, 221B)가 함께 입력되면, 현재 화면 상에 표시된 문서의 페이지를 다음 또는 이전 페이지로 이동시키고, 동시에 현재 재생 중인 음악의 볼륨을 업할 수 있는 것이다.
그 다음으로, 도 6은 도 3 내지 도 5의 과정에 의해 설정된 터치제스처의 궤적선 및 화면의 표시 스타일을 설정하는 과정을 나타내는 화면 설명도이다.
도 6의 (a)에 도시된 바와 같이, 제어부(180)는 도 3 내지 도 5의 과정에 의해 특정 기능이 할당된 하나 이상의 터치제스처가 설정되면, 사용자의 요청에 따라, 상기 설정된 터치제스처의 궤적선 및 화면의 표시 스타일을 설정할 수 있는 궤적선 표시 스타일 설정창(240) 및 화면 표시 스타일 설정창(250)을 표시할 수 있다.
즉, 상기 궤적선 표시 스타일 설정창(240) 및 화면 표시 스타일 설정창(250)은 도 3 내지 도 5에서 설정된 터치제스처가 화면 상에 입력될 때, 상기 터치제스처의 궤적선이 상기 화면 내에서 잘 식별되도록 상기 궤적선 및 화면의 표시 스타일을 설정할 수 있도록 하는 설정창이다.
이때, 사용자는 상기 궤적선 표시 스타일 설정창(240) 및 상기 화면 표시 스타일 설정창(250)을 통해 이하에서 설명되는 본 발명의 제1 내지 제6 실시예와 같이, 상기 궤적선이 상기 화면 내에서 잘 식별되도록 상기 궤적선 및 상기 화면의 표시 스타일을 설정할 수 있다.
제어부(180)는 상기 궤적선 표시 스타일 설정창(240) 및 상기 화면 표시 스타일 설정창(250)을 통해 사용자로부터 상기 궤적선 및 상기 화면의 표시 스타일이 설정되면, 도 6의 (b)에 도시된 바와 같이, 상기 설정된 궤적선 및 상기 화면의 표시 스타일을 저장한다.
그리고, 제어부(180)는 화면 상에 상기 도 3 내지 도 5의 과정에 의해 설정된 터치제스처가 입력되면, 상기 터치제스처의 궤적선 및 상기 터치제스처가 입력되는 화면에 상기 도 6의 과정에 의해 설정된 표시 스타일을 적용한다.
일 예로, 도 6에는 상기 궤적선의 표시 스타일이 칼라 표시(241)로 설정되고, 상기 화면의 표시 스타일이 흑백 표시(251)로 설정된 것을 나타내고 있다.
이 경우에, 제어부(180)는 상기 화면 상에 터치제스처가 입력되면, 상기 화면의 배경을 흑백으로 표시하고, 상기 화면 상에 입력되는 터치제스처의 궤적선을 칼라로 표시함으로써, 상기 화면 내에서 상기 궤적선이 잘 식별되도록 하는 것이다.
그 다음으로, 도 7은 동일한 패턴을 가지는 터치제스처들 각각에 서로 다른 궤적선의 표시 스타일 및 서로 다른 기능을 설정하는 과정을 나타내는 화면 설명도이다.
도 7의 (a)에 도시된 바와 같이, 제어부(180)는 터치제스처 설정창(220)을 통해 특정 패턴을 가지는 제1 터치제스처(221)가 설정되고, 궤적선 표시 스타일 설정창(240)을 통해 상기 제1 터치제스처(221)의 궤적선 색상으로 제1 색상(241A)이 설정되고, 기능 설정창(230)을 통해 상기 제1 터치제스처(221)에 할당할 기능으로 제1 기능(231A)이 설정되면, 도 7의 (c)에 도시된 바와 같이, 상기 설정된 제1 터치제스처(221)와, 제1 색상(241A) 및 제1 기능(231A)을 서로 맵핑하여 메모리(160)에 저장한다.
일 예로, 도 7의 (a)에서는 제1 터치제스처(221)의 궤적선 색상으로 '적색'(241A)이 설정되고, 제1 터치제스처(221)에 할당할 기능으로 '음악 재생기 기능'(231A)이 설정된 것을 나타내고 있다.
또한, 도 7의 (b)에 도시된 바와 같이, 제어부(180)는 터치제스처 설정창(220)을 통해 상기 제1 터치제스처(221)와 동일한 제2 터치제스처(221)가 설정되고, 궤적선 표시 스타일 설정창(240)을 통해 상기 제2 터치제스처(221)의 궤적선 색상으로 제2 색상(241B)이 설정되고, 기능 설정창(230)을 통해 상기 제2 터치제스처(221)에 할당할 기능으로 제2 기능(231B)이 설정되면, 도 7의 (c)에 도시된 바와 같이, 상기 설정된 제2 터치제스처(221)와, 제2 색상(241B) 및 제2 기능(231B)을 서로 맵핑하여 메모리(160)에 저장한다.
일 예로, 도 7의 (b)에서는 제2 터치제스처(221)의 궤적선 색상으로 '노란색'(241B)이 설정되고, 제2 터치제스처(221)에 할당할 기능으로 '이미지 뷰어 기 기능'(231B)이 설정된 것을 나타내고 있고, 제어부(180)는 사용자에 의해 궤적선이 '적색(241B)'으로 설정된 제1 터치제스처가 화면 상에 입력되면, 상기 제1 터치제스처에 할당된 '음악 재생기 기능'(231A)을 실행할 수 있는 것이다.
또한, 제어부(180)는 상기 제1 터치제스처와 동일하고, 사용자에 의해 궤적선이 '노란색(241B)'으로 설정된 제2 터치제스처가 상기 화면 상에 입력되면, 상기 제2 터치제스처에 할당된 '이미지 뷰어 기능'(231B)을 실행할 수 있는 것이다.
즉, 도 7에서는 같은 터치제스처라도 사용자가 설정한 궤적선의 표시 스타일에 따라 서로 다른 기능을 제공할 수 있는 것이다.
이때, 사용자는 상기 궤적선 표시 스타일 설정창(240)을 통해 상기 동일한 제1 및 제2 터치제스처의 궤적선 표시 스타일의 밝기를 서로 다르게 설정할 수 있고, 상기 제1 및 제2 터치제스처의 궤적선 표시 스타일을 각각 칼라 또는 흑백으로 서로 다르게 설정할 수 있고, 상기 제1 및 제2 터치제스처의 궤적선 표시 스타일의 투명도를 서로 다르게 설정할 수 있고, 상기 제1 및 제2 터치제스처의 궤적선의 선 굵기를 서로 다르게 설정할 수 있고, 상기 제1 및 제2 터치제스처의 궤적선 표시 스타일을 각각 3D 또는 2D로 서로 다르게 설정할 수 있고, 상기 제1 및 제2 터치제스처의 궤적선 표시 스타일의 색상을 서로 다르게 설정할 수도 있다.
이상, 도 3 내지 도 7을 참조하여, 본 발명에 따른 터치제스처의 설정 과정에 대해 상세히 설명하였다.
이하에서는, 도 8 내지 도 21을 참조하여, 본 발명에 따라, 터치스크린 화면 상에 입력되는 터치제스처의 궤적선이 상기 화면 상에서 잘 식별되도록 제어하는 과정에 대해 상세히 설명한다.
도 8은 본 발명에 따라 터치스크린 화면 상에 입력되는 터치제스처의 궤적선이 상기 화면 상에서 잘 식별되도록 제어하는 과정을 나타낸 흐름도이다.
도 8을 참조하면, 제어부(180)는 터치스크린(151) 화면 상에 하나 이상의 터치제스처가 입력되는지 감지하고[S110], 상기 화면 상에 상기 터치제스처가 입력되면[S120], 상기 입력된 터치제스처의 궤적을 나타내는 궤적선을 상기 화면 상에 표시하되, 상기 화면 상에서 상기 궤적선이 잘 식별되도록 제어한다[S130].
이때, 상기 터치제스처는, 접촉 또는 근접 터치제스처가 될 수 있다.
한편, 제어부(180)는 상기 화면 상에서 상기 궤적선이 잘 식별되도록, 상기 궤적선의 표시 스타일 또는 상기 화면의 표시 스타일을 변경할 수 있다. 즉, 제어부(180)는 상기 궤적선의 표시 스타일과 상기 화면의 표시 스타일을 상반되게 변경함으로써, 상기 화면 상에서 상기 궤적선이 잘 식별되도록 할 수 있다.
또한, 제어부(180)는 상술한 도 6의 과정에 의해 서로 다르게 설정된 궤적선의 표시 스타일 및 상기 화면의 표시 스타일을 상기 궤적선 및 상기 화면에 적용함으로써, 상기 화면 상에서 상기 궤적선이 잘 식별되도록 할 수 있다.
상기 화면 상에서 상기 궤적선이 잘 식별되도록 하는 과정은 이하의 제1 내지 제6 실시예에서 상세히 후술한다.
제어부(180)는 상기 입력된 터치제스처의 궤적선이 상기 화면 내에서 잘 식별되도록 제어한 상태에서, 상기 터치제스처의 입력이 완료되었는지를 감지한다[S140].
이때, 상기 입력된 터치제스처가 상기 화면 상에 직접 접촉되는 터치제스처이면, 제어부(180)는 상기 화면 상에 상기 터치제스처의 접촉이 해제되면, 상기 터치제스처의 입력이 완료된 것으로 판단할 수 있다. 또한, 제어부(180)는 상기 화면 상에 상기 입력된 접촉 터치제스처의 완료 기능이 할당된 아이콘을 표시하고, 상기 접촉 터치제스처가 입력된 후에 상기 아이콘이 터치되면, 상기 접촉 터치제스처의 입력이 완료된 것으로 판단할 수 있다.
또한, 상기 입력된 터치제스처가 상기 화면 상에 근접되는 근접 터치제스처이면, 제어부(180)는 상기 화면에 대한 상기 근접 터치제스처의 근접 깊이가 기 설정된 깊이보다 상기 화면의 반대 방향으로 멀어지면, 상기 근접 터치제스처의 입력이 완료된 것으로 판단할 수 있다. 또한, 제어부(180)는 상기 화면 상에 상기 입력된 근접 터치제스처의 완료 기능이 할당된 아이콘을 표시하고, 상기 근접 터치제스처가 입력된 후에 상기 아이콘이 터치되면, 상기 근접 터치제스처의 입력이 완료된 것으로 판단할 수 있다.
제어부(180)는 상기와 같이, 상기 터치제스처의 입력이 완료되면[S150], 상기 터치제스처의 궤적선을 표시하지 않고, 메모리(160)에서 상기 터치제스처에 맵핑된 기능을 검색하고, 상기 검색된 기능을 실행한다[S160].
이하, 도 9 내지 도 21을 참조하여, 도 8의 과정에 따른 실시예들을 상세히 설명한다.
이하에서 설명되는 제1 내지 제13 실시예는 서로 독립적으로 수행되거나 또는 내용 전체 또는 내용의 일부가 서로 결합되거나 조합되어 수행될 수 있다.
제1 실시예
본 발명의 제1 실시예는, 터치제스처의 궤적선 및 상기 화면의 밝기를 다르게 하여 상기 화면 내에서 상기 궤적선이 잘 식별되도록 하는 과정을 나타내고 있다.
이하, 도 9를 참조하여, 본 발명의 제1 실시예에 대해 상세히 설명한다.
도 9는 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제1 실시예 화면 설명도이다.
도 9의 (a)에 도시된 바와 같이, 제어부(180)는 터치스크린의 화면(300) 상에 사용자의 터치제스처가 입력되면, 도 9의 (b)에 도시된 바와 같이, 상기 입력된 터치제스처 패턴의 형상(M)과 동일한 형상의 궤적선(310)을 표시한다.
도 9의 (a)에서는 상기 화면(300)이 다수의 어플리케이션을 포함한 홈스크린인 것으로 나타내고 있으나, 상기 화면(300)의 종류를 이에 한정하는 것은 아니다.
즉, 상기 화면(300)은 휴대 단말기(100)에서 표시 가능한 모든 화면을 포함한다.
한편, 제어부(180)는 상기 궤적선(310)을 표시할 때, 현재 화면(300)의 밝기를 파악하고, 상기 궤적선(310)의 밝기를 상기 파악된 화면(300)의 밝기보다 더 밝게 표시함으로써, 사용자가 상기 화면(300) 내에서 상기 궤적선(310)을 잘 식별할 수 있도록 한다.
또한, 제어부(180)는 상기 궤적선(310)의 밝기를 파악하고, 상기 화면(300)의 밝기를 상기 파악된 궤적선(310)의 밝기보다 더 어둡게 표시함으로써, 사용자가 상기 화면(300) 내에서 상기 궤적선(310)을 잘 식별할 수 있도록 할 수도 있다.
또한, 제어부(180)는 상술한 도 6의 궤적선 표시 스타일 설정창(240) 및 화면 표시 스타일 설정창(250)을 통해 상기 궤적선(310) 및 상기 화면(300)의 밝기가 메모리(160)에 미리 설정되어 있는 경우, 상기 설정된 밝기로 상기 궤적선(310) 및 상기 화면(300)을 표시할 수도 있다.
한편, 제어부(180)는 상기 터치제스처의 입력이 완료되면, 상기 궤적선(310)를 상기 화면(300) 내에 표시하지 않고, 또한, 상기 화면(300)의 밝기를 원래의 밝기로 변경한 후에, 상기 메모리(160)에서 상기 터치제스처에 맵핑된 기능을 검색하고, 상기 검색된 기능을 실행한다.
제2 실시예
본 발명의 제2 실시예는, 터치제스처의 궤적선 및 상기 화면을 칼라 또는 흑백으로 표시함으로써, 상기 화면 내에서 상기 궤적선이 잘 식별되도록 하는 과정을 나타내고 있다.
이하, 도 10을 참조하여, 본 발명의 제2 실시예에 대해 상세히 설명한다.
도 10은 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제2 실시예 화면 설명도이다.
도 10의 (a)에 도시된 바와 같이, 제어부(180)는 터치스크린의 화면(300) 상에 사용자의 터치제스처가 입력되면, 도 10의 (b)에 도시된 바와 같이, 상기 입력된 터치제스처 패턴의 형상(M)과 동일한 형상의 궤적선(310)을 표시한다.
이때, 제어부(180)는 상기 궤적선(310)을 표시할 때, 상기 궤적선(310)의 기 설정된 색상으로 칼라 표시하고, 상기 화면(300)을 흑백으로 표시함으로써, 사용자가 상기 화면(300) 내에서 상기 궤적선(310)을 잘 식별할 수 있도록 한다.
또한, 제어부(180)는 상기 궤적선(310)을 흑백으로 표시하고, 상기 화면(300)을 원래의 칼라로 표시함으로써, 사용자가 상기 화면(300) 내에서 상기 궤적선(310)을 잘 식별할 수 있도록 할 수도 있다.
또한, 제어부(180)는 상술한 도 6의 궤적선 표시 스타일 설정창(240) 및 화면 표시 스타일 설정창(250)을 통해 상기 궤적선(310) 및 상기 화면(300)의 표시 스타일이 각각의 칼라 또는 흑백으로 미리 설정되어 있는 경우, 상기 궤적선(310)을 칼라로 표시하고, 상기 화면(300)을 흑백으로 표시할 수도 있다.
한편, 제어부(180)는 상기 터치제스처의 입력이 완료되면, 상기 궤적선(310)를 상기 화면(300) 내에 표시하지 않고, 또한, 상기 화면(300)이 흑백으로 표시된 경우 상기 화면(300)을 원래의 칼라로 변경한 후에, 상기 메모리(160)에서 상기 터치제스처에 맵핑된 기능을 검색하고, 상기 검색된 기능을 실행한다.
제3 실시예
본 발명의 제3 실시예는, 터치제스처의 궤적선이 표시된 화면의 배경을 반투명 표시함으로써, 상기 화면 내에서 상기 궤적선이 잘 식별되도록 하는 과정을 나타내고 있다.
이하, 도 11을 참조하여, 본 발명의 제3 실시예에 대해 상세히 설명한다.
도 11은 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제3 실시예 화면 설명도이다.
도 11의 (a)에 도시된 바와 같이, 제어부(180)는 터치스크린의 화면(300) 상에 사용자의 터치제스처가 입력되면, 도 11의 (b)에 도시된 바와 같이, 상기 입력된 터치제스처 패턴의 형상(M)과 동일한 형상의 궤적선(310)을 표시한다.
이때, 제어부(180)는 상기 궤적선(310)을 화면(300) 상에 표시할 때, 상기 화면(300) 내의 배경을 반투명 표시함으로써, 사용자가 상기 화면(300) 내에서 상기 궤적선(310)을 잘 식별할 수 있도록 한다.
또한, 제어부(180)는 상술한 도 6의 궤적선 표시 스타일 설정창(240) 및 화면 표시 스타일 설정창(250)을 통해 상기 궤적선(310) 및 상기 화면(300) 중 어느 하나가 반투명으로 미리 설정되거나 또는 상기 궤적선(310) 및 상기 화면(300) 각각의 투명도가 설정된 경우, 상기 설정된 투명도로 상기 궤적선(310) 및 상기 화면(300)을 표시할 수도 있다.
한편, 제어부(180)는 상기 터치제스처의 입력이 완료되면, 상기 궤적선(310)를 상기 화면(300) 내에 표시하지 않고, 또한, 상기 반투명 표시된 화면(300)을 원래대로 변경한 후에, 상기 메모리(160)에서 상기 터치제스처에 맵핑된 기능을 검색하고, 상기 검색된 기능을 실행한다.
제4 실시예
본 발명의 제4 실시예는, 터치제스처의 궤적선 및 상기 화면 내의 색의 굵기를 다르게 하여 상기 화면 내에서 상기 궤적선이 잘 식별되도록 하는 과정을 나타내고 있다.
이하, 도 12를 참조하여, 본 발명의 제4 실시예에 대해 상세히 설명한다.
도 12는 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제4 실시예 화면 설명도이다.
도 12의 (a)에 도시된 바와 같이, 제어부(180)는 터치스크린의 화면(300) 상에 사용자의 터치제스처가 입력되면, 도 12의 (b)에 도시된 바와 같이, 상기 입력된 터치제스처 패턴의 형상(M)과 동일한 형상의 궤적선(310)을 표시한다.
이때, 제어부(180)는 상기 궤적선(310)을 표시할 때, 현재 화면(300) 내에 포함된 선(line)의 굵기를 파악하고, 상기 궤적선(310)의 굵기를 상기 파악된 화면(300) 내의 선의 굵기보다 굵게 표시함으로써, 사용자가 상기 화면(300) 내에서 상기 궤적선(310)을 잘 식별할 수 있도록 한다.
또한, 제어부(180)는 상기 궤적선(310)의 굵기를 파악하고, 상기 화면(300) 내에 포함된 선의 굵기를 상기 파악된 궤적선(310)의 굵기보다 얇게 표시함으로써, 사용자가 상기 화면(300) 내에서 상기 궤적선(310)을 잘 식별할 수 있도록 할 수도 있다.
또한, 제어부(180)는 상술한 도 6의 궤적선 표시 스타일 설정창(240) 및 화면 표시 스타일 설정창(250)을 통해 상기 궤적선(310) 및 상기 화면(300)의 선 굵기가 미리 설정되어 있는 경우, 상기 설정된 선 굵기로 상기 궤적선(310) 및 상기 화면(300)을 표시할 수도 있다.
한편, 제어부(180)는 상기 터치제스처의 입력이 완료되면, 상기 궤적선(310)를 상기 화면(300) 내에 표시하지 않고, 또한, 상기 화면(300) 내의 선의 굵기를 원래의 굵기로 변경한 후에, 상기 메모리(160)에서 상기 터치제스처에 맵핑된 기능을 검색하고, 상기 검색된 기능을 실행한다.
제5 실시예
본 발명의 제5 실시예는, 터치제스처의 궤적선 및 상기 화면을 3D(Demensional) 또는 2D로 표시함으로써, 상기 화면 내에서 상기 궤적선이 잘 식별되도록 하는 과정을 나타내고 있다.
이하, 도 13을 참조하여, 본 발명의 제5 실시예에 대해 상세히 설명한다.
도 13은 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제5 실시예 화면 설명도이다.
도 13의 (a)에 도시된 바와 같이, 제어부(180)는 터치스크린의 화면(300) 상에 사용자의 터치제스처가 입력되면, 도 13의 (b)에 도시된 바와 같이, 상기 입력된 터치제스처 패턴의 형상(M)과 동일한 형상의 궤적선(310)을 표시한다.
이때, 제어부(180)는 상기 궤적선(310)을 화면(300) 상에 표시할 때, 상기 궤적선(310)을 3D 형태로 표시하고, 상기 화면을 2D 형태로 표시함으로써, 사용자가 상기 화면(300) 내에서 상기 궤적선(310)을 잘 식별할 수 있도록 한다.
또한, 제어부(180)는 상기 궤적선(310)을 화면(300) 상에 표시할 때, 상기 궤적선(310)을 2D 형태로 표시하고, 상기 화면을 3D 형태로 표시할 수도 있다.
또한, 제어부(180)는 상술한 도 6의 궤적선 표시 스타일 설정창(240) 및 화면 표시 스타일 설정창(250)을 통해 상기 궤적선(310) 및 상기 화면(300)의 표시 스타일이 각각의 3D 또는 2D로 미리 설정되어 있는 경우, 상기 궤적선(310)을 3D로 표시하고, 상기 화면(300)을 2D로 표시할 수도 있다.
한편, 제어부(180)는 상기 터치제스처의 입력이 완료되면, 상기 궤적선(310)를 상기 화면(300) 내에 표시하지 않고, 또한, 상기 화면(300)이 3D일 경우 상기 화면(300)을 원래의 2D로 변경한 후에, 상기 메모리(160)에서 상기 터치제스처에 맵핑된 기능을 검색하고, 상기 검색된 기능을 실행한다.
제6 실시예
본 발명의 제6 실시예는, 터치제스처의 궤적선 및 상기 화면의 색상을 서로 다르게 하여 상기 화면 내에서 상기 궤적선이 잘 식별되도록 하는 과정을 나타내고 있다.
이하, 도 14를 참조하여, 본 발명의 제6 실시예에 대해 상세히 설명한다.
도 14는 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제6 실시예 화면 설명도이다.
도 14의 (a)에 도시된 바와 같이, 제어부(180)는 터치스크린의 화면(300) 상에 사용자의 터치제스처가 입력되면, 상기 입력된 터치제스처 패턴의 형상(M)과 동일한 형상의 궤적선(310)을 표시한다.
이때, 도 14의 (b) 및 (c)에 도시된 바와 같이, 제어부(180)는 상기 궤적선(310)을 표시할 때, 상기 궤적선(310)의 색상을 현재 화면(300)의 색상과 다른 색상으로 표시함으로써, 사용자가 상기 화면(300) 내에서 상기 궤적선(310)을 잘 식별할 수 있도록 한다.
바람직하게, 도 14의 (b)에 도시된 바와 같이, 제어부(180)는 상기 화면(300) 내에서 상기 궤적선(310)이 표시된 위치의 색상을 파악하고, 상기 궤적선(310)을 상기 파악된 색상과 상반되는 색상으로 표시한다. 이때, 제어부(180)는 상기 파악된 색상의 평균색을 다시 파악하고, 상기 궤적선(310)을 상기 파악된 평균색과 상반되는 색상으로 표시할 수도 있다.
또한, 도 14의 (c)에 도시된 바와 같이, 제어부(180)는 상기 화면(300)의 색상 및 상기 궤적선(310)의 색상을 파악하고, 상기 궤적선(310)의 색상이 상기 화면(300)의 색상과 동일하거나 또는 유사하면, 상기 화면(300)을 상기 궤적선(310)의 색상과 상반되는 색상으로 표시할 수 있다.
또한, 제어부(180)는 상술한 도 6의 궤적선 표시 스타일 설정창(240) 및 화면 표시 스타일 설정창(250)을 통해 상기 궤적선(310) 및 상기 화면(300)의 색상이 미리 설정되어 있는 경우, 상기 설정된 색상으로 상기 궤적선(310) 및 상기 화면(300)을 표시할 수도 있다. 이때, 상기 궤적선(310) 및 상기 화면(300)의 색상은 서로 다른 색상이 될 수도 있다.
한편, 제어부(180)는 상기 터치제스처의 입력이 완료되면, 상기 궤적선(310)를 상기 화면(300) 내에 표시하지 않고, 또한, 상기 화면(300)의 색상을 원래의 색상으로 변경한 후에, 상기 메모리(160)에서 상기 터치제스처에 맵핑된 기능을 검색하고, 상기 검색된 기능을 실행한다.
제7 실시예
본 발명의 제7 실시예는, 특정 컨텐트 화면 상에 터치제스처가 입력되면, 상기 컨텐트 내에서 사용 가능한 터치제스처의 목록을 사용자에게 제공하고, 상기 목록 내의 특정 터치제스처가 입력되면, 상기 입력된 터치제스처의 궤적선을 상기 컨텐트 화면 내에서 식별되게 표시하는 과정을 나타내고 있다.
이하, 도 15를 참조하여, 본 발명의 제7 실시예에 대해 상세히 설명한다.
도 15은 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제7 실시예 화면 설명도이다.
도 15의 (a)에 도시된 바와 같이, 제어부(180)는 특정 컨텐트를 실행하고, 상기 컨텐트의 실행 화면(300)을 표시한 상태에서, 상기 화면(300)이 사용자에 의해 터치되면, 메모리(160)에서 상기 컨텐트 환경 내에서 사용 가능한 터치제스처들을 검색하고, 도 15의 (b)에 도시된 바와 같이, 상기 검색된 터치제스처들을 포함한 리스트(320)를 표시한다.
이때, 상기 리스트(320)는 터치제스처들 및 상기 터치제스처들에 각각 할당된 기능을 포함한 각각의 항목들(321 ~ 324)으로 구성된다.
일 예로, 도 15에서는 상기 컨텐트가 음악 재생기 어플리케이션이고, 상기 터치제스처들 각각에 할당된 기능들은, 상기 음악 재생기 어플리케이션 내에서 사용 가능한 볼륨업 기능과, 볼륨 다운 기능과, 다음 곡 재생 기능과, 이전 곡 재생 기능인 것을 나타내고 있다.
물론, 본 발명의 제7 실시예에서의 컨텐트를 상기 음악 재생기 어플리케이션으로 한정하는 것은 아니다. 바람직하게, 상기 컨텐트는 상술한 바와 같이, 휴대 단말기(100)에서 실행 가능한 모든 기능, 메뉴 및 데이터 등이 될 수 있고, 상기 기능들 또한, 상기 컨텐트 환경 내에서 사용 가능한 기능은 모두 포함될 수 있다.
이때, 사용자는 상기 리스트(320) 내의 항목들(321 ~ 324)을 참조하여, 사용하고자 하는 터치제스처를 상기 컨텐트 화면(300) 상에 직접 입력하거나 또는 사용하고자 하는 터치제스처에 해당하는 항목을 선택함으로써, 상기 사용하고자 하는 터치제스처에 할당된 기능을 현재의 컨텐트에 반영할 수 있다.
즉, 도 15의 (c)에 도시된 바와 같이, 사용자는 상기 리스트(320)를 보고서, 사용하고자 하는 터치제스처를 입력하면, 제어부(180)는 상술한 제1 내지 제6 실시예와 같이, 상기 컨텐트 화면(300) 내에서 상기 터치제스처의 궤적선(∧)을 식별되도록 표시한 후에, 상기 터치제스처의 입력이 완료되면, 도 15의 (d)에 도시된 바와 같이, 상기 터치제스처에 할당된 기능을 상기 컨텐트에 반영한다.
일 예로, 사용자가 입력한 상기 터치제스처에 할당된 기능은 볼륨 업 기능이고, 제어부(180)는 상기 터치제스처의 입력이 완료되면, 상기 컨텐트의 볼륨을 업시킨다.
제8 실시예
본 발명의 제8 실시예는, 화면 상에 사용자의 터치제스처가 입력되면, 상기 터치제스처의 궤적선을 상기 화면 내에서 식별되게 표시하고, 동시에 메모리(160)에 설정된 터치제스처들 중 현재 화면 상에 입력이 진행 중인 터치제스처의 패턴을 포함하는 다른 터치제스처를 검색하고, 상기 검색된 다른 터치제스처에 할당된 기능을 나타내는 정보를 표시하는 과정을 나타내고 있다.
이하, 도 16을 참조하여, 본 발명의 제8 실시예에 대해 상세히 설명한다.
도 16은 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제8 실시예 화면 설명도이다.
도 16을 참조하면, 사용자가 화면(300) 상에 특정 패턴(M)을 가지는 터치제스처(310)를 입력하기 위하여 최초 제1 터치제스처에서 제2 터치제스처 및 제3 터치제스처까지 입력을 진행한다.
즉, 도 16의 (a)에 도시된 바와 같이, 사용자가 화면(300) 상에 원하는 터치제스처 패턴(M)을 입력하기 위해 최초 제1 터치제스처의 입력을 진행하면, 제어부(180)는 상술한 제1 내지 제6 실시예와 같이, 상기 화면(300) 내에서 현재까지 입력이 진행된 상기 제1 터치제스처의 궤적선(310A1)을 식별되도록 표시한다.
그리고, 제어부(180)는 메모리(160)에서 현재까지 입력이 진행된 제1 터치제스처의 패턴을 포함하는 터치제스처를 적어도 하나 검색하고, 상기 검색된 터치제스처에 할당된 기능을 나타내는 제1 정보(310A2)를 화면(300) 상에 표시한다.
일 예로, 도 16의 (a)에서는 상기 검색된 터치제스처에 할당된 기능이 이미지 뷰어(Image Viewer) 기능이고, 제어부(180)는 상기 이미지 뷰어 기능을 나타내는 제1 정보(310A2)를 화면(300) 상에 표시한다.
이때, 제어부(180)는 현재까지 상기 제1 터치제스처가 입력된 상태에서, 상기 제1 터치제스처가 해제되면, 상기 제1 터치제스처에 할당된 이미지 뷰어 기능을 실행한다.
그 다음으로, 도 16의 (b)에 도시된 바와 같이, 사용자가 화면(300) 상에 원하는 터치제스처 패턴(M)을 입력하기 위해 상기 제1 터치제스처에서 상기 제2 터치제스처로 입력을 진행하면, 제어부(180)는 상술한 제1 내지 제6 실시예와 같이, 상기 화면(300) 내에서 현재까지 입력이 진행된 상기 제2 터치제스처의 궤적선(310B1)을 식별되도록 표시한다.
그리고, 제어부(180)는 메모리(160)에서 현재까지 입력된 제2 터치제스처의 패턴을 포함하는 다른 터치제스처를 적어도 하나 검색하고, 상기 검색된 다른 터치제스처에 할당된 기능을 나타내는 제2 정보(310B2)를 화면(300) 상에 표시한다.
일 예로, 도 16의 (b)에서는 상기 검색된 다른 터치제스처에 할당된 기능이 동영상 재생기(Movie Player) 기능이고, 제어부(180)는 상기 동영상 재생기 기능을 나타내는 제2 정보(310B2)를 화면(300) 상에 표시한다.
이때, 제어부(180)는 현재까지 상기 제2 터치제스처가 입력된 상태에서, 상기 제2 터치제스처가 해제되면, 상기 제2 터치제스처에 할당된 동영상 재생기 기능을 실행한다.
마지막으로, 도 16의 (c)에 도시된 바와 같이, 사용자가 화면(300) 상에 원하는 터치제스처 패턴(M)을 입력하기 위해 상기 제2 터치제스처에서 마지막 제3 터치제스처로 입력을 진행하면, 제어부(180)는 상술한 제1 내지 제6 실시예와 같이, 상기 화면(300) 내에서 현재까지 입력이 진행된 상기 제3 터치제스처의 궤적선(310)을 식별되도록 표시한다.
그리고, 제어부(180)는 메모리(160)에서 상기 제3 터치제스처의 패턴(M)에 할당된 기능(Music Player)을 검색하고, 상기 검색된 기능을 나타내는 제3 정보(231)를 화면(300) 상에 표시한다.
이때, 도 16의 (c)에서는 상기 제3 터치제스처가 사용자가 원하는 터치제스처이므로, 제어부(180)는 상기 사용자가 원하는 터치제스처 패턴(M)에 할당된 기능을 나타내는 제3 정보(231)를 표시한다.
그리고, 제어부(180)는 상기 제1 터치제스처에서 상기 제3 터치제스처까지 입력이 완료되면, 상기 제3 터치제스처에 할당된 음악 재생기 기능을 실행한다.
제9 실시예
본 발명의 제9 실시예는, 도 5에서 설명된 바와 같이, 특정 메인 기능이 할당된 제1 터치제스처 및 상기 메인 기능에 종속된 서브 기능이 할당된 제2 터치제스처가 화면 상에 각각 입력되면, 상기 입력된 제1 및 제2 터치제스처의 궤적선을 상기 화면 내에서 식별되게 표시하고, 동시에 상기 제1 및 제2 터치제스처에 할당된 메인 기능 및 서브 기능을 동시에 실행하는 과정에 관한 것이다.
이하, 도 17을 참조하여, 본 발명의 제9 실시예에 대해 상세히 설명한다.
도 17은 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제9 실시예 화면 설명도이다.
도 17의 (a)에 도시된 바와 같이, 제어부(180)는 상술한 도 5의 과정에 의해 특정 메인 기능이 할당된 제1 터치제스처 및 상기 메인 기능에 종속된 서브 기능이 할당된 제2 터치제스처가 화면(300) 상에 입력되면, 상기 제1 및 제2 터치제스처의 궤적선(331A, 332A)을 상술한 제1 내지 제6 실시예와 같이, 상기 화면(300) 내에서 식별되게 표시한다.
이때, 제어부(180)는 상기 제1 및 제2 터치제스처의 궤적선(331A, 332A)의 표시 스타일을 동일하게 한 상태에서, 상기 화면(300)의 표시 스타일과 상반되게 표시할 수 있다.
또한, 제어부(180)는 상기 화면(300) 상에서 상기 제1 및 제2 터치제스처의 궤적선(331A, 332A)을 식별되게 표시한 상태에서, 상기 제1 터치제스처의 궤적선(331A)과 상기 제2 터치제스처의 궤적선(332A)을 상술한 제1 내지 제6 실시예를 이용하여 서로 식별되게 표시할 수 있다. 이 경우에, 상기 메인 기능이 할당된 제1 터치제스처의 궤적선(331A)을 상술한 제1 내지 제6 실시예에서 설명한 터치제스처의 궤적선(310)의 표시 스타일과 같이 변경하고, 상기 서브 기능이 할당된 제2 터치제스처의 궤적선(332A)을 상술한 제1 내지 제6 실시예에서 설명한 화면(300)의 표시 스타일과 같이 변경한다.
또한, 상기 제1 및 제2 터치제스처는, 둘 다 접촉 또는 근접 터치제스처가 될 수 있고, 또한, 어느 하나는 접촉 터치제스처이고, 다른 하나는 근접 터치제스처가 될 수 있다. 바람직하게, 상기 메인 기능이 할당된 제1 터치제스처는 접촉 터치제스처가 될 수 있고, 상기 서브 기능이 할당된 제2 터치제스처는 근접 터치제스처가 될 수 있다.
그 다음으로, 도 17의 (b)에 도시된 바와 같이, 제어부(180)는 상기 제1 및 제2 터치제스처의 궤적선(331A, 332A)이 표시되면, 상기 제1 및 제2 터치제스처에 각각 할당된 메인 기능 및 서브 기능을 각각 나타내는 제1 및 제2 정보(331B, 332B)를 표시할 수도 있다.
일 예로, 도 17에서는 상기 메인 기능이 음악 재생기 기능이고, 상기 음악 재생기 기능에 종속된 서브 기능은 2번째 음악 파일 재생인 것을 나타내고 있고, 제어부(180)는 상기 음악 재생기 기능을 나타내는 제1 정보(331B) 및 상기 2번째 음악 파일 재생 기능을 나타내는 제2 정보(332B)를 표시한 것을 나타내고 있다.
상기와 같이, 제어부(180)는 상기 제1 및 제2 터치제스처의 입력이 완료되면, 도 17의 (c)에 도시된 바와 같이, 상기 제1 및 제2 터치제스처에 할당된 메인 기능 및 서브 기능을 동시에 실행한다.
일 예로, 도 17의 (c)에서는, 상기 메인 기능인 음악 재생기 기능을 실행하고, 동시에 상기 서브 기능인 2번째 음악 파일 재생 기능을 실행한 것을 나타내고 있다.
제10 실시예
본 발명의 제10 실시예는, 둘 이상의 제1 및 제2 컨텐트가 동시에 실행(멀티태스킹)되고, 상기 제1 컨텐트의 실행 화면이 표시된 상태에서, 상기 제1 컨텐트의 실행 화면 상에 상기 제2 컨텐트의 동작 제어를 위한 기능이 할당된 터치제스처가 입력되면, 상기 입력된 터치제스처의 궤적선을 상기 제1 컨텐트의 실행 화면 내에서 식별되게 표시하고, 동시에 상기 제1 컨텐트의 실행 화면을 상기 제2 컨텐트의 실행 화면으로 전환없이, 상기 제1 컨텐트의 실행 화면 상에서 상기 터치제스처에 할당된 제2 컨텐트의 동작 제어 기능을 실행하는 과정에 관한 것이다.
이하, 도 18을 참조하여, 본 발명의 제10 실시예에 대해 상세히 설명한다.
도 18은 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제10 실시예 화면 설명도이다.
도 18의 (a)는 제1 및 제2 컨텐트가 동시에 실행(멀티태스킹)된 상태에서 제1 컨텐트의 실행 화면이 표시된 상태를 나타내고 있다.
일 예로, 도 18에서는 현재 실행 화면(410) 상에 표시된 제1 컨텐트는 이미지 뷰어 기능이고, 현재 실행 중이나, 상기 화면 상에 표시되지 않은 제2 컨텐트는 음악 재생기 기능인 것을 나타내고 있다.
이때, 도 18의 (b)에 도시된 바와 같이, 제어부(180)는 상술한 도 3 내지 도 7의 과정을 근거로, 제2 컨텐트의 동작 제어 기능이 할당된 제1 터치제스처가 입력되면, 상기 제1 터치제스처의 궤적선(421)을 상술한 제1 내지 제6 실시예와 같이, 상기 화면(300) 내에서 식별되게 표시한다.
그 다음으로, 도 18의 (c)에 도시된 바와 같이, 제어부(180)는 상기 제1 터치제스처의 입력이 완료되면, 상기 제1 터치제스처에 할당된 제2 컨텐트의 동작 제어 기능을 상기 제2 컨텐트에 반영한다.
일 예로, 도 18의 (c)에서는, 상기 제1 터치제스처에 할당된 제2 컨텐트의 동작 제어 기능은 2번째 음악 파일 재생 기능이고, 제어부(180)는 상기 제1 컨텐트의 실행 화면(410)을 제2 컨텐트의 실행 화명으로 전환하지 않고, 상기 제1 컨텐트의 실행 화면(410)을 그대로 표시하면서, 동시에 상기 제1 터치제스처에 할당된 2번째 음악 파일 재생 기능을 실행하는 것이다.
제11 실시예
본 발명의 제11 실시예는, 둘 이상의 제1 및 제2 컨텐트가 동시에 실행(멀티태스킹)되고, 상기 제1 컨텐트의 실행 화면이 표시된 상태에서, 상기 제1 컨텐트의 실행 화면 상에 상기 제1 컨텐트의 동작 제어 기능을 위한 기능이 할당된 제1 터치제스처 및 상기 제2 컨텐트의 동작 제어 기능을 위한 기능이 할당된 제2 터치제스처가 각각 입력되면, 상기 입력된 제1 및 제2 터치제스처의 궤적선을 상기 화면 내에서 식별되게 표시하고, 동시에 상기 제1 및 제2 터치제스처에 할당된 동작 제어 기능을 동시에 실행하는 과정에 관한 것이다.
이하, 도 19를 참조하여, 본 발명의 제11 실시예에 대해 상세히 설명한다.
도 19는 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제11 실시예 화면 설명도이다.
도 19의 (a)는 제1 및 제2 컨텐트가 동시에 실행(멀티태스킹)된 상태에서 제1 컨텐트의 실행 화면이 표시된 상태를 나타내고 있다.
일 예로, 도 19에서는 현재 실행 화면(410) 상에 표시된 제1 컨텐트는 이미지 뷰어 기능이고, 현재 실행 중이나, 상기 화면 상에 표시되지 않은 제2 컨텐트는 음악 재생기 기능인 것을 나타내고 있다.
이때, 도 19의 (b)에 도시된 바와 같이, 제어부(180)는 상술한 도 3 내지 도 7의 과정을 근거로, 상기 제1 컨텐트의 동작 제어 기능이 할당된 제1 터치제스처 및 상기 제2 컨텐트의 동작 제어 기능이 할당된 제2 터치제스처가 각각 입력되면, 상기 제1 및 제2 터치제스처의 궤적선(411, 421)을 상술한 제1 내지 제6 실시예와 같이, 상기 제1 컨텐트의 실행 화면(410) 내에서 식별되게 표시한다.
이때, 제어부(180)는 상기 제1 및 제2 터치제스처의 궤적선(411, 421)의 표시 스타일을 동일하게 한 상태에서, 상기 제1 컨텐트의 실행 화면(410)의 표시 스타일과 상반되게 표시할 수 있다.
또한, 제어부(180)는 상기 제1 컨텐트의 실행 화면(410) 상에서 상기 제1 및 제2 터치제스처의 궤적선(411, 421)을 식별되게 표시한 상태에서, 상기 제1 터치제스처의 궤적선(411)과 상기 제2 터치제스처의 궤적선(421)을 상술한 제1 내지 제6 실시예를 이용하여 서로 식별되게 표시할 수 있다.
또한, 도 19에는 도시되지 않았지만, 제어부(180)는 상술한 도 17에서와 같이, 상기 제1 및 제2 터치제스처의 궤적선(411, 421)이 표시되면, 상기 제1 및 제2 터치제스처에 각각 할당된 동작 제어 기능을 나타내는 제1 및 제2 정보를 표시할 수도 있다.
그 다음으로, 도 19의 (c)에 도시된 바와 같이, 제어부(180)는 상기 제1 및 제2 터치제스처의 입력이 완료되면, 상기 제1 및 제2 터치제스처에 할당된 기능을 동시에 실행한다.
일 예로, 도 19에서는 상기 제1 컨텐트는 이미지 뷰어 기능이고, 상기 제1 터치제스처에 할당된 기능은 이미지 확대 기능이고, 상기 제2 컨텐트는 음악 재생기 기능이고, 상기 제2 터치제스처에 할당된 기능은 2번째 음악 파일 재생 기능인 것을 나타내고 있다.
이 경우에, 제어부(180)는 현재 표시된 제1 컨텐트의 실행 화면(410)을 그대로 유지하면서, 동시에 상기 제1 및 제2 터치제스처에 할당된 이미지 확대 기능 및 2번째 음악 파일 재생 기능을 동시에 실행하는 것이다.
제12 실시예
본 발명의 제12 실시예는, 화면 상에 특정 기능이 할당된 터치제스처가 입력되면, 상기 터치제스처의 궤적선을 식별되게 표시하고, 동시에 상기 터치제스처의 접촉 면적의 크기를 파악하고, 상기 파악된 접촉 면적의 크기에 따라 상기 터치제스처에 할당된 기능의 실행 상태를 달리하는 과정에 관한 것이다.
이하, 도 20을 참조하여, 본 발명의 제12 실시예에 대해 상세히 설명한다.
도 20은 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제12 실시예 화면 설명도이다.
도 20의 (a)는 상술한 도 15에서 설명한 바와 같이, 화면(300) 상에 특정 기능이 할당된 터치제스처가 입력된 것을 나타내고 있다.
일 예로, 도 20에서는 상기 터치제스처에 할당된 기능이 2번째 음악 파일 재생 기능인 것을 나타내고 있다.
제어부(180)는 상기 터치제스처의 궤적선(421)을 상기 화면(300) 내에서 식별되게 표시한 후에, 제어부(180)는 상기 터치제스처의 입력이 완료되면, 상기 화면(300)에 대한 상기 터치제스처의 접촉 면적의 크기를 파악하고, 상기 파악된 접촉 면적의 크기에 따라 상기 터치제스처에 할당된 기능의 실행 상태를 달리하도록 제어한다.
일 예로, 도 20의 (b)에 도시된 바와 같이, 상기 터치제스처에 할당된 기능은 2번째 음악 파일 재생 기능이고, 제어부(180)는 상기 터치제스처의 접촉 면적 크기가 클수록 상기 2번째 음악 파일을 재생 시에 상기 2번째 음악 파일의 볼륨을 증가시키는 것이다.
다른 예로, 상기 터치제스처에 할당된 기능이 이미지 확대 기능이면, 제어부(180)는 상기 터치제스처의 접촉 면적 크기가 클수록 이미지를 더욱 확대시키고, 상기 터치제스처의 접촉 면적 크기가 작을수록 상기 이미지를 더욱 축소시킬 수 있다.
제13 실시예
본 발명의 제13 실시예는, 도 7과 같이 같은 터치제스처라도 사용자가 설정한 궤적선의 표시 스타일에 따라 서로 다른 기능을 제공하는 과정에 관한 것이다.
이하, 도 21을 참조하여, 본 발명의 제13 실시예에 대해 상세히 설명한다.
도 21은 본 발명에 따른 터치제스처 궤적선의 표시 스타일 및 화면의 표시 스타일을 제어하는 과정을 나타낸 제13 실시예 화면 설명도이다.
도 21의 (a) 및 (b)는 상술한 도 7의 과정을 근거로, 동일한 패턴의 제1 및 제2 터치제스처의 궤적선 각각에 서로 다른 표시 스타일이 설정되고, 또한, 동일한 패턴의 제1 및 제2 터치제스처 각각에 서로 다른 기능들이 설정된 것을 나타내고 있다.
일 예로, 도 21의 (a)는 상술한 도 7의 과정을 근거로, 상기 제1 터치제스처의 궤적선(431)의 표시 스타일로써, 적색이 설정되고, 상기 제1 터치제스처에 음악 재생기 기능이 할당된 것을 나타내고 있다.
또한, 도 21의 (b)는 상술한 도 7의 과정에서 설명한 바와 같이, 상기 제1 터치제스처의 궤적선(431)의 표시 스타일로써, 노란색이 설정되고, 상기 제2 터치제스처에 이미지 뷰어 기능이 할당된 것을 나타내고 있다.
일 예로, 제어부(180)는 도 21의 (a)에 도시된 바와 같이, 화면(300) 상에 궤적선(431)의 색상이 적색으로 설정된 상기 제1 터치제스처가 입력되면, 상기 제1 터치제스처의 궤적선(431)을 화면(300) 내에서 식별되게 표시한 후에, 상기 제1 터치제스처에 할당된 음악 재생기 기능을 실행한다.
또한, 제어부(180)는 도 21의 (b)에 도시된 바와 같이, 화면(300) 상에 궤적선(432)의 색상이 노란색으로 설정된 상기 제2 터치제스처가 입력되면, 상기 제2 터치제스처의 궤적선(432)을 화면(300) 내에서 식별되게 표시한 후에, 상기 제2 터치제스처에 할당된 이미지 뷰어 기능을 실행한다.
이상, 본 발명은 본 발명의 정신 및 필수적 특징을 벗어나지 않는 범위에서 다른 특정한 형태로 구체화될 수 있음은 당업자에게 자명하다.
전술한 본 발명은, 프로그램이 기록된 매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 매체는, 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 매체의 예로는, ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 상기 컴퓨터는 단말기의 제어부(180)를 포함할 수도 있다.
따라서, 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.
상기와 같이 설명된 이동 단말기 및 그 제어 방법은 상기 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.
100: 이동 단말기 110: 무선 통신부
111: 방송 수신부 112: 이동통신 모듈
113: 무선 인터넷 모듈 114: 근거리 통신 모듈
115: 위치 정보 모듈 120: A/V 입력부
121: 카메라 122: 마이크
130: 사용자 입력부 140: 센싱부
141: 근접 센서 150: 출력부
151: 디스플레이부 152: 음향 출력 모듈
153: 알람 모듈 154: 햅틱 모듈
155: 프로젝터 모듈 160: 메모리
170: 인터페이스부 180: 제어부
181: 멀티미디어 모듈 190: 전원 공급부

Claims (20)

  1. 특정 기능이 할당된 하나 이상의 터치제스처가 설정된 메모리;
    화면 상에 상기 터치제스처가 입력되는 터치스크린; 및
    상기 화면 상에 특정 터치제스처가 입력되면, 상기 화면 상에 상기 입력된 터치제스처의 궤적선을 표시한 후에 상기 메모리에서 상기 입력된 터치제스처에 할당된 기능을 검색하여 실행하고, 상기 궤적선이 표시되는 동안에 상기 궤적선이 상기 화면 상에서 식별되도록 제어하는 제어부;를 포함하고,
    상기 제어부는,
    상기 궤적선이 표시될 상기 화면 상의 위치의 색상을 파악하고, 상기 파악된 색상의 평균색을 다시 파악하고, 상기 궤적선의 색상을 상기 파악된 평균색과 상반되는 색상으로 변경하여 표시하며,
    상기 궤적선의 색상 및 상기 화면의 색상을 파악하고, 상기 파악된 궤적선의 색상이 상기 파악된 화면의 색상과 동일하면, 상기 화면의 색상을 상기 궤적선의 색상과 상반되는 색상으로 변경하여 표시하는 것을 특징으로 하는 휴대 단말기.
  2. 제1 항에 있어서,
    상기 제어부는, 상기 궤적선이 상기 화면 상에서 식별되도록 상기 궤적선의 표시 스타일을 상기 화면의 표시 스타일과 상반되게 변경하는 것을 특징으로 하는 휴대 단말기.
  3. 제1 항에 있어서,
    상기 제어부는, 상기 궤적선을 상기 화면보다 밝게 표시하는 것을 특징으로 하는 휴대 단말기.
  4. 제1 항에 있어서,
    상기 제어부는, 상기 궤적선을 칼라 표시하고, 상기 화면을 흑백 표시하는 것을 특징으로 하는 휴대 단말기.
  5. 삭제
  6. 삭제
  7. 삭제
  8. 제1 항에 있어서,
    상기 제어부는, 상기 궤적선을 3D(Dimensional) 형태로 표시하고, 상기 화면을 2D로 표시하는 것을 특징으로 하는 휴대 단말기.
  9. 제1 항에 있어서,
    상기 제어부는, 상기 궤적선을 상기 화면 내에 포함된 선보다 굵게 표시하는 것을 특징으로 하는 휴대 단말기.
  10. 제1 항에 있어서,
    상기 메모리에 설정된 터치제스처들은, 특정 컨텐트 화면 내에서 사용 가능하고, 상기 컨텐트의 동작 제어를 위한 기능이 할당된 터치제스처들을 포함하고,
    상기 제어부는, 상기 컨텐트 화면 내에서 사용 가능한 상기 터치제스처들을 상기 메모리 내에서 검색하고, 상기 검색된 터치제스처들의 패턴 및 해당 기능을 포함한 리스트를 표시하는 것을 특징으로 하는 휴대 단말기.
  11. 제1 항에 있어서,
    상기 메모리에 설정된 터치제스처들은, 특정 어플리케이션의 실행을 위한 기능이 할당된 터치제스처들을 포함하고,
    상기 제어부는, 상기 메모리에서 현재 상기 화면 상에 입력이 진행 중인 터치제스처의 패턴을 포함하는 하나 이상의 다른 터치제스처를 검색하고, 상기 검색된 다른 터치제스처에 할당된 기능을 나타내는 정보를 표시하는 것을 특징으로 하는 휴대 단말기.
  12. 제1 항에 있어서,
    상기 메모리에 설정된 터치제스처들은, 특정 메인 기능이 할당된 제1 터치제스처 및 상기 제1 터치제스처에 할당된 특정 메인 기능에 종속된 서브 기능이 할당된 제2 터치제스처를 포함하고,
    상기 제어부는, 상기 화면 상에 상기 제1 및 제2 터치제스처가 입력되면, 상기 제1 및 제2 터치제스처의 궤적선을 상기 화면 상에서 식별되도록 표시한 후에 상기 제1 및 제2 터치제스처에 할당된 기능 및 서브 기능을 동시에 실행하는 것을 특징으로 하는 휴대 단말기.
  13. 제12 항에 있어서,
    상기 제1 및 제2 터치제스처 중 어느 하나는 접촉 터치되는 터치제스처이고, 다른 하나는 근접 터치되는 터치제스처인 것을 특징으로 하는 휴대 단말기.
  14. 제12 항에 있어서,
    상기 제1 및 제2 터치제스처는, 상기 화면 상에서 서로 분리되어 각각 입력되는 독립적인 터치제스처들인 것을 특징으로 하는 휴대 단말기.
  15. 제12 항에 있어서,
    상기 제어부는, 상기 제1 및 제2 터치제스처의 궤적선 상에 상기 메인 기능 및 상기 서브 기능을 각각 나타내는 정보를 표시하는 것을 특징으로 하는 휴대 단말기.
  16. 제12 항에 있어서,
    상기 제어부는, 상기 제1 터치제스처의 궤적선과 상기 제2 터치제스처의 궤적선을 서로 식별되게 표시하는 것을 특징으로 하는 휴대 단말기.
  17. 제1 항에 있어서,
    상기 화면은, 현재 동시에 실행된 제1 컨텐트의 제1 화면 및 제2 컨텐트의 제2 화면 중 상기 제1 화면이고,
    상기 메모리에 설정된 터치제스처는, 상기 제2 컨텐트의 동작 제어를 위한 기능이 할당된 터치제스처를 포함하며,
    상기 제어부는, 상기 제1 화면 상에 상기 터치제스처가 입력되면, 상기 터치제스처의 궤적선을 상기 화면 상에서 식별되도록 표시한 후에 상기 터치제스처에 할당된 제2 컨텐트의 동작 제어 기능을 실행하는 것을 특징으로 하는 휴대 단말기.
  18. 제1 항에 있어서,
    상기 화면은, 현재 동시에 실행된 제1 컨텐트의 제1 화면 및 제2 컨텐트의 제2 화면을 포함하고,
    상기 메모리에 설정된 터치제스처들은, 상기 제1 컨텐트의 동작 제어를 위한 기능이 할당된 제1 터치제스처 및 상기 제2 컨텐트의 동작 제어를 위한 기능이 할당된 제2 터치제스처를 포함하며,
    상기 제어부는, 상기 화면 상에 상기 제1 및 제2 터치제스처가 입력되면, 상기 제1 및 제2 터치제스처의 궤적선을 상기 화면 상에서 식별되도록 표시한 후에 상기 제1 및 제2 터치제스처에 할당된 기능을 동시에 실행하는 것을 특징으로 하는 휴대 단말기.
  19. 제1 항에 있어서,
    상기 제어부는, 상기 화면 상에서 상기 입력된 터치제스처의 접촉 면적의 크기를 파악하고, 상기 파악된 접촉 면적의 크기에 따라 상기 터치제스처에 할당된 기능의 실행 상태를 달리하는 것을 특징으로 하는 휴대 단말기.
  20. 삭제
KR1020110109944A 2011-10-26 2011-10-26 휴대 단말기 및 그 제어 방법 KR101873741B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020110109944A KR101873741B1 (ko) 2011-10-26 2011-10-26 휴대 단말기 및 그 제어 방법
US13/570,093 US9417789B2 (en) 2011-10-26 2012-08-08 Mobile terminal and controlling method thereof
EP12006284.9A EP2590063A3 (en) 2011-10-26 2012-09-06 Mobile terminal and controlling method thereof
CN201210407518.8A CN103092504B (zh) 2011-10-26 2012-10-23 移动终端及其控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110109944A KR101873741B1 (ko) 2011-10-26 2011-10-26 휴대 단말기 및 그 제어 방법

Publications (2)

Publication Number Publication Date
KR20130045620A KR20130045620A (ko) 2013-05-06
KR101873741B1 true KR101873741B1 (ko) 2018-07-03

Family

ID=46934371

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110109944A KR101873741B1 (ko) 2011-10-26 2011-10-26 휴대 단말기 및 그 제어 방법

Country Status (4)

Country Link
US (1) US9417789B2 (ko)
EP (1) EP2590063A3 (ko)
KR (1) KR101873741B1 (ko)
CN (1) CN103092504B (ko)

Families Citing this family (170)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US10255566B2 (en) 2011-06-03 2019-04-09 Apple Inc. Generating and processing task items that represent tasks to perform
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
KR102069014B1 (ko) * 2012-09-25 2020-02-12 삼성전자 주식회사 휴대단말기의 분리화면 제어장치 및 방법
US20140218372A1 (en) * 2013-02-05 2014-08-07 Apple Inc. Intelligent digital assistant in a desktop environment
EP4138075A1 (en) 2013-02-07 2023-02-22 Apple Inc. Voice trigger for a digital assistant
CN104350335B (zh) * 2013-02-20 2017-10-20 松下电器（美国）知识产权公司 便携信息终端、便携信息终端的控制方法以及记录介质
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
KR102203885B1 (ko) * 2013-04-26 2021-01-15 삼성전자주식회사 사용자 단말 장치 및 그 제어 방법
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
CN110442699A (zh) 2013-06-09 2019-11-12 苹果公司 操作数字助理的方法、计算机可读介质、电子设备和***
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
US20170187866A1 (en) * 2015-10-17 2017-06-29 Eric Qing Li Automatic Volume Control Based on Context and Location
US10791216B2 (en) 2013-08-06 2020-09-29 Apple Inc. Auto-activating smart responses based on activities from remote devices
KR102063103B1 (ko) * 2013-08-23 2020-01-07 엘지전자 주식회사 이동 단말기
US9483628B2 (en) * 2013-08-29 2016-11-01 Paypal, Inc. Methods and systems for altering settings or performing an action by a user device based on detecting or authenticating a user of the user device
US9405366B2 (en) 2013-10-02 2016-08-02 David Lee SEGAL Systems and methods for using imagined directions to define an action, function or execution for non-tactile devices
KR101904955B1 (ko) * 2013-11-12 2018-10-10 삼성전자주식회사 터치 기반의 모바일 기기에서의 컴퓨팅 자원 할당방법 및 장치
KR102131826B1 (ko) * 2013-11-21 2020-07-09 엘지전자 주식회사 이동 단말기 및 이의 제어 방법
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
CN104735238A (zh) * 2013-12-23 2015-06-24 中兴通讯股份有限公司 一种通话录音方法及装置
KR102265143B1 (ko) * 2014-05-16 2021-06-15 삼성전자주식회사 입력 처리 장치 및 방법
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9966065B2 (en) 2014-05-30 2018-05-08 Apple Inc. Multi-command single utterance input method
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
CN104077003B (zh) * 2014-07-21 2017-12-15 广东欧珀移动通信有限公司 一种将手机返回键、home键和菜单键合并的方法及装置
US10379599B2 (en) 2014-07-24 2019-08-13 Samsung Electronics Co., Ltd. Method for displaying items in an electronic device when the display screen is off
CN104239606B (zh) * 2014-08-06 2018-04-27 北京大学 Web环境下支持触屏的UML建模方法与装置
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
WO2016060321A1 (ko) * 2014-10-15 2016-04-21 주식회사 카우치그램 보안 통화 연결 방법 및 장치
WO2016076472A1 (ko) 2014-11-13 2016-05-19 주식회사 카우치그램 통화 제어 방법 및 시스템
CN105786375A (zh) * 2014-12-25 2016-07-20 阿里巴巴集团控股有限公司 在移动终端操作表单的方法及装置
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
CN106155543A (zh) * 2015-04-14 2016-11-23 鸿富锦精密工业（深圳）有限公司 车辆控制***及其操作方法
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
US10331312B2 (en) 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
CN105872815A (zh) * 2015-11-25 2016-08-17 乐视网信息技术（北京）股份有限公司 视频播放的方法及装置
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179588B1 (en) 2016-06-09 2019-02-22 Apple Inc. INTELLIGENT AUTOMATED ASSISTANT IN A HOME ENVIRONMENT
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
KR20180005071A (ko) * 2016-07-05 2018-01-15 엘지전자 주식회사 이동 단말기 및 그 제어방법
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
CA3051095A1 (en) 2017-01-23 2018-07-26 Naqi Logics, Llc Apparatus, methods, and systems for using imagined direction to define actions, functions, or execution
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
DK201770429A1 (en) 2017-05-12 2018-12-14 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
DK201770411A1 (en) 2017-05-15 2018-12-20 Apple Inc. MULTI-MODAL INTERFACES
DK179549B1 (en) 2017-05-16 2019-02-12 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US10303715B2 (en) 2017-05-16 2019-05-28 Apple Inc. Intelligent automated assistant for media exploration
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
CN108111697A (zh) * 2017-12-29 2018-06-01 广东欧珀移动通信有限公司 电子装置、参数调节方法及相关产品
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
CN108668006B (zh) * 2018-03-19 2020-01-17 珠海市魅族科技有限公司 通知处理方法、移动终端及存储介质
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10496705B1 (en) 2018-06-03 2019-12-03 Apple Inc. Accelerated task performance
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
DK201970511A1 (en) 2019-05-31 2021-02-15 Apple Inc Voice identification in digital assistant systems
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11468890B2 (en) 2019-06-01 2022-10-11 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11488406B2 (en) 2019-09-25 2022-11-01 Apple Inc. Text detection using global geometry estimators
US11043220B1 (en) 2020-05-11 2021-06-22 Apple Inc. Digital assistant hardware abstraction
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
KR102573822B1 (ko) * 2021-02-04 2023-09-04 (주)비케이 벡터 이미지의 화풍 변환 및 재생 방법
KR102664954B1 (ko) * 2021-10-05 2024-05-14 (주)에스지엠 조도 감지 기능을 갖는 가상 스포츠 장치
JP2024014590A (ja) * 2022-07-22 2024-02-01 キヤノン株式会社 情報処理装置、情報処理装置の制御方法、及びプログラム

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011076405A (ja) * 2009-09-30 2011-04-14 Ntt Docomo Inc 文字入力装置及び文字入力方法

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
IL119498A (en) * 1996-10-27 2003-02-12 Advanced Recognition Tech Application launching system
US20030025676A1 (en) * 2001-08-02 2003-02-06 Koninklijke Philips Electronics N.V. Sensor-based menu for a touch screen panel
US6938222B2 (en) * 2002-02-08 2005-08-30 Microsoft Corporation Ink gestures
US8166388B2 (en) * 2002-05-14 2012-04-24 Microsoft Corporation Overlaying electronic ink
KR20040083788A (ko) * 2003-03-25 2004-10-06 삼성전자주식회사 제스쳐 커맨드를 이용하여 프로그램을 구동시킬 수 있는휴대용 단말기 및 이를 이용한 프로그램 구동 방법
EP1639439A2 (en) * 2003-06-13 2006-03-29 The University Of Lancaster User interface
US8059099B2 (en) * 2006-06-02 2011-11-15 Apple Inc. Techniques for interactive input to portable electronic devices
US7653883B2 (en) * 2004-07-30 2010-01-26 Apple Inc. Proximity detector in handheld device
KR100811160B1 (ko) * 2005-06-02 2008-03-07 삼성전자주식회사 사용자명령을 3차원적으로 입력가능한 전자장치
KR100797788B1 (ko) * 2006-09-04 2008-01-24 엘지전자 주식회사 이동통신 단말기 및 패턴인식을 통한 단축기능의 실행방법
US20080163119A1 (en) * 2006-12-28 2008-07-03 Samsung Electronics Co., Ltd. Method for providing menu and multimedia device using the same
US8244284B2 (en) * 2007-06-28 2012-08-14 Giga-Byte Communications, Inc. Mobile communication device and the operating method thereof
US20090037813A1 (en) * 2007-07-31 2009-02-05 Palo Alto Research Center Incorporated Space-constrained marking menus for mobile devices
US8650507B2 (en) * 2008-03-04 2014-02-11 Apple Inc. Selecting of text using gestures
KR101486345B1 (ko) * 2008-03-21 2015-01-26 엘지전자 주식회사 이동 단말기 및 이동 단말기의 화면 표시 방법
US9274681B2 (en) * 2008-03-26 2016-03-01 Lg Electronics Inc. Terminal and method of controlling the same
CN101667074B (zh) * 2008-09-03 2011-12-07 联想(北京)有限公司 一种通过图形输入完成操作的装置及其方法
US8411045B2 (en) * 2008-12-15 2013-04-02 Sony Corporation Touch sensitive displays with coplanar capacitive touch and proximity sensor pads and related touch panels
KR101565768B1 (ko) * 2008-12-23 2015-11-06 삼성전자주식회사 휴대단말의 잠금 모드 해제 방법 및 장치
US8819597B2 (en) * 2009-04-10 2014-08-26 Google Inc. Glyph entry on computing device
KR101561703B1 (ko) * 2009-06-08 2015-10-30 엘지전자 주식회사 메뉴 실행 방법 및 이를 적용한 이동 통신 단말기
US9563350B2 (en) * 2009-08-11 2017-02-07 Lg Electronics Inc. Mobile terminal and method for controlling the same
CN101770343A (zh) * 2010-03-18 2010-07-07 深圳市同洲电子股份有限公司 可变换输入轨迹颜色和粗细的手写输入装置及方法
KR20110109944A (ko) 2010-03-29 2011-10-06 가부시키가이샤 닛폰 쇼쿠바이 컬러 필터용 감광성 수지 조성물
CN101986248A (zh) * 2010-07-14 2011-03-16 上海无戒空间信息技术有限公司 在计算机控制中使用手势对象取代菜单的方法
KR101841121B1 (ko) * 2011-02-17 2018-05-04 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어방법

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011076405A (ja) * 2009-09-30 2011-04-14 Ntt Docomo Inc 文字入力装置及び文字入力方法

Also Published As

Publication number Publication date
US9417789B2 (en) 2016-08-16
KR20130045620A (ko) 2013-05-06
US20130106742A1 (en) 2013-05-02
EP2590063A3 (en) 2017-03-08
CN103092504A (zh) 2013-05-08
CN103092504B (zh) 2017-11-14
EP2590063A2 (en) 2013-05-08

Similar Documents

Publication Publication Date Title
KR101873741B1 (ko) 휴대 단말기 및 그 제어 방법
KR101527014B1 (ko) 이동 단말기 및 이것의 디스플레이 제어 방법
KR101690612B1 (ko) 이동단말기 및 그 제어방법
KR101608770B1 (ko) 이동단말기 및 그 제어방법
KR101651135B1 (ko) 이동 단말기 및 그 제어 방법
KR101984592B1 (ko) 휴대 단말기 및 그 제어 방법
KR101709510B1 (ko) 휴대 단말기 및 그 제어 방법
KR101633332B1 (ko) 단말기 및 그 제어 방법
KR101919796B1 (ko) 휴대 단말기 및 그 제어 방법
KR101608761B1 (ko) 이동단말기 및 그 제어방법
KR101657117B1 (ko) 이동단말기 및 그 제어방법
KR101701839B1 (ko) 이동 단말기 및 그 제어 방법
KR20150009204A (ko) 휴대 단말기 및 그 제어 방법
KR101852816B1 (ko) 휴대 단말기 및 그 제어 방법
KR101783607B1 (ko) 단말기 및 그 제어 방법
KR101613551B1 (ko) 이동 단말기
KR20110022217A (ko) 이동 단말기 및 그 제어 방법
KR101638913B1 (ko) 이동 단말기 및 그 제어 방법
KR101823479B1 (ko) 휴대 단말기 및 그 제어 방법
KR101781846B1 (ko) 이동 단말기 및 이것의 이미지 디스플레이 제어 방법
KR101781860B1 (ko) 휴대 단말기 및 그 제어 방법
KR101685979B1 (ko) 이동 단말기 및 그 제어 방법
KR101633327B1 (ko) 이동 단말기 및 그 제어 방법
KR101781866B1 (ko) 휴대 단말기 및 그 제어 방법
KR20140008061A (ko) 휴대 단말기 및 그 제어 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant