KR20130116295A - 이동 장치의 키보드 애플리케이션과 같은 키보드 애플리케이션에 명령하기 위한 제스처들의 사용 - Google Patents

이동 장치의 키보드 애플리케이션과 같은 키보드 애플리케이션에 명령하기 위한 제스처들의 사용 Download PDF

Info

Publication number
KR20130116295A
KR20130116295A KR1020137016019A KR20137016019A KR20130116295A KR 20130116295 A KR20130116295 A KR 20130116295A KR 1020137016019 A KR1020137016019 A KR 1020137016019A KR 20137016019 A KR20137016019 A KR 20137016019A KR 20130116295 A KR20130116295 A KR 20130116295A
Authority
KR
South Korea
Prior art keywords
keyboard
gesture
application
mobile device
key
Prior art date
Application number
KR1020137016019A
Other languages
English (en)
Inventor
클리포드 에이. 커쉴러
제인 매닝
마이크 맥쉐리
아론 쉬디
Original Assignee
뉘앙스 커뮤니케이션즈, 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 뉘앙스 커뮤니케이션즈, 인코포레이티드 filed Critical 뉘앙스 커뮤니케이션즈, 인코포레이티드
Publication of KR20130116295A publication Critical patent/KR20130116295A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/445—Program loading or initiating

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Input From Keyboards Or The Like (AREA)

Abstract

표시된 키보드에서 수신된 제스처에 기초하여 키보드 애플리케이션에 명령하기 위한 시스템 및 방법이 설명된다. 일부 예들에서, 시스템은 형상 기반 또는 키 기반 제스처와 같은 제스처를 수신하고, 수신된 제스처와 관련된 명령을 식별하고, 식별된 명령에 기초하여 기능(예로서, 키보드의 모드의 변경, 키보드 숨김 등)을 수행한다.

Description

이동 장치의 키보드 애플리케이션과 같은 키보드 애플리케이션에 명령하기 위한 제스처들의 사용{USING GESTURES TO COMMAND A KEYBOARD APPLICATION, SUCH AS A KEYBOARD APPLICATION OF A MOBILE DEVICE}
사람으로부터 기계로 텍스트를 입력하기 위한 주요 방법인 현대식 키보드의 기원은 19세기의 초기 타자기로 거슬러 올라간다. 컴퓨터가 개발됨에 따라, 타자기 키보드를 텍스트 입력을 위한 주요 방법으로서 이용하기 위해 적응시키는 것은 자연스러운 진화의 산물이었다. 숙련된 타자수에게 키보드는 컴퓨터 또는 다른 데이터 처리 장치에 텍스트를 입력하기 위한 가능한 가장 빠른 방법으로 남았다.
컴퓨터를 더 작고 더 휴대 가능하게 하기 위한 계속되는 노력과 더불어, 물리적 키보드는 컴퓨팅 장치를 얼마나 작게 할 수 있는지에 대한 가장 중요한 제한 요소들 중 하나가 되었으며, 사람 손가락의 물리적 크기는 컴퓨터 설계자가 바꿀 수 있는 것이 아니다. 결과적으로, 이동 장치 및 태블릿 컴퓨터와 같은 소정의 휴대 응용들을 위한 컴퓨팅 장치들은 물리적 키보드를 갖지 않도록 설계되었으며, 그 대신에 터치스크린 또는 가상 키보드를 장치와 사람 사용자 간의 주요 인터페이스로서 사용한다.
터치스크린을 통한 구현에도 불구하고, 가상 키보드는 종종 사용자로부터 텍스트 입력을 수신하기 위한 메커니즘으로만 이용된다. 즉, 많은 혁신은 현대식 장치들에 유용한 키보드들을 제공하였지만, 통상적인 가상 키보드는 단지 사용자로부터 텍스트 입력을 수신하도록 기능함으로써 여전히 그전의 키보드들처럼 기능한다. 이것은 물리적 키보드 또는 초기 타자기들이 사용자로 하여금 장치 상에서 할 수 있게 해주는 것, 즉 사용자로부터 텍스트 입력을 수신하는 것과 유사하다.
따라서, 전술한 문제들을 극복하는 시스템은 물론, 추가적인 이익들을 제공하는 시스템이 필요하다. 일부 종래 또는 관련 시스템들 및 이들과 관련된 한계들에 대한 본 명세서에서의 예들은 배타적이 아니라 예시적인 것을 의도한다. 기존 또는 종래 시스템들의 다른 한계들은 이어지는 상세한 설명을 읽을 때 이 분야의 기술자들에게 명백해질 것이다.
도 1은 이동 장치 또는 다른 적절한 컴퓨팅 장치의 컴포넌트들을 나타내는 블록도이다.
도 2는 컴퓨팅 장치의 키보드 애플리케이션의 컴포넌트들을 나타내는 블록도이다.
도 3은 사용자로부터 수신된 제스처를 이용하여 키보드 애플리케이션에 명령하기 위한 루틴을 나타내는 흐름도이다.
도 4a-4b는 표시된 키보드와 관련하여 수행되는 형상 기반 제스처들을 나타내는 스크린 샷들이다.
도 5는 사용자로부터 수신된 키 기반 제스처를 이용하여 키보드 애플리케이션에 명령하기 위한 루틴을 나타내는 흐름도이다.
도 6a-6b는 표시된 키보드와 관련하여 수행되는 키 기반 제스처들을 나타내는 스크린 샷들이다.
개요
키보드 애플리케이션을 위한 명령들로서 제스처들을 사용하기 위한 시스템 및 방법이 설명된다. 일부 예들에서, 시스템은 제스처를 수신하고, 수신된 제스처와 관련된 명령, 명령어, 수행 가능 기능 및/또는 수행 가능 액션을 식별하고, 식별된 명령에 기초하는 키보드 애플리케이션을 이용하여 액션을 수행한다. 즉, 시스템은 스마트폰, 태블릿 컴퓨터, 또는 표시된 키보드를 포함하는 임의의 다른 컴퓨팅 장치와 같은 이동 장치의 사용자로부터 제스처를 수신한 때 다양한 기능들(예를 들어, 키보드의 숨김, 키보드 상에 표시된 키들의 변경 등)을 수행할 수 있다.
일부 예들에서, 시스템은 형상 기반 제스처의 수신에 응답하여 키보드 애플리케이션과 관련된 기능들을 수행한다. 예를 들어, 시스템은 터치스크린을 통해 표시된 키보드 상에 그려진 또는 그에 인접하게 그려진 형상(예로서, 화살표, 숫자, 문자, 원 등)을 제스처인 것으로 간주하고, 그려진 형상과 관련된 기능을 수행할 수 있다.
일부 예들에서, 시스템은 키 기반 제스처의 수신에 응답하여 키보드 애플리케이션과 관련된 기능들을 수행한다. 예를 들어, 시스템은 시작 키(예를 들어, 키보드 상의 특수 <start> 키)로부터 종료 키 또는 키들(예로서, <backspace> 키, F 키 등)로 그려진 경로를 제스처인 것으로 간주할 수 있으며, 그려진 경로 및/또는 종료 키에 기초하여 기능을 수행할 수 있다.
이제, 시스템은 다양한 실시예들과 관련하여 설명된다. 아래의 설명은 이러한 시스템 실시예들의 충분한 이해와 이들에 대한 설명을 가능하게 하기 위한 특정 상세들을 제공한다. 그러나, 이 분야의 기술자는 시스템이 이러한 상세 없이도 실시될 수 있다는 것을 이해할 것이다. 다른 예들에서는, 불필요하게 시스템의 실시예들의 설명을 불명확하게 하지 않기 위해 공지 구조들 및 기능들은 상세히 도시되거나 설명되지 않았다.
아래에 제공되는 설명에서 사용되는 용어는 시스템의 소정의 구체적인 실시예들의 상세한 설명과 관련하여 사용되는 경우에도 가장 넓은 정당한 방식으로 해석되는 것을 의도한다. 소정의 용어들은 아래에서 강조될 수도 있지만, 임의의 제한된 방식으로 해석될 것을 의도하는 임의의 용어는 이 상세한 설명 부분에서 그 자체로 명확하고 구체적으로 정의될 것이다.
적절한 시스템
도 1은 제스처 기반 명령들에 응답하여 기능들을 수행할 수 있는 키보드 애플리케이션을 지원할 수 있는 컴퓨팅 장치(100)의 블록도를 나타낸다. 컴퓨팅 장치(100)는 이동 장치, 스마트폰, 태블릿 컴퓨터, 넷북, 이동 GPS 내비게이션 장치, 리모컨, 고정 전화 또는 통신 콘솔 또는 기기, 표면 또는 테이블탑 컴퓨터, 오버헤드 이미지 프로젝터, 데스크탑 컴퓨터, 전자 판독기, ATM 기계, 자동 판매기, 셋톱 박스, 게임 장치, 또는 장치의 사용자 인터페이스에 의해 제공되는, 가상 또는 터치스크린 기반 키보드와 같은 키보드를 갖는 임의의 다른 장치일 수 있다. 컴퓨팅 장치(100)는 컴퓨팅 장치(100)의 키보드에 의해 수신되는 제스처들에 기초하여 기능들을 수행하도록 구성되는 다양한 하드웨어 및/또는 소프트웨어 컴포넌트들을 포함한다. 예를 들어, 컴퓨팅 장치(100)는 다양한 사람 인터페이스 컴포넌트들(110), 장치 컴포넌트들(120) 및 메모리(130)를 포함한다.
컴퓨팅 장치(100)는 터치스크린이 터치될 때 접촉 이벤트들을 프로세서(122)에 통지하는 입력과 같은 입력을 프로세서(122)에 제공하는 터치스크린(112) 또는 다른 입력 컴포넌트를 포함한다. 터치스크린은 터치스크린 드라이버와 같은 하드웨어 제어기를 포함하거나 그와 통신할 수 있으며, 하드웨어 제어기는 터치스크린으로부터 수신되는 원시(raw) 신호들을 해석하고, 접촉 이벤트와 관련된 정보(예를 들어, 버튼 또는 키 누름의 지시, (터치스크린, 터치패드 또는 그래픽 태블릿 상의 손가락 또는 스타일러스 터치 등으로부터의) 접촉의 포인트의 X-Y 좌표들, 제스처, 스와이프 경로 또는 그려진 경로, 물리 또는 가상 키를 누르기 위한 사용자에 의한 요청, 포인팅 입력 장치의 현재 위치, 접촉의 면적, 압력, 지속 기간 등)를 프로세서(122)로 전송한다. 예를 들어, 하드웨어 제어기는 마우스, 트랙볼, 조이스틱 또는 아날로그 스틱, 포인팅 스틱 또는 니플 마우스(nipple mouse), 롤러 마우스, 풋 마우스(foot mouse), 팜 마우스(palm mouse), 라이트 펜, 라이트 건(light gun), 위치 건(positional gun), 레이저 포인터, 자이로스코프 또는 자이로스코프 마우스, 가속도계, 눈 추적 장치, 비디오 추적 장치, 스타일러스 등을 포함하는 다양한 포인팅 장치들과 관련된 정보를 전송할 수 있다. 프로세서(122)는 검출된 접촉 이벤트들과 관련된 정보(예를 들어, 표시된 키보드 상의 접촉된 키들의 문자들)를 표시하기 위해 디스플레이(114)와 관련된 하드웨어 제어기 또는 드라이버와 통신한다. 디스플레이(114)는 컴퓨팅 장치(100) 내에 통합될 수 있거나, 터치스크린(112)의 일부일 수 있거나, 독립 장치일 수 있다. 예시적인 디스플레이들(114)은 터치스크린 디스플레이, 평판 디스플레이, 음극선관, 전자 잉크 디스플레이, 헤드-마운티드(head-mounted) 디스플레이, 액정 디스플레이, 발광 다이오드 디스플레이, 플라즈마 패널 디스플레이, 전기 발광 디스플레이, 진공 형광 디스플레이, 디지털 프로젝터, 레이저 프로젝터, 헤드-업(heads-up) 디스플레이 등을 포함한다. 장치(114)는 사용자가 표시된 키보드 또는 다른 표시된 컴포넌트를 내비게이션하는 것을 돕기 위해 적절한 가청 신호들을 제공하는 스피커와 같은 다른 인터페이스 컴포넌트들(116)을 포함할 수 있다.
컴퓨팅 장치(100)는 센서(예로서, GPS 또는 다른 위치 결정 센서, 모션 센서, 자이로스코프, 광 센서 등), 이동식 저장 장치(예를 들어, SIM 카드), 카메라 및 다른 비디오 캡처 장치, 마이크 및 다른 오디오 캡처 장치, 통신 장치(예를 들어, 블루투스 장치, 라디오, 안테나) 등과 같은 다양한 장치 컴포넌트들(124)을 포함할 수 있다.
프로세서(122)는 임시 및/또는 영구 저장 장치의 조합, 및 판독 전용 및 기록 가능 메모리(랜덤 액세스 메모리, 즉 RAM), 판독 전용 메모리(ROM), 플래시 메모리와 같은 기록 가능 비휘발성 메모리, 하드 드라이브, 플로피 디스크, SIM 기반 컴포넌트 등을 포함할 수 있는, 장치(100)의 메모리(130)에 저장된 데이터 또는 애플리케이션들과 통신할 수 있다. 메모리 컴포넌트는 운영 체제(132), 및 장치(100)로 다운로드된 애플리케이션들과 같은 다양한 애플리케이션들(134) 등의 다양한 프로그램 컴포넌트들 또는 모듈들을 포함한다. 예를 들어, 메모리(130)는 장치 상에서 영속적으로 동작하는, 장치에 고유한 애플리케이션들(예를 들어, 가상 키보드를 제공하는 키보드 애플리케이션, 텍스트 메시징 애플리케이션 등)은 물론, 사용자에 의해 다운로드되고 장치에 의해 런칭되는 애플리케이션들(예를 들어, 소셜 네트워킹 사이트와 관련된 애플리케이션, 게임 등)을 저장할 수 있다.
예를 들어, 메모리(130)는 제스처 기반 명령들에 응답하는 키보드 애플리케이션과 같은 키보드 애플리케이션을 저장할 수 있다. 특히 제스처들에 대한 데이터 및 관련 명령들을 저장하는 제스처 데이터베이스(152)를 포함할 수 있는 키보드 애플리케이션(150)은 특히 일부 예들에서 키보드로 하여금 사용자들로부터 수신된 제스처들에 응답하여 표시된 키보드와 관련된 기능들을 수행할 수 있게 해주는 기능과 같이 표준 키보드 애플리케이션들보다 많은 기능을 제공한다. 키보드 애플리케이션(150) 및 그의 기능에 관한 추가 상세들이 본 명세서에서 설명된다.
메모리 컴포넌트(130)는 또한 사용자 데이터 데이터베이스(136), 또는 장치(100)에 의해 실행되는 애플리케이션들에 대한 정보를 제공 및/또는 저장하는 다른 데이터베이스들(139)과 같은 다양한 데이터 저장 컴포넌트들을 포함한다. 예를 들어, 사용자 데이터베이스(136)는 연락처 정보, 가입자 정보, 인적 정보, 사용 정보, 경향 정보, 선호 정보 등과 같은, 장치(100)의 사용자와 관련된 정보를 저장할 수 있다.
일반적으로, 컴퓨팅 장치(100)는 특히, 액션들을 수행할 때 장치(100) 및/또는 키보드 애플리케이션(150)에 의해 요구되거나 사용되는 임의의 그리고 모든 컴포넌트들, 모듈들 또는 데이터 파일들을 저장하거나 포함할 수 있다.
본 명세서에서 도 1 및 본 설명은 키보드 애플리케이션(150)이 구현될 수 있는 적절한 컴퓨팅 환경의 간단하고 일반적인 설명을 제공한다. 필요한 것은 아니지만, 시스템의 양태들은 범용 컴퓨터, 예를 들어 이동 장치, 서버 컴퓨터 또는 개인용 컴퓨터에 의해 실행되는 루틴들과 같은 컴퓨터 실행 가능 명령어들의 일반적 상황에서 설명된다. 관련 분야의 기술자들은 시스템이 인터넷 설비, (태블릿 컴퓨터 및/또는 개인용 휴대 단말기(PDA)를 포함하는) 핸드헬드 장치, 모든 방식의 셀룰러 또는 이동 전화, 멀티프로세서 시스템, 마이크로프로세서 기반 또는 프로그래밍 가능 소비자 전자 장치, 셋톱 박스, 네트워크 PC, 미니 컴퓨터, 메인프레임 컴퓨터 등을 포함하는 다른 통신, 데이터 처리 또는 컴퓨터 시스템 구성들을 이용하여 실시될 수 있다는 것을 알 것이다. 사실상, 용어 "컴퓨터", "호스트", "호스트 컴퓨터", "이동 장치" 및 "핸드셋"은 일반적으로 본 명세서에서 서로 교체 가능하게 사용되며, 임의의 상기 장치 및 시스템은 물론, 임의의 데이터 프로세서를 지칭한다.
시스템의 양태들은 특히 본 명세서에서 상세히 설명되는 컴퓨터 실행 가능 명령어들 중 하나 이상을 실행하도록 특별히 프로그래밍되거나, 구성되거나, 구축된 특수 목적 컴퓨팅 장치 또는 데이터 프로세서에서 구현될 수 있다. 시스템의 양태들은 또한 근거리 네트워크(LAN), 광역 네트워크(WAN) 또는 인터넷과 같은 통신 네트워크를 통해 링크되는 원격 처리 장치들에 의해 작업들 또는 모듈들이 실행되는 분산형 컴퓨팅 환경들에서 실시될 수 있다. 분산형 컴퓨팅 환경에서, 프로그램 모듈들은 근거리 및 원격 메모리 저장 장치들 양쪽에 배치될 수 있다.
시스템의 양태들은 자기적으로 또는 광학적으로 판독 가능한 컴퓨터 디스크, 하드-와이어드(hard-wired) 또는 사전 프로그래밍된 칩(예로서, EEPROM 반도체 칩), 나노 기술 메모리, 생체 메모리 또는 다른 데이터 저장 매체를 포함하는 컴퓨터 판독 가능 매체들(예를 들어, 물리 및/또는 유형 컴퓨터 판독 가능 저장 매체들) 상에 저장 또는 배포될 수 있다. 사실상, 컴퓨터 구현 명령어들, 데이터 구조들, 스크린 디스플레이들, 및 시스템의 양태들 하의 다른 데이터는 인터넷을 통해 또는 (무선 네트워크를 포함하는) 다른 네트워크들을 통해, 소정 기간에 걸쳐 전파 매체의 전파 신호(예로서, 전자기파(들), 음파 등) 상에서 배포될 수 있거나, 임의의 아날로그 또는 디지털 네트워크(패킷 교환, 회선 교환 또는 다른 방식) 상에서 제공될 수 있다. 관련 분야의 기술자들은, 시스템의 부분들이 서버 컴퓨터 상에 상주하는 반면에 대응하는 부분들이 이동 또는 휴대용 장치와 같은 클라이언트 컴퓨터 상에 상주하고, 따라서 본 명세서에서는 소정의 하드웨어 플랫폼들이 설명되지만, 시스템의 양태들은 네트워크 상의 노드들에 동일하게 적용될 수 있다는 것을 인식할 것이다. 대안 실시예에서, 이동 장치 또는 휴대용 장치는 서버 부분을 나타낼 수 있는 반면에 서버는 클라이언트 부분을 나타낼 수 있다.
제스처 지원 키보드 애플리케이션 의 컴포넌트들
본 명세서에서 설명되는 바와 같이, 일부 예들에서, 키보드 애플리케이션(150)은 이동 장치의 사용자로 하여금 이동 장치의 터치스크린 또는 다른 사용자 인터페이스를 통해 사용자에게 제공된 키보드를 통해 액션들을 수행할 수 있게 해주는 컴포넌트들을 포함한다. 즉, 일부 예들에서, 키보드 애플리케이션(150)은 제스처들을 키보드 애플리케이션에 대한 처리 명령들로서 인식하고, 명령들과 관련된 기능들을 수행한다. 예를 들어, 키보드 애플리케이션은 제스처 기반 명령의 수신에 기초하여 텍스트를 편집 및/또는 수정하고, 동작 모드들을 변경하고, 표시된 키보드의 일부 또는 전부를 변경하는 것 등을 행할 수 있다. 따라서, 키보드 애플리케이션은 다수의 기능, 사용자로부터의 텍스트의 입력을 용이하게 하는 기능, 및 표시된 키보드를 통해 그리고/또는 그 근처에서 수신된 제스처 기반 명령들에 기초하여 액션들을 수행하는 다른 기능을 수행할 수 있다.
키보드는 기능을 추가하기 위한 유용한 장소이다. 통상적으로, 키보드는 컴퓨팅 장치 및 그의 다양한 애플리케이션들을 사용할 때 종종 또는 항상 액세스 가능한 소프트웨어의 계층이다. 따라서, 키보드 내에 또는 그와 관련된 다른 기능의 추가는 향상된 텍스트 편집, 키보드 모드들 사이의 내비게이션, 키보드 액션들 사이의 내비게이션, 키보드의 재호출 및/또는 숨김 및 다른 이익들과 같은 많은 이익을 제공할 것이다. 이제, 그러한 기술들을 수행할 수 있는 키보드 애플리케이션의 다양한 컴포넌트들이 설명된다.
일부 예들에서, 키보드 애플리케이션(150)은 가상 키보드를 표시하고 통상적인 키보드 기능들을 수행하도록 구성된 디스플레이 컴포넌트(210)를 포함한다. 예를 들어, 디스플레이 컴포넌트(210)는 텍스트 입력 기능, 키 탭 기능, 스와이프, 제스처 및/또는 접촉 이동 기능, 또는 표시된 그리고/또는 가상 키보드를 통한 사용자로부터의 텍스트 기반 입력의 수신을 용이하게 하는 임의의 다른 기능을 제공할 수 있는 컴포넌트들과 같은 전통적인 키보드 애플리케이션들의 컴포넌트들을 포함할 수 있다. 즉, 디스플레이 컴포넌트(210)는 컴퓨팅 장치(100)로 하여금 터치스크린(120)을 통해 키보드를 표시하고 터치스크린(120)을 통해 제공된 표시된 키보드를 통해 입력을 수신하게 할 수 있다. 키보드는 터치 감지 표면 상에 구현되는 임의의 키보드, 터치 감지 디스플레이 상에 제공되는 키보드, 터치 감지 표면 상에 인쇄된 키보드 등과 같은 물리 키보드 또는 가상 키보드일 수 있다. 예시적인 키보드들은 모니터 상에 표시된 키보드, 터치스크린 상에 표시된 키보드, 평면 또는 곡면 상에 광학적으로 투영된 키보드, 또는 키들 내에 통합된 전자적으로 변경 가능한 키 심벌들을 갖는 물리 키보드 등을 포함한다. 일부 예들에서, 키보드는 소정 종류의 포인팅 장치 또는 제스처 인식기로 제어되는 스크린 또는 프로젝션과 같이 "가상적으로" 터치될 수 있다. 디스플레이 컴포넌트(210)에 의해 제공되는 적절한 텍스트 입력 애플리케이션들에 관한 추가적인 상세들은 SYSTEM AND METHOD FOR A USER INTERFACE FOR TEXT EDITING AND MENU SELECTION이라는 제목으로 2009년 6월 2일자로 허여된, 일반 양도된 미국 특허 제7,542,029호에서 발견될 수 있으며, 이 특허는 그 전체가 참고로 포함된다.
일부 예들에서, 디스플레이 컴포넌트(210)에 의해 제공되는 텍스트 입력 애플리케이션은 사용자가 텍스트를 입력하고 있을 때 입력 텍스트에 대해 인식 및/또는 명확화 기술들을 수행할 수 있다. 예를 들어, 디스플레이 컴포넌트(210)는 사용자가 가상 키보드 상에서 연속 경로를 그릴 때 텍스트 입력을 수신하는 텍스트 입력 애플리케이션을 제공할 수 있다. 그러한 텍스트 입력 애플리케이션은 SYSTEM AND METHOD FOR CONTINUOUS STROKE WORD-BASED TEXT INPUT이라는 제목으로 2006년 8월 29일자로 허여된 미국 특허 제7,098,896호에 더 상세히 설명되어 있으며, 이 특허는 그 전체가 참고로 포함된다.
일부 예들에서, 키보드 애플리케이션(150)은 키보드 애플리케이션에 의해 수신된 제스처들을 수신, 모니터링 및/또는 검토하고, 하나 이상의 명령이 수신된 제스처들과 관련된 것으로 결정하도록 구성되는 제스처 컴포넌트(220), 수신된 제스처들과 관련된 상황을 식별 및/또는 결정하도록 구성되는 상황 컴포넌트(230), 결정된 하나 이상의 명령을 수행하거나 수행하게 하도록 구성되는 명령 컴포넌트(240), 수신된 제스처들과 관련된 정보, 관련 명령들을 저장하는 데이터베이스(250) 및/또는 본 명세서에서 설명되는 바와 같은 키보드 애플리케이션(150)의 동작을 용이하게 하는 다른 컴포넌트들(260)을 포함한다.
본 명세서에서 설명되는 바와 같이, 일부 예들에서, 제스처 컴포넌트(220)는 키보드 애플리케이션(150)을 통해 사용자로부터 수신된 하나 이상의 "제스처"를 식별한다. 제스처는 키보드 상에서 데이터를 입력하기 위해, 애플리케이션들과 상호작용하기 위해 그리고/또는 다양한 다른 사용자 의도들을 지시하기 위해 스크린을 가로지르는 그리고/또는 그에 인접하는 손가락(또는 스타일러스)의 이동이다. 예를 들어, 제스처는 가상 키보드 상에서 또는 그에 근접하여 그려지는 경로, 가상 키보드 상에서 또는 그에 근접하여 그려지는 형상, 및/또는 가상 키보드 상의 또는 그에 근접하는 다른 움직임들일 수 있다. 일부 예들에서, 키보드 애플리케이션(150)은 사용자와 키보드 사이의 어떠한 접촉 없이도 제스처를 수신할 수 있다. 예를 들어, 수신 제스처는 장치(100) 내의 자이로스코프에 의해 검출되는 장치(100)의 소정의 움직임, 또는 장치(100)의 카메라에 의해 검출되는 가상 디스플레이 위의 포인터의 움직임일 수 있다.
키보드 애플리케이션(150)은 제스처들과 관련된 정보를 제스처 데이터베이스(250) 또는 제스처 데이터베이스(152)와 같은 데이터베이스에 저장할 수 있다. 저장되는 정보는 제스처들을 명령, 기능, 액션, 명령어 등에 연관시키는 정보, 사용자 설정들과 관련된 정보(예를 들어, 사용자의 계정 정보 또는 사용자의 선호 정보) 등을 포함할 수 있다. 그러한 정보는 많은 이익 가운데 특히 키보드 애플리케이션(150)으로 하여금 가상 키보드를 통해 수신된 제스처들에 기초하여 명령들을 결정하고 처리하는 것을 가능하게 할 수 있다.
일부 예들에서, 상황 컴포넌트(230)는 제스처가 수신된 상황과 관련된 정보를 제스처 컴포넌트(220) 및/또는 명령 컴포넌트(240)에 제공할 수 있다. 예를 들어, 상황 컴포넌트(230)는 이동 장치의 사용자와 관련된 정보, 이동 장치의 사용자의 선호들, 이동 장치에서 현재 실행중인 애플리케이션, 이동 장치의 사용자의 경험 레벨, 키보드 애플리케이션의 동작 모드, 이동 장치의 사용자와 관련된 이력 정보 등을 제공할 수 있다.
일부 예들에서, 제스처 컴포넌트(220)는 수신된 제스처와 연관시킬 명령을 결정할 때 상황 컴포넌트(230)에 의해 제공된 정보를 이용할 수 있다. 예를 들어, 둘 이상의 명령이 수신된 제스처와 연관될 수 있는 예들이 존재할 수 있으며, 제스처 컴포넌트(220)는 그러한 정보를 이용하여, 그러한 예들에서 발생할 수 있는 불명료들을 해결할 수 있다.
유사하게, 일부 예들에서, 명령 컴포넌트(240)는 수신된 제스처와 관련된 명령을 어떻게 처리 및/또는 수행할지를 결정할 때 상황 컴포넌트(230)에 의해 제공된 정보를 이용할 수 있다. 예를 들어, 수신된 제스처와 관련될 수 있는 명령이 많은 상이한 방식(예를 들어, 단어의 폰트의 변경 대 문장의 폰트의 변경)으로 처리될 수 있는 예들이 존재할 수 있으며, 명령 컴포넌트(220)는 그러한 정보를 이용하여, 그러한 예들에서 발생할 수 있는 불명료들을 해결할 수 있다.
제스처 기반 명령들
본 명세서에서 설명되는 바와 같이, 일부 예들에서, 시스템은 이동 장치에 의해 지원되는 키보드 애플리케이션을 통해 또는 그 근처에서 제스처들을 수신하는 것에 응답하여 키보드 애플리케이션 내에서 명령들을 처리한다. 도 3은 사용자로부터 수신된 제스처를 이용하여 키보드 애플리케이션에 명령하기 위한 루틴(300)을 나타내는 흐름도이다.
단계 310에서, 시스템은 컴퓨팅 장치의 키보드 애플리케이션으로부터 제스처를 수신한다. 예를 들어, 제스처 컴포넌트(220)는 터치스크린에 의해 표시된 가상 키보드를 통해 또는 그 근처에서 수행된 제스처와 관련된 정보를 터치 스크린 드라이버로부터 수신한다. 일부 예들에서, 수신된 제스처는 키보드의 특정 키들과 연관되지 않은 형상 기반 제스처이다. 예시적인 형상 기반 제스처들은 문자, 숫자, 기하학적 형상, 그림, 스케치, 사용자 생성 형상, 자유 형태 형상, 심벌 등을 포함한다. 일부 예들에서, 수신된 제스처는 본 명세서에서 더 상세히 설명되는 키 기반 제스처이다.
단계 320에서, 시스템은 수신된 제스처와 관련된 명령을 식별한다. 예를 들어, 제스처 컴포넌트(220)는 수신된 제스처와 관련된 명령 및/또는 명령들을 식별하기 위해 컴퓨팅 장치의 메모리에 저장된 테이블과 같은 데이터 구조 상에서 탐색 동작 또는 다른 기술을 수행한다. 테이블 1은 탐색 동작의 수신자이기에 적합한 예시적인 데이터 구조를 나타내는 테이블이며, 이 테이블은 형상 기반 제스처들을 키보드 애플리케이션(150)에 의해 처리될 명령들과 연관시키는 엔트리들을 포함한다.
제스처 명령
위쪽 화살표 "키보드 최대화"
아래쪽 화살표 "키보드 최소화"
X "키보드 숨김"
# "키보드 상에 숫자 표시"
? "키보드의 언어 변경"
B "텍스트 폰트를 굵게 변경"
I "텍스트 폰트를 이탤릭체로 변경"
텍스트 밑줄 "하이퍼링크 삽입"
시계방향 원 "텍스트를 더 큰 폰트로 변경"
반시계 방향 원 "텍스트를 더 작은 폰트로 변경"
물론, 이 분야의 통상의 기술자는 다른 제스처들 및/또는 명령들이 시스템에 의해 제공될 수 있다는 것을 알 것이다.
단계 330에서, 시스템은 식별된 명령을 처리하고, 식별된 명령에 기초하여 키보드 애플리케이션과 관련된 액션 및/또는 기능을 수행한다. 예를 들어, 명령 컴포넌트(240)는 사용자가 키보드 숨김과 관련된 제스처를 제공했다는 지시를 제스처 컴포넌트(220)로부터 수신하고, 키보드로 하여금 디스플레이로부터 제거되게 한다.
일부 예들에서, 시스템은 소정 명령들 및/또는 액션들을 위한 사용자 정의 및/또는 사용자 제공 제스처들을 지원할 수 있다. 예를 들어, 시스템은 소정의 명령들 및/또는 액션들을 위한 사용자 정의 제스처들의 입력 또는 선택을 용이하게 하는 하나 이상의 스크린을 제공할 수 있다. 시스템은 이러한 사용자 정의 제스처들을 모든 애플리케이션들에 걸쳐, 특정 애플리케이션에 걸쳐, 기타 등등에 의해 제공할 수 있다.
사실상, 일부 예들에서 시스템은 소정의 제스처들을 컴퓨팅 장치에 의해 지원되는 모든 애플리케이션들에 걸치는 글로벌 제스처들로서 제공할 수 있거나, 다른 예들에서 시스템은 소정의 제스처들을 장치에서 실행되는 현재 애플리케이션에 고유한 제스처들로서 제공할 수 있다. 예를 들어, 장치에서 현재 실행중인 브라우저는 텍스트 스트링 내에 "www" 및 ".com"을 삽입하기 위한 명령과 관련된 제스처를 지원할 수 있는 반면, 다른 애플리케이션들은 그러한 제스처를 지원하지 못할 수 있다.
도 4a-4b는 키보드 애플리케이션에 대한 처리 명령들과 관련된, 표시된 키보드 상에 그려진 제스처들을 나타내는 스크린 샷들이다. 도 4a는 가상 키보드(406)를 가진 디스플레이 스크린(400)을 나타낸다. 이메일 애플리케이션이 "bulgoki"의 아마도 오자 단어(402)를 강조하는 것에 응답하여, 사용자는 "X"의 제스처(404)를 입력하며, 이는 키보드 애플리케이션으로 하여금 단어(402) "bulgoki"에 대한 철자 체크 동작을 수행하게 한다. 키보드 애플리케이션은 철자 체크 동작에 응답하여 사용자의 선택을 위한 대안 철자들(예로서, "bulgogi", "pulgogi")의 리스트(도시되지 않음)를 제공할 수 있다.
도 4b는 가상 키보드(412)를 가진 디스플레이 스크린(410)을 나타낸다. 사용자는 위쪽 화살표의 제스처(414)를 입력하여, 추가적인 텍스트를 텍스트 편집기 내에 입력하기 위해 키보드를 최대화하려고 시도한다. 위쪽 화살표 제스처(414)는 키보드(412)의 어떠한 키와도 연관되지 않으며, 키보드를 최대화하는 동일 처리 명령을 개시하기 위해 키보드 위의 임의의 곳에서 또는 그 위에서 부분적으로 그려질 수 있다. 물론, 이 분야의 통상의 기술자는 시스템이 키보드 애플리케이션 내에서 처리 명령들을 개시할 때 본 명세서에서 명확히 설명되지 않은 다른 제스처들을 이용할 수 있다는 것을 알 것이다.
본 명세서에서 설명되는 형상 기반 및 다른 제스처들에 더하여, 일부 예들에서 시스템은 키 기반 제스처들을 컴퓨팅 장치에 의해 지원되는 키보드 애플리케이션과 관련된 기능들 및/또는 액션들을 수행하기 위한 요청들로서 사용할 수 있다. 도 5는 사용자로부터 수신된 키 기반 제스처를 이용하여 키보드 애플리케이션에 명령하기 위한 루틴(500)을 나타내는 흐름도이다.
단계 510에서, 시스템은 컴퓨팅 장치의 키보드 애플리케이션을 통해 키 기반 제스처를 수신한다. 예를 들어, 제스처 컴포넌트(220)는 터치스크린에 의해 표시된 가상 키보드의 하나 이상의 키를 통해 또는 그 근처에서 수행된 제스처와 관련된 정보를 터치스크린 드라이버로부터 수신한다. 제스처는 제스처에 대한 시작 포인트(예로서, "swype" 키, "start" 키, "G" 키 등)를 나타내는 키에서 시작하고 아마도 다른 키들을 포함하는 제2의 상이한 키에서 끝나는 경로, 라인 또는 다른 그려진 형태일 수 있다. 즉, 키 기반 제스처는 키보드 상의 2개의 키, 3개의 키 또는 N개의 키를 통한 경로일 수 있다.
단계 520에서, 시스템은 수신된 키 기반 제스처와 관련된 명령을 식별한다. 예를 들어, 제스처 컴포넌트(220)는 수신된 키 기반 제스처와 관련된 명령 및/또는 명령들을 식별하기 위해 컴퓨팅 장치의 메모리에 저장된 테이블과 같은 데이터 구조 상에서 탐색 동작 또는 다른 기술을 수행한다. 테이블 2는 탐색 동작의 수신자이기에 적합한 예시적인 데이터 구조를 나타내는 테이블이며, 이 테이블은 키 기반 제스처들을 키보드 애플리케이션(150)에 의해 처리될 명령들과 연관시키는 엔트리들을 포함한다.
제스처 명령
<swype>에서 <backspace>로 "키보드 숨김"
<swype>에서 <F>로 "키보드 상에 숫자 표시"
<swype>에서 <globe>로 "키보드의 언어 변경"
<swype>에서 <T> 및 <W>로 "텍스트를 트위터로 포스팅"
<G>에서 <F>로 그리고 <G>로 "텍스트의 폰트 변경"
물론, 이 분야의 통상의 기술자는 다른 키 기반 제스처들 및/또는 명령들이 시스템에 의해 제공될 수 있다는 것을 알 것이다.
단계 530에서, 시스템은 식별된 명령을 처리하고, 식별된 명령에 기초하여 키보드 애플리케이션과 관련된 액션 및/또는 기능을 수행한다. 예를 들어, 명령 컴포넌트(240)는 사용자가 텍스트를 트위터로 포스팅하는 것과 관련된 키 기반 제스처를 제공했다는 지시를 제스처 컴포넌트(220)로부터 수신하고, 키보드로 하여금 사용자가 포스팅할 준비가 된 때 트위터 애플리케이션의 런칭을 용이하게 하기 위한 트위터 버튼을 포함하게 한다.
즉, 시스템은 일부 예들에서 키보드 애플리케이션 내에서 액션들을 수행하기 위한 둘 이상의 명령과 관련된 제1 키가 이동 장치의 사용자에 의해 접촉되었다는 지시를 수신할 수 있고, 사용자에 의해 제1 키로부터 둘 이상의 명령 중 하나의 명령과 관련된 제2 키까지 경로가 그려졌다는 지시를 수신할 수 있고, 제2 키와 관련된 액션을 수행할 수 있다.
도 6a-6b는 키보드 애플리케이션에 대한 처리 명령들과 관련된 예시적인 키 기반 제스처들을 나타내는 스크린 샷들을 나타낸다. 도 6a는 가상 키보드(602)를 가진 디스플레이 스크린(600)을 나타낸다. 친구에 대한 이메일을 편집하는 동안, 사용자는 그가 작성하고 있는 위치에 대한 방향들을 제공하기 위해 맵을 추가하기를 원한다. 사용자는 "swype" 키 또는 시작 키(606)로부터 "M" 키 또는 종료 키(608)로의 경로(604)를 그리는 제스처를 수행한다. 시스템은 제스처의 수신에 응답하여 위치(도시되지 않음)에 대한 방향들을 제공하는 맵을 이메일 내에 삽입한다.
도 6b는 가상 키보드(612)를 가진 디스플레이 스크린(610)을 나타낸다. 사용자는 그의 노트 패드에서 메시지의 작성을 완료하였으며, 메시지를 그와 관련된 다양한 소셜 네트워크 사이트로 전송하기를 원한다. 사용자는 시작 키(616)로부터 "T" 키(617)를 통해 경로가 끝나는 "W" 키 또는 종료 키(618)로 경로(614)를 그리는 제스처를 수행한다. 시스템은 제스처의 수신에 응답하여 표시된 가상 키보드를 "소셜 네트워킹" 동작 모드에서 동작하도록 변경하며, 이 모드에서는 트위터 또는 페이스북(도시되지 않음)과 같은 다양한 소셜 네트워킹 사이트를 나타내는 키들이 포함된다.
따라서, 일부 예들에서, 시스템은 제스처들과 처리 명령들을 연관시킴으로써 가상 키보드의 향상된 내비게이션 및 더 많은 기능을 촉진한다. 그러한 제스처 기반 명령들은 많은 이익 가운데 특히 이동 장치들의 사용자들로 하여금 텍스트를 쉽게 입력하고, 텍스트를 편집하고, 동작 모드들을 변경하고, 장치에 의해 지원되는 애플리케이션들 사이에서 내비게이션하고, 그리고/또는 그들의 이동 장치들의 많은 능력을 이용하는 것을 가능하게 할 수 있다.
결론
상황이 명확히 달리 요구하지 않는 한, 명세서 및 청구항들 전반에서, 단어 "포함한다", "포함하는" 등은 배타적 또는 포괄적인 의미가 아니라 포함의 의미로서, 즉 "포함하지만, 한정되지 않는다"는 의미로 해석되어야 한다. 본 명세서에서 사용될 때, 용어 "접속", "결합" 또는 이들의 임의의 변형은 둘 이상의 요소 사이의 직접 또는 간접적인 임의의 접속 또는 결합을 의미하며, 요소들 사이의 결합 또는 접속은 물리적, 논리적 또는 이들의 조합일 수 있다. 게다가, 단어 "여기서", "위", "아래" 및 유사한 의미의 단어들은 본원에서 사용될 때 본원의 임의의 특정 부분들이 아니라 본원의 전체를 참조해야 한다. 상황이 허락하는 경우, 단수 또는 복수를 사용하는 위의 상세한 설명 내의 단어들은 각각 복수 또는 단수도 포함할 수 있다. 둘 이상의 아이템의 리스트를 참조하는 단어 "또는"은 단어의 다음의 해석들의 전부, 즉 리스트 내의 임의의 아이템, 리스트 내의 모든 아이템 및 리스트 내의 아이템들의 임의 조합을 커버한다.
시스템의 실시예들의 전술한 설명은 그 자체로 완전하거나 또는 시스템을 위에 개시된 바로 그 형태로 한정하는 것을 의도하지 않는다. 시스템의 특정 실시예들 및 그에 대한 예들이 설명의 목적을 위해 위에서 설명되었지만, 관련 분야의 기술자들이 인식하듯이, 시스템의 범위 내에서 다양한 균등한 수정들이 가능하다. 예를 들어, 프로세스들 또는 블록들이 소정의 순서로 제공되지만, 대안 실시예들은 단계들을 갖는 루틴들을 상이한 순서로 수행하거나, 블록들을 갖는 시스템들을 상이한 순서로 이용할 수 있으며, 일부 프로세스들 또는 블록들은 제거, 이동, 추가, 세분, 결합 및/또는 수정될 수 있다. 이러한 프로세스들 또는 블록들 각각은 다양한 상이한 방식으로 구현될 수 있다. 또한, 프로세스들 또는 블록들은 때때로 직렬로 수행되는 것으로 설명되지만, 이러한 프로세스들 또는 블록들은 병렬로 대신 수행될 수 있거나, 상이한 시간에 수행될 수 있다.
전술한 많은 실시예는 (가입자에게 제공되기 전에 또는 가입자 호출 동안에) 이동 장치 상에 저장된 소프트웨어를 이용하지만, 전술한 스크립트들 및 다른 소프트웨어는 이동 장치 내에 하드 코딩될 수 있다(예를 들어, EEPROM, PROM 등에 저장될 수 있다). 또한, 위의 기능은 스크립트 또는 다른 특수 모듈 없이도 구현될 수 있다.
본 명세서에서 제공되는 시스템의 가르침은 반드시 전술한 시스템이 아니라 다른 시스템들에 적용될 수 있다. 전술한 다양한 실시예들의 요소들 및 동작들은 추가적인 실시예들을 제공하도록 결합될 수 있다.
첨부된 출원서류 내에 목록화될 수 있는 임의의 것들을 포함하는, 전술한 특허들 및 출원들 및 다른 참고 문헌들 모두는 참고로 포함된다. 시스템의 양태들은 필요한 경우에 시스템의 더 추가적인 실시예들을 제공하기 위해 전술한 다양한 참고 문헌들의 시스템들, 기능들 및 개념들을 이용하도록 수정될 수 있다.
이들 및 다른 변경들은 전술한 상세한 설명을 고려하여 시스템에 대해 이루어질 수 있다. 위의 설명은 시스템의 소정 실시예들을 상술하고, 고려되는 최상의 모드를 설명하지만, 위의 설명이 본문에 얼마나 상세하게 나타나는지에 관계없이, 시스템은 많은 방식으로 실시될 수 있다. 로컬 기반 지원 시스템의 상세들은 그의 구현 상세들에서 크게 변할 수 있지만, 본 명세서에서 개시되는 시스템에 여전히 포함될 수 있다. 전술한 바와 같이, 시스템의 소정의 특징들 또는 양태들을 설명할 때 사용되는 특정 용어는 용어가 그 용어와 관련된 시스템의 임의의 특정 특성들, 특징들 또는 양태들로 제한되도록 본 명세서에서 재정의된다는 것을 암시하는 것으로 간주되지 않아야 한다. 일반적으로, 아래의 청구항들에서 사용되는 용어들은 위의 상세한 설명 부분이 그러한 용어들을 명확히 정의하지 않는 한은 시스템을 명세서에 개시된 특정 실시예들로 한정하는 것으로 해석되지 않아야 한다. 따라서, 시스템의 실제 범위는 개시된 실시예들뿐만 아니라, 청구항들에 따른 시스템을 실시 또는 구현하는 모든 균등한 방법들도 포함한다.
시스템의 소정 양태들이 아래의 소정의 청구항 형태들에서 제공되지만, 본 발명자들은 임의 수의 청구항 형태들에서 시스템의 다양한 양태들을 고려한다. 예컨대, 시스템의 하나의 양태만이 컴퓨터 판독 가능 매체 내에 구현되는 것으로 기재되지만, 컴퓨터 판독 가능 매체 내에 다른 양태들도 구현될 수 있다. 따라서, 본 발명자들은 시스템의 다른 양태들을 위해 그러한 추가적인 청구항 형태들을 추구하기 위해 출원 후에 추가적인 청구항들을 추가할 권리를 보유한다.

Claims (20)

  1. 이동 장치의 메모리에 저장된 키보드 시스템으로서,
    디스플레이 컴포넌트 - 상기 디스플레이 컴포넌트는 상기 이동 장치의 터치스크린을 통해 사용자에게 가상 키보드를 제공하도록 구성됨 -;
    제스처 컴포넌트 - 상기 제스처 컴포넌트는 상기 이동 장치의 사용자로부터 상기 가상 키보드를 통해 제스처를 수신하도록 구성됨 -; 및
    명령 컴포넌트 - 상기 명령 컴포넌트는 상기 수신된 제스처에 기초하여 기능(function)을 수행하라고 상기 키보드 시스템에 명령하도록 구성됨 -
    를 포함하는 키보드 시스템.
  2. 제1항에 있어서,
    상기 제스처 컴포넌트는 상기 이동 장치의 상기 터치스크린을 통해 상기 사용자로부터 형상 기반 제스처를 수신하도록 구성되고,
    상기 명령 컴포넌트는 상기 수신된 형상 기반 제스처에 기초하여 상기 가상 키보드의 동작의 모드를 변경하라고 상기 키보드 시스템에 명령하도록 구성되는 키보드 시스템.
  3. 제1항에 있어서,
    상기 제스처 컴포넌트는 상기 이동 장치의 상기 터치스크린을 통해 상기 사용자로부터 형상 기반 제스처를 수신하라고 상기 키보드 시스템에 명령하도록 구성되고,
    상기 명령 컴포넌트는 상기 수신된 형상 기반 제스처에 기초하여 상기 가상 키보드를 통해 입력된 텍스트를 수정하도록 구성되는 키보드 시스템.
  4. 제1항에 있어서,
    상기 제스처 컴포넌트는 상기 이동 장치의 상기 터치스크린을 통해 상기 사용자로부터 키 기반 제스처를 수신하라고 상기 키보드 시스템에 명령하도록 구성되고,
    상기 명령 컴포넌트는 상기 수신된 키 기반 제스처에 기초하여 상기 가상 키보드의 동작의 모드를 변경하도록 구성되는 키보드 시스템.
  5. 제1항에 있어서,
    상기 제스처 컴포넌트는 상기 이동 장치의 상기 터치스크린을 통해 상기 사용자로부터 키 기반 제스처를 수신하라고 상기 키보드 시스템에 명령하도록 구성되고,
    상기 명령 컴포넌트는 상기 수신된 키 기반 제스처에 기초하여 상기 가상 키보드를 통해 입력된 텍스트를 수정하도록 구성되는 키보드 시스템.
  6. 제1항에 있어서,
    상기 제스처 컴포넌트는 상기 이동 장치의 상기 터치스크린을 통해 상기 사용자로부터 사용자 정의 제스처를 수신하도록 구성되는 키보드 시스템.
  7. 제1항에 있어서,
    상기 명령 컴포넌트는 상기 수신된 제스처에 기초하여 상기 가상 키보드에 의해 표시된 하나 이상의 키를 변경하라고 상기 키보드 시스템에 명령하도록 구성되는 키보드 시스템.
  8. 제1항에 있어서,
    상기 명령 컴포넌트는 상기 수신된 제스처에 기초하여 상기 가상 키보드를 숨기라고 상기 키보드 시스템에 명령하도록 구성되는 키보드 시스템.
  9. 제1항에 있어서,
    상기 명령 컴포넌트는 상기 수신된 제스처에 기초하여 상기 가상 키보드를 통해 표시된 텍스트를 편집하라고 상기 키보드 시스템에 명령하도록 구성되는 키보드 시스템.
  10. 키보드 애플리케이션에 명령하기 위해 이동 장치에 의해 수행되는 방법으로서,
    상기 이동 장치의 터치스크린을 통해 상기 키보드 애플리케이션에 의해 표시된 키보드 상에서 제스처를 수신하는 단계; 및
    상기 수신된 제스처와 관련된 기능을 수행하라고 상기 키보드 애플리케이션에 명령하는 단계
    를 포함하는 방법.
  11. 제10항에 있어서,
    상기 수신된 제스처는 상기 키보드의 제1 키로부터 상기 키보드의 제2 키까지 그려진 경로인 방법.
  12. 제10항에 있어서,
    상기 수신된 제스처는 상기 키보드 애플리케이션에 의해 표시된 상기 키보드 상에 또는 근처에 그려진 형상인 방법.
  13. 제10항에 있어서,
    상기 수신된 제스처는 상기 키보드 및 상기 키보드 애플리케이션에 의해 표시된 관련 텍스트 입력 필드 상에 또는 근처에 그려진 형상인 방법.
  14. 제10항에 있어서,
    상기 수신된 제스처와 관련된 기능을 수행하라고 상기 키보드 애플리케이션에 명령하는 단계는 상기 키보드 애플리케이션의 동작의 모드를 변경하는 액션을 수행하라고 상기 키보드 애플리케이션에 명령하는 단계를 포함하는 방법.
  15. 제10항에 있어서,
    상기 수신된 제스처와 관련된 기능을 수행하라고 상기 키보드 애플리케이션에 명령하는 단계는 상기 키보드 애플리케이션에 의해 표시된 상기 키보드의 하나 이상의 키를 변경하는 액션을 수행하라고 상기 키보드 애플리케이션에 명령하는 단계를 포함하는 방법.
  16. 제10항에 있어서,
    상기 수신된 제스처와 관련된 기능을 수행하라고 상기 키보드 애플리케이션에 명령하는 단계는 상기 이동 장치의 사용자에 의해 상기 키보드 애플리케이션에 의해 표시된 상기 키보드 내에 입력된 텍스트를 수정하는 액션을 수행하라고 상기 키보드 애플리케이션에 명령하는 단계를 포함하는 방법.
  17. 이동 장치에 의해 수행될 때 상기 이동 장치로 하여금 상기 이동 장치의 키보드 애플리케이션에 명령하기 위한 방법을 수행하게 하는 콘텐츠를 갖는 컴퓨터 판독 가능 저장 매체로서,
    상기 방법은,
    상기 키보드 애플리케이션 내에서 액션들을 수행하기 위한 둘 이상의 명령과 관련된 제1 키가 상기 키보드 애플리케이션에 의해 표시된 키보드를 통해 상기 이동 장치의 사용자에 의해 접촉되었다는 지시를 수신하는 단계;
    상기 사용자에 의해 상기 제1 키로부터, 상기 키보드 애플리케이션에 의해 표시되고 상기 키보드 애플리케이션 내에서 액션을 수행하기 위한 둘 이상의 명령 중 하나의 명령과 관련된 제2 키까지 경로가 그려졌다는 지시를 수신하는 단계; 및
    상기 키보드 애플리케이션 내에서 상기 제2 키와 관련된 액션을 수행하는 단계
    를 포함하는 컴퓨터 판독 가능 저장 매체.
  18. 제17항에 있어서,
    상기 키보드 애플리케이션 내에서 상기 제2 키와 관련된 액션을 수행하는 단계는 상기 이동 장치에서 현재 실행중인 애플리케이션에 고유한 액션을 수행하는 단계를 포함하는 컴퓨터 판독 가능 저장 매체.
  19. 제17항에 있어서,
    상기 키보드 애플리케이션 내에서 상기 제2 키와 관련된 액션을 수행하는 단계는 상기 키보드 애플리케이션의 현재 모드를 상기 키보드 애플리케이션의 대안 모드로 변경하는 액션을 수행하는 단계를 포함하는 컴퓨터 판독 가능 저장 매체.
  20. 제17항에 있어서,
    상기 키보드 애플리케이션 내에서 상기 제2 키와 관련된 액션을 수행하는 단계는 상기 키보드 애플리케이션을 통해 상기 이동 장치의 상기 사용자에 의해 현재 편집중인 텍스트를 수정하는 액션을 수행하는 단계를 포함하는 컴퓨터 판독 가능 저장 매체.
KR1020137016019A 2010-11-20 2011-11-21 이동 장치의 키보드 애플리케이션과 같은 키보드 애플리케이션에 명령하기 위한 제스처들의 사용 KR20130116295A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US41582810P 2010-11-20 2010-11-20
US61/415,828 2010-11-20
PCT/US2011/061730 WO2012068584A2 (en) 2010-11-20 2011-11-21 Using gestures to command a keyboard application, such as a keyboard application of a mobile device

Publications (1)

Publication Number Publication Date
KR20130116295A true KR20130116295A (ko) 2013-10-23

Family

ID=46063894

Family Applications (3)

Application Number Title Priority Date Filing Date
KR1020137016058A KR20140001957A (ko) 2010-11-20 2011-11-18 입력된 텍스트를 이용하여 상황 정보에 액세스하여 이를 처리하기 위한 시스템들 및 방법들
KR1020137016053A KR20130143697A (ko) 2010-11-20 2011-11-18 상황 키보드를 이용한 컴퓨팅 장치 상에서의 액션 수행
KR1020137016019A KR20130116295A (ko) 2010-11-20 2011-11-21 이동 장치의 키보드 애플리케이션과 같은 키보드 애플리케이션에 명령하기 위한 제스처들의 사용

Family Applications Before (2)

Application Number Title Priority Date Filing Date
KR1020137016058A KR20140001957A (ko) 2010-11-20 2011-11-18 입력된 텍스트를 이용하여 상황 정보에 액세스하여 이를 처리하기 위한 시스템들 및 방법들
KR1020137016053A KR20130143697A (ko) 2010-11-20 2011-11-18 상황 키보드를 이용한 컴퓨팅 장치 상에서의 액션 수행

Country Status (5)

Country Link
US (3) US9189155B2 (ko)
EP (3) EP2641146A4 (ko)
KR (3) KR20140001957A (ko)
CN (3) CN103649876B (ko)
WO (3) WO2012068544A2 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170115577A (ko) * 2015-02-12 2017-10-17 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 입력 방식 편집기의 외부화된 실행

Families Citing this family (98)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012068544A2 (en) 2010-11-20 2012-05-24 Kushler Clifford A Performing actions on a computing device using a contextual keyboard
KR20130052745A (ko) * 2010-12-23 2013-05-23 한국전자통신연구원 제스처를 이용한 메뉴 제공 방법 및 이를 이용한 휴대 단말
US8572481B2 (en) * 2011-03-14 2013-10-29 Apple Inc. Device, method, and graphical user interface for displaying additional snippet content
US9094813B2 (en) 2011-04-02 2015-07-28 Open Invention Network, Llc System and method for redirecting content based on gestures
US10776103B2 (en) * 2011-12-19 2020-09-15 Majen Tech, LLC System, method, and computer program product for coordination among multiple devices
KR101932270B1 (ko) * 2012-01-04 2018-12-24 엘지전자 주식회사 이동 단말기 및 그 제어방법
US8902198B1 (en) 2012-01-27 2014-12-02 Amazon Technologies, Inc. Feature tracking for device input
WO2013130682A1 (en) * 2012-02-27 2013-09-06 5 Examples, Inc. Date entry system controllers for receiving user input line traces relative to user interfaces to determine ordered actions, and related systems and methods
US20130239049A1 (en) * 2012-03-06 2013-09-12 Apple Inc. Application for creating journals
US8667414B2 (en) * 2012-03-23 2014-03-04 Google Inc. Gestural input at a virtual keyboard
US9857889B2 (en) * 2012-06-29 2018-01-02 Samsung Electronic Co., Ltd Method and device for handling event invocation using a stylus pen
WO2014008670A1 (zh) * 2012-07-13 2014-01-16 华为技术有限公司 确定操作对象的方法和终端
KR20140014510A (ko) * 2012-07-24 2014-02-06 삼성전자주식회사 음성 인식에 의하여 형성된 문자의 편집 방법 및 그 단말
US9495069B2 (en) * 2012-08-31 2016-11-15 Paypal, Inc. Expanded icon functionality
US9021380B2 (en) 2012-10-05 2015-04-28 Google Inc. Incremental multi-touch gesture recognition
US8782549B2 (en) 2012-10-05 2014-07-15 Google Inc. Incremental feature-based gesture-keyboard decoding
US9557818B2 (en) 2012-10-16 2017-01-31 Google Inc. Contextually-specific automatic separators
US8701032B1 (en) 2012-10-16 2014-04-15 Google Inc. Incremental multi-word recognition
US8977961B2 (en) * 2012-10-16 2015-03-10 Cellco Partnership Gesture based context-sensitive functionality
US8843845B2 (en) 2012-10-16 2014-09-23 Google Inc. Multi-gesture text input prediction
US8850350B2 (en) 2012-10-16 2014-09-30 Google Inc. Partial gesture text entry
US8819574B2 (en) 2012-10-22 2014-08-26 Google Inc. Space prediction for text input
CN103092511B (zh) * 2012-12-28 2016-04-20 北京百度网讯科技有限公司 移动终端的输入方法、装置和移动终端
US8832589B2 (en) 2013-01-15 2014-09-09 Google Inc. Touch keyboard using language and spatial models
US20140208274A1 (en) * 2013-01-18 2014-07-24 Microsoft Corporation Controlling a computing-based device using hand gestures
US10976922B2 (en) * 2013-02-17 2021-04-13 Benjamin Firooz Ghassabian Data entry systems
US10649619B2 (en) * 2013-02-21 2020-05-12 Oath Inc. System and method of using context in selecting a response to user device interaction
US9799005B2 (en) * 2013-03-07 2017-10-24 Samsung Electronics Co., Ltd. Computing system with contextual interaction mechanism and method of operation thereof
US9477645B2 (en) * 2013-03-13 2016-10-25 Sap Se Systems and methods of active text markup
US8887103B1 (en) 2013-04-22 2014-11-11 Google Inc. Dynamically-positioned character string suggestions for gesture typing
US9081500B2 (en) 2013-05-03 2015-07-14 Google Inc. Alternative hypothesis error correction for gesture typing
US20140365878A1 (en) * 2013-06-10 2014-12-11 Microsoft Corporation Shape writing ink trace prediction
CN103390060A (zh) * 2013-07-30 2013-11-13 百度在线网络技术（北京）有限公司 基于移动终端的歌曲推荐方法与装置
US9277354B2 (en) 2013-10-30 2016-03-01 Sprint Communications Company L.P. Systems, methods, and software for receiving commands within a mobile communications application
US10209955B2 (en) 2013-11-15 2019-02-19 Kopin Corporation Automatic speech recognition (ASR) feedback for head mounted displays (HMD)
US9904360B2 (en) 2013-11-15 2018-02-27 Kopin Corporation Head tracking based gesture control techniques for head mounted displays
US9383816B2 (en) * 2013-11-15 2016-07-05 Kopin Corporation Text selection using HMD head-tracker and voice-command
US9500867B2 (en) 2013-11-15 2016-11-22 Kopin Corporation Head-tracking based selection technique for head mounted displays (HMD)
KR102131826B1 (ko) * 2013-11-21 2020-07-09 엘지전자 주식회사 이동 단말기 및 이의 제어 방법
US20150153949A1 (en) * 2013-12-03 2015-06-04 Google Inc. Task selections associated with text inputs
US10983805B2 (en) * 2014-02-21 2021-04-20 Nod, Inc. Contextual keyboard located on a remote server for implementation on any content delivery and interaction application
US9330666B2 (en) * 2014-03-21 2016-05-03 Google Technology Holdings LLC Gesture-based messaging method, system, and device
CN104200170B (zh) * 2014-04-15 2018-06-19 中兴通讯股份有限公司 一种电子设备的隐私保护方法及电子设备
US9575560B2 (en) 2014-06-03 2017-02-21 Google Inc. Radar-based gesture-recognition through a wearable device
US9811164B2 (en) 2014-08-07 2017-11-07 Google Inc. Radar-based gesture sensing and data transmission
US9921660B2 (en) 2014-08-07 2018-03-20 Google Llc Radar-based gesture recognition
US10268321B2 (en) 2014-08-15 2019-04-23 Google Llc Interactive textiles within hard objects
US9588625B2 (en) 2014-08-15 2017-03-07 Google Inc. Interactive textiles
US11169988B2 (en) 2014-08-22 2021-11-09 Google Llc Radar recognition-aided search
US9778749B2 (en) 2014-08-22 2017-10-03 Google Inc. Occluded gesture recognition
US9940016B2 (en) 2014-09-13 2018-04-10 Microsoft Technology Licensing, Llc Disambiguation of keyboard input
US9600080B2 (en) 2014-10-02 2017-03-21 Google Inc. Non-line-of-sight radar-based gesture recognition
US10956032B2 (en) * 2014-10-29 2021-03-23 Microsoft Technology Licensing, Llc Keyboard utility for inputting data into a mobile application
CN104363322B (zh) * 2014-11-20 2017-10-17 广东欧珀移动通信有限公司 拨号方法及装置
US10459608B2 (en) * 2014-12-01 2019-10-29 Ebay Inc. Mobile optimized shopping comparison
CN104571915B (zh) * 2014-12-29 2018-11-27 科大讯飞股份有限公司 触屏终端中触摸键盘的控制方法和装置
CN104571585B (zh) * 2014-12-30 2017-07-28 北京奇虎科技有限公司 输入法光标操作方法和装置
US10016162B1 (en) 2015-03-23 2018-07-10 Google Llc In-ear health monitoring
US9983747B2 (en) 2015-03-26 2018-05-29 Google Llc Two-layer interactive textiles
US11068644B1 (en) * 2015-03-30 2021-07-20 Insurance Services Office, Inc. System and method for creating customized insurance-related forms using computing devices
CN104731554B (zh) * 2015-03-30 2018-08-07 北京奇艺世纪科技有限公司 一种评论信息发布方法及装置
KR102011992B1 (ko) 2015-04-30 2019-08-19 구글 엘엘씨 타입-애그노스틱 rf 신호 표현들
JP6427279B2 (ja) 2015-04-30 2018-11-21 グーグル エルエルシー ジェスチャの追跡および認識のための、ｒｆに基づいた微細動作追跡
CN107430443B (zh) 2015-04-30 2020-07-10 谷歌有限责任公司 基于宽场雷达的手势识别
US9693592B2 (en) 2015-05-27 2017-07-04 Google Inc. Attaching electronic components to interactive textiles
US10088908B1 (en) 2015-05-27 2018-10-02 Google Llc Gesture detection and interactions
CN104935812B (zh) * 2015-05-29 2017-11-03 广东欧珀移动通信有限公司 一种控制自拍模式开启的方法及装置
CN104850770A (zh) * 2015-06-05 2015-08-19 深圳市智诺微智能电子科技有限公司 一种手势密码输入虚拟键盘及应用方法
US10082931B2 (en) * 2015-06-12 2018-09-25 Microsoft Technology Licensing, Llc Transitioning command user interface between toolbar user interface and full menu user interface based on use context
KR20170017572A (ko) * 2015-08-07 2017-02-15 삼성전자주식회사 사용자 단말 장치 및 이의 제어 방법
US10817065B1 (en) 2015-10-06 2020-10-27 Google Llc Gesture recognition using multiple antenna
EP3371855A1 (en) 2015-11-04 2018-09-12 Google LLC Connectors for connecting electronics embedded in garments to external devices
US10489768B2 (en) * 2015-12-30 2019-11-26 Visa International Service Association Keyboard application with third party engagement selectable items
US10260830B2 (en) 2016-02-11 2019-04-16 John Hafen Smart-gun systems and methods
US10222957B2 (en) 2016-04-20 2019-03-05 Google Llc Keyboard with a suggested search query region
US9965530B2 (en) 2016-04-20 2018-05-08 Google Llc Graphical keyboard with integrated search features
US10305828B2 (en) 2016-04-20 2019-05-28 Google Llc Search query predictions by a keyboard
US10140017B2 (en) 2016-04-20 2018-11-27 Google Llc Graphical keyboard application with integrated search
US10078673B2 (en) 2016-04-20 2018-09-18 Google Llc Determining graphical elements associated with text
US10492302B2 (en) 2016-05-03 2019-11-26 Google Llc Connecting an electronic component to an interactive textile
US10175781B2 (en) 2016-05-16 2019-01-08 Google Llc Interactive object with multiple electronics modules
US10831763B2 (en) * 2016-06-10 2020-11-10 Apple Inc. System and method of generating a key list from multiple search domains
US10769182B2 (en) 2016-06-10 2020-09-08 Apple Inc. System and method of highlighting terms
US10409488B2 (en) 2016-06-13 2019-09-10 Microsoft Technology Licensing, Llc Intelligent virtual keyboards
US20170357521A1 (en) * 2016-06-13 2017-12-14 Microsoft Technology Licensing, Llc Virtual keyboard with intent-based, dynamically generated task icons
US10664157B2 (en) * 2016-08-03 2020-05-26 Google Llc Image search query predictions by a keyboard
US10409487B2 (en) * 2016-08-23 2019-09-10 Microsoft Technology Licensing, Llc Application processing based on gesture input
KR101915789B1 (ko) * 2016-10-18 2018-11-06 주식회사 한컴세이프티 가상키보드를 통해 손쉬운 문자 입력을 지원하는 터치스크린 전자 장치 및 그 동작 방법
CN107015637B (zh) * 2016-10-27 2020-05-05 阿里巴巴集团控股有限公司 虚拟现实场景下的输入方法和装置
US10884610B2 (en) 2016-11-04 2021-01-05 Myscript System and method for recognizing handwritten stroke input
US10579150B2 (en) 2016-12-05 2020-03-03 Google Llc Concurrent detection of absolute distance and relative movement for sensing action gestures
US11199965B2 (en) * 2016-12-29 2021-12-14 Verizon Patent And Licensing Inc. Virtual keyboard
US9924313B1 (en) 2017-02-23 2018-03-20 International Business Machines Corporation Location based generation of pertinent information
CN108415679B (zh) * 2018-03-08 2021-02-26 广东美的制冷设备有限公司 设备及其触摸控制方法
US10928996B2 (en) * 2018-12-28 2021-02-23 Brandon Ly Baunach Systems, devices and methods for electronic determination and communication of location information
US11544994B2 (en) 2020-03-27 2023-01-03 Aristocrat Technologies, Inc. Beacon to patron communications for electronic gaming devices
US20210338864A1 (en) * 2020-04-30 2021-11-04 Aristocrat Technologies, Inc. Ultraviolet disinfection and sanitizing systems and methods for electronic gaming devices and other gaming equipment
CN112379820B (zh) * 2020-11-24 2022-08-05 惠州Tcl移动通信有限公司 全键盘按键的输入检测方法、设备和计算机可读存储介质

Family Cites Families (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US1027938A (en) 1909-11-02 1912-05-28 Westinghouse Air Brake Co Fluid-pressure brake.
US5502803A (en) 1993-01-18 1996-03-26 Sharp Kabushiki Kaisha Information processing apparatus having a gesture editing function
JP3416268B2 (ja) 1994-06-30 2003-06-16 キヤノン株式会社 画像認識装置及びその方法
US6999955B1 (en) * 1999-04-20 2006-02-14 Microsoft Corporation Systems and methods for estimating and integrating measures of human cognitive load into the behavior of computational applications and services
US7762453B2 (en) * 1999-05-25 2010-07-27 Silverbrook Research Pty Ltd Method of providing information via a printed substrate with every interaction
US20030023952A1 (en) 2001-02-14 2003-01-30 Harmon Charles Reid Multi-task recorder
US6792408B2 (en) * 2001-06-12 2004-09-14 Dell Products L.P. Interactive command recognition enhancement system and method
US7251367B2 (en) * 2002-12-20 2007-07-31 International Business Machines Corporation System and method for recognizing word patterns based on a virtual keyboard layout
US7098896B2 (en) * 2003-01-16 2006-08-29 Forword Input Inc. System and method for continuous stroke word-based text input
US7453439B1 (en) 2003-01-16 2008-11-18 Forward Input Inc. System and method for continuous stroke word-based text input
US7382358B2 (en) 2003-01-16 2008-06-03 Forword Input, Inc. System and method for continuous stroke word-based text input
US7480619B1 (en) * 2003-03-04 2009-01-20 The Board Of Trustees Of The Leland Stanford Junior University Integration manager and natural interaction processor
US7401072B2 (en) 2003-06-10 2008-07-15 Google Inc. Named URL entry
US7250938B2 (en) * 2004-01-06 2007-07-31 Lenovo (Singapore) Pte. Ltd. System and method for improved user input on personal computing devices
US7890396B2 (en) * 2005-06-07 2011-02-15 Cfph, Llc Enhanced system and method for managing financial market information
US20060024126A1 (en) 2004-07-31 2006-02-02 Johansson Kenneth L Page lifting spring
US20060242126A1 (en) * 2005-03-25 2006-10-26 Andrew Fitzhugh System and method for a context-sensitive extensible plug-in architecture
US7487461B2 (en) * 2005-05-04 2009-02-03 International Business Machines Corporation System and method for issuing commands based on pen motions on a graphical keyboard
US7542029B2 (en) 2005-09-20 2009-06-02 Cliff Kushler System and method for a user interface for text editing and menu selection
US20160344581A9 (en) * 2005-09-21 2016-11-24 Amit Karmarkar Text message including a contextual attribute of a mobile device
US8726195B2 (en) * 2006-09-05 2014-05-13 Aol Inc. Enabling an IM user to navigate a virtual world
CN101529874A (zh) * 2006-09-06 2009-09-09 苹果公司 用于具有触摸屏显示器的便携式多功能设备的电话呼入管理
US8564544B2 (en) * 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US20080126075A1 (en) * 2006-11-27 2008-05-29 Sony Ericsson Mobile Communications Ab Input prediction
US8059101B2 (en) * 2007-06-22 2011-11-15 Apple Inc. Swipe gestures for touch screen keyboards
US8626823B2 (en) 2007-11-13 2014-01-07 Google Inc. Page ranking system employing user sharing data
US8479118B2 (en) * 2007-12-10 2013-07-02 Microsoft Corporation Switching search providers within a browser search box
US8504946B2 (en) * 2008-06-27 2013-08-06 Apple Inc. Portable device, method, and graphical user interface for automatically scrolling to display the top of an electronic document
US8319742B2 (en) * 2008-08-26 2012-11-27 Research In Motion Limited Portable electronic device and method of controlling same
US8769427B2 (en) * 2008-09-19 2014-07-01 Google Inc. Quick gesture input
US20100185949A1 (en) * 2008-12-09 2010-07-22 Denny Jaeger Method for using gesture objects for computer control
US8584050B2 (en) * 2009-03-16 2013-11-12 Apple Inc. Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
US8294680B2 (en) * 2009-03-27 2012-10-23 Sony Mobile Communications Ab System and method for touch-based text entry
CN101546233A (zh) * 2009-05-05 2009-09-30 上海华勤通讯技术有限公司 触摸屏界面手势识别操作方法
US8762893B2 (en) * 2010-05-14 2014-06-24 Google Inc. Automatic derivation of analogous touch gestures from a user-defined gesture
US20110314427A1 (en) 2010-06-18 2011-12-22 Samsung Electronics Co., Ltd. Personalization using custom gestures
WO2012068544A2 (en) 2010-11-20 2012-05-24 Kushler Clifford A Performing actions on a computing device using a contextual keyboard

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170115577A (ko) * 2015-02-12 2017-10-17 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 입력 방식 편집기의 외부화된 실행

Also Published As

Publication number Publication date
CN103827779A (zh) 2014-05-28
KR20130143697A (ko) 2013-12-31
WO2012068544A3 (en) 2012-09-20
EP2641146A4 (en) 2017-05-03
US20120127080A1 (en) 2012-05-24
KR20140001957A (ko) 2014-01-07
EP2641147A4 (en) 2017-05-03
EP2641145A4 (en) 2017-05-03
US9244610B2 (en) 2016-01-26
EP2641146A2 (en) 2013-09-25
CN103827779B (zh) 2017-06-20
CN103649876B (zh) 2017-02-15
WO2012068550A2 (en) 2012-05-24
US20120127082A1 (en) 2012-05-24
WO2012068584A3 (en) 2012-10-11
US20120127083A1 (en) 2012-05-24
CN103314343A (zh) 2013-09-18
CN103314343B (zh) 2017-02-15
EP2641145A2 (en) 2013-09-25
EP2641147A2 (en) 2013-09-25
WO2012068544A2 (en) 2012-05-24
WO2012068584A2 (en) 2012-05-24
CN103649876A (zh) 2014-03-19
US9244611B2 (en) 2016-01-26
WO2012068550A3 (en) 2012-10-04
US9189155B2 (en) 2015-11-17

Similar Documents

Publication Publication Date Title
US9189155B2 (en) Systems and methods for using entered text to access and process contextual information
US8819597B2 (en) Glyph entry on computing device
US9104312B2 (en) Multimodal text input system, such as for use with touch screens on mobile phones
US9026428B2 (en) Text/character input system, such as for use with touch screens on mobile phones
TWI653545B (zh) 用於即時手寫辨識之方法、系統及非暫時性電腦可讀媒體
TWI541717B (zh) 管理即時手寫辨識
US9740400B2 (en) Electronic device and method for character deletion
US20140198048A1 (en) Reducing error rates for touch based keyboards
US10416868B2 (en) Method and system for character insertion in a character string
JP2019514097A (ja) 文字列に文字を挿入するための方法および対応するデジタルデバイス
EP3241105B1 (en) Suggestion selection during continuous gesture input
JP6409165B2 (ja) 電子機器、及び、手書き文字入力プログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application