KR101116221B1 - 터치 궤적 기반의 멀티 터치 제스처 인식 시스템 및 그 방법 - Google Patents
터치 궤적 기반의 멀티 터치 제스처 인식 시스템 및 그 방법 Download PDFInfo
- Publication number
- KR101116221B1 KR101116221B1 KR1020100038820A KR20100038820A KR101116221B1 KR 101116221 B1 KR101116221 B1 KR 101116221B1 KR 1020100038820 A KR1020100038820 A KR 1020100038820A KR 20100038820 A KR20100038820 A KR 20100038820A KR 101116221 B1 KR101116221 B1 KR 101116221B1
- Authority
- KR
- South Korea
- Prior art keywords
- gesture
- touch
- game
- shapes
- monitor
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0416—Control or interface arrangements specially adapted for digitisers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
- G06F2203/04104—Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
본 발명에 의한 터치 궤적 기반의 멀티 터치 제스처 인식 방법은, (a) 멀티 터치 제스처 인식 프로그램을 설치 및 구동하는 단계와; (b) 상기 멀티 터치 제스처 인식 프로그램이 구동되면 모니터에 게임 화면을 출력한 후 게임 방법을 선택받는 단계와; (c) 상기 게임 방법이 결정되면 게임을 시작하여 상기 모니터의 화면에 두 개의 제스처 모양을 동시에 순차적으로 또는 연속적으로 출력하는 단계와; (d) 상기 화면에 제스처 모양이 출력된 후 복수 개의 터치 패널을 통해 한 사람당 두 개의 제스처 모양(신호)을 동시에 입력받는 단계와; (e) 상기 터치 패널을 통해 입력된 제스처 신호의 궤적을 각각 탐색하여 제스처 모양을 인식한 후 상기 화면에 출력된 제스처 모양과의 일치 및 유사 여부를 판단하는 단계; 및 (f) 상기 터치 패널을 통해 입력된 제스처 모양과 상기 화면에 출력된 제스처 모양이 일치하거나 유사하면 점수를 부여하는 단계;를 포함하고 있다.
Description
(a) 멀티 터치 제스처 인식 프로그램을 설치 및 구동하는 단계와;
(b) 상기 멀티 터치 제스처 인식 프로그램이 구동되면 모니터에 게임 화면을 출력한 후 게임 방법을 선택받는 단계와;
(c) 상기 게임 방법이 결정되면 게임을 시작하여 상기 모니터의 화면에 두 개의 제스처 모양을 동시에 순차적으로 또는 연속적으로 출력하는 단계와;
(d) 상기 화면에 제스처 모양이 출력된 후 복수 개의 터치 패널을 통해 한 사람당 두 개의 제스처 모양(신호)을 동시에 입력받는 단계와;
(e) 상기 터치 패널을 통해 입력된 제스처 신호의 궤적을 각각 탐색하여 제스처 모양을 인식한 후 상기 화면에 출력된 제스처 모양과의 일치 및 유사 여부를 판단하는 단계; 및
(f) 상기 터치 패널을 통해 입력된 제스처 모양과 상기 화면에 출력된 제스처 모양이 일치하거나 유사하면 점수를 부여하는 단계;
를 포함하되,
상기 (a) 단계에서 상기 멀티 터치 제스처 인식 프로그램은 상기 터치 패널을 통해 제스처 모양의 신호가 입력된 후 터치가 끊어진 상태에서 다른 제스처 모양의 신호가 곧바로 입력되면 처음에 입력된 제스처 모양의 신호로 동작을 구분하고,
상기 터치 패널을 통해 입력되는 제스처 모양이 도중에 끊어지지 않고 다른 제스처 모양으로 변화되었을 때 마지막에 입력된 제스처 모양의 신호로 동작을 구분하고,
상기 (c) 단계에서 상기 화면을 통해 출력되는 제스처 모양은 오른쪽 방향 가로선, 왼쪽 방향 가로선, 위쪽 방향 세로선, 아래쪽 방향 세로선, 시계 방향 원, 반시계 방향 원을 포함한 제스처 모양 중 한 개 또는 두 개의 제스처 모양을 포함하고,
상기 (e) 단계에서 상기 터치 패널을 통해 입력된 제스처 모양의 인식은 상기 터치 패널을 통해 입력된 제스처 모양의 궤적을 탐색하여 각 동작을 이루는데 필요한 최소한의 조건(길이, 가로 및 세로의 변화율, 궤적의 평균 중심으로부터 회전된 각도)을 충족하는지 판단하고, 조건이 충족되면 각 동작의 정확도를 측정하여 가장 정확도가 높은 동작을 상기 입력된 제스처 모양의 동작으로 인식하는 것을 특징으로 하는 터치 궤적 기반의 멀티 터치 제스처 인식 방법.」을 과제 해결 수단으로 한다.
멀티 터치 제스처 인식 프로그램을 저장한 메모리와;
상기 멀티 터치 제스처 인식 프로그램의 구동에 의해 게임이 시작되면 두 개의 제스처 모양을 동시에 순차적으로 또는 연속적으로 출력하는 모니터와;
상기 모니터에 제스처 모양이 출력된 후 게임 참가자로부터 두 개의 제스처 신호를 입력받는 복수 개의 터치 패널; 및
상기 멀티 터치 제스처 인식 프로그램을 구동하여 상기 모니터에 두 개의 제스처 모양을 동시에 순차적으로 또는 연속적으로 출력하고, 상기 복수 개의 터치 패널을 통해 입력된 제스처 신호(모양)를 각각 인식하여 상기 모니터에 출력된 제스처 모양과의 일치 및 유사 여부를 판단하여 상기 모니터에 점수로 표시하는 제어부;
를 포함하되,
상기 모니터를 통해 각기 다른 또는 같은 두 개의 제스처 모양을 동시에 순차적으로 또는 연속적으로 출력하여, 한 사람당 한 개 또는 두 개의 터치 패널을 통해 두 개의 제스처 모양을 동시에 입력받아 제스처 모양을 맞추는 게임을 하며, 단독 게임 또는 1:1, 1:n, n:n, n:m 대결 형태의 게임 중 하나를 선택받아 진행하는 것을 특징으로 하는 터치 궤적 기반의 멀티 터치 제스처 인식 시스템.」을 다른 과제 해결 수단으로 한다.
도 2는 터치 제스처의 동작 예를 나타낸 예시도
도 3은 끊어지지 않고 연속으로 입력된 제스처 변화를 구분하는 방법을 설명하기 위한 설명도
도 4는 본 발명의 바람직한 실시 예에 의한 터치 궤적 기반의 멀티 터치 제스처 인식 방법을 나타낸 흐름도
도 5는 도 4에서 입력된 제스처 모양(신호)을 인식하고 화면에 출력된 제스처 모양과의 일치 및 유사 여부를 판단하는 방법을 나타낸 흐름도
도 6a 내지 도 6c는 입력된 제스처 모양의 궤적을 탐색하여 각 동작을 이루는데 필요한 최소한의 조건을 충족시키는지를 검사하는 방법에 대한 설명도
도 7a 내지 도 7c는 각 동작의 정확도를 측정하여 입력된 제스처 모양의 동작을 인식하는 방법에 대한 설명도
도 8은 멀티 터치 제스처 인식 게임의 예를 보인 화면
도 9는 멀티 터치 제스처 인식 게임의 제 1 방법을 나타낸 예시도
도 10은 멀티 터치 제스처 인식 게임의 제 2 방법을 나타낸 예시도
도 11은 멀티 터치 제스처 인식 게임의 제 3 방법을 나타낸 예시도
130 : 스피커 140 : 메모리
150 : 멀티 터치 제스처 인식 프로그램 160 : 제어부
Claims (9)
- 터치 궤적 기반의 멀티 터치 제스처 인식 방법에 있어서,
(a) 멀티 터치 제스처 인식 프로그램을 설치 및 구동하는 단계와;
(b) 상기 멀티 터치 제스처 인식 프로그램이 구동되면 모니터에 게임 화면을 출력한 후 게임 방법을 선택받는 단계와;
(c) 상기 게임 방법이 결정되면 게임을 시작하여 상기 모니터의 화면에 두 개의 제스처 모양을 동시에 순차적으로 또는 연속적으로 출력하는 단계와;
(d) 상기 화면에 제스처 모양이 출력된 후 복수 개의 터치 패널을 통해 한 사람당 두 개의 제스처 모양(신호)을 동시에 입력받는 단계와;
(e) 상기 터치 패널을 통해 입력된 제스처 신호의 궤적을 각각 탐색하여 제스처 모양을 인식한 후 상기 화면에 출력된 제스처 모양과의 일치 및 유사 여부를 판단하는 단계; 및
(f) 상기 터치 패널을 통해 입력된 제스처 모양과 상기 화면에 출력된 제스처 모양이 일치하거나 유사하면 점수를 부여하는 단계;
를 포함하되,
상기 (a) 단계에서 상기 멀티 터치 제스처 인식 프로그램은 상기 터치 패널을 통해 제스처 모양의 신호가 입력된 후 터치가 끊어진 상태에서 다른 제스처 모양의 신호가 곧바로 입력되면 처음에 입력된 제스처 모양의 신호로 동작을 구분하고,
상기 터치 패널을 통해 입력되는 제스처 모양이 도중에 끊어지지 않고 다른 제스처 모양으로 변화되었을 때 마지막에 입력된 제스처 모양의 신호로 동작을 구분하고,
상기 (c) 단계에서 상기 화면을 통해 출력되는 제스처 모양은 오른쪽 방향 가로선, 왼쪽 방향 가로선, 위쪽 방향 세로선, 아래쪽 방향 세로선, 시계 방향 원, 반시계 방향 원을 포함한 제스처 모양 중 한 개 또는 두 개의 제스처 모양을 포함하며,
상기 (e) 단계에서 상기 터치 패널을 통해 입력된 제스처 모양의 인식은 상기 터치 패널을 통해 입력된 제스처 모양의 궤적을 탐색하여 각 동작을 이루는데 필요한 최소한의 조건(길이, 가로 및 세로의 변화율, 궤적의 평균 중심으로부터 회전된 각도)을 충족하는지 판단하고, 조건이 충족되면 각 동작의 정확도를 측정하여 가장 정확도가 높은 동작을 상기 입력된 제스처 모양의 동작으로 인식하는 것을 특징으로 하는 터치 궤적 기반의 멀티 터치 제스처 인식 방법.
- 삭제
- 삭제
- 삭제
- 제 1 항에 있어서, 상기 각 동작의 정확도를 측정하는 방법은,
상기 터치 패널을 통해 입력된 제스처 모양의 궤적에 따라 가로 변화율, 세로 변화율, 궤적의 평균 중심에서 궤적의 각 지점까지의 거리(반지름) 차이에 대한 오류를 측정하여 정확도를 측정하는 것을 특징으로 하는 터치 궤적 기반의 멀티 터치 제스처 인식 방법.
- 제 1 항에 있어서, 상기 멀티 터치 제스처 인식 프로그램은,
상기 화면을 통해 각기 다른 또는 같은 두 개의 제스처 모양을 동시에 순차적으로 또는 연속적으로 출력하여, 한 사람당 한 개 또는 두 개의 터치 패널을 통해 두 개의 제스처 모양을 동시에 입력받아 제스처 모양을 맞추는 게임을 하며, 단독 게임 또는 1:1, 1:n, n:n, n:m 대결 형태의 게임 중 하나를 선택받아 진행하는 것을 특징으로 하는 터치 궤적 기반의 멀티 터치 제스처 인식 방법.
- 터치 궤적 기반의 멀티 터치 제스처 인식 시스템에 있어서,
멀티 터치 제스처 인식 프로그램을 저장한 메모리와;
상기 멀티 터치 제스처 인식 프로그램의 구동에 의해 게임이 시작되면 두 개의 제스처 모양을 동시에 순차적으로 또는 연속적으로 출력하는 모니터와;
상기 모니터에 제스처 모양이 출력된 후 게임 참가자로부터 두 개의 제스처 신호를 입력받는 복수 개의 터치 패널; 및
상기 멀티 터치 제스처 인식 프로그램을 구동하여 상기 모니터에 두 개의 제스처 모양을 동시에 순차적으로 또는 연속적으로 출력하고, 상기 복수 개의 터치 패널을 통해 입력된 제스처 신호(모양)를 각각 인식하여 상기 모니터에 출력된 제스처 모양과의 일치 및 유사 여부를 판단하여 상기 모니터에 점수로 표시하는 제어부;
를 포함하되,
상기 모니터를 통해 각기 다른 또는 같은 두 개의 제스처 모양을 동시에 순차적으로 또는 연속적으로 출력하여, 한 사람당 한 개 또는 두 개의 터치 패널을 통해 두 개의 제스처 모양을 동시에 입력받아 제스처 모양을 맞추는 게임을 하며, 단독 게임 또는 1:1, 1:n, n:n, n:m 대결 형태의 게임 중 하나를 선택받아 진행하는 것을 특징으로 하는 터치 궤적 기반의 멀티 터치 제스처 인식 시스템.
- 제 7 항에 있어서, 상기 제어부는,
상기 모니터에 출력되는 제스처 모양을 스피커를 통해 음성으로 출력하거나 또는 상기 터치 패널을 통해 입력된 제스처 신호가 상기 모니터에 출력된 제스처 모양과 일치 또는 유사할 때 상기 스피커를 통해 음성 또는 음악소리를 출력하도록 제어하는 것을 특징으로 하는 터치 궤적 기반의 멀티 터치 제스처 인식 시스템. - 삭제
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020100038820A KR101116221B1 (ko) | 2010-04-27 | 2010-04-27 | 터치 궤적 기반의 멀티 터치 제스처 인식 시스템 및 그 방법 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020100038820A KR101116221B1 (ko) | 2010-04-27 | 2010-04-27 | 터치 궤적 기반의 멀티 터치 제스처 인식 시스템 및 그 방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20110119227A KR20110119227A (ko) | 2011-11-02 |
KR101116221B1 true KR101116221B1 (ko) | 2012-03-06 |
Family
ID=45390853
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020100038820A KR101116221B1 (ko) | 2010-04-27 | 2010-04-27 | 터치 궤적 기반의 멀티 터치 제스처 인식 시스템 및 그 방법 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101116221B1 (ko) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104677376B (zh) * | 2013-11-29 | 2017-09-12 | 广东瑞图万方科技股份有限公司 | 导航***手势指令输入方法及装置 |
JP6921192B2 (ja) * | 2017-05-22 | 2021-08-18 | 任天堂株式会社 | ゲームプログラム、情報処理装置、情報処理システム、および、ゲーム処理方法 |
JP6921193B2 (ja) | 2017-05-22 | 2021-08-18 | 任天堂株式会社 | ゲームプログラム、情報処理装置、情報処理システム、および、ゲーム処理方法 |
CN110662587B (zh) | 2017-05-22 | 2024-01-23 | 任天堂株式会社 | 游戏程序、信息处理装置、信息处理***以及游戏处理方法 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005049387A (ja) * | 2003-07-29 | 2005-02-24 | Taito Corp | 文字学習機能を有する遊技機 |
-
2010
- 2010-04-27 KR KR1020100038820A patent/KR101116221B1/ko active IP Right Grant
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005049387A (ja) * | 2003-07-29 | 2005-02-24 | Taito Corp | 文字学習機能を有する遊技機 |
Non-Patent Citations (1)
Title |
---|
⑤ 두 손으로 각각 다른 도형 그리기, 5분 뇌호흡, 29쪽, 이승헌(2006.2.22.)* |
Also Published As
Publication number | Publication date |
---|---|
KR20110119227A (ko) | 2011-11-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6683938B2 (ja) | 採点支援プログラム、採点支援装置および採点支援方法 | |
KR101116221B1 (ko) | 터치 궤적 기반의 멀티 터치 제스처 인식 시스템 및 그 방법 | |
Markussen et al. | Selection-based mid-air text entry on large displays | |
US20090312102A1 (en) | Strum processing for music video game on handheld device | |
WO2015041168A1 (ja) | ゲーム制御プログラム、ゲームシステム、およびゲーム制御方法 | |
JP2006221281A (ja) | ガイド表示を制御するためのプログラムおよび情報処理装置 | |
KR20180121844A (ko) | 음악 게임 장치 및 이를 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체 | |
Carvalho et al. | Audio-based puzzle gaming for blind people | |
Kamal et al. | Teaching motion gestures via recognizer feedback | |
JP2014012138A (ja) | 音楽ゲームを進める方法、装置およびプログラム | |
Dearman et al. | Multi-modal text entry and selection on a mobile device. | |
Carreira et al. | Evaluation of in-air hand gestures interaction for older people | |
JP4816435B2 (ja) | 文字入力処理方法 | |
CN104635948B (zh) | 一种输入方法与装置 | |
KR102402055B1 (ko) | 뇌기능 향상용 훈련 시스템 | |
JP3179626B2 (ja) | 音声ゲーム機 | |
JP2016062081A (ja) | 音楽教習装置 | |
Morimoto et al. | Eyejam: a gaze-controlled musical interface | |
TWI802395B (zh) | 認知訓練系統 | |
JP2021040823A (ja) | ゲームシステム、ゲームプログラム及びゲームシステムの制御方法 | |
JP7316319B2 (ja) | ゲームシステム、プログラム及び情報記憶媒体 | |
CN216092192U (zh) | 游戏装置 | |
JP5009349B2 (ja) | 手書き学習支援プログラムおよび手書き学習支援装置 | |
JP2006284861A (ja) | 手書き学習支援プログラムおよび手書き学習支援装置 | |
JP6552065B2 (ja) | 演奏装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20141219 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20151222 Year of fee payment: 5 |
|
FPAY | Annual fee payment |
Payment date: 20170208 Year of fee payment: 6 |
|
FPAY | Annual fee payment |
Payment date: 20180201 Year of fee payment: 7 |
|
FPAY | Annual fee payment |
Payment date: 20190201 Year of fee payment: 8 |
|
FPAY | Annual fee payment |
Payment date: 20200128 Year of fee payment: 9 |