KR20090093766A - 모바일 가상 기타의 지판 표시 장치 및 방법 - Google Patents

Abstract

본 발명은 모바일가상기타에 관한 것으로서, 휴대폰 등의 모바일기기에서 가상기타를 구현하는 방법 및 그 장치가 제시되어 있다.

휴대폰 등 모바일기기는 스크린이 너무 작아 기타의 긴 지판을 연주하기 불편하지 않도록 모두 표시하기란 사실상 불가능하였다.

이에 본 발명은 기타의 모든 지판을 모바일기기의 작은 스크린안에 모두 표시하되, 연주함에 전혀 어려움이 없게 하고자 한다.

아울러, 실제 기타의 연주테크닉을 그대로 사용할 수 있도록 하고자 한다.

모바일기기의 스크린은 멀티터치를 지원하는 터치스크린으로 하여 화면에 표시되는 지판을 손가락으로 직접 누르게 하고, 모바일기기 내에 동작인식센서를 부착하여 지판을 길이방향으로 움직임에 따라 스크린 상의 지판이 동기화되어 같은 방향 같은 속도로 이동되게 한다.

모바일기기 내에는 멀티터치를 지원하는 터치스크린과 동작인식센서가 구비되고,

상기 터치스크린에 기타의 지판을 표시하여 연주음을 손가락으로 누르게 하며, 상기 지판은 동작인식센서가 지판과 동일연장선상의 움직임이 감지되었을 때 움직이는 속도 및 거리만큼 같은 방향의 지판이 표시되도록 되어 있다.

본 발명을 이용하면, 스크린이 작은 휴대폰 등의 모바일기기에서, 부가되는 장비 없이, 기타의 지판을 자연스럽게 모두 표시할 수 있으며, 또한 실제 기타의 연주테크닉을 그대로 사용할 수 있게 해준다.

Description

모바일 가상 기타의 지판 표시 장치 및 방법 {device and method to display fingerboard of mobile virtual guitar}

본 발명은 모바일 가상 기타에 관한 것이며, 더 상세히는 휴대폰 등 모바일기기에 구비되어 있는 좁은 스크린에서 기타의 지판을 표시하는 장치 및 그 방법에 관한 것이다.

터치스크린, 동작인식기술

휴대폰 등 모바일기기는 스크린이 너무 작아 기타의 긴 지판을 연주하기 불편하지 않도록 모두 표시하기란 사실상 불가능하였다.

이에 본 발명은 기타의 모든 지판을 모바일기기의 작은 스크린안에 모두 표시하되, 연주함에 전혀 어려움이 없게 하고자 한다.

아울러, 실제 기타의 연주테크닉을 그대로 사용할 수 있도록 하고자 한다.

모바일기기의 스크린은 멀티터치를 지원하는 터치스크린으로 하여 화면에 표시되는 지판을 손가락으로 직접 누르게 하고, 모바일기기 내에 동작인식센서를 부착하여 지판을 길이방향으로 움직임에 따라 스크린 상의 지판이 동기화되어 같은 방향 같은 속도로 이동되게 한다.

모바일기기 내에는 멀티터치를 지원하는 터치스크린과 동작인식센서가 구비되고, 상기 터치스크린에 기타의 지판을 표시하여 연주음을 손가락으로 누르게 하며, 상기 지판은 동작인식센서가 지판과 동일연장선상의 움직임이 감지되었을 때 움직이는 속도 및 거리만큼 같은 방향의 지판이 표시되도록 되어 있다.

스크린이 작은 휴대폰 등의 모바일기기에서, 부가되는 장비 없이, 기타의 지판을 자연스럽게 모두 표시할 수 있으며, 또한 실제 기타의 연주테크닉을 그대로 사용할 수 있게 해준다.

도 1은 본 발명에 따른 지판표시장치를 좌우로 흔들어 지판을 이동하는 모습이다.

도 2는 지판을 누르고 있을 때에는 지판이 움직이지 않는 것을 보여준다.

도 3은 슬라이딩버튼을 눌러 지판을 누르고 있을 때에도 지판이 이동하는 것을 보여준다.

도 4는 본 발명의 구성도이다.

도 5는 본 발명의 지판이동 처리과정이다.

본 발명이 해결 과제를 풀기 위하여 제시하는 방법은 멀티터치를 지원하는 터치스크린과 동작인식센서이다.

이하에서부터는 편의상 오른손잡이의 경우로 설명하기로 한다.

일반적으로 왼손으로 지판을 잡고 오른손으로 기타의 현을 퉁기는 방법으로 기타를 연주하게 된다. 그런데, 기타를 퉁기는 방법이야 가상기타에서도 얼마든지 다양한 방법이 있을 것이나, 지판을 잡는 방법은 쉽지 않았는데 그것은 지판을 표시할 스크린이, 일반 PC에서는 너무 넓은데다가 기타코드를 잡으려면 멀티터치가 지원되는 터치스크린이어야 했으나 그러한 환경을 갖춘 PC는 거의 없었고, 모바일기기에서는 지판을 담기엔 너무 좁았기 때문이다.

터치스크린으로 정전용량 방식이 있는데 이는 멀티터치가 가능하다. 따라서 본 발명은 멀티터치를 지원하는 터치스크린을 사용하여 스크린에 기타의 지판을 표시하고 손가락으로 직접 누르도록 한다. 이는 실제 기타의 인터페이스와 거의 동일하다 할 수 있다.

그런데, 문제는 스크린의 크기가 너무 작아 기타의 긴 지판을 모두 표시할 수 없다는 데에 있다. 본 발명은 이를 해결하기 위하여 동작인식센서를 채택하였다. 이하, 도면과 함께 설명하기로 한다.

도 1은 본 발명에 따른 지판표시장치를 좌우로 흔들어 지판을 이동하는 모습이다.

터치스크린(2)이 지원되는 지판표시장치(1)를 지판의 길이방향으로 동일연장선상으로 움직이는 동작을 동작인식센서는 감지한다. 그래서, 만약 높은 프렛방향으로 움직임이 감지되었을 때에는 스크린의 표시를 움직인 만큼, 그리고 움직인 해당 속도로 지판을 높은 프렛방향으로 옮겨준다. 반대로 낮은 프렛방향으로 움직였을 때도 역시 마찬가지로 움직인 만큼 움직인 속도로 화면속의 지판을 낮은 프렛방향으로 옮겨주는 것이다.

도면에서 뿌옇게 보이는 지판(3)은 화면에는 아직 표시되지 않았지만 지판표시장치가 그 방향으로 움직였을 때 표시되어질 지판의 이미지이다. 이는 실제로 보이는 것이 아니라, 본 발명을 설명하기 위해 알기 쉽게 표시한 이미지이다.

현재 지판표시장치(1)가 도면의 (a)에서 보이는 위치에 있다고 하고, 낮은 프렛 방향으로부터 첫번째 지판위치마크(4)가 있는 프렛으로 지판을 옮기고자 하면, 거리상 해당 프렛이 있음직한 거리만큼 지판표시장치(1)를 낮은 프렛 방향으로 옮긴다. 그러면 동작인식센서가 이를 감지하여 제어부에 전달하면 제어부는 스크린 속의 지판을 해당 방향으로, 해당 속도로 (b)의 위치로 옮겨주는 것이다.

그런데 기타는 연주자가 흥에 겨워 이리저리 몸을 틀기도 하고 심지어는 이리저리 뛰어다니기도 한다. 그렇게 되면 동작인식센서가 이를 감지하여 연주자가 원하지 않는 지판으로 화면을 바꾸어 버리는 일이 발생한다. 이를 방지하기 위하여 본 발명은 연주자의 행동패턴을 구분하였다. 연주자가 지판을 옮기는 경우는 두 가지이다. 하나는 지판에서 손을 완전히 떼고 새로운 지판영역으로 옮겨 잡는 경우이고, 다른 하나는 특정 음을 누른 상태로 지판 위를 슬라이딩 시켜 슬러(slur) 효과를 내는 연주기법인 경우이다. 이 두 가지의 차이점은 하나는 지판에서 손이 떨어지고 다른 하나는 지판에서 손이 그대로 붙어 있다는 것이다. 그런데, 일반적으로 기타에서 슬러를 연주하는 경우보다 연주중에 몸을 이리저리 움직이는 경우가 훨씬 자주 발생한다. 본 발명은 손이 떨어진 상태에서는 동작인식센서가 지판의 길이방향으로 움직이는 동작을 감지하면 무조건 지판을 옮기고, 지판에서 손이 붙어있는 상태에서는 동작인식센서가 상기와 같은 동작을 감지해도 지판을 옮기지 않는다. 다만, 슬러주법을 구현하기 위해서는 지판을 잡은 채로도 지판이 옮겨져야 하므로 슬러버튼을 따로 두었다.

도 2는 지판을 누르고 있을 때에는 지판이 움직이지 않는 것을 보여준다.

도면의 (a) 그림에서 지판에 손가락을 대고 있는 상태로 좌측으로 움직였지만 (b) 그림에서 지판이 움직이지 않고 그대로인 것을 알 수 있다.

도 3은 슬라이딩버튼을 눌러 지판을 누르고 있을 때에도 지판이 이동하는 것을 보여준다.

도면에서 (a) 그림은 슬러버튼(5)을 누른 채의 그림이고 (b)는 (a)의 상태로 지판표시장치(1)를 좌측으로 움직였을 때의 효과를 보여주는 그림이다. (b)에서 보는 바와 같이 슬러버튼을 누른 채로 지판을 움직이는 동작이 감지되면 지판에 손이 붙어 있다고 하더라도 화면상의 지판을 옮겨 준다. 물론 그에 따라 출력되는 연주음도 당연히 바뀌어진다.

본 발명은 위에서 설명한 동작인식센서가 반드시 동작이 진행하는 방향과 그 속도의 변화를 감지할 필요는 없다. 일반적으로, 휴대폰에 내장되는 동작인식센서는 중력을 감지하는데 이에 따라 기기가 지구중심에 비해서 얼마나 기울어져 있는지를 쉽게 얻을 수 있다. 이런 센서에서 얻어지는 기울기정보를 이용하면, 오른쪽이 올라가면 숨겨져서 보이지 않는 오른쪽 지판이 더 나타나고, 왼쪽이 올라가면 숨겨져서 보이지 않는 왼쪽 지판이 더 나타나게 할 수가 있다. 이를 위해 기울임의 정도에 따라 이동하는 지판의 범위를 미리 정하면 되는데, 예를 들어 5% 기울임마다 2프렛씩 더 나타나도록 할 수 있다. 이밖에 또 다른 방법은, 기울진 정도에 따라 나타나는 지판의 화면상 이동속도를 다르게 하고, 손가락으로 어디라도 누르고 있는 상황에서는 기울어져 있어도 화면이동을 멈추면 된다. 예를 들어, 지판에서 손가락을 모두 뗀 상태에서 기기를 우측으로 약간 기울여 왼쪽이 올라가면 화면상의 지판들이 우측으로 느린 속도로 이동하여 왼쪽의 숨겨진 지판들이 나타나고, 좀 더 깊은 각도로 기울이면 좀 더 빠른 속도로 이동하고, 지판의 어느 곳이라도 눌리게 되면 이동을 멈추게 되는 것이다.

또한, 손가락이 모두 떨어진 상태에서 유효동작(충분히 지판이동이라고 간주할 만큼이라고 미리 정해 둔 수치 이상의 이동이 감지되는 동작)과 그의 방향이 감지되는 순간부터, 미리 정해진 속도로 유효동작과 같은 방향으로 지판을 이동시켜도 연주자가 스스로 익숙해져서 연주할 수 있다. 지판을 이동하고 싶을 때 이동하고자 하는 방향으로 살짝 움직여주면 정해진 속도로 지판이 움직이고 연주자는 원하는 프렛이 나올 때 그곳을 손가락으로 짚으면 화면이 멈추게 된다. 여기서 정해진 속도란 유효동작의 수치에 따라 등급을 나누어 여러 단계의 속도로 이동하도록 할 수도 있고, 처음엔 느리게 움직이다가 점점 빠르게 움직이도록 프로그램할 수도 있다.

다음은 이와 같은 기능을 하게 되는 본 발명의 구성에 대해서 설명하기로 한다.

도 4는 본 발명의 구성도이다.

먼저, 본 발명의 구성요소들을 정해진 프로그램에 따라 모두 제어하는 제어부(10);와,

제어부(10)에 로딩될 프로그램데이터를 담고 있는 프로그램데이터부(11);와,

제어부(10)가 프로그램 실행 중에 필요한 데이터를 임시 저장하고 참조하는 임시메모리부(12);와,

제어부(10)에 프로그램을 실행시키거나 중지시키거나 볼륨 등을 조절하는 신호를 보내주는 조작명령입력부(13);와,

기기가 움직이는 정보를 인식하여 제어부(10)에 보내주는 동작인식부(14);와,

터치스크린에 터치되는 멀티터치신호를 제어부(10)에 전달하는 터치센서부(15);와,

제어부(10)의 제어에 따라 프로그램 진행상황을 터치스크린 화면에 출력하는 디스플레이부(16);와,

제어부(10)의 제어에 따라 기타연주음을 출력하는 오디오출력부(17);와,

외부기기와의 통신을 담당하는 통신부(18);와,

기기 전체에 전원을 공급하는 전원부(19);로 이루어져 있다.

다음은, 이러한 구성을 구비한 본 발명이 동작인식정보를 이용하여 지판을 이동처리하는 과정을 도면과 함께 설명하기로 한다.

도 5는 본 발명의 지판이동 처리과정이다.

기기의 전원을 켜서 프로그램을 실행시키면(100),

제어부는 터치센서부에서 지판을 터치하는 신호가 없는지 판단하여(200),

현재 터치하고 있는 점이 있다면 다시 터치점이 떨어지기를 기다리고, 터치점이 없을 때 동작인식센서로부터의 기기이동정보를 참조하여(300),

얻어진 이동정보가 임계치 이상인지(유효동작인지) 판단하여(400) 임계치 이상일 때에는 그 방향 및 수치에 따라 지판을 이동처리한다(500).

여기서, 슬라이딩을 처리하는 과정은 도면에 설명이 생략되어 있으나, 상기 과정 200과 300 사이에 슬러 버튼이 눌려 있는지를 판단하여 슬러버튼이 눌러져 있을 경우에 과정 300을 수행하면 되는 것이다.

여기서, 임계치는 연주자가 지판을 옮긴 동작이라고 충분히 생각할 만한 수치로서 프로그램에 미리 설정되어 있는 수치이다.

또한, 동작인식센서에서 좀 더 정확한 수치를 얻어내기 위하여 잡음을 제거해야 할 필요가 있고, 이러한 잡음을 제거할 필터과정을 거치도록 하는 것은 센서를 다루는 기술자들이라면 누구나 주지하고 있는 사실이다.

이상으로 본 발명에 대한 설명을 하였는데, 본 발명은 왼손 인터페이스에 한한 것이고, 여러 오른손 인터페이스들과 조합이 가능한 것은 당연하다.

Claims (14)

1. 모바일 가상기타의 지판 표시 장치에 있어서,

   멀티터치를 지원하는 터치스크린;과,

   동작인식센서;와,

   상기 터치스크린에 기타 지판을 표시하고, 상기 동작인식센서의 동작인식정보에 따라 지판의 이동을 처리하는 제어부;를 구비하는 것을 특징으로 하는 모바일 가상기타의 지판 표시 장치.
2. 제1항에 있어서,

   동작인식센서는 가속도센서이고,

   상기 동작인식정보는 상기 지판과 일직선을 이루는 방향으로의 움직임 정보이고, 상기 움직임의 방향에 따라 지판을 이동처리하는 것을 특징으로 하는 모바일 가상기타의 지판 표시 장치.
3. 제2항에 있어서,

   상기 지판을 이동처리하는 것은 움직이는 속도에 비례하여 이동처리하는 것을 특징으로 하는 모바일 가상기타의 지판 표시 장치.
4. 제2항에 있어서,

   상기 지판을 이동처리하는 것은 움직임의 방향으로 일정한 속도로 이동처리하는 것을 특징으로 하는 모바일 가상기타의 지판 표시 장치.
5. 제1항에 있어서,

   상기 동작인식정보는 기기의 기울기 정보이고, 상기 기울기 정보에 따라 지판을 이동처리하는 것을 특징으로 하는 모바일 가상기타의 지판 표시 장치.
6. 제5항에 있어서,

   상기 지판을 이동처리하는 것은 기울어진 방향으로 기울기에 비례하여 이동처리하는 것을 특징으로 하는 모바일 가상기타의 지판 표시 장치.
7. 제5항에 있어서,

   상기 지판을 이동처리하는 것은 기울어진 방향으로 일정한 속도로 이동처리하는 것을 특징으로 하는 모바일 가상기타의 지판 표시 장치.
8. 멀티터치를 지원하는 터치스크린을 구비하고 동작인식센서가 내장된 모바일기기에서 모바일 가상기타의 지판을 표시하는 방법에 있어서,

   상기 터치스크린에 기타의 지판을 일부 표시하고,

   상기 동작인식센서로부터 동작인식신호를 얻어 기기에 유효한 동작이 일어났다고 할만한 정도의 신호라고 판단되었을 때, 상기 기기가 움직인 방향에 따라 지판을 이동처리하는 것을 특징으로 하는 모바일 가상기타의 지판을 표시하는 방법.
9. 제8항에 있어서,

   상기 동작인식신호를 계산하여 기기가 움직인 방향과 속도를 얻어 상기 방향과 속도에 맞추어 지판을 이동처리하는 것을 특징으로 하는 모바일 가상기타의 지판을 표시하는 방법.
10. 제9항에 있어서,

    상기 속도는 일정 속도 이상일 때 동일한 속도로 지판을 이동하는 것을 특징으로 하는 모바일 가상기타의 지판을 표시하는 방법.
11. 제8항에 있어서,

    상기 동작인식신호에서 기기의 기울기를 얻어 기기가 기울어진 방향으로 기울기 정도에 맞추어 지판을 이동처리하는 것을 특징으로 하는 모바일 가상기타의 지판을 표시하는 방법.
12. 제11항에 있어서,

    상기 기울기는 일정 기울기 이상일 때 동일한 속도로 지판을 이동하는 것을 특징으로 하는 모바일 가상기타의 지판을 표시하는 방법.
13. 제8항부터 제12항까지의 어느 한 항에 있어서,

    지판 위에 터치신호가 있을 때에는 지판 이동처리를 하지 않는 것을 특징으로 하는 모바일 가상기타의 지판을 표시하는 방법.
14. 제13항에 있어서,

    슬러버튼이 눌러져 있을 때에는 지판 위에 터치신호가 있을 때에도 지판 이동처리를 하는 것을 특징으로 하는 모바일 가상기타의 지판을 표시하는 방법.