KR20210007748A

KR20210007748A - 디지털 기반 악기 복합연주 시스템

Info

Publication number: KR20210007748A
Application number: KR1020190084711A
Authority: KR
Inventors: 박홍식; 최동혁; 장영직; 이동우
Original assignee: 동서대학교 산학협력단
Priority date: 2019-07-12
Filing date: 2019-07-12
Publication date: 2021-01-20

Abstract

본 발명은 디지털 기반 악기 복합연주 시스템을 제공한다. 이와 같은 본 발명에 따른 디지털 기반 악기 복합연주 시스템은 합주 종류(관현악, 취주악, 현악합주, 관악합주 등)를 선택한 유저의 연주동작으로부터 유저 연주음이 생성되는 한편, 현재 유저 연주음의 박자, 리듬, 음색 등에 실시간으로 연동되어 튜닝되는 합주 연주음이 가상적으로 생성되어 출력되도록 함으로써 유저가 자신이 현재 연주하는 악기를 다루는 수준을 가늠할 수 있도록 하고, 이를 통해 악기 연주실력 향상을 위한 연습을 수행할 수 있도록 하는 기술이다.

Description

디지털 기반 악기 복합연주 시스템{Musical instrument ensemble performance system based on digital program}

본 발명은 디지털 기반 악기 복합연주 시스템에 관한 것으로, 좀더 구체적으로는 합주 종류(관현악, 취주악, 현악합주, 관악합주 등)를 선택한 유저의 연주동작으로부터 유저 연주음이 생성되는 한편, 현재 유저 연주음의 박자, 리듬, 음색 등에 실시간으로 연동되어 튜닝되는 합주 연주음이 가상적으로 생성되어 출력되도록 함으로써 유저가 자신이 현재 연주하는 악기를 다루는 수준을 가늠할 수 있도록 하고, 이를 통해 악기 연주실력 향상을 위한 연습을 수행할 수 있도록 하는 디지털 기반 악기 복합연주 시스템에 관한 것이다.

최근 젊은층 뿐만 아니라 음악 매니아들은 음악을 듣고 즐기는데 만족하지 않고, 자기가 좋아하는 음악을 악기를 통해 직접 연주해 보기도 한다. 그러나, 이러한 시설 공간은 한정되어 있으며, 시설 공간이 제공되어 있어도 그에 따른 악기 및 제반 사항을 구축하기에는 많은 어려움이 따른다.

또한, 자기가 좋아하는 음악을 연주하기 위해서는 악기의 사용법은 물론 악기를 능숙하게 다룰 수 있는 사람들의 지도를 통하여 연주법을 배워야 하는 데 이 또한 어려움이 따른다.

대한민국 공개특허공보 공개번호 제10-2012-0096880호 "사용자가 자신의 음성에 기초하여 디지털 악기를 연주할 수 있도록 하기 위한 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체" 대한민국 공개특허공보 공개번호 제10-2008-0015993호 "가라오케 시스템에서의 디지털 악기 연주 방법"

따라서 본 발명은 이와 같은 종래 기술의 문제점을 개선하여, 유저용 악기모형체, 유저 연주음 변환모듈, 합주선택 인터페이스, 합주 연주음 생성모듈, 연주음 출력모듈이 구비되는 시스템 구성을 통해 합주 종류(관현악, 취주악, 현악합주, 관악합주 등)를 선택한 유저의 연주동작으로부터 유저 연주음이 생성되는 한편, 현재 유저 연주음의 박자, 리듬, 음색 등에 실시간으로 연동되어 튜닝되는 합주 연주음이 가상적으로 생성되어 출력되도록 함으로써 유저가 자신이 현재 연주하는 악기를 다루는 수준을 가늠할 수 있도록 하고, 이를 통해 악기 연주실력 향상을 위한 연습을 수행할 수 있도록 하는 새로운 형태의 디지털 기반 악기 복합연주 시스템을 제공하는 것을 목적으로 한다.

상술한 목적을 달성하기 위한 본 발명의 특징에 의하면, 본 발명은 복수 종(種)의 악기 중에서 선택된 어느 하나의 실물 모형으로 이루어지고, 유저의 연주동작으로부터 입력신호를 생성하는 신호생성 인터페이스(110)를 갖는 유저용 악기모형체(100); 유저용 악기모형체(100)와 유무선으로 연결되어 신호생성 인터페이스(110)로부터 생성된 입력신호를 전달받게 되고, 입력신호를 유저용 악기모형체(100)의 종류에 따른 유저 연주음으로 변환하는 유저 연주음 변환모듈(200); 유저에 의해 합주 종류의 선택이 수행되는 합주선택 인터페이스(300); 합주선택 인터페이스(300)로부터 합주 종류 선택정보를 전달받게 되고, 선택된 종류의 합주에 구성하는 복수의 악기 중 유저용 악기모형체(100) 제외한 나머지 악기 전체의 합주 연주음을 생성하는 합주 연주음 생성모듈(400); 및 유저 연주음 변환모듈(200)과 합주 연주음 생성모듈(400)로부터 유저 연주음과 합주 연주음을 전달받아 출력하게 되는 연주음 출력모듈(500);을 포함하는 구성으로 이루어지는 것을 특징으로 하는 디지털 기반 악기 복합연주 시스템을 제공한다.

이와 같은 본 발명에 따른 디지털 기반 악기 복합연주 시스템은 유저의 머리 부위에 착용되고, 합주선택 인터페이스(300)로부터 합주 종류 선택정보를 전달받게 되고, 선택된 종류의 합주에 맞추어진 합주 가상현실 영상을 생성하여 디스플레이하게 되는 HMD(600);를 더 포함할 수 있다.

이와 같은 본 발명에 따른 디지털 기반 악기 복합연주 시스템에서 합주 연주음 생성모듈(400)은 합주 연주음이 현재 유저 연주음에 맞추어 실시간으로 생성되도록 할 수 있다.

이와 같은 본 발명에 따른 디지털 기반 악기 복합연주 시스템에서 연주음 출력모듈(500)은, 유저의 귀 부위에 장착되고, HMD(600)에 디스플레이되는 합주 가상현실 영상 내 각 악기의 위치로부터 유저 연주음과 합주 연주음이 발생되어 유저의 귀로 전달되는 것을 조건으로 하여 생성되는 사운드정보를 전달받아 다채널 입체사운드를 출력시키는 서라운드 디코더 기반 입체사운드 출력용 헤드폰, 복수의 소형 스피커모듈이 구비된 다채널 스피커모듈 구비형 입체사운드 출력용 헤드폰 중에서 선택된 어느 하나로 출력되는 입체사운드 출력용 헤드폰(500a)일 수 있다.

본 발명에 의한 디지털 기반 악기 복합연주 시스템에 의하면, 합주 종류(관현악, 취주악, 현악합주, 관악합주 등)를 선택한 유저의 연주동작으로부터 유저 연주음이 생성되는 한편, 현재 유저 연주음의 박자, 리듬, 음색 등에 실시간으로 연동되어 튜닝되는 합주 연주음이 가상적으로 생성되어 출력되도록 하므로, 유저가 자신이 현재 연주하는 악기를 다루는 수준을 가늠할 수 있게 되고, 이를 통해 악기 연주실력 향상을 위한 연습을 수행할 수 있는 효과가 있다.

도 1은 본 발명의 실시예에 따른 디지털 기반 악기 복합연주 시스템의 기본 구성 블록도;
도 2는 본 발명의 실시예에 따른 디지털 기반 악기 복합연주 시스템의 부가적인 구성을 보여주기 위한 블록도이다.

이하, 본 발명의 실시예를 첨부된 도면 도 1과 도 2에 의거하여 상세히 설명한다. 한편, 도면과 상세한 설명에서 일반적인 디지털 기반 악기 연주 시스템, HMD, 헤드폰 등으로부터 이 분야의 종사자들이 용이하게 알 수 있는 구성 및 작용에 대한 도시 및 언급은 간략히 하거나 생략하였다. 특히 도면의 도시 및 상세한 설명에 있어서 본 발명의 기술적 특징과 직접적으로 연관되지 않는 요소의 구체적인 기술적 구성 및 작용에 대한 상세한 설명 및 도시는 생략하고, 본 발명과 관련되는 기술적 구성만을 간략하게 도시하거나 설명하였다.

본 발명의 실시예에 따른 디지털 기반 악기 복합연주 시스템은 도 1과 도 2에서와 같이 유저용 악기모형체(100), 유저 연주음 변환모듈(200), 합주선택 인터페이스(300), 합주 연주음 생성모듈(400), HMD(600), 연주음 출력모듈(500)을 포함하는 구성으로 이루어진다.

유저용 악기모형체(100)는 복수 종(種)의 악기 중에서 선택된 어느 하나의 실물 모형으로 이루어지는 것으로, 유저의 연주동작으로부터 입력신호를 생성하는 신호생성 인터페이스(110)를 갖는다. 유저용 악기모형체(100)는 관악기, 현악기, 타악기 등으로 이루어질 수 있으며, 신호생성 인터페이스(110)는 해당 악기에서 음이 생성되는 부위에 배치되어 연주용 도구나 신체부위의 접촉으로 입력신호를 생성하게 된다.

유저 연주음 변환모듈(200)은 유저용 악기모형체(100)와 유선 또는 무선으로 연결되는 것으로, 유저용 악기모형체(100)의 신호생성 인터페이스(110)로부터 생성된 입력신호를 전달받게 된다. 그리고 유저 연주음 변환모듈(200)은 입력신호를 유저용 악기모형체(100)의 종류에 따른 유저 연주음으로 변환하게 된다.

합주선택 인터페이스(300)는 유저에 의해 합주 종류의 선택이 수행되는 것으로, 합주 종류에는 관현악, 취주악, 현악합주, 관악합주 등이 포함된다.

합주 연주음 생성모듈(400)은 합주선택 인터페이스(300)로부터 합주 종류 선택정보를 전달받게 되는 것으로, 선택된 종류의 합주에 구성하는 복수의 악기 중 유저용 악기모형체(100) 제외한 나머지 악기 전체의 합주 연주음을 생성하게 된다. 여기서 본 발명의 실시예에 따른 합주 연주음 생성모듈(400)은 합주 연주음이 현재 유저 연주음에 맞추어 실시간으로 생성되도록 한다. 즉 합주 연주음 생성모듈(400)은 현재 유저 연주음의 박자, 리듬, 음색 등에 실시간으로 연동되어 튜닝되는 합주 연주음을 생성하게 되는데, 이를 통해 유저는 자신이 현재 연주하는 악기를 다루는 수준을 가늠할 수 있게 되고, 본 발명을 통해 악기 연주실력 향상을 위한 연습을 수행할 수 있게 된다.

HMD(600)는 유저의 머리 부위에 착용되는 것으로, 합주선택 인터페이스(300)로부터 합주 종류 선택정보를 전달받게 되고, 선택된 종류의 합주에 맞추어진 합주 가상현실 영상을 생성하여 디스플레이하게 된다. 유저는 HMD(600)를 통해 자신의 눈 앞에 가상적으로 가시화되는 합주 공간 내에 자신이 위치한 것으로 감각하면서 유저용 악기모형체(100)를 연주하게 된다.

연주음 출력모듈(500)은 유저 연주음 변환모듈(200)과 합주 연주음 생성모듈(400)로부터 유저 연주음과 합주 연주음을 전달받아 출력하게 되는 것이다. 이와 같은 연주음 출력모듈(500)은 설정위치에 배치되는 다채널 스피커로 이루어질 수도 있고, 유저의 귀 부위에 장착되는 헤드폰/이어폰으로 이루어질 수도 있다. 특히 본 발명의 실시예에 따른 연주음 출력모듈(500)은 입체사운드 출력용 헤드폰(500a)으로 이루어지는데, 입체사운드 출력용 헤드폰(500a)은 HMD(600)에 디스플레이되는 합주 가상현실 영상 내 각 악기의 위치로부터 유저 연주음과 합주 연주음이 발생되어 유저의 귀로 전달되는 것을 조건으로 하여 생성되는 사운드정보를 전달받아 다채널 입체사운드를 출력시키는 서라운드 디코더 기반 입체사운드 출력용 헤드폰으로 이루어질 수도 있고, 복수의 소형 스피커모듈이 구비된 다채널 스피커모듈 구비형 입체사운드 출력용 헤드폰으로 이루어질 수도 있다.

상기와 같이 구성된 본 발명의 실시예에 따른 디지털 기반 악기 복합연주 시스템은 유저용 악기모형체(100), 유저 연주음 변환모듈(200), 합주선택 인터페이스(300), 합주 연주음 생성모듈(400), HMD(600), 연주음 출력모듈(500)이 구비되는 시스템 구성을 통해 합주 종류(관현악, 취주악, 현악합주, 관악합주 등)를 선택한 유저의 연주동작으로부터 유저 연주음이 생성되는 한편, 현재 유저 연주음의 박자, 리듬, 음색 등에 실시간으로 연동되어 튜닝되는 합주 연주음이 가상적으로 생성되어 출력되도록 하므로, 유저가 자신이 현재 연주하는 악기를 다루는 수준을 가늠할 수 있게 되고, 이를 통해 악기 연주실력 향상을 위한 연습을 수행할 수 있게 한다.

상술한 바와 같은, 본 발명의 실시예에 따른 디지털 기반 악기 복합연주 시스템을 상기한 설명 및 도면에 따라 도시하였지만, 이는 예를 들어 설명한 것에 불과하며 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 다양한 변화 및 변경이 가능하다는 것을 이 분야의 통상적인 기술자들은 잘 이해할 수 있을 것이다.

100 : 유저용 악기모형체
110 : 신호생성 인터페이스
200 : 유저 연주음 변환모듈
300 : 합주선택 인터페이스
400 : 합주 연주음 생성모듈
500 : 연주음 출력모듈
500a : 입체사운드 출력용 헤드폰
600 : HMD

Claims

복수 종(種)의 악기 중에서 선택된 어느 하나의 실물 모형으로 이루어지고, 유저의 연주동작으로부터 입력신호를 생성하는 신호생성 인터페이스(110)를 갖는 유저용 악기모형체(100);
유저용 악기모형체(100)와 유무선으로 연결되어 신호생성 인터페이스(110)로부터 생성된 입력신호를 전달받게 되고, 입력신호를 유저용 악기모형체(100)의 종류에 따른 유저 연주음으로 변환하는 유저 연주음 변환모듈(200);
유저에 의해 합주 종류의 선택이 수행되는 합주선택 인터페이스(300);
합주선택 인터페이스(300)로부터 합주 종류 선택정보를 전달받게 되고, 선택된 종류의 합주에 구성하는 복수의 악기 중 유저용 악기모형체(100) 제외한 나머지 악기 전체의 합주 연주음을 생성하는 합주 연주음 생성모듈(400); 및
유저 연주음 변환모듈(200)과 합주 연주음 생성모듈(400)로부터 유저 연주음과 합주 연주음을 전달받아 출력하게 되는 연주음 출력모듈(500);을 포함하는 구성으로 이루어지는 것을 특징으로 하는 디지털 기반 악기 복합연주 시스템.
제 1항에 있어서,
유저의 머리 부위에 착용되고, 합주선택 인터페이스(300)로부터 합주 종류 선택정보를 전달받게 되고, 선택된 종류의 합주에 맞추어진 합주 가상현실 영상을 생성하여 디스플레이하게 되는 HMD(600);를 더 포함하는 것을 특징으로 하는 디지털 기반 악기 복합연주 시스템.
제 1항에 있어서,
합주 연주음 생성모듈(400)은 합주 연주음이 현재 유저 연주음에 맞추어 실시간으로 생성되도록 하는 것을 특징으로 하는 디지털 기반 악기 복합연주 시스템.
제 2항에 있어서,
연주음 출력모듈(500)은,
유저의 귀 부위에 장착되고, HMD(600)에 디스플레이되는 합주 가상현실 영상 내 각 악기의 위치로부터 유저 연주음과 합주 연주음이 발생되어 유저의 귀로 전달되는 것을 조건으로 하여 생성되는 사운드정보를 전달받아 다채널 입체사운드를 출력시키는 서라운드 디코더 기반 입체사운드 출력용 헤드폰, 복수의 소형 스피커모듈이 구비된 다채널 스피커모듈 구비형 입체사운드 출력용 헤드폰 중에서 선택된 어느 하나로 출력되는 입체사운드 출력용 헤드폰(500a)인 것을 특징으로 하는 디지털 기반 악기 복합연주 시스템.