KR20100089526A - 생체 신호를 이용한 음악 생성 장치 및 그 방법 - Google Patents

생체 신호를 이용한 음악 생성 장치 및 그 방법 Download PDF

Info

Publication number
KR20100089526A
KR20100089526A KR1020090008819A KR20090008819A KR20100089526A KR 20100089526 A KR20100089526 A KR 20100089526A KR 1020090008819 A KR1020090008819 A KR 1020090008819A KR 20090008819 A KR20090008819 A KR 20090008819A KR 20100089526 A KR20100089526 A KR 20100089526A
Authority
KR
South Korea
Prior art keywords
music
configuration information
heart rate
biosignal
file
Prior art date
Application number
KR1020090008819A
Other languages
English (en)
Inventor
김재필
정선태
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020090008819A priority Critical patent/KR20100089526A/ko
Priority to US12/700,145 priority patent/US8134062B2/en
Publication of KR20100089526A publication Critical patent/KR20100089526A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/0008—Associated control or indicating means
    • G10H1/0025—Automatic or semi-automatic music composition, e.g. producing random music, applying rules from music theory or modifying a musical piece
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K15/00—Acoustics not otherwise provided for
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00—Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/101—Music Composition or musical creation; Tools or processes therefor
    • G10H2210/111—Automatic composing, i.e. using predefined musical rules
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00—Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/155—User input interfaces for electrophonic musical instruments
    • G10H2220/371—Vital parameter control, i.e. musical instrument control based on body signals, e.g. brainwaves, pulsation, temperature, perspiration; biometric information
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2240/00—Data organisation or data communication aspects, specifically adapted for electrophonic musical tools or instruments
    • G10H2240/011—Files or data streams containing coded musical information, e.g. for transmission
    • G10H2240/046—File format, i.e. specific or non-standard musical file format used in or adapted for electrophonic musical instruments, e.g. in wavetables
    • G10H2240/056—MIDI or other note-oriented file format

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Electrophonic Musical Instruments (AREA)
  • Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)

Abstract

본 발명은 생체 신호를 이용한 음악 생성 장치 및 그 방법에 관한 것이다.
이를 위해 본 발명은 사용자의 생체 신호를 측정하고, 측정된 생체 신호로부터 생체 신호 구성 정보를 추출한 후 추출된 생체 신호 구성 정보를 음악 파일을 구성하는 음악 구성 정보와 매칭시키고, 매칭된 생체 신호 구성 정보를 상기 음악 구성 정보로 설정하여 음악을 구성하며, 설정된 음악 구성 정보를 포함하는 곡조를 구성한 후 구성된 곡조를 포함하는 음악 파일을 생성함으로써 사용자의 생체 신호를 기반으로 하는 음악 파일을 생성할 수 있게 된다.
생체 신호, 심전도, MIDI, HRV, 음악 파일 생성

Description

생체 신호를 이용한 음악 생성 장치 및 그 방법{SYSTEM AND METHOD FOR GENERATING MUSIC USING BIO-SIGNAL}
본 발명은 음악 생성 장치 및 그 방법에 관한 것으로, 특히 심전도(Electrocardiogram, ECG) 또는 광전용적맥파(Photoplethysmography, PPG)와 같은 생체 신호를 이용하여 미디(Music Instrument Digital Interface, MIDI) 파일과 같은 음악 파일을 생성하기 위한 장치 및 그 방법에 관한 것이다.
종래의 음원 재생 장치는 생체 신호를 이용하여 특정 음악의 박자, 템포와 같은 특징 정보를 변화시키는 기술이 대부분이다. 이러한 종래의 음원 재생 장치는 사용자의 기분이나 기호, 주변 환경 등을 실시간으로 음원에 반영하여 음원 자체를 재구성한다. 즉, 종래의 음원 재생 장치는 사용자의 맥박이나 주변 환경 정보를 센서로부터 입력받고 입력된 정보를 바탕으로 음원을 리믹스한다.
또한 생체 신호로부터 직접 음악을 생성하는 음악 재생 장치도 개발되었는데, 이러한 음원 재생 장치는 심전도 신호 자체의 진폭을 피아노의 88개 건반과 매칭시키고 각각의 심전도 샘플 사이에 공백 간격(Silent Interval)을 삽입하여 주요 음을 만들고 심전도를 특정 대역통과 필터를 통과시켰을 때 출력되는 특 징들을 이용하여 하모나이징(Harmonizing)한다.
이와 같이 종래에 생체 신호를 이용하여 음악의 악곡을 변환시키는 음악 재생 장치는 기존에 개발된 어플리케이션을 이용하여 악곡을 변환하기 때문에 생체 신호보다는 사용자의 기호가 많이 반영된 음원으로 변환된다는 문제점이 있다.
이와 같은 음악 재생 장치는 생체 신호를 단순히 악곡을 변환시키기 위한 하나의 도구로 사용하므로 생체 신호를 통해서 확인할 수 있는 사용자의 건강 상태와 같은 중요 정보를 반영하기 어렵다는 문제점이 있다.
또한 종래에 심전도 신호의 진폭 값을 이용한 음악 재생 장치는 심전도의 원본 데이터에 의존하는 방식이기 때문에 잡음에 민감하고 각 샘플 사이에 특정 공백 구간을 설정해야 하는 번거로움이 있다.
따라서, 본 발명은 생체 신호를 이용하여 음악 구성 정보를 설정하고, 설정된 음악 구성 정보를 포함하는 음악을 생성하기 위한 장치 및 그 방법을 제공한다.
상술한 바를 달성하기 위한 본 발명은 사용자의 생체 신호를 측정하는 생체 신호 측정부와, 상기 측정된 생체 신호로부터 생체 신호 구성 정보를 추출하는 생체 신호 구성 정보 추출부와, 상기 추출된 생체 신호 구성 정보를 음악 파일을 구성하는 음악 구성 정보와 매칭시키고, 상기 매칭된 생체 신호 구성 정보를 상기 음악 구성 정보로 설정하는 음악 구성 정보 설정부와, 상기 설정된 음악 구성 정보를 포함하는 곡조를 구성하는 곡조 구성부와, 상기 구성된 곡조를 포함하는 음악 파일 을 생성하는 음악 파일 생성부를 포함하는 것을 특징으로 한다.
또한, 사용자의 생체 신호를 측정하는 과정과, 상기 측정된 생체 신호로부터 생체 신호 구성 정보를 추출하는 과정과, 상기 추출된 생체 신호 구성 정보를 음악 파일을 구성하는 음악 구성 정보와 매칭시키고, 상기 매칭된 생체 신호 구성 정보를 상기 음악 구성 정보로 설정하는 과정과, 상기 설정된 음악 구성 정보를 포함하는 곡조를 구성하는 과정과, 상기 구성된 곡조를 포함하는 음악 파일을 생성하는 과정을 포함함을 특징으로 한다.
본 발명은 사용자의 심전도, 광전용적맥파와 같은 생체 신호를 기반으로 하는 음악을 생성할 수 있다는 이점이 있다.
또한 본 발명은 사용자의 건강 상태를 예측할 수 있는 심전도 변화율을 이용하여 음악을 생성하므로 사용자가 생성된 음악을 듣고 자신의 건강 상태를 파악할 수 있다는 이점이 있다.
뿐만 아니라 본 발명은 짧은 시간동안 측정된 생체 신호를 이용하여 작은 용량의 음악을 생성할 수 있기 때문에 무선 통신 장치에서 벨소리와 같은 컨텐츠로 이용할 수 있다는 이점이 있다.
이하 본 발명의 바람직한 실시 예를 첨부한 도면을 참조하여 상세히 설명한다. 하기 설명 및 첨부 도면에서 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략한다.
도 1은 본 발명의 실시 예에 따른 음악 검색 장치의 구성도를 나타내는 도면이다. 본 발명의 실시 예에서 구성하는 음악 파일을 미디 파일로 가정하여 설명한다. 일반적으로 미디는 미디를 지원하는 디지털 악기들 간의 신호 체계이고, 소리 자체가 아닌 연주자의 행위 또는 제어 동작을 기록하는 파일을 의미한다.
본 발명의 실시 예에 따른 음악 생성 장치는 생체 신호 구성 정보 추출부(20), 음악 구성 정보 설정부(30), 화음 설정부(40), 곡조 구성부(50), 음악 파일 생성부(60), 파일 변환부(70)를 포함한다.
생체 신호 측정부(10)는 사용자로부터 음악 파일을 생성하기 위한 요청이 있으면 심전도 또는 광전용적맥파와 같은 생체 신호를 측정한다.
생체 신호 구성 정보 추출부(20)는 측정된 생체 신호로부터 심박수 변화율(Heart Rate Variability, HRV)을 산출하고, 산출된 심박수 변화율로부터 생체 신호 구성 정보들을 추출한다. 추출된 생체 신호 구성 정보들은 심박수값, 심전도 파형 중 R파의 피크값(QRS R peak Amplitude), 현재 심박수와 다음 심박수의 차이값, 평균 심박수, R파의 피크값 간의 간격인 심박주기(RR interval)에 대한 누적값을 포함한다.
음악 구성 정보 설정부(30)는 추출된 생체 신호 구성 정보들 각각을 미디 파일을 구성하는 미디 음악 구성 정보들과 매칭시키고, 매칭된 생체 신호 구성 정보들을 미디 음악 구성 정보들로 설정한다. 이러한 미디 음악 구성 정보들은 음계(Note Number), 소리 강도 값, 소리 지속 시간, 시간 기준(Time base) 및 박자, 마디 수를 포함한다.
구체적으로 생체 신호 구성 정보들은 하기의 <표 1>과 같은 미디 음악 구성 정보들과 매칭될 수 있다.
미디 음악 구성 정보 생체 신호 구성 정보
음계(Note Number) 심박수 값
소리 강도 값 R파의 피크값(QRS R peak Amplitude)
소리 지속 시간 현재 심박수와 다음 심박수의 차이값(abs)
시간 기준(Time base) 및 박자 평균 심박수
마디 수 심박주기(RR interval) 누적값
음악 구성 정보 설정부(30)는 심박수 변화율을 1회 측정할 시 생성되는 각각의 심박수 값을 음계로 설정한다. 여기서 음계는 일반적으로 하기의 <표 2>와 같이 0~127 사이의 범위를 가지는데, 심박수 값은 0~127 bpm(Beat Per Minute) 각각이 하기의 0~127 사이의 음계로 설정된다.
Figure 112009006901548-PAT00001
만약 사용자가 운동을 할 경우 상기의 <표 2>와 같이 정의된 범위를 초과하게 되면 음악 구성 정보 설정부(30)는 평균 심박수를 기준으로 상기의 <표 1>과 같이 정의된 범위를 가지도록 심박수 변화율을 조정할 수 있다.
음악 구성 정보 설정부(30)는 심박수 변화율을 1회 측정할 시 생성되는 심전도 파형 중 R파의 피크값을 소리 강도 값으로 설정한다. 여기서 소리 강도 값은 음악에서 포르테(forte)나 피아노(piano)와 같이 음의 강약을 의미하는데, 일반적으로 0~127 범위를 가진다.
음악 구성 정보 설정부(30)는 현재 심박수와 다음 심박수 사이의 차이값을 소리 지속 시간으로 설정한다. 여기서 소리 지속 시간은 일반적으로 스텝 시간과 게이트 시간으로 구성된다. 이때 스텝 시간은 실제 음표가 가지는 길이만큼의 시간을 의미하고, 게이트 시간은 스타카토와 같이 실제 음 길이보다 짧게 연주하는 시간을 의미한다. 이와 같이 설정된 소리 지속 시간은 기준 음표를 어떤 음표로 사용할 것인지를 나타내는 시간 기준(Time base)을 결정하는 기준이 된다.
음악 구성 정보 설정부(30)는 평균 심박수를 기준으로 시간 기준 및 박자를 설정한다.
음악 구성 정보 설정부(30)는 심박주기(RR interval) 누적값을 마디로 나누어서 설정할 수 있는데, 상기에서 설정된 시간 기준, 박자와 함께 심박수 파형의 샘플링 율을 이용하여 마디 수를 산출한다.
곡조 구성부(40)는 상기와 같이 설정된 음악 구성 정보를 이용하여 곡조를 구성한다.
화음 생성부(40)는 구성된 곡조에 일반적인 화성 이론을 기반으로 하여 화음을 생성한다.
음악 파일 생성부(50)는 화음이 설정된 곡조를 포함하는 미디 파일을 생성한다.
파일 변환부(60)는 음악 파일 생성부(50)를 통해서 생성된 미디 파일을 MP3 또는 WAV 파일로 변환한다.
상기와 같이 구성되는 음악 생성 장치가 음악 파일을 생성하는 과정에 대해서 도 2를 참조하여 하기에서 구체적으로 살펴보도록 한다.
도 2는 본 발명의 실시 예에 따라 음악 생성 장치가 생체 신호를 이용하여 음악 파일을 생성하기 위한 과정을 나타내는 흐름도이다. 본 발명의 실시 예에서는 음악 파일을 미디 파일로 가정하여 설명하도록 한다.
200단계에서 생체 신호 측정부(10)는 음악 제작을 위한 요청이 있는지 확인하여 요청이 있으면 301단계를 진행하고, 그렇지 않으면 300단계에서 음악 제작을 위한 요청이 있는지 계속적으로 확인한다.
201단계에서 생체 신호 측정부(10)는 심전도 또는 광전용적맥파와 같은 생체 신호를 측정한다.
202단계에서 생체 신호 구성 정보 추출부(20)는 측정된 생체 신호로부터 심박수 변화율을 산출한다. 이와 같이 산출된 심박수 변화율을 심박주기에 따라 그래프로 나타내면 도 3과 같이 도시될 수 있다. 도 3을 참조하면 300은 R파의 피크 값을 나타내고, 301은 현재 심박수와 다음 심박수의 차이값을 나타낸다. 302는 평균 심박수를 나타내고, 303은 심박주기 누적값을 나타낸다.
203단계에서 생체 신호 구성 정보 추출부(20)는 산출된 심박수 변화율로부터 생체 신호 구성 정보를 추출한다. 즉, 추출된 생체 신호 구성 정보는 상기 도 3에 도시된 바와 같이 심박수 값, R파의 피크 값, 현재 심박수와 다음 심박수의 차이값, 평균 심박수, 심박주기 누적값이 된다.
204단계에서 음악 구성 정보 추출부(30)는 추출된 생체 신호 구성 정보 각각을 미디 음악 구성 정보와 매칭시키고, 매칭된 생체 신호 구성 정보를 미디 음악 구성 정보로 설정한다. 도 3을 참조하면 음악 구성 정보 추출부(30)는 R파의 피크 값(300)을 소리 강도값으로 설정하고, 현재 심박수와 다음 심박수의 차이값(301)을 소리 지속 시간으로 설정한다. 그리고 평균 심박수(302)를 이용하여 시간 기준과 박자를 설정하고, 심박주기 누적값(303)을 마디 수로 설정한다.
204단계에서 음악 구성 정보 추출부(30)가 생체 신호 구성 정보를 미디 음악 구성 정보로 설정하는 과정에 대해서 도 3을 참조하여 구체적으로 살펴보면 하기와 같다.
도 3은 음악 구성 정보 추출부(30)가 생체 신호 구성 정보를 이용하여 음악 구성 정보를 설정하는 과정을 나타내는 흐름도이다.
300단계에서 음악 구성 정보 추출부(30)는 평균 심박수를 기준으로 시간 기준, 기준 음표, 기준 박자를 설정한다. 시간 기준은 4분 음표가 가지는 시간적인 수치로서 4분 음표의 길이를 결정하는 값을 의미하고, 박자는 4분 음표가 1마디 안에 몇 개가 포함되는지를 나타내는 값을 의미한다. 구체적으로 음악 구성 정보 설정부(30)는 1을 4분 음표로 설정하는 것으로 시간 기준을 설정할 수 있다. 또한 음악 구성 정보 설정부(30)는 박자를 설정할 시 평균 심박수를 기준으로 하여 평균 심박수 이하는 4분의 4박자, 평균 심박수 이상은 4분의 2박자로 설정할 수 있다.
301단계에서 음악 구성 정보 추출부(30)는 설정된 시간 기준, 기준 박자를 이용하여 마디 수를 산출한다. 이때 마디 수는 하기와 같은 <수학식 1>을 이용하여 산출된다.
1마디를 구성하는 인덱스 값 = (샘플링 율 / 1박 분해능) x 박자 수 x 샘플링 율
예를 들어 시간 기준이 48, 4분의 4박자인 350Hz의 심전도 파형을 이용하여 마디 수를 산출할 경우 1마디를 구성하는 인덱스 값은 1박의 분해능을 240으로 가정하면 (350Hz/240)* 4 x 350 Hz = 2041 인덱스가 된다. 즉, 약 2041 인덱스 내에 존재하는 음계, 소리 강도 값, 소리 지속 시간, 시간 기준 및 박자들은 1마디를 구성하는 마디 구성 요소가 된다.
302단계에서 음악 구성 정보 추출부(30)는 생체 신호 구성 정보 중 심박 주기를 이용하여 마디 구성 요소들을 설정한다. 이때 마디 구성 요소들은 음계, 음표, 쉼표를 포함한다. 이에 대해서 구체적으로 하기의 <표 3>을 이용하여 음악 구성 정보 추출부(30)가 마디 구성 요소들을 설정하는 과정에 대해서 설명하도록 한다.
심박주기 심박주기 누적값 심박수값
(bpm)		 심박수 근사값 마디 음계 조정된 음계 음계명 심박수 차이값
235 1967 89.362 89 F7 F5 파 18
358 2325 58.659 59 B4 B2 시 30
304 2629 69.079 69 A5 A5 라 10
292 2921 71.918 72 C6 C4 도 3
284 3205 73.944 74 D6 D4 레 2
278 3483 75.54 76 E6 E4 미 2
302 3785 69.536 70 2 마디 A#5 A3 파 6
예를 들어 심박 주기가 235이고, 이러한 심박 주기의 누적값이 1967일 때 심박수 값은 89.362 BPM (350Hz/235 X 60)이 산출된다. 여기서 음악 구성 정보 추출부(30)는 심박수 값에 음계를 대응시키기 위해 소수점 아래를 제외한 심박수 근사값을 산출한다.
음악 구성 정보 추출부(30)는 <표 2>의 음계표를 참조하여 0~127 사이의 음계 중 산출된 심박수 근사값과 대응되는 음계를 산출한다. 이때 산출된 음계는 F7이 된다. 그런데 산출된 음계 F7는 너무 높은 옥타브를 가지기 때문에 음악 구성 정보 추출부(30)는 임의로 음계를 조정할 수 있다.
또한 음악 구성 정보 추출부(30)는 생체 신호 구성 정보 중 시간 기준, 기준 박자, 기준 음표 및 심박수 차이값을 이용하여 음표 또는 쉼표를 산출한다.
예를 들어 4분의 4박자의 두 번째 마디가 하기의 <표 3>과 같이 구성된다고 가정한다. 이와 같이 구성된 마디에 포함된 음표들은 하기의 <수학식 2>를 통해서 산출된다.
음표 값 = 기준 박자 x 심박수 차이값 / 심박수 차이값의 총합
여기서 기준 박자는 4가 되고, 심박수 차이값의 총합은 18+30+10+3+2+2+6=71 이 된다.
만약 설정된 기준 음표가 8분 음표(0.5박)라면 <표 3>의 음계들 각각에 따른 음표는 하기의 <표 4>와 같이 산출된다.
Figure 112009006901548-PAT00002
다시 도 2를 참조하여 살펴보면 205단계에서 곡조 구성부(40)는 상기와 같이 설정된 음악 구성 정보들을 포함하는 곡조를 구성한다. 이와 같이 구성된 곡조는 도 5와 같이 나타낼 수 있다.
206단계에서 화음 구성부(50)는 구성된 곡조에 일반적인 화성 이론을 기반으로 하여 화음을 생성한다. 예를 들어 곡조에 포함된 음계들 중 ‘미’에 화음을 생성할 시 화음 생성부(50)는 ‘도미솔’이라는 화음을 기반으로 하여 ‘미’에 ‘도’와 ‘솔’을 포함시킨 화음을 생성할 수 있다.
207단계에서 음악 파일 생성부(60)는 구성된 곡조를 포함하는 음악 파일을 생성한다. 이때 생성된 음악 파일이 미디 파일이라면 이러한 미디 파일은 도 6과 같이 구성될 수 있다. 도 6를 참조하면 90h는 건반의 키를 누르는 것을 의미하고, 0은 출력 채널을 의미한다. 여기서 출력 채널 0은 1번 채널을 의미한다. 41은 음계를 나타내며, 십진법으로 65 즉, 5옥타브의 F(파)음을 의미한다. 54는 소리 강도 값을 나타내고 0~127 사이의 값을 가지는데, 이를 십진법으로 나타내면 84이다. 06은 소리의 지속 시간을 나타낸다. 즉, 90h 41 54 06이 하나의 음을 나타내는 구성 요소가 된다.
208단계에서 파일 타입 변환부(70)는 음악 파일 타입 변환 요청이 있는지 확인하여 요청이 있으면 209단계를 진행하고, 그렇지 않으면 208단계에서 음악 파일 타입을 변환하기 위한 요청이 있는지 계속적으로 진행한다.
209단계에서 파일 타입 변환부(70)는 생성된 음악 파일을 사용자에 의해서 선택된 파일 타입으로 변환한다. 예를 들어 파일 타입 변환부(70)는 미디 파일을 MP3 또는 WAV 파일로 변환한다.
210단계에서 음악 제작 완료되지 않으면 201단계로 진행하여 생체 신호 측정부(10)는 생체 신호를 측정하고 202~210단계를 수행한다.
이와 같이 본 발명은 사용자의 사용자의 심전도, 광전용적맥파와 같은 생체 신호를 측정하고, 측정된 생체 신호에 대한 생체 신호 구성 정보를 추출하여 음악 구성 정보를 설정한 후 설정된 음악 구성 정보를 이용하여 음악을 생성함으로써 사용자의 생체 신호를 기반으로 하는 음악을 생성할 수 있다는 이점이 있다.
도 1은 본 발명의 실시 예에 따른 음악 생성 장치의 구성도,
도 2는 본 발명의 실시 예에 따라 음악 생성 장치가 생체 신호를 이용하여 음악을 생성하기 위한 과정을 나타내는 흐름도,
도 3은 본 발명의 실시 예에 따라 음악 구성 정보 설정부가 음악 구성 정보를 설정하는 과정을 나타내는 흐름도,
도 4는 본 발명의 실시 예에 따라 추출된 생체 신호 구성 정보를 그래프로 나타낸 도면,
도 5는 본 발명의 실시 예에 따라 구성된 곡조를 설명하기 위한 예시도,
도 6은 본 발명의 실시 예에 따라 생성된 음악 파일을 설명하기 위한 예시도.

Claims (14)

  1. 사용자의 생체 신호를 측정하는 생체 신호 측정부와,
    상기 측정된 생체 신호로부터 생체 신호 구성 정보를 추출하는 생체 신호 구성 정보 추출부와,
    상기 추출된 생체 신호 구성 정보를 음악 파일을 구성하는 음악 구성 정보와 매칭시키고, 상기 매칭된 생체 신호 구성 정보를 상기 음악 구성 정보로 설정하는 음악 구성 정보 설정부와,
    상기 설정된 음악 구성 정보를 포함하는 곡조를 구성하는 곡조 구성부와,
    상기 구성된 곡조를 포함하는 음악 파일을 생성하는 음악 파일 생성부를 포함하는 것을 특징으로 하는 음악 생성 장치.
  2. 제1항에 있어서,
    상기 생체 신호는 심전도 또는 광전용적맥파 중 적어도 하나인 것을 특징으로 음악 생성 장치.
  3. 제1항에 있어서,
    상기 생체 신호 구성 정보는 심박수 값, R파의 피크값(QRS R peak Amplitude), 현재 심박수와 다음 심박수의 차이값, 현재 심박수와 다음 심박수의 차이값(abs), 평균 심박수, 심박주기(RR interval) 누적값 중 적어도 하나를 포함 하는 것을 특징으로 하는 음악 생성 장치.
  4. 제3항에 있어서,
    상기 음악 구성 정보는 음계(Note Number), 소리 강도 값, 소리 지속 시간, 시간 기준(Time base) 및 박자, 마디 수 중 적어도 하나를 포함하는 것을 특징으로 하는 음악 생성 장치.
  5. 제1항에 있어서,
    상기 곡조를 구성하는 음계 각각에 화음을 설정하는 화음 설정부를 더 포함하는 것을 특징으로 음악 생성 장치.
  6. 제1항에 있어서,
    사용자 요청에 따라 상기 생성된 음악 파일을 사용자에 의해서 선택된 음악 파일 타입으로 변환하는 파일 타입 변환부를 더 포함하는 것을 특징으로 음악 생성 장치.
  7. 제1항에 있어서,
    상기 음악 파일은 미디(MIDI) 파일인 것을 특징으로 하는 음악 생성 장치.
  8. 사용자의 생체 신호를 측정하는 과정과,
    상기 측정된 생체 신호로부터 생체 신호 구성 정보를 추출하는 과정과,
    상기 추출된 생체 신호 구성 정보를 음악 파일을 구성하는 음악 구성 정보와 매칭시키고, 상기 매칭된 생체 신호 구성 정보를 상기 음악 구성 정보로 설정하는 과정과,
    상기 설정된 음악 구성 정보를 포함하는 곡조를 구성하는 과정과,
    상기 구성된 곡조를 포함하는 음악 파일을 생성하는 과정을 포함함을 특징으로 하는 음악 생성 방법.
  9. 제8항에 있어서,
    상기 생체 신호는 심전도 또는 광전용적맥파 중 적어도 하나인 것을 특징으로 음악 생성 방법.
  10. 제8항에 있어서,
    상기 생체 신호 구성 정보는 심박수 값, R파의 피크값(QRS R peak Amplitude), 현재 심박수와 다음 심박수의 차이값, 현재 심박수와 다음 심박수의 차이값(abs), 평균 심박수, 심박주기(RR interval) 누적값 중 적어도 하나를 포함하는 것을 특징으로 하는 음악 생성 방법.
  11. 제10항에 있어서,
    상기 음악 구성 정보는 음계(Note Number), 소리 강도 값, 소리 지속 시간, 시간 기준(Time base) 및 박자, 마디 수 중 적어도 하나를 포함하는 것을 특징으로 하는 음악 생성 방법.
  12. 제8항에 있어서,
    상기 곡조 구성 과정 이후에 상기 곡조를 구성하는 음계 각각에 화음을 설정하는 과정을 더 포함함을 특징으로 음악 생성 방법.
  13. 제8항에 있어서,
    상기 음악 파일 생성 과정 이후에 사용자의 요청에 따라 상기 생성된 음악 파일을 사용자에 의해서 선택된 음악 파일 타입으로 변환하는 과정을 더 포함함을 특징으로 음악 생성 방법.
  14. 제8항에 있어서,
    상기 음악 파일은 미디(MIDI) 파일인 것을 특징으로 하는 음악 생성 방법.
KR1020090008819A 2009-02-04 2009-02-04 생체 신호를 이용한 음악 생성 장치 및 그 방법 KR20100089526A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020090008819A KR20100089526A (ko) 2009-02-04 2009-02-04 생체 신호를 이용한 음악 생성 장치 및 그 방법
US12/700,145 US8134062B2 (en) 2009-02-04 2010-02-04 Apparatus and method for generating music using bio-signal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090008819A KR20100089526A (ko) 2009-02-04 2009-02-04 생체 신호를 이용한 음악 생성 장치 및 그 방법

Publications (1)

Publication Number Publication Date
KR20100089526A true KR20100089526A (ko) 2010-08-12

Family

ID=42396627

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090008819A KR20100089526A (ko) 2009-02-04 2009-02-04 생체 신호를 이용한 음악 생성 장치 및 그 방법

Country Status (2)

Country Link
US (1) US8134062B2 (ko)
KR (1) KR20100089526A (ko)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7872188B2 (en) * 2009-03-20 2011-01-18 Mariann Martin Willis Method and apparatus for personal exercise trainer
US9026074B2 (en) 2010-06-04 2015-05-05 Qualcomm Incorporated Method and apparatus for wireless distributed computing
US10713341B2 (en) * 2011-07-13 2020-07-14 Scott F. McNulty System, method and apparatus for generating acoustic signals based on biometric information
US9029677B2 (en) 2012-12-10 2015-05-12 Peter Frenkel Method for generating music
CN103617362A (zh) * 2013-12-04 2014-03-05 北京怡成生物电子技术有限公司 一种心电数据处理方法及***
US9880805B1 (en) 2016-12-22 2018-01-30 Brian Howard Guralnick Workout music playback machine
AT525615A1 (de) * 2021-11-04 2023-05-15 Peter Graber Oliver Vorrichtung und verfahren zur ausgabe eines akustischen signals basierend auf physiologischen daten

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08328555A (ja) 1995-05-31 1996-12-13 Ekushingu:Kk 演奏制御装置
US20010035087A1 (en) * 2000-04-18 2001-11-01 Morton Subotnick Interactive music playback system utilizing gestures
JP2002268635A (ja) 2001-03-06 2002-09-20 Mitsubishi Chemicals Corp 光学的情報記録媒体の記録再生装置および光学的情報記録媒体並びに光学的情報記録媒体の再生方法
JP2005034391A (ja) 2003-07-15 2005-02-10 Takuya Shinkawa 音出力装置および音出力方法
KR20050066701A (ko) 2003-12-27 2005-06-30 전자부품연구원 감정인식 컴퓨팅을 이용한 게임 방법 및 그 장치
JP2006084749A (ja) 2004-09-16 2006-03-30 Sony Corp コンテンツ生成装置およびコンテンツ生成方法
JP2006171133A (ja) 2004-12-14 2006-06-29 Sony Corp 楽曲データ再構成装置、楽曲データ再構成方法、音楽コンテンツ再生装置および音楽コンテンツ再生方法
JP4306754B2 (ja) * 2007-03-27 2009-08-05 ヤマハ株式会社 楽曲データ自動生成装置及び音楽再生制御装置
KR101142679B1 (ko) * 2009-01-23 2012-05-03 삼성전자주식회사 생체 신호를 이용한 음악 검색 장치 및 그 방법

Also Published As

Publication number Publication date
US20100192754A1 (en) 2010-08-05
US8134062B2 (en) 2012-03-13

Similar Documents

Publication Publication Date Title
Benson Music: a mathematical offering
Stupacher et al. Audio features underlying perceived groove and sensorimotor synchronization in music
KR20100089526A (ko) 생체 신호를 이용한 음악 생성 장치 및 그 방법
Larrouy-Maestri et al. The mistuning perception test: A new measurement instrument
Brockmeier et al. The MuSIC perception test: a novel battery for testing music perception of cochlear implant users
Tirovolas et al. Music perception and cognition research from 1983 to 2010: A categorical and bibliometric analysis of empirical articles in Music Perception
Trainor et al. Explaining the high voice superiority effect in polyphonic music: Evidence from cortical evoked potentials and peripheral auditory models
Lange et al. Challenges and opportunities of predicting musical emotions with perceptual and automatized features
Plazak et al. The first three seconds: Listener knowledge gained from brief musical excerpts
CN104688222B (zh) 基于脑电信号的音色合成装置
Banerjee et al. A novel study on perception–cognition scenario in music using deterministic and non-deterministic approach
Butte et al. Perturbation and nonlinear dynamic analysis of different singing styles
Chew Notating disfluencies and temporal deviations in music and arrhythmia
Chau et al. The Effects of Early-Release on Emotion Characteristics and Timbre in Non-Sustaining Musical Instrument Tones
AU2006252341B2 (en) Frequency spectrum conversion to natural harmonic frequencies process
JP7191269B1 (ja) 発声健康法促進装置、発声健康法促進方法、及び発声健康法促進プログラム
Sapozhnikova et al. Improvement of traceability of widely-defined measurements in the field of humanities
Benadon et al. Quantitative analysis of temporal structure in Cuban guaguancó drumming
Fernandes et al. Brain's night symphony (BraiNSy): A methodology for EEG sonification
Nestorova et al. Vocal vibrato characteristics in historical and contemporary opera, operetta, and Schlager
Tulilaulu et al. Sleep musicalization: Automatic music composition from sleep measurements
Cutchin et al. Data collection methods for the voice range profile: a systematic review
Daffern et al. The impact of vibrato usage on the perception of pitch in early music compared to grand opera
Lamarche et al. Not just sound: Supplementing the voice range profile with the singer's own perceptions of vocal challenges
US7968785B2 (en) Frequency spectrum conversion to natural harmonic frequencies process

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
J201 Request for trial against refusal decision
B601 Maintenance of original decision after re-examination before a trial
J301 Trial decision

Free format text: TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20111027

Effective date: 20120615