WO2019050206A1 - Sound source separation device and audio equipment - Google Patents

Sound source separation device and audio equipment Download PDF

Info

Publication number
WO2019050206A1
WO2019050206A1 PCT/KR2018/009949 KR2018009949W WO2019050206A1 WO 2019050206 A1 WO2019050206 A1 WO 2019050206A1 KR 2018009949 W KR2018009949 W KR 2018009949W WO 2019050206 A1 WO2019050206 A1 WO 2019050206A1
Authority
WO
WIPO (PCT)
Prior art keywords
sound source
channel sound
channel
unit
source signal
Prior art date
Application number
PCT/KR2018/009949
Other languages
French (fr)
Korean (ko)
Inventor
이종화
김양한
박준영
김완중
김환
Original Assignee
주식회사 에스큐그리고
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 에스큐그리고 filed Critical 주식회사 에스큐그리고
Publication of WO2019050206A1 publication Critical patent/WO2019050206A1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/008—Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10—General applications
    • H04R2499/15—Transducers incorporated in visual displaying devices, e.g. televisions, computer displays, laptops
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/01—Multi-channel, i.e. more than two input channels, sound reproduction with two speakers wherein the multi-channel information is substantially preserved

Definitions

  • the present invention relates to a sound source separation device and a sound device, and more particularly, to a sound source separation device and a sound device capable of real-time separation of an input stereo sound source signal into a plurality of channel sound source signals.
  • a sound device refers to a device that converts various sound source signals into sound waves and outputs them.
  • the acoustic device may include, for example, a device for listening to voice or music, or a device for measuring or exploring using acoustic such as an echo sounder or a fish finder.
  • the external stereo sound source signal is composed of two channel sound source signals, since each sound source signal of the channel has already recorded the instrument sound and the vocal sound, only a specific sound, for example, vocal sound It is impossible to separate it.
  • An object of the present invention is to provide a sound source separation device and a sound device capable of real-time separation of a stereo sound source signal into at least three or more channel sound source signals in real time.
  • a sound source separation device and a sound device capable of processing a stereo sound source signal to provide a predetermined spatial feeling to a listener.
  • the present invention also provides a sound source separation device and a sound device in which a listener can directly control the spatial sense through an external terminal device.
  • the present invention also provides a sound source separation device and a sound device in which a listener can directly control the spatial feeling through a user input unit provided therein.
  • the multi-channel generator generates a modified first channel sound source signal by summing the first channel sound source signal amplified by the first amplification degree and the second channel sound source signal amplified by the second amplification degree, A method of generating a center channel sound source signal by summing a one-channel sound source signal and a second channel sound source signal, amplifying the second channel sound source signal with the first amplification degree, amplifying the first channel sound source signal with the second amplification degree Thereby generating a modified second channel sound source signal.
  • a user input unit for generating a position control signal corresponding to a user input; And a position adjustment unit receiving the channel sound source signals generated by the sound source separation unit and receiving a position control signal from the user input unit, wherein the position adjustment unit adjusts the position of the sound source separation unit based on the position control signal,
  • the channel sound source signals processed in the position adjustment unit are outputted through the sound output apparatus, the channel sound source signals are generated in predetermined spaces corresponding to the position control signal ≪ / RTI >
  • the first amplification degree may be 2, and the second amplification degree may be -1.
  • the position adjustment unit processes the channel sound source signals generated by the sound source separation unit based on the position control signal and outputs the position control signal when the channel sound source signals processed by the position adjustment unit are outputted through the sound output unit It can be recognized by the listener as if the channel sound sources are generated in corresponding predetermined spaces.
  • the user input unit may be an adjustment switch for adjusting positions of virtual speakers corresponding to the predetermined spaces.
  • the use of the sound source separation device and the sound device according to the embodiments of the present invention has an advantage in that the stereo sound source signal can be separated in real time into at least three or more channel sound source signals.
  • FIG. 1 is a block diagram of a sound source separation apparatus 100 according to an embodiment of the present invention.
  • FIG. 3 is a block diagram of a sound source separation apparatus 100 'according to another embodiment of the present invention.
  • FIG. 4 is a view showing a screen 3350a of the terminal device 3000 shown in FIG.
  • FIG. 5 is a block diagram of the sound output apparatus 190 of FIG. 3 when the channel sound source signals processed by the position adjustment unit 150 of the sound source separation apparatus 100 'are outputted through the sound output apparatus 190, P2, and P3, respectively.
  • FIG. 6 is a view for explaining a sound effect of the sound source separation apparatus 100 'shown in FIG.
  • FIG. 7 is a block diagram of a sound source separation apparatus 100 '' according to another embodiment of the present invention.
  • FIG. 8 is a view showing a screen 735a of the user input unit 170 shown in FIG.
  • FIG. 9 is a block diagram of an audio equipment 1000 according to an embodiment of the present invention.
  • FIG. 10 is a block diagram of an acoustic device 1000 'according to another embodiment of the present invention.
  • FIG. 11 is a block diagram of a sound device 1000 '' according to another embodiment of the present invention.
  • FIG. 1 is a block diagram of a sound source separation apparatus 100 according to an embodiment of the present invention.
  • the three channel sound source signals generated by the multi-channel generating unit 130 may include a modified first channel sound source signal L_new, a center channel sound source signal Center, and a modified second channel sound source signal R_new have.
  • L_new a modified first channel sound source signal
  • Center a center channel sound source signal Center
  • R_new a modified second channel sound source signal
  • FIG. 2 three channel sound source signals are newly generated, but the present invention is not limited thereto. For example, four or more channel sound source signals may be generated.
  • the multi-channel generator 130 multiplies the second channel sound source signal R by two times (2R) and the first channel sound source signal L by -1 times (-L) And generates a modified second channel sound source signal R_new.
  • the first amplification degree for amplifying the second channel sound source signal R is not limited to 2
  • the second amplification degree for amplifying the first channel sound source signal L is not limited to -1.
  • the amplification ratio can be changed.
  • the first channel sound source signal L and the second channel sound source signal R are respectively generated by the following sound sources.
  • l is a sound source component located on the left side
  • c is a sound source component located in the center
  • r is a sound source component located on the right side.
  • the multi-channel generating unit 130 generates three or more new channel sound source signals (L_new, Center, R_new) through two simple operations of amplifying and summing the input two-channel stereo sound source signal with a predetermined amplification degree
  • the center channel sound source signal Center includes the first channel sound source signal L and the second channel sound source signal R plus the first channel sound source signal L and the second channel sound source signal R ),
  • the magnitude of a particular sound already included in each, for example a vocal sound is doubled. Accordingly, there is an advantage that the vocal sound can be felt to a larger audience as compared with when the stereo sound source signal is emitted through an audio output device (not shown) without any processing.
  • FIG. 3 is a block diagram of a sound source separation apparatus 100 'according to another embodiment of the present invention.
  • a sound source separation apparatus 100 includes a reception unit 110, a multi-channel generation unit 130, and a position adjustment unit 150.
  • the receiving unit 110 and the multi-channel generating unit 130 are the same as the receiving unit 110 and the multi-channel generating unit 130 shown in FIG. 1 and FIG. 2, respectively.
  • the user of the terminal device 3000 can move the position of the virtual speakers S1, S2, S3 displayed on the screen 3350a through the touch function of the touch screen.
  • the app generates a position control signal including position information of the virtual speakers S1, S2, and S3, and transmits the generated position control signal to the sound source separation device 100 'through the terminal device 3000 .
  • the position adjusting unit 150 processes a plurality of channel sound source signals received from the multi-channel generating unit 130 based on a position control signal from the terminal device 3000.
  • the processing of a plurality of channel sound source signals means that when each processed sound source signal is outputted through an audio output device (not shown), the listener feels as if each channel sound source signal is generated at a predetermined position in a predetermined space It may mean filtering each channel sound source signal with a predetermined coefficient.
  • the preset predetermined space is determined by the position control signal received from the terminal device 3000.
  • a transfer function of an arbitrary position between some of the positions is generated by interpolating the transfer functions of the certain positions It is possible.
  • FIG. 6 is a view for explaining a sound effect of the sound source separation apparatus 100 'shown in FIG.
  • FIG. 3 has the advantage of the sound source separating apparatus 100 shown in FIG. 1, and the external sound source separating apparatus 100 'shown in FIG. 3 not only has the advantage of the sound source separating apparatus 100 shown in FIG. 1, There is an advantage in that the virtual position to be generated can be adjusted and the listener has the advantage of feeling the spatial feeling of the sound outputted through the sound output device 190. [ In addition, a listener may obtain the same effect as listening to a vocal sound at a specific position in a normal stereo sound source.
  • the user input unit 170 may include a display unit (not shown).
  • the display unit (not shown) may include a screen 735a for displaying predetermined information provided from the position adjustment unit 150, as shown in FIG.
  • the display unit (not shown) may be mounted on the housing or the cover of the sound source separation apparatus 100 ", and may be installed such that the screen 735a is exposed to the outside.
  • predetermined information provided from the position adjustment unit 150 can be displayed.
  • the predetermined information may be generated when each channel sound source signals are generated S2, and S3, which are sensed by the virtual speakers S1, S2, and S3.
  • the predetermined information may further include volume information of each of the virtual speakers S1, S2, and S3.
  • the listener 7 does not only have the advantages of the sound source separation apparatus 100 shown in FIG. 1, but also has the advantages of the user input unit 170 'provided in the sound source separation apparatus 100' ' ),
  • the listener has the advantage of adjusting the position of the virtual speaker of each channel sound source signal, and the listener has the advantage of feeling the spatial feeling of the sound outputted through the sound output device (not shown).
  • a listener may obtain the same effect as listening to a vocal sound at a specific position in a normal stereo sound source.
  • FIG. 9 is a block diagram of an audio equipment 1000 according to an embodiment of the present invention.
  • the sound source separation unit 100 is the sound source separation apparatus 100 shown in FIG. Therefore, the description of the sound source separation unit 100 is replaced with the description of the sound source separation apparatus 100 described above with reference to FIG.
  • the sound apparatus 1000 shown in FIG. 9 includes the sound source separation unit 100, three or more new channel sound source signals L_new, Center, R_new can be generated in real time and output in real time through the sound output unit 300.
  • the audio apparatus 1000 shown in FIG. 9 has an advantage that it can generate and output one center channel sound source signal and two modified channel sound source signals in real time from a two-channel stereo sound source signal.
  • the sound device 1000 may further include components included in a conventional general sound device.
  • a stereo sound source signal may be input from the outside to the audio equipment 1000 through a connection unit (not shown).
  • the display unit may further include an adjusting unit for adjusting the volume of the sound output through the speaker unit 330 and a display unit for displaying the power state of the audio device 1000, .
  • an acoustic device 1000 includes a sound source separation unit 100, a position adjustment unit 500, and an acoustic output unit 300.
  • the sound source separating unit 100 is the same as the sound source separating unit 100 shown in FIG. 9, and a detailed description thereof will be replaced with the one described above.
  • the terminal 3000 may be a portable terminal such as a smart phone and a tablet PC.
  • the terminal 3000 may include a display unit including a touch screen, a processor, a memory unit, and an interface unit.
  • the terminal device 3000 may be provided with an app for controlling the sound device 1000 '.
  • the app When the app is executed by the user of the terminal device 3000, the position of each virtual speaker of the plurality of channel sound source signals generated by the sound source separation unit 100 may be displayed on the display unit of the terminal device 3000 .
  • the terminal device 3000 may provide a stereo sound source signal to the audio device 1000 '.
  • the terminal 3000 may further include a tone generator (not shown).
  • the position adjustment unit 500 processes a plurality of channel sound source signals received from the sound source separation unit 100 based on a position control signal from the terminal device 3000.
  • the processing of a plurality of channel sound source signals means that when each processed sound source signal is outputted through the sound output unit 300, the sound source signal is generated at a predetermined position in a predetermined space, Means processing a channel sound source signal.
  • the preset predetermined space is determined by the position control signal received from the terminal device 3000.
  • the first virtual speaker in which the position control signal from the terminal 3000 is generated and the sound of the center channel sound source signal (Center) of FIG. 2 is generated
  • the second virtual speaker which is located at the first position P1 on the front side and on which the sound of the first channel sound source signal R_new of FIG. 2 is generated, is located at the second position P2 adjacent to the right side of the speaker 190
  • the third virtual speaker in which the sound of the second channel sound source signal L_new of FIG. 2 is generated, is located at the third position P3.
  • the position adjustment unit 500 determines the position of the center channel sound source signal (Center) as if the sound of the center channel sound source signal (Center) was radiated at the first position (P1) Processes the first channel sound source signal R_new as if the sound of the first channel sound source signal R_new modified in the second position P2 is radiated and processes the first channel sound source signal R_new in the third position P3, And processes the second channel sound source signal R_new as the sound of the two channel sound source signal L_new is radiated.
  • the position adjustment unit 500 may calculate a transfer function between the sound source signal input to each speaker of the speaker unit 330 of the sound output unit 300 and the sound pressure output from each of the positions P1, P2, and P3.
  • the transfer function represents the characteristics of the space in which the listener is located, and may be stored in a memory (not shown) of the audio device 1000 'after actual measurement.
  • the transfer function of each of the positions P1, P2, and P3 may be generated by the number of speakers included in the speaker unit 330 and may be expressed as a function of frequency.
  • transfer function is measured at some positions and stored in a memory (not shown) of the acoustic device 1000 ', a transfer function of an arbitrary position between some of the positions is generated by interpolating the transfer functions of the certain positions It is possible.
  • the position adjustment unit 500 calculates a coefficient for converting each channel sound source signal by using a previously calculated transfer function so that sound sounds as if it is reproduced at each of the positions P1, P2, and P3.
  • calculating the coefficient it is desirable to determine a coefficient such that the sound pressure level at the position is higher than the sound pressure level in the region other than the position. More specifically, it is possible to calculate a coefficient that maximizes the ratio of the acoustic potential energy density at the position to the sum of the energies of the individual sound sources.
  • a single frequency is described, it can be understood that when a plurality of frequencies are used, the sound source for each frequency is determined.
  • the coefficient may be a coefficient for converting the magnitude and phase of each channel sound source signal.
  • a coefficient for converting the magnitude of the sound output from the i-th speaker (where i is a natural number) of the speaker unit 330 is a magnitude of a transfer function vector of all speakers for the position, i < th > speaker.
  • the coefficient for converting the phase difference of the sound source signal input to the i-th speaker can be obtained, for example, by declining the complex number of the transfer function of the i-th speaker.
  • the position adjusting unit 500 may filter each channel sound source signal with a determined coefficient to generate a sound source signal for each speaker input to each speaker of the speaker unit 330.
  • the generated sound source signal for each speaker is converted into a sound wave through the speaker unit 330 so that the listener feels as if the sound of the corresponding channel sound source signal is generated at each position.
  • the speaker 10 does not only have the advantage of the audio device 1000 shown in FIG. 9, but also allows the listener to receive the virtual speaker 300 of each channel sound source signal through the external terminal 300 There is an advantage in that the listener can feel the spatial feeling of the sound outputted through the speaker unit 330. In addition, a listener may obtain the same effect as listening to a vocal sound at a specific position in a normal stereo sound source.
  • FIG. 11 is a block diagram of a sound device 1000 '' according to another embodiment of the present invention.
  • an acoustic device 1000 '' includes a sound source separation unit 100, a user input unit 700, a position adjustment unit 500, and an acoustic output unit 300 .
  • the sound source separation unit 100, the position adjustment unit 500, and the sound output unit 300 except for the user input unit 700 include the sound source separation unit 100, the position adjustment unit 500, Is the same as the output unit 300, and a specific description thereof is replaced with the one described above.
  • the acoustic device 1000 " according to yet another embodiment includes a user input 700.
  • the user input unit 700 generates a position control signal corresponding to the user input and outputs the generated position control signal to the position adjustment unit 500.
  • the user drags the first virtual speaker S1, which is one of the virtual speakers S1, S2, S3 for each of a plurality of channel sound source signals displayed on the screen 735a, and then drags the first virtual speaker S1 to a predetermined position Can be moved.
  • a position control signal as the first virtual speaker S1 moves is generated in the user input unit 700 and the user input unit 700 can output the generated position control signal to the position adjustment unit 500 in real time.
  • the first virtual speaker S1 corresponds to the first position P1 shown in Fig. 5
  • the second virtual speaker S2 corresponds to the second position P2 shown in Fig. 5
  • the virtual speaker S3 may correspond to the third position P3 shown in Fig.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Stereophonic System (AREA)

Abstract

The present invention relates to a sound source separation device and to audio equipment and, more specifically, to a sound source separation device and to audio equipment, which can separate a stereo sound source signal which has been input, into a plurality of channel sound source signals on a real time basis. The sound source separation device according to an embodiment comprises: a reception unit for receiving a stereo sound source signal including a first channel sound source signal and a second channel sound source signal; and a multi-channel generation unit for generating at least three channel sound source signals on the basis of the stereo sound source signal received from the reception unit.

Description

음원 분리 장치 및 음향기기Sound source separation device and sound device
본 발명은 음원 분리 장치 및 음향기기에 관한 것으로, 더욱 상세하게는 입력되는 스테레오 음원신호를 복수의 채널 음원신호로 실시간으로 분리할 수 있는 음원 분리 장치 및 음향기기에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a sound source separation device and a sound device, and more particularly, to a sound source separation device and a sound device capable of real-time separation of an input stereo sound source signal into a plurality of channel sound source signals.
음향기기는 다양한 음원신호들을 음파로 변환하여 출력하는 기기를 의미한다. 음향기기는, 예를 들어, 음성이나 음악을 듣기 위한 기기, 또는　음향 측심기나　어군 탐지기　등과 같이 음향을 이용하여 계측이나 탐사를 하는 기기를 포함할 수 있다.A sound device refers to a device that converts various sound source signals into sound waves and outputs them. The acoustic device may include, for example, a device for listening to voice or music, or a device for measuring or exploring using acoustic such as an echo sounder or a fish finder.
종래에 음향기기는 입력되는 스테레오 음원신호를 단순 증폭하여 출력하는 것이 대부분이였다.Conventionally, most of the sound apparatus simply amplifies and outputs the input stereo sound signal.
외부에서 제공되는 스테레오 음원신호는 2개의 채널 음원신호로 구성되어 있지만, 각 채널 음원신호에는 악기 소리와 보컬 소리가 이미 녹음된 것이기 때문에, 각 채널 음원신호에서 특정 소리, 예를 들어 보컬 소리만을 완벽하게 분리하는 것은 불가능하다. Although the external stereo sound source signal is composed of two channel sound source signals, since each sound source signal of the channel has already recorded the instrument sound and the vocal sound, only a specific sound, for example, vocal sound It is impossible to separate it.
그런데, 최근 외부에서 제공되는 스테레오 음원신호에서 특정 소리를 분리하는 몇 가지 시도가 있었다. 구체적으로, (특허문헌 1)에서 주파수 분석(FFT)이나 채널 연관성 분석(correlation)을 이용하여 스테레오 음원신호에서 특정 소리를 분리하는 시도가 일 예이다. 그러나, 주파수 분석이나 채널 연관성 분석은 프로세스 연산량이 많기 때문에, 실시간으로 불가능한 단점이 있다.However, recently there have been several attempts to isolate a particular sound from an externally supplied stereo source signal. Specifically, an example of an attempt to separate a specific sound from a stereo sound source signal using frequency analysis (FFT) or channel correlation analysis is disclosed in (Patent Document 1). However, frequency analysis and channel correlation analysis have a disadvantage in that they can not be performed in real time because of the large amount of process computation.
본 발명의 실시 형태가 해결하고자 하는 과제는, 스테레오 음원신호를 적어도 3개 이상의 복수의 채널 음원신호들로 실시간으로 분리할 수 있는 음원 분리 장치 및 음향기기를 제공한다.SUMMARY OF THE INVENTION An object of the present invention is to provide a sound source separation device and a sound device capable of real-time separation of a stereo sound source signal into at least three or more channel sound source signals in real time.
또한, 스테레오 음원신호를 처리하여 청취자에게 소정의 공간감을 제공할 수 있는 음원 분리 장치 및 음향기기를 제공한다.There is also provided a sound source separation device and a sound device capable of processing a stereo sound source signal to provide a predetermined spatial feeling to a listener.
또한, 외부의 단말기기를 통해 청취자가 직접 공간감을 조절하게 할 수 있는 음원 분리 장치 및 음향기기를 제공한다.The present invention also provides a sound source separation device and a sound device in which a listener can directly control the spatial sense through an external terminal device.
또한, 내부에 구비된 사용자 입력부를 통해 청취자가 직접 공간감을 조절하게 할 수 있는 음원 분리 장치 및 음향기기를 제공한다.The present invention also provides a sound source separation device and a sound device in which a listener can directly control the spatial feeling through a user input unit provided therein.
실시 형태에 따른 음원 분리 장치는, 제1 채널 음원신호와 제2 채널 음원신호를 포함하는 스테레오 음원신호를 수신하는, 수신부; 및 상기 수신부로부터 수신된 상기 스테레오 음원신호를 기초로 적어도 3개 이상의 채널 음원신호들을 생성하는, 다채널 생성부;를 포함한다.A sound source separation apparatus according to an embodiment of the present invention includes: a receiver for receiving a stereo sound source signal including a first channel sound source signal and a second channel sound source signal; And a multi-channel generator for generating at least three channel sound source signals based on the stereo sound source signal received from the receiver.
여기서, 상기 다채널 생성부는, 상기 제1 채널 음원신호를 제1 증폭도로 증폭한 것과 상기 제2 채널 음원신호를 제2 증폭도로 증폭한 것을 합하여 수정된 제1 채널 음원신호를 생성하고, 상기 제1 채널 음원신호와 상기 제2 채널 음원신호를 합하여 센터 채널 음원신호를 생성하고, 상기 제2 채널 음원신호를 상기 제1 증폭도로 증폭한 것과 상기 제1 채널 음원신호를 상기 제2 증폭도로 증폭한 것을 합하여 수정된 제2 채널 음원신호를 생성할 수 있다.Here, the multi-channel generator generates a modified first channel sound source signal by summing the first channel sound source signal amplified by the first amplification degree and the second channel sound source signal amplified by the second amplification degree, A method of generating a center channel sound source signal by summing a one-channel sound source signal and a second channel sound source signal, amplifying the second channel sound source signal with the first amplification degree, amplifying the first channel sound source signal with the second amplification degree Thereby generating a modified second channel sound source signal.
여기서, 상기 제1 증폭도의 절대값은 상기 제2 증폭도의 절대값보다 클 수 있다.Here, the absolute value of the first amplification factor may be greater than the absolute value of the second amplification factor.
여기서, 상기 제1 증폭도는 2이고, 상기 제2 증폭도는 -1일 수 있다.Here, the first amplification degree may be 2, and the second amplification degree may be -1.
여기서, 상기 음원 분리부에서 생성된 상기 채널 음원신호들을 수신하고, 단말기기로부터 포지션 제어신호를 수신하는, 포지션 조정부;를 더 포함하고, 상기 포지션 조정부는, 상기 포지션 제어신호에 기초하여 상기 음원 분리부에서 생성된 상기 채널 음원신호들을 처리하고, 상기 포지션 조정부에서 처리된 상기 채널 음원신호들이 음향 출력 장치를 통해 출력되면, 상기 포지션 제어신호에 대응되는 소정의 공간들에서 상기 채널 음원신호들이 발생되는 것처럼 청취자에게 인식될 수 있다.And a position adjustment unit receiving the channel sound source signals generated by the sound source separation unit and receiving a position control signal from the terminal device, wherein the position adjustment unit adjusts the position of the sound source separation unit based on the position control signal, When the channel sound source signals processed in the position adjustment unit are outputted through the sound output apparatus, the channel sound source signals are generated in predetermined spaces corresponding to the position control signal ≪ / RTI >
여기서, 사용자 입력에 대응하는 포지션 제어신호를 생성하는 사용자 입력부; 및 상기 음원 분리부에서 생성된 상기 채널 음원신호들을 수신하고, 상기 사용자 입력부로부터 포지션 제어신호를 수신하는, 포지션 조정부;를 더 포함하고, 상기 포지션 조정부는, 상기 포지션 제어신호에 기초하여 상기 음원 분리부에서 생성된 상기 채널 음원신호들을 처리하고, 상기 포지션 조정부에서 처리된 상기 채널 음원신호들이 음향 출력 장치를 통해 출력되면, 상기 포지션 제어신호에 대응되는 소정의 공간들에서 상기 채널 음원신호들이 발생되는 것처럼 청취자에게 인식될 수 있다.A user input unit for generating a position control signal corresponding to a user input; And a position adjustment unit receiving the channel sound source signals generated by the sound source separation unit and receiving a position control signal from the user input unit, wherein the position adjustment unit adjusts the position of the sound source separation unit based on the position control signal, When the channel sound source signals processed in the position adjustment unit are outputted through the sound output apparatus, the channel sound source signals are generated in predetermined spaces corresponding to the position control signal ≪ / RTI >
여기서, 상기 사용자 입력부는, 상기 포지션 조정부로부터 제공되는 소정의 정보를 표시하는 화면을 갖는 디스플레이부를 포함하고, 상기 소정의 정보는, 상기 소정의 공간들에 대응되는 가상 스피커들의 포지션 정보를 포함할 수 있다.Here, the user input unit may include a display unit having a screen for displaying predetermined information provided from the position adjustment unit, and the predetermined information may include position information of virtual speakers corresponding to the predetermined spaces have.
여기서, 상기 사용자 입력부는, 상기 소정의 공간들에 대응되는 가상 스피커들의 포지션을 조절하는 조절 스위치일 수 있다.Here, the user input unit may be an adjustment switch for adjusting positions of virtual speakers corresponding to the predetermined spaces.
실시 형태에 따른 음향기기는, 제1 채널 음원신호와 제2 채널 음원신호를 포함하는 스테레오 음원신호를 수신하고, 수신된 상기 스테레오 음원신호를 기초로 적어도 3개 이상의 채널 음원신호들을 생성하는, 음원 분리부; 및 상기 음원 분리부에서 생성된 상기 채널 음원신호들을 증폭하는 엠프와 상기 음원 분리부에서 생성된 상기 채널 음원신호들을 음파로 변환하여 출력하는 스피커부 중 적어도 하나 이상을 포함하는, 음향 출력부;를 포함한다.The sound device according to an embodiment of the present invention includes a stereo sound source including a first channel sound source signal and a second channel sound source signal and generating at least three channel sound source signals based on the received stereo sound source signal, Separator; And an acoustic output unit including at least one of an amplifier for amplifying the channel sound source signals generated by the sound source separation unit and a speaker unit for converting the channel sound source signals generated at the sound source separation unit into sound waves and outputting the sound waves, .
여기서, 상기 음원 분리부는, 상기 제1 채널 음원신호를 제1 증폭도로 증폭한 것과 상기 제2 채널 음원신호를 제2 증폭도로 증폭한 것을 합하여 수정된 제1 채널 음원신호를 생성하고, 상기 제1 채널 음원신호와 상기 제2 채널 음원신호를 합하여 센터 채널 음원신호를 생성하고, 상기 제2 채널 음원신호를 상기 제1 증폭도로 증폭한 것과 상기 제1 채널 음원신호를 상기 제2 증폭도로 증폭한 것을 합하여 수정된 제2 채널 음원신호를 생성할 수 있다.Here, the sound source separation unit may generate a modified first channel sound source signal by summing the first channel sound source signal amplified by the first amplification degree and the second channel sound source signal by amplifying the second channel sound source signal by the second amplification degree, A channel sound source signal and the second channel sound source signal are combined to generate a center channel sound source signal, the second channel sound source signal is amplified by the first amplification degree, and the first channel sound source signal is amplified by the second amplification degree Thereby generating a modified second channel sound source signal.
여기서, 상기 제1 증폭도의 절대값은 상기 제2 증폭도의 절대값보다 클 수 있다.Here, the absolute value of the first amplification factor may be greater than the absolute value of the second amplification factor.
여기서, 상기 제1 증폭도는 2이고, 상기 제2 증폭도는 -1일 수 있다.Here, the first amplification degree may be 2, and the second amplification degree may be -1.
여기서, 상기 음원 분리부와 상기 음향 출력부 사이에 연결되고, 상기 음원 분리부에서 생성된 상기 채널 음원신호들을 수신하고, 단말기기로부터 포지션 제어신호를 수신하는, 포지션 조정부;를 더 포함하고, 상기 포지션 조정부는, 상기 포지션 제어신호에 기초하여 상기 음원 분리부에서 생성된 상기 채널 음원신호들을 처리하고, 상기 포지션 조정부에서 처리된 상기 채널 음원신호들이 상기 음향 출력부를 통해 출력되면, 상기 포지션 제어신호에 대응되는 소정의 공간들에서 상기 채널 음원신호들이 발생되는 것처럼 청취자에게 인식될 수 있다.And a position adjustment unit connected between the sound source separation unit and the sound output unit and receiving the channel sound source signals generated by the sound source separation unit and receiving a position control signal from the terminal, The position adjustment unit processes the channel sound source signals generated by the sound source separation unit based on the position control signal and outputs the position control signal when the channel sound source signals processed by the position adjustment unit are outputted through the sound output unit It can be recognized by the listener as if the channel sound sources are generated in corresponding predetermined spaces.
여기서, 사용자 입력에 대응하는 포지션 제어신호를 생성하는 사용자 입력부; 및 상기 음원 분리부와 상기 음향 출력부 사이에 연결되고, 상기 음원 분리부에서 생성된 상기 채널 음원신호들을 수신하고, 상기 사용자 입력부로부터 포지션 제어신호를 수신하는, 포지션 조정부;를 더 포함하고, 상기 포지션 조정부는, 상기 포지션 제어신호에 기초하여 상기 음원 분리부에서 생성된 상기 채널 음원신호들을 처리하고, 상기 포지션 조정부에서 처리된 상기 채널 음원신호들이 상기 음향 출력부를 통해 출력되면, 상기 포지션 제어신호에 대응되는 소정의 공간들에서 상기 채널 음원신호들이 발생되는 것처럼 청취자에게 인식될 수 있다.A user input unit for generating a position control signal corresponding to a user input; And a position adjustment unit connected between the sound source separation unit and the sound output unit and receiving the channel sound source signals generated by the sound source separation unit and receiving a position control signal from the user input unit, The position adjustment unit processes the channel sound source signals generated by the sound source separation unit based on the position control signal and outputs the position control signal when the channel sound source signals processed by the position adjustment unit are outputted through the sound output unit It can be recognized by the listener as if the channel sound sources are generated in corresponding predetermined spaces.
상기 사용자 입력부는, 상기 포지션 조정부로부터 제공되는 소정의 정보를 표시하는 화면을 갖는 디스플레이부를 포함하고, 상기 소정의 정보는, 상기 소정의 공간들에 대응되는 가상 스피커들의 포지션 정보를 포함할 수 있다.The user input unit may include a display unit having a screen for displaying predetermined information provided from the position adjustment unit, and the predetermined information may include position information of virtual speakers corresponding to the predetermined spaces.
상기 사용자 입력부는, 상기 소정의 공간들에 대응되는 가상 스피커들의 포지션을 조절하는 조절 스위치일 수 있다.The user input unit may be an adjustment switch for adjusting positions of virtual speakers corresponding to the predetermined spaces.
본 발명의 실시 형태에 따른 음원 분리 장치 및 음향기기를 사용하면, 스테레오 음원신호를 적어도 3개 이상의 복수의 채널 음원신호들로 실시간으로 분리할 수 있는 이점이 있다.The use of the sound source separation device and the sound device according to the embodiments of the present invention has an advantage in that the stereo sound source signal can be separated in real time into at least three or more channel sound source signals.
또한, 스테레오 음원신호를 처리하여 청취자에게 소정의 공간감을 제공할 수 있는 이점이 있다.In addition, there is an advantage that a predetermined spatial feeling can be provided to the listener by processing the stereo sound source signal.
또한, 음향기기 외부에 위치한 단말기기를 통해 청취자가 직접 공간감을 조절하게 할 수 있는 이점이 있다.In addition, there is an advantage that the listener can directly control the sense of space through the terminal device located outside the audio equipment.
또한, 음향기기 내부에 구비된 사용자 입력부를 통해 청취자가 직접 공간감을 조절하게 할 수 있는 이점이 있다.Further, there is an advantage that the listener can directly control the spatial feeling through the user input unit provided in the audio equipment.
도 1은 본 발명의 일 실시 형태에 따른 음원 분리 장치(100)의 블록도이다.1 is a block diagram of a sound source separation apparatus 100 according to an embodiment of the present invention.
도 2는 도 1에 도시된 다채널 생성부(130)가 스테레오 음원신호로부터 3개의 채널 음원신호들을 실시간으로 생성하는 과정을 설명하기 위한 도면이다.FIG. 2 is a diagram for explaining a process in which the multi-channel generating unit 130 shown in FIG. 1 generates three channel sound source signals from a stereo sound source signal in real time.
도 3은 본 발명의 다른 실시 형태에 따른 음원 분리 장치(100')의 블록도이다.3 is a block diagram of a sound source separation apparatus 100 'according to another embodiment of the present invention.
도 4는 도 3에 도시된 단말기기(3000)의 화면(3350a)을 보여주는 도면이다.FIG. 4 is a view showing a screen 3350a of the terminal device 3000 shown in FIG.
도 5는 도 3에 도시된 음원 분리 장치(100')의 포지션 조정부(150)에서 처리된 채널 음원신호들이 음향 출력 장치(190)를 통해 출력되었을 때, 청취자가 각 채널 음원신호들이 발생되는 것처럼 느끼는 소정 포지션들(P1, P2, P3)을 설명하기 위한 예시 도면이다.FIG. 5 is a block diagram of the sound output apparatus 190 of FIG. 3 when the channel sound source signals processed by the position adjustment unit 150 of the sound source separation apparatus 100 'are outputted through the sound output apparatus 190, P2, and P3, respectively.
도 6은 도 3에 도시된 음원 분리 장치(100')의 음향 효과를 설명하기 위한 도면이다.FIG. 6 is a view for explaining a sound effect of the sound source separation apparatus 100 'shown in FIG.
도 7은 본 발명의 또 다른 실시 형태에 따른 음원 분리 장치(100'')의 블록도이다.7 is a block diagram of a sound source separation apparatus 100 '' according to another embodiment of the present invention.
도 8은 도 7에 도시된 사용자 입력부(170)의 화면(735a)을 보여주는 도면이다.FIG. 8 is a view showing a screen 735a of the user input unit 170 shown in FIG.
도 9는 본 발명의 일 실시 형태에 따른 음향기기(1000)의 블록도이다.9 is a block diagram of an audio equipment 1000 according to an embodiment of the present invention.
도 10은 본 발명의 다른 실시 형태에 따른 음향기기(1000')의 블록도이다.10 is a block diagram of an acoustic device 1000 'according to another embodiment of the present invention.
도 11은 본 발명의 또 다른 실시 형태에 따른 음향기기(1000'')의 블록도이다.11 is a block diagram of a sound device 1000 '' according to another embodiment of the present invention.
후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시 형태를 예시로서 도시하는 첨부 도면을 참조한다. 이들 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시 형태는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시예에 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시 형태로 구현될 수 있다. 또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 본 발명의 범위는, 적절하게 설명된다면, 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다.The following detailed description of the invention refers to the accompanying drawings, which illustrate, by way of example, specific embodiments in which the invention may be practiced. These embodiments are described in sufficient detail to enable those skilled in the art to practice the invention. It should be understood that the various embodiments of the present invention may be different but need not be mutually exclusive. For example, certain features, structures, and characteristics described herein may be implemented in other embodiments without departing from the spirit and scope of the invention in connection with one embodiment. It is also to be understood that the position or arrangement of the individual components within each disclosed embodiment may be varied without departing from the spirit and scope of the invention. The following detailed description is, therefore, not to be taken in a limiting sense, and the scope of the present invention is to be limited only by the appended claims, along with the full scope of equivalents to which such claims are entitled, if properly explained. In the drawings, like reference numerals refer to the same or similar functions throughout the several views.
도 1은 본 발명의 일 실시 형태에 따른 음원 분리 장치(100)의 블록도이다. 1 is a block diagram of a sound source separation apparatus 100 according to an embodiment of the present invention.
도 1을 참조하면, 본 발명의 실시 형태에 따른 음원 분리 장치(100)는, 입력되는 스테레오 음원신호를 처리하여 실시간으로 복수의 채널 음원신호를 생성할 수 있다. 생성된 복수의 채널 음원신호는 음원 분리 장치(100)와 연결되는 음향 출력 장치(미도시)를 통해 출력될 수 있다. Referring to FIG. 1, a sound source separation apparatus 100 according to an embodiment of the present invention can process a received stereo sound source signal to generate a plurality of channel sound source signals in real time. The generated plurality of channel sound source signals may be output through an audio output device (not shown) connected to the sound source separation device 100.
본 발명의 실시 형태에 따른 음원 분리 장치(100)는 기존의 일반적인 음향 출력 장치(미도시)의 스테레오 음원신호 입력단자에 장착되어, 외부에서 입력되는 스테레오 음원신호를 실시간으로 분리하여 음향 출력 장치(미도시)로 출력시킬 수도 있다.The sound source separation apparatus 100 according to the embodiment of the present invention is mounted on a stereo sound source signal input terminal of a conventional general sound output apparatus (not shown), separates stereo sound source signals input from the outside in real time, (Not shown).
도 1을 참조하면, 일 실시 형태에 따른 음원 분리 장치(100)는, 수신부(110)과 다채널 생성부(130)를 포함한다.Referring to FIG. 1, a sound source separation apparatus 100 according to an embodiment includes a reception unit 110 and a multi-channel generation unit 130.
수신부(110)는 스테레오 음원신호를 수신한다. 스테레오 음원신호는 적어도 2개 이상의 채널 음원신호를 포함한다. 2개의 채널 음원신호는 왼쪽 채널 음원신호와 오른쪽 채널 음원신호일 수 있다. 수신부(110)는 예를 들면 블루투스(Bluetooth) 수신기 등의 무선 인터페이스일 수도 있고, 유선 접속을 위한 인터페이스일 수도 있다.The receiving unit 110 receives the stereo sound source signal. The stereo sound source signal includes at least two or more channel sound source signals. The two channel sound source signals may be left channel sound source signals and right channel sound source signals. The receiving unit 110 may be a wireless interface such as a Bluetooth receiver, or may be an interface for a wired connection.
다채널 생성부(130)는 수신부(110)에서 수신한 스테레오 음원신호를 처리하여 복수의 채널 음원신호들을 생성한다. 여기서, 복수의 채널 음원신호들은 적어도 3개 이상일 수 있다. 다채널 생성부(130)는 실시간으로 3개 이상의 채널 음원신호들을 생성할 수 있다. 이하, 도 2를 참조하여 다채널 생성부(130)가 스테레오 음원신호로부터 3개의 채널 음원신호들을 생성하는 일 예를 구체적으로 설명한다.The multi-channel generating unit 130 processes the stereo sound source signals received by the receiving unit 110 to generate a plurality of channel sound sources. Here, the plurality of channel sound source signals may be at least three or more. The multi-channel generating unit 130 may generate three or more channel sound source signals in real time. Hereinafter, an example in which the multi-channel generating unit 130 generates three channel sound source signals from a stereo sound source signal will be described in detail with reference to FIG.
도 2는 도 1에 도시된 다채널 생성부(130)가 스테레오 음원신호로부터 3개의 채널 음원신호들을 실시간으로 생성하는 과정을 설명하기 위한 도면이다.FIG. 2 is a diagram for explaining a process in which the multi-channel generating unit 130 shown in FIG. 1 generates three channel sound source signals from a stereo sound source signal in real time.
다채널 생성부(130)는 스테레오 음원신호의 제1 채널 음원신호(L)와 제2 채널 음원신호(R)을 수신하여 3개의 채널 음원신호들(L_new, Center, R_new)을 생성한다. 여기서, 제1 채널 음원신호(L)는 2채널 스테레오 음원신호의 왼쪽 채널 음원신호일 수 있고, 제2 채널 음원신호(R)는 2채널 스테레오 음원신호의 오른쪽 채널 음원신호일 수 있다. The multi-channel generating unit 130 receives the first channel sound source signal L and the second channel sound source signal R of the stereo sound source signal and generates three channel sound source signals L_new, Center, R_new. Here, the first channel sound source signal L may be a left channel sound source signal of a two channel stereo sound source signal, and the second channel sound source signal R may be a right channel sound source signal of a two channel stereo sound source signal.
다채널 생성부(130)에서 생성되는 3개의 채널 음원신호들은 수정된 제1 채널 음원신호(L_new), 센터 채널 음원신호(Center), 및 수정된 제2 채널 음원신호(R_new)을 포함할 수 있다. 도 2에서는 3개의 채널 음원신호가 새롭게 생성되는 것으로 도시되어 있으나, 이에 한정하는 것은 아니다. 예를 들어, 4개 이상의 채널 음원신호가 생성될 수도 있다.The three channel sound source signals generated by the multi-channel generating unit 130 may include a modified first channel sound source signal L_new, a center channel sound source signal Center, and a modified second channel sound source signal R_new have. In FIG. 2, three channel sound source signals are newly generated, but the present invention is not limited thereto. For example, four or more channel sound source signals may be generated.
다채널 생성부(130)는 제1 채널 음원신호(L)를 제1 증폭도로 증폭한 것과 제2 채널 음원신호(R)를 제2 증폭도로 증폭한 것을 합하여 수정된 제1 채널 음원신호(L_new)를 생성한다. 여기서, 제1 증폭도의 절대값이 제2 증폭도의 절대값보다 크다. The multichannel generating unit 130 generates a modified first channel sound source signal L_new by summing the first channel sound source signal L amplified by the first amplification degree and the second channel sound source signal R amplified by the second amplification degree, ). Here, the absolute value of the first amplification degree is larger than the absolute value of the second amplification degree.
도 2에서, 다채널 생성부(130)는 제1 채널 음원신호(L)를 2배 증폭한 것(2L)과 제2 채널 음원신호(R)를 -1배 증폭한 것(-R)을 합하여 수정된 제1 채널 음원신호(L_new)를 생성한다. 여기서, 제1 채널 음원신호(L)를 증폭하는 제1 증폭도가 2로 한정되는 것은 아니다. 예를 들어 제1 채널 음원신호(L)를 증폭하는 제1 증폭도는 설계에 따라 달라질 수 있다. 또한, 제2 채널 음원신호(R)를 증폭하는 제2 증폭도가 -1로 한정되는 것은 아니다. 예를 들어, 제2 채널 음원신호(R)를 증폭하는 제2 증폭도는 설계에 따라 달라질 수 있다. 2, the multi-channel generator 130 multiplies the first channel sound source signal L by two times (2L) and the second channel sound source signal R by -1 times (-R) Thereby generating a modified first channel sound source signal L_new. Here, the first amplification degree for amplifying the first channel sound source signal L is not limited to two. For example, the first amplification degree for amplifying the first channel sound source signal L may vary depending on the design. In addition, the second amplification degree for amplifying the second channel sound source signal R is not limited to -1. For example, the second amplification for amplifying the second channel sound source signal R may vary depending on the design.
다채널 생성부(130)는 제1 채널 음원신호(L)와 제2 채널 음원신호(R)를 합하여 센터 채널 음원신호(Center)를 생성한다.The multi-channel generating unit 130 generates a center channel sound source signal (Center) by adding the first channel sound source signal L and the second channel sound source signal R to each other.
다채널 생성부(130)는 제2 채널 음원신호(R)를 제1 증폭도로 증폭한 것과 제1 채널 음원신호(L)를 제2 증폭도로 증폭한 것을 합하여 수정된 제2 채널 음원신호(R_new)를 생성한다. 여기서, 제1 증폭도의 절대값이 제2 증폭도의 절대값보다 크다. The multi-channel generating unit 130 generates a second channel sound source signal R_new by summing the second channel sound source signal R amplified by the first amplification degree and the first channel sound source signal L amplified by the second amplification degree, ). Here, the absolute value of the first amplification degree is larger than the absolute value of the second amplification degree.
도 2에서, 다채널 생성부(130)는 제2 채널 음원신호(R)를 2배 증폭한 것(2R)과 제1 채널 음원신호(L)를 -1배 증폭한 것(-L)을 합하여 수정된 제2 채널 음원신호(R_new)를 생성한다. 여기서, 제2 채널 음원신호(R)를 증폭하는 제1 증폭도가 2로 한정되는 것은 아니며, 제1 채널 음원신호(L)를 증폭하는 제2 증폭도가 -1로 한정되는 것은 아니다. 설계에 따라 증폭비는 변경될 수 있다.2, the multi-channel generator 130 multiplies the second channel sound source signal R by two times (2R) and the first channel sound source signal L by -1 times (-L) And generates a modified second channel sound source signal R_new. Here, the first amplification degree for amplifying the second channel sound source signal R is not limited to 2, and the second amplification degree for amplifying the first channel sound source signal L is not limited to -1. Depending on the design, the amplification ratio can be changed.
상기의 예는, 제 1 채널 음원신호(L)와 제 2 채널 음원신호(R)가 각각 다음과 같은 음원에 의해 생성된다고 가정한 경우이다. 하기 식에서 l은 좌측에 위치한 음원성분, c는 중앙에 위치한 음원성분, r은 우측에 위치한 음원성분이다.The above example assumes that the first channel sound source signal L and the second channel sound source signal R are respectively generated by the following sound sources. In the following equation, l is a sound source component located on the left side, c is a sound source component located in the center, and r is a sound source component located on the right side.
L = l + c/2L = l + c / 2
R = r + c/2R = r + c / 2
이러한 경우에 제 1 증폭도가 2이고 제 2 증폭도가 -1이라면 출력신호는 다음과 같다.In this case, if the first amplification degree is 2 and the second amplification degree is -1, the output signal is as follows.
L_new = 2l - r + c/2L_new = 2l - r + c / 2
Center = l + r + cCenter = l + r + c
R_new = 2r - l + c/2R_new = 2r - l + c / 2
즉, 수정된 제1 채널 음원신호(L_new)는 좌측 음원성분(l)이 강조되고, 수정된 제2 채널 음원신호(R_new)는 우측 음원성분(r)이 강조된다. 음원성분의 숫자 및 위치에 따라 제 1 증폭도 및 제 2 증폭도를 적절하게 조절할 수 있다.That is, the left sound source component 1 is emphasized in the modified first channel sound source signal L_new, and the right sound source component r is emphasized in the modified second channel sound source signal R_new. The first amplification degree and the second amplification degree can be appropriately adjusted according to the number and position of the sound source component.
이와 같이, 다채널 생성부(130)는 입력되는 2채널 스테레오 음원신호를 소정의 증폭도로 증폭하고 및 합하는 간단한 두 가지 연산을 통해 3개 이상의 새로운 채널 음원신호들(L_new, Center, R_new)을 생성하기 때문에, 2채널 스테레오 음원신호로부터 실시간으로 1개의 센터 채널 음원신호와 2개의 수정된 채널 음원신호들을 생성할 수 있는 이점이 있다.As described above, the multi-channel generating unit 130 generates three or more new channel sound source signals (L_new, Center, R_new) through two simple operations of amplifying and summing the input two-channel stereo sound source signal with a predetermined amplification degree There is an advantage that one center channel sound source signal and two modified channel sound source signals can be generated in real time from a two channel stereo sound source signal.
또한, 센터 채널 음원신호(Center)는 제1 채널 음원신호(L)와 제2 채널 음원신호(R)를 더한 것으로 구성되기 때문에, 제1 채널 음원신호(L)와 제2 채널 음원신호(R) 각각에 이미 포함된 특정 소리, 예를 들어 보컬 소리의 크기가 2배 증가하게 된다. 따라서, 스테레오 음원신호가 아무런 프로세싱없이 음향 출력 장치(미도시)를 통해서 방출될 때와 대비하여, 보컬 소리가 더 크게 청취자에게 느껴지게 할 수 있는 이점이 있다.The center channel sound source signal Center includes the first channel sound source signal L and the second channel sound source signal R plus the first channel sound source signal L and the second channel sound source signal R ), The magnitude of a particular sound already included in each, for example a vocal sound, is doubled. Accordingly, there is an advantage that the vocal sound can be felt to a larger audience as compared with when the stereo sound source signal is emitted through an audio output device (not shown) without any processing.
도 3은 본 발명의 다른 실시 형태에 따른 음원 분리 장치(100')의 블록도이다.3 is a block diagram of a sound source separation apparatus 100 'according to another embodiment of the present invention.
도 3을 참조하면, 다른 실시 형태에 따른 음원 분리 장치(100')는, 수신부(110), 다채널 생성부(130), 및 포지션 조정부(150)를 포함한다. 여기서, 수신부(110) 및 다채널 생성부(130)는 도 1 내지 도 2에 도시된 수신부(110) 및 다채널 생성부(130)와 동일하므로, 구체적인 설명은 앞서 설명한 것으로 대체한다.Referring to FIG. 3, a sound source separation apparatus 100 'according to another embodiment includes a reception unit 110, a multi-channel generation unit 130, and a position adjustment unit 150. Here, the receiving unit 110 and the multi-channel generating unit 130 are the same as the receiving unit 110 and the multi-channel generating unit 130 shown in FIG. 1 and FIG. 2, respectively.
포지션 조정부(150)는, 음원 분리 장치(100')와는 물리적으로 별개인, 외부의 단말기기(3000)로부터 포지션 제어신호를 수신한다. 포지션 제어신호는 유선 또는 무선을 통해 음원 분리 장치(100')로 수신될 수 있다. 이를 위해, 음원 분리 장치(100')는 단말기기(3000)로부터의 포지션 제어신호를 수신 및 처리하는 통신부(미도시)를 더 포함할 수 있다.The position adjustment unit 150 receives a position control signal from an external terminal 3000 that is physically separate from the sound source separation apparatus 100 '. The position control signal may be received by the sound source separation apparatus 100 'via wired or wireless communication. To this end, the sound source separation apparatus 100 'may further include a communication unit (not shown) for receiving and processing a position control signal from the terminal device 3000.
단말기기(3000)는 스마트폰과 태블릿 PC 등과 같이 유/무선 통신이 가능한 휴대 단말기기일 수 있다. 단말기기(3000)는 터치 스크린을 포함한 디스플레이부, 프로세서, 메모리부 및 인터페이스부를 포함할 수 있다. 단말기기(3000)에는 음원 분리 장치(100')를 제어하기 위한 앱(App)이 설치되어 있을 수 있다. 상기 앱이 단말기기(3000)의 사용자에 의해 실행되면, 다채널 생성부(130)에서 생성된 복수의 채널 음원신호들 각각의 가상 스피커의 포지션이 단말기기(3000)의 디스플레이부에 표시될 수 있다. 예를 들어, 도 4를 참조하면, 단말기기(3000)의 디스플레이부는 화면(3350a)을 포함하고, 화면(3350a)에 다채널 생성부(130)에서 생성된 복수의 채널 음원신호들 각각의 가상 스피커(S1, S2, S3)가 표시될 수 있다. 단말기기(3000)의 사용자는 화면(3350a)에 디스플레이된 가상 스피커들(S1, S2, S3)의 포지션을 터치 스크린의 터치 기능을 통해 이동시킬 수 있다. 상기 앱은 가상 스피커들(S1, S2, S3)의 포지션 정보를 포함하는 포지션 제어신호를 생성하고, 생성된 포지션 제어신호를 단말기기(3000)를 통해 음원 분리 장치(100')로 전송하게 할 수 있다.The terminal 3000 may be a portable terminal such as a smart phone and a tablet PC. The terminal 3000 may include a display unit including a touch screen, a processor, a memory unit, and an interface unit. The terminal device 3000 may be provided with an app for controlling the sound source separation device 100 '. When the app is executed by the user of the terminal 3000, the position of each virtual speaker of the plurality of channel sound sources generated by the multi-channel generator 130 may be displayed on the display unit of the terminal 3000 have. For example, referring to FIG. 4, the display unit of the terminal 3000 includes a screen 3350a, and a plurality of channel sound sources, which are generated by the multi-channel generating unit 130, The speakers S1, S2, and S3 may be displayed. The user of the terminal device 3000 can move the position of the virtual speakers S1, S2, S3 displayed on the screen 3350a through the touch function of the touch screen. The app generates a position control signal including position information of the virtual speakers S1, S2, and S3, and transmits the generated position control signal to the sound source separation device 100 'through the terminal device 3000 .
한편, 단말기기(3000)는 스테레오 음원신호를 음원 분리 장치(100')로 제공할 수도 있다. 이 경우, 단말기기(3000)는 음원 제공부(미도시)를 더 포함할 수 있다.Meanwhile, the terminal device 3000 may provide a stereo sound source signal to the sound source separation device 100 '. In this case, the terminal 3000 may further include a tone generator (not shown).
다시, 도 3을 참조하면, 포지션 조정부(150)는 다채널 생성부(130)로부터 출력되는 복수의 채널 음원신호들을 수신한다. 수신되는 복수의 채널 음원신호들은 적어도 3개 이상일 수 있다.3, the position adjustment unit 150 receives a plurality of channel sound source signals output from the multi-channel generation unit 130. [ The plurality of channel sound source signals to be received may be at least three or more.
포지션 조정부(150)는 단말기기(3000)로부터의 포지션 제어신호에 기초하여 다채널 생성부(130)로부터 수신된 복수의 채널 음원신호들을 처리한다. 복수의 채널 음원신호들을 처리한다는 의미는, 처리된 각 채널 음원신호가 음향 출력 장치(미도시)를 통해 출력되었을 때, 미리 설정된 공간상의 소정 포지션에서 각 채널 음원신호가 발생되는 것처럼 청취자가 느끼도록 각 채널 음원신호를 소정의 계수로 필터링하는 것을 의미할 수 있다. 여기서, 미리 설정된 소정 공간은 단말기기(3000)로부터 수신된 포지션 제어신호에 의해 결정된다. The position adjusting unit 150 processes a plurality of channel sound source signals received from the multi-channel generating unit 130 based on a position control signal from the terminal device 3000. The processing of a plurality of channel sound source signals means that when each processed sound source signal is outputted through an audio output device (not shown), the listener feels as if each channel sound source signal is generated at a predetermined position in a predetermined space It may mean filtering each channel sound source signal with a predetermined coefficient. Here, the preset predetermined space is determined by the position control signal received from the terminal device 3000.
도 5는 도 3에 도시된 음원 분리 장치(100')의 포지션 조정부(150)에서 처리된 채널 음원신호들이 음향 출력 장치(190)를 통해 출력되었을 때, 청취자가 각 채널 음원신호들이 발생되는 것처럼 느끼는 소정 포지션들(P1, P2, P3)을 설명하기 위한 예시 도면이다.FIG. 5 is a block diagram of the sound output apparatus 190 of FIG. 3 when the channel sound source signals processed by the position adjustment unit 150 of the sound source separation apparatus 100 'are outputted through the sound output apparatus 190, P2, and P3, respectively.
도 5에 도시된 바와 같이, 단말기기(3000)로부터의 포지션 제어신호가, 도 2의 센터 채널 음원신호(Center)가 발생되는 것처럼 느껴지는 제1 가상 스피커는 음향 출력 장치(190)의 전방측의 제1 포지션(P1)에 위치되고, 도 2의 제1 채널 음원신호(R_new)가 발생되는 것처럼 느껴지는 제2 가상 스피커는 음향 출력 장치(190)의 우측에 인접한 제2 포지션(P2)에 위치하고, 도 2의 제2 채널 음원신호(L_new)가 발생되는 느껴지는 제3 가상 스피커는 음향 출력 장치(190)의 좌측에 인접한 제3 포지션(P3)에 위치하는 것을 포함하는 것을 가정한다.As shown in FIG. 5, the first virtual speaker, in which the position control signal from the terminal device 3000 is felt as if the center channel sound source signal (Center) of FIG. 2 is generated, is located on the front side of the sound output device 190 The second virtual speaker located at the first position P1 and feeling as if the first channel sound source signal R_new of Figure 2 is generated is located at the second position P2 adjacent to the right side of the sound output apparatus 190, It is assumed that the third virtual speaker in which the second channel sound source signal L_new of FIG. 2 is sensed is located at the third position P3 adjacent to the left side of the sound output apparatus 190.
이러한 가정 하에서, 포지션 조정부(150)는 단말기기(3000)로부터 수신된 포지션 제어신호에 따라, 청취자가 느끼기에, 제1 포지션(P1)에서 센터 채널 음원신호(Center)가 방사되는 것처럼 센터 채널 음원신호(Center)를 처리하고, 제2 포지션(P2)에서 수정된 제1 채널 음원신호(R_new)의 음향이 방사되는 것처럼 제1 채널 음원신호(R_new)를 처리하며, 제3 포지션(P3)에서 수정된 제2 채널 음원신호(L_new)의 음향이 방사되는 것처럼 제2 채널 음원신호(R_new)를 처리한다.Under this assumption, the position adjustment unit 150 adjusts the position of the center channel sound source (Center) as if the center channel sound source signal (Center) is emitted at the first position P1, because the position control signal received from the terminal device 3000, And processes the first channel sound source signal R_new as if the sound of the first channel sound source signal R_new modified at the second position P2 were radiated and at the third position P3 And processes the second channel sound source signal R_new as the sound of the modified second channel sound source signal L_new is radiated.
포지션 조정부(150)가 센터 채널 음원신호(Center), 수정된 제1 채널 음원신호(R_new) 및 수정된 제2 채널 음원신호(L_new)를 처리하는 구체적인 과정을 이하에서 상세히 설명한다.A detailed process of processing the center channel sound source signal Center, the modified first channel sound source signal R_new, and the modified second channel sound source signal L_new will now be described in detail.
포지션 조정부(150)는 음향 출력 장치(190)의 각 스피커에 입력되는 채널 음원신호와 각 포지션(P1, P2, P3)에서 출력되는 음압 사이의 전달 함수를 계산할 수 있다. 상기 전달 함수는 청취자가 위치한 공간의 특성을 나타내는 것으로서, 실제 측정을 통해서 얻은 후에 음원 분리 장치(100')의 메모리(미도시)에 저장해둔 것일 수도 있다. 각 포지션(P1, P2, P3)의 전달 함수는 음향 출력 장치(190)에 포함된 스피커의 개수만큼 생성될 수 있으며, 주파수의 함수로 표현될 수도 있다. 또한, 일부 포지션에서 전달 함수를 측정하여 음향기기(100')의 메모리(미도시)에 저장해둔 후에 상기 일부 포지션 사이에 있는 임의의 포지션의 전달 함수는 상기 일부 포지션들의 전달 함수들을 인터폴레이션하여 생성할 수도 있다.The position adjustment unit 150 may calculate a transfer function between the channel sound source signal input to each speaker of the sound output apparatus 190 and the sound pressure output from each of the positions P1, P2, and P3. The transfer function represents the characteristic of the space in which the listener is located, and may be stored in a memory (not shown) of the sound source separation apparatus 100 'after actual measurement. The transfer function of each of the positions P1, P2, and P3 may be generated by the number of speakers included in the sound output apparatus 190 and may be expressed as a function of frequency. In addition, after transfer functions are measured at some positions and stored in a memory (not shown) of the acoustic device 100 ', a transfer function of an arbitrary position between some of the positions is generated by interpolating the transfer functions of the certain positions It is possible.
다음으로, 포지션 조정부(150)는 각 포지션(P1, P2, P3)에서 각 채널 음원신호의 음향이 재생되는 것처럼 들리도록 하기 위하여, 미리 계산된 전달 함수를 이용하여 각 채널 음원신호를 변환시키기 위한 계수를 계산한다.Next, the position adjusting unit 150 adjusts the position of each channel sound source signal by using a previously calculated transfer function so as to sound the sound of each channel sound source signal at each position P1, P2, P3 Calculate the coefficient.
계수를 계산함에 있어서, 해당 포지션에서의 음압 레벨이 해당 포지션 이외의 영역에서의 음압 레벨보다 높도록 하는 계수를 결정하는 것이 바람직하다. 더 구체적으로는, 해당 포지션에서의 음향 포텐셜 에너지 밀도와 개별 음원의 에너지의 합과의 비가 최대가 되도록 하는 계수를 계산할 수 있다. 여기서, 단일의 주파수에 대하여 기술하고 있으나, 복수의 주파수로 이루어진 경우에는 각각의 주파수에 대한 음원을 결정하는 것으로 이해하면 무방하다. In calculating the coefficient, it is desirable to determine a coefficient such that the sound pressure level at the position is higher than the sound pressure level in the region other than the position. More specifically, it is possible to calculate a coefficient that maximizes the ratio of the acoustic potential energy density at the position to the sum of the energies of the individual sound sources. Here, although a single frequency is described, it can be understood that when a plurality of frequencies are used, the sound source for each frequency is determined.
상기 계수는 각 채널 음원신호의 크기와 위상을 변환시키기 위한 계수일 수 있다. 예를 들어, 음향 출력 장치(190)의 i번째(단, i는 자연수) 스피커에서 출력되는 소리의 크기를 변환시키기 위한 계수는, 해당 포지션에 대한 모든 스피커의 전달 함수 벡터의 크기로 상기 포지션에 대한 i번째 스피커의 전달 함수의 크기를 나눈 값일 수 있다. i번째 스피커에 입력되는 채널 음원신호의 위상차를 변환하기 위한 계수는 예를 들면 i번째 스피커의 전달 함수의 복소수 편각을 통해 구할 수 있다.The coefficient may be a coefficient for converting the magnitude and phase of each channel sound source signal. For example, a coefficient for converting the magnitude of the sound output from the i-th (where i is a natural number) speaker of the sound output apparatus 190 is a magnitude of a transfer function vector of all speakers for the position, The second speaker may be a value obtained by dividing the magnitude of the transfer function of the ith speaker. The coefficient for converting the phase difference of the channel sound source signal input to the i-th speaker can be obtained by, for example, complex declination of the transfer function of the i-th speaker.
계수가 계산되면, 포지션 조정부(150)는 각 채널 음원신호를 결정된 계수로 필터링하여, 음향 출력 장치(190)의 각 스피커에 입력되는 스피커별 음원신호를 생성할 수 있다. 생성된 스피커별 음원신호는 음향 출력 장치(190)를 통해 음파로 변환되어 청취자는 각 포지션에서 해당 채널 음원신호의 음향이 발생되는 것처럼 느끼게 된다.When the coefficients are calculated, the position adjustment unit 150 may filter each channel sound source signal with a determined coefficient to generate a sound source signal for each speaker input to each speaker of the sound output apparatus 190. The generated sound source signal for each speaker is converted into a sound wave through the sound output device 190 so that the listener feels as if the sound of the corresponding channel sound source signal is generated at each position.
도 6은 도 3에 도시된 음원 분리 장치(100')의 음향 효과를 설명하기 위한 도면이다.FIG. 6 is a view for explaining a sound effect of the sound source separation apparatus 100 'shown in FIG.
도 6을 참조하면, 도 3에 도시된 포지션 조정부(150)에 의해서 처리된 각 채널 음원신호가 도 5에 도시된 음향 출력 장치(190)를 통해 출력된 경우에, 청취자는 도 5에 도시된 제1 포지션(P1)에서 보컬(V)의 소리가 발생되는 것으로 느끼고, 도 5에 도시된 제2 포지션(P2)에서 밴드의 드럼(B1)의 소리가 발생되는 것으로 느끼며, 도 5에 도시된 제3 포지션(P3)에서 밴드의 기타(B2)의 소리가 발생되는 것으로 느낄 수 있다. Referring to FIG. 6, when each channel sound source signal processed by the position adjustment unit 150 shown in FIG. 3 is outputted through the sound output apparatus 190 shown in FIG. 5, It is felt that the sound of the vocal V is generated in the first position P1 and the sound of the drum B1 of the band is generated in the second position P2 shown in Fig. It can be felt that the sound of the guitar (B2) of the band is generated at the third position (P3).
이와 같이, 도 3에 도시된 음원 분리 장치(100')는 도 1에 도시된 음원 분리 장치(100)의 이점을 가질뿐만 아니라, 외부의 단말기기(3000)를 통해서 청취자는 각 채널 음원신호가 발생되는 가상의 포지션을 조정할 수 있는 이점이 있고, 청취자는 음향 출력 장치(190)를 통해 출력되는 소리의 공간감을 느낄 수 있는 이점도 있다. 또한, 청취자는 일반적인 스테레오 음원에서 보컬 소리만을 특정 위치에서 듣는 것과 같은 효과를 얻을 수도 있다.3 has the advantage of the sound source separating apparatus 100 shown in FIG. 1, and the external sound source separating apparatus 100 'shown in FIG. 3 not only has the advantage of the sound source separating apparatus 100 shown in FIG. 1, There is an advantage in that the virtual position to be generated can be adjusted and the listener has the advantage of feeling the spatial feeling of the sound outputted through the sound output device 190. [ In addition, a listener may obtain the same effect as listening to a vocal sound at a specific position in a normal stereo sound source.
도 7은 본 발명의 또 다른 실시 형태에 따른 음원 분리 장치(100'')의 블록도이다.7 is a block diagram of a sound source separation apparatus 100 '' according to another embodiment of the present invention.
도 7을 참조하면, 또 다른 실시 형태에 따른 음원 분리 장치(100'')는, 수신부(110), 다채널 생성부(130), 포지션 조정부(150), 및 사용자 입력부(170)를 포함한다. 여기서, 사용자 입력부(170)를 제외한 수신부(110), 다채널 생성부(130), 및 포지션 조정부(150)는 도 3에 도시된 수신부(110), 다채널 생성부(130), 및 포지션 조정부(150)와 동일하므로, 구체적인 설명은 앞서 설명한 것으로 대체한다.7, the sound source separation apparatus 100 '' according to another embodiment includes a receiving unit 110, a multi-channel generating unit 130, a position adjusting unit 150, and a user input unit 170 . The receiving unit 110, the multi-channel generating unit 130 and the position adjusting unit 150 except for the user input unit 170 include the receiving unit 110, the multi-channel generating unit 130, and the position adjusting unit 150 shown in FIG. (150), a specific description is replaced with the one described above.
또 다른 실시 형태에 따른 음원 분리 장치(100'')는 사용자 입력부(170)를 포함한다. 사용자 입력부(170)는 사용자 입력에 대응되는 포지션 제어신호를 생성하며, 생성된 포지션 제어신호를 포지션 조정부(150)로 출력한다. The sound source separation apparatus 100 '' according to yet another embodiment includes a user input unit 170. The user input unit 170 generates a position control signal corresponding to a user input, and outputs the generated position control signal to the position adjustment unit 150.
사용자 입력부(170)는 포지션 조정부(150)로부터 제공되는 소정의 정보를 시각적으로 출력하는 디스플레이 장치를 포함할 수 있다. The user input unit 170 may include a display device for visually outputting predetermined information provided from the position adjusting unit 150. [
예를 들어, 사용자 입력부(170)는, 디스플레이부(미도시)를 포함할 수 있다. 디스플레이부(미도시)는, 도 8에 도시된 바와 같이, 포지션 조정부(150)로부터 제공되는 소정의 정보를 디스플레이하는 화면(735a)를 포함할 수 있다. 디스플레이부(미도시)는 음원 분리 장치(100'')의 하우징 또는 커버에 장착되고, 화면(735a)이 외부에 노출되도록 설치될 수 있다. 화면(735a)에는 포지션 조정부(150)로부터 제공되는 소정의 정보가 표시될 수 있다. 소정의 정보는, 예를 들어, 다채널 생성부(130)에서 생성된 복수의 채널 음원신호들이 음향 출력 장치(미도시)를 통해 출력될 경우에, 청취자가 느끼기에 각 채널 음원신호들이 발생되는 것처럼 느껴지는 가상 스피커들(S1, S2, S3)의 상대적인 포지션 정보를 포함할 수 있다. 여기서, 소정의 정보는 가상 스피커들(S1, S2, S3) 각각의 음량 정보를 더 포함할 수도 있다.For example, the user input unit 170 may include a display unit (not shown). The display unit (not shown) may include a screen 735a for displaying predetermined information provided from the position adjustment unit 150, as shown in FIG. The display unit (not shown) may be mounted on the housing or the cover of the sound source separation apparatus 100 ", and may be installed such that the screen 735a is exposed to the outside. On the screen 735a, predetermined information provided from the position adjustment unit 150 can be displayed. For example, when a plurality of channel sound source signals generated by the multi-channel sound generating unit 130 are output through an audio output apparatus (not shown), the predetermined information may be generated when each channel sound source signals are generated S2, and S3, which are sensed by the virtual speakers S1, S2, and S3. Here, the predetermined information may further include volume information of each of the virtual speakers S1, S2, and S3.
사용자는 화면(735a)에 표시된 복수의 채널 음원신호들에 대응되는 가상 스피커들(S1, S2, S3) 중 하나인 제1 가상 스피커(S1)를 터치 후에 드래그하여 소정의 위치로 제1 가상 스피커(S1)을 이동시킬 수 있다. 물론, 제2 가상 스피커(S2)와 제3 가상 스피커(S3)도 이동시킬 수 있음은 당연하다. 제1 가상 스피커(S1)가 이동함에 따른 포지션 제어신호가 사용자 입력부(170)에서 생성되고, 사용자 입력부(170)는 생성된 포지션 제어신호를 실시간으로 포지션 조정부(150)로 출력할 수 있다. 여기서, 제1 가상 스피커(S1)은 도 5에 도시된 제1 포지션(P1)에 대응되고, 제2 가상 스피커(S2)는 도 5에 도시된 제2 포지션(P2)에 대응되며, 제3 가상 스피커(S3)는 도 5에 도시된 제3 포지션(P3)에 대응될 수 있다.The user drags the first virtual speaker S1, which is one of the virtual speakers S1, S2, S3 corresponding to a plurality of channel sound source signals displayed on the screen 735a, (S1) can be moved. Of course, it is natural that the second virtual speaker S2 and the third virtual speaker S3 can also be moved. A position control signal corresponding to the movement of the first virtual speaker S1 is generated in the user input unit 170 and the user input unit 170 can output the generated position control signal to the position adjustment unit 150 in real time. Here, the first virtual speaker S1 corresponds to the first position P1 shown in Fig. 5, the second virtual speaker S2 corresponds to the second position P2 shown in Fig. 5, The virtual speaker S3 may correspond to the third position P3 shown in Fig.
또한, 사용자 입력부(170)는 다채널 생성부(130)에서 생성되는 복수의 채널 음원신호별 가상 스피커의 포지션을 조절하는 조절 스위치(미도시)일 수 있다. 예를 들어, 조절 스위치는 회전 스위치 또는 토글 스위치일 수 있다. 조절 스위치(미도시)는 복수의 채널 음원신호들 별로 구비될 수 있다. 사용자는 하나 또는 다수의 조절 스위치를 조절하여 해당 채널 음원신호의 가상 스피커의 포지션을, 도 8에 도시된 바와 같이, 조정할 수 있다. 사용자 입력부(170)는 조절 스위치의 조작에 따른 포지션 제어신호를 생성하고, 생성되는 포지션 제어신호를 실시간으로 포지션 조정부(150)로 전송할 수 있다.In addition, the user input unit 170 may be an adjustment switch (not shown) for adjusting the position of a virtual speaker for each of a plurality of channel sound source signals generated by the multi-channel generator 130. For example, the adjustment switch may be a rotary switch or a toggle switch. An adjustment switch (not shown) may be provided for each of the plurality of channel sound source signals. The user can adjust the position of the virtual speaker of the corresponding channel sound source signal by adjusting one or a plurality of control switches, as shown in Fig. The user input unit 170 may generate a position control signal corresponding to an operation of the adjustment switch and transmit the generated position control signal to the position adjustment unit 150 in real time.
이와 같이, 도 7에 도시된 음원 분리 장치(100'')는 도 1에 도시된 음원 분리 장치(100)의 이점을 가질뿐만 아니라, 음원 분리 장치(100'')에 구비된 사용자 입력부(170)를 통해서 청취자는 각 채널 음원신호의 가상 스피커의 포지션을 조정할 수 있는 이점이 있고, 청취자는 음향 출력 장치(미도시)를 통해 출력되는 소리의 공간감을 느낄 수 있는 이점도 있다. 또한, 청취자는 일반적인 스테레오 음원에서 보컬 소리만을 특정 위치에서 듣는 것과 같은 효과를 얻을 수도 있다.7 does not only have the advantages of the sound source separation apparatus 100 shown in FIG. 1, but also has the advantages of the user input unit 170 'provided in the sound source separation apparatus 100' ' ), The listener has the advantage of adjusting the position of the virtual speaker of each channel sound source signal, and the listener has the advantage of feeling the spatial feeling of the sound outputted through the sound output device (not shown). In addition, a listener may obtain the same effect as listening to a vocal sound at a specific position in a normal stereo sound source.
도 9는 본 발명의 일 실시 형태에 따른 음향기기(1000)의 블록도이다.9 is a block diagram of an audio equipment 1000 according to an embodiment of the present invention.
도 9를 참조하면, 본 발명의 일 실시 형태에 따른 음향기기(1000)는, 입력되는 스테레오 음원신호를 처리하여 실시간으로 다채널 음원신호를 생성할 수 있다. 생성된 다채널 음원신호를 음향 출력 장치(300)를 통해 음파로 출력함으로써, 사용자는 입력되는 스테레오 음원신호를 음향 출력 장치(300)를 통해 듣는 것보다 더 강화된(enhenced) 음향을 느낄 수 있다.Referring to FIG. 9, the audio equipment 1000 according to an embodiment of the present invention can process a stereo sound source signal to generate a multi-channel sound source signal in real time. By outputting the generated multi-channel sound source signal to the sound output through the sound output apparatus 300, the user can feel an enhenced sound rather than hear the input stereo sound source signal through the sound output apparatus 300 .
도 9를 참조하면, 일 실시 형태에 따른 음향기기(1000)는, 음원 분리부(100)와 음향 출력부(300)를 포함한다.Referring to FIG. 9, an audio apparatus 1000 according to an embodiment includes a sound source separation unit 100 and an audio output unit 300.
음원 분리부(100)는 도 1에 도시된 음원 분리 장치(100)이다. 따라서, 음원 분리부(100)의 설명은 앞서 도 1에서 설명한 음원 분리 장치(100)의 설명으로 대체한다.The sound source separation unit 100 is the sound source separation apparatus 100 shown in FIG. Therefore, the description of the sound source separation unit 100 is replaced with the description of the sound source separation apparatus 100 described above with reference to FIG.
음향기기(1000)는, 음향 출력부(300)을 포함한다. 음향 출력부(300)는, 음원 분리부(100)에서 출력되는 복수의 채널 음원신호들을 증폭하는 앰프(Amplifier, 310)을 포함할 수 있다. 또한, 음향 출력부(300)는 음원 분리부(100)에서 출력되는 복수의 채널 음원신호들을 음파로 변환하여 출력하는 스피커부(330)를 포함할 수 있다. 또한, 음향 출력부(300)는 엠프(310)와 스피커부(330)를 모두 포함할 수도 있다. 여기서, 스피커부(330)는 하나 또는 다수의 스피커를 포함한다.The audio equipment 1000 includes an audio output unit 300. The sound output unit 300 may include an amplifier 310 for amplifying a plurality of channel sound source signals output from the sound source separation unit 100. The sound output unit 300 may include a speaker unit 330 that converts a plurality of channel sound source signals output from the sound source separation unit 100 into sound waves and outputs the sound waves. Also, the sound output unit 300 may include both the amplifier 310 and the speaker unit 330. Here, the speaker unit 330 includes one or a plurality of speakers.
도 9에 도시된 음향기기(1000)는 음원 분리부(100)를 포함하기 때문에, 수신되는 2채널 스테레오 음원신호를 증폭 및 합하는 간단한 연산을 통해 3개 이상의 새로운 채널 음원신호들(L_new, Center, R_new)을 실시간으로 생성할 수 있고, 음향 출력부(300)를 통해 실시간으로 출력할 수 있는 이점이 있다. 즉, 도 9에 도시된 음향기기(1000)는 2채널 스테레오 음원신호로부터 실시간으로 1개의 센터 채널 음원신호와 2개의 수정된 채널 음원신호들을 생성 및 출력할 수 있는 이점이 있다.Since the sound apparatus 1000 shown in FIG. 9 includes the sound source separation unit 100, three or more new channel sound source signals L_new, Center, R_new can be generated in real time and output in real time through the sound output unit 300. [ That is, the audio apparatus 1000 shown in FIG. 9 has an advantage that it can generate and output one center channel sound source signal and two modified channel sound source signals in real time from a two-channel stereo sound source signal.
또한, 센터 채널 음원신호(Center)는 제1 채널 음원신호(L)와 제2 채널 음원신호(R)를 더한 것으로 구성되기 때문에, 제1 채널 음원신호(L)와 제2 채널 음원신호(R) 각각에 이미 포함된 특정 소리, 예를 들어 보컬 소리의 크기가 2배 증가하게 된다. 따라서, 스테레오 음원신호가 아무런 프로세싱없이 음향 출력부(300)를 통해서 방출될 때와 대비하여, 보컬 소리가 더 크게 청취자에게 느껴지게 할 수 있는 이점이 있다.The center channel sound source signal Center includes the first channel sound source signal L and the second channel sound source signal R plus the first channel sound source signal L and the second channel sound source signal R ), The magnitude of a particular sound already included in each, for example a vocal sound, is doubled. Accordingly, there is an advantage that the vocal sound can be felt to a larger audience as compared with when the stereo sound source signal is emitted through the sound output unit 300 without any processing.
도 9에 도시하지 않았지만, 음향기기(1000)에는 종래의 일반적인 음향기기에 포함된 구성들이 더 포함될 수 있다. 예를 들어, AUX 단자, USB 단자, 또는 블루투스 등의 유/무선 통신을 수행하는 연결부(미도시)를 더 포함할 수 있다. 연결부(미도시)를 통해 외부에서 스테레오 음원신호가 음향기기(1000)로 입력될 수 있다. 또한, 스피커부(330)를 통해 출력되는 소리의 음량을 조절하는 조절부를 더 포함할 수도 있고, 음향기기(1000)의 전원 상태, 외부 기기와의 연결 상태, 음량 상태를 표시하는 디스플레이 장치도 더 포함할 수도 있다.Although not shown in FIG. 9, the sound device 1000 may further include components included in a conventional general sound device. For example, an AUX terminal, a USB terminal, or a connection unit (not shown) for performing wire / wireless communication such as Bluetooth. A stereo sound source signal may be input from the outside to the audio equipment 1000 through a connection unit (not shown). The display unit may further include an adjusting unit for adjusting the volume of the sound output through the speaker unit 330 and a display unit for displaying the power state of the audio device 1000, .
도 10은 본 발명의 다른 실시 형태에 따른 음향기기(1000')의 블록도이다.10 is a block diagram of an acoustic device 1000 'according to another embodiment of the present invention.
도 10을 참조하면, 다른 실시 형태에 따른 음향기기(1000')는, 음원 분리부(100), 포지션 조정부(500), 및 음향 출력부(300)를 포함한다. 여기서, 음원 분리부(100)는 도 9에 도시된 음원 분리부(100)와 동일하므로, 구체적인 설명은 앞서 설명한 것으로 대체한다.Referring to FIG. 10, an acoustic device 1000 'according to another embodiment includes a sound source separation unit 100, a position adjustment unit 500, and an acoustic output unit 300. Here, the sound source separating unit 100 is the same as the sound source separating unit 100 shown in FIG. 9, and a detailed description thereof will be replaced with the one described above.
포지션 조정부(500)는, 음향기기(1000')와는 물리적으로 별개인, 외부의 단말기기(3000)로부터 포지션 제어신호를 수신한다. 포지션 제어신호는 유선 또는 무선을 통해 음향기기(1000')로 수신될 수 있다. 이를 위해, 음향기기(1000')는 단말기기(3000)로부터의 포지션 제어신호를 수신 및 처리하는 통신부(미도시)를 더 포함할 수 있다.The position adjustment unit 500 receives a position control signal from an external terminal 3000 that is physically separate from the audio equipment 1000 '. The position control signal may be received by the acoustic device 1000 'via wired or wireless. To this end, the acoustic device 1000 'may further include a communication unit (not shown) for receiving and processing a position control signal from the terminal device 3000.
단말기기(3000)는 스마트폰과 태블릿 PC 등과 같이 유/무선 통신이 가능한 휴대 단말기기일 수 있다. 단말기기(3000)는 터치 스크린을 포함한 디스플레이부, 프로세서, 메모리부 및 인터페이스부를 포함할 수 있다. 단말기기(3000)에는 음향기기(1000')를 제어하기 위한 앱(App)이 설치되어 있을 수 있다. 상기 앱이 단말기기(3000)의 사용자에 의해 실행되면, 음원 분리부(100)에서 생성된 복수의 채널 음원신호들 각각의 가상 스피커의 포지션이 단말기기(3000)의 디스플레이부에 표시될 수 있다. The terminal 3000 may be a portable terminal such as a smart phone and a tablet PC. The terminal 3000 may include a display unit including a touch screen, a processor, a memory unit, and an interface unit. The terminal device 3000 may be provided with an app for controlling the sound device 1000 '. When the app is executed by the user of the terminal device 3000, the position of each virtual speaker of the plurality of channel sound source signals generated by the sound source separation unit 100 may be displayed on the display unit of the terminal device 3000 .
한편, 단말기기(3000)는 스테레오 음원신호를 음향기기(1000')로 제공할 수도 있다. 이 경우, 단말기기(3000)는 음원 제공부(미도시)를 더 포함할 수 있다.Meanwhile, the terminal device 3000 may provide a stereo sound source signal to the audio device 1000 '. In this case, the terminal 3000 may further include a tone generator (not shown).
포지션 조정부(500)는 음원 분리부(100)로부터 출력되는 복수의 채널 음원신호들을 수신한다. 수신되는 복수의 채널 음원신호들은 적어도 3개 이상일 수 있다.The position adjustment unit 500 receives a plurality of channel sound source signals output from the sound source separation unit 100. The plurality of channel sound source signals to be received may be at least three or more.
포지션 조정부(500)는 단말기기(3000)로부터의 포지션 제어신호에 기초하여 음원 분리부(100)로부터 수신된 복수의 채널 음원신호들을 처리한다. 복수의 채널 음원신호들을 처리한다는 의미는, 처리된 각 채널 음원신호가 음향 출력부(300)를 통해 출력되었을 때, 미리 설정된 공간상의 소정 포지션에서 각 채널 음원신호가 발생되는 것처럼 청취자가 느끼도록 각 채널 음원신호를 처리하는 것을 의미한다. 여기서, 미리 설정된 소정 공간은 단말기기(3000)로부터 수신된 포지션 제어신호에 의해 결정된다. The position adjustment unit 500 processes a plurality of channel sound source signals received from the sound source separation unit 100 based on a position control signal from the terminal device 3000. The processing of a plurality of channel sound source signals means that when each processed sound source signal is outputted through the sound output unit 300, the sound source signal is generated at a predetermined position in a predetermined space, Means processing a channel sound source signal. Here, the preset predetermined space is determined by the position control signal received from the terminal device 3000.
예를 들어, 도 5에 도시된 바와 같이, 단말기기(3000)로부터의 포지션 제어신호가, 도 2의 센터 채널 음원신호(Center)의 음향이 발생되는 제1 가상 스피커는 스피커부(190)의 전방측의 제1 포지션(P1)에 위치되고, 도 2의 제1 채널 음원신호(R_new)의 음향이 발생되는 제2 가상 스피커는 스피커부(190)의 우측에 인접한 제2 포지션(P2)에 위치하고, 도 2의 제2 채널 음원신호(L_new)의 음향이 발생되는 제3 가상 스피커는 제3 포지션(P3)에 위치하는 것을 포함하는 것을 가정한다.For example, as shown in FIG. 5, the first virtual speaker, in which the position control signal from the terminal 3000 is generated and the sound of the center channel sound source signal (Center) of FIG. 2 is generated, The second virtual speaker, which is located at the first position P1 on the front side and on which the sound of the first channel sound source signal R_new of FIG. 2 is generated, is located at the second position P2 adjacent to the right side of the speaker 190 And the third virtual speaker, in which the sound of the second channel sound source signal L_new of FIG. 2 is generated, is located at the third position P3.
이러한 가정 하에서, 포지션 조정부(500)는 수신된 포지션 제어신호에 따라, 청취자가 인식하기에, 제1 포지션(P1)에서 센터 채널 음원신호(Center)의 음향이 방사되는 것처럼 센터 채널 음원신호(Center)를 처리하고, 제2 포지션(P2)에서 수정된 제1 채널 음원신호(R_new)의 음향이 방사되는 것처럼 제1 채널 음원신호(R_new)를 처리하며, 제3 포지션(P3)에서 수정된 제2 채널 음원신호(L_new)의 음향이 방사되는 것처럼 제2 채널 음원신호(R_new)를 처리한다.Under this assumption, the position adjustment unit 500 determines the position of the center channel sound source signal (Center) as if the sound of the center channel sound source signal (Center) was radiated at the first position (P1) Processes the first channel sound source signal R_new as if the sound of the first channel sound source signal R_new modified in the second position P2 is radiated and processes the first channel sound source signal R_new in the third position P3, And processes the second channel sound source signal R_new as the sound of the two channel sound source signal L_new is radiated.
포지션 조정부(500)가 센터 채널 음원신호(Center), 제1 채널 음원신호(R_new) 및 제2 채널 음원신호(L_new)를 처리하는 구체적인 과정을 이하에서 상세히 설명한다.A detailed process of processing the center channel sound source signal Center, the first channel sound source signal R_new, and the second channel sound source signal L_new will be described in detail below.
포지션 조정부(500)는 음향 출력부(300)의 스피커부(330)의 각 스피커에 입력되는 음원신호와 각 포지션(P1, P2, P3)에서 출력되는 음압 사이의 전달 함수를 계산할 수 있다. 상기 전달 함수는 청취자가 위치한 공간의 특성을 나타내는 것으로서, 실제 측정을 통해서 얻은 후에 음향기기(1000')의 메모리(미도시)에 저장해둔 것일 수도 있다. 각 포지션(P1, P2, P3)의 전달 함수는 스피커부(330)에 포함된 스피커의 개수만큼 생성될 수 있으며, 주파수의 함수로 표현될 수도 있다. 또한, 일부 포지션에서 전달 함수를 측정하여 음향기기(1000')의 메모리(미도시)에 저장해둔 후에 상기 일부 포지션 사이에 있는 임의의 포지션의 전달 함수는 상기 일부 포지션들의 전달 함수들을 인터폴레이션하여 생성할 수도 있다.The position adjustment unit 500 may calculate a transfer function between the sound source signal input to each speaker of the speaker unit 330 of the sound output unit 300 and the sound pressure output from each of the positions P1, P2, and P3. The transfer function represents the characteristics of the space in which the listener is located, and may be stored in a memory (not shown) of the audio device 1000 'after actual measurement. The transfer function of each of the positions P1, P2, and P3 may be generated by the number of speakers included in the speaker unit 330 and may be expressed as a function of frequency. In addition, after transfer function is measured at some positions and stored in a memory (not shown) of the acoustic device 1000 ', a transfer function of an arbitrary position between some of the positions is generated by interpolating the transfer functions of the certain positions It is possible.
다음으로, 포지션 조정부(500)는 각 포지션(P1, P2, P3)에서 음향이 재생되는 것처럼 들리도록 하기 위하여, 미리 계산된 전달 함수를 이용하여 각 채널 음원신호를 변환시키기 위한 계수를 계산한다.Next, the position adjustment unit 500 calculates a coefficient for converting each channel sound source signal by using a previously calculated transfer function so that sound sounds as if it is reproduced at each of the positions P1, P2, and P3.
계수를 계산함에 있어서, 해당 포지션에서의 음압 레벨이 해당 포지션 이외의 영역에서의 음압 레벨보다 높도록 하는 계수를 결정하는 것이 바람직하다. 더 구체적으로는, 해당 포지션에서의 음향 포텐셜 에너지 밀도와 개별 음원의 에너지의 합과의 비가 최대가 되도록 하는 계수를 계산할 수 있다. 여기서, 단일의 주파수에 대하여 기술하고 있으나, 복수의 주파수로 이루어진 경우에는 각각의 주파수에 대한 음원을 결정하는 것으로 이해하면 무방하다. In calculating the coefficient, it is desirable to determine a coefficient such that the sound pressure level at the position is higher than the sound pressure level in the region other than the position. More specifically, it is possible to calculate a coefficient that maximizes the ratio of the acoustic potential energy density at the position to the sum of the energies of the individual sound sources. Here, although a single frequency is described, it can be understood that when a plurality of frequencies are used, the sound source for each frequency is determined.
상기 계수는 각 채널 음원신호의 크기와 위상을 변환시키기 위한 계수일 수 있다. 예를 들어, 스피커부(330)의 i번째(단, i는 자연수) 스피커에서 출력되는 소리의 크기를 변환시키기 위한 계수는, 해당 포지션에 대한 모든 스피커의 전달 함수 벡터의 크기로 상기 포지션에 대한 i번째 스피커의 전달 함수의 크기를 나눈 값일 수 있다. i번째 스피커에 입력되는 음원신호의 위상차를 변환하기 위한 계수는 예를 들면 i번째 스피커의 전달 함수의 복소수 편각을 통해 구할 수 있다.The coefficient may be a coefficient for converting the magnitude and phase of each channel sound source signal. For example, a coefficient for converting the magnitude of the sound output from the i-th speaker (where i is a natural number) of the speaker unit 330 is a magnitude of a transfer function vector of all speakers for the position, i < th > speaker. The coefficient for converting the phase difference of the sound source signal input to the i-th speaker can be obtained, for example, by declining the complex number of the transfer function of the i-th speaker.
계수가 계산되면, 포지션 조정부(500)는 각 채널 음원신호를 결정된 계수로 필터링하여, 스피커부(330)의 각 스피커에 입력되는 스피커별 음원신호를 생성할 수 있다. 생성된 스피커별 음원신호는 스피커부(330)를 통해 음파로 변환되어 청취자는 각 포지션에서 해당 채널 음원신호의 음향이 발생되는 것처럼 느끼게 된다.When the coefficients are calculated, the position adjusting unit 500 may filter each channel sound source signal with a determined coefficient to generate a sound source signal for each speaker input to each speaker of the speaker unit 330. The generated sound source signal for each speaker is converted into a sound wave through the speaker unit 330 so that the listener feels as if the sound of the corresponding channel sound source signal is generated at each position.
도 10에 도시된 포지션 조정부(500)에 의해서 처리된 각 채널 음원신호가 스피커부(330)를 통해 출력된 경우에, 청취자는 도 5에 도시된 제1 포지션(P1)에서 보컬(V)의 소리가 발생되는 것으로 느끼고, 도 5에 도시된 제2 포지션(P2)에서 밴드의 드럼(B1)의 소리가 발생되는 것으로 느끼며, 도 5에 도시된 제3 포지션(P3)에서 밴드의 기타(B2)의 소리가 발생되는 것으로 느낄 수 있다. When each channel sound source signal processed by the position adjustment unit 500 shown in FIG. 10 is output through the speaker unit 330, the listener selects the position of the vocal (V) in the first position P1 shown in FIG. The sound of the band B1 of the band is felt at the second position P2 shown in Fig. 5 and the other b2 of the band at the third position P3 shown in Fig. 5 ) Can be perceived as being generated.
이와 같이, 도 10에 도시된 음향기기(1000')는 도 9에 도시된 음향기기(1000)의 이점을 가질뿐만 아니라, 외부의 단말기기(300)를 통해서 청취자는 각 채널 음원신호의 가상 스피커의 포지션을 조정할 수 있는 이점이 있고, 청취자는 스피커부(330)를 통해 출력되는 소리의 공간감을 느낄 수 있는 이점도 있다. 또한, 청취자는 일반적인 스테레오 음원에서 보컬 소리만을 특정 위치에서 듣는 것과 같은 효과를 얻을 수도 있다.10 does not only have the advantage of the audio device 1000 shown in FIG. 9, but also allows the listener to receive the virtual speaker 300 of each channel sound source signal through the external terminal 300 There is an advantage in that the listener can feel the spatial feeling of the sound outputted through the speaker unit 330. In addition, In addition, a listener may obtain the same effect as listening to a vocal sound at a specific position in a normal stereo sound source.
도 11은 본 발명의 또 다른 실시 형태에 따른 음향기기(1000'')의 블록도이다.11 is a block diagram of a sound device 1000 '' according to another embodiment of the present invention.
도 11을 참조하면, 또 다른 실시 형태에 따른 음향기기(1000'')는, 음원 분리부(100), 사용자 입력부(700), 포지션 조정부(500), 및 음향 출력부(300)를 포함한다. 여기서, 사용자 입력부(700)를 제외한 음원 분리부(100), 포지션 조정부(500), 및 음향 출력부(300)는 도 10에 도시된 음원 분리부(100), 포지션 조정부(500), 및 음향 출력부(300)와 동일하므로, 구체적인 설명은 앞서 설명한 것으로 대체한다.11, an acoustic device 1000 '' according to another embodiment includes a sound source separation unit 100, a user input unit 700, a position adjustment unit 500, and an acoustic output unit 300 . Here, the sound source separation unit 100, the position adjustment unit 500, and the sound output unit 300 except for the user input unit 700 include the sound source separation unit 100, the position adjustment unit 500, Is the same as the output unit 300, and a specific description thereof is replaced with the one described above.
또 다른 실시 형태에 따른 음향기기(1000'')는 사용자 입력부(700)를 포함한다. 사용자 입력부(700)는 사용자 입력에 대응되는 포지션 제어신호를 생성하며, 생성된 포지션 제어신호를 포지션 조정부(500)로 출력한다. The acoustic device 1000 " according to yet another embodiment includes a user input 700. The user input unit 700 generates a position control signal corresponding to the user input and outputs the generated position control signal to the position adjustment unit 500.
사용자 입력부(700)는 포지션 조정부(500)로부터 제공되는 소정의 정보를 시각적으로 출력하는 디스플레이 장치를 포함할 수 있다. The user input unit 700 may include a display device for visually outputting predetermined information provided from the position adjusting unit 500.
예를 들어, 사용자 입력부(700)는, 디스플레이부(미도시)를 포함할 수 있다. 디스플레이부(미도시)는, 도 8에 도시된 바와 같이, 포지션 조정부(500)로부터 제공되는 소정의 정보를 디스플레이하는 화면(735a)를 포함할 수 있다. 디스플레이부(미도시)는 음향기기(1000'')의 하우징 또는 커버에 장착되고, 화면(735a)이 외부에 노출되도록 설치될 수 있다. 화면(735a)에는 포지션 조정부(500)로부터 제공되는 소정의 정보가 표시될 수 있다. 소정의 정보는, 예를 들어, 음원 분리부(100)에서 출력되는 복수의 채널 음원신호들과 대응되는 가상 스피커들(S1, S2, S3)의 상대적인 포지션 정보를 포함할 수 있다. 또한, 소정의 정보는 가상 스피커들(S1, S2, S3) 각각의 음량 정보를 더 포함할 수도 있다.For example, the user input unit 700 may include a display unit (not shown). The display unit (not shown) may include a screen 735a for displaying predetermined information provided from the position adjusting unit 500, as shown in FIG. The display unit (not shown) may be mounted on the housing or the cover of the audio equipment 1000 '' and may be installed such that the screen 735a is exposed to the outside. On the screen 735a, predetermined information provided from the position adjusting unit 500 can be displayed. The predetermined information may include relative position information of the virtual speakers S1, S2, and S3 corresponding to a plurality of channel sound sources output from the sound source separation unit 100, for example. In addition, the predetermined information may further include volume information of each of the virtual speakers S1, S2, and S3.
사용자는 화면(735a)에 표시된 복수의 채널 음원신호별 가상 스피커(S1, S2, S3) 중 하나인 제1 가상 스피커(S1)를 터치 후에 드래그하여 소정의 위치로 제1 가상 스피커(S1)을 이동시킬 수 있다. 물론, 제2 가상 스피커(S2)와 제3 가상 스피커(S3)도 이동시킬 수 있음은 당연하다. 제1 가상 스피커(S1)가 이동함에 따른 포지션 제어신호가 사용자 입력부(700)에서 생성되고, 사용자 입력부(700)는 생성된 포지션 제어신호를 실시간으로 포지션 조정부(500)로 출력할 수 있다. 여기서, 제1 가상 스피커(S1)은 도 5에 도시된 제1 포지션(P1)에 대응되고, 제2 가상 스피커(S2)는 도 5에 도시된 제2 포지션(P2)에 대응되며, 제3 가상 스피커(S3)는 도 5에 도시된 제3 포지션(P3)에 대응될 수 있다.The user drags the first virtual speaker S1, which is one of the virtual speakers S1, S2, S3 for each of a plurality of channel sound source signals displayed on the screen 735a, and then drags the first virtual speaker S1 to a predetermined position Can be moved. Of course, it is natural that the second virtual speaker S2 and the third virtual speaker S3 can also be moved. A position control signal as the first virtual speaker S1 moves is generated in the user input unit 700 and the user input unit 700 can output the generated position control signal to the position adjustment unit 500 in real time. Here, the first virtual speaker S1 corresponds to the first position P1 shown in Fig. 5, the second virtual speaker S2 corresponds to the second position P2 shown in Fig. 5, The virtual speaker S3 may correspond to the third position P3 shown in Fig.
또한, 사용자 입력부(700)는 음원 분리부(100)에서 생성되는 복수의 채널 음원신호별 가상 스피커의 포지션을 조절하는 조절 스위치(미도시)일 수 있다. 예를 들어, 조절 스위치는 회전 스위치 또는 토글 스위치일 수 있다. 조절 스위치(미도시)는 복수의 채널 음원신호들 별로 구비될 수 있다. 사용자는 하나 또는 다수의 조절 스위치를 조절하여 해당 채널 음원신호의 가상 스피커의 포지션을, 도 8에 도시된 바와 같이, 조정할 수 있다. 사용자 입력부(700)는 조절 스위치의 조작에 따른 포지션 제어신호를 생성하고, 생성되는 포지션 제어신호를 실시간으로 포지션 조정부(500)로 전송할 수 있다.The user input unit 700 may be an adjustment switch (not shown) for adjusting a position of a virtual speaker according to a plurality of channel sound source signals generated by the sound source separation unit 100. For example, the adjustment switch may be a rotary switch or a toggle switch. An adjustment switch (not shown) may be provided for each of the plurality of channel sound source signals. The user can adjust the position of the virtual speaker of the corresponding channel sound source signal by adjusting one or a plurality of control switches, as shown in Fig. The user input unit 700 may generate a position control signal according to the operation of the adjustment switch and transmit the generated position control signal to the position adjustment unit 500 in real time.
이와 같이, 도 11에 도시된 음향기기(1000'')는 도 9에 도시된 음향기기(1000)의 이점을 가질뿐만 아니라, 음향기기(1000'')에 구비된 사용자 입력부(700)를 통해서 청취자는 각 채널 음원신호의 가상 스피커의 포지션을 조정할 수 있는 이점이 있고, 청취자는 스피커부(330)를 통해 출력되는 소리의 공간감을 느낄 수 있는 이점도 있다. 또한, 청취자는 일반적인 스테레오 음원에서 보컬 소리만을 특정 위치에서 듣는 것과 같은 효과를 얻을 수도 있다.11 has the advantage of the sound apparatus 1000 shown in Fig. 9, and also has the advantage of being able to receive the sound through the user input unit 700 provided in the sound apparatus 1000 " The listener has an advantage in that the position of the virtual speaker of each channel sound source signal can be adjusted, and the listener has the advantage of feeling the spatial feeling of the sound output through the speaker unit 330. In addition, a listener may obtain the same effect as listening to a vocal sound at a specific position in a normal stereo sound source.
이상에서 실시예들에 설명된 특징, 구조, 효과 등은 본 발명의 하나의 실시예에 포함되며, 반드시 하나의 실시예에만 한정되는 것은 아니다. 나아가, 각 실시예에서 예시된 특징, 구조, 효과 등은 실시예들이 속하는 분야의 통상의 지식을 가지는 자에 의해 다른 실시예들에 대해서도 조합 또는 변형되어 실시 가능하다. 따라서 이러한 조합과 변형에 관계된 내용들은 본 발명의 범위에 포함되는 것으로 해석되어야 할 것이다.The features, structures, effects and the like described in the embodiments are included in one embodiment of the present invention and are not necessarily limited to only one embodiment. Furthermore, the features, structures, effects and the like illustrated in the embodiments can be combined and modified by other persons skilled in the art to which the embodiments belong. Therefore, it should be understood that the present invention is not limited to these combinations and modifications.
또한, 이상에서 실시예를 중심으로 설명하였으나 이는 단지 예시일 뿐 본 발명을 한정하는 것이 아니며, 본 발명이 속하는 분야의 통상의 지식을 가진 자라면 본 실시예의 본질적인 특성을 벗어나지 않는 범위에서 이상에 예시되지 않은 여러 가지의 변형과 응용이 가능함을 알 수 있을 것이다. 예를 들어, 실시예에 구체적으로 나타난 각 구성 요소는 변형하여 실시할 수 있는 것이다. 그리고 이러한 변형과 응용에 관계된 차이점들은 첨부된 청구 범위에서 규정하는 본 발명의 범위에 포함되는 것으로 해석되어야 할 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is clearly understood that the same is by way of illustration and example only and is not to be taken by way of illustration, It can be seen that various modifications and applications are possible. For example, each component specifically shown in the embodiments can be modified and implemented. It is to be understood that all changes and modifications that come within the meaning and range of equivalency of the claims are therefore intended to be embraced therein.
[부호의 설명][Description of Symbols]
100, 100', 100'': 음원 분리 장치100, 100 ', 100' ': Sound source separation device
110: 다채널 생성부110: Multi-channel generating unit
130: 사용자 입력부130: user input section
150: 포지션 조정부150: Position adjustment unit
1000, 1000', 1000'': 음향기기1000, 1000 ', 1000' ': Sounder
100: 음원 분리부100: sound source separation unit
300: 음향 출력부300: sound output unit
310: 앰프310: Amplifier
330: 스피커부330: Speaker
500: 포지션 조정부500: Position adjustment unit
700: 사용자 입력부700: user input
3000: 단말기기3000: Terminal machine

Claims (16)

  1. 제1 채널 음원신호와 제2 채널 음원신호를 포함하는 스테레오 음원신호를 수신하는, 수신부; 및A receiver for receiving a stereo sound source signal including a first channel sound source signal and a second channel sound source signal; And
    상기 수신부로부터 수신된 상기 스테레오 음원신호를 기초로 적어도 3개 이상의 채널 음원신호들을 생성하는, 다채널 생성부;A multi-channel generator for generating at least three channel sound source signals based on the stereo sound source signal received from the receiver;
    를 포함하는, 음원 분리 장치.And the sound source separation device.
  2. 제 1 항에 있어서, 상기 다채널 생성부는,The apparatus of claim 1, wherein the multi-
    상기 제1 채널 음원신호를 제1 증폭도로 증폭한 것과 상기 제2 채널 음원신호를 제2 증폭도로 증폭한 것을 합하여 수정된 제1 채널 음원신호를 생성하고,Generating a modified first channel sound source signal by summing the first channel sound source signal amplified by the first amplification degree and the second channel sound source signal amplified by the second amplification degree,
    상기 제1 채널 음원신호와 상기 제2 채널 음원신호를 합하여 센터 채널 음원신호를 생성하고,Generating a center channel sound source signal by summing the first channel sound source signal and the second channel sound source signal,
    상기 제2 채널 음원신호를 상기 제1 증폭도로 증폭한 것과 상기 제1 채널 음원신호를 상기 제2 증폭도로 증폭한 것을 합하여 수정된 제2 채널 음원신호를 생성하는, 음원 분리 장치.Wherein the second channel sound source signal is generated by amplifying the second channel sound source signal by the first amplification degree and amplifying the first channel sound source signal by the second amplification degree.
  3. 제 2 항에 있어서,3. The method of claim 2,
    상기 제1 증폭도의 절대값은 상기 제2 증폭도의 절대값보다 큰, 음원 분리 장치.Wherein the absolute value of the first amplification factor is greater than the absolute value of the second amplification factor.
  4. 제 3 항에 있어서,The method of claim 3,
    상기 제1 증폭도는 2이고, 상기 제2 증폭도는 -1인, 음원 분리 장치.Wherein the first amplification degree is 2 and the second amplification degree is -1.
  5. 제 1 항 내지 제 4 항 중 어느 한 항에 있어서,5. The method according to any one of claims 1 to 4,
    상기 음원 분리부에서 생성된 상기 채널 음원신호들을 수신하고, 단말기기로부터 포지션 제어신호를 수신하는, 포지션 조정부;를 더 포함하고,And a position adjusting unit for receiving the channel sound source signals generated by the sound source separating unit and receiving a position control signal from the terminal,
    상기 포지션 조정부는, 상기 포지션 제어신호에 기초하여 상기 음원 분리부에서 생성된 상기 채널 음원신호들을 처리하고,Wherein the position adjustment unit processes the channel sound source signals generated by the sound source separation unit based on the position control signal,
    상기 포지션 조정부에서 처리된 상기 채널 음원신호들이 음향 출력 장치를 통해 출력되면, 상기 포지션 제어신호에 대응되는 소정의 공간들에서 상기 채널 음원신호들이 발생되는 것처럼 청취자에게 인식되는, 음원 분리 장치.Wherein when the channel sound source signals processed by the position adjustment unit are outputted through the sound output device, the channel sound source signals are recognized by the listener as if the channel sound source signals are generated in predetermined spaces corresponding to the position control signal.
  6. 제 1 항 내지 제 4 항 중 어느 한 항에 있어서,5. The method according to any one of claims 1 to 4,
    사용자 입력에 대응하는 포지션 제어신호를 생성하는 사용자 입력부; 및A user input for generating a position control signal corresponding to a user input; And
    상기 음원 분리부에서 생성된 상기 채널 음원신호들을 수신하고, 상기 사용자 입력부로부터 포지션 제어신호를 수신하는, 포지션 조정부;를 더 포함하고,And a position adjustment unit receiving the channel sound source signals generated by the sound source separation unit and receiving a position control signal from the user input unit,
    상기 포지션 조정부는, 상기 포지션 제어신호에 기초하여 상기 음원 분리부에서 생성된 상기 채널 음원신호들을 처리하고,Wherein the position adjustment unit processes the channel sound source signals generated by the sound source separation unit based on the position control signal,
    상기 포지션 조정부에서 처리된 상기 채널 음원신호들이 음향 출력 장치를 통해 출력되면, 상기 포지션 제어신호에 대응되는 소정의 공간들에서 상기 채널 음원신호들이 발생되는 것처럼 청취자에게 인식되는, 음원 분리 장치.Wherein when the channel sound source signals processed by the position adjustment unit are outputted through the sound output device, the channel sound source signals are recognized by the listener as if the channel sound source signals are generated in predetermined spaces corresponding to the position control signal.
  7. 제 6 항에 있어서,The method according to claim 6,
    상기 사용자 입력부는, 상기 포지션 조정부로부터 제공되는 소정의 정보를 표시하는 화면을 갖는 디스플레이부를 포함하고,Wherein the user input unit includes a display unit having a screen for displaying predetermined information provided from the position adjustment unit,
    상기 소정의 정보는, 상기 소정의 공간들에 대응되는 가상 스피커들의 포지션 정보를 포함하는, 음원 분리 장치.Wherein the predetermined information includes position information of virtual speakers corresponding to the predetermined spaces.
  8. 제 6 항에 있어서,The method according to claim 6,
    상기 사용자 입력부는, 상기 소정의 공간들에 대응되는 가상 스피커들의 포지션을 조절하는 조절 스위치인, 음원 분리 장치.Wherein the user input unit is an adjustment switch for adjusting a position of virtual speakers corresponding to the predetermined spaces.
  9. 제1 채널 음원신호와 제2 채널 음원신호를 포함하는 스테레오 음원신호를 수신하고, 수신된 상기 스테레오 음원신호를 기초로 적어도 3개 이상의 채널 음원신호들을 생성하는, 음원 분리부; 및A sound source separation unit that receives a stereo sound source signal including a first channel sound source signal and a second channel sound source signal and generates at least three channel sound source signals based on the received stereo sound source signal; And
    상기 음원 분리부에서 생성된 상기 채널 음원신호들을 증폭하는 엠프와 상기 음원 분리부에서 생성된 상기 채널 음원신호들을 음파로 변환하여 출력하는 스피커부 중 적어도 하나 이상을 포함하는, 음향 출력부;An acoustic output unit including at least one of an amplifier for amplifying the channel sound source signals generated by the sound source separation unit and a speaker unit for converting the channel sound source signals generated by the sound source separation unit into sound waves and outputting the sound source signals;
    을 포함하는, 음향기기..
  10. 제 9 항에 있어서, 상기 음원 분리부는,The sound source separation apparatus according to claim 9,
    상기 제1 채널 음원신호를 제1 증폭도로 증폭한 것과 상기 제2 채널 음원신호를 제2 증폭도로 증폭한 것을 합하여 수정된 제1 채널 음원신호를 생성하고,Generating a modified first channel sound source signal by summing the first channel sound source signal amplified by the first amplification degree and the second channel sound source signal amplified by the second amplification degree,
    상기 제1 채널 음원신호와 상기 제2 채널 음원신호를 합하여 센터 채널 음원신호를 생성하고,Generating a center channel sound source signal by summing the first channel sound source signal and the second channel sound source signal,
    상기 제2 채널 음원신호를 상기 제1 증폭도로 증폭한 것과 상기 제1 채널 음원신호를 상기 제2 증폭도로 증폭한 것을 합하여 수정된 제2 채널 음원신호를 생성하는, 음향기기.Wherein the second channel sound source signal is generated by amplifying the second channel sound source signal by the first amplification degree and amplifying the first channel sound source signal by the second amplification degree.
  11. 제 10 항에 있어서,11. The method of claim 10,
    상기 제1 증폭도의 절대값은 상기 제2 증폭도의 절대값보다 큰, 음향기기.Wherein the absolute value of the first amplification factor is greater than the absolute value of the second amplification factor.
  12. 제 11 항에 있어서,12. The method of claim 11,
    상기 제1 증폭도는 2이고, 상기 제2 증폭도는 -1인, 음향기기.Wherein the first amplification degree is 2 and the second amplification degree is -1.
  13. 제 9 항 내지 제 12 항 중 어느 한 항에 있어서,13. The method according to any one of claims 9 to 12,
    상기 음원 분리부와 상기 음향 출력부 사이에 연결되고, 상기 음원 분리부에서 생성된 상기 채널 음원신호들을 수신하고, 단말기기로부터 포지션 제어신호를 수신하는, 포지션 조정부;를 더 포함하고,And a position adjustment unit connected between the sound source separation unit and the sound output unit and receiving the channel sound source signals generated by the sound source separation unit and receiving a position control signal from the terminal,
    상기 포지션 조정부는, 상기 포지션 제어신호에 기초하여 상기 음원 분리부에서 생성된 상기 채널 음원신호들을 처리하고,Wherein the position adjustment unit processes the channel sound source signals generated by the sound source separation unit based on the position control signal,
    상기 포지션 조정부에서 처리된 상기 채널 음원신호들이 상기 음향 출력부를 통해 출력되면, 상기 포지션 제어신호에 대응되는 소정의 공간들에서 상기 채널 음원신호들이 발생되는 것처럼 청취자에게 인식되는, 음향기기.Wherein when the channel sound source signals processed by the position adjustment unit are outputted through the sound output unit, the sound source signals are recognized by the listener as if the channel sound source signals are generated in predetermined spaces corresponding to the position control signal.
  14. 제 9 항 내지 제 12 항 중 어느 한 항에 있어서,13. The method according to any one of claims 9 to 12,
    사용자 입력에 대응하는 포지션 제어신호를 생성하는 사용자 입력부; 및A user input for generating a position control signal corresponding to a user input; And
    상기 음원 분리부와 상기 음향 출력부 사이에 연결되고, 상기 음원 분리부에서 생성된 상기 채널 음원신호들을 수신하고, 상기 사용자 입력부로부터 포지션 제어신호를 수신하는, 포지션 조정부;를 더 포함하고,And a position adjustment unit connected between the sound source separation unit and the sound output unit and receiving the channel sound source signals generated by the sound source separation unit and receiving a position control signal from the user input unit,
    상기 포지션 조정부는, 상기 포지션 제어신호에 기초하여 상기 음원 분리부에서 생성된 상기 채널 음원신호들을 처리하고,Wherein the position adjustment unit processes the channel sound source signals generated by the sound source separation unit based on the position control signal,
    상기 포지션 조정부에서 처리된 상기 채널 음원신호들이 상기 음향 출력부를 통해 출력되면, 상기 포지션 제어신호에 대응되는 소정의 공간들에서 상기 채널 음원신호들이 발생되는 것처럼 청취자에게 인식되는, 음향기기.Wherein when the channel sound source signals processed by the position adjustment unit are outputted through the sound output unit, the sound source signals are recognized by the listener as if the channel sound source signals are generated in predetermined spaces corresponding to the position control signal.
  15. 제 14 항에 있어서,15. The method of claim 14,
    상기 사용자 입력부는, 상기 포지션 조정부로부터 제공되는 소정의 정보를 표시하는 화면을 갖는 디스플레이부를 포함하고,Wherein the user input unit includes a display unit having a screen for displaying predetermined information provided from the position adjustment unit,
    상기 소정의 정보는, 상기 소정의 공간들에 대응되는 가상 스피커들의 포지션 정보를 포함하는, 음향기기.Wherein the predetermined information includes position information of virtual speakers corresponding to the predetermined spaces.
  16. 제 14 항에 있어서,15. The method of claim 14,
    상기 사용자 입력부는, 상기 소정의 공간들에 대응되는 가상 스피커들의 포지션을 조절하는 조절 스위치인, 음향기기.Wherein the user input unit is an adjustment switch for adjusting a position of virtual speakers corresponding to the predetermined spaces.
PCT/KR2018/009949 2017-09-06 2018-08-29 Sound source separation device and audio equipment WO2019050206A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2017-0113732 2017-09-06
KR1020170113732A KR101993585B1 (en) 2017-09-06 2017-09-06 Apparatus realtime dividing sound source and acoustic apparatus

Publications (1)

Publication Number Publication Date
WO2019050206A1 true WO2019050206A1 (en) 2019-03-14

Family

ID=65635357

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2018/009949 WO2019050206A1 (en) 2017-09-06 2018-08-29 Sound source separation device and audio equipment

Country Status (2)

Country Link
KR (1) KR101993585B1 (en)
WO (1) WO2019050206A1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR970003148Y1 (en) * 1993-12-18 1997-04-12 삼성전자 주식회사 An apparatus for regenerating super stereo sound
JP2004364239A (en) * 2003-10-15 2004-12-24 Fujitsu Ten Ltd Acoustic apparatus
KR20110072923A (en) * 2009-12-23 2011-06-29 삼성전자주식회사 Signal processing method and apparatus
KR20150117797A (en) * 2014-04-11 2015-10-21 하수호 Method and Apparatus for Providing 3D Stereophonic Sound
KR20160003658A (en) * 2013-04-26 2016-01-11 소니 주식회사 Audio processing device, method, and program

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106165453A (en) 2013-10-02 2016-11-23 斯托明瑞士有限责任公司 For lower mixed multi channel signals and for upper mixed under the method and apparatus of mixed signal

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR970003148Y1 (en) * 1993-12-18 1997-04-12 삼성전자 주식회사 An apparatus for regenerating super stereo sound
JP2004364239A (en) * 2003-10-15 2004-12-24 Fujitsu Ten Ltd Acoustic apparatus
KR20110072923A (en) * 2009-12-23 2011-06-29 삼성전자주식회사 Signal processing method and apparatus
KR20160003658A (en) * 2013-04-26 2016-01-11 소니 주식회사 Audio processing device, method, and program
KR20150117797A (en) * 2014-04-11 2015-10-21 하수호 Method and Apparatus for Providing 3D Stereophonic Sound

Also Published As

Publication number Publication date
KR20190027398A (en) 2019-03-15
KR101993585B1 (en) 2019-06-28

Similar Documents

Publication Publication Date Title
WO2016024847A1 (en) Method and device for generating and playing back audio signal
WO2011115430A2 (en) Method and apparatus for reproducing three-dimensional sound
WO2018056780A1 (en) Binaural audio signal processing method and apparatus
WO2018147701A1 (en) Method and apparatus for processing audio signal
WO2013019022A2 (en) Method and apparatus for processing audio signal
WO2016089180A1 (en) Audio signal processing apparatus and method for binaural rendering
WO2015152665A1 (en) Audio signal processing method and device
WO2011139090A2 (en) Method and apparatus for reproducing stereophonic sound
WO2015142073A1 (en) Audio signal processing method and apparatus
JP3435141B2 (en) SOUND IMAGE LOCALIZATION DEVICE, CONFERENCE DEVICE USING SOUND IMAGE LOCALIZATION DEVICE, MOBILE PHONE, AUDIO REPRODUCTION DEVICE, AUDIO RECORDING DEVICE, INFORMATION TERMINAL DEVICE, GAME MACHINE, COMMUNICATION AND BROADCASTING SYSTEM
WO2017209477A1 (en) Audio signal processing method and device
WO2019004524A1 (en) Audio playback method and audio playback apparatus in six degrees of freedom environment
WO2019103584A1 (en) Multi-channel sound implementation device using open-ear headphones and method therefor
WO2019107868A1 (en) Apparatus and method for outputting audio signal, and display apparatus using the same
WO2019147040A1 (en) Method for upmixing stereo audio as binaural audio and apparatus therefor
WO2019009562A1 (en) Sound output apparatus and signal processing method thereof
WO2019031652A1 (en) Three-dimensional audio playing method and playing apparatus
WO2020111512A1 (en) Device and method for improving perceptual ability through sound control
WO2018101600A1 (en) Electronic apparatus and control method thereof
WO2022023417A3 (en) System and method for headphone equalization and room adjustment for binaural playback in augmented reality
EP3610366A1 (en) Display apparatus and controlling method thereof
WO2019035622A1 (en) Audio signal processing method and apparatus using ambisonics signal
WO2015060696A1 (en) Stereophonic sound reproduction method and apparatus
WO2013187688A1 (en) Method for processing audio signal and audio signal processing apparatus adopting the same
WO2021010781A1 (en) Personalized headphone equalization

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18853439

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18853439

Country of ref document: EP

Kind code of ref document: A1