KR101871234B1 - 사운드 파노라마 생성 장치 및 방법 - Google Patents

사운드 파노라마 생성 장치 및 방법 Download PDF

Info

Publication number
KR101871234B1
KR101871234B1 KR1020120000070A KR20120000070A KR101871234B1 KR 101871234 B1 KR101871234 B1 KR 101871234B1 KR 1020120000070 A KR1020120000070 A KR 1020120000070A KR 20120000070 A KR20120000070 A KR 20120000070A KR 101871234 B1 KR101871234 B1 KR 101871234B1
Authority
KR
South Korea
Prior art keywords
sound output
sound
panning
masker
output device
Prior art date
Application number
KR1020120000070A
Other languages
English (en)
Other versions
KR20130078917A (ko
Inventor
이강은
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020120000070A priority Critical patent/KR101871234B1/ko
Priority to US13/731,567 priority patent/US9462405B2/en
Publication of KR20130078917A publication Critical patent/KR20130078917A/ko
Application granted granted Critical
Publication of KR101871234B1 publication Critical patent/KR101871234B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S5/00Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation 
    • H04S5/005Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation  of the pseudo five- or more-channel type, e.g. virtual surround
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S3/00Systems employing more than two channels, e.g. quadraphonic
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S3/00Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received
    • G01S3/80Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received using ultrasonic, sonic or infrasonic waves
    • G01S3/8006Multi-channel systems specially adapted for direction-finding, i.e. having a single aerial system capable of giving simultaneous indications of the directions of different signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2420/00Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/01Enhancing the perception of the sound image or of the spatial distribution using head related transfer functions [HRTF's] or equivalents thereof, e.g. interaural time difference [ITD] or interaural level difference [ILD]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S3/00Systems employing more than two channels, e.g. quadraphonic
    • H04S3/008Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Stereophonic System (AREA)

Abstract

사운드 파노라마 생성 장치 및 방법이 개시된다. 사운드 파노라마 생성 장치는 입력 신호를 이용하여 음원의 방향성을 나타내는 패닝 계수(panning coefficient)를 계산하는 패닝 계수 계산부; 상기 패닝 계수에 기초하여 원하는 방향의 음원을 추출하기 위한 방향 마스커(direction masker)를 결정하는 마스커 결정부; 및 상기 방향 마스커를 이용하여 상기 입력 신호를 사운드 출력 장치에 출력될 출력 신호로 분리하는 채널 분리부를 포함할 수 있다.

Description

사운드 파노라마 생성 장치 및 방법{APPARATUS AND METHOD FOR GENERATING SOUND PANORAMA}
본 발명은 사운드 파노라마 생성 장치 및 방법에 관한 것으로, 보다 구체적으로는 2채널 스테레오 입력에 신호 처리를 가하여 사운드가 청취자 주위를 감싸도록 하여 보다 생동감 있는 사운드 파노라마를 생성하는 장치 및 방법에 관한 것이다.
종래의 오디오 컨텐츠는 주로 2 채널인 스테레오 형태로 청취자에게 제공되고 있지만, 근래에 멀티채널 시스템이 보편화 되면서 멀티채널의 신호를 재생 또는 효과에 관한 사용자의 요구가 급증하고 있다.
따라서, 2 채널의 원음 신호를 변형하여 멀티채널 형태로 변환한 후 멀티채널 스피커로 재생함으로써 멀티 채널의 신호를 재생할 수 있다. 이 때, 2채널 입력을 다채널로 확장 시키는 기술을 업믹싱(upmixing)이라고 한다. 그러나, 실제로 구성된 스피커가 2채널에 불과하다면 출력 신호를 후처리하여 2채널에 대응하는 스피커라고 하더라도 사용자에게 사운드 파노라마 효과를 제공하는 것이 필요하다.
또한, 일반적인 2채널 스테레오 입력에 신호 처리를 가하여 사운드가 청취자 주위를 감싸도록 하여 보다 생동감 있는 사운드를 제공하기 위한 종래의 사운드 파노라마 생성 기술은 다음과 같은 문제가 있다.
구체적으로, 종래의 사운드 파노라마 생성 기술에 의하면, 음원의 분리 없이 가상 스피커를 생성함으로써 음원간의 간섭으로 인하여 가상 스피커의 생성이 정상적으로 생성되지 않는 문제가 있었다.
또한, 종래의 사운드 파노라마 생성 기술에 의하면, 음원 제작자의 의도와 다른 방향으로 사운드가 재생되고 같은 음원이 실제 스피커와 가상 스피커에서 함께 재생됨으로 인하여 고스트 사운드 이미지가 발생하는 문제가 있었다.
그리고, 종래의 사운드 파노라마 생성 기술에 의하면, 추출된 다채널 신호를 재생하는 환경이 사용자마다 구성한 스피커 위치가 모두 달라서 원래 의도한 스피커의 위치가 변형되어 사운드의 이미지가 소실되는 문제가 있었다.
결론적으로, 종래의 사운드 파노라마 생성 기술은 (i) 음원 중첩에 의한 고스트 음원 발생, (ii) 음원 중첩에 의한 간섭 현상으로 가상 스피커 생성이 방해되는 현상, (iii) 사용자가 사용하는 스피커 구성과 채널 분리 기술에서 의도한 스피커 구성이 다를 경우 사운드 이미지 손상 현상이 발생하는 바, 이러한 문제점을 해결하기 위한 방법이 필요하다.
본 발명의 일실시예에 따른 사운드 파노라마 생성 장치는 입력 신호를 이용하여 음원의 방향성을 나타내는 패닝 계수(panning coefficient)를 계산하는 패닝 계수 계산부; 상기 패닝 계수에 기초하여 원하는 방향의 음원을 추출하기 위한 방향 마스커(direction masker)를 결정하는 마스커 결정부; 및 상기 방향 마스커를 이용하여 상기 입력 신호를 사운드 출력 장치에 출력될 출력 신호로 분리하는 채널 분리부를 포함할 수 있다.
본 발명의 일실시예에 따른 사운드 파노라마 생성 장치는 상기 사운드 출력 장치의 종류에 따라 상기 출력 신호로부터 가상 신호를 생성하는 가상 로컬화부를 더 포함할 수 있다.
본 발명의 일실시예에 따른 사운드 파노라마 생성 방법은 입력 신호를 이용하여 음원의 방향성을 나타내는 패닝 계수(panning coefficient)를 계산하는 단계; 상기 패닝 계수에 기초하여 원하는 방향의 음원을 추출하기 위한 방향 마스커(direction masker)를 결정하는 단계; 및 상기 방향 마스커를 이용하여 상기 입력 신호를 사운드 출력 장치에 출력될 출력 신호로 분리하는 단계를 포함할 수 있다.
본 발명의 일실시예에 따른 사운드 파노라마 생성 방법은 상기 사운드 출력 장치의 종류에 따라 상기 출력 신호로부터 가상 신호를 생성하는 단계를 더 포함할 수 있다.
본 발명의 일실시예에 따른 사운드 파노라마 생성 장치를 통해 생동감 있는 사운드 효과를 사용자에게 제공한다.
첫째로, 사운드 파노라마 생성 장치는 2채널의 입력 신호를 기반으로 음원의 패닝 정보를 추출하고, 패닝 정보에 기초하여 사용자가 사용하고 있는 스피커의 위치에 맞게 음원을 분리하여 제공함으로써 음원 중첩에 의한 고스트 음원을 제거할 수 있다.
둘째로, 사운드 파노라마 생성 장치는 음원 분리 기술에 의하여 하나의 스피커에서 여러 방향의 음원이 중첩되지 않아 스피커 간 음원 중첩에 의한 간섭 현상의 발생을 방지할 수 있다.
셋째로, 사운드 파노라마 생성 장치는 사용자로부터 스피커의 구성 정보를 받아 사용되고 있는 스피커의 방향에 맞는 방향의 음원을 추출함으로써 실제 스피커와 분리된 음원간의 방향이 맞지않아 스테레오 이미지가 손상되는 현상을 방지할 수 있다.
도 1은 본 발명의 일실시예에 따른 사운드 파노라마 생성 장치를 도시한 도면이다.
도 2는 본 발명의 일실시예에 따라 사운드 파노라마 효과를 적용한 출력 신호를 도출하는 실시예를 도시한 도면이다.
도 3은 본 발명의 일실시예에 따른 T-F 그리드에서 패닝 계수의 분포를 도시한 도면이다.
도 4는 본 발명의 일실시예에 따른 패닝 계수를 계산하는 과정을 설명하는 도면이다.
도 5는 본 발명의 일실시예에 따른 패닝 계수를 계산하는 방식에 따라 도출된 패닝 계수의 차이를 설명하는 도면이다.
도 6은 본 발명의 일실시예에 따라 방향 마스커를 결정하는 과정을 도시한 도면이다.
도 7은 본 발명의 일실시예에 따라 사용자에 의하여 정의된 사운드 출력 장치(스피커)를 도시한 도면이다.
도 8은 본 발명의 일실시예에 따른 패닝 계수 윈도우를 처리하는 실시예를 도시한 도면이다.
도 9는 본 발명의 일실시예에 따른 채널 분리부의 세부 구성을 도시한 도면이다.
도 10은 본 발명의 일실시예에 따른 사운드 출력 장치가 헤드폰일 때 가상 로컬화부의 세부 구성을 도시한 도면이다.
도 11은 본 발명의 일실시예에 따른 사운드 출력 장치가 스테레오 스피커일 때 가상 로컬화부의 세부 구성을 도시한 도면이다.
도 12는 본 발명의 일실시예에 따른 사운드 파노라마 생성 방법을 도시한 플로우차트이다.
이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
도 1은 본 발명의 일실시예에 따른 사운드 파노라마 생성 장치를 도시한 도면이다.
도 1을 참고하면, 사운드 파노라마 생성 장치(100)는 패닝 계수 계산부(101), 마스커 결정부(102), 채널 분리부(103)를 포함할 수 있다. 추가적으로, 사운드 파노라마 생성 장치(100)는 가상 로컬화부(104)를 더 포함할 수 있다.
패닝 계수 계산부(101)는 입력 신호를 이용하여 음원의 방향성을 나타내는 패닝 계수(panning coefficient)를 계산할 수 있다. 일례로, 패닝 계수 계산부(101)는 입력 신호에 기초한 주파수 성분을 이용하여 패닝 계수를 계산할 수 있다.
마스커 결정부(102)는 패닝 계수에 기초하여 원하는 방향의 음원을 추출하기 위한 방향 마스커(direction masker)를 결정할 수 있다. 이 때, 마스커 결정부(102)는 타겟 위치에 대응하는 사운드 출력 장치의 방향과 일치하는 패닝 계수를 가지는 음원을 마스킹하기 위한 방향 마스커를 결정할 수 있다.
일례로, 마스커 결정부(102)는 제어 계수 결정부와 윈도우 처리부를 포함할 수 있다.
제어 계수 결정부는 사운드 출력 장치의 구성 정보를 이용하여 패닝 계수를 윈도우 처리하기 위한 제어 계수(control coefficient)를 결정할 수 있다. 일례로, 제어 계수 결정부는 왼쪽 경계에 대응하는 제1 사운드 출력 장치와 오른쪽 경계에 대응하는 제2 사운드 출력 장치에 기초한 제1 각도, 타겟 위치에 대응하는 제3 사운드 출력 장치에 기초한 제2 각도, 타겟 위치를 중심으로 왼쪽에 인접하는 제4 사운드 출력 장치에 기초한 제3 각도, 타겟 위치를 중심으로 오른쪽에 인접하는 제5 사운드 출력 장치에 기초한 제4 각도를 이용하여 제어 계수를 결정할 수 있다.
윈도우 처리부는 제어 계수를 이용하여 사운드 출력 장치에 기초한 패닝 계수 윈도우를 처리할 수 있다. 윈도우 처리부는 사운드 출력 장치에 대응하는 방향에서 윈도우의 값이 최대가 되고, 인접한 사운드 출력 장치로 갈수록 윈도우의 값이 적어지는 윈도우를 처리할 수 있다.
채널 분리부(103)는 방향 마스커를 이용하여 입력 신호를 사운드 출력 장치에 출력될 출력 신호로 분리할 수 있다. 일례로, 채널 분리부(103)는 타겟 위치에 대응하는 사운드 출력 장치의 각도에 기초하여 입력 신호에 방향 마스커를 적용할 수 있다.
가상 로컬화부(104)는 사운드 출력 장치의 종류에 따라 출력 신호로부터 가상 신호를 생성할 수 있다. 일례로, 가상 로컬화부(104)는 사운드 출력 장치가 헤드폰인 경우, HRTF(head related transfer function)을 적용하여 가상 신호를 생성할 수 있다. 또는, 가상 로컬화부(104)는 사운드 출력 장치가 스테레오 스피커인 경우, HRTF와 크로스톡 제거(crosstalk canceller)를 적용하여 가상 신호를 생성할 수 있다.
도 2 내지 도 9에서는 도 1의 각 구성 요소에 대해 보다 구체적으로 설명하도록 하겠다.
도 2는 본 발명의 일실시예에 따라 사운드 파노라마 효과를 적용한 출력 신호를 도출하는 실시예를 도시한 도면이다.
도 2를 참고하면, 입력 신호는 시간-주파수 도메인 변환부(201)를 통해 시간 도메인에서 주파수 도메인에 대응하는 신호로 변환될 수 있다. 여기서, 입력 신호는 왼쪽 채널 신호(SL(t))와 오른쪽 채널 신호(SR(t))로 구성된다고 가정한다. 입력 신호를 구성하는 왼쪽 채널 신호(SL(t))와 오른쪽 채널 신호(SR(t))는 시간-주파수 도메인 변환부(201)를 통해 SL(m, k)와 SR(m, k)로 변환된다. m은 프레임 인덱스를 나타내고, k는 주파수 인덱스를 나타낸다.
도 2에서, 패닝 계수 계산부(202), 마스커 결정부(203) 및 채널 분리부(204)는 음향 파노라마 필터(acoustic panorama fileter)를 구성한다.
변환된 왼쪽 채널 신호인 SL(m, k)와 변환된 오른쪽 채널 SR(m, k)가 패닝 계수 계산부(202)에 입력된다. 패닝 계수 계산부(202)는 SL(m, k)와 SR(m, k)를 이용하여 패닝 계수 Γ(m,k)를 계산할 수 있다. 패닝 계수 Γ(m,k)는 마스커 결정부(203)에 입력된다. 마스커 결정부(203)는 패닝 계수와 사용자에 의해 입력된 사운드 출력 장치의 구성 정보(configuration information)을 이용하여 각각의 사운드 출력 장치에 대응하는 음원을 분리하기 위한 방향 마스커인 ψ(m, k)를 결정할 수 있다.
여기서, 최종적인 출력 신호가 출력될 사운드 출력 장치가 다채널 스피커가 아니거나 또는 헤드폰인 경우, 사운드 출력 장치의 구성 정보는 표준 5.1 채널 스피커와 관련된 구성 정보를 포함할 수 있다.
마스커 결정부(203)를 통해 도출된 방향 마스커인 ψ(m,k)는 채널 분리부(204)에 입력된다. 채널 분리부(204)는 방향 마스커인 ψ(m,k)를 이용하여 변환된 입력 신호인 SL(m,k)과 SR(m,k)에서 사용자가 지정한 사운드 출력 장치인 스피커들에서 출력될 다채널의 출력 신호인 D1(m,k),…, DN(m,k)를 분리한다.
만약, 사운드 출력 장치가 2채널을 초과하는 다채널 스피커인 경우, 분리된 다채널의 출력 신호는 주파수-시간 도메인 변환부(206)를 통해 시간 도메인의 출력 신호로 변환된다. 채널 분리부(204)를 통해 분리된 출력 신호는 다채널 스피커 중 해당하는 스피커를 통하여 출력된다.
만약, 사운드 출력 장치가 2채널의 스테레오 스피커이거나 헤드폰인 경우, 분리된 다채널의 출력 신호는 가상 로컬화부(205)에 입력된다. 가상 로컬화부(205)는 다채널의 출력 신호를 사용자가 가상의 다채널 방향에서 사운드를 들을 수 있도록 왼쪽 채널에 대응하는 가상 신호 VL(m,k)와 오른쪽 채널에 대응하는 가상 신호 VR(m,k)를 출력한다. VL(m,k)와 VR(m,k)는 각각 주파수-시간 도메인 변환부(206)를 통해 시간 도메인에 대응하는 vL(t)와 vR(t)로 변환되고, 스테레오 스피커 또는 헤드폰을 통해 출력된다.
본 발명의 일실시예에 따른 사운드 파노라마 생성 장치를 통해 생동감 있는 사운드 효과를 사용자에게 제공한다.
첫째로, 사운드 파노라마 생성 장치는 2채널의 입력 신호를 기반으로 음원의 패닝 정보를 추출하고, 패닝 정보에 기초하여 사용자가 사용하고 있는 스피커의 위치에 맞게 음원을 분리하여 제공함으로써 음원 중첩에 의한 고스트 음원을 제거할 수 있다.
둘째로, 사운드 파노라마 생성 장치는 음원 분리 기술에 의하여 하나의 스피커에서 여러 방향의 음원이 중첩되지 않아 스피커 간 음원 중첩에 의한 간섭 현상의 발생을 방지할 수 있다.
셋째로, 사운드 파노라마 생성 장치는 사용자로부터 스피커의 구성 정보를 받아 사용되고 있는 스피커의 방향에 맞는 방향의 음원을 추출함으로써 실제 스피커와 분리된 음원간의 방향이 맞지않아 스테레오 이미지가 손상되는 현상을 방지할 수 있다.
도 3은 본 발명의 일실시예에 따른 T-F 그리드에서 패닝 계수의 분포를 도시한 도면이다.
도 2에서 언급한 시간-주파수 도메인 변환은 미리 정해진 샘플들을 포함하는 프레임 단위로 수행된다. 여기서, 프레임 인덱스를 m이라고 하고, k를 주파수 인덱스라고 할 때 도 3과 같은 T-F 그리드가 생성될 수 있다.
2개 이상의 음원이 2채널에 믹싱되어 있을 때 각 음원은 같은 T-F 그리드 상에 존재하지 않는다고 가정한다. 그러면, 패닝 계수는 m과 k를 인덱스로 하는 T-F 그리드 상의 주파수 빈(bin)을 기준으로 계산된다.
본 발명에서는 패닝 계수가 1에 가까워질수록 오른쪽 채널에 음원이 존재하는 것을 의미하고, 패닝 계수가 0에 가까워질수록 왼쪽 채널에 음원이 존재하는 것으로 가정한다. 그리고, 패닝 계수가 0.5에 가까워질수록 왼쪽 채널과 오른쪽 채널에 음원이 거의 동일한 크기로 존재하기 때문에, 사용자를 중심으로 센터 방향에 음원이 존재하는 것으로 가정한다.
도 3에서 T-F 그리드 상에서 패닝 계수가 클수록 진한색을 나타내고, 패닝 계수가 작을수록 옅은색을 나타낸다. 도 3에서 주파수 인덱스인 k가 클수록 음원이 평균적으로 오른쪽에 존재하고, k가 작을수록 음원이 평균적으로 왼쪽에 존재하는 것으로 가정될 수 있다.
도 4는 본 발명의 일실시예에 따른 패닝 계수를 계산하는 과정을 설명하는 도면이다.
음원의 방향성을 나타내는 패닝 계수는 하기 수학식 1과 수학식 2를 통해 도출될 수 있다. 수학식 1에 따라 계산되는 패닝 계수는 도 4에 도시된 패닝 계수 계산부의 구성을 통해 도출된다.
Figure 112012000085718-pat00001
Figure 112012000085718-pat00002
수학식 2 보다 수학식 1에 따라 패닝 계수를 계산할 때 복잡도가 낮아진다. 그러나, 수학식 1에 따라 계산된 패닝 계수는 수학식 2에 따라 계산된 패닝 계수보다 정확도가 낮기 때문에, 음원의 방향을 정확하게 반영할 수 없다.
도 5는 본 발명의 일실시예에 따른 패닝 계수를 계산하는 방식에 따라 도출된 패닝 계수의 차이를 설명하는 도면이다.
도 5를 참고하면, 수학식 1에 따라 계산된 패닝 계수와 수학식 2에 따라 계산된 패닝 계수의 차이가 도시된다. 도 5의 그래프에서 왼쪽이 -90˚이고, 오른쪽이 90˚라고 할 때, 수학식 1에 따라 계산된 패닝 계수보다 수학식 2에 따라 계산된 패닝 계수가 음원의 방향을 보다 정확하게 반영하고 있다는 것을 알 수 있다. 즉, 수학식 1에 따라 계산된 패닝 계수는 음원의 방향에 따른 오차가 존재하여 수학식 2에 따라 계산된 패닝 계수보다 정확도가 낮다는 것을 알 수 있다.
따라서, 수학식 1은 빠른 처리 성능을 요구하는 시스템에 적용될 수 있고, 수학식 2는 고품질의 성능을 요구하는 시스템에 적용될 수 있다.
도 6은 본 발명의 일실시예에 따라 방향 마스커를 결정하는 과정을 도시한 도면이다.
방향 마스커는 원하는 방향의 음원을 추출하기 위한 것이다. 예를 들어, 패닝 계수가 0.5인 센터 방향에 대응하는 음원을 추출하기 위해서, T-F 그리드 상에서 패닝 계수가 0.5인 T-F 그리드의 방향 마스커의 값은 1이 되어야 한다. 그러나, T-F 그리드별로 음원이 정확하게 독립적이지 않기 때문에, 패닝 계수가 0.5 주변에 대응하는 값까지 포함해야 한다.
그리고, 인접한 스피커들 사이의 방향에 존재하는 음원들은 정확하게 실제 스피커의 방향과 일치하지 않는다. 인접한 스피커 사이의 방향에 존재하는 음원들을 위하여 인접한 스피커에서 동시에 적당한 음압의 강도로 출력함으로써 두 스피커 사이의 방향에서 음원이 재생되는 효과를 줄 수 있다.
이와 같은 효과를 위해서, 인접한 패닝 계수 윈도우가 서로 오버랩 되는 구간이 필요하기 때문에, 사운드 파노라마 생성 장치는 오버랩되는 구간에서 두 패닝 계수 윈도우의 합은 1이 되어 음원의 추출 과정에서 소실되는 음원이 없도록 한다.
도 6은 위와 같은 특성을 만족하는 방향 마스커를 결정하는 과정을 나타낸다. 출력 신호를 가상 로컬화(virtual localization)가 필요한 사운드 출력 장치인 스테레오 스피커 또는 헤드폰으로 출력할 경우, 방향 마스커 결정부(601)는 미리 정의된 사운드 출력 장치의 구성 정보를 이용하여 패닝 계수를 윈도우 처리하기 위한 제어 계수(control efficient)를 결정할 수 있다.
반면에, 출력 신호를 가상 로컬화(virtual localization)가 필요하지 않은 사운드 출력 장치인 실제 다채널 스피커로 출력할 경우, 방향 마스커 결정부(601)은 사용자가 사용하는 사운드 출력 장치인 다채널 스피커의 구성 정보를 입력받아 패닝 계수를 윈도우 처리하기 위한 제어 계수(control efficient)를 결정할 수 있다. 도 6에서 도시된 방향 마스커인 ψ(m,k)를 결정하는 과정에 대해서는 도 7에서 구체적으로 설명하기로 한다.
도 7은 본 발명의 일실시예에 따라 사용자에 의하여 정의된 사운드 출력 장치(스피커)를 도시한 도면이다.
마스커 결정부(601)에 입력되는 사운드 출력 장치의 구성 정보가 도 7이라고 가정한다. 사운드 출력 장치의 구성 정보는 사용자에 의해 입력되거나 또는 미리 정해진 다채널 스피커 구성 정보(예를 들면, 5.1 채널)일 수 있다.
사용자를 중심으로 왼쪽 경계에 대응하는 스피커(701)과 오른쪽 경계에 대응하는 스피커(705) 사이의 각도를 θmax이고, 타겟 위치에 대응하는 스피커(703)에 기초한 각도를 θT라고 한다. 그리고, 타겟 위치를 중심으로 왼쪽에 인접하는 스피커(702)에 기초한 각도를 θL이라고 하고, 타겟 위치를 중심으로 왼쪽에 인접하는 스피커(704)에 기초한 각도를 θR이라고 한다.
패닝 계수를 윈도우 처리하기 위한 제어 계수(control efficient)인 ΓL, ΓR, δL, δR는 하기 수학식 3과 수학식 4에 따라 결정될 수 있다. 이 때, 수학식 1에 따라 패닝 계수가 계산될 때 수학식 3이 이용되고, 수학식 2에 따라 패닝 계수가 계산될 때 수학식 4가 이용된다.
Figure 112012000085718-pat00003
Figure 112012000085718-pat00004
타겟 위치에 대응하는 스피커(703)의 방향과 일치하는 패닝 계수를 갖는 음원을 마스킹하기 위한 방향 마스커 ψ(m,k)는 상기 수학식 3과 수학식 4를 통해 계산된 제어 계수(control efficient)를 이용하여 수학식 5에 따라 결정된다.
Figure 112012000085718-pat00005
도 8은 본 발명의 일실시예에 따른 패닝 계수 윈도우를 처리하는 실시예를 도시한 도면이다.
도 7에서 θmax는 180˚ θL는 60˚ θT는 120˚ θR는 155˚라고 할 때 패닝 계수 윈도우는 도 8과 같이 도출된다. 도 8을 참고하면, 사운드 출력 장치인 스피커(803)에 해당하는 방향에서 패닝 계수 윈도우는 1이 되고 인접한 스피커(802, 804)까지 패닝 계수 윈도우가 1에서 0으로 감소하는 것을 알 수 있다.
또한 인접한 스피커들 간의 패닝 계수 윈도우는 서로 오버랩되며, 오버랩 결과 패닝 계수 윈도우의 합이 1이 되어 인접한 스피커 간에 음원의 소실이 발생하지 않는다.
도 9는 본 발명의 일실시예에 따른 채널 분리부의 세부 구성을 도시한 도면이다.
타겟 위치에 대응하는 스피커의 각도인 θ'T의 크기가 π/4보다 크다면, 채널 분리부(901)은 오른쪽 입력 신호 SR(m, k)에 방향 마스커를 곱하여 분리된 출력 신호인 D(m, k)를 출력한다. 반대로, 타겟 위치에 대응하는 스피커의 각도인 θ'T의 크기가 π/4보다 작다면, 채널 분리부(901)은 왼쪽 입력 신호 SL(m, k)에 방향 마스커를 곱하여 분리된 출력 신호인 D(m,k)를 출력한다.
도 10은 본 발명의 일실시예에 따른 사운드 출력 장치가 헤드폰일 때 가상 로컬화부의 세부 구성을 도시한 도면이다.
사운드 출력 장치가 헤드폰일 경우, 가상 로컬화부는 미리 정의된 각 스피커의 위치 T1, T2, ..에서의 HRTF(head related transfer function)(1001~1004)를 적용하여 헤드폰에서 가상의 다채널 신호를 느낄 수 있는 왼쪽 출력 신호와 오른쪽 출력 신호 VL(m,k)와 VR(m,k)를 출력한다.
도 11은 본 발명의 일실시예에 따른 사운드 출력 장치가 스테레오 스피커일 때 가상 로컬화부의 세부 구성을 도시한 도면이다.
도 10과 달리 사운드 출력 장치가 스테레오 스피커일 경우 가상 로컬화부는 도 10에 비해 추가적으로 크로스톡 제거(crosstalk canceller)가 적용된다.
크로스톡 제거의 Σ와 Δ는 수학식 6으로 도출된다. 수학식 6에서 Hi는 스피커로부터 상기 스피커와 동일한 방향에 위치한 청취자의 귀까지의 전달함수 이고, 이러한 전달함수는 동측(同側)의 전달함수라 정의된다. 반면, Hc는 스피커로부터 상기 스피커와 반대 방향에 위치한 청취자의 귀까지의 전달함수 이고, 이러한 전달함수는 대측(對側)의 전달함수라고 칭한다.
Figure 112012000085718-pat00006
도 12는 본 발명의 일실시예에 따른 사운드 파노라마 생성 방법을 도시한 플로우차트이다.
단계(1201)에서, 사운드 파노라마 생성 장치는 입력 신호를 이용하여 음원의 방향성을 나타내는 패닝 계수(panning coefficient)를 계산할 수 있다. 일례로, 사운드 파노라마 생성 장치는 입력 신호에 기초한 주파수 성분을 이용하여 패닝 계수를 계산할 수 있다.
단계(1202)에서, 사운드 파노라마 생성 장치는 패닝 계수에 기초하여 원하는 방향의 음원을 추출하기 위한 방향 마스커(direction masker)를 결정할 수 있다. 이 때, 사운드 파노라마 생성 장치는 타겟 위치에 대응하는 사운드 출력 장치의 방향과 일치하는 패닝 계수를 가지는 음원을 마스킹하기 위한 방향 마스커를 결정할 수 있다.
일례로, 사운드 파노라마 생성 장치는 제어 계수를 결정하는 과정과 윈도우를 처리하는 과정을 수행할 수 있다.
구체적으로, 사운드 파노라마 생성 장치는 사운드 출력 장치의 구성 정보를 이용하여 패닝 계수를 윈도우 처리하기 위한 제어 계수(control coefficient)를 결정할 수 있다. 일례로, 사운드 파노라마 생성 장치는 왼쪽 경계에 대응하는 제1 사운드 출력 장치와 오른쪽 경계에 대응하는 제2 사운드 출력 장치에 기초한 제1 각도, 타겟 위치에 대응하는 제3 사운드 출력 장치에 기초한 제2 각도, 타겟 위치를 중심으로 왼쪽에 인접하는 제4 사운드 출력 장치에 기초한 제3 각도, 타겟 위치를 중심으로 오른쪽에 인접하는 제5 사운드 출력 장치에 기초한 제4 각도를 이용하여 제어 계수를 결정할 수 있다.
그리고, 사운드 파노라마 생성 장치는 제어 계수를 이용하여 사운드 출력 장치에 기초한 패닝 계수 윈도우를 처리할 수 있다. 사운드 파노라마 생성 장치는 사운드 출력 장치에 대응하는 방향에서 윈도우의 값이 최대가 되고, 인접한 사운드 출력 장치로 갈수록 윈도우의 값이 적어지는 윈도우를 처리할 수 있다.
단계(1203)에서, 사운드 파노라마 생성 장치는 방향 마스커를 이용하여 입력 신호를 사운드 출력 장치에 출력될 출력 신호로 분리할 수 있다. 일례로, 사운드 파노라마 생성 장치는 타겟 위치에 대응하는 사운드 출력 장치의 각도에 기초하여 입력 신호에 방향 마스커를 적용할 수 있다.
단계(1204)에서, 사운드 파노라마 생성 장치는 사운드 출력 장치의 종류에 따라 출력 신호로부터 가상 신호를 생성할 수 있다. 일례로, 사운드 파노라마 생성 장치는 사운드 출력 장치가 헤드폰인 경우, HRTF(head related transfer function)을 적용하여 가상 신호를 생성할 수 있다. 또는, 사운드 파노라마 생성 장치는 사운드 출력 장치가 스테레오 스피커인 경우, HRTF와 크로스톡 제거(crosstalk canceller)를 적용하여 가상 신호를 생성할 수 있다.
본 발명의 실시 예에 따른 방법들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
100: 사운드 파노라마 생성 장치
101: 패닝 계수 계산부
102: 마스커 결정부
103: 채널 분리부
104: 가상 로컬화부

Claims (19)

  1. 입력 신호를 이용하여 음원의 방향성을 나타내는 패닝 계수(panning coefficient)를 계산하는 패닝 계수 계산부;
    상기 패닝 계수에 기초하여 원하는 방향의 음원을 추출하기 위한 방향 마스커(direction masker)를 결정하는 마스커 결정부; 및
    상기 방향 마스커를 이용하여 상기 입력 신호를 사운드 출력 장치에 출력될 출력 신호로 분리하는 채널 분리부
    를 포함하고,
    상기 마스커 결정부는,
    상기 사운드 출력 장치의 구성 정보를 이용하여 패닝 계수를 윈도우 처리하기 위한 제어 계수(control efficient)를 결정하는 제어 계수 결정부; 및
    상기 제어 계수를 이용하여 상기 사운드 출력 장치에 기초한 패닝 계수 윈도우를 처리하는 윈도우 처리부를 포함하며,
    상기 채널 분리부는,
    타겟 위치에 대응하는 사운드 출력 장치의 각도에 기초하여 입력 신호에 방향 마스커를 적용하는 사운드 파노라마 생성 장치.
  2. 제1항에 있어서,
    상기 패닝 계수 계산부는,
    상기 입력 신호에 기초한 주파수 성분을 이용하여 패닝 계수를 계산하는 것을 특징으로 하는 사운드 파노라마 생성 장치.
  3. 삭제
  4. 제1항에 있어서,
    상기 제어 계수 결정부는,
    왼쪽 경계에 대응하는 제1 사운드 출력 장치와 오른쪽 경계에 대응하는 제2 사운드 출력 장치에 기초한 제1 각도, 타겟 위치에 대응하는 제3 사운드 출력 장치에 기초한 제2 각도, 타겟 위치를 중심으로 왼쪽에 인접하는 제4 사운드 출력 장치에 기초한 제3 각도, 타겟 위치를 중심으로 오른쪽에 인접하는 제5 사운드 출력 장치에 기초한 제4 각도를 이용하여 제어 계수를 결정하는 것을 특징으로 하는 사운드 파노라마 생성 장치.
  5. 제1항에 있어서,
    상기 윈도우 처리부는,
    사운드 출력 장치에 대응하는 방향에서 윈도우의 값이 최대가 되고, 인접한 사운드 출력 장치로 갈수록 윈도우의 값이 적어지는 윈도우를 처리하는 것을 특징으로 하는 사운드 파노라마 생성 장치.
  6. 제1항에 있어서,
    상기 마스커 결정부는,
    타겟 위치에 대응하는 사운드 출력 장치의 방향과 일치하는 패닝 계수를 가지는 음원을 마스킹하기 위한 방향 마스커를 결정하는 것을 특징으로 하는 사운드 파노라마 생성 장치.
  7. 삭제
  8. 제1항에 있어서,
    상기 사운드 출력 장치의 종류에 따라 상기 출력 신호로부터 가상 신호를 생성하는 가상 로컬화부
    를 더 포함하는 사운드 파노라마 생성 장치.
  9. 제8항에 있어서,
    상기 가상 로컬화부는,
    상기 사운드 출력 장치가 헤드폰인 경우, HRTF(head related transfer function)을 적용하여 가상 신호를 생성하고,
    상기 사운드 출력 장치가 스테레오 스피커인 경우, 상기 HRTF와 크로스톡 제거(crosstalk canceller)를 적용하여 가상 신호를 생성하는 것을 특징으로 하는 사운드 파노라마 생성 장치.
  10. 입력 신호를 이용하여 음원의 방향성을 나타내는 패닝 계수(panning coefficient)를 계산하는 단계;
    상기 패닝 계수에 기초하여 원하는 방향의 음원을 추출하기 위한 방향 마스커(direction masker)를 결정하는 단계; 및
    상기 방향 마스커를 이용하여 상기 입력 신호를 사운드 출력 장치에 출력될 출력 신호로 분리하는 단계
    를 포함하고,
    상기 방향 마스커를 결정하는 단계는,
    상기 사운드 출력 장치의 구성 정보를 이용하여 패닝 계수를 윈도우 처리하기 위한 제어 계수(control efficient)를 결정하는 단계; 및
    상기 제어 계수를 이용하여 상기 사운드 출력 장치에 기초한 패닝 계수 윈도우를 처리하는 단계
    를 포함하며,
    상기 입력 신호를 사운드 출력 장치에 출력될 출력 신호로 분리하는 단계는,
    타겟 위치에 대응하는 사운드 출력 장치의 각도에 기초하여 입력 신호에 방향 마스커를 적용하는 사운드 파노라마 생성 방법.
  11. 제10항에 있어서,
    상기 패닝 계수를 계산하는 단계는,
    상기 입력 신호에 기초한 주파수 성분을 이용하여 패닝 계수를 계산하는 것을 특징으로 하는 사운드 파노라마 생성 방법.
  12. 삭제
  13. 제10항에 있어서,
    상기 제어 계수를 결정하는 단계는,
    왼쪽 경계에 대응하는 제1 사운드 출력 장치와 오른쪽 경계에 대응하는 제2 사운드 출력 장치에 기초한 제1 각도, 타겟 위치에 대응하는 제3 사운드 출력 장치에 기초한 제2 각도, 타겟 위치를 중심으로 왼쪽에 인접하는 제4 사운드 출력 장치에 기초한 제3 각도, 타겟 위치를 중심으로 오른쪽에 인접하는 제5 사운드 출력 장치에 기초한 제4 각도를 이용하여 제어 계수를 결정하는 것을 특징으로 하는 사운드 파노라마 생성 방법.
  14. 제10항에 있어서,
    상기 패닝 계수 윈도우를 처리하는 단계는,
    사운드 출력 장치에 대응하는 방향에서 윈도우의 값이 최대가 되고, 인접한 사운드 출력 장치로 갈수록 윈도우의 값이 적어지는 윈도우를 처리하는 것을 특징으로 하는 사운드 파노라마 생성 방법.
  15. 제10항에 있어서,
    상기 방향 마스커를 결정하는 단계는,
    타겟 위치에 대응하는 사운드 출력 장치의 방향과 일치하는 패닝 계수를 가지는 음원을 마스킹하기 위한 방향 마스커를 결정하는 것을 특징으로 하는 사운드 파노라마 생성 방법.
  16. 삭제
  17. 제10항에 있어서,
    상기 사운드 출력 장치의 종류에 따라 상기 출력 신호로부터 가상 신호를 생성하는 단계
    를 더 포함하는 사운드 파노라마 생성 방법.
  18. 제17항에 있어서,
    상기 상기 출력 신호로부터 가상 신호를 생성하는 단계는,
    상기 사운드 출력 장치가 헤드폰인 경우, HRTF(head related transfer function)을 적용하여 가상 신호를 생성하는 단계; 또는
    상기 사운드 출력 장치가 스테레오 스피커인 경우, 상기 HRTF와 크로스톡 제거(crosstalk canceller)를 적용하여 가상 신호를 생성하는 단계
    를 포함하는 사운드 파노라마 생성 방법.
  19. 제10항, 제11항, 제13항 내지 제15항, 제17항 및 제18항 중 어느 한 항의 방법을 실행하기 위한 프로그램이 기록된 컴퓨터에서 판독 가능한 기록 매체.
KR1020120000070A 2012-01-02 2012-01-02 사운드 파노라마 생성 장치 및 방법 KR101871234B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020120000070A KR101871234B1 (ko) 2012-01-02 2012-01-02 사운드 파노라마 생성 장치 및 방법
US13/731,567 US9462405B2 (en) 2012-01-02 2012-12-31 Apparatus and method for generating panoramic sound

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120000070A KR101871234B1 (ko) 2012-01-02 2012-01-02 사운드 파노라마 생성 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20130078917A KR20130078917A (ko) 2013-07-10
KR101871234B1 true KR101871234B1 (ko) 2018-08-02

Family

ID=48694810

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120000070A KR101871234B1 (ko) 2012-01-02 2012-01-02 사운드 파노라마 생성 장치 및 방법

Country Status (2)

Country Link
US (1) US9462405B2 (ko)
KR (1) KR101871234B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11532366B2 (en) 2020-08-11 2022-12-20 Samsung Electronics Co., Ltd. Storage devices and methods of operating storage devices

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3041272A4 (en) * 2013-08-30 2017-04-05 Kyoei Engineering Co., Ltd. Sound processing apparatus, sound processing method, and sound processing program
US9782672B2 (en) 2014-09-12 2017-10-10 Voyetra Turtle Beach, Inc. Gaming headset with enhanced off-screen awareness
DE102015104699A1 (de) 2015-03-27 2016-09-29 Hamburg Innovation Gmbh Verfahren zur Analyse und Dekomposition von Stereoaudiosignalen
MX2017013642A (es) 2015-04-24 2018-07-06 Huawei Tech Co Ltd UN APARATO DE PROCESAMIENTO DE SEÑAL DE AUDIO Y Mí‰TODO PARA MODIFICAR UNA IMAGEN ESTí‰REO DE UNA SEÑAL ESTí‰REO.
US9820073B1 (en) 2017-05-10 2017-11-14 Tls Corp. Extracting a common signal from multiple audio signals
CN107820162B (zh) * 2017-10-31 2021-06-29 北京酷我科技有限公司 一种模拟全景音效的方法
CN110267166B (zh) * 2019-07-16 2021-08-03 上海艺瓣文化传播有限公司 一种基于双耳效应的虚拟声场实时交互***

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090055196A1 (en) * 2005-05-26 2009-02-26 Lg Electronics Method of Encoding and Decoding an Audio Signal
US20110081024A1 (en) * 2009-10-05 2011-04-07 Harman International Industries, Incorporated System for spatial extraction of audio signals
US20110238425A1 (en) * 2008-10-08 2011-09-29 Max Neuendorf Multi-Resolution Switched Audio Encoding/Decoding Scheme

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100521822B1 (ko) 1995-07-28 2005-10-17 에스알에스 랩스, 인크. 음향 교정 장치
US7970144B1 (en) * 2003-12-17 2011-06-28 Creative Technology Ltd Extracting and modifying a panned source for enhancement and upmix of audio signals
US7760886B2 (en) * 2005-12-20 2010-07-20 Fraunhofer-Gesellschaft zur Foerderung der Angewandten Forscheng e.V. Apparatus and method for synthesizing three output channels using two input channels
JP4835298B2 (ja) 2006-07-21 2011-12-14 ソニー株式会社 オーディオ信号処理装置、オーディオ信号処理方法およびプログラム
US8290167B2 (en) 2007-03-21 2012-10-16 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Method and apparatus for conversion between multi-channel audio formats
CN101816192B (zh) 2007-10-03 2013-05-29 皇家飞利浦电子股份有限公司 用于头戴耳机再现的方法、头戴耳机再现***
KR20090131237A (ko) 2008-06-17 2009-12-28 한국전자통신연구원 공간 필터링을 이용한 오디오 채널 분리 장치 및 그 방법
US8705749B2 (en) 2008-08-14 2014-04-22 Dolby Laboratories Licensing Corporation Audio signal transformatting
KR101038574B1 (ko) 2009-01-16 2011-06-02 전자부품연구원 3차원 오디오 음상 정위 방법과 장치 및 이와 같은 방법을 구현하는 프로그램이 기록되는 기록매체
JP2010252220A (ja) 2009-04-20 2010-11-04 Nippon Hoso Kyokai <Nhk> 3次元音響パンニング装置およびそのプログラム
KR101567461B1 (ko) * 2009-11-16 2015-11-09 삼성전자주식회사 다채널 사운드 신호 생성 장치
EP2469741A1 (en) * 2010-12-21 2012-06-27 Thomson Licensing Method and apparatus for encoding and decoding successive frames of an ambisonics representation of a 2- or 3-dimensional sound field
JP5582027B2 (ja) * 2010-12-28 2014-09-03 富士通株式会社 符号器、符号化方法および符号化プログラム
EP2523472A1 (en) * 2011-05-13 2012-11-14 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method and computer program for generating a stereo output signal for providing additional output channels
JP5737077B2 (ja) * 2011-08-30 2015-06-17 富士通株式会社 オーディオ符号化装置、オーディオ符号化方法及びオーディオ符号化用コンピュータプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090055196A1 (en) * 2005-05-26 2009-02-26 Lg Electronics Method of Encoding and Decoding an Audio Signal
US20110238425A1 (en) * 2008-10-08 2011-09-29 Max Neuendorf Multi-Resolution Switched Audio Encoding/Decoding Scheme
US20110081024A1 (en) * 2009-10-05 2011-04-07 Harman International Industries, Incorporated System for spatial extraction of audio signals

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11532366B2 (en) 2020-08-11 2022-12-20 Samsung Electronics Co., Ltd. Storage devices and methods of operating storage devices

Also Published As

Publication number Publication date
US20130170649A1 (en) 2013-07-04
KR20130078917A (ko) 2013-07-10
US9462405B2 (en) 2016-10-04

Similar Documents

Publication Publication Date Title
KR101871234B1 (ko) 사운드 파노라마 생성 장치 및 방법
KR102653560B1 (ko) 다채널 오디오 신호 처리 장치 및 방법
US9973874B2 (en) Audio rendering using 6-DOF tracking
KR100739798B1 (ko) 청취 위치를 고려한 2채널 입체음향 재생 방법 및 장치
CN109068263B (zh) 使用元数据处理的耳机的双耳呈现
KR102160254B1 (ko) 액티브다운 믹스 방식을 이용한 입체 음향 재생 방법 및 장치
US9749767B2 (en) Method and apparatus for reproducing stereophonic sound
JP5149968B2 (ja) スピーチ信号処理を含むマルチチャンネル信号を生成するための装置および方法
EP3369257B1 (en) Apparatus and method for sound stage enhancement
JP6674902B2 (ja) 音響信号のレンダリング方法、該装置、及びコンピュータ可読記録媒体
US8605914B2 (en) Nonlinear filter for separation of center sounds in stereophonic audio
KR20080060640A (ko) 개인 청각 특성을 고려한 2채널 입체 음향 재생 방법 및장치
JP6660982B2 (ja) オーディオ信号レンダリング方法及び装置
KR20130080819A (ko) 다채널 음향 신호의 정위 방법 및 장치
KR20150013073A (ko) 다채널 오디오 신호의 바이노럴 렌더링 방법 및 장치
EP2823649B1 (en) Method and apparatus for down-mixing of a multi-channel audio signal
US20090103737A1 (en) 3d sound reproduction apparatus using virtual speaker technique in plural channel speaker environment
TW201843675A (zh) 降混多聲道音頻信號的裝置和方法
KR101038574B1 (ko) 3차원 오디오 음상 정위 방법과 장치 및 이와 같은 방법을 구현하는 프로그램이 기록되는 기록매체
JP6512767B2 (ja) 音響処理装置および方法、並びにプログラム
KR102380232B1 (ko) 입체 음향 재생 방법 및 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant