JP2017212548A - 音声信号処理装置、音声信号処理方法、及びプログラム - Google Patents
音声信号処理装置、音声信号処理方法、及びプログラム Download PDFInfo
- Publication number
- JP2017212548A JP2017212548A JP2016103595A JP2016103595A JP2017212548A JP 2017212548 A JP2017212548 A JP 2017212548A JP 2016103595 A JP2016103595 A JP 2016103595A JP 2016103595 A JP2016103595 A JP 2016103595A JP 2017212548 A JP2017212548 A JP 2017212548A
- Authority
- JP
- Japan
- Prior art keywords
- audio
- sound
- audio signal
- sound source
- signal processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Stereophonic System (AREA)
Abstract
Description
しかしながら、従来は、レンダリングやダウンミックス等において、仮想的な音源と物理的な音源とを区別して処理することは行われてこなかった。従って、音声の再生において、音声の再現性を向上させられない可能性があった。
また、本発明の一態様は、前記第2情報は、複数の前記音声出力部のうち、仮想的な音声出力部の実現方法を示す情報を含む。
また、本発明の一態様は、前記第2情報は、前記音声出力部による音声の出力周波数帯域と、音圧レベルと、指向特性とのうちの少なくとも1つを示す情報を含む。
また、本発明の一態様は、前記第2情報は、複数の前記音声出力部間の関連性を示す情報である。
また、本発明の一態様は、前記出力制御部は、前記音声がダイアログである場合に、複数の前記音声出力部のうち、実体的な音声出力部を、前記音声を出力する音声出力部として選択する。
また、本発明の一態様は、前記出力制御部は、複数の前記音声出力部の内、前記音声を出力する音声出力部の候補を、前記第1情報に基づいて複数特定し、前記候補の全てが仮想的な前記音声出力部である場合には、前記候補のうちの1つのみを前記音声を出力する音声出力部として選択する。
また、本発明の一態様は、前記出力制御部は、複数の前記音声出力部の内、前記音声を出力する音声出力部の候補を、前記第1情報に基づいて複数特定し、前記候補に実体的な前記音声出力部が含まれる場合には、実体的な前記音声出力部のみを、前記音声を出力する音声出力部として選択する。
また、本発明の一態様は、前記第1情報は、少なくともMPEG規格により規定される情報を含む。
[第1の実施形態]
本発明の第1の実施形態について説明する。まず、再生側システム1の概要について説明する。
図1は、本実施形態に係る再生側システム1の概要を示す模式図である。
再生側システム1は、マルチチャンネル音響システムであり、複数の音源を備える。再生側システム1は、制作側システムにより集音された音声の音声信号に基づいて、音声を出力する。ここで、再生側システム1が備える音源の数、配置は、制作側システムの音源の数、配置と、異なっていてもよいし、同じであってもよい。具体的には、再生側システム1の音源の数は、2.1ch、5.1ch、7.1ch、22.2ch等であってよい。また、各音源の配置は、任意に定められてよい。
サウンドバーSBとは、アレイ状に並べられた複数の物理スピーカL1〜L3、C1〜C4、R1〜R3を備える装置である。各物理スピーカL1〜L3、C1〜C4、R1〜R3は、それぞれ、スピーカ装置である。各物理スピーカL1〜L3、C1〜C4、R1〜R3は、それぞれ、独立して異なる音声を出力することもできるし、グループとして同じ音声を出力することもできる。具体的には、物理スピーカL1〜L3、物理スピーカC1〜C4、物理スピーカR1〜R3の3つのグループにおいて、各グループを構成する物理スピーカは、同じ音声を出力してもよい。この場合、物理スピーカL1〜L3、C1〜C4、R1〜R3は、3つのスピーカ装置であるように動作する。
仮想スピーカLR、RRは、それぞれ、サウンドバーSBにより形成される仮想音源である。
ここで、再生側システム1は、自システムにおける音源の配置(位置)に関する情報と、各音源の種別(物理スピーカであるか、仮想スピーカであるか)とを示す情報とを管理している。そのため、再生側システム1は、いずれの音源から音声を出力すれば、制作時と同じ方向から音声が出力されたように知覚されるかを適切に判定することができる。
以上のように、再生側システム1は、原音源OSの位置(予め想定される音声の出力方向)と、自システムの音源の種別とに基づいて、原音源OSに対応する音声を出力する音源を選択するため、仮想音源を利用可能な場合に、音声の再現性をさらに向上させることができる。
以上が、本実施形態の概要についての説明である。
図2は、再生側システム1の構成を示すブロック図である。
再生側システム1は、音声信号処理装置10と、複数の音声出力部30−1、30−2、…、30−N(Nは、2以上の整数)と、を備える。以下では、複数の音声出力部30−1、30−2、…、30−Nを特に区別しない場合には、音声出力部30と称する。
音声信号処理装置10とは、制作側システムから受信した音声信号を処理し、音声出力部30から音声を出力させる電子機器である。
音声出力部30とは、音源であり、例えば、上述したサウンドバーSB、仮想スピーカLR、RR等である。複数の音声出力部30−1、30−2、…、30−Nは、少なくとも1つの仮想音源を含む。複数の音声出力部30−1、30−2、…、30−Nは、物理音源を含んでもよい。複数の音声出力部30−1、30−2、…、30−Nは、トランスオーラルのように、仮想音源のみであってもよい。
音声信号処理装置10は、記憶部11と、受信部12と、制御部13と、を備える。
記憶部11は、ROM(Read Only Memory)、RAM(Random Access Memory)等を備える。また、記憶部11は、HDD(Hard Disc Drive)、EEPROM(Electrically Erasable Programmable Read Only Memory)、フラッシュメモリ等を備えてもよい。記憶部11は、音声信号処理装置10が備えるCPU(Central Processing Unit、不図示)が実行するための各種プログラムやCPUが実行した処理の結果などを記憶する。例えば、記憶部11は、再生側設定情報を記憶する。再生側設定情報については、後述する。
再生側設定情報取得部131は、記憶部11から再生側設定情報を読み出して取得する。再生側設定情報取得部131は、取得した再生側設定情報を、出力制御部134に出力する。再生側設定情報とは、再生側システム1が備える音声出力部30に関する情報である。再生側設定情報には、例えば、音声出力部30の位置(音声の出力方向)、再生周波数帯域、音圧レベル、指向特性(音波の拡がりの程度等)、種別、音声出力部30が仮想音源である場合の実現方法、グルーピング等を示す情報等を含む。グルーピングを示す情報とは、1つのグループとして制御される音源の組を示す情報である。これらの情報は、例えば、メタデータとして記述される。
出力制御部134は、音声信号取得部133から取得した原音声信号を処理し、音声出力部30を介して、原音声信号に対応する音声を再生する。出力制御部134は、選択部135と、信号変換部136と、を備える。
以上が、音声信号処理装置10の構成についての説明である。
図3は、音声信号処理装置10による処理の流れの一例を示すフローチャートである。
(ステップS1)原信号属性情報取得部132は、原信号属性情報を、受信部12を介して取得する。音声信号取得部133は、原音声信号を、受信部12を介して取得する。その後、制御部13は、ステップS3に処理を進める。
(ステップS3)再生側設定情報取得部131は、記憶部11に予め記憶された再生側設定情報を取得する。その後、制御部13は、ステップS5に処理を進める。なお、再生側設定情報は、例えば、音声信号処理装置10の製造元が予め記憶させておいてもよいし、再生側システム1のユーザによる入力に基づいて、記憶されてもよい。
(ステップS7)出力制御部134は、ステップS5による選択結果に応じて、音声信号を変換する。その後、出力制御部134は、ステップS9に処理を進める。
(ステップS9)出力制御部134は、変換後の音声信号を、音声出力部30ごとに統合する。その後、制御部13は、ステップS11に処理を進める。
(ステップS11)出力制御部134は、統合後の音声信号を、音声出力部30に供給する。そして、音声出力部30は、供給された音声信号に応じて、音声を再生する。その後、制御部13は、図3に示す処理を終了する。
音原選択処理の第1例は、再生用音源の候補が、仮想音源と物理音源である場合の再生用音源の選択に関する。ここで、再生用音源の候補とは、原音源OSの最も近くに位置する第1音源と、原音源OSを挟んで第1音源の反対側に位置する音源のうち、原音源OSの最も近くに位置する第2音源とである。第1例では、物理音源と、仮想音源とがある場合に、物理音源のみを再生用音源の候補とする。図1に示す例において、原音源OSの近くに位置する音源、すなわち音声の出力方向が近い音源は、仮想スピーカLR及び物理スピーカL1である。ここで、音声信号処理装置10は、仮想音源である仮想スピーカLRを、再生用音源の候補から除外し、物理スピーカL1、又は、物理スピーカL1〜L3(すなわち、物理スピーカL1を含む物理音源のグループ)を再生用音源として選択する。換言すると、物理スピーカL1〜L3、C1〜C4、R1〜R3を候補とし、原音源OSに最も近い物理スピーカL1、又は、物理スピーカL1〜L3を再生用音源として選択する。
このように、音声信号処理装置10は、再生用音源の候補が仮想音源を含む場合に、仮想音源の実現方法に応じて再生用音源を選択する。これにより、音声信号処理装置10は、音質を大きく低下させることなく音源の定位精度を向上させるため、総合的に、音声の再現性を向上させることができる。
以上、この発明の実施形態について図面を参照して詳述してきたが、具体的な構成は上述の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。例えば、上述の実施形態において説明した各構成は、任意に分離して別々の装置に備えることができる。また、例えば、上述の実施形態において説明した各構成は、任意に組み合わせることができる。例えば、音声信号処理装置10は、上述した任意の音声選択処理を組み合わせて用いてもよい。この場合は、音声選択処理の各方法に対して優先順位を設定しておき、優先順位の高い順に音声選択処理を適用して、原音声信号に対して音声出力部30のリソースを割当てる。このとき、原音声信号に対しても、優先順位が設定されていてもよい。この場合、優先順位が高い原音声信号から順に音声選択処理を行う。具体的には、ダイアログは、相対的に優先順位が高く、背景音は、相対的に優先順位が低い。これにより、重要な音声から順に品質の高い音声出力部30のリソースを割当てることができるため、総合的に音声の再現性を向上させることができる。
Claims (11)
- 音声信号に対応する位置に係る第1情報を取得する第1取得部と、
前記音声信号が示す音声を出力可能な複数の音声出力部に係る第2情報を取得する第2取得部と、
少なくとも1つの仮想的な前記音声出力部とを含む複数の前記音声出力部のうち、前記音声を出力する音声出力部を、前記第1情報と前記第2情報とに基づいて選択する出力制御部と、
を備える音声信号処理装置。 - 前記第2情報は、前記音声出力部の位置に係る情報を含む
請求項1に記載の音声信号処理装置。 - 前記第2情報は、複数の前記音声出力部のうち、仮想的な音声出力部の実現方法を示す情報を含む
請求項1又は請求項2に記載の音声信号処理装置。 - 前記第2情報は、前記音声出力部による音声の出力周波数帯域と、音圧レベルと、指向特性とのうちの少なくとも1つを示す情報を含む
請求項1から請求項3のいずれか一項に記載の音声信号処理装置。 - 前記第2情報は、複数の前記音声出力部間の関連性を示す情報を含む
請求項1から請求項4のいずれか一項に記載の音声信号処理装置。 - 前記出力制御部は、前記音声がダイアログである場合に、複数の前記音声出力部のうち、実体的な音声出力部を、前記音声を出力する音声出力部として選択する
請求項1から請求項5のいずれか一項に記載の音声信号処理装置。 - 前記出力制御部は、複数の前記音声出力部の内、前記音声を出力する音声出力部の候補を、前記第1情報に基づいて複数特定し、前記候補の全てが仮想的な前記音声出力部である場合には、前記候補のうちの1つのみを前記音声を出力する音声出力部として選択する
請求項1から請求項6のいずれか一項に記載の音声信号処理装置。 - 前記出力制御部は、複数の前記音声出力部の内、前記音声を出力する音声出力部の候補を、前記第1情報に基づいて複数特定し、前記候補に実体的な前記音声出力部が含まれる場合には、実体的な前記音声出力部のみを、前記音声を出力する音声出力部として選択する
請求項1から請求項7のいずれか一項に記載の音声信号処理装置。 - 前記第1情報は、少なくともMPEG規格により規定される情報を含む
請求項1から請求項8のいずれか一項に記載の音声信号処理装置。 - 音声信号処理装置が、音声信号に対応する位置に係る第1情報を取得する第1ステップと、
前記音声信号処理装置が、前記音声信号が示す音声を出力可能な複数の音声出力部に係る第2情報を取得する第2ステップと、
前記音声信号処理装置が、少なくとも1つの仮想的な前記音声出力部を含む複数の前記音声出力部のうち、前記音声を出力する音声出力部を、前記第1情報と前記第2情報とに基づいて選択する第3ステップと、
を含む音声信号処理方法。 - コンピュータに、
音声信号に対応する位置に係る第1情報を取得する第1ステップと、
前記音声信号が示す音声を出力可能な複数の音声出力部に係る第2情報を取得する第2ステップと、
少なくとも1つの仮想的な前記音声出力部を含む複数の前記音声出力部のうち、前記音声を出力する音声出力部を、前記第1情報と前記第2情報とに基づいて選択する第3ステップと、
を実行させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016103595A JP2017212548A (ja) | 2016-05-24 | 2016-05-24 | 音声信号処理装置、音声信号処理方法、及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016103595A JP2017212548A (ja) | 2016-05-24 | 2016-05-24 | 音声信号処理装置、音声信号処理方法、及びプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2017212548A true JP2017212548A (ja) | 2017-11-30 |
Family
ID=60476797
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016103595A Pending JP2017212548A (ja) | 2016-05-24 | 2016-05-24 | 音声信号処理装置、音声信号処理方法、及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2017212548A (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7313211B2 (ja) | 2019-07-03 | 2023-07-24 | 株式会社Fuji | 組付機 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015126359A (ja) * | 2013-12-26 | 2015-07-06 | ヤマハ株式会社 | スピーカ装置 |
JP2015530824A (ja) * | 2012-08-31 | 2015-10-15 | ドルビー ラボラトリーズ ライセンシング コーポレイション | オブジェクトに基づくオーディオのための反射音レンダリング |
-
2016
- 2016-05-24 JP JP2016103595A patent/JP2017212548A/ja active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015530824A (ja) * | 2012-08-31 | 2015-10-15 | ドルビー ラボラトリーズ ライセンシング コーポレイション | オブジェクトに基づくオーディオのための反射音レンダリング |
JP2015126359A (ja) * | 2013-12-26 | 2015-07-06 | ヤマハ株式会社 | スピーカ装置 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7313211B2 (ja) | 2019-07-03 | 2023-07-24 | 株式会社Fuji | 組付機 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20240055007A1 (en) | Encoding device and encoding method, decoding device and decoding method, and program | |
JP7517500B2 (ja) | 再生装置、再生方法、およびプログラム | |
KR102294767B1 (ko) | 고채널 카운트 멀티채널 오디오에 대한 멀티플렛 기반 매트릭스 믹싱 | |
KR20160140971A (ko) | 공간적으로 분산된 또는 큰 오디오 오브젝트들의 프로세싱 | |
JP2016501472A (ja) | 空間オーディオ信号の異なる再生スピーカ設定に対するセグメント毎の調整 | |
US10271156B2 (en) | Audio signal processing method | |
EP3332557A1 (en) | Processing object-based audio signals | |
JP2018201224A (ja) | オーディオ信号レンダリング方法及び装置 | |
US20230254655A1 (en) | Signal processing apparatus and method, and program | |
JP5338053B2 (ja) | 波面合成信号変換装置および波面合成信号変換方法 | |
CN112823534B (zh) | 信号处理设备和方法以及程序 | |
JP2017212548A (ja) | 音声信号処理装置、音声信号処理方法、及びプログラム | |
JP5743003B2 (ja) | 波面合成信号変換装置および波面合成信号変換方法 | |
RU2677597C2 (ru) | Способ и устройство кодирования, способ и устройство декодирования и программа | |
JP7222668B2 (ja) | 音響処理装置及びプログラム | |
JP5590169B2 (ja) | 波面合成信号変換装置および波面合成信号変換方法 | |
EP3488623A1 (en) | Audio object clustering based on renderer-aware perceptual difference | |
WO2018017394A1 (en) | Audio object clustering based on renderer-aware perceptual difference | |
JP6630599B2 (ja) | アップミックス装置及びプログラム | |
KR20090066190A (ko) | 대화형 오디오 송/수신 장치 및 그 방법 | |
CN117119369A (zh) | 音频生成方法、计算机设备和计算机可读存储介质 | |
KR20200017969A (ko) | 오디오 장치 및 그 제어방법 | |
WO2019185743A1 (en) | Reverberation technique for 3d audio objects |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20181026 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190402 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200122 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200225 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200417 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20201013 |