CN114128309A - 信号处理装置和方法、以及程序 - Google Patents

信号处理装置和方法、以及程序 Download PDF

Info

Publication number
CN114128309A
CN114128309A CN202080050872.2A CN202080050872A CN114128309A CN 114128309 A CN114128309 A CN 114128309A CN 202080050872 A CN202080050872 A CN 202080050872A CN 114128309 A CN114128309 A CN 114128309A
Authority
CN
China
Prior art keywords
flat
amplitude
over
audio signal
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202080050872.2A
Other languages
English (en)
Other versions
CN114128309B (zh
Inventor
户栗康裕
及川芳明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Group Corp
Original Assignee
Sony Group Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Group Corp filed Critical Sony Group Corp
Publication of CN114128309A publication Critical patent/CN114128309A/zh
Application granted granted Critical
Publication of CN114128309B publication Critical patent/CN114128309B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0316—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/02—Casings; Cabinets ; Supports therefor; Mountings therein
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • H—ELECTRICITY
    • H03—ELECTRONIC CIRCUITRY
    • H03G—CONTROL OF AMPLIFICATION
    • H03G11/00—Limiting amplitude; Limiting rate of change of amplitude ; Clipping in general
    • H03G11/002—Limiting amplitude; Limiting rate of change of amplitude ; Clipping in general without controlling loop
    • H—ELECTRICITY
    • H03—ELECTRONIC CIRCUITRY
    • H03G—CONTROL OF AMPLIFICATION
    • H03G7/00—Volume compression or expansion in amplifiers
    • H03G7/007—Volume compression or expansion in amplifiers of digital or coded signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/04—Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R7/00—Diaphragms for electromechanical transducers; Cones
    • H04R7/02—Diaphragms for electromechanical transducers; Cones characterised by the construction
    • H04R7/04—Plane diaphragms
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/008—Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/307—Frequency adjustment, e.g. tone control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2440/00—Bending wave transducers covered by H04R, not provided for in its groups
    • H04R2440/05—Aspects relating to the positioning and way or means of mounting of exciters to resonant bending wave panels
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10—General applications
    • H04R2499/15—Transducers incorporated in visual displaying devices, e.g. televisions, computer displays, laptops
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/02—Spatial or constructional arrangements of loudspeakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R7/00—Diaphragms for electromechanical transducers; Cones
    • H04R7/02—Diaphragms for electromechanical transducers; Cones characterised by the construction
    • H04R7/04—Plane diaphragms
    • H04R7/045—Plane diaphragms using the distributed mode principle, i.e. whereby the acoustic radiation is emanated from uniformly distributed free bending wave vibration induced in a stiff panel and not from pistonic motion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/09—Electronic reduction of distortion of stereophonic sound systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/11—Positioning of individual sound objects, e.g. moving airplane, within a sound field

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Mathematical Physics (AREA)
  • Otolaryngology (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Quality & Reliability (AREA)
  • Stereophonic System (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

本技术涉及一种信号处理装置和方法以及程序，能够以小的处理负荷再现高清晰度声音。该信号处理装置具有：解复用单元，对编码数据进行解复用以提取编码声音信号和关于多个平板扬声器中的每一个生成的并指示在平板扬声器中是否会出现过振幅的过振幅标志；解码单元，对编码声音信号进行解码；以及调整单元，基于过大振幅标志和通过解码得到的声音信号，调整多个平板扬声器中的每一个的声音信号。本技术可以应用于编码装置和解码装置。

Description

信号处理装置和方法、以及程序
技术领域
本技术涉及一种信号处理装置、信号处理方法和程序，具体而言，涉及一种用于以特别低的处理负载再现高质量声音的信号处理装置、信号处理方法和程序。
背景技术
近年来，所谓的平板扬声器***已经变得普遍。在这种平板扬声器***中，致动器激励用于显示视频的电视等的平板，从而再现声音。
在这种类型的平板扬声器***中，用作扬声器的平板的位置可能根据平板中的过振幅而发生位移，或者在平板上显示的视频中可能出现模糊或失真。因此，需要防止平板振动超过一定量幅度，即需要防止出现过振幅。
特别是在视频暗的部分，当平板振动时，平板的反射光会显得模糊。因此，视频中的模糊很可能变得突兀。
为此，内容再现侧装置根据音频信号电平预测平板的振动，并且在检测到特定水平或更高水平的振动的情况下，抑制信号电平或切断信号的部分频带以便以防止平板中的过振幅。
另外，在通过激励器振动平板来输出声音的平板扬声器中，例如，提出了一种通过配置激励器来抑制大驻波产生的技术，以避开整个声频中最容易引起振动的位置(例如，参见专利文献1)。
[现有技术文献]
[专利文献]
[专利文献1]
PCT专利公开号WO2018/123310
发明内容
[技术问题]
然而，利用上述技术，在通过配备有平板形振动面板的平板扬声器再现声音的情况下，在抑制再现侧的处理负载的同时再现高质量的声音一直是困难的。
例如，为了在再现侧装置进行过振幅检测时再现声音，在再现侧就需要计算资源。此外，如果装置试图检测突然的过振幅，则可能会发生诸如缓冲的处理延迟。
此外，如果在再现侧装置检测到过振幅的情况下简单地抑制信号电平，则在某些情况下无法获得期望的声压电平。这会降低音质。
本技术是鉴于上述情况而做出的，并且能够以低处理负荷再现高质量声音。
[问题解决]
根据本技术的第一方面的信号处理装置包括：解复用部，对编码数据进行解复用，以提取编码音频信号和已针对多个相应的平板扬声器生成的过振幅标志，每个过振幅标志指示相应的平板扬声器中是否会出现过振幅；解码部，对编码音频信号进行解码；以及调整部，基于过振幅标志和通过解码得到的音频信号来调整要提供给多个相应的平板扬声器的音频信号。
根据本技术的第一方面的信号处理方法或程序包括以下步骤：对编码数据进行解复用以提取编码音频信号和已针对多个相应的平板扬声器生成的过振幅标志，每个所述过振幅标志指示相应的平板扬声器中是否会出现过振幅；对编码音频信号进行解码；以及基于过振幅标志和通过解码得到的音频信号来调整要提供给多个相应平板扬声器的音频信号。
在本技术的第一方面，对编码数据进行解复用，提取编码音频信号和已针对多个相应的平板扬声器生成的过振幅标志，每个过振幅标志指示相应的平板扬声器中是否会出现过振幅，对编码音频信号进行解码，以及基于过振幅标志和通过解码得到的音频信号来调整要提供给多个相应平板扬声器的音频信号。
根据本技术的第二方面的信号处理装置包括：过振幅检测部，当多个各自的平板扬声器中的每一个基于音频信号再现声音时，检测在对应的平板扬声器中是否会出现过振幅，并产生表示检测结果的过振幅标志；编码部，对音频信号进行编码；以及复用部，通过复用用于多个相应平板扬声器的过振幅标志和通过编码得到的编码音频信号来生成编码数据。
根据本技术的第二方面的信号处理方法或程序包括以下步骤：当多个平板扬声器中的每一个基于音频信号再现声音时，检测平板扬声器中是否会出现过振幅，并产生表示检测结果的过振幅标志；对音频信号进行编码；以及通过复用用于多个相应平板扬声器的过振幅标志和通过编码得到的编码音频信号来生成编码数据。
在本技术的第二方面中，当多个各自的平板扬声器中的每一个基于音频信号再现声音时，检测在相应的平板扬声器中是否会出现过振幅，并生成指示检测结果的过振幅标志，对音频信号进行编码，以及通过复用多个相应平板扬声器的过振幅标志和通过编码得到的编码音频信号来生成编码数据。
附图说明
图1是用于说明普通平板结构的图。
图2是示出信号处理装置的配置示例的图。
图3是示出编码数据的格式示例的图。
图4是用于说明编码处理的流程图。
图5是示出信号处理装置的配置示例的图。
图6是用于说明对相邻平板扬声器的分配示例的图。
图7是用于说明对相邻平板扬声器的分配示例的图。
图8是用于说明解码处理的流程图。
图9是示出信号处理装置的配置示例的图。
图10是示出编码数据的格式示例的图。
图11是用于说明相邻平板扬声器的相对位置的图。
图12是用于说明编码处理的流程图。
图13是示出信号处理装置的配置示例的图。
图14是用于说明解码处理的流程图。
图15是示出信号处理装置的配置示例的图。
图16是用于说明分配目的地平板扬声器的调整的图。
图17是示出编码音频数据的格式示例的图。
图18是示出编码OAM的格式示例的图。
图19是用于说明编码处理的流程图。
图20是用于说明分配增益计算处理的流程图。
图21是示出信号处理装置的配置示例的图。
图22是用于说明解码处理的流程图。
图23是示出流分发***的配置示例的图。
图24是用于说明再现处理和分发处理的流程图。
图25是用于说明预渲染级别的图。
图26是示出计算机的配置示例的图。
具体实施方式
在下文中，将参考附图解释应用本技术的实施例。
<第一实施例>
<平板扬声器***>
本技术涉及一种平板扬声器***，其包括多个平板扬声器(通过振动平板状(板状)振动面板来输出声音)的组合。
特别地，根据本技术，内容编码侧检测在每个平板扬声器中是否出现过振幅，由此可以减少解码侧(再现侧)的处理负荷。
另外，根据本技术，在解码侧，将检测到出现过振幅的平板扬声器的输出部分分配给另一相邻平板扬声器，从而可以确保期望的声压电平，并且可以再现高品质的声音。
在下文中，将更具体地解释本技术。
图1示出典型平板扬声器***中的平板结构的示例。
在多个平板扬声器被布置形成一个大平板的情况下，平板结构是关于平板扬声器的数量或平板数量、各个平板扬声器的排列位置(排列样式)、各个平板扬声器的平板大小或平板形状等。
在图1中箭头Q11所示的示例中，三个平板扬声器P0、P1和P2在图中的宽方向上并排布置。
此外，平板扬声器P0至P2的各个平板部形成一个平板。例如，该平板还用作用于显示视频的显示平板。
换言之，整个显示平板被划分为三个纵向较长的区域。这些区域分别是平板扬声器P0到P2。
具体地，在该示例中，平板扬声器P0至P2分别对应于左声道、中声道和右声道。因此，例如，平板扬声器P0基于左声道的音频信号振动，并输出声音。
在箭头Q12所示的示例中，显示平板被划分为六个区域，且划分区域中的各个平板被定义为平板扬声器P0至P5。
具体地，平板扬声器P0和P1对应左声道，平板扬声器P2和P3对应中声道，且平板扬声器P4和P5对应右声道。
在箭头Q13所示的示例中，显示平板被划分为九个区域，划分区域中的各个平板被定义为平板扬声器P0至P8。
具体地，平板扬声器P0至P2对应于左声道，平板扬声器P3至P5对应于中声道，且平板扬声器P6至P8对应于右声道。
需要注意的是，图1所示的每个平板结构中的平板结构和到平板扬声器的声道分配只是示例。可以理想地确定平板结构和声道分配。
在平板扬声器***中，如上所述，可以实现各种类型的平板结构。然而，由于电视接收装置的规格和标准由ARIB(无线电工业和商业协会)常规标准规定，其内安装有平板扬声器***的电视的平板结构可以由常规标准规定。
因此，本文的解释将在预先指定几种平板结构和各个平板结构的声道分配方法的假设下给出。
<编码侧信号处理装置的配置示例>
图2是示出应用本技术的编码侧信号处理装置的配置示例的图。
图2所示的信号处理装置11用作编码装置，其对包括声音的内容(可以是例如包括视频和声音的内容)的音频信号进行编码，并且发送(输出)所得的编码数据。
信号处理装置11包括平板过振幅检测部21、核心信号编码部22和复用部23。
作为内容音频信号，构成多声道信号的各个声道的声道音频信号被提供给平板过振幅检测部21和核心信号编码部22。各个声道的声道音频信号是用于再现相应声道的声音的音频信号。
平板过振幅检测部21根据所提供的声道音频信号，检测预先定义的多个不同平板结构的每个平板结构中的每个平板扬声器中是否会出现过振幅，并将表示检测结果的过振幅标志提供给复用部23。
即，在每个平板结构中预先确定(定义)成为每个声道的声道音频信号的输出目的地的平板扬声器。
当基于对应的声道音频信号驱动每个平板扬声器时，即当平板扬声器再现基于声道音频信号的声音时，平板过振幅检测部21检测是否会出现过振幅。
例如，值为“1”的过振幅标志表示对应的平板扬声器将出现过振幅，而值为“0”的过振幅标志表示对应的平板扬声器不会出现过振幅。
核心信号编码部22通过规定的音频编码方法对提供给它的声道音频信号进行编码，并将得到的编码音频信号提供给复用部23。
例如，使用由作为标准的ARIBSTD-B32定义的音频编码方法作为声道音频信号的音频编码方法。
需要说明的是，也可以对核心信号编码部22得到的编码音频信号进行解码，且将所得的解码声道音频信号输入平板过振幅检测部21，以便检测是否会出现过振幅。在这种情况下，可以更高精度地检测过振幅。
复用部23以规定格式复用从平板过振幅检测部21提供的过振幅标志和从核心信号编码部22提供的编码音频信号，并将得到的编码数据发送到解码侧装置。
<编码数据的格式示例>
这里，将说明由复用部23获得的编码数据的格式示例。例如，通过图3所示的格式复用编码数据。
在图3的示例中，字符串“audio_encoded_data()”表示规定的音频帧的编码数据，且字符串“encoded_channel_data()”表示按照规定的音频编码方式编码的1个音频帧的编码音频信号。
字符串“Number_of_PanelConfig”表示预先定义的平板结构的图案数量。字符串“Num_of_SubPanels[i]”表示平板的数量，即构成第i个平板结构模式的平板扬声器的数量。
字符串“Panel_Control_Flag[i][k]”表示第i个平板结构模式中第k个平板扬声器的过振幅标志。过振幅标志用1位表示。
以上述方式，在信号处理装置11中，通过对每个音频帧(以下简称帧)中的编码音频信号和过振幅标志进行复用来生成编码数据，并传送到解码侧装置。
此外，在每一帧中，当多个预先定义的平板结构中的每一个平板结构中的每个平板扬声器基于声道音频信号再现声音时，针对各个平板扬声器，生成每个指示是否将在平板扬声器中出现过振幅的过振幅标志。
<编码处理说明>
接下来，将说明信号处理装置11的操作。
具体地，下面将参考图4中的流程图解释由信号处理装置11执行的编码处理。当一帧的声道音频信号被提供给信号处理装置11时，编码处理开始。
在步骤S11，基于提供的声道音频信号，平板过振幅检测部21检测在每个预先定义的平板结构中的每个平板扬声器中是否会出现过振幅。
例如，如上所述，预先定义了多个平板结构。在每个平板结构中，还预先为每个平板扬声器确定了要分配的声道。即，对于每个平板扬声器，预先确定要向其提供声道音频信号的声道。
这里，将讨论规定平板结构中的平板扬声器之一。即使提供给平板扬声器的声道音频信号的信号电平是恒定的，平板扬声器的平板(振动板)的振动在平板扬声器的共振频率附近也变得更大。
因此，通过使用为每个预先定义的平板结构准备的特定平板结构中的每个平板扬声器的振幅特性，平板过振幅检测部21从相应的声道音频信号预测(估计)平板扬声器的振幅。
具体地，例如，平板过振幅检测部21预先保持振幅预测滤波器，其近似每个平板结构中的每个平板扬声器的振幅特性。
通过利用保持的幅度预测滤波器对提供给平板扬声器的声道音频信号进行滤波，当平板扬声器基于声道音频信号再现声音时，平板过振幅检测部21预测平板扬声器的幅度值。
进一步地，在通过预测得到的平板扬声器的幅度值(以下也称为预测幅度值)大于上限值的情况下，即预测幅度值大于上限值的情况下，平板过振幅检测部21确定将出现过振幅，并生成指示“1”的过振幅标志。
另一方面，在平板扬声器的预测振幅值为上限值以下的情况下，平板过振幅检测部21确定不会出现过振幅，并生成表示“0”的过振幅标志。
在以上述方式为每个平板结构中的各个平板扬声器生成过振幅标志之后，平板过振幅检测部21将过振幅标志提供给复用部23。
需要说明的是，当平板扬声器的振幅值恒定而在构成平板扬声器并兼具振动板和显示部的功能的平板上显示的视频较暗时，视频中的模糊或失真变得更加突出。
因此，例如，平板扬声器的振幅上限值可以基于在平板扬声器的平板部分上显示的视频(图像)的亮度值和平板扬声器的振幅特性(例如最大振幅值)来动态定义。
在步骤S12，核心信号编码部22通过规定的音频编码方法对提供的声道音频信号进行编码，并将得到的编码音频信号提供给复用部23。
在步骤S13，复用部23以规定格式复用从平板过振幅检测部21提供的过振幅标志和从核心信号编码部22提供的编码音频信号。结果，获得例如图3所示的编码数据。
在步骤S14，复用部23将在步骤S13获得的编码数据发送到解码侧装置。然后，完成编码处理。
应当注意，例如，编码数据可以以有线或无线方式发送到解码侧装置，可以输出并记录到可移动记录介质等中，或者可以提供给规定的内容分发服务器等。
如上所述，信号处理装置11检测每个平板结构中的每个平板扬声器中是否会出现过振幅，并生成表示检测结果的过振幅标志。然后，信号处理装置11通过复用过振幅标志和编码音频信号来生成编码数据。
由于作为编码侧的信号处理装置11进行过振幅的检测，所以可以减少解码侧装置的处理负荷。
另外，由于生成的过振幅标志和编码音频信号被传送到解码侧装置，解码侧可以了解将发生过振幅的平板扬声器。
因此，在解码侧将要提供给将发生过振幅的平板扬声器的音频信号的一部分，即基于音频信号的声压电平的一部分分配给相邻的单独的平板扬声器，以便确保足够的声压电平，并可以再现高质量的声音。
<解码侧信号处理装置的配置示例>
接下来，将给出接收和解码从编码侧信号处理装置11发送的编码数据的解码侧信号处理装置的说明。
例如，这种解码侧信号处理装置具有图5所示的配置。
图5中所示的信号处理装置51用作接收和解码从信号处理装置11发送的编码数据的解码装置，并且还用作向平板扬声器52-1至52-N和重低音扬声器53提供输出信号以输出声音的的再现控制装置
平板扬声器52-1至52-N和重低音扬声器53构成平板扬声器***，并且安装在再现视频和声音的诸如电视机的再现装置中。
例如，平板扬声器52-1至52-N的各个平板均用作扬声器的振动板，并且进一步地，每个用作显示内容视频的显示平板。
在这种情况下，平板扬声器52-1至52-N的平板被平铺以用作一个大显示平板。平板扬声器52-1至52-N的平板尺寸、布置和平板数量与预先确定的多个平板结构中的任一个的相同。
需要说明的是，下文中，在不需要区分平板扬声器52-1至52-N的情况下，平板扬声器52-1至52-N简称为平板扬声器52。
重低音扬声器53是在比平板扬声器52低的频带中再现声音的扬声器，并且基于从信号处理装置51提供的输出信号输出声音。
需要注意的是，这里将说明信号处理装置51与包括平板扬声器52和重低音扬声器53的平板扬声器***分离的示例。然而，信号处理装置51、平板扬声器52和重低音扬声器53可以设置在诸如电视机的一个再现装置中。
信号处理装置51包括解复用部61、核心信号解码部62和平板输出调整部63。
解复用部61接收从信号处理装置11的复用部23发送的编码数据，并通过解复用编码数据从接收的编码数据中提取过振幅标志和编码音频信号。
解复用部61将解复用产生的每个平板结构中的过振幅标志中平板扬声器52的平板结构的过振幅标志提供给平板输出调整部63，并且进一步将解复用产生的编码音频信号提供给核心信号解码部62。
核心信号解码部62通过与由核心信号编码部22执行的音频编码方法相对应的解码方法，对从解复用部61提供的作为多声道信号的声道的编码音频信号进行解码，并且将所得声道音频信号提供给平板输出调整部63。
平板输出调整部63根据平板扬声器52的平板结构，基于从解复用部61提供的过振幅标志和从核心信号解码部62提供的声道音频信号，来调整要提供给平板扬声器52和重低音扬声器53的输出信号。
平板输出调整部63包括分配增益计算部71和平板输出控制部72。
基于从解复用部61提供的过振幅标志和从核心信号解码部62提供的声道音频信号，分配增益计算部71生成分配增益信息，该信息指示将要提供给将出现过振幅的平板扬声器52的一部分声道音频信号分配给另一个平板扬声器52或重低音扬声器53的分配增益。
换言之，分配增益计算部71决定作为将出现过振幅的声道的声道音频信号的分配目的地的平板扬声器52或重低音扬声器53，以及进行分配的分配增益，并且生成指示结果的分配增益信息。
分配增益计算部71将生成的分配增益信息和过振幅标志提供给平板输出控制部72。
需要说明的是，在下文中，将出现过振幅的平板扬声器，即作为声道音频信号的分配源的平板扬声器也被称为分配源平板扬声器，作为声道音频信号的分配目的地的平板扬声器也被称为分配目的地平板扬声器。
另外，在下文中，与分配源平板扬声器相邻的平板扬声器也称为邻接平板扬声器。
基于从核心信号解码部62提供的声道音频信号和从分配增益计算部71提供的过振幅标志和分配增益信息，平板输出控制部72生成作为要提供给平板扬声器52和重低音扬声器53的音频信号的输出信号。
在为平板扬声器52和重低音扬声器53生成各自的输出信号之后，平板输出控制部72将生成的输出信号提供给平板扬声器52和重低音扬声器53以输出内容声音。
<分配目的地和分配增益的决定>
这里，将解释分配增益计算部71和平板输出控制部72执行的处理，即平板扬声器52和/或重低音扬声器53作为分配目的地的决定、分配增益的计算和输出信号的生成。
在对应于规定声道CH1的平板扬声器52的过振幅标志的值指示“0”的情况下，即在平板扬声器52中不会出现过振幅的情况下，该声道CH1的声道音频信号根据预定义的方法简单地分配给相应的平板扬声器52。
在这种情况下，声道CH1的声道音频信号被简单地决定为要提供给对应于声道CH1的平板扬声器52的输出信号。
换言之，声道CH1的声道音频信号没有分配给与声道CH1对应的重低音扬声器53或与平板扬声器52相邻的另一平板扬声器52。因此，在这种情况下，不进行声道CH1的声道音频信号的分配增益的计算。
相反，在与规定声道CH1对应的平板扬声器52中由于平板扬声器52的过振幅标志的值指示“1”而出现过振幅的情况下，将声道CH1的声道音频信号的一部分压力声级分配给与声道CH1对应的重低音扬声器53或与平板扬声器52相邻的另一平板扬声器52。
然后，计算指示声道CH1的声道音频信号(声压电平)到被决定为分配目的地的平板扬声器52和重低音扬声器53的相应分配量的分配增益。
在这种情况下，与声道CH1对应的平板扬声器52以及被决定为分配目的地的平板扬声器52和重低音扬声器53被决定为声道CH1的声道音频信号的输出目的地。
分配增益表示当声道CH1的声道音频信号被输出(分配)到被决定为输出目的地的平板扬声器52和重低音扬声器53时声道CH1的声道音频信号的增益。
例如，如图6所示，例如假设设置了九个平板扬声器52。
在图6中，由字符“P0”到“P8”表示的四边形各自代表平板扬声器52之一。在下文中，由其上指示“Pi”(i＝0、1、...、8)的四边形表示的平板扬声器52也被称为平板扬声器Pi。
假设平板扬声器P0会出现过振幅，因为平板扬声器P0的过振幅标志指示“1”。
在这种情况下，最初打算提供给平板扬声器P0的声道音频信号的声压电平的一部分被分配给重低音扬声器53和与平板扬声器P0相邻的平板扬声器P1、P3和P4。
在分配了分配源平板扬声器的声道音频信号的声压电平的一部分的情况下，相邻平板扬声器中设置了指示“0”的过振幅标志的相邻平板扬声器基本上被决定(选择)为分配目的地。
然而，可以将声压电平优先分配给设置了指示“0”的过振幅标志的相邻平板扬声器中与分配源平板扬声器的声道相同的声道中的相邻平板扬声器。
此外，在该示例中，一部分声级被分配给相邻的平板扬声器。因此，在某个声道中，声道的声音不仅从分配源平板扬声器输出，而且从分配目的地平板扬声器输出，使得声像的定位位置略微偏移。
然而，在该示例中，要再现的音频信号是各个声道的声道音频信号。因此，收听者不会察觉到声像定位位置的这种轻微位移。因此，内容声音的声像印象不会恶化。
这里，将给出用于将声道音频信号的一部分声级分配给分配目的地平板扬声器的具体方法的示例的说明。
例如，假设基于对应声道的声道音频信号驱动平板扬声器52时(即，当声音由平板扬声器52基于声道音频信号输出时)，得到图7所示的平板扬声器52的振幅。
需要注意的是，在图7中，横轴表示平板扬声器52，纵轴表示平板扬声器52的振幅值。更具体地，平板扬声器52的预测幅度值在纵轴中示出。
在这种情况下，y0至y4分别代表平板扬声器P0至P4的预测幅度值，而yT代表幅度值的上限。
因此，平板扬声器P0将出现过振幅，因为预测幅度值y0大于上限yT，而其余平板扬声器P1、P3和P4中的任何一个都不会出现过振幅，因为预测幅度值y1、y3和y4等于或小于上限yT。
由于在平板扬声器P0中会出现过振幅，所以将超过上限yT的预测振幅值y0的输出电平(声压电平)的一部分分配给相邻的平板扬声器P1、P3和P4。
在向相邻平板扬声器分配声压电平时，例如，如图7中的箭头所示，输出电平与每个分配目的地平板扬声器中的余量(余量)成比例地分配给幅度值的上限值，即上限yT与每个预测幅度值之间的差值。
进行分配以防止在分配目的地平板扬声器52中发生过振幅，即分配后的最终预测幅度值都不超过上限yT。
此外，实施将声道音频信号的声压电平分配给相邻的平板扬声器52，使得分配源平板扬声器52和分配目的地平板扬声器52的增益(分配增益)之和变为1。换言之，进行分配使得每个声道的声压电平不改变。
然而，如果防止在分配目的地平板扬声器52中出现过振幅，则分配增益的总和不会变为1。总和可能会小于1。在这种情况下，声压电平的剩余部分分配给重低音扬声器53。
下面将说明上述声压电平分配中的具体计算示例。
在此，假设平板扬声器P0中将出现过振幅。
例如，如以下表达式(1)所示，假设x0代表要提供给平板扬声器P0的声道音频信号，并且将声道音频信号x0乘以规定增益g0的增益校正得到的信号用作平板扬声器P0的输出信号x0’。
[公式1]
x0’＝g0×x0···(1)需要说明的是，在下文中，用于产生提供给分配源平板扬声器52的输出信号的增益(例如，增益g0)也称为分配增益。
例如，如表达式(2)所示，表达式(1)所示的平板扬声器P0的分配增益g0可以通过上限值yT与平板扬声器P0的预测幅度值y0之间的比较而获得。当按照上述方式确定分配增益g0时，平板扬声器P0的幅度值达到上限yT。
[公式2]
Figure BDA0003467011250000151
另外，xi表示在声压电平分配之前作为平板扬声器P0的声压电平分配目的地的平板扬声器Pi(i＝1,3,4)的输出信号，或者具体地，xi表示与目的地平板扬声器Pi对应的声道的声道音频信号，以及αi表示分配目的地平板扬声器Pi的分配增益。在这种情况下，由表达式(3)获得在声压电平分配之后获得的并且将被提供给分配目的地平板扬声器Pi的最终输出信号xi’。
[公式3]
xi’＝ xi+αi×x0(i∈S)···(3)
需要注意的是，在表达式(3)中，S表示可以分配声压电平的一组相邻平板扬声器。设置了指示“1”的过振幅标志的任何相邻平板扬声器不包括在集合S中。
在表达式(3)中，将发生过振幅的平板扬声器P0的声道音频信号x0乘以分配目的地平板扬声器Pi的分配增益αi获得的信号，即通过对声道音频信号x0进行增益校正得到信号αi x0，其中分配增益αi对应于分配给分配目的地平板扬声器Pi的部分信号。
信号αix0和声道音频信号xi的总和被决定为分配目的地平板扬声器Pi的最终输出信号xi'。
例如，假设声道音频信号x0是用于再现规定声道CH0的声音的信号并且声道音频信号xi是用于再现声道CH1的声音的信号。
这里，当平板扬声器Pi基于输出信号xi’输出声音时，从平板扬声器Pi输出与分配增益αi对应的声道CH1的声音和声道CH0的一部分的声音。
即，最初打算由平板扬声器P0单独再现的声道CH0的声音由平板扬声器P0和分配目的地平板扬声器Pi再现。需要说明的是，在一些平板结构中，声道音频信号x0和声道音频信号xi可以是同一声道的信号。
在上述方式中，在防止平板扬声器P0中出现过振幅的同时，保证了足够的声压电平。因此，可以再现高质量的声音。
以这种方式，分配增益计算部71进行分配增益g0和分配增益αi的计算。如表达式(4)所示，在计算处理中，确定分配增益αi的最大值αi MAX，使得分配目的地平板扬声器中的过振幅值不超过上限yT。
[公式4]
Figure BDA0003467011250000161
在表达式(4)中，yi表示分配目的地平板扬声器Pi的初始预测原始幅度值。因此，在该示例中，基于分配源平板扬声器Pi的预测幅度值yi、分配源平板扬声器P0的预测幅度值y0和上限yT来确定最大值αi MAX。
需要注意的是，在上述表达式(1)和表达式(4)中，每个预测幅度值只需要使用幅度预测滤波器等从实际声道音频信号中获得。
在获得分配目的地平板扬声器Pi的分配增益αi的最大值αi MAX之后，基于分配目的地平板扬声器Pi的最大值αi MAX和分配增益g0，通过表达式(5)获得分配目的地平板扬声器Pi的分配增益αi。
[公式5]
Figure BDA0003467011250000162
以这种方式获得分配增益αi表示按照分配目的地平板扬声器Pi的余量(剩余)，即预测振幅值yi和上限yT之间的差值，将声压电平分配给分配目的地平板扬声器Pi。
此外，如表达式(6)所示，所有分配增益的总和被调整为1。即，满足表达式(6)。
[公式6]
Figure BDA0003467011250000171
如表达式(7)所示，在分配增益αi大于最大值αi MAX的情况下，最大值αi MAX代替分配增益αi，以及声压电平超过最大值αi MAX的部分被分配给重低音扬声器53。即，获得表达式(8)中指示的β作为重低音扬声器53的分配增益。
[公式7]
Figure BDA0003467011250000172
[公式8]
Figure BDA0003467011250000173
作为这种将声压电平分配给重低音扬声器53的结果，适当地，所有分配增益的总和变为1。以这种方式将所有分配增益的总和调整为1，能够确保与分配前同等的声压电平。即，声压电平没有降低。
需要说明的是，在将声道音频信号x0的声压电平以分配增益β分配给重低音扬声器53的情况下，得到重低音扬声器53的最终输出信号xSW'，如表达式(9)所示。
[公式9]
xSW’＝xSW+β×x0···(9)
在表达式(9)中，xSW表示最初分配给重低音扬声器53的声道音频信号，即与重低音扬声器53对应的声道的声道音频信号。
需要说明的是，在相邻平板扬声器中的任何一个未设置指示“0”的过振幅标志的情况下，只有重低音扬声器53是分配源平板扬声器的声道音频信号的分配目的地。
如上所述，与检测每个声道音频信号是否会出现过振幅的处理相比，可以以较低的处理负载(较小的处理量)执行基于过振幅标志和声道音频信号分配声压电平的处理，且根据检测结果控制振幅，以防止出现过振幅。特别地，在声道数多的情况下，这些处理之间的处理负荷的差异大。
另外，由于在作为编码侧的信号处理装置11处产生过振幅标志，作为解码侧的信号处理装置51不需要执行缓冲等来检测过振幅。因此，不会发生由缓冲等引起的任何再现延迟。
<解码处理说明>
接下来，将说明信号处理装置51的操作。
具体地，下面将参考图8中的流程图解释由信号处理装置51执行的解码处理。当信号处理装置51的解复用部61接收一帧的编码数据时开始该解码处理。
在步骤S41，解复用部61对接收的编码数据进行解复用，并将获得的过振幅标志提供给分配增益计算部71，并且进一步将获得的编码音频信号提供给核心信号解码部62。
在步骤S42，核心信号解码部62通过与在核心信号编码部22处执行的音频编码方法相对应的解码方法对从解复用部61提供的编码音频信号进行解码，并将得到的声道音频信号提供给分配增益计算部71和平板输出控制部72。
在步骤S43，分配增益计算部71基于从多路解复用部61提供的过振幅标志和从核心信号解码部62提供的声道音频信号，计算将发生过振幅的平板扬声器52的分配增益。。
例如，分配增益计算部71通过进行与表达式(2)所示的计算类似的计算，计算设置了指示“1”的过振幅标志的平板扬声器52的分配增益g0。
此外，分配增益计算部71通过进行表达式(5)的计算来计算与分配源平板扬声器52相邻并且为其设置了指示“0”的过振幅标志的分配目的地平板扬声器52的分配增益αi。
应注意，如表达式(7)所示，如果分配增益αi大于最大值αi MAX，则分配增益计算部71将最大值αi MAX替换为最终分配增益αi。
此外，在不满足表达式(6)的情况下，分配增益计算部71另外决定作为分配目的地的重低音扬声器53，并且通过进行表达式(8)的计算来获得重低音扬声器53的分配增益β。
在以这种方式获得分配增益之后，分配增益计算部71向平板输出控制部72提供过振幅标志和指示所获得的分配增益的分配增益信息。
在步骤S44，平板输出控制部72基于从核心信号解码部62提供的声道音频信号以及从分配增益计算部71提供的过振幅标志和分配增益信息，产生用于平板扬声器52和重低音扬声器53的输出信号。
例如，对于设置了指示“1”的过振幅标志的平板扬声器52，平板输出控制部72通过进行类似于表达式(1)所示的计算来生成要提供给平板扬声器52的输出信号。
对于设置了指示“0”的过振幅标志并且被确定为声道音频信号的分配目的地的平板扬声器52，平板输出控制部72通过进行类似于表达式(3)所示的计算来生成要提供给平板扬声器52的输出信号。
对于设置了指示“0”的过振幅标志并且未被确定为声道音频信号的分配目的地的平板扬声器52，平板输出控制部72简单地将相应声道的声道音频信号确定为要提供给平板扬声器52的输出信号。
此外，在重低音扬声器53被确定为声道音频信号的分配目的地的情况下，平板输出控制部72通过进行与表达式(9)所示的计算类似的计算来生成其输出信号。在重低音扬声器53没有被确定为声道音频信号的分配目的地的情况下，平板输出控制部72简单地将相应声道的声道音频信号确定为要提供给重低音扬声器53的输出信号。
在获得所有平板扬声器52和重低音扬声器53的输出信号之后，平板输出控制部72将各自获得的输出信号提供给平板扬声器52和重低音扬声器53，使得平板扬声器52和重低音扬声器53再现各个声道的声音，即内容声音。
以这种方式再现内容声音。然后，完成解码处理。
如上所述，信号处理装置51基于过振幅标志和声道音频信号获得分配增益，并为平板扬声器52和重低音扬声器53生成最终输出信号。换句话说，信号处理装置51基于过振幅标志和声道音频信号来调整(决定)要提供给平板扬声器52和重低音扬声器53的输出信号。因此，可以以低处理负荷再现高质量声音。
<第二实施例>
<编码侧信号处理装置的配置示例>
顺便提及，在上述实施例中，在编码侧产生过振幅标志，并且在解码侧基于过振幅标志计算分配增益。然而，分配增益的计算也可以在编码侧进行。在这种情况下，可以进一步减少解码侧的处理负荷，并且可以进一步减少再现延迟。
例如，在编码侧进行分配增益的计算的情况下，编码侧信号处理装置11具有图9所示的结构。应当注意，在图9中，与图2中的部对应的部由相同的附图标记表示，并且将适当地省略其说明。
图9中的信号处理装置11包括平板过振幅检测部21、核心信号编码部22、核心信号解码部101、分配增益计算部102和复用部23。
图9中所示的信号处理装置11的配置与图2中的信号处理装置11的不同之处在于图9中设置了核心信号解码部101和分配增益计算部102，但是除了这一点不同之外与图2中的类似。
核心信号解码部101和分配增益计算部102分别对应于信号处理装置51的核心信号解码部62和分配增益计算部71。
核心信号解码部101通过与在核心信号编码部22处执行的音频编码方法相对应的解码方法对从核心信号编码部22提供的编码音频信号进行解码，并将得到的解码音频信号提供给平板过振幅检测部21和分配增益计算部102。核心信号解码部101执行所谓的局部解码。
平板过振幅检测部21基于从核心信号解码部101提供的各个声道的解码音频信号生成过振幅标志，并将过振幅标志提供给分配增益计算部102和复用部23。
分配增益计算部102基于从核心信号解码部101提供的解码音频信号和从平板过振幅检测部21提供的过振幅标志生成分配增益信息，并将分配增益信息提供给复用部23。
复用部23通过复用从核心信号编码部22提供的编码音频信号、从平板过振幅检测部21提供的过振幅标志和从分配增益计算部102提供的分配增益信息来生成编码数据。
<编码数据的格式示例>
例如，在编码数据包括分配增益信息、即分配增益的情况下，编码数据以图10所示的格式被复用。
在图10所示的例子中，字符串“audio_encoded_data()”表示规定帧的编码数据，字符串“encoded_channel_data()”表示通过规定的音频编码方法进行编码得到的一帧的编码音频信号。
此外，字符串“Number_of_PanelConfig”表示预先定义的平板结构图案的数量，字符串“Num_of_SubPanels[i]”表示构成第i个平板结构图案的平板数量(平板扬声器的数量)。
此外，字符串“Panel_Control_Flag[i][k]”表示第i个平板结构中的第k个平板扬声器的过振幅标志。过振幅标志用1位表示。
在过振幅标志“Panel_Control_Flag[i][k]”的值表示“1”的情况下，包括由字符串“Panel_Gain[p]”表示的分配目的地平板扬声器的分配增益和由字符串“Panel_Gain_SubWf”表示的低音扬声器的分配增益。这里，每个分配增益被量化并用3位表示。应当注意，在该示例中，还包括实际上未被确定为分配目的地平板扬声器的平板扬声器的分配增益。这种分配增益被设置为“0”。然而，可以仅包括实际被确定为分配目的地平板扬声器的平板扬声器的分配增益。
在分配目的地平板扬声器的分配增益“Panel_Gain[p]”中，p表示用于识别相邻平板扬声器、即分配目的地平板扬声器的索引(编号)。
相邻平板扬声器的数量最多为8个，其包括与分配源平板扬声器的上、下、左、右侧相邻设置的平板扬声器，以及与分配源平板扬声器倾斜相邻的平板扬声器。因此，索引p的范围从0到7。
预先确定每个索引p所指示的分配源平板扬声器与相邻平板扬声器之间的相对位置关系，例如，如图11所示。
在图11的示例中，四边形每个都代表单个平板扬声器。具体地，图11中布置在中心的四边形表示分配源平板扬声器，并且围绕中心四边形的四边形中指示的数值均表示索引p的值。
因此，在图11中，例如，设置在分配源平板扬声器下侧的相邻平板扬声器由索引p＝6表示，并且设置在分配源平板扬声器右侧的相邻平板扬声器由索引p＝4表示。在图11中，例如，设置在分配源平板扬声器的右斜下方的相邻平板扬声器由索引p＝7表示。
<编码处理说明>
接着，说明图9所示的信号处理装置11的动作。
具体地，下面将参考图12中的流程图解释图9中的信号处理装置11执行的编码处理。
需要说明的是，步骤S71与图4的步骤S12相同，因此省略说明。然而，在步骤S71，由编码产生的编码音频信号从核心信号编码部22提供给复用部23和核心信号解码部101。
在步骤S72，核心信号解码部101对从核心信号编码部22提供的编码音频信号进行解码，并将得到的解码音频信号提供给平板过振幅检测部21和分配增益计算部102。
在步骤S73，平板过振幅检测部21基于从核心信号解码部101提供的各个声道的解码音频信号，通过检测是否出现过振幅来产生过振幅标志，并将过振幅标志提供给分配增益计算部102和复用部23。需要注意的是，步骤S73与图4中的步骤S11类似。
在步骤S74，分配增益计算部102基于从核心信号解码部101提供的解码音频信号和从平板过振幅检测部21提供的过振幅标志计算分配增益，并将指示计算结果的分配增益信息提供给复用部23。
在与图8中的步骤S43类似的步骤S74，在每个预先定义的平板结构中，为每个平板扬声器计算设置了指示“1”的过振幅标志的低音扬声器和分配目的地平板扬声器的分配增益。
在步骤S75，复用部23通过复用从核心信号编码部22提供的编码音频信号、从平板过振幅检测部21提供的过振幅标志和从分配增益计算部102提供的分配增益信息来生成编码数据。例如，在步骤S75生成根据图10所示格式的编码数据。
在生成编码数据之后，复用部23在步骤S76将编码数据发送到解码侧信号处理装置51。至此，编码处理完成。
如上所述，信号处理装置11生成过振幅标志和分配增益信息，并通过复用过振幅标志、分配增益信息和编码音频信号来生成编码数据。因此，可以在降低解码侧的处理负荷的同时再现高质量的声音。
<解码侧信号处理装置的配置示例>
例如，接收和解码从图9所示的编码侧信号处理装置11发送的编码数据的解码侧信号处理装置具有诸如图13所示的配置。
应注意，图13中与图5中对应的部由相同的附图标记表示，并且将适当地省略其说明。
信号处理装置51包括解复用部61、核心信号解码部62和平板输出调整部63。平板输出调整部63包括平板输出控制部72。
图13中所示的信号处理装置51的配置与图5中的配置的不同之处在于，在图13中所示的信号处理装置51中没有提供分配增益计算部71。除了这个不同之外，图13中所示的信号处理装置51具有与图5中相同的配置。
在图13的示例中，解复用部61向平板输出控制部72提供从编码数据中提取的过振幅标志和分配增益信息(作为解复用的结果)。
基于从解复用部61提供的过振幅标志和分配增益信息以及从核心信号解码部62提供的声道音频信号，平板输出控制部72调整要提供给平板扬声器52和重低音扬声器53的输出信号。
换句话说，平板输出控制部72基于过振幅标志、分配增益信息和声道音频信号生成要提供给平板扬声器52和重低音扬声器53的输出信号。
<解码处理说明>
接下来，将说明信号处理装置51的操作。
具体地，下面将参考图14中的流程图解释由图13中的信号处理装置51执行的解码处理。
在步骤S101，解复用部61解复用接收到的编码数据，并将获得的过振幅标志和获得的分配增益信息提供给平板输出控制部72，并且进一步将获得的编码音频信号提供给核心信号解码部62。
在步骤S102，核心信号解码部62对从解复用部61提供的编码音频信号进行解码，并将得到的声道音频信号提供给平板输出控制部72。
在步骤S103，平板输出控制部72基于从解复用部61提供的过振幅标志和分配增益信息以及从核心信号解码部62提供的声道音频信号来生成输出信号。
需要注意的是，执行与图8中的步骤S44类似的步骤S103，从而产生要提供给平板扬声器52和重低音扬声器53的输出信号。
在如此生成输出信号之后，平板输出控制部72将输出信号提供给平板扬声器52和重低音扬声器53，使得平板扬声器52和重低音扬声器53再现内容声音。至此，解码处理完成。
如上所述，信号处理装置51基于过振幅标志和分配增益信息生成要提供给平板扬声器52和重低音扬声器53的输出信号。因此，可以以低处理负荷再现高质量声音。
根据上述第一实施例和上述第二实施例，一部分输出被分配给相邻的平板扬声器。因此，即使在正常再现会导致平板扬声器***的平板扬声器中过振幅的情况下，也可以再现高质量的声音而不会涉及声压电平的劣化或声像印象的劣化。
此外，在不增加作为解码侧(再现侧)终端装置的信号处理装置51中的资源负载(处理负载)和处理延迟的同时，可以根据平板结构将声道音频信号分配给相邻的平板扬声器。因此，可以以小的处理量(低处理负荷)和减少的处理延迟来再现高质量的声音。
<第三实施例>
<编码侧信号处理装置的配置示例>
同时，最近已经开发了所谓的使用对象声源的对象音频的编码方法和渲染方法，即音频对象(以下简称为对象)，例如MPEG(运动图像专家组)-H3D音频(ISO/IEC 23008-3)。
将对象声源恢复信息作为称为OAM(对象音频元数据)的元数据传送，并且在再现时，基于写在OAM中的对象位置信息来呈现对象。因此，再现了声音。
然而，在对象音频由平板扬声器***再现的情况下，平板扬声器中过振幅的出现降低了位于平板扬声器平板中的对象的声像印象。
特别地，在对象正在移动的情况下，如果对象位于发生过振幅的平板扬声器上，则在过振幅时不会再现对象的声音，或者对象声音的声像位置发生位移。因此，再现质量可能会大大降低。
为此，例如在第一实施例或第二实施例中，将用于再现目标声音的对象信号的一部分分配给相邻的平板扬声器。如果是这样，则可以以低处理负荷抑制声像印象的劣化，并且可以再现高质量的声音。
此外，考虑对象是否正在移动或对象的移动方向来进行对象信号的分配。如果是这样，可以进一步抑制声像印象的劣化。
在下文中，将解释应用本技术以再现对象音频的实施例。
图15是图示应用本技术的编码侧信号处理装置的配置示例的图。应注意，图15中与图2中对应的部由相同的附图标记表示，并且将适当地省略其说明。
图15中的信号处理装置131用作编码装置，其接收声道的声道音频信号的输入和用于将对象声音再现为例如关于内容声音的数据的对象信号的输入，并对对象信号和声道音频信号进行编码。
信号处理装置131包括预渲染器/混合器部141、对象渲染器142、平板过振幅检测部21、对象分配增益计算部143、OAM编码部144、核心信号编码部22和复用部23。
各个对象的对象信号和OAM(对象音频元数据)、各个声道的声道音频信号和预渲染级别被提供给预渲染器/混合器部141。
OAM是对象的元数据。OAM至少包括表示对象在三维空间中所处位置的位置信息，以及表示对象优先级的优先级信息。
预渲染级别是表示编码侧要预渲染的对象数量的信息。例如，将Lev-1、Lev-2和Lev-3中的任何一个指定为预渲染级别。
此处，Lev-1、Lev-2和Lev-3按要预渲染的对象数量的降序指定。即，在Lev-1被指定为预渲染级别的情况下，预渲染级别表示要预渲染的对象的数量最大。需要说明的是，指定预渲染级别的方法不限于此，可以采用任何方法。
在构成内容的对象的数量大的情况下，如果所有对象都由解码侧(再现侧)渲染，则解码侧的处理量变大。
为此，预渲染器/混合器部141在编码侧对构成内容的对象中具有低优先级的对象执行渲染(预渲染)。
具体地，基于低优先级对象的OAM，预渲染器/混合器部141将低优先级对象的对象信号映射到声道的声道音频信号上，从而生成预渲染后的声道音频信号。
通过上述预渲染得到的各声道的预渲染后声道音频信号是用于再现该声道的声音和对应的预渲染对象的声音的音频信号。
特别地，在基于预渲染后声道音频信号再现声音的情况下，每个对象声音的声像被定位在对象上的OAM中包括的位置信息所指示的位置处。
需要注意的是，从多个对象中，预渲染器/混合器部141按照优先级信息指示的优先级的升序选择对象，使得选定对象的数量由预渲染级别决定。所选对象是决定预渲染的对象。另外，在多个对象中，未被选择为预渲染目标的对象，即剩余的对象为非预渲染目标对象。
在下文中，决定不进行预渲染的对象也称为非目标对象，而决定进行预渲染的对象也称为目标对象。
在基于预渲染级别和OAM选择目标对象之后，预渲染器/混合器部141通过基于OAM和目标对象的对象信号以及各个声道的声道音频信号执行预渲染来生成预渲染后声道音频信号。这里，例如，VBAP(基于矢量的幅度平移)等被执行作为预渲染。
预渲染器/混合器部141将预渲染后声道音频信号、非目标对象的对象信号和非目标对象上的OAM提供给对象渲染器142。
此外，预渲染器/混合器部141将非目标对象上的OAM提供给对象分配增益计算部143和OAM编码部144。
此外，预渲染器/混合器部141将预渲染产生的预渲染后声道音频信号和非目标对象的对象信号提供给核心信号编码部22。
对象渲染器142基于预渲染后声道音频信号、非目标对象上的OAM以及从预渲染器/混合器部141提供的非目标对象的对象信号来渲染非目标对象。
具体地，对象渲染器142通过基于OAM将非目标对象的对象信号映射到预渲染后的声道音频信号来生成每个声道的组合声道信号。
例如，对象渲染器142执行VBAP等作为渲染处理。因此，生成用于在与预渲染后声道音频信号相同的声道结构中再现非目标对象的声音的信号。进一步地，将用于再现每个非目标对象的声音的信号和与预渲染后声道音频信号相同声道的信号加在一起形成组合声道信号。
当基于各个声道的组合声道信号再现声音时，再现基于声道音频信号的声音、目标对象的声音和非目标对象的声音。
特别地，在基于组合声道信号再现声音的情况下，非目标对象的声音的声像被定位在由包含在非目标对象上的OAM中的位置信息指示的各个位置处。
对象渲染器142将通过渲染产生的各个声道的组合声道信号提供给平板过振幅检测部21和对象分配增益计算部143。
平板过振幅检测部21基于从对象渲染器142提供的组合声道信号为每个平板结构中的各个平板扬声器生成过振幅标志，并将过振幅标志提供给对象分配增益计算部143和复用部23。
对象分配增益计算部143基于从预渲染器/混合器部141提供的OAM、从对象渲染器142提供的组合声道信号和从平板过振幅检测部21提供的过振幅标志来生成分配增益信息，并将分配增益信息提供给复用部23。
OAM编码部144对从预渲染器/混合器部141提供的非目标对象上的OAM进行编码，并将得到的编码OAM提供给复用部23。
核心信号编码部22通过规定的音频编码方法对非目标对象的对象信号和从预渲染器/混合器部141提供的预渲染后声道音频信号进行编码，并将得出的编码音频信号提供给复用部23。
复用部23按照规定的格式复用从平板过振幅检测部21提供的过振幅标志、从对象分配增益计算部143提供的分配增益信息、从OAM编码部144提供的编码OAM和从核心信号编码部22提供的编码音频信号，并将得到的编码数据发送到解码侧装置。
<分配增益的计算>
这里，将说明对象分配增益计算部143计算分配增益的具体示例。
每个时间连续帧中的对象(非目标对象)上的OAM被提供给对象分配增益计算部143。
因此，对象分配增益计算部143可以根据每个时间点或每个帧的OAM中包括的位置信息确定对象是否位于每个平板结构中包括的平板扬声器的平板中的任何平板中，或者对象是否在移动。
例如，如图16所示，假设在某种平板结构中，9个平板扬声器P0～P8构成一个显示平板。应当注意，图16中的每个矩形代表单个平板扬声器。
假设，如箭头Q31所示，位于平板扬声器P0的平板中的对象OB11正朝着箭头A11的方向移动，即朝向平板扬声器P4的方向。
需要说明的是，可以参考对象OB11在当前帧和过去帧中的OAM来预测对象OB11的移动方向。另外，如果可以进行数据预取，则可以在未来的帧中参考对象OB11上的OAM来更精确地确定对象OB11的移动。
在这种状态下，假设因为平板扬声器P0中将发生过振幅，所以将提供给平板扬声器P0的包括对象OB11的声音的组合声道信号的一部分分配给相邻的平板扬声器。可以根据对象OB11上的OAM中包括的位置信息来确定要提供给平板扬声器P0的组合声道信号是否包括对象OB11的声音。
在这种情况下，如果选择与平板扬声器P0相邻的多个相邻平板扬声器P3、P4和P1作为分配目的地，则对象OB11的声像被划分到多个位置。因此，图像声音被扩展。因此，声像的定位印象(声像印象)变得模糊。
为此，例如，在对象OB11正在移动的情况下，仅需要将组合声道信号分配给对象OB11正在向其移动的平板扬声器P4。即，平板扬声器P4基于对象OB11的移动方向被决定为分配目的地。
需要说明的是，在这种情况下，平板扬声器P4的分配增益例如可以通过与式(5)所示的计算类似的计算来获得。
然而，在这种情况下，等式(5)所表示的计算可以在只有一个平板扬声器可以进行分配的条件下进行，即属于集合S的相邻平板扬声器是单独的平板扬声器P4。
此外，在通过类似于表达式(5)所示的计算获得的平板扬声器P4的分配增益αi大于最大值αi MAX的情况下，最大值αi MAX被替换为表达式(7)所示的分配增益αi。超过最大值αi MAX的声压电平的一部分分配给重低音扬声器53。
相反，如箭头Q32所示，假设位于平板扬声器P0的平板中的对象OB11保持不动。
在平板扬声器P0中将发生过振幅的情况下，在设置了指示“0”的过振幅标志的相邻平板扬声器中，仅最靠近对象OB11的位置的平板扬声器被决定为分配目的地平板扬声器。
因此，在该示例中，最靠近对象OB11的平板扬声器P3被决定(选择)为分配目的地平板扬声器。
需要说明的是，在预计会出现过振幅的平板扬声器的平板中放置多个对象的情况下，只需要根据多个对象中优先级最高的对象的位置和移动方向来确定分配目的地平板扬声器即可。
<编码数据的格式示例>
此外，例如，由信号处理装置131的复用部23获得的编码数据包括图17所示的编码音频数据和图18所示的编码OAM。
在图17中，字符串“audio_encoded_data()”表示编码音频数据，并且例如每帧中的编码音频数据被传送到解码侧。
在该示例中，编码音频数据“audio_encoded_data()”具有用于复用编码音频信号、过振幅标志和分配增益信息的格式。这种格式与图10中所示的格式基本相同。
即，在图17中，字符串“encoded_channel_data()”表示一帧的编码音频信号，且字符串“Number_of_PanelConfig”表示预先定义的模式结构的数量。
此外，字符串“Num_of_SubPanels[i]”表示构成第i个平板结构的平板的数量(平板扬声器的数量)。字符串“Panel_Control_Flag[i][k]”表示为第i个平板结构的第k个平板扬声器设置的过振幅标志。
此外，在该示例中，在对象位于分配源平板扬声器的平板中的情况下，传送指示单个分配目的地平板扬声器的相对位置和分配目的地平板扬声器的分配增益的信息。因此，提高了传输分配增益信息的效率。
具体地，字符串“object_exist”指示对象存在标志，其指示对象在第i个平板结构的第k个平板扬声器的平板中的存在/不存在。
在过振幅标志“Panel_Control_Flag[i][k]”指示“1，”的情况下，即在对应的平板扬声器是分配源平板扬声器的情况下，对象存在标志“object_exist”被存储在该数据中。
另外，在对象存在标志“object_exist”的值表示“1”的情况下，即在对象存在于分配源平板扬声器的平板中的情况下，还包括字符串“Panel_relative_id”表示的分配目的地平板扬声器的相对位置的编号(索引)和字符串“Panel_Gain”表示的分配增益。
例如，表示相对位置的数字“Panel_relative_id,”是上述用3位表示的索引p。此外，分配增益“Panel_Gain”也被量化并由3位表示。
相反，如图10所示，在对象存在标志“object_exist”的值指示“0”的情况下，即在分配源平板扬声器的平板中不存在对象的情况下，存储由字符串“Panel_Gain[p]”指示的分配目的地平板扬声器的分配增益。
另外，在过振幅标志“Panel_Control_Flag[i][k]”表示“1”的情况下，如果需要，还存储由字符串“Panel_Gain_SubWf”表示的低音扬声器的分配增益。
图18中所示的编码OAM在诸如一帧或以几帧为单位的每个规定的对象处理时间段被传送。
在图18的示例中，字符串“object_matadata()”表示诸如编码数据中的一帧的规定时间区间的对象音源元数据。这个元数据是编码的OAM。
此外，编码的OAM包括用于识别由字符串“object_index”指示的对象的索引。
编码后的OAM还包括指示对象位置的方位角“position_azimuth”、指示对象位置的仰角“position_elevation”和指示对象位置的半径“position_radius”。
编码后的OAM还包括用于对对象进行增益校正的增益“gain_factor”、指示用于渲染的对象的优先级的优先级信息“dynamic_object_prority”等。
<编码处理说明>
接下来，将说明信号处理装置131的操作。
具体地，下面将参考图19中的流程图说明由信号处理装置131执行的编码处理。
在步骤S131，预渲染器/混合器部141执行预渲染。
具体地，预渲染器/混合器部141基于提供的预渲染级别和对象上的OAM来选择要预渲染的目标对象。
然后，预渲染器/混合器部141基于提供的目标对象的对象信号和目标对象上的OAM以及提供的各个声道的声道音频信号执行VBAP等，且从而生成各个声道的预渲染后声道音频信号。
预渲染器/混合器部141将各个声道的预渲染后声道音频信号、以及所提供的非目标对象的对象信号和非目标对象上OAM提供给对象渲染器142。
此外，预渲染器/混合器部141将非目标对象上的OAM提供给对象分配增益计算部143和OAM编码部144，并将预渲染后声道音频信号和非目标对象的对象信号提供给核心信号编码部22。
在步骤S132，对象渲染器142基于各个声道的预渲染后声道音频信号和非目标对象的对象信号以及从预渲染器/混合器部141提供的在其上的OAM来渲染非目标对象。例如，在步骤S132，执行VBAP等作为渲染。因此，生成各个声道的组合声道信号。
对象渲染器142将通过渲染产生的各个声道的组合声道信号提供给平板过振幅检测部21和对象分配增益计算部143。
在步骤S133，平板过振幅检测部21基于从对象渲染器142提供的组合声道信号为每个平板结构中的各个平板扬声器生成过振幅标志，并将过振幅标志提供给对象分配增益计算部143和复用部23。例如，执行与图4中的步骤S11类似的步骤S133以检测过振幅并产生过振幅标志。
在步骤S134，对象分配增益计算部143基于从预渲染器/混合器部141提供的OAM、从对象渲染器142提供的组合声道信号和从自平板过振幅检测部21提供的过振幅标志来执行分配增益计算处理。
需要说明的是，在后面详细说明的分配增益计算处理中，在各平板结构中计算分配增益，以便生成分配增益信息。
对象分配增益计算部143将作为分配增益计算处理的结果获得的分配增益信息提供给复用部23。
在步骤S135，OAM编码部144对从预渲染器/混合器部141提供的非目标对象上的OAM进行编码，并将得到的编码OAM提供给复用部23。
在步骤S136，核心信号编码部22对非目标对象的对象信号和从预渲染器/混合器部141提供的预渲染后声道音频信号进行编码，并将得到的编码音频信号提供给复用部23。
在步骤S137，复用部23通过复用从平板过振幅检测部21提供的过振幅标志、从对象分配增益计算部143提供的分配增益信息、从OAM编码部144提供的编码OAM、以及从核心信号编码部22提供的编码音频信号生成编码数据。这里，例如，通过图17和图18所示的格式生成编码数据。
在步骤S138，复用部23将编码数据发送到解码侧装置。因此，编码处理完成。
如上所述，信号处理装置131生成过振幅标志和分配增益信息，并通过复用过振幅标志、分配增益信息和编码音频信号来生成编码数据。因此，可以在抑制解码侧的处理负荷的同时再现高质量的声音。
<分配增益计算处理的说明>
将参考图20中的流程图说明由信号处理装置131执行的图19中步骤S134的分配增益计算处理。需要注意的是，分配增益计算处理是针对每个预先定义的平板结构执行的。
在步骤S171，对象分配增益计算部143从正在处理的平板结构中的多个平板扬声器中选择一个要处理的平板扬声器作为目标平板扬声器。
在步骤S172，对象分配增益计算部143基于从平板过振幅检测部21提供的为目标平板扬声器设置的过振幅标志，确定在目标平板扬声器中是否会发生过振幅。
在步骤S172确定不会发生过振幅的情况下，即在过振幅标志指示“0”的情况下，不需要将输出分配给目标平板扬声器。然后，处理进行到步骤S180。
另一方面，在步骤S172中确定将发生过振幅的情况下，即在过振幅标志指示“1”的情况下，对象分配增益计算部143在步骤S173中确定目标平板扬声器的平板中是否存在任何对象。
例如，基于从预渲染器/混合器部141提供的非目标对象的OAM，对象分配增益计算部143通过确定每个非目标对象是否位于目标平板扬声器的平板中来进行确定。
在步骤S173确定不存在对象的情况下，处理进行到步骤S174。
在步骤S174中，对象分配增益计算部143基于为相邻平板扬声器设置的过振幅标志，从与目标平板扬声器相邻的相邻平板扬声器中选择不会发生过振幅(即设置了指示“0”的过振幅标志)的相邻平板扬声器作为分配目的地平板扬声器。
在这种情况下，在稍后解释的步骤S179(其中计算分配增益)，声压电平(其与每个相邻平板扬声器中幅度值上限的容差成比例)被分配给一个或多个相邻的平板扬声器(其中不会发生过振幅)。
在以这种方式选择(决定)分配目的地平板扬声器之后，处理进行到步骤S179。
另一方面，在步骤S173确定目标平板扬声器的平板中布置有任何对象的情况下，处理进行到步骤S175。
在步骤S175，对象分配增益计算部143基于从预渲染器/混合器部141提供的非目标对象上的OAM，从位于目标平板扬声器的平板中的非目标对象中选择具有最高优先级的非目标对象。例如，该选择是基于图18所示的优先级信息“dynamic_object_prority”进行的。
需要说明的是，在下文中，在步骤S175中选择的具有最高优先级的非目标对象也称为选择对象。
在步骤S176，对象分配增益计算部143基于所选对象的OAM确定所选对象是否正在移动。
这里，例如，基于在诸如当前帧和过去帧的多个帧中的所选对象上的OAM来识别所选对象的运动(运动)的存在/不存在和运动方向，因此，确定所选对象是否正在移动。
例如，可以基于所选对象在不同时间点(帧)之间的位置差异来识别所选对象的移动的存在/不存在和移动方向。此外，如果信号处理装置131中的处理延迟是允许的，则例如可以使用当前帧和作为未来帧的下一帧中的OAM来识别移动和移动方向。
在步骤S176确定选择对象正在移动的情况下，处理然后进行到步骤S177。
在步骤S177，对象分配增益计算部143基于所选对象的移动方向，选择所选对象正朝着其移动的相邻平板扬声器作为分配目的地平板扬声器。在步骤S177之后，处理进行到步骤S179。
另一方面，在步骤S176确定所选对象没有移动并且保持不动的情况下，处理然后进行到步骤S178。
在步骤S178，对象分配增益计算部143基于选定的对象的位置从与目标平板扬声器相邻的相邻平板扬声器中选择定位于最靠近所选对象的相邻平板扬声器作为分配目的地平板扬声器。在步骤S178之后，处理然后进行到步骤S179。
在步骤S174、步骤S177或步骤S178之后执行步骤S179。
在步骤S179，对象分配增益计算部143计算被选为分配目的地的分配目的地平板扬声器的分配增益。
例如，执行与图8中的步骤S43类似的步骤S179，以便不仅计算分配目的地扬声器的分配增益，而且计算分配源平板扬声器的分配增益。如果要分配给低音扬声器，还要计算低音扬声器的分配增益。
需要注意的是，例如，在执行步骤S177和步骤S178的情况下，分配目的地平板扬声器的数量为1个。即使在这种情况下，在属于集合S的相邻平板扬声器的数量是1的条件下，进行类似于表达式(5)和表达式(8)所示的计算。因此，可以获得其分配增益。
在执行了步骤S179或在步骤S172确定不会发生过振幅的情况下，对象分配增益计算部143在步骤S180确定是否已经对所有平板扬声器执行了处理。
例如，在作为目标平板扬声器的所有平板扬声器都执行了步骤S172至步骤S179的情况下，在步骤S180确定已经对所有平板扬声器执行了处理。
在步骤S180确定没有对所有平板扬声器执行处理的情况下，处理返回到步骤S171，然后重复上述步骤。
相反，在步骤S180确定已经对所有平板扬声器执行了处理的情况下，对象分配增益计算部143将指示通过步骤S171至S180获得的分配增益的分配增益信息提供给复用部23。然后，分配增益计算处理完成。
当分配增益计算处理完成时，图19中的步骤S134完成。此后，处理进行到图19中的步骤S135。
在上述方式中，信号处理装置131基于目标平板扬声器的平板中对象的存在/不存在、对象的运动的存在/不存在，以及对象的运动方向来选择分配目的地平板扬声器，并计算分配增益。
结果，可以将声压电平分配给更合适的相邻平板扬声器，从而可以在提供更高声像印象的同时再现声音。即，可以再现高质量的声音。
需要说明的是，在执行上述分配增益计算处理后，在预计平板扬声器仍会出现过振幅的情况下，例如，可以将优先级次高的对象定义为选择对象，还可以执行步骤S176至S179。因此，对多个分配目的地平板扬声器进行分配，从而可以防止发生过振幅。
<解码侧信号处理装置的配置示例>
接下来，下面将给出接收和解码从编码侧信号处理装置131发送的编码数据的解码侧信号处理装置的说明。
例如，这种类型的解码侧信号处理装置具有图21所示的配置。应当注意，图21中与图5中对应的部由相同的附图标记表示，并且将适当地省略其说明。
图21中的信号处理装置171包括解复用部61、OAM解码部181、对象渲染器182、核心信号解码部62、声道转换部183、混合部184和平板输出调整部63。另外，平板输出调整部63包括平板输出控制部72。
解复用部61通过接收和解复用编码数据，从发送自信号处理装置131的复用部23的编码数据中提取过振幅标志、分配增益信息、编码OAM和编码音频信号。
解复用部61将过振幅标志和分配增益信息提供给平板输出控制部72，将编码的OAM提供给OAM解码部181，并将编码音频信号提供给核心信号解码部62。
OAM解码部181对从解复用部61提供的编码OAM进行解码，并将得到的OAM提供给对象渲染器182。
核心信号解码部62对从解复用部61提供的编码音频信号进行解码，并将得到的对象信号提供给对象渲染器182。此外，核心信号解码部62将解码产生的预渲染后声道音频信号提供给声道转换部183。
对象渲染器182基于从OAM解码部181提供的OAM和从核心信号解码部62提供的对象信号来执行诸如VBAP的渲染，并且将得到的渲染对象信号提供给混合器部184。
例如，对象渲染器182执行类似于由图15中的信号处理装置131的对象渲染器142执行的渲染。因此，生成各个声道的渲染对象信号。
声道转换部183执行将从核心信号解码部62提供的预渲染后声道音频信号转换为除提供的声道音频信号的声道结构之外的声道结构中的各个声道的经转换的声道信号的转换处理。。
具体地，声道转换部183将规定的声道结构的声道音频信号转换为由解码侧(即平板扬声器52和重低音扬声器53)能够再现的声道结构(声道数)的变换声道信号。
例如，声道转换部183在转换处理中对预渲染后的声道音频信号进行下混音或上混音，从而以对应于平板扬声器52和重低音扬声器53的声道结构生成转换后的声道信号。声道转换部183将作为转换处理的结果获得的转换后的声道信号提供给混频器部184。
需要说明的是，转换处理只需要根据需要执行即可。如果预渲染后声道音频信号的声道结构足够，则将预渲染后声道音频信号作为转换后的声道信号直接输出。
混合器部184组合从对象渲染器182提供的渲染对象信号和从声道转换部183提供的转换后的声道信号，并将得到的各个声道的再现信号提供给平板输出控制部72。
具体地，混合器部184通过将渲染对象信号和相同声道的转换声道信号相加(混合)来生成每个声道的再现信号。
平板输出控制部72基于从解复用部61提供的过振幅标志和分配增益信息以及从混频器部184提供的再现信号，决定要提供给平板扬声器52和重低音扬声器53的输出信号。
具体地，平板输出控制部72基于过振幅标志、分配增益信息和再现信号生成要提供给平板扬声器52和重低音扬声器53的输出信号。输出信号由对象信号或声道音频信号产生。因此，也可以认为平板输出控制部72调整(决定)平板扬声器52和重低音扬声器53成为对象信号和声道音频信号的输出目的地。
<解码处理说明>
接下来，将说明信号处理装置171的操作。
具体地，下面将参考图22中的流程图说明由信号处理装置171执行的解码处理。
在步骤S211，解复用部61通过解复用接收到的编码数据来提取过振幅标志、分配增益信息、编码的OAM和编码音频信号。
解复用部61将过振幅标志和分配增益信息提供给平板输出控制部72，将编码的OAM提供给OAM解码部181，并将编码音频信号提供给核心信号解码部62。
在步骤S212，OAM解码部181对从解复用部61提供的编码OAM进行解码，并将得到的OAM提供给对象渲染器182。
在步骤S213，核心信号解码部62对从解复用部61提供的编码音频信号进行解码，并将得到的对象信号提供给对象渲染器182。此外，核心信号解码部62将解码产生的预渲染后声道音频信号提供给声道转换部183。
在步骤S214，对象渲染器182基于从OAM解码部181提供的OAM和从核心信号解码部62提供的对象信号以及由此渲染到混合器部184的对象信号来执行渲染。
在步骤S215，声道转换部183对从核心信号解码部62提供的预渲染后声道音频信号执行转换处理，并且将得到的转换后的声道信号提供给混合器部184。
在步骤S216，混合器部184通过组合从对象渲染器182提供的渲染对象信号和从声道转换部183提供的转换的声道信号来生成各个声道的再现信号。混合器部184将得到的再现信号提供给平板输出控制部72。
在步骤S217，平板输出控制部72基于从解复用部61提供的过振幅标志和分配增益信息以及再从混合器部184提供现信号，生成要提供给平板扬声器52和重低音扬声器53的输出信号。例如，执行类似于图8中的步骤S44的步骤S217以产生要提供给平板扬声器52和重低音扬声器53的输出信号。
在以这种方式生成输出信号之后，平板输出控制部72将输出信号提供给平板扬声器52和重低音扬声器53以再现内容声音。然后，完成解码处理。
如上所述，信号处理装置171基于过振幅标志和分配增益信息生成要提供给平板扬声器52和重低音扬声器53的输出信号。因此，可以以低处理负荷再现高质量声音。
在至此说明的第三实施例中，在平板扬声器中将发生过振幅的情况下，特别是当通过平板扬声器***再现对象音频时，将再现信号的一部分分配给位于对象附近的平板扬声器或对象正朝其移动的平板扬声器。因此，在不降低对象的图像声音印象和运动印象的同时抑制了过振幅，并且可以再现高质量的声音。
<第四实施例>
<流媒体分发***的配置示例>
同时，在对象音频流分发***中，分发对象音频，即对象音频内容，而与再现侧终端装置的平板结构无关。
因此，即使在平板扬声器的数量，即在再现侧的平板数量少的情况下，或者因为即使在平板数量足够多的情况下也可能仅传送少数对象，无法有效再现对象音频，因为需要处理许多对象。
为此，可以将指示再现侧平板结构的平板结构信息和指示可以在再现侧处理的对象的最大数量的最大对象数量信息传送到分发侧。可以基于再现侧的计算资源获得最大对象数量信息。结果，可以适当地分发和再现内容。
在这种情况下，基于平板结构信息和最大对象数量信息，分发侧可以根据再现侧平板结构或再现侧资源环境进行适当的预渲染，并可以根据过振幅分配再现信号。
例如，如图23所示，形成了这样的流分发***。
图23所示的流分发***包括作为再现侧终端装置的再现装置201和作为对象音频内容分发侧的服务器的分发装置202。
再现装置201和分发装置202通过诸如因特网的网络连接。分发装置202向再现装置201分发对象音频方案中的内容。
再现装置201包括终端信息传输部211、对象音频解码部212和平板扬声器***213。
分发装置202包括预渲染控制部221和对象音频编码部222。
再现装置201的终端信息发送部211通过网络向分发装置202发送平板结构信息和最大对象数量信息。
对象音频解码部212具有与图21所示的信号处理装置171相同的配置。对象音频解码部212接收从分发装置202传送(发送)的编码内容数据，并且对该数据执行解码处理。
例如，平板扬声器***213是包括图21所示的平板扬声器52和重低音扬声器53的扬声器***。平板扬声器***213基于从对象音频解码部212提供的输出信号再现内容声音。
此外，分发装置202的预渲染控制部221基于从终端信息传输部211接收的平板结构信息和最大对象数量信息来决定预渲染级别，并将预渲染级别提供给对象音频编码部222。
对象音频编码部222基于从预渲染控制部221提供的预渲染电平和提供的OAM、提供的对象信号和提供的声道音频信号来生成编码数据，并将编码数据发送到再现装置201。对象音频编码部222具有与图15所示的信号处理装置131相同的配置。
<关于再现处理和分发处理的说明>
接下来，将说明再现装置201和分发装置202的操作。
具体地，下面将参考图24中的流程图说明由再现装置201执行的再现处理和由分发装置202执行的分发处理。
首先，开始再现装置201的再现处理。作为再现装置201向分发装置202发出内容流分发请求的初始处理，执行获得最大对象数的处理。
即，再现装置201的终端信息传输部211通过基于再现装置201中的计算资源获得作为对象音频解码部212可以处理的对象数量最大值的最大对象数量来生成最大对象数量信息。
此外，终端信息传输部211从存储器(未示出)等读出指示平板扬声器***213中的平板结构的平板结构信息。
然后，在步骤S241，终端信息发送部211通过网络向分发装置202发送最大对象数量信息和平板结构信息。
因此，已经从再现装置201向分发装置202给出了内容流分发的请求。需要说明的是，在内容再现处理中计算资源发生变化的情况下，或者由于平板扬声器***213的切换导致平板结构发生变化的情况下，可以在内容的再现期间发送最大对象数量信息和平板结构信息。
此外，在步骤S261，在分发装置202中，预渲染控制部221接收从终端信息发送部211发送的最大对象数量信息和平板结构信息。
在步骤S262，预渲染控制部221基于接收到的最大对象数量信息和平板结构信息来决定用于内容的流式分发的预渲染级别。
例如，在构成平板扬声器***213的平板扬声器的数量(平板的数量)小的情况下，即使当许多对象的对象信号被发送到再现装置201时，对象的动态渲染提供的效果也较小。
因此，在平板结构信息所指示的平板数量，即平板扬声器52的数量较少的情况下，例如，要预渲染的对象的数量，即增加上述目标对象的数量，以实现有效的处理。
此外，在再现装置201侧要渲染的对象的数量，即非目标对象的数量大于对象的最大数量的情况下，在再现装置201处丢弃与最大数量的对象相比多余数量的非目标对象。这里，从优先级最低的顺序选择要丢弃的非目标对象。
因此，在最大对象数较少的情况下，增加需要预渲染的对象数量，即目标对象数量。
这里，图25中示出了由最大对象数量信息指示的最大对象数量和要为由平板结构信息指示的平板数量设置的预渲染级别的具体示例。
在图25中，预渲染级别被设置为Lev-1、Lev-2或Lev-3。
特别是在预渲染级别设置为Lev-1的情况下，目标对象的数量最多。在预渲染级别设置为Lev-3的情况下，目标对象的数量最少。
在图25中，随着最大对象数量和平板数量的增加，目标对象的数量变小。即，要在再现装置201侧呈现的非目标对象的数量变得更大。
例如，在平板的数量较少(例如1或2)并且对象的最大数量也较小(例如1至15)的情况下，将预渲染级别设置为Lev-1。
在以这种方式确定预渲染级别之后，预渲染控制部221将所确定的预渲染级别提供给对象音频编码部222。
返回参考图24中的流程图，在步骤S263，对象音频编码部222基于从预渲染控制部221提供的预渲染级别、提供的OAM、提供的对象信号、以及提供的声道音频信号执行编码处理。
在步骤S263，执行已经参考图19说明的编码处理。即，生成编码数据，并且对象音频编码部222将得到的编码数据发送到再现装置201。
在执行编码处理之后，如上所述，分发装置202的分发处理结束。
另外，在执行编码处理之后，在步骤S242，再现装置201的对象音频解码部212接收从分发装置202发送的编码数据。
在步骤S243，对象音频解码部212通过基于接收到的编码数据执行解码处理来生成要提供给平板扬声器***213的输出信号。
在步骤S243，执行已经参考图22解释的解码处理以生成要提供给构成平板扬声器***213的平板扬声器52和重低音扬声器53的输出信号。
对象音频解码部212将产生的输出信号提供给平板扬声器***213。
在步骤S245，平板扬声器***213基于从对象音频解码部212提供的输出信号再现内容声音。然后，再现处理完成。
以上述方式，再现装置201向分发装置202发送最大对象数量信息和平板结构信息。此外，分发装置202基于从再现装置201接收到的最大对象数量信息和平板结构信息来决定预渲染级别，并生成编码数据。
因此，可以以低处理负荷再现高质量声音。此外，可以根据再现装置201侧的计算资源和平板结构更有效地分发和再现内容。
<计算机配置示例>
上述一系列处理可以由硬件执行，也可以由软件执行。在一系列处理由软件执行的情况下，形成软件的程序被安装到计算机中。这里，计算机的示例包括并入专用硬件的计算机，以及能够通过在其中安装各种程序来执行各种功能的通用个人计算机。
图26是图示根据程序执行上述处理的计算机的硬件配置示例的框图。
在计算机中，CPU(中央处理单元)501、ROM(只读存储器)502和RAM(随机存取存储器)503通过总线504相互连接。
此外，输入/输出接口505连接到总线504。输入部506、输出部507、记录部508、通信部509和驱动器510连接到输入/输出接口505。
输入部506包括键盘、鼠标、麦克风、成像元件等。输出部507包括显示器、扬声器等。记录部508包括硬盘、非易失性存储器等。通信部509包括网络接口等。驱动器510驱动作为磁盘、光盘、磁光盘、半导体存储器等的可移除记录介质511。
在具有上述配置的计算机中，CPU 501将记录在记录部508中的程序例如经由输入/输出接口505和总线504加载到RAM 503中，并执行该程序。因此，执行上述一系列处理。
由计算机(CPU 501)执行的程序可以通过记录在例如用作封装介质的可移除记录介质511中来提供。或者，可以通过诸如局域网、因特网或数字卫星广播的有线或无线传输介质来提供程序。
在计算机中，当可移动记录介质511连接到驱动器510时，程序可以经由输入/输出接口505安装到记录部508中。此外，程序可以通过有线或无线传输介质在通信部509处接收，并且可以安装到记录部508中。或者，程序可以预先安装在ROM 502和记录部508中。
应当注意，由计算机执行的程序可以是用于按照这里说明的时间序列顺序执行处理的程序，或者可以是用于在必要的定时执行处理的程序，例如进行呼叫时。
此外，本技术的实施例不限于上述实施例，并且可以在本技术的要旨的范围内进行各种改变。
例如，本技术可以通过云计算来配置，其中一个功能由多个装置通过网络共享和协同处理。
另外，已经参照上述流程图说明的步骤可以由一个装置执行，也可以由多个装置协同执行。
此外，在一个步骤中包含多个处理的情况下，一个步骤中包含的多个处理可以由一个装置执行，也可以由多个装置协同执行。
此外，本技术可以具有以下配置。
(1)
一种信号处理装置，包括：
解复用部，对编码数据进行解复用，以提取编码音频信号和已针对多个相应的平板扬声器生成的过振幅标志，且每个平板扬声器指示相应的平板扬声器中是否会出现过振幅；
解码部，对编码音频信号进行解码；以及
调整部，基于过振幅标志和通过解码得到的音频信号来调整要提供给多个相应的平板扬声器的音频信号。
(2)
根据(1)的信号处理装置，其中，
在预期在定义为通过所述解码得到的音频信号中的规定的音频信号的输出目的地的输出目的地平板扬声器()中出现过振幅的情况下，调整部决定作为规定的音频信号的输出目的地的输出目的地平板扬声器和不会出现过振幅的另一个平板扬声器。
(3)
根据(2)的信号处理装置，其中，
调整部基于音频信号计算将规定的音频信号输出到另一个平板扬声器时的分配增益。
(4)
根据(2)或(3)的信号处理装置，其中，
另一个平板扬声器与输出目的地平板扬声器相邻布置。
(5)
根据(2)至(4)中任一项的信号处理装置，其中，
另一个平板扬声器是低音扬声器。
(6)
根据(1)至(5)中任一项的信号处理装置，其中，
音频信号为多声道信号，且输出声道的音频信号被定义在多个平板扬声器中的每个平板扬声器中。
(7)
根据(2)的信号处理装置，其中，
各音频信号是音频对象的对象信号。
(8)
根据(7)的信号处理装置，其中，
基于与规定的音频信号对应的音频对象的运动的存在与否在来决定成为规定的音频信号的输出目的地的另一个平板扬声器。
(9)
根据(8)的信号处理装置，其中，
在音频对象保持不动的情况下，平板扬声器中最靠近音频对象的平板扬声器被确定为另一个平板扬声器。
(10)
根据(8)的信号处理装置，其中，
在音频对象移动的情况下，基于音频对象的移动方向决定另一个平板扬声器。
(11)
根据(2)的信号处理装置，其中，
编码数据包括将规定的音频信号输出至另一平板扬声器时的分配增益，以及
调整部基于过振幅标志、通过解码得到的音频信号和分配增益来调整要提供给多个相应平板扬声器的音频信号。
(12)
根据(1)至(11)中任一项的信号处理装置，其中
编码数据包括针对多个不同平板结构中的每一个中的平板扬声器的过振幅标志，所述多个不同平板结构中的每个均包括多个所述平板扬声器。
(13)
一种信号处理方法，由信号处理装置执行，该方法包括：
对编码数据进行解复用以提取编码音频信号和已针对多个相应的平板扬声器生成的过振幅标志，每个过振幅标志指示相应的平板扬声器中是否会出现过振幅；
对编码音频信号进行解码；以及
基于过振幅标志和通过解码得到的音频信号来调整要提供给多个相应平板扬声器的音频信号。
(14)
一种程序，使计算机执行包括以下步骤的进程：
预期对编码数据进行解复用以提取编码音频信号和已针对多个相应的平板扬声器生成的过振幅标志，且每个过振幅标志指示相应的平板扬声器中是否会出现过振幅；
对编码音频信号进行解码；以及
基于过振幅标志和通过解码得到的音频信号来调整要提供给多个相应平板扬声器的音频信号。
(15)
一种信号处理装置，包括：
过振幅检测部，当多个各自的平板扬声器中的每一个基于音频信号再现声音时，检测在对应的平板扬声器中是否会出现过振幅，并产生表示检测结果的过振幅标志；
编码部，对音频信号进行编码；以及
复用部，通过复用用于多个相应平板扬声器的过振幅标志和通过编码得到的编码音频信号来生成编码数据。
(16)
根据(15)的信号处理装置，其中，
音频信号为多声道信号，且输出声道的音频信号被定义在多个平板扬声器中的每个平板扬声器中。
(17)
根据(15)或(16)的信号处理装置，进一步包括：
分配增益计算部，在检测到被定义为音频信号中规定的音频信号的输出目的地的输出目的地平板扬声器中存在过振幅的可能性的情况下，基于音频信号计算将规定的音频信号输出到输出目的地平板扬声器和另一平板扬声器时的分配增益，其中
复用部通过复用过振幅标志、编码音频信号和分配增益来生成编码数据。
(18)
根据(15)至(17)中任一项的信号处理装置，其中
过振幅检测部为多个不同平板结构的每一个中的平板扬声器产生过振幅标志，多个不同平板结构中的每个均包括多个所述平板扬声器。
(19)
一种信号处理装置执行的信号处理方法，该方法包括：
当多个平板扬声器中的每一个基于音频信号再现声音时，检测平板扬声器中是否会出现过振幅，并产生表示检测结果的过振幅标志；
对音频信号进行编码；以及
通过复用用于多个相应平板扬声器的过振幅标志和通过编码得到的编码音频信号来生成编码数据。(20)
一种程序，使计算机执行包括以下步骤的进程：
当多个平板扬声器中的每一个基于音频信号再现声音时，检测平板扬声器中是否会出现过振幅，并产生表示检测结果的过振幅标志；
对音频信号进行编码；以及
通过复用多个相应平板扬声器的过振幅标志和通过编码得到的编码音频信号来生成编码数据。
[符号说明]
11：信号处理装置
21：平板过振幅检测部
22：核心信号编码部
23：复用部
51：信号处理装置
52-1至52-N、52：平板扬声器
53：低音扬声器
61：解复用部
62：核心信号解码部
63：平板输出调整部
71：分配增益计算部
72：平板输出控制部。

Claims (20)

1.一种信号处理装置，包括：
解复用部，对编码数据进行解复用，以提取编码音频信号和已针对多个相应的平板扬声器生成的过振幅标志，每个所述过振幅标志指示相应的平板扬声器中是否会出现过振幅；
解码部，对所述编码音频信号进行解码；以及
调整部，基于所述过振幅标志和通过所述解码得到的音频信号来调整要提供给所述多个相应的平板扬声器的音频信号。
2.根据权利要求1所述的信号处理装置，其中，
在预期在定义为通过所述解码得到的所述音频信号中的规定的音频信号的输出目的地的输出目的地平板扬声器中出现过振幅的情况下，所述调整部决定作为所述规定的音频信号的输出目的地的输出目的地平板扬声器和不会出现过振幅的另一个平板扬声器。
3.根据权利要求2所述的信号处理装置，其中，
所述调整部基于所述音频信号计算将所述规定的音频信号输出到所述另一个平板扬声器时的分配增益。
4.根据权利要求2所述的信号处理装置，其中，
所述另一个平板扬声器与所述输出目的地平板扬声器相邻布置。
5.根据权利要求2所述的信号处理装置，其中，
所述另一个平板扬声器是低音扬声器。
6.根据权利要求1所述的信号处理装置，其中，
所述音频信号为多声道信号，且输出声道的音频信号被定义在多个平板扬声器中的每个平板扬声器中。
7.根据权利要求2所述的信号处理装置，其中，
各所述音频信号是音频对象的对象信号。
8.根据权利要求7所述的信号处理装置，其中，
基于与所述规定的音频信号对应的所述音频对象的运动的存在与否来决定成为所述规定的音频信号的输出目的地的所述另一个平板扬声器。
9.根据权利要求8所述的信号处理装置，其中，
在所述音频对象保持不动的情况下，所述平板扬声器中最靠近所述音频对象的平板扬声器被确定为所述另一个平板扬声器。
10.根据权利要求8所述的信号处理装置，其中，
在所述音频对象移动的情况下，基于所述音频对象的移动方向决定所述另一个平板扬声器。
11.根据权利要求2所述的信号处理装置，其中，
所述编码数据包括将所述规定的音频信号输出至所述另一平板扬声器时的分配增益，以及
所述调整部基于所述过振幅标志、通过所述解码得到的所述音频信号和所述分配增益来调整要提供给所述多个相应的平板扬声器的所述音频信号。
12.根据权利要求1所述的信号处理装置，其中，
所述编码数据包括针对多个不同平板结构中的每一个中的平板扬声器的所述过振幅标志，所述多个不同平板结构中的每个均包括多个所述平板扬声器。
13.一种信号处理方法，由信号处理装置执行，所述方法包括：
对编码数据进行解复用以提取编码音频信号和已针对多个相应的平板扬声器生成的过振幅标志，每个所述过振幅标志指示所述相应的平板扬声器中是否会出现过振幅；
对所述编码音频信号进行解码；以及
基于所述过振幅标志和通过所述解码得到的音频信号来调整要提供给所述多个相应的平板扬声器的音频信号。
14.一种程序，使计算机执行包括以下步骤的进程：
预期对编码数据进行解复用以提取编码音频信号和已针对多个相应的平板扬声器生成的过振幅标志，每个所述过振幅标志指示所述相应的平板扬声器中是否会出现过振幅；
对所述编码音频信号进行解码；以及
基于所述过振幅标志和通过所述解码得到的音频信号来调整要提供给所述多个相应的平板扬声器的音频信号。
15.一种信号处理装置，包括：
过振幅检测部，当多个相应的平板扬声器中的每一个基于音频信号再现声音时，检测在对应的平板扬声器中是否会出现过振幅，并产生表示检测结果的过振幅标志；
编码部，对所述音频信号进行编码；以及
复用部，通过复用用于所述多个相应的平板扬声器的所述过振幅标志和通过所述编码得到的编码音频信号来生成编码数据。
16.根据权利要求15所述的信号处理装置，其中，
所述音频信号为多声道信号，且所述输出声道的音频信号被定义在所述多个平板扬声器中的每个平板扬声器中。
17.根据权利要求15所述的信号处理装置，进一步包括：
分配增益计算部，在检测到被定义为所述音频信号中规定的音频信号的输出目的地的输出目的地平板扬声器中存在过振幅的可能性的情况下，基于所述音频信号计算将所述规定的音频信号输出到所述输出目的地平板扬声器和另一平板扬声器时的分配增益，其中
所述复用部通过复用所述过振幅标志、所述编码音频信号和所述分配增益来生成所述编码数据。
18.根据权利要求15所述的信号处理装置，其中，
所述过振幅检测部为多个不同平板结构中的每个中的平板扬声器产生所述过振幅标志，所述多个不同平板结构中的每个均包括多个所述平板扬声器。
19.一种信号处理方法，由信号处理装置执行，所述方法包括：
当多个平板扬声器中的每一个基于音频信号再现声音时，检测平板扬声器中是否会出现过振幅，并产生表示检测结果的过振幅标志；
对所述音频信号进行编码；以及
通过复用用于多个相应的平板扬声器的所述过振幅标志和通过所述编码得到的编码音频信号来生成编码数据。
20.一种程序，使计算机执行包括以下步骤的进程：
当多个平板扬声器中的每一个基于音频信号再现声音时，检测平板扬声器中是否会出现过振幅，并产生表示检测结果的过振幅标志；
对所述音频信号进行编码；以及
通过复用多个相应的平板扬声器的所述过振幅标志和通过所述编码得到的编码音频信号来生成编码数据。
CN202080050872.2A 2019-07-19 2020-07-03 信号处理装置和方法、以及程序 Active CN114128309B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2019133695 2019-07-19
JP2019-133695 2019-07-19
PCT/JP2020/026170 WO2021014933A1 (ja) 2019-07-19 2020-07-03 信号処理装置および方法、並びにプログラム

Publications (2)

Publication Number Publication Date
CN114128309A true CN114128309A (zh) 2022-03-01
CN114128309B CN114128309B (zh) 2024-05-07

Family

ID=74193802

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080050872.2A Active CN114128309B (zh) 2019-07-19 2020-07-03 信号处理装置和方法、以及程序

Country Status (6)

Country Link
US (1) US20220262374A1 (zh)
EP (1) EP4002870A4 (zh)
JP (1) JPWO2021014933A1 (zh)
KR (1) KR20220035096A (zh)
CN (1) CN114128309B (zh)
WO (1) WO2021014933A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117063487A (zh) * 2021-03-31 2023-11-14 索尼集团公司 显示装置、输出方法以及显示模块

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101009952A (zh) * 2005-12-19 2007-08-01 三星电子株式会社 基于扬声器和听者的位置的有源音频矩阵解码方法和装置
US20090138271A1 (en) * 2004-11-01 2009-05-28 Koninklijke Philips Electronics, N.V. Parametric audio coding comprising amplitude envelops
CN101958120A (zh) * 2009-07-17 2011-01-26 索尼公司 信号编码和解码设备及处理方法、信号处理***、程序
US20110307248A1 (en) * 2009-02-26 2011-12-15 Panasonic Corporation Encoder, decoder, and method therefor
CN202364332U (zh) * 2011-11-24 2012-08-01 厦门华侨电子股份有限公司 一种改善平板电视机机振的装置
CN102947881A (zh) * 2010-06-21 2013-02-27 松下电器产业株式会社 解码装置、编码装置和解码方法、编码方法
US20150066518A1 (en) * 2013-09-05 2015-03-05 Electronics And Telecommunications Research Institute Audio encoding apparatus and method, audio decoding apparatus and method, and audio reproducing apparatus
US20150097658A1 (en) * 2012-04-06 2015-04-09 Nikon Corporation Data processing apparatus and data processing program
CN107637097A (zh) * 2015-06-19 2018-01-26 索尼公司 编码装置和方法、解码装置和方法以及程序
JP2019070823A (ja) * 2014-07-25 2019-05-09 フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ 音響信号符号化装置、音響信号復号装置、音響信号符号化方法および音響信号復号方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA3083753C (en) * 2011-07-01 2021-02-02 Dolby Laboratories Licensing Corporation System and tools for enhanced 3d audio authoring and rendering
EP3893521B1 (en) * 2011-07-01 2024-06-19 Dolby Laboratories Licensing Corporation System and method for adaptive audio signal generation, coding and rendering
WO2018123310A1 (ja) 2016-12-27 2018-07-05 ソニー株式会社 フラットパネルスピーカおよび表示装置
GB2560878B (en) * 2017-02-24 2021-10-27 Google Llc A panel loudspeaker controller and a panel loudspeaker
KR102455501B1 (ko) * 2017-12-20 2022-10-14 엘지디스플레이 주식회사 디스플레이 장치

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090138271A1 (en) * 2004-11-01 2009-05-28 Koninklijke Philips Electronics, N.V. Parametric audio coding comprising amplitude envelops
CN101009952A (zh) * 2005-12-19 2007-08-01 三星电子株式会社 基于扬声器和听者的位置的有源音频矩阵解码方法和装置
US20110307248A1 (en) * 2009-02-26 2011-12-15 Panasonic Corporation Encoder, decoder, and method therefor
CN101958120A (zh) * 2009-07-17 2011-01-26 索尼公司 信号编码和解码设备及处理方法、信号处理***、程序
CN102947881A (zh) * 2010-06-21 2013-02-27 松下电器产业株式会社 解码装置、编码装置和解码方法、编码方法
CN202364332U (zh) * 2011-11-24 2012-08-01 厦门华侨电子股份有限公司 一种改善平板电视机机振的装置
US20150097658A1 (en) * 2012-04-06 2015-04-09 Nikon Corporation Data processing apparatus and data processing program
US20150066518A1 (en) * 2013-09-05 2015-03-05 Electronics And Telecommunications Research Institute Audio encoding apparatus and method, audio decoding apparatus and method, and audio reproducing apparatus
JP2019070823A (ja) * 2014-07-25 2019-05-09 フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ 音響信号符号化装置、音響信号復号装置、音響信号符号化方法および音響信号復号方法
CN107637097A (zh) * 2015-06-19 2018-01-26 索尼公司 编码装置和方法、解码装置和方法以及程序

Also Published As

Publication number Publication date
CN114128309B (zh) 2024-05-07
EP4002870A1 (en) 2022-05-25
JPWO2021014933A1 (zh) 2021-01-28
US20220262374A1 (en) 2022-08-18
WO2021014933A1 (ja) 2021-01-28
EP4002870A4 (en) 2022-09-28
KR20220035096A (ko) 2022-03-21

Similar Documents

Publication Publication Date Title
JP7448760B2 (ja) 点群処理
JP6422995B2 (ja) スクリーン関連オーディオオブジェクトリマッピングのための装置および方法
CN110278345B (zh) 变换方法、变换装置以及图像显示装置
CN110537220B (zh) 信号处理设备和方法及程序
JPWO2019008819A1 (ja) 映像表示装置及び映像表示方法
US20240114143A1 (en) Encoding and decoding a point cloud using patches for in-between samples
US20200126582A1 (en) Signal processing device and method, and program
CN114128309B (zh) 信号处理装置和方法、以及程序
CN111164679B (zh) 编码装置和方法、解码装置和方法以及程序
WO2021241190A1 (ja) メディア配信装置およびメディア配信方法、並びにプログラム
US20200126579A1 (en) Method and apparatus for decoding a bitstream including encoded higher order ambisonics representations
EP3662470B1 (en) Audio object classification based on location metadata
CN113615199A (zh) 处理点云的缺失点
US20220020381A1 (en) Information processing device and method, and program
CN114556432A (zh) 处理点云
JP2005176068A (ja) 動画像配信システム及びその方法
JP2006050387A (ja) データ再生方法、およびデータ再生装置
JP2017212548A (ja) 音声信号処理装置、音声信号処理方法、及びプログラム
KR20210035060A (ko) 이머시브 영상 처리 방법 및 이머시브 영상 합성 방법
JP6683618B2 (ja) 音声信号処理装置
KR100841784B1 (ko) 디지털 정보 표시 시스템, 디지털 정보 표시 시스템의클라이언트 단말 및 디지털 정보 표시 시스템에서클라이언트 단말의 영상 콘텐츠 표시 방법
KR20140128563A (ko) 복호화 객체 리스트 갱신 방법
KR20140128562A (ko) 사용자의 재생 채널의 위치에 따른 객체 신호 복호화 방법
KR20140128561A (ko) 사용자의 재생 채널 환경에 따른 선택적 객체 복호화 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant