JP4464707B2 - 通信装置 - Google Patents

通信装置 Download PDF

Info

Publication number
JP4464707B2
JP4464707B2 JP2004048569A JP2004048569A JP4464707B2 JP 4464707 B2 JP4464707 B2 JP 4464707B2 JP 2004048569 A JP2004048569 A JP 2004048569A JP 2004048569 A JP2004048569 A JP 2004048569A JP 4464707 B2 JP4464707 B2 JP 4464707B2
Authority
JP
Japan
Prior art keywords
transmission mode
bit rate
mode information
transmission
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004048569A
Other languages
English (en)
Other versions
JP2005241761A (ja
Inventor
智史 山梨
薫 佐藤
利幸 森井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Panasonic Holdings Corp
Original Assignee
Panasonic Corp
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to JP2004048569A priority Critical patent/JP4464707B2/ja
Application filed by Panasonic Corp, Matsushita Electric Industrial Co Ltd filed Critical Panasonic Corp
Priority to PCT/JP2005/002764 priority patent/WO2005081232A1/ja
Priority to CN2005800057013A priority patent/CN1922660B/zh
Priority to CA002557000A priority patent/CA2557000A1/en
Priority to US10/590,417 priority patent/US7653539B2/en
Priority to EP08011802A priority patent/EP1968047B1/en
Priority to CN2010101561255A priority patent/CN101819781B/zh
Priority to EP05710495A priority patent/EP1720154B1/en
Priority to DE602005009501T priority patent/DE602005009501D1/de
Priority to DE602005017952T priority patent/DE602005017952D1/de
Priority to KR1020067017018A priority patent/KR20060131851A/ko
Publication of JP2005241761A publication Critical patent/JP2005241761A/ja
Application granted granted Critical
Publication of JP4464707B2 publication Critical patent/JP4464707B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16—Vocoder architecture
    • G10L19/18—Vocoders using multiple modes
    • G10L19/24—Variable rate codecs, e.g. for generating different qualities using a scalable representation such as hierarchical encoding or layered encoding
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/005—Correction of errors induced by the transmission channel, if related to the coding algorithm
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computational Linguistics (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Quality & Reliability (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Detection And Prevention Of Errors In Transmission (AREA)
  • Transmission Systems Not Characterized By The Medium Used For Transmission (AREA)
  • Communication Control (AREA)

Description

本発明は、インターネット通信に代表されるパケット通信システムや、移動通信システムなどで音声・楽音信号を伝送する場合における通信装置に関するものである。
インターネット通信に代表されるパケット通信システムや、移動通信システムなどで音声・楽音信号を伝送する場合、音声・楽音信号の伝送効率を高めるため、圧縮・符号化技術がよく使われる。また、信号の多重化に関しても、各通信端末の伝送ビットレートが小さい程、多くの通信の多重化が可能になるため、多くの加入者が同時に通信するためには、各通信端末の伝送ビットレートを下げ、回線の効率化を図る手法が望まれている。
これに対して、従来から、通信端末及び基地局において、同時接続者数、呼損率、接続待ち時間、ＢＥＲ（Bit Error Rate）、ＳＩＲ（Signal Interference Ratio）等の情報を取得し、得られた情報に応じて、予め定められた複数の通信モードの中から適切なモードを選択して通信を行うことにより、伝送ビットレートを下げる技術が開示されている（例えば、特許文献１）。
また、話者の音声の有無を検出し、その検出結果に応じて伝送ビットレートを制御するという手法も開発されている。例えば、非特許文献１には、話者の音声の有無を検出し、話者が音声を発している区間（有声区間）は高ビットレートで符号化し、話者が音声を発していない区間（無声区間）は低ビットレートで符号化し伝送することにより、全体として伝送ビットレートを下げる技術が開示されている（例えば、非特許文献１）。
特開平１１−３３１９３６号公報 ANSI/TIA/EIA-96-C, Speech Service Option Standard for Wideband Spread Spectrum Digital Cellular System
しかしながら、上記従来の音声・楽音符号化／復号化方法では、送信側の通信環境の一つとして通話中一定時間無音であれば伝送ビットレートを低くする制御を行っているのみで、受信側の使用環境については全く考慮されていないため、効率的な伝送を行うことができないという課題を有している。
本発明はかかる点に鑑みてなされたものであり、受信側の使用環境を考慮して送信側の伝送ビットレートを制御することにより、所定の品質を維持しつつ効率的な音声・楽音信号の符号化を行うことができる通信装置を提供することを目的とする。
本発明の通信装置は、入力信号からマスキングレベルを算出するマスキングレベル算出手段と、前記マスキングレベルに基づいて第１伝送モード情報を決定し、前記第１伝送モード情報と、通信相手の装置における環境雑音のレベルに基づく第２伝送モード情報とにより第３伝送モード情報を決定する伝送モード判定手段と、前記第３伝送モード情報に対応した伝送ビットレートで入力信号を符号化し、符号化によって得られた情報源符号と前記第１伝送モードとを前記通信相手の装置に伝送する符号化手段と、を具備し、前記第１伝送モード情報は、前記マスキングレベルの所定期間における最大値を最小値で除した値と、所定の閾値との比較結果に基づいて高ビットレート又は低ビットレートのいずれかで表され、前記第２伝送モード情報は、通信相手の装置における環境雑音のレベルに応じて高ビットレート又は低ビットレートのいずれかで表され、前記伝送モード判定手段は、前記第１伝送モード情報が低ビットレートかつ前記第２伝送モード情報が高ビットレートで有る場合に第１ビットレートを示し、前記第１伝送モード情報が高ビットレートかつ前記第２伝送モード情報が高ビットレート、あるいは、前記第１伝送モード情報が低ビットレートかつ前記第２伝送モード情報が低ビットレートで有る場合に前記第１ビットレートよりも低い第２ビットレートを示し、前記第１伝送モード情報が高ビットレートかつ前記第２伝送モード情報が低ビットレートで有る場合に前記第２ビットレートよりも低い第３ビットレートを示す、第３伝送モード情報を決定する、構成を採る。
この構成により、受信側において自動車や電車の走行音等が存在した場合、受信側においてそのような環境雑音を認識し、環境雑音によるマスキング効果を利用することにより、送信側は、音声・楽音信号を、人間の聴感に影響のない範囲で最小限の伝送ビットレートを用いて通信することが可能となり、それによって回線効率を大幅に向上させることができる。また、受信側の環境雑音に加え、送信側における環境雑音の情報を検知し、これを音声・楽音信号の符号化に利用することにより、さらに効率的な通信が可能となる。
本発明の通信装置は、通信相手の装置にて符号化して得られた情報源符号を復号化する復号化手段と、入力信号から第１マスキングレベルを算出し、前記復号化手段が復号化した信号から第２マスキングレベルを算出するマスキングレベル算出手段と、前記第１マスキングレベルに基づいて第１伝送モード情報を決定し、前記第２マスキングレベルに基づいて第２伝送モード情報を決定し、前記第１伝送モード情報と前記第２伝送モード情報とにより第３伝送モード情報を決定する伝送モード判定手段と、前記第３伝送モード情報に対応した伝送ビットレートで前記入力信号を符号化し、符号化によって得られた情報源符号を前記通信相手の装置に伝送する符号化手段と、を具備し、前記第１伝送モード情報は、前記第１マスキングレベルの所定期間における最大値を最小値で除した値と、所定の閾値との比較結果に基づいて高ビットレート又は低ビットレートのいずれかで表され、前記第２伝送モード情報は、前記第２マスキングレベルの所定期間における最大値を最小値で除した値と、所定の閾値との比較結果に基づいて高ビットレート又は低ビットレートのいずれかで表され、前記伝送モード判定手段は、前記第１伝送モード情報が低ビットレートかつ前記第２伝送モード情報が高ビットレートで有る場合に第１ビットレートを示し、前記第１伝送モード情報が高ビットレートかつ前記第２伝送モード情報が高ビットレート、あるいは、前記第１伝送モード情報が低ビットレートかつ前記第２伝送モード情報が低ビットレートで有る場合に前記第１ビットレートよりも低い第２ビットレートを示し、前記第１伝送モード情報が高ビットレートかつ前記第２伝送モード情報が低ビットレートで有る場合に前記第２ビットレートよりも低い第３ビットレートを示す、第３伝送モード情報を決定する、構成を採る。
この構成により、受信側において自動車や電車の走行音等が存在した場合、送信側において、受信側から伝送されてきた音声・楽音信号に含まれる環境雑音を認識し、環境雑音によるマスキング効果を利用することができるので、送信側は、人間の聴感に影響のない範囲で最小限の伝送ビットレートを用いて通信することが可能となり、それにより回線効率が大幅に向上する。また、受信側の環境雑音に加え、送信側における環境雑音の情報を検知し、それを音声・楽音信号符号化に利用することにより、より効率的な通信が可能となる。
本発明の通信装置は、前記伝送モード判定手段は、ユーザの指示に基づくタイミングで前記第３伝送モード情報を決定する処理を行う構成を採る。
本発明の通信装置は、前記伝送モード判定手段は、前記第３伝送モード情報を決定する処理を定期的に行う構成を採る。
本発明の通信装置は、前記伝送モード判定手段は、検知した環境雑音のレベルと前回検知したものとの差が所定の閾値より大きい場合に前記第３伝送モード情報を決定する処理を行う構成を採る。
これらの構成により、受信側において自動車や電車の走行音等が存在した場合、受信側においてそのような環境雑音を認識し、環境雑音によるマスキング効果を利用することにより、送信側は、音声・楽音信号を、人間の聴感に影響のない範囲で最小限の伝送ビットレートを用いて通信することが可能となり、それによって回線効率を大幅に向上させることができる。
本発明の基地局装置は、上記いずれかの通信装置を具備する構成を採る。また、本発明の通信端末装置は、上記いずれかの通信装置を具備する構成を採る。
これらの構成により、受信側において自動車や電車の走行音等が存在した場合、受信側においてそのような環境雑音を認識し、環境雑音によるマスキング効果を利用することにより、送信側は、音声・楽音信号を、人間の聴感に影響のない範囲で最小限の伝送ビットレートを用いて通信することが可能となり、それによって回線効率を大幅に向上させることができる。
本発明の中継局は、第１通信装置と第２通信装置とが中継局を経由して無線通信を行う通信システムの前記中継局であって、予め設定されたビットレートで前記第１通信装置にて入力信号を符号化して得られた情報源符号、前記予め設定されたビットレートを示す初期伝送モード情報、及び前記第１通信装置の入力信号に含まれる環境雑音のレベルに基づいて設定される第１伝送モード情報を前記第１通信装置から入力する第１インターフェース手段と、前記第２通信装置の入力信号に含まれる環境雑音のレベルに応じて前記第１通信装置から伝送される信号の伝送ビットレートを制御する第２伝送モード情報を前記第２通信装置から入力する第２インターフェース手段と、前記初期伝送モード情報、前記第１伝送モード情報及び前記第２伝送モード情報が所定の関係に有る場合に前記初期伝送モード情報を変更して第３伝送モード情報とし、他の場合に前記初期伝送モード情報をそのまま第３伝送モード情報とし、前記情報源符号を前記第３伝送モード情報に応じた伝送ビットレートに変換する伝送モード変換手段と、変換後の情報源符号と前記第３伝送モードとを統合し、統合後の情報を前記第２インターフェース手段を介して第２通信装置に伝送する符号化情報統合手段と、を具備し、前記初期伝送モード情報は、第１ビットレート、前記第１ビットレートよりも低い第２ビットレート又は前記第２ビットレートよりも低い第３ビットレートのいずれかで表され、前記第１伝送モード情報は、高ビットレート又は低ビットレートのいずれかで表され、前記第２伝送モード情報は、高ビットレート又は低ビットレートのいずれかで表され、前記伝送モード変換手段は、前記初期伝送モード情報が第１ビットレートであって、前記第１伝送モード情報が高ビットレートかつ前記第２伝送モード情報が高ビットレート、あるいは、前記第１伝送モード情報が低ビットレートかつ前記第２伝送モード情報が低ビットレートで有る場合に、前記初期伝送モード情報を第２ビットレートに変更して前記第３伝送モード情報とし、前記初期伝送モード情報が第１ビットレートあるいは第２ビットレートであって、前記第１伝送モード情報が低ビットレートかつ前記第２伝送モード情報が高ビットレートで有る場合に前記初期伝送モード情報を第３ビットレートに変更して前記第３伝送モード情報とする、構成を採る。
この構成により、受信側及び送信側において自動車や電車の走行音等の環境雑音が存在した場合に、送信側ではなく、中継局においても伝送ビットレートを制御することができるので、より柔軟な伝送ビットレート制御が可能となり、更なる回線効率の向上を図ることができる。
本発明によれば、受信側において自動車や電車の走行音等が存在した場合、受信側における環境雑音によるマスキング効果を利用して送信側のビットレートを決定することにより、送信側は、人間の聴感に影響のない範囲で最小限の伝送ビットレートで通信することができるので、回線効率を大幅に向上させることができる。
ＭＰ３（Mpeg-1 Audio Layer-3）やＡＡＣ（Advanced Audio Coding）に代表されるようなオーディオ符号化方式では、聴感マスキング効果を利用し、帯域毎に符号化時の量子化誤差が、符号化対象となるオーディオ信号から算出されるマスキングレベル以下になるように量子化することで、効率的な符号化を実現している。聴感マスキング効果とは、「ある周波数にエネルギーの大きな成分が存在することにより、その近隣の周波数のエネルギーの小さな成分がマスクされ、聴覚的に聴こえなくなる」という現象である。
図１は、聴感マスキング効果を説明する図である。図１中の成分Ｂ、成分Ｃは、成分Ａ及び成分Ｄにマスクされ聴感的には感知されない。従って、成分Ｂ及び成分Ｃのようなマスクされる成分は大きく削減しても知覚されない。また、エネルギーの大きな成分（図１では三角形の領域の大きな成分）に対しては、符号化時に粗く量子化を行っても、その誤差（量子化誤差）が人間の聴感的に知覚されにくいという性質がある。
本発明の骨子は、オーディオ符号化方式によく用いられている聴感マスキング効果と符号化時の量子化誤差の関係を環境雑音に応用し、環境雑音によるマスキングレベルに基づいて伝送ビットレートを制御することである。
以下、本発明の実施の形態について、添付図面を参照して詳細に説明する。
（実施の形態１）
実施の形態１では、通信端末同士の双方向通信において、環境雑音による聴感マスキング効果を考慮して伝送モードを決定し、伝送ビットレートを制御する音声・楽音符号化／復号化方法について説明する。
図２は、実施の形態１に係る通信端末装置の構成を示すブロック図である。図２では、２つの通信端末装置１００、１５０の間で双方向通信を行うものとする。
まず、通信端末装置１００の構成について説明する。通信端末装置１００は、伝送モード決定部１０１と、信号符号化部１０２と、信号復号化部１０３とから主に構成される。
伝送モード決定部１０１は、入力信号中の音声・楽音信号の背景に含まれる環境雑音を検知し、その環境雑音のレベルに応じて相手側通信端末である通信端末装置１５０から伝送される信号の伝送ビットレートを制御する伝送モードを決定し、決定した伝送モードを示す情報（以下、「伝送モード情報」という）を伝送路１１０及び信号復号化部１０３に出力する。なお、本実施の形態の一例では、予め定められた２つ以上の伝送ビットレートの中から一つの伝送ビットレートを選択するものとし、伝送モード情報は、予め定められた３種類の伝送ビットレートbitrate1、bitrate2、bitrate3（bitrate3＜bitrate2＜bitrate1）の値を取り得るものとする。
信号符号化部１０２は、伝送路１１０を介して通信端末装置１５０から伝送される伝送モード情報に応じて、音声・楽音信号である入力信号を符号化し、得られた符号化情報を伝送路１１０に出力する。
信号復号化部１０３は、伝送路１１０を介して通信端末装置１５０から伝送される符号化情報を復号化し、得られた信号を出力信号として出力する。なお、信号復号化部１０３は、伝送路１１０から出力される符号化情報に含まれる伝送モード情報と伝送モード決定部１０１から得られる伝送モード情報とを、伝送遅延を考慮した上で比較することにより、伝送誤りを検出することができる。具体的には、伝送遅延を考慮した伝送モード決定部１０１から得られる伝送モード情報と伝送路１１０から出力される符号化情報に含まれる伝送モード情報とが異なる場合には、信号復号化部１０３は、伝送路１１０において伝送誤りが発生したと判断する。また、通信端末装置１５０の信号符号化部１５２では、符号化情報に伝送モード情報を統合せず、信号復号化部１０３では、伝送モード決定部１０１から得られる伝送モード情報を用いて、伝送路１１０から出力される符号化情報を復号化するという手法を採ることも可能である。
次に、通信端末装置１５０の構成について説明する。通信端末装置１５０は、伝送モード決定部１５１と、信号符号化部１５２と、信号復号化部１５３とから主に構成される。
伝送モード決定部１５１は、入力信号を入力とし、音声・楽音信号の背景に含まれる環境雑音を検知し、その環境雑音のレベルに応じて通信端末装置１００から伝送される信号の伝送ビットレートを制御する伝送モードを決定し、決定した伝送モードを示す伝送モード情報を伝送路１１０及び信号復号化部１５３に出力する。
信号符号化部１５２は、伝送路１１０を介して通信端末装置１００から伝送される伝送モード情報を入力とし、伝送モード情報に応じて、音声・楽音信号である入力信号を符号化し、得られた符号化情報を伝送路１１０に出力する。
信号復号化部１５３は、伝送路１１０を介して通信端末装置１００から伝送される符号化情報及び伝送モード決定部１５１から得られる伝送モード情報を入力とし、符号化情報を復号化した後、得られた信号を出力信号として出力する。なお、信号復号化部１５３は、伝送路１１０から出力される符号化情報に含まれる伝送モード情報と伝送モード決定部１５１から得られる伝送モード情報とを、伝送遅延を考慮した上で比較することにより、伝送誤りを検出することができる。具体的には、伝送遅延を考慮した伝送モード決定部１５１から得られる伝送モード情報と伝送路１１０から出力される符号化情報に含まれる伝送モード情報とが異なる場合には、信号復号化部１５３は、伝送路１１０において伝送誤りが発生したと判断する。また、通信端末装置１００の信号符号化部１０２では、符号化情報に伝送モード情報を統合せず、信号復号化部１５３では、伝送モード決定部１５１から得られる伝送モード情報を用いて、伝送路１１０から出力される符号化情報を復号化するという手法を採ることも可能である。
次に、図２の伝送モード決定部１０１の内部構成について、図３を用いて説明する。なお、図２の伝送モード決定部１５１の構成は伝送モード決定部１０１の構成と同じである。
伝送モード決定部１０１は、マスキングレベル算出部３０１と、伝送モード判定部３０２とから主に構成される。
マスキングレベル算出部３０１は、入力信号からマスキングレベルを算出し、算出されたマスキングレベルを伝送モード判定部３０２に出力する。
伝送モード判定部３０２は、マスキングレベル算出部３０１から出力されたマスキングレベルと所定の閾値とを比較し、比較結果に基づいて伝送ビットレートを決定する。具体的には、通信端末装置１００において検知された通信端末装置１００側に存在する環境雑音のレベルが大きくマスキングレベルが大きい場合には伝送ビットレートを低くする。これは、その環境雑音による聴感マスキング効果により通信端末装置１５０から伝送する符号化情報の量子化誤差がある程度マスキングされるため、通信端末装置１５０において伝送ビットレートを低くしても、低くしなかった場合と聴感的に同等の品質の復号化信号が得られるという原理に基づくものである。一方、通信端末装置１００において検知された通信端末装置１００側に存在する環境雑音のレベルが小さい場合には、その環境雑音の聴感マスキング効果によって、通信端末装置１５０から伝送する符号化情報の量子化誤差がマスキングされないため、伝送ビットレートを高くする。
そして、伝送モード判定部３０２は、決定した伝送モードを示す伝送モード情報を伝送路１１０及び信号復号化部１０３に出力する。
ここで、伝送モード決定部１０１が、所定期間（例えば、５秒〜１０秒程度の一定区間内）の入力信号のパワー値の最大値と最小値を算出し、最大値と最小値とから、入力信号に含まれる環境雑音のレベルを判定し、そのレベルに応じてビットレートを制御する方法を採る場合におけるマスキングレベル算出部３０１及び伝送モード判定部３０２の処理について説明する。なお、ここでは各フレームを処理する毎に、環境雑音のレベルを判定し、出力する処理を行う場合について説明するが、この他に、通信端末のユーザからのボタン押下などをトリガとして以下の処理を行う、あるいは、ある一定時間間隔ごとに以下の処理を行うといったことも可能である。さらに、一定時間間隔ごとに環境雑音のレベルを検出し、検知した環境雑音のレベルと前回検知したものとの差が所定の閾値より大きい場合に以下の処理を行うといったことも可能である。
まず、マスキングレベル算出部３０１の処理について説明する。マスキングレベル算出部３０１は、入力信号をＮサンプルずつ区切り（Ｎは自然数）、同区間を１フレームとしてフレーム毎に処理を行う。以下、符号化の対象となる入力信号をｘｎ（ｎ＝0,・・・,Ｎ-1）と表す。
また、マスキングレベル算出部３０１は、内部にバッファbufｉ（ｉ＝0,・・・,Ｎｉ-1）を有する。ここで、Ｎｉは予め定められる非負の整数であり、１フレームのサンプル数Ｎに依存し、１フレームの区間がおよそ20ミリ秒程度の場合には、100〜500程度の値で性能が得られることが確認されている。
次に、マスキングレベル算出部３０１は、処理対象であるフレームのフレームパワーＰframeを以下の式１により求める。
Figure 0004464707
 次に、マスキングレベル算出部３０１は、式１により求めたフレームパワーＰframeをバッファbufＮi-１に代入する。
次に、マスキングレベル算出部３０１は、ｉ区間（区間長Ｎｉ）におけるフレームパワーＰframeの最小値ＰframeMINと最大値ＰframeMAXを求め、ＰframeMIN、ＰframeMAXを伝送モード判定部３０２に出力する。
次に、マスキングレベル算出部３０１は、以下の式２によりバッファbufｉを更新する。
Figure 0004464707
 以上が、図３のマスキングレベル算出部３０１における処理の説明である。
次に、伝送モード判定部３０２における処理について説明する。伝送モード判定部３０２は、マスキングレベル算出部３０１から出力されたＰframeMIN、ＰframeMAXから、伝送モード情報Modeを以下の式３により決定する。
Figure 0004464707
 ここで、Ｔｈ0及びＴｈ1（Ｔｈ0＜Ｔｈ1）は、環境雑音の聴感マスキング効果に基づいた予備実験により予め定められた定数である。
以下、Ｔｈ0及びＴｈ1を算出するための予備実験について簡単に説明する。ここで、Modeがbitrate1のときに使用される符号化方法を符号化方法Ａ、符号化方法Ａにより符号化した情報を復号して得られる信号を復号化信号Ａという。同様に、Modeがbitrate2のときに使用される符号化方法を符号化方法Ｂ、符号化方法Ｂにより符号化した情報を復号して得られる信号を復号化信号Ｂという。また、Modeがbitrate3のときに使用される符号化方法を符号化方法Ｃ、符号化方法Ｃにより符号化した情報を復号して得られる信号を復号化信号Ｃという。
復号化信号Ａと復号化信号Ｂに対して、平均的な雑音（例えばホワイトノイズ等）を、そのレベルが徐々に増加するように付加していき、雑音が付加された復号化信号Ａと雑音が付加された復号化信号Ｂが聴感的に等しくなった時点の雑音レベルをＴｈ0とする。同様に、雑音が付加された復号化信号Ａと雑音が付加された復号化信号Ｃが聴感的に等しくなった時点の雑音レベルをＴｈ1とする。このようにして、雑音によるマスキング効果を利用し、Ｔｈ0及びＴｈ1を実験的に定める。
次に、伝送モード判定部３０２は、伝送モード情報を伝送路１１０及び信号復号化部１０３に出力する。
以上が、図２の伝送モード決定部１０１の内部構成の説明である。
次に、図２の信号符号化部１０２の構成について、図４を用いて説明する。なお、図２の信号符号化部１５２の構成は信号符号化部１０２の構成と同じである。
ここで、本実施の形態では、基本レイヤと２つの拡張レイヤとで構成される３階層の音声符号化／復号化方法において音声・楽音信号を符号化／復号化する場合について説明する。ただし、本発明は階層について制限はなく、４階層以上の階層的な音声符号化／復号化方法において音声・楽音信号を符号化／復号化する場合についても適用することができる。
階層的な音声符号化方法とは、残差信号（下位レイヤの入力信号と下位レイヤの復号化信号との差）を符号化し、符号化情報を出力する音声符号化方法が上位レイヤに複数存在して階層構造を成している方法である。また、階層的な音声復号化方法とは、残差信号を復号化する音声復号化方法が上位レイヤに複数存在して階層構造を成している方法である。ここで、最下のレイヤに存在する音声符号化／復号化方法を基本レイヤとする。また、基本レイヤより上位レイヤに存在する音声符号化／復号化方法を拡張レイヤとする。なお、以下、基本レイヤにおける符号化部、復号化部をそれぞれ基本レイヤ符号化部、基本レイヤ復号化部といい、拡張レイヤにおける符号化部、復号化部をそれぞれ拡張レイヤ符号化部、及び拡張レイヤ復号化部という。
信号符号化部１０２は、伝送ビットレート制御部４０１と、制御スイッチ４０２〜４０５と、基本レイヤ符号化部４０６と、基本レイヤ復号化部４０７と、加算部４０８、４１１と、第１拡張レイヤ符号化部４０９と、第１拡張レイヤ復号化部４１０と、第２拡張レイヤ符号化部４１２と、符号化情報統合部４１３とから主に構成される。
入力信号は、基本レイヤ符号化部４０６及び制御スイッチ４０２に入力される。また、伝送モード情報は、伝送ビットレート制御部４０１に入力される。
伝送ビットレート制御部４０１は、入力した伝送モード情報に応じて、制御スイッチ４０２〜４０５のオン／オフ制御を行う。具体的には、伝送ビットレート制御部４０１は、伝送モード情報がbitrate1である場合、制御スイッチ４０２〜４０５を全てオン状態にする。また、伝送ビットレート制御部４０１は、伝送モード情報がbitrate2である場合、制御スイッチ４０２及び４０３をオン状態にし、制御スイッチ４０４及び４０５をオフ状態にする。また、伝送ビットレート制御部４０１は、伝送モード情報がbitrate3である場合、制御スイッチ４０２〜４０５を全てオフ状態にする。このように、伝送ビットレート制御部４０１が伝送モード情報に応じて制御スイッチをオン／オフ制御することにより、入力信号の符号化に用いる符号化部の組み合わせが決定される。なお、伝送モード情報は、伝送ビットレート制御部４０１から符号化情報統合部４１３に出力される。
基本レイヤ符号化部４０６は、入力信号に対して符号化を行い、符号化により得られた情報源符号（以下、「基本レイヤ情報源符号」という）を制御スイッチ４０３及び符号化情報統合部４１３に出力する。なお、基本レイヤ符号化部４０６の内部構成については後述する。
基本レイヤ復号化部４０７は、制御スイッチ４０３がオン状態である場合、基本レイヤ符号化部４０６から出力された基本レイヤ情報源符号に対して復号化を行い、得られた復号化信号（以下、「基本レイヤ復号化信号」という）を加算部４０８に出力する。なお、基本レイヤ復号化部４０７は、制御スイッチ４０３がオフ状態の場合には何も動作しない。なお、基本レイヤ復号化部４０７の内部構成については後述する。
加算部４０８は、制御スイッチ４０２、４０３がオン状態の場合、入力信号に、基本レイヤ復号化部４０７から出力された基本レイヤ復号化信号の極性を反転させた信号を加算し、加算結果である第１残差信号を第１拡張レイヤ符号化部４０９及び制御スイッチ４０４に出力する。なお、加算部４０８は、制御スイッチ４０２、４０３がオフ状態の場合には何も動作しない。
第１拡張レイヤ符号化部４０９は、制御スイッチ４０２、４０３がオン状態の場合、加算部４０８から出力された第１残差信号に対して符号化を行い、符号化により得られた情報源符号（以下、「第１拡張レイヤ情報源符号」という）を制御スイッチ４０５及び符号化情報統合部４１３に出力する。なお、第１拡張レイヤ符号化部４０９は、制御スイッチ４０２、４０３がオフ状態の場合には何も動作しない。
第１拡張レイヤ復号化部４１０は、制御スイッチ４０５がオン状態の場合、第１拡張レイヤ符号化部４０９から出力された第１拡張レイヤ情報源符号に対して復号化を行い、復号化により得られた復号化信号（以下、「第１拡張レイヤ復号化信号」という）を加算部４１１に出力する。なお、第１拡張レイヤ復号化部４１０は、制御スイッチ４０５がオフ状態の場合には何も動作しない。
加算部４１１は、制御スイッチ４０４、４０５がオン状態の場合、第１残差信号に、第１拡張レイヤ復号化部４１０の出力信号の極性を反転させた信号を加算し、加算結果である第２残差信号を第２拡張レイヤ符号化部４１２に出力する。なお、加算部４１１は、制御スイッチ４０４、４０５がオフ状態の場合には何も動作しない。
第２拡張レイヤ符号化部４１２は、制御スイッチ４０４、４０５がオン状態の場合、加算部４１１から出力される第２残差信号に対して符号化を行い、符号化により得られた情報源符号（以下、「第２拡張レイヤ情報源符号」という）を符号化情報統合部４１３に出力する。なお、第２拡張レイヤ符号化部４１２は、制御スイッチ４０４、４０５がオフ状態の場合には何も動作しない。
符号化情報統合部４１３は、伝送ビットレート制御部４０１から出力された伝送モード情報、基本レイヤ符号化部４０６から出力された基本レイヤ情報源符号、第１拡張レイヤ符号化部４０９から出力された第１拡張レイヤ情報源符号及び第２拡張レイヤ符号化部４１２から出力された第２拡張レイヤ情報源符号を統合し、統合後の符号化情報を伝送路１１０に出力する。
以上が、図４を用いた信号符号化部１０２の構成の説明である。なお、以上では、各フレーム処理時に常に伝送モード情報が伝送ビットレート制御部４０１に入力されるという条件で説明したが、伝送モード情報が伝送ビットレート制御部４０１に入力されない場合には、前回入力された伝送モード情報を伝送ビットレート制御部４０１内のバッファに格納する等して、前回入力時の伝送モード情報を使うことも可能である。
次に、図５を用いて、図４における基本レイヤ符号化部４０６の構成について説明する。なお、本実施の形態では、基本レイヤ符号化部４０６において、ＣＥＬＰタイプの音声符号化を行う場合について説明する。
前処理部５０１は、入力サンプリング周波数の信号に対し、ＤＣ成分を取り除くハイパスフィルタ処理や後続する符号化処理の性能改善につながるような波形整形処理やプリエンファシス処理を行い、これらの処理後の信号（Xin）をＬＰＣ分析部５０２および加算部５０５に出力する。
ＬＰＣ分析部５０２は、Xinを用いて線形予測分析を行い、分析結果（線形予測係数）をＬＰＣ量子化部５０３に出力する。ＬＰＣ量子化部５０３は、ＬＰＣ分析部５０２から出力された線形予測係数（ＬＰＣ）の量子化処理を行い、量子化ＬＰＣを合成フィルタ５０４に出力するとともに量子化ＬＰＣを表す符号（Ｌ）を多重化部５１４に出力する。
合成フィルタ５０４は、量子化ＬＰＣに基づくフィルタ係数により、後述する加算部５１１から出力される駆動音源に対してフィルタ合成を行うことにより合成信号を生成し、合成信号を加算部５０５に出力する。
加算部５０５は、合成信号の極性を反転させてXinに加算することにより誤差信号を算出し、誤差信号を聴覚重み付け部５１２に出力する。
適応音源符号帳５０６は、過去に加算部５１１によって出力された駆動音源をバッファに記憶しており、パラメータ決定部５１３から出力された信号により特定される過去の駆動音源から１フレーム分のサンプルを適応音源ベクトルとして切り出して乗算部５０９に出力する。
量子化利得生成部５０７は、パラメータ決定部５１３から出力された信号によって特定される量子化適応音源利得と量子化固定音源利得とをそれぞれ乗算部５０９と乗算部５１０とに出力する。
固定音源符号帳５０８は、パラメータ決定部５１３から出力された信号によって特定される形状を有するパルス音源ベクトルに拡散ベクトルを乗算して得られた固定音源ベクトルを乗算部５１０に出力する。
乗算部５０９は、量子化利得生成部５０７から出力された量子化適応音源利得を、適応音源符号帳５０６から出力された適応音源ベクトルに乗じて、加算部５１１に出力する。乗算部５１０は、量子化利得生成部５０７から出力された量子化固定音源利得を、固定音源符号帳５０８から出力された固定音源ベクトルに乗じて、加算部５１１に出力する。
加算部５１１は、利得乗算後の適応音源ベクトルと固定音源ベクトルとをそれぞれ乗算部５０９と乗算部５１０とから入力し、これらをベクトル加算し、加算結果である駆動音源を合成フィルタ５０４および適応音源符号帳５０６に出力する。なお、適応音源符号帳５０６に入力された駆動音源は、バッファに記憶される。
聴覚重み付け部５１２は、加算部５０５から出力された誤差信号に対して聴覚的な重み付けをおこない符号化歪みとしてパラメータ決定部５１３に出力する。
パラメータ決定部５１３は、聴覚重み付け部５１２から出力された符号化歪みを最小とする適応音源ベクトル、固定音源ベクトル及び量子化利得を、各々適応音源符号帳５０６、固定音源符号帳５０８及び量子化利得生成部５０７から選択し、選択結果を示す適応音源ベクトル符号（Ａ）、固定音源ベクトル符号（Ｆ）及び音源利得符号（Ｇ）を多重化部５１４に出力する。
多重化部５１４は、ＬＰＣ量子化部５０３から量子化ＬＰＣを表す符号（Ｌ）を入力し、パラメータ決定部５１３から適応音源ベクトルを表す符号（Ａ）、固定音源ベクトルを表す符号（Ｆ）および音源利得を表す符号（Ｇ）を入力し、これらの情報を多重化して基本レイヤ情報源符号として出力する。
以上が、図４の基本レイヤ符号化部４０６の内部構成の説明である。
なお、図４の第１拡張レイヤ符号化部４０９及び第２拡張レイヤ符号化部４１２の内部構成は、基本レイヤ符号化部４０６と同一であり、入力される信号の種類及び出力される情報源符号の種類のみが異なるので、その説明は省略する。
次に、図４の基本レイヤ復号化部４０７の内部構成について図６を用いて説明する。ここでは、基本レイヤ復号化部４０７において、ＣＥＬＰタイプの音声復号化を行う場合について説明する。
図６において、基本レイヤ復号化部４０７に入力された基本レイヤ情報源符号は、多重化分離部６０１によって個々の符号（Ｌ、Ａ、Ｇ、Ｆ）に分離される。分離されたＬＰＣ符号（Ｌ）はＬＰＣ復号化部６０２に出力され、分離された適応音源ベクトル符号（Ａ）は適応音源符号帳６０５に出力され、分離された音源利得符号（Ｇ）は量子化利得生成部６０６に出力され、分離された固定音源ベクトル符号（Ｆ）は固定音源符号帳６０７に出力される。
ＬＰＣ復号化部６０２は、多重化分離部６０１から出力された符号（Ｌ）から量子化ＬＰＣを復号化し、合成フィルタ６０３に出力する。
適応音源符号帳６０５は、多重化分離部６０１から出力された符号（Ａ）で指定される過去の駆動音源から１フレーム分のサンプルを適応音源ベクトルとして取り出して乗算部６０８に出力する。
量子化利得生成部６０６は、多重化分離部６０１から出力された音源利得符号（Ｇ）で指定される量子化適応音源利得と量子化固定音源利得を復号化し乗算部６０８及び乗算部６０９に出力する。
固定音源符号帳６０７は、多重化分離部６０１から出力された符号（Ｆ）で指定される固定音源ベクトルを生成し、乗算部６０９に出力する。
乗算部６０８は、適応音源ベクトルに量子化適応音源利得を乗算して、加算部６１０に出力する。乗算部６０９は、固定音源ベクトルに量子化固定音源利得を乗算して、加算部６１０に出力する。
加算部６１０は、乗算部６０８、６０９から出力された利得乗算後の適応音源ベクトルと固定音源ベクトルとの加算を行い駆動音源を生成し、これを合成フィルタ６０３及び適応音源符号帳６０５に出力する。
合成フィルタ６０３は、ＬＰＣ復号化部６０２によって復号化されたフィルタ係数を用いて、加算部６１０から出力された駆動音源のフィルタ合成を行い、合成した信号を後処理部６０４に出力する。
後処理部６０４は、合成フィルタ６０３から出力された信号に対して、ホルマント強調やピッチ強調といったような音声の主観的な品質を改善する処理や、定常雑音の主観的品質を改善する処理などを施し、基本レイヤ復号化情報として出力する。
以上が、図４の基本レイヤ復号化部４０７の内部構成の説明である。
なお、図４の第１拡張レイヤ復号化部４１０の内部構成は、基本レイヤ復号化部４０７の内部構成と同一であり、入力される情報源符号の種類及び出力される信号の種類のみが異なるので、その説明は省略する。
次に、図２の信号復号化部１０３の構成について図７を用いて説明する。なお、図２の信号復号化部１５３の構成は信号復号化部１０３の構成と同じである。
信号復号化部１０３は、伝送ビットレート制御部７０１と、基本レイヤ復号化部７０２と、第１拡張レイヤ復号化部７０３と、第２拡張レイヤ復号化部７０４と、制御スイッチ７０５、７０６と、加算部７０７、７０８とから主に構成される。
伝送ビットレート制御部７０１は、受信した符号化情報に含まれる伝送モード情報に応じて、制御スイッチ７０５、７０６のオン／オフ制御を行う。具体的には、伝送ビットレート制御部７０１は、伝送モード情報がbitrate1である場合、制御スイッチ７０５、７０６の両方ともオン状態にする。また、伝送ビットレート制御部７０１は、伝送モード情報がbitrate2である場合、制御スイッチ７０５をオン状態にし、制御スイッチ７０６をオフ状態にする。また、伝送ビットレート制御部７０１は、伝送モード情報がbitrate3である場合、制御スイッチ７０５、７０６の両方ともオフ状態にする。また、伝送ビットレート制御部７０１は、受信した符号化情報に含まれる基本レイヤ情報源符号、第１拡張レイヤ情報源符号及び第２拡張レイヤ情報源符号を分離し、それぞれ基本レイヤ情報源符号を基本レイヤ復号化部７０２に出力し、第１拡張レイヤ情報源符号を制御スイッチ７０５に出力し、第２拡張レイヤ情報源符号を制御スイッチ７０６に出力する。
基本レイヤ復号化部７０２は、伝送ビットレート制御部７０１から出力された基本レイヤ情報源符号を復号化し、基本レイヤ復号化信号を生成して加算部７０８に出力する。
第１拡張レイヤ復号化部７０３は、制御スイッチ７０５がオン状態の場合、伝送ビットレート制御部７０１から出力された第１拡張レイヤ情報源符号を復号化し、第１拡張レイヤ復号化信号を生成して加算部７０７に出力する。なお、第１拡張レイヤ復号化部７０３は、制御スイッチ７０５がオフ状態の場合には何も動作しない。
第２拡張レイヤ復号化部７０４は、制御スイッチ７０６がオン状態の場合、伝送ビットレート制御部７０１から出力された第２拡張レイヤ情報源符号を復号化し、第２拡張レイヤ復号化信号を生成して加算部７０７に出力する。なお、第２拡張レイヤ復号化部７０４は、制御スイッチ７０６がオフ状態の場合には何も動作しない。
加算部７０７は、制御スイッチ７０５、７０６がオン状態である場合、第２拡張レイヤ復号化部７０４から出力された第２拡張レイヤ復号化信号と第１拡張レイヤ復号化部７０３から出力された第１拡張レイヤ復号化信号とを加算し、加算後の信号を加算部７０８に出力する。また、加算部７０７は、制御スイッチ７０６がオフ状態であり、かつ、制御スイッチ７０５がオン状態である場合、第１拡張レイヤ復号化部７０３から出力された第１拡張レイヤ復号化信号を加算部７０８に出力する。なお、加算部７０７は、制御スイッチ７０５、７０６がオフ状態である場合には何も動作しない。
加算部７０８は、基本レイヤ復号化部７０２から出力された基本レイヤ復号化信号と加算部７０７の出力信号とを加算し、加算後の信号を出力信号として出力する。また、加算部７０８は、制御スイッチ７０５、７０６がオフ状態である場合、基本レイヤ復号化部７０２から出力された基本レイヤ復号化信号を出力信号として出力する。
以上が、図２の信号復号化部１０３の構成の説明である。
なお、図７の基本レイヤ復号化部７０２、第１拡張レイヤ復号化部７０３及び第２拡張レイヤ復号化部７０４の内部構成は、図４の基本レイヤ復号化部４０７の内部構成と同一であり、入力される信号の種類及び出力される情報源符号の種類のみが異なるので、その説明は省略する。
ここで、信号符号化部１０２及び信号復号化部１０３における符号化／復号化方法として、ビットレートの異なる複数の符号化／復号化方法を切り替えて符号化／復号化する構成を適用することも可能である。以下、この場合の信号符号化部１０２及び信号復号化部１０３の構成について図８、図９を用いて説明する。
なお、本実施の形態では、３種類の音声符号化／復号化方法を利用して音声・楽音信号を符号化／復号化する場合について説明する。ただし、本発明は符号化／復号化方法の数について制限はなく、４種類以上の異なるビットレートの音声符号化／復号化方法を利用して音声・楽音信号を符号化／復号化する場合についても適用することができる。
図８は、信号符号化部１０２の内部構成を示すブロック図である。信号符号化部１０２は、伝送ビットレート制御部８０１と、制御スイッチ８０２、８０３と、信号符号化部８０４〜８０６と、符号化情報統合部８０７とから主に構成される。
入力信号は、制御スイッチ８０２に入力される。また、伝送モード情報は、伝送ビットレート制御部８０１に入力される。
伝送ビットレート制御部８０１は、入力した伝送モード情報に応じて、制御スイッチ８０２、８０３の切替え制御を行う。具体的には、伝送ビットレート制御部８０１は、伝送モード情報がbitrate1である場合、制御スイッチ８０２、８０３を両方とも信号符号化部８０４に接続する。また、伝送ビットレート制御部８０１は、伝送モード情報がbitrate2である場合、制御スイッチ８０２、８０３を両方とも信号符号化部８０５に接続する。また、伝送ビットレート制御部８０１は、伝送モード情報がbitrate3である場合、制御スイッチ８０２、８０３を両方とも信号符号化部８０６に接続する。このように、伝送ビットレート制御部８０１が伝送モード情報に応じて制御スイッチを切替え制御することにより、入力信号の符号化に用いる符号化部が決定される。なお、伝送モード情報は、伝送ビットレート制御部８０１から符号化情報統合部８０７に出力される。
信号符号化部８０４は、bitrate1に対応する符号化方法で入力信号を符号化し、符号化により得られた情報源符号を制御スイッチ８０３経由で符号化情報統合部８０７に出力する。
信号符号化部８０５は、bitrate2に対応する符号化方法で入力信号を符号化し、符号化により得られた情報源符号を制御スイッチ８０３経由で符号化情報統合部８０７に出力する。
信号符号化部８０６は、bitrate3に対応する符号化方法で入力信号を符号化し、符号化により得られた情報源符号を制御スイッチ８０３経由で符号化情報統合部８０７に出力する。
符号化情報統合部８０７は、伝送ビットレート情報制御部８０１から出力された伝送モード情報及びスイッチ８０３から出力された情報源符号を統合し、統合後の符号化情報を伝送路１１０に出力する。
以上が、図８を用いた信号符号化部１０２の構成の説明である。なお、以上では、各フレーム処理時に常に伝送モード情報が伝送ビットレート制御部８０１に入力されるという条件で説明したが、伝送モード情報が伝送ビットレート制御部８０１に入力されない場合には、前回入力された伝送モード情報を伝送ビットレート制御部８０１内のバッファに格納する等して、前回入力時の伝送モード情報を使うことも可能である。
なお、図８の信号符号化部８０４〜８０６の内部構成は、図４の基本レイヤ符号化部４０６と同一であり、入力される信号の種類及び出力される情報源符号の種類のみが異なるので、その説明は省略する。
図９は、信号復号化部１０３の内部構成を示すブロック図である。信号復号化部１０３は、伝送ビットレート制御部９０１と、制御スイッチ９０２、９０３と、信号復号化部９０４〜９０６とから主に構成される。
符号化情報は、伝送ビットレート制御部９０１に入力される。
伝送ビットレート制御部９０１は、受信した符号化情報に含まれる伝送モード情報に応じて、制御スイッチ９０２、９０３の切替え制御を行う。具体的には、伝送ビットレート制御部９０１は、伝送モード情報がbitrate1である場合、制御スイッチ９０２、９０３を両方とも信号復号化部９０４に接続する。また、伝送ビットレート制御部９０１は、伝送モード情報がbitrate2である場合、制御スイッチ９０２、９０３を両方とも信号復号化部９０５に接続する。また、伝送ビットレート制御部９０１は、伝送モード情報がbitrate3である場合、制御スイッチ９０２、９０３を両方とも信号復号化部９０６に接続する。また、受信した情報源符号を制御スイッチ９０２に出力する。
信号復号化部９０４は、制御スイッチ９０２経由で入力した情報源符号をbitrate1に対応する復号化方法で復号化し、復号化により得られた出力信号を制御スイッチ９０３経由で出力する。
信号復号化部９０５は、制御スイッチ９０２経由で入力した情報源符号をbitrate2に対応する復号化方法で復号化し、復号化により得られた出力信号を制御スイッチ９０３経由で出力する。
信号復号化部９０６は、制御スイッチ９０２経由で入力した情報源符号をbitrate3に対応する復号化方法で復号化し、復号化により得られた出力信号を制御スイッチ９０３経由で出力する。
以上が、図９を用いた信号復号化部１０３の構成の説明である。
なお、図９の信号復号化部９０４〜９０６の内部構成は、図４の基本レイヤ復号化部４０７の内部構成と同一であり、入力される情報源符号の種類及び出力される信号の種類のみが異なるので、その説明は省略する。
このように、受信側の環境雑音によるマスキング効果を考慮して、環境雑音によるマスキングレベルに応じて送信側の伝送ビットレートを制御することにより、効率的な音声・楽音信号の符号化を行うことができる。
（実施の形態２）
ここで、上述したＣＥＬＰ等の音声符号化方法は、音声の音源・声道モデルを用いるため、人間の音声については効率的に符号化することができるが、例えば背景に存在する環境雑音等のような人間の音声以外の成分に関しては効率的に符号化することはできない。従って、送信側に環境雑音が存在した場合に、その環境雑音を含む送信側の音声・楽音信号を、環境雑音が存在しない場合と同等の品質で符号化するためには、送信側に環境雑音が存在しない場合よりも多くのビットが必要となる。
実施の形態２では、受信側における環境雑音に加え、送信側における環境雑音も考慮して伝送ビットレートを制御する場合について説明する。
図１０は、本発明の実施の形態２に係る通信端末装置の構成を示すブロック図である。なお、図１０に示す通信端末装置１０００、１０５０において、図２に示した通信端末装置１００、１５０と共通する構成部分には図２と同一の符号を付して説明を省略する。
図１０の通信端末装置１０００は、図２の通信端末装置１００と比較して伝送モード決定部１００１の作用が伝送モード決定部１０１と異なる。また、図１０の通信端末装置１０５０は、図２の通信端末装置１５０と比較して伝送モード決定部１０５１の作用が伝送モード決定部１５１と異なる。
伝送モード決定部１００１は、入力信号中の音声・楽音信号の背景に含まれる環境雑音を検知し、その環境雑音のレベルに応じて相手側通信端末である通信端末装置１０５０から伝送される信号の伝送ビットレートを制御する伝送モードを決定し、決定した伝送モードを示す伝送モード情報を伝送路１１０に出力する。また、伝送モード決定部１００１は、入力信号中の環境雑音のレベル及び通信端末装置１０５０から伝送路１１０を介して伝送される伝送モード情報に基づいて符号化／復号化する際の伝送ビットレートを制御する伝送モードを決定し、決定した伝送モードを示す伝送モード情報を信号符号化部１０２及び信号復号化部１０３に出力する。
次に、図１０の伝送モード決定部１００１の内部構成について、図１１を用いて説明する。伝送モード決定部１００１は、マスキングレベル算出部１１０１と、伝送モード判定部１１０２とから主に構成される。なお、ここでは各フレームを処理する毎に、環境雑音のレベルを判定し、出力する処理を行う場合について説明するが、この他に、通信端末のユーザからのボタン押下などをトリガとして以下の処理を行う、あるいは、ある一定時間間隔ごとに以下の処理を行うことも可能である。
マスキングレベル算出部１１０１は、図３のマスキングレベル算出部３０１と同様に、入力信号からマスキングレベルを算出し、算出されたマスキングレベルを伝送モード判定部１１０２に出力する。
伝送モード判定部１１０２は、マスキングレベル算出部１１０１から出力されたマスキングレベルと所定の閾値との比較結果に基づいて、送信側における環境雑音を考慮して伝送ビットレートを制御する伝送モードを決定し、決定した伝送モードを示す情報（以下、「第１伝送モード情報」という）を伝送路１１０に出力する。また、伝送モード判定部１１０２は、第１伝送モード情報、及び、通信端末装置１０５０から伝送路１１０を介して伝送される伝送モード情報（以下、「第２伝送モード情報」という）に基づいて、送信側及び受信側における環境雑音を考慮して伝送ビットレートを制御する伝送モードを決定し、決定した伝送モードを示す情報（以下、「第３伝送モード情報」という）を信号符号化部１０２及び信号復号化部１０３に出力する。
ここで、伝送モード決定部１００１が、所定期間の入力信号のパワー値の最大値と最小値を算出し、最大値と最小値とから、入力信号に含まれる環境雑音のレベルを判定し、そのレベルに応じてビットレートを制御する方法を採る場合における伝送モード判定部１１０２の処理について説明する。
まず、伝送モード判定部１１０２は、マスキングレベル算出部１１０１から出力されたＰframeMIN、ＰframeMAXから、第１伝送モード情報Mode'1を以下の式４により決定する。
Figure 0004464707
 なお、Th'0は、実施の形態１で説明した予備実験と同様の実験により、環境雑音の聴感マスキング効果に基づいて予め定められた定数である。
次に、伝送モード判定部１１０２は、第１伝送モード情報Mode'1を伝送路１１０に出力する。
また、伝送モード判定部１１０２は、通信端末装置１０５０から伝送路１１０を介して伝送される第２伝送モード情報Mode'2を用いて、以下の式５により、第３伝送モード情報Mode'3を求め、信号符号化部１０２及び信号復号化部１０３に出力する。
Figure 0004464707
 以上が、図１０の伝送モード決定部１００１の内部構成の説明である。
なお、図１０における伝送モード決定部１０５１の構成は、図１０の伝送モード決定部１００１の構成と同一である。
このように、受信側において自動車や電車の走行音等が存在した場合、受信側においてそのような環境雑音を認識し、環境雑音によるマスキング効果を利用することにより、送信側は、音声・楽音信号を、人間の聴感に影響のない範囲で最小限の伝送ビットレートを用いて通信することが可能となり、それによって回線効率を大幅に向上させることができる。また、受信側の環境雑音に加え、送信側における環境雑音の情報を検知し、これを音声・楽音信号の符号化に利用することにより、さらに効率的な通信が可能となる。
（実施の形態３）
実施の形態３では、携帯電話等の携帯端末を利用した音楽配信サービスに代表される単方向通信に関して、本発明の伝送モード情報決定方法を適用した例を説明する。
図１２は、実施の形態３に係る通信装置の構成を示すブロック図である。図１２において、通信装置１２００は音楽配信サービスを受けるユーザ側の通信端末装置であり、通信装置１２５０は音楽配信のサーバ側の基地局装置である。
通信装置１２００は、伝送モード決定部１２０１と、信号復号化部１２０２とから主に構成される。通信装置１２５０は信号符号化部１２５１を有する。
伝送モード決定部１２０１は、音声・楽音信号である入力信号の背景に含まれる環境雑音を検知し、その環境雑音のレベルに応じて通信装置１２５０における伝送ビットレートを制御する伝送モードを決定し、これを伝送モード情報として伝送路１１０及び信号復号化部１２０２に出力する。
信号符号化部１２５１は、伝送路１１０を介して伝送された伝送モード情報に基づいて入力信号を符号化した後、伝送モード情報と統合し、これを符号化情報として伝送路１１０に出力する。
信号復号化部１２０２は、伝送路１１０を介して伝送される符号化情報を復号化し、得られる復号化信号を出力信号として出力する。なお、信号復号化部１２０２は、伝送路１１０から出力される符号化情報に含まれる伝送モード情報と伝送モード決定部１２０１から得られる伝送モード情報とを、伝送遅延を考慮した上で比較することにより、伝送誤りを検出することができる。具体的には、伝送遅延を考慮した伝送モード決定部１２０１から得られる伝送モード情報と伝送路１１０から出力される符号化情報に含まれる伝送モード情報とが異なる場合には、信号復号化部１２０２は、伝送路１１０において伝送誤りが発生したと判断する。また、通信装置１２５０の信号符号化部１２５１では、符号化情報に伝送モード情報を統合せずに、信号復号化部１２０２では、伝送モード決定部１２０１から得られる伝送モード情報を用いて、伝送路１１０から出力される符号化情報を復号化するという手法を採ることも可能である。
なお、図１２の伝送モード決定部１２０１、信号符号化部１２０２、信号復号化部１２５１の内部構成は、それぞれ図２に示した伝送モード決定部１０１、信号符号化部１０２、信号復号化部１０３と同一であるので、それらの構成についての詳しい説明は省略する。
このように、本実施の形態によれば、音楽配信サービス等の単方向通信システムにおいても、通信装置における環境雑音を検知し、環境雑音による聴感マスキング効果を利用して伝送モード情報を決定することにより、基地局装置は、音声・楽音信号を、人間の聴感に影響のない範囲で最小限の伝送ビットレートを用いて通信することが可能となり、それによって回線効率を大幅に向上させることができる。
（実施の形態４）
実施の形態４では、相手側から送信されてきた符号化情報を復号化し、得られる復号化信号に含まれる環境雑音を検知することにより伝送モードを決定する場合について説明する。
図１３は、実施の形態４に係る通信端末装置の構成を示すブロック図である。なお、図１３に示す通信端末装置１３００、１３５０において、図２に示した通信端末装置１００、１５０と共通する構成部分には図２と同一の符号を付して説明を省略する。
図１３の通信端末装置１３００は、図２の通信端末装置１００と比較して伝送モード決定部１３０１の作用が伝送モード決定部１０１と異なる。また、図１３の通信端末装置１３５０は、図２の通信端末装置１５０と比較して伝送モード決定部１３５１の作用が伝送モード決定部１５１と異なる。
伝送モード決定部１３０１は、復号化信号に含まれる環境雑音を検知し、その環境雑音のレベルに応じて符号化する際の伝送ビットレートを制御する伝送モードを決定し、決定した伝送モードを示す伝送モード情報を信号符号化部１０２に出力する。
次に、図１３の伝送モード決定部１３０１の内部構成について、図１４を用いて説明する。伝送モード決定部１３０１は、マスキングレベル算出部１４０１と、伝送モード判定部１４０２とから主に構成される。なお、図１３の伝送モード決定部１３０１は、図２の伝送モード決定部１０１と同様、各フレームを処理する毎に環境雑音のレベルを判定し、出力する処理を行うと手法の他に、通信端末のユーザからのボタン押下などをトリガとして以下の処理を行う、あるいは、ある一定時間間隔ごとに以下の処理を行うといったことも可能である。
マスキングレベル算出部１４０１は、図３のマスキングレベル算出部３０１と同様に、信号復号化部１０３から出力された復号化信号からマスキングレベルを算出し、算出されたマスキングレベルを伝送モード判定部１４０２に出力する。
伝送モード判定部１４０２は、図３の伝送モード判定部３０２と同様に、マスキングレベル算出部１４０１から出力されたマスキングレベルと所定の閾値とを比較し、比較結果に基づいて伝送ビットレートを制御する伝送モードを決定し、決定した伝送モードを示す伝送モード情報を信号符号化部１０２に出力する。
なお、図１３における伝送モード決定部１３５１の内部構成は、伝送モード決定部１３０１の構成と同じであるので、その詳しい説明は省略する。
このように、本実施の形態によれば、相手側から送信されてきた符号化情報を復号化し、得られる復号化信号に含まれる環境雑音を検知することにより、その環境雑音のマスキング効果を利用することができ、非常に効率的な信号の符号化ができる。
（実施の形態５）
実施の形態５では、復号化信号に含まれる受信側における環境雑音に加え、送信側における環境雑音も利用して伝送モードを決定する場合について説明する。
図１５は、実施の形態５に係る通信端末装置の構成を示すブロック図である。なお、図１５に示す通信端末装置１５００、１５５０において、図２に示した通信端末装置１００、１５０と共通する構成部分には図２と同一の符号を付して説明を省略する。
図１５の通信端末装置１５００は、図２の通信端末装置１００と比較して伝送モード決定部１５０１の作用が伝送モード決定部１０１と異なる。また、図１５の通信端末装置１５５０は、図２の通信端末装置１５０と比較して伝送モード決定部１５５１の作用が伝送モード決定部１５１と異なる。
伝送モード決定部１５０１は、入力信号中の音声・楽音信号の背景に含まれる環境雑音を検知し、さらに復号化信号に含まれる環境雑音を検知し、その環境雑音のレベルに応じて符号化する際の伝送ビットレートを制御する伝送モードを決定し、決定した伝送モードを示す伝送モード情報を信号符号化部１０２に出力する。
次に、図１５の伝送モード決定部１５０１の内部構成について、図１６を用いて説明する。伝送モード決定部１５０１は、マスキングレベル算出部１６０１と、伝送モード判定部１６０２とから主に構成される。なお、図１５の伝送モード決定部１５０１は、図２の伝送モード決定部１０１と同様、各フレームを処理する毎に環境雑音のレベルを判定し、出力する処理を行うと手法の他に、通信端末のユーザからのボタン押下などをトリガとして以下の処理を行う、あるいは、ある一定時間間隔ごとに以下の処理を行うといったことも可能である。
マスキングレベル算出部１６０１は、入力信号と、信号復号化部１０３から出力された復号化信号とからマスキングレベルを算出し、算出されたマスキングレベルを伝送モード判定部１６０２に出力する。
伝送モード判定部１６０２は、図３の伝送モード判定部３０２と同様に、マスキングレベル算出部１６０１から出力されたマスキングレベルと所定の閾値とを比較し、比較結果に基づいて伝送ビットレートを制御する伝送モードを決定し、決定した伝送モードを示す伝送モード情報を信号符号化部１０２に出力する。
ここで、伝送モード決定部１５０１が、所定期間の入力信号のパワー値の最大値と最小値を算出し、最大値と最小値とから、入力信号に含まれる環境雑音のレベルを判定し、そのレベルに応じてビットレートを制御する方法を採る場合におけるマスキングレベル算出部１６０１及び伝送モード判定部１６０２の処理について説明する。
マスキングレベル算出部１６０１は、入力信号をＮサンプルずつ区切り（Ｎは自然数）、同区間を１フレームとしてフレーム毎に処理を行う。以下、符号化の対象となる入力信号をu'ｎ（ｎ＝0,・・・,Ｎ-1）と表す。
また、マスキングレベル算出部１６０１は、内部にバッファbufu'ｉ（ｉ＝0,・・・,Ｎｉ-1）を有する。
次に、マスキングレベル算出部１６０１は、処理対象であるフレームのフレームパワーＰframeu'を以下の式６により求める。
Figure 0004464707
 次に、マスキングレベル算出部１６０１は、式６により求めたフレームパワーＰframeu'をバッファbufu'Ni-1に代入する。
次に、マスキングレベル算出部１６０１は、ｉ区間（区間長Ｎｉ）におけるフレームパワーＰframeu'の最小値Ｐframeu'MINと最大値Ｐframeu'MAXを求め、Ｐframeu'MIN、Ｐframeu'MAXを伝送モード判定部１６０２に出力する。
次に、マスキングレベル算出部１６０１は、以下の式７によりバッファbufu'ｉを更新する。
Figure 0004464707
 次に、マスキングレベル算出部１６０１は、信号復号化部１０３から出力される復号化信号をＮサンプルずつ区切り（Ｎは自然数）、Ｎサンプルを１フレームとしてフレーム毎に処理を行う。以下、符号化の対象となる復号化信号u"n（ｎ＝0,・・・,Ｎ-1）と表す。
また、マスキングレベル算出部１６０１は、内部にバッファbufu"ｉ（ｉ＝0,・・・,Ｎｉ-1）を有する。
次に、マスキングレベル算出部１６０１は、処理対象であるフレームのフレームパワーＰframeu"を以下の式８により求める。
Figure 0004464707
 次に、マスキングレベル算出部１６０１は、式８により求めたフレームパワーＰframeu"をバッファbufu"Ni-1に代入する。
次に、マスキングレベル算出部１６０１は、ｉ区間（区間長Ｎｉ）におけるフレームパワーＰframeu"の最小値Ｐframeu"MINと最大値Ｐframeu"MAXを求め、Ｐframeu"MIN、Ｐframeu"MAXを伝送モード判定部１６０２に出力する。
次に、マスキングレベル算出部１６０１は、以下の式９によりバッファbufu"ｉを更新する。
Figure 0004464707
 以上が、図１６のマスキングレベル算出部１６０１における処理の説明である。
次に、伝送モード判定部１６０２における処理について説明する。伝送モード判定部１６０２は、マスキングレベル算出部１６０１から出力されたＰframeu'MIN、Ｐframeu'MAXから、伝送モード情報Modeu'1を以下の式１０により決定する。
Figure 0004464707
 ここで、Thu'0は、上述した予備実験と同様の実験により、環境雑音の聴感マスキング効果に基づいて予め定められた定数である。
次に、伝送モード判定部１６０２は、マスキングレベル算出部１６０１から出力されたＰframeu"MIN、Ｐframeu"MAXから、伝送モード情報Modeu'2を以下の式１１により決定する。
Figure 0004464707
 ここで、Thu"0は、上述した予備実験と同様の実験により、環境雑音の聴感マスキング効果に基づいて予め定められた定数である。
次に、伝送モード判定部１６０２は、伝送モード情報Modeu'1と伝送モード情報Modeu'2を用いて、以下の式１２により、伝送モード情報Modeu'3を求め、信号符号化部１０２に出力する。
Figure 0004464707
 以上が、図１５の伝送モード決定部１５０１の内部構成の説明である。
なお、図１５の伝送モード決定部１５５１の内部構成は、伝送モード決定部１５０１と同一であり、説明を省略する。
このように、本実施の形態によれば、受信側において自動車や電車の走行音等が存在した場合、送信側において、受信側から伝送されてきた音声・楽音信号に含まれる環境雑音を認識し、環境雑音によるマスキング効果を利用することにより、送信側は、人間の聴感に影響のない範囲で最小限の伝送ビットレートを用いて通信することが可能となり、それにより回線効率が大幅に向上する。また、受信側の環境雑音に加え、送信側における環境雑音の情報を検知し、それを音声・楽音信号符号化に利用することにより、より効率的な通信が可能となる。
（実施の形態６）
実施の形態６では、スケーラブル符号化方式により通信が行われている環境において、伝送路１１０にある中継局が各通信端末装置から伝送される伝送ビットレートを調整する場合について説明する。
図１７は、本発明の実施の形態６に係る通信端末装置及び中継局の構成を示すブロック図である。また、図１７の通信端末装置１７００、１７５０の通信途中に中継局１７３０が存在する。なお、図１７に示す通信端末装置１７００、１７５０において、図２に示した通信端末装置１００、１５０と共通する構成部分には図２と同一の符号を付して説明を省略する。
図１７の通信端末装置１７００は、図２の通信端末装置１００と比較して伝送モード決定部１７０１、信号符号化部１７０２の作用がそれぞれ伝送モード決定部１０１、信号符号化部１０２と異なる。また、図１７の通信端末装置１７５０は、図２の通信端末装置１５０と比較して伝送モード決定部１７５１、信号符号化部１７５２の作用がそれぞれ伝送モード決定部１５１、信号符号化部１５２と異なる。
伝送モード決定部１７０１は、入力信号中の音声・楽音信号の背景に含まれる環境雑音を検知し、その環境雑音のレベルに応じて符号化する際の伝送ビットレートを制御する伝送モードを決定し、決定した伝送モードを示す伝送モード情報を伝送路１１０及び信号復号化部１０３に出力する。なお、図１７の伝送モード決定部１７０１は、図２の伝送モード決定部１０１と同様、各フレームを処理する毎に環境雑音のレベルを判定し、出力する処理を行うと手法の他に、通信端末のユーザからのボタン押下などをトリガとして以下の処理を行う、あるいは、ある一定時間間隔ごとに以下の処理を行うといったことも可能である。
信号符号化部１７０２は、入力信号と初期伝送モード情報を入力し、初期伝送モード情報に応じて、入力信号を符号化し、得られた符号化情報を伝送路１１０に出力する。なお、信号符号化部１７０２の内部構成は、図４に示した信号符号化部１０２と比較して伝送モード情報を初期伝送モード情報に置き換えたものとなる。
伝送モード決定部１７５１は、入力信号中の音声・楽音信号の背景に含まれる環境雑音を検知し、その環境雑音のレベルに応じて符号化する際の伝送ビットレートを制御する伝送モードを決定し、決定した伝送モードを示す伝送モード情報を伝送路１１０及び信号復号化部１５３に出力する。
信号符号化部１７５２は、入力信号と初期伝送モード情報を入力し、初期伝送モード情報に応じて入力信号を符号化し、得られた情報源符号及び初期伝送モード情報を統合し、これを符号化情報として伝送路１１０に出力する。
なお、通信端末装置１７００、１７５０における初期伝送モード情報ModeAは、以下の式１３に表されるものとする。
Figure 0004464707
 なお、図１７の伝送モード決定部１７５１の内部構成は、伝送モード決定部１７０１と同一であるため説明を省略する。
次に、中継局１７３０の内部構成について図１８を用いて説明する。なお、図１８では、通信端末装置１７５０からの伝送モード情報に応じて、通信端末装置１７００からの符号化情報の伝送ビットレートを制御する場合について説明するが、通信端末装置１７００からの伝送モード情報に応じて、通信端末装置１７５０からの符号化情報の伝送ビットレートを制御する場合についても同様である。
中継局１７３０は、インターフェース部１８０１と、符号化情報解析部１８０２と、伝送モード変換部１８０３と、符号化情報統合部１８０４と、インターフェース部１８０５とから主に構成される。
インターフェース部１８０１は、通信端末装置１７００から伝送される情報を伝送路１１０経由で入力し、通信端末装置１７５０への情報を伝送路１１０経由で伝送する。
符号化情報解析部１８０２は、通信端末装置１７００から伝送された情報を解析し、信号符号化部１７０２内の各レイヤで符号化された情報源符号と初期伝送モード情報ModeAとに分離し、それらの情報を伝送モード変換部１８０３に出力する。
伝送モード変換部１８０３は、通信端末装置１７５０から伝送された伝送モード情報ModeBに応じて、情報源符号及び初期伝送モード情報ModeAに対して、伝送ビットレート変換処理を行う。具体的には、伝送モード変換部１８０３は、初期伝送モード情報ModeAがbitrate1であり、伝送モード情報ModeBがbitrate2である場合には、初期伝送モード情報ModeAをbitrate2と変更し、基本レイヤ情報源符号と、第１拡張レイヤ情報源符号と、初期伝送モード情報ModeAとを符号化情報統合部１８０４に出力する。また、伝送モード変換部１８０３は、初期伝送モード情報ModeAがbitrate1であり、伝送モード情報ModeBがbitrate3である場合には、初期伝送モード情報ModeAをbitrate3と変更し、基本レイヤ情報源符号と、初期伝送モード情報ModeAとを符号化情報統合部１８０４に出力する。また、伝送モード変換部１８０３は、伝送モード情報ModeAがbitrate2であり、伝送モード情報ModeBがbitrate3である場合には、初期伝送モード情報ModeAをbitrate3と変更し、基本レイヤ情報源符号と、初期伝送モード情報ModeAとを符号化情報統合部１８０４に出力する。また、伝送モード変換部１８０３は、初期伝送モード情報ModeA、伝送モード情報ModeBが上記以外の組み合わせの場合は、情報源符号及び初期伝送モード情報ModeAをそのまま符号化情報統合部１８０４に出力する。
符号化情報統合部１８０４は、伝送モード変換部１８０３から得られる情報源符号、及び初期伝送モード情報ModeAを入力し、これらを統合し、変換後符号化情報としてインターフェース部１８０５に出力する。
インターフェース部１８０５は、通信端末装置１７５０から伝送される情報を伝送路１１０経由で入力し、通信端末装置１７００への情報を伝送路１１０経由で伝送する。
以上が、図１７の中継局１７３０の構成についての説明である。
このように、本実施の形態によれば、受信側において自動車や電車の走行音等の環境雑音が存在した場合に、送信側ではなく、中継局においても伝送ビットレートを制御することができる。これにより、より柔軟な伝送ビットレート制御が可能となり、更なる回線効率の向上を図ることができる。
なお、本実施の形態では、中継局が、受信側における環境雑音に加え、送信側における環境雑音も利用して伝送ビットレートを制御する伝送モードを決定することもできる。
図１９は、この場合の中継局１７３０の構成を示すブロック図であり、伝送モード変換部１９０１の作用が図１８の伝送モード変換部１８０３と異なる。伝送モード変換部１９０１は、通信端末装置１７００からの伝送モード情報ModeA'と伝送モード情報ModeBとに応じて、情報源符号及び初期伝送モード情報ModeAに対して、伝送ビットレート変換処理を行う。具体的には、伝送モード変換部１９０１は、初期伝送モード情報ModeAがbitrate1であり、伝送モード情報ModeBがbitratehighであり、かつ伝送モード情報ModeA'がbitratehighである場合には、初期伝送モード情報ModeAをbitrate2と変更し、基本レイヤ情報源符号と、第１拡張レイヤ情報源符号と、初期伝送モード情報ModeAとを符号化情報統合部１８０４に出力する。また、伝送モード変換部１９０１は、初期伝送モード情報ModeAがbitrate1であり、伝送モード情報ModeBがbitratelowであり、かつ伝送モード情報ModeA'がbitratelowである場合には、初期伝送モード情報ModeAをbitrate2と変更し、基本レイヤ情報源符号と、第１拡張レイヤ情報源符号と、初期伝送モード情報ModeAとを符号化情報統合部１８０４に出力する。また、伝送モード変換部１９０１は、初期伝送モード情報ModeAがbitrate1であり、伝送モード情報ModeBがbitratelowであり、かつ伝送モード情報ModeA'がbitratehighである場合には、初期伝送モード情報ModeAをbitrate3と変更し、基本レイヤ情報源符号と、初期伝送モード情報ModeAとを符号化情報統合部１８０４に出力する。また、伝送モード変換部１９０１は、初期伝送モード情報ModeAがbitrate2であり、伝送モード情報ModeBがbitratelowであり、かつ伝送モード情報ModeA'がbitratehighである場合には、初期伝送モード情報ModeAをbitrate3と変更し、基本レイヤ情報源符号と、伝送モード情報ModeAとを符号化情報統合部１８０４に出力する。また、伝送モード変換部１９０１は、初期伝送モード情報ModeA、伝送モード情報ModeB及び伝送モード情報ModeA'が上記以外の組み合わせの場合には、情報源符号及び伝送モード情報ModeAをそのまま符号化情報統合部１８０４に出力する。
このように、本実施の形態によれば、受信側及び送信側において自動車や電車の走行音等の環境雑音が存在した場合に、送信側ではなく、中継局においても伝送ビットレートを制御することができる。これにより、より柔軟な伝送ビットレート制御が可能となり、更なる回線効率の向上を図ることができる。
なお、本実施の形態と上記実施の形態３とを組み合わせることにより、音声・楽音信号の単方向通信方式通信がスケーラブル符号化方式により行われている環境において、伝送路１１０にある中継局が存在した場合に、その中継局が、通信端末から伝送される伝送モード情報を利用し、基地局から伝送される符号化情報の情報量を削減し、再び伝送路１１０に送出することもできる。
本発明は、パケット通信システムや移動通信システムの通信端末装置に用いるに好適である。
聴感マスキング効果を説明する図 本発明の実施の形態１に係る通信端末装置の構成を示すブロック図 上記実施の形態に係る通信端末装置の伝送モード決定部の内部構成を示すブロック図 上記実施の形態に係る通信端末装置の信号符号化部の内部構成を示すブロック図 上記実施の形態に係る通信端末装置の基本レイヤ符号化部の内部構成を示すブロック図 上記実施の形態に係る通信端末装置の基本レイヤ復号化部の内部構成を示すブロック図 上記実施の形態に係る通信端末装置の信号復号化部の内部構成を示すブロック図 上記実施の形態に係る通信端末装置の信号符号化部の内部構成を示すブロック図 上記実施の形態に係る通信端末装置の信号復号化部の内部構成を示すブロック図 本発明の実施の形態２に係る通信端末装置の構成を示すブロック図 上記実施の形態に係る通信端末装置の伝送モード決定部の内部構成を示すブロック図 本発明の実施の形態３に係る通信装置の構成を示すブロック図 本発明の実施の形態４に係る通信端末装置の構成を示すブロック図 上記実施の形態に係る通信端末装置の伝送モード決定部の内部構成を示すブロック図 本発明の実施の形態５に係る通信端末装置の構成を示すブロック図 上記実施の形態に係る通信端末装置の伝送モード決定部の内部構成を示すブロック図 本発明の実施の形態６に係る通信端末装置及び中継局の構成を示すブロック図 上記実施の形態に係る中継局の構成を示すブロック図 上記実施の形態に係る中継局の構成を示すブロック図
符号の説明
１０１、１５１、１００１、１０５１、１２０１、１３０１、１３５１、１５０１、１５５１、１７０１、１７５１ 伝送モード決定部
１０２、１５２、１２５１、１７０２、１７５２ 信号符号化部
１０３、１５３、１２０２ 信号復号化部
３０１、１１０１、１４０１、１６０１ マスキングレベル算出部
３０２、１１０２、１４０２、１６０２ 伝送モード判定部
１８０１、１８０５ インターフェース部
１８０２ 符号化情報解析部
１８０３、１９０１ 伝送モード変換部
１８０４ 符号化情報統合部

Claims (8)

  1. 入力信号からマスキングレベルを算出するマスキングレベル算出手段と、
    前記マスキングレベルに基づいて第１伝送モード情報を決定し、前記第１伝送モード情報と、通信相手の装置における環境雑音のレベルに基づく第２伝送モード情報とにより第３伝送モード情報を決定する伝送モード判定手段と、
    前記第３伝送モード情報に対応した伝送ビットレートで入力信号を符号化し、符号化によって得られた情報源符号と前記第１伝送モードとを前記通信相手の装置に伝送する符号化手段と、を具備し、
    前記第１伝送モード情報は、前記マスキングレベルの所定期間における最大値を最小値で除した値と、所定の閾値との比較結果に基づいて高ビットレート又は低ビットレートのいずれかで表され、
    前記第２伝送モード情報は、通信相手の装置における環境雑音のレベルに応じて高ビットレート又は低ビットレートのいずれかで表され、
    前記伝送モード判定手段は、
    前記第１伝送モード情報が低ビットレートかつ前記第２伝送モード情報が高ビットレートで有る場合に第１ビットレートを示し、
    前記第１伝送モード情報が高ビットレートかつ前記第２伝送モード情報が高ビットレート、あるいは、前記第１伝送モード情報が低ビットレートかつ前記第２伝送モード情報が低ビットレートで有る場合に前記第１ビットレートよりも低い第２ビットレートを示し、
    前記第１伝送モード情報が高ビットレートかつ前記第２伝送モード情報が低ビットレートで有る場合に前記第２ビットレートよりも低い第３ビットレートを示す、第３伝送モード情報を決定する、
    通信装置。
  2. 通信相手の装置にて符号化して得られた情報源符号を復号化する復号化手段と、
    入力信号から第１マスキングレベルを算出し、前記復号化手段が復号化した信号から第２マスキングレベルを算出するマスキングレベル算出手段と、
    前記第１マスキングレベルに基づいて第１伝送モード情報を決定し、前記第２マスキングレベルに基づいて第２伝送モード情報を決定し、前記第１伝送モード情報と前記第２伝送モード情報とにより第３伝送モード情報を決定する伝送モード判定手段と、
    前記第３伝送モード情報に対応した伝送ビットレートで前記入力信号を符号化し、符号化によって得られた情報源符号を前記通信相手の装置に伝送する符号化手段と、を具備し、
    前記第１伝送モード情報は、前記第１マスキングレベルの所定期間における最大値を最小値で除した値と、所定の閾値との比較結果に基づいて高ビットレート又は低ビットレートのいずれかで表され、
    前記第２伝送モード情報は、前記第２マスキングレベルの所定期間における最大値を最小値で除した値と、所定の閾値との比較結果に基づいて高ビットレート又は低ビットレートのいずれかで表され、
    前記伝送モード判定手段は、
    前記第１伝送モード情報が低ビットレートかつ前記第２伝送モード情報が高ビットレートで有る場合に第１ビットレートを示し、
    前記第１伝送モード情報が高ビットレートかつ前記第２伝送モード情報が高ビットレート、あるいは、前記第１伝送モード情報が低ビットレートかつ前記第２伝送モード情報が低ビットレートで有る場合に前記第１ビットレートよりも低い第２ビットレートを示し、
    前記第１伝送モード情報が高ビットレートかつ前記第２伝送モード情報が低ビットレートで有る場合に前記第２ビットレートよりも低い第３ビットレートを示す、第３伝送モード情報を決定する、
    通信装置。
  3. 前記伝送モード判定手段は、ユーザの指示に基づくタイミングで前記第３伝送モード情報を決定する処理を行う請求項１又は請求項２記載の通信装置。
  4. 前記伝送モード判定手段は、前記第３伝送モード情報を決定する処理を定期的に行う請求項１又は請求項２記載の通信装置。
  5. 前記伝送モード判定手段は、検知した環境雑音のレベルと前回検知したものとの差が所定の閾値より大きい場合に前記第３伝送モード情報を決定する処理を行う請求項１又は請求項２記載の通信装置。
  6. 請求項１から請求項５のいずれかに記載の通信装置を具備する基地局装置。
  7. 請求項１から請求項５のいずれかに記載の通信装置を具備する通信端末装置。
  8. 第１通信装置と第２通信装置とが中継局を経由して無線通信を行う通信システムの前記中継局であって、
    予め設定されたビットレートで前記第１通信装置にて入力信号を符号化して得られた情報源符号、前記予め設定されたビットレートを示す初期伝送モード情報、及び前記第１通信装置の入力信号に含まれる環境雑音のレベルに基づいて設定される第１伝送モード情報を前記第１通信装置から入力する第１インターフェース手段と、
    前記第２通信装置の入力信号に含まれる環境雑音のレベルに応じて前記第１通信装置から伝送される信号の伝送ビットレートを制御する第２伝送モード情報を前記第２通信装置から入力する第２インターフェース手段と、
    前記初期伝送モード情報、前記第１伝送モード情報及び前記第２伝送モード情報が所定の関係に有る場合に前記初期伝送モード情報を変更して第３伝送モード情報とし、他の場合に前記初期伝送モード情報をそのまま第３伝送モード情報とし、前記情報源符号を前記第３伝送モード情報に応じた伝送ビットレートに変換する伝送モード変換手段と、
    変換後の情報源符号と前記第３伝送モードとを統合し、統合後の情報を前記第２インターフェース手段を介して第２通信装置に伝送する符号化情報統合手段と、を具備し、
    前記初期伝送モード情報は、第１ビットレート、前記第１ビットレートよりも低い第２ビットレート又は前記第２ビットレートよりも低い第３ビットレートのいずれかで表され、
    前記第１伝送モード情報は、高ビットレート又は低ビットレートのいずれかで表され、
    前記第２伝送モード情報は、高ビットレート又は低ビットレートのいずれかで表され、
    前記伝送モード変換手段は、
    前記初期伝送モード情報が第１ビットレートであって、前記第１伝送モード情報が高ビットレートかつ前記第２伝送モード情報が高ビットレート、あるいは、前記第１伝送モード情報が低ビットレートかつ前記第２伝送モード情報が低ビットレートで有る場合に、前記初期伝送モード情報を第２ビットレートに変更して前記第３伝送モード情報とし、
    前記初期伝送モード情報が第１ビットレートあるいは第２ビットレートであって、前記第１伝送モード情報が低ビットレートかつ前記第２伝送モード情報が高ビットレートで有る場合に前記初期伝送モード情報を第３ビットレートに変更して前記第３伝送モード情報とする、
    中継局。
JP2004048569A 2004-02-24 2004-02-24 通信装置 Expired - Fee Related JP4464707B2 (ja)

Priority Applications (11)

Application Number Priority Date Filing Date Title
JP2004048569A JP4464707B2 (ja) 2004-02-24 2004-02-24 通信装置
DE602005009501T DE602005009501D1 (de) 2004-02-24 2005-02-22 Kommunikationseinrichtung, signalcodierungs-/ -decodierungsverfahren
CA002557000A CA2557000A1 (en) 2004-02-24 2005-02-22 Communication device, signal encoding/decoding method
US10/590,417 US7653539B2 (en) 2004-02-24 2005-02-22 Communication device, signal encoding/decoding method
EP08011802A EP1968047B1 (en) 2004-02-24 2005-02-22 Communication apparatus and communication method
CN2010101561255A CN101819781B (zh) 2004-02-24 2005-02-22 通信装置和通信方法
PCT/JP2005/002764 WO2005081232A1 (ja) 2004-02-24 2005-02-22 通信装置及び信号符号化／復号化方法
CN2005800057013A CN1922660B (zh) 2004-02-24 2005-02-22 通信装置和通信方法
DE602005017952T DE602005017952D1 (de) 2004-02-24 2005-02-22 Kommunikationsvorrichtung und Kommunikationsverfahren
KR1020067017018A KR20060131851A (ko) 2004-02-24 2005-02-22 통신 장치 및 신호 부호화/복호화 방법
EP05710495A EP1720154B1 (en) 2004-02-24 2005-02-22 Communication device, signal encoding/decoding method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004048569A JP4464707B2 (ja) 2004-02-24 2004-02-24 通信装置

Publications (2)

Publication Number Publication Date
JP2005241761A JP2005241761A (ja) 2005-09-08
JP4464707B2 true JP4464707B2 (ja) 2010-05-19

Family

ID=34879519

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004048569A Expired - Fee Related JP4464707B2 (ja) 2004-02-24 2004-02-24 通信装置

Country Status (8)

Country Link
US (1) US7653539B2 (ja)
EP (2) EP1968047B1 (ja)
JP (1) JP4464707B2 (ja)
KR (1) KR20060131851A (ja)
CN (2) CN101819781B (ja)
CA (1) CA2557000A1 (ja)
DE (2) DE602005017952D1 (ja)
WO (1) WO2005081232A1 (ja)

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007114291A1 (ja) * 2006-03-31 2007-10-11 Matsushita Electric Industrial Co., Ltd. 音声符号化装置、音声復号化装置、およびこれらの方法
US8619623B2 (en) 2006-08-08 2013-12-31 Marvell World Trade Ltd. Ad-hoc simple configuration
US8233456B1 (en) 2006-10-16 2012-07-31 Marvell International Ltd. Power save mechanisms for dynamic ad-hoc networks
US8732315B2 (en) 2006-10-16 2014-05-20 Marvell International Ltd. Automatic ad-hoc network creation and coalescing using WiFi protected setup
US9308455B1 (en) 2006-10-25 2016-04-12 Marvell International Ltd. System and method for gaming in an ad-hoc network
JP4871894B2 (ja) 2007-03-02 2012-02-08 パナソニック株式会社 符号化装置、復号装置、符号化方法および復号方法
US8628420B2 (en) 2007-07-03 2014-01-14 Marvell World Trade Ltd. Location aware ad-hoc gaming
US7987285B2 (en) 2007-07-10 2011-07-26 Bytemobile, Inc. Adaptive bitrate management for streaming media over packet networks
US7991904B2 (en) 2007-07-10 2011-08-02 Bytemobile, Inc. Adaptive bitrate management for streaming media over packet networks
CN101430880A (zh) * 2007-11-07 2009-05-13 华为技术有限公司 一种背景噪声的编解码方法和装置
US8775665B2 (en) * 2009-02-09 2014-07-08 Citrix Systems, Inc. Method for controlling download rate of real-time streaming as needed by media player
CN102376306B (zh) * 2010-08-04 2013-01-23 华为技术有限公司 语音帧等级的获取方法及装置
WO2012170904A2 (en) 2011-06-10 2012-12-13 Bytemobile, Inc. Adaptive bitrate management on progressive download with indexed media files
CN103828324B (zh) 2011-06-10 2017-11-28 茨特里克斯***公司 用于自适应比特率管理的方法、设备和***
US9560392B2 (en) * 2012-09-07 2017-01-31 Google Inc. Dynamic bit rate encoding
CN103516483B (zh) * 2013-08-29 2016-08-10 天津大学 传输速率可按需调节的远距离有线数据传输装置
CN103780345A (zh) * 2014-01-21 2014-05-07 清华大学 密集通信中实时业务的多缓冲非恒速码传输***和方法
CN105280188B (zh) * 2014-06-30 2019-06-28 美的集团股份有限公司 基于终端运行环境的音频信号编码方法和***
JP6317235B2 (ja) * 2014-11-07 2018-04-25 日本電信電話株式会社 コンテンツサーバ装置、コンテンツサーバ装置の動作方法およびコンピュータプログラム
CN104485112B (zh) * 2014-12-08 2017-12-08 福建联迪商用设备有限公司 一种基于音频通讯中的音频解码方法及其装置
JP7262593B2 (ja) 2019-01-13 2023-04-21 華為技術有限公司 ハイレゾリューションオーディオ符号化

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6125179A (en) * 1995-12-13 2000-09-26 3Com Corporation Echo control device with quick response to sudden echo-path change
JP3750705B2 (ja) 1997-06-09 2006-03-01 松下電器産業株式会社 音声符号化伝送方法及び音声符号化伝送装置
US6185244B1 (en) * 1997-08-29 2001-02-06 Telefonaktiebolaget Lm Ericsson Cell searching in a CDMA communications system
US6201796B1 (en) * 1998-05-14 2001-03-13 Broadcom Corporation Startup protocol for high throughput communications systems
JPH11331936A (ja) 1998-05-20 1999-11-30 Oki Electric Ind Co Ltd 移動体通信システム
US6275798B1 (en) * 1998-09-16 2001-08-14 Telefonaktiebolaget L M Ericsson Speech coding with improved background noise reproduction
JP3061039B2 (ja) 1998-10-20 2000-07-10 日本電気株式会社 無音圧縮符号復号化方法及びその装置
JP2000244384A (ja) * 1999-02-18 2000-09-08 Mitsubishi Electric Corp 移動通信端末装置及び移動通信端末装置における音声符号化レート決定方法
US6760435B1 (en) * 2000-02-08 2004-07-06 Lucent Technologies Inc. Method and apparatus for network speech enhancement
US6898566B1 (en) * 2000-08-16 2005-05-24 Mindspeed Technologies, Inc. Using signal to noise ratio of a speech signal to adjust thresholds for extracting speech parameters for coding the speech signal
JP2003218781A (ja) * 2002-01-24 2003-07-31 Toshiba Corp 通信端末およびネットワーク制御装置
JP2004048569A (ja) 2002-07-15 2004-02-12 Matsushita Electric Ind Co Ltd アンテナ用カバー

Also Published As

Publication number Publication date
CN101819781B (zh) 2012-03-14
WO2005081232A1 (ja) 2005-09-01
EP1720154B1 (en) 2008-09-03
US20080167865A1 (en) 2008-07-10
US7653539B2 (en) 2010-01-26
KR20060131851A (ko) 2006-12-20
DE602005017952D1 (de) 2010-01-07
EP1968047A2 (en) 2008-09-10
DE602005009501D1 (de) 2008-10-16
EP1968047A3 (en) 2008-09-24
EP1720154A1 (en) 2006-11-08
CN101819781A (zh) 2010-09-01
CN1922660B (zh) 2010-06-09
CA2557000A1 (en) 2005-09-01
CN1922660A (zh) 2007-02-28
JP2005241761A (ja) 2005-09-08
EP1720154A4 (en) 2007-02-28
EP1968047B1 (en) 2009-11-25

Similar Documents

Publication Publication Date Title
JP4464707B2 (ja) 通信装置
JP4518714B2 (ja) 音声符号変換方法
US8600740B2 (en) Systems, methods and apparatus for context descriptor transmission
JP5413839B2 (ja) 符号化装置および復号装置
JP5753540B2 (ja) ステレオ信号符号化装置、ステレオ信号復号装置、ステレオ信号符号化方法及びステレオ信号復号方法
JP4263412B2 (ja) 音声符号変換方法
KR100351484B1 (ko) 음성 부호화 장치, 음성 복호화 장치, 음성 부호화 방법 및 기록 매체
WO2004097796A1 (ja) 音声符号化装置、音声復号化装置及びこれらの方法
CN102150202A (zh) 对音频/语音信号进行编码和解码的方法和设备
JP2009539132A (ja) オーディオ信号の線形予測符号化
KR20030041169A (ko) 무성 음성의 코딩 방법 및 장치
JP4445328B2 (ja) 音声・楽音復号化装置および音声・楽音復号化方法
JPH11126098A (ja) 音声合成方法及び装置、並びに帯域幅拡張方法及び装置
KR101610765B1 (ko) 음성 신호의 부호화/복호화 방법 및 장치
US20090271184A1 (en) Scalable encoding device, and scalable encoding method
WO2001065542A1 (fr) Dispositif de codage/decodage de la voix et procede associe
JP4236675B2 (ja) 音声符号変換方法および装置
JP4578145B2 (ja) 音声符号化装置、音声復号化装置及びこれらの方法
JP4373693B2 (ja) 音響信号の階層符号化方法および階層復号化方法
JP2004053763A (ja) 多地点制御装置の音声符号化伝送システム
JP2006072269A (ja) 音声符号化装置、通信端末装置、基地局装置および音声符号化方法
JP2004078235A (ja) 複数レートで動作する無音声符号化を含む音声符号化・復号装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070223

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090901

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091102

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091124

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100107

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100126

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100219

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130226

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4464707

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130226

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140226

Year of fee payment: 4

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees