JPH08191434A - 動画/音声符号化データ多重化方法及び動画/音声符号化データ多重化装置 - Google Patents
動画/音声符号化データ多重化方法及び動画/音声符号化データ多重化装置Info
- Publication number
- JPH08191434A JPH08191434A JP1838395A JP1838395A JPH08191434A JP H08191434 A JPH08191434 A JP H08191434A JP 1838395 A JP1838395 A JP 1838395A JP 1838395 A JP1838395 A JP 1838395A JP H08191434 A JPH08191434 A JP H08191434A
- Authority
- JP
- Japan
- Prior art keywords
- image
- data
- audio
- coded data
- voice
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Television Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Time-Division Multiplex Systems (AREA)
Abstract
(57)【要約】
【目的】 復号化装置におけるメモリ容量を小さくし、
動画と音声の同期が容易に取れ、データ伝送の信頼性を
向上させる動画/音声符号化データ多重化方法及び動画
/音声符号化データ多重化装置を提供する。 【構成】 時分割多重方式の伝送で、パケット長に関係
なく、画像識別子が付加された1画面分の画像符号化デ
ータに続いて音声識別子が付加された1画面分の音声符
号化データを多重化し、1パケット分のデータとして伝
送する動画/音声符号化データ多重化方法及び動画/音
声符号化データ多重化装置である。
動画と音声の同期が容易に取れ、データ伝送の信頼性を
向上させる動画/音声符号化データ多重化方法及び動画
/音声符号化データ多重化装置を提供する。 【構成】 時分割多重方式の伝送で、パケット長に関係
なく、画像識別子が付加された1画面分の画像符号化デ
ータに続いて音声識別子が付加された1画面分の音声符
号化データを多重化し、1パケット分のデータとして伝
送する動画/音声符号化データ多重化方法及び動画/音
声符号化データ多重化装置である。
Description
【0001】
【産業上の利用分野】本発明は、動画と音声の符号化デ
ータの多重化方式及び多重化装置に係り、特に、復号化
装置において画像データと音声データを格納するメモリ
の容量を小さくすることができ、また、動画と音声の同
期を容易にとることができ、データ伝送の信頼性を向上
させることができる動画/音声符号化データ多重化方法
及び動画/音声符号化データ多重化装置に関する。
ータの多重化方式及び多重化装置に係り、特に、復号化
装置において画像データと音声データを格納するメモリ
の容量を小さくすることができ、また、動画と音声の同
期を容易にとることができ、データ伝送の信頼性を向上
させることができる動画/音声符号化データ多重化方法
及び動画/音声符号化データ多重化装置に関する。
【0002】
【従来の技術】TDMA(Time Division Multiplex Ac
cess;時分割多重接続)は、伝送路をタイムスロットと
いう短い時間幅で区切って、各タイムスロットを情報デ
ータチャネルに割り当てるデータ伝送方式である。従
来、TDMA方式を用いた通信装置における動画及び音
声データの多重化方法としては、図5に示すような方法
があった。図5は、従来の動画/音声符号化データ多重
化方法を示す模式説明図である。
cess;時分割多重接続)は、伝送路をタイムスロットと
いう短い時間幅で区切って、各タイムスロットを情報デ
ータチャネルに割り当てるデータ伝送方式である。従
来、TDMA方式を用いた通信装置における動画及び音
声データの多重化方法としては、図5に示すような方法
があった。図5は、従来の動画/音声符号化データ多重
化方法を示す模式説明図である。
【0003】図5に示すように、従来の動画/音声符号
化データ多重化方法では、動画データ及び音声データを
固定長のタイムスロット(パケット)に分割して、各パ
ケットに画像データまたは音声データを割り当てるよう
にしていた。図5の例では、例えば、m個のパケットに
より、n枚目までの画像データを初めに連続して伝送
し、次の1パケットで、画像n枚分に相当する音声デー
タを伝送している。つまり、画像パケットmに対して音
声パケット1という割合で伝送を行う方法である。
化データ多重化方法では、動画データ及び音声データを
固定長のタイムスロット(パケット)に分割して、各パ
ケットに画像データまたは音声データを割り当てるよう
にしていた。図5の例では、例えば、m個のパケットに
より、n枚目までの画像データを初めに連続して伝送
し、次の1パケットで、画像n枚分に相当する音声デー
タを伝送している。つまり、画像パケットmに対して音
声パケット1という割合で伝送を行う方法である。
【0004】また、別の従来の動画/音声符号化データ
多重化方法としては、図6に示すような方法があった。
図6は、別の従来の動画/音声符号化データ多重化方法
を示す模式説明図である。図6に示すように、別の従来
の多重化方法は、固定長のパケット1つ1つの中に、動
画データと、音声データとを一定の比率で割り当てる方
法である。図6の例では、1パケットの中に、p:qの
割合で画像データと音声データとを取り込んで、伝送す
るようにしている。
多重化方法としては、図6に示すような方法があった。
図6は、別の従来の動画/音声符号化データ多重化方法
を示す模式説明図である。図6に示すように、別の従来
の多重化方法は、固定長のパケット1つ1つの中に、動
画データと、音声データとを一定の比率で割り当てる方
法である。図6の例では、1パケットの中に、p:qの
割合で画像データと音声データとを取り込んで、伝送す
るようにしている。
【0005】そして、上記従来の動画/音声符号化デー
タ多重化方法においては、画像と音声の同期をとるため
に、タイムスタンプと呼ばれる情報を付加するようにな
っていた。タイムスタンプは、アクセスユニット(1画
面)毎に、いつ復号・再生を行うかを指定する時刻管理
のタグのようなものである。そして、復号器内部の基本
となる同期信号がタイムスタンプと一致した場合に、そ
の画面のデータを復号・再生するようになっていた。そ
のため、復号器においては、伝送路から受信したデータ
を、タイムスタンプにより指定された時刻に復号再生す
るよう、一旦バッファに蓄積しておく必要があった。
タ多重化方法においては、画像と音声の同期をとるため
に、タイムスタンプと呼ばれる情報を付加するようにな
っていた。タイムスタンプは、アクセスユニット(1画
面)毎に、いつ復号・再生を行うかを指定する時刻管理
のタグのようなものである。そして、復号器内部の基本
となる同期信号がタイムスタンプと一致した場合に、そ
の画面のデータを復号・再生するようになっていた。そ
のため、復号器においては、伝送路から受信したデータ
を、タイムスタンプにより指定された時刻に復号再生す
るよう、一旦バッファに蓄積しておく必要があった。
【0006】例えば、図5に示した従来の多重化方法で
は、n枚分の画像データの後にn枚分の音声データが伝
送されるので、復号器に、n枚分の画像データを蓄積し
ておき、画像データと音声データのタイムスタンプを比
較して、同期を取るための処理を行っていた。
は、n枚分の画像データの後にn枚分の音声データが伝
送されるので、復号器に、n枚分の画像データを蓄積し
ておき、画像データと音声データのタイムスタンプを比
較して、同期を取るための処理を行っていた。
【0007】また、図6に示した従来の多重化方法の例
では、1枚の画像データを受信する前に音声データを受
信することがあるので、音声データを蓄積するメモリが
必要であり、タイムスタンプを比較して、同期を取るよ
うにしていた。
では、1枚の画像データを受信する前に音声データを受
信することがあるので、音声データを蓄積するメモリが
必要であり、タイムスタンプを比較して、同期を取るよ
うにしていた。
【0008】
【発明が解決しようとする課題】しかしながら、上記従
来の動画/音声符号化データ多重化方法及び動画/音声
符号化データ多重化装置では、動画と音声の同期をとる
ために、復号化装置に、画像データ及び音声データを蓄
積しておくだけの大きな容量を備えたメモリが必要であ
り、復号化装置を高価・複雑にするという問題点があっ
た。
来の動画/音声符号化データ多重化方法及び動画/音声
符号化データ多重化装置では、動画と音声の同期をとる
ために、復号化装置に、画像データ及び音声データを蓄
積しておくだけの大きな容量を備えたメモリが必要であ
り、復号化装置を高価・複雑にするという問題点があっ
た。
【0009】また、上記従来の動画/音声符号化データ
多重化方法及び動画/音声符号化データ多重化装置で
は、タイムスタンプによる同期をとるための処理が必要
であり、処理が複雑になるという問題点があった。
多重化方法及び動画/音声符号化データ多重化装置で
は、タイムスタンプによる同期をとるための処理が必要
であり、処理が複雑になるという問題点があった。
【0010】更に、図5に示した従来の動画/音声符号
化データ多重化方法及び動画/音声符号化データ多重化
装置では、n画面分の音声データが1つの音声パケット
の中に入っているので、伝送上のバースト的な誤りによ
り音声パケット1つが伝送落ちした場合に、n画面期間
に渡って音声が出ないことになり、エラーの影響を複数
の画面で受けやすいという問題点があった。
化データ多重化方法及び動画/音声符号化データ多重化
装置では、n画面分の音声データが1つの音声パケット
の中に入っているので、伝送上のバースト的な誤りによ
り音声パケット1つが伝送落ちした場合に、n画面期間
に渡って音声が出ないことになり、エラーの影響を複数
の画面で受けやすいという問題点があった。
【0011】本発明は上記実情に鑑みて為されたもの
で、復号化装置における画像及び音声データを蓄積する
メモリの容量を縮小し、画像と音声の同期をとるための
タイムスタンプによる処理を不要とし、更に、伝送エラ
ーの影響を受けにくくする動画/音声符号化データ多重
化方法及び動画/音声符号化データ多重化装置を提供す
ることを目的とする。
で、復号化装置における画像及び音声データを蓄積する
メモリの容量を縮小し、画像と音声の同期をとるための
タイムスタンプによる処理を不要とし、更に、伝送エラ
ーの影響を受けにくくする動画/音声符号化データ多重
化方法及び動画/音声符号化データ多重化装置を提供す
ることを目的とする。
【0012】
【課題を解決するための手段】上記従来例の問題点を解
決するための請求項1記載の発明は、動画と音声の符号
化データを時分割多重方式で伝送する動画/音声符号化
データ多重化方法において、パケット長に関係なく、画
像識別子が付加された1画面分の画像符号化データに続
いて音声識別子が付加された1画面分の音声符号化デー
タを格納する多重化を行い、前記格納した画像符号化デ
ータと音声符号化データとを1パケット分のデータとし
て出力することを特徴としている。
決するための請求項1記載の発明は、動画と音声の符号
化データを時分割多重方式で伝送する動画/音声符号化
データ多重化方法において、パケット長に関係なく、画
像識別子が付加された1画面分の画像符号化データに続
いて音声識別子が付加された1画面分の音声符号化デー
タを格納する多重化を行い、前記格納した画像符号化デ
ータと音声符号化データとを1パケット分のデータとし
て出力することを特徴としている。
【0013】上記従来例の問題点を解決するための請求
項2記載の発明は、動画/音声符号化データ多重化装置
において、入力画像を符号化する画像符号化部と、符号
化された画像符号化データを格納して1画面分の画像符
号化データを転送する画像バッファと、入力音声を符号
化する音声符号化部と、符号化された音声符号化データ
を格納して1画面分の音声符号化データを転送する音声
バッファと、前記画像バッファから転送された画像符号
化データを画像識別子を付加して格納し、格納された前
記画像符号化データに続いて音声バッファから転送され
た音声符号化データを音声識別子を付加して格納する多
重化を行い、前記画像符号化データと前記音声符号化デ
ータとを1パケット分のデータとして出力するマルチプ
レクサと、前記画像符号化部から1画面分の画像の符号
化終了を示す信号を受け取ると、前記マルチプレクサに
多重化開始を指示する信号を出力し、前記画像バッファ
に画像符号化データの転送開始を指示する信号を出力
し、前記音声バッファに音声符号化データの転送開始を
指示する信号を出力する制御部とを有することを特徴と
している。
項2記載の発明は、動画/音声符号化データ多重化装置
において、入力画像を符号化する画像符号化部と、符号
化された画像符号化データを格納して1画面分の画像符
号化データを転送する画像バッファと、入力音声を符号
化する音声符号化部と、符号化された音声符号化データ
を格納して1画面分の音声符号化データを転送する音声
バッファと、前記画像バッファから転送された画像符号
化データを画像識別子を付加して格納し、格納された前
記画像符号化データに続いて音声バッファから転送され
た音声符号化データを音声識別子を付加して格納する多
重化を行い、前記画像符号化データと前記音声符号化デ
ータとを1パケット分のデータとして出力するマルチプ
レクサと、前記画像符号化部から1画面分の画像の符号
化終了を示す信号を受け取ると、前記マルチプレクサに
多重化開始を指示する信号を出力し、前記画像バッファ
に画像符号化データの転送開始を指示する信号を出力
し、前記音声バッファに音声符号化データの転送開始を
指示する信号を出力する制御部とを有することを特徴と
している。
【0014】
【作用】請求項1記載の発明によれば、時分割多重方式
で動画/音声符号化データを伝送する場合に、パケット
長に関係なく、画像識別子が付加された1画面分の画像
符号化データに続いて音声識別子が付加された1画面分
の音声符号化データを多重化し、それらデータを1パケ
ット分のデータとして出力する動画/音声符号化データ
多重化方法としているので、1画面分の画像と音声を一
対にして伝送でき、画像と音声の同期を容易に取ること
ができ、伝送データにバースト的な誤りがあっても他の
画面の画像と音声に影響を与えず、信頼性を向上させる
ことができ、また、受信側の復号化装置では1画面分の
画像と音声の符号化データを一対で受信するため、復号
化装置でのメモリ容量を小さくできる。
で動画/音声符号化データを伝送する場合に、パケット
長に関係なく、画像識別子が付加された1画面分の画像
符号化データに続いて音声識別子が付加された1画面分
の音声符号化データを多重化し、それらデータを1パケ
ット分のデータとして出力する動画/音声符号化データ
多重化方法としているので、1画面分の画像と音声を一
対にして伝送でき、画像と音声の同期を容易に取ること
ができ、伝送データにバースト的な誤りがあっても他の
画面の画像と音声に影響を与えず、信頼性を向上させる
ことができ、また、受信側の復号化装置では1画面分の
画像と音声の符号化データを一対で受信するため、復号
化装置でのメモリ容量を小さくできる。
【0015】請求項2記載の発明によれば、制御部の指
示信号によりマルチプレクサが、画像バッファから1画
面分の画像符号化データを、画像識別子を付加して格納
し、続いて音声バッファから1画面分の音声符号化デー
タを、音声識別子を付加して格納するデータの多重化を
行い、それらデータを1パケット分のデータとして出力
する動画/音声符号化データ多重化装置としているの
で、1画面分の画像と音声を一対にして伝送でき、画像
と音声の同期を容易に取ることができ、伝送データにバ
ースト的な誤りがあっても他の画面の画像と音声に影響
を与えず、信頼性を向上させることができ、また、受信
側の復号化装置では1画面分の画像と音声の符号化デー
タを一対で受信するため、復号化装置でのメモリ容量を
小さくできる。
示信号によりマルチプレクサが、画像バッファから1画
面分の画像符号化データを、画像識別子を付加して格納
し、続いて音声バッファから1画面分の音声符号化デー
タを、音声識別子を付加して格納するデータの多重化を
行い、それらデータを1パケット分のデータとして出力
する動画/音声符号化データ多重化装置としているの
で、1画面分の画像と音声を一対にして伝送でき、画像
と音声の同期を容易に取ることができ、伝送データにバ
ースト的な誤りがあっても他の画面の画像と音声に影響
を与えず、信頼性を向上させることができ、また、受信
側の復号化装置では1画面分の画像と音声の符号化デー
タを一対で受信するため、復号化装置でのメモリ容量を
小さくできる。
【0016】
【実施例】本発明の一実施例について図面を参照しなが
ら説明する。本発明の一実施例に係る動画/音声符号化
データ多重化方法は、パケット長にとらわれず、ピクチ
ャ単位で画像符号化データとその画像期間内の音声符号
化データとを多重化して、受信側の復号化装置での画像
用のバッファと音声用のバッファの容量を小さくし、画
像出力と音声出力との同期を容易に取ることができ、伝
送エラーの影響を最低限に留めることができるものであ
る。
ら説明する。本発明の一実施例に係る動画/音声符号化
データ多重化方法は、パケット長にとらわれず、ピクチ
ャ単位で画像符号化データとその画像期間内の音声符号
化データとを多重化して、受信側の復号化装置での画像
用のバッファと音声用のバッファの容量を小さくし、画
像出力と音声出力との同期を容易に取ることができ、伝
送エラーの影響を最低限に留めることができるものであ
る。
【0017】まず、本発明の一実施例に係る動画/音声
符号化データ多重化方法について、図1を使って説明す
る。図1は、本発明の一実施例に係る動画/音声符号化
データ多重化方法を説明する多重化データストリームの
構成図である。本実施例の動画/音声符号化データ多重
化方法では、パケット長にとらわれず、多重化したデー
タのストリームが、図1に示すように、1枚目の画像符
号化データ(A1)の次に、1枚目の画像期間内の音声符
号化データ(B1)が続き、次に、2枚目の画像符号化デ
ータ(A2)、2枚目の画像期間内の音声符号化データ
(B2)というように、ピクチャ単位で画像符号化データ
とその画像期間内の音声符号化データとが連続するよう
に多重化するものである。
符号化データ多重化方法について、図1を使って説明す
る。図1は、本発明の一実施例に係る動画/音声符号化
データ多重化方法を説明する多重化データストリームの
構成図である。本実施例の動画/音声符号化データ多重
化方法では、パケット長にとらわれず、多重化したデー
タのストリームが、図1に示すように、1枚目の画像符
号化データ(A1)の次に、1枚目の画像期間内の音声符
号化データ(B1)が続き、次に、2枚目の画像符号化デ
ータ(A2)、2枚目の画像期間内の音声符号化データ
(B2)というように、ピクチャ単位で画像符号化データ
とその画像期間内の音声符号化データとが連続するよう
に多重化するものである。
【0018】尚、各画像符号化データの先頭には、画像
符号化データの始まりであることを示す識別子(画像識
別子)が付加され、同様に各音声符号化データの先頭に
は音声符号化データの始まりであることを示す識別子
(音声識別子)が付加される。そして、多重化されたデ
ータからそれぞれのデータを復元する際には、各符号化
データの識別子(画像識別子及び音声識別子)で各符号
化データの始まりを認識して取り出して出力するように
なっている。尚、画像識別子及び音声識別子には、何番
目の画像のデータであるかを示す画像番号のデータを含
むようにすれば、データを復元する際に頭出し等も可能
にできる。
符号化データの始まりであることを示す識別子(画像識
別子)が付加され、同様に各音声符号化データの先頭に
は音声符号化データの始まりであることを示す識別子
(音声識別子)が付加される。そして、多重化されたデ
ータからそれぞれのデータを復元する際には、各符号化
データの識別子(画像識別子及び音声識別子)で各符号
化データの始まりを認識して取り出して出力するように
なっている。尚、画像識別子及び音声識別子には、何番
目の画像のデータであるかを示す画像番号のデータを含
むようにすれば、データを復元する際に頭出し等も可能
にできる。
【0019】次に、本実施例の動画/音声符号化データ
多重化方法を実現する動画/音声符号化データ多重化装
置について、図2,図3を使って説明する。図2は、本
実施例の動画/音声符号化データ多重化装置の符号化装
置の構成ブロック図であり、図3は、本実施例の動画/
音声符号化データ多重化装置の復号化装置の構成ブロッ
ク図である。本実施例の動画/音声符号化データ多重化
装置の符号化装置は、図2に示すように、画像入力部1
0と、画像符号化部11と、画像バッファ12と、音声
入力部13と、音声符号化部14と、音声バッファ15
と、マルチプレクサ16とを具備するメディア制御部1
7と、メディア制御部17全体の動作制御を行うCPU
20とから構成されている。
多重化方法を実現する動画/音声符号化データ多重化装
置について、図2,図3を使って説明する。図2は、本
実施例の動画/音声符号化データ多重化装置の符号化装
置の構成ブロック図であり、図3は、本実施例の動画/
音声符号化データ多重化装置の復号化装置の構成ブロッ
ク図である。本実施例の動画/音声符号化データ多重化
装置の符号化装置は、図2に示すように、画像入力部1
0と、画像符号化部11と、画像バッファ12と、音声
入力部13と、音声符号化部14と、音声バッファ15
と、マルチプレクサ16とを具備するメディア制御部1
7と、メディア制御部17全体の動作制御を行うCPU
20とから構成されている。
【0020】次に、本実施例の動画/音声符号化データ
多重化装置の符号化装置の各部について具体的に説明す
る。画像入力部10は、画像入力装置等から入力された
アナログ画像データを、サンプリングして量子化するこ
とにより、ディジタル画像データに変換するA/D変換
処理を行うものである。画像符号化部11は、ディジタ
ル画像データを1画面(ピクチャ)単位で圧縮して符号
化し、画像符号化データを作成するものである。
多重化装置の符号化装置の各部について具体的に説明す
る。画像入力部10は、画像入力装置等から入力された
アナログ画像データを、サンプリングして量子化するこ
とにより、ディジタル画像データに変換するA/D変換
処理を行うものである。画像符号化部11は、ディジタ
ル画像データを1画面(ピクチャ)単位で圧縮して符号
化し、画像符号化データを作成するものである。
【0021】ここで、ディジタル画像データを符号化す
る技術は、例えば静止画像の圧縮符号化の標準ともいえ
る「JPEG(Joint Photographic Expert Group )」
方式や、通信メディア用のディジタル動画像の圧縮符号
化の国際標準である「H.261」方式や、蓄積メディ
ア用及び放送メディア用のディジタル動画像の圧縮符号
化の国際標準である「MPEG(Moving Picture Codin
g Experts Group )」方式である。
る技術は、例えば静止画像の圧縮符号化の標準ともいえ
る「JPEG(Joint Photographic Expert Group )」
方式や、通信メディア用のディジタル動画像の圧縮符号
化の国際標準である「H.261」方式や、蓄積メディ
ア用及び放送メディア用のディジタル動画像の圧縮符号
化の国際標準である「MPEG(Moving Picture Codin
g Experts Group )」方式である。
【0022】JPEG方式を例にとって、その概要を説
明すると、JPEG方式の最も基本的なアルゴリズム
は、1画面の画像を例えば8×8画素のブロックに分割
し、ブロック毎にDCT(Discrete Cosine Transfor
m)変換等の直交変換を施し、量子化し、更にエントロ
ピー符号化を行って符号化データを作成するものであ
る。(「最新MPEG教科書」 マルチメディア通信研
究会編 株式会社アスキー発行 1994年8月発行
p53〜p67参照)
明すると、JPEG方式の最も基本的なアルゴリズム
は、1画面の画像を例えば8×8画素のブロックに分割
し、ブロック毎にDCT(Discrete Cosine Transfor
m)変換等の直交変換を施し、量子化し、更にエントロ
ピー符号化を行って符号化データを作成するものであ
る。(「最新MPEG教科書」 マルチメディア通信研
究会編 株式会社アスキー発行 1994年8月発行
p53〜p67参照)
【0023】また、「H.261」方式や「MPEG」
方式の技術についても一般的に知られており、例えば、
「最新MPEG教科書」 マルチメディア通信研究会編
株式会社アスキー発行 1994年8月発行 p69
〜p67と、「情報・符号理論入門」 橋本清著 森北
出版株式会社 1984年12月発行 p72〜165
に記載されている。
方式の技術についても一般的に知られており、例えば、
「最新MPEG教科書」 マルチメディア通信研究会編
株式会社アスキー発行 1994年8月発行 p69
〜p67と、「情報・符号理論入門」 橋本清著 森北
出版株式会社 1984年12月発行 p72〜165
に記載されている。
【0024】更に、前述のDCT変換よりも局在する位
置情報を効率良く圧縮することができるウェーブレット
変換を用いた符号化や、画像の構造的特徴を抽出して符
号化するフラクタル符号化といった新しい変換符号化技
術が画像符号化部11に使われても良いことは言うまで
もない。つまり、一般的に画像を1画面単位で圧縮でき
るか、もしくは1画面の区切りが認識できるような画像
圧縮(符号化)方法であれば、いかなる方法が画像符号
化部11で使われても構わない。
置情報を効率良く圧縮することができるウェーブレット
変換を用いた符号化や、画像の構造的特徴を抽出して符
号化するフラクタル符号化といった新しい変換符号化技
術が画像符号化部11に使われても良いことは言うまで
もない。つまり、一般的に画像を1画面単位で圧縮でき
るか、もしくは1画面の区切りが認識できるような画像
圧縮(符号化)方法であれば、いかなる方法が画像符号
化部11で使われても構わない。
【0025】画像バッファ12は、画像符号化部11で
作成された1画面分の画像符号化データを記憶するバッ
ファである。
作成された1画面分の画像符号化データを記憶するバッ
ファである。
【0026】音声入力部13は、音声入力装置等から入
力されたアナログ音声信号を、サンプリングして量子化
することにより、ディジタル音声データに変換するA/
D変換処理を行うものである。
力されたアナログ音声信号を、サンプリングして量子化
することにより、ディジタル音声データに変換するA/
D変換処理を行うものである。
【0027】音声符号化部14は、ディジタル音声デー
タを圧縮して符号化し、音声符号化データを作成するも
のである。尚、本実施例の音声符号化部14は、1画面
期間内の音声データを認識して圧縮するようにしてい
る。
タを圧縮して符号化し、音声符号化データを作成するも
のである。尚、本実施例の音声符号化部14は、1画面
期間内の音声データを認識して圧縮するようにしてい
る。
【0028】ここで、ディジタル音声データを符号化す
る技術は、例えば、前の信号と入力信号との差分(増減
分)を取り、これを量子化するDPCM(Differential
Pulse Code Modulation:差分パルス符号変調)や、音
声信号が近接したサンプリング値間の相関が強いことを
利用して、入力信号と予測との差分(増減分)を取り、
これを量子化する適応差分パルス符号変調(Adaptive D
ifferential Pulse Code Modulation :ADPCM)
や、また更に音声品質を改善するためにベクトル量子化
を基本とするCELP(Code Excited Linear Predicti
on:符号励振型線形予測)等の圧縮符号化技術が一般に
知られている。(「最新MPEG教科書」マルチメディ
ア通信研究会編 株式会社アスキー発行 1994年8
月発行p195〜p204参照) そして、音声符号化部14に使われる符号化技術は、デ
ィジタル音声データを圧縮符号化する方法であれば、い
かなる方法であっても構わない。
る技術は、例えば、前の信号と入力信号との差分(増減
分)を取り、これを量子化するDPCM(Differential
Pulse Code Modulation:差分パルス符号変調)や、音
声信号が近接したサンプリング値間の相関が強いことを
利用して、入力信号と予測との差分(増減分)を取り、
これを量子化する適応差分パルス符号変調(Adaptive D
ifferential Pulse Code Modulation :ADPCM)
や、また更に音声品質を改善するためにベクトル量子化
を基本とするCELP(Code Excited Linear Predicti
on:符号励振型線形予測)等の圧縮符号化技術が一般に
知られている。(「最新MPEG教科書」マルチメディ
ア通信研究会編 株式会社アスキー発行 1994年8
月発行p195〜p204参照) そして、音声符号化部14に使われる符号化技術は、デ
ィジタル音声データを圧縮符号化する方法であれば、い
かなる方法であっても構わない。
【0029】音声バッファ15は、音声符号化部14で
作成された1画面期間内の音声符号化データを記憶する
バッファである。
作成された1画面期間内の音声符号化データを記憶する
バッファである。
【0030】マルチプレクサ16は、画像符号化データ
と音声符号化データとを1画面単位で多重化し、更に通
信制御装置の仕様に対応したパケット長でパケット化し
た多重化データを通信制御装置に出力する機能を有する
マルチプレクサである。CPU20は、メディア制御部
17全体を制御するもので、具体的な制御方法について
は、後述する。
と音声符号化データとを1画面単位で多重化し、更に通
信制御装置の仕様に対応したパケット長でパケット化し
た多重化データを通信制御装置に出力する機能を有する
マルチプレクサである。CPU20は、メディア制御部
17全体を制御するもので、具体的な制御方法について
は、後述する。
【0031】次に、本実施例の動画/音声符号化データ
多重化装置の符号化装置の動作の概略について、図2を
使って説明する。本実施例の動画/音声符号化データ多
重化装置の符号化装置では、画像入力部10が、画像入
力装置等から入力されたアナログ画像データをディジタ
ル画像データに変換して画像符号化部11に出力し、画
像符号化部11が入力されたディジタル画像データを1
画面(ピクチャ)単位で圧縮符号化して画像符号化デー
タを作成して画像バッファ12に記憶させる。
多重化装置の符号化装置の動作の概略について、図2を
使って説明する。本実施例の動画/音声符号化データ多
重化装置の符号化装置では、画像入力部10が、画像入
力装置等から入力されたアナログ画像データをディジタ
ル画像データに変換して画像符号化部11に出力し、画
像符号化部11が入力されたディジタル画像データを1
画面(ピクチャ)単位で圧縮符号化して画像符号化デー
タを作成して画像バッファ12に記憶させる。
【0032】一方、音声入力部13が、音声入力装置等
から入力されたアナログ音声信号をディジタル音声デー
タに変換して音声符号化部14に出力し、音声符号化部
14が、入力されたディジタル音声データを圧縮符号化
して音声符号化データを作成し、音声バッファ15に記
憶させる。
から入力されたアナログ音声信号をディジタル音声デー
タに変換して音声符号化部14に出力し、音声符号化部
14が、入力されたディジタル音声データを圧縮符号化
して音声符号化データを作成し、音声バッファ15に記
憶させる。
【0033】そして、CPU20からの制御に従ってマ
ルチプレクサ16が画像バッファ12から1画面分の画
像符号化データを受け取り、その際に画像符号化データ
の前に画像符号化データの始まりを示す識別子(画像識
別子)を付加する。そして、続いて音声バッファ15か
ら1画面期間分の音声符号化データを受け取り、その際
に音声符号化データの前に音声符号化データの始まりを
示す識別子(音声識別子)を付加する。そして、通信制
御装置の仕様に対応するパケット長でパケット化して通
信制御装置に出力する。尚、多重化制御の詳細について
は後述する。
ルチプレクサ16が画像バッファ12から1画面分の画
像符号化データを受け取り、その際に画像符号化データ
の前に画像符号化データの始まりを示す識別子(画像識
別子)を付加する。そして、続いて音声バッファ15か
ら1画面期間分の音声符号化データを受け取り、その際
に音声符号化データの前に音声符号化データの始まりを
示す識別子(音声識別子)を付加する。そして、通信制
御装置の仕様に対応するパケット長でパケット化して通
信制御装置に出力する。尚、多重化制御の詳細について
は後述する。
【0034】また、本実施例では多重化されたデータを
通信メディアに出力する場合で説明するが、蓄積メディ
アに出力する場合は、パケット化せずに多重化データを
そのまま蓄積メディアに蓄積すればよい。
通信メディアに出力する場合で説明するが、蓄積メディ
アに出力する場合は、パケット化せずに多重化データを
そのまま蓄積メディアに蓄積すればよい。
【0035】次に、本実施例の動画/音声符号化データ
多重化装置の復号化装置について図3を使って説明す
る。図3は、本実施例の動画/音声符号化データ多重化
装置の復号化装置の構成ブロック図である。本実施例の
動画/音声符号化データ多重化装置の符号化装置は、図
3に示すように、デマルチプレクサ30と、画像バッフ
ァ31と、画像復号化部32と、画像出力部33と、音
声バッファ34と、音声復号化部35と、音声出力部3
6とを具備するメディア制御部37と、メディア制御部
37全体の動作制御を行うCPU40とから構成されて
いる。
多重化装置の復号化装置について図3を使って説明す
る。図3は、本実施例の動画/音声符号化データ多重化
装置の復号化装置の構成ブロック図である。本実施例の
動画/音声符号化データ多重化装置の符号化装置は、図
3に示すように、デマルチプレクサ30と、画像バッフ
ァ31と、画像復号化部32と、画像出力部33と、音
声バッファ34と、音声復号化部35と、音声出力部3
6とを具備するメディア制御部37と、メディア制御部
37全体の動作制御を行うCPU40とから構成されて
いる。
【0036】次に、本実施例の動画/音声符号化データ
多重化装置の復号化装置の各部について具体的に説明す
る。デマルチプレクサ30は、通信制御装置から受け取
ったパケット化された多重化データを画像符号化データ
と音声符号化データとに分離してそれぞれを画像バッフ
ァ31と音声バッファ34とに出力するものである。こ
こで、画像符号化データと音声符号化データとの識別
は、各符号化データの先頭に付加された識別子(画像識
別子,音声識別子)を検出することによって行うもので
ある。
多重化装置の復号化装置の各部について具体的に説明す
る。デマルチプレクサ30は、通信制御装置から受け取
ったパケット化された多重化データを画像符号化データ
と音声符号化データとに分離してそれぞれを画像バッフ
ァ31と音声バッファ34とに出力するものである。こ
こで、画像符号化データと音声符号化データとの識別
は、各符号化データの先頭に付加された識別子(画像識
別子,音声識別子)を検出することによって行うもので
ある。
【0037】画像バッファ31は、多重化データから分
離された1画面分の画像符号化データを記憶するバッフ
ァである。画像復号化部32は、1画面単位で画像符号
化データを復号化して1画面分のディジタル画像データ
を作成するものである。尚、画像復号化部32における
復号化方法は、符号化装置の画像符号化部11で行われ
る符号化の逆処理を行う復号化方法でなければならな
い。画像出力部33は、画像復号化部32から出力され
るディジタル画像データをそのまま、又はアナログ画像
データに変換して表示装置等に出力するものである。
離された1画面分の画像符号化データを記憶するバッフ
ァである。画像復号化部32は、1画面単位で画像符号
化データを復号化して1画面分のディジタル画像データ
を作成するものである。尚、画像復号化部32における
復号化方法は、符号化装置の画像符号化部11で行われ
る符号化の逆処理を行う復号化方法でなければならな
い。画像出力部33は、画像復号化部32から出力され
るディジタル画像データをそのまま、又はアナログ画像
データに変換して表示装置等に出力するものである。
【0038】音声バッファ34は、多重化データから分
離された1画面期間内の音声符号化データを記憶するバ
ッファである。音声復号化部35は、音声符号化データ
を復号化してディジタル音声データを作成するものであ
る。尚、音声復号化部35における復号化方法は、符号
化装置の音声符号化部14で行われる符号化の逆処理を
行う復号化方法でなければならない。音声出力部36
は、音声復号化部35から出力されるディジタル音声デ
ータをアナログ音声信号に変換してスピーカー等の発音
装置に出力するものである。CPU40は、メディア制
御部37全体を制御するものである。
離された1画面期間内の音声符号化データを記憶するバ
ッファである。音声復号化部35は、音声符号化データ
を復号化してディジタル音声データを作成するものであ
る。尚、音声復号化部35における復号化方法は、符号
化装置の音声符号化部14で行われる符号化の逆処理を
行う復号化方法でなければならない。音声出力部36
は、音声復号化部35から出力されるディジタル音声デ
ータをアナログ音声信号に変換してスピーカー等の発音
装置に出力するものである。CPU40は、メディア制
御部37全体を制御するものである。
【0039】次に、本実施例の動画/音声符号化データ
多重化装置の復号化装置の動作の概略について、図3を
使って説明する。本実施例の動画/音声符号化データ多
重化装置の復号化装置では、デマルチプレクサ30が、
通信制御装置から受け取った多重化データを画像符号化
データと音声符号化データとに分離してそれぞれを画像
バッファ31と音声バッファ34とに出力する。尚、画
像符号化データと音声符号化データとに分離する方法
は、各符号化データの先頭に付加されている識別子を検
出することによって行われる。
多重化装置の復号化装置の動作の概略について、図3を
使って説明する。本実施例の動画/音声符号化データ多
重化装置の復号化装置では、デマルチプレクサ30が、
通信制御装置から受け取った多重化データを画像符号化
データと音声符号化データとに分離してそれぞれを画像
バッファ31と音声バッファ34とに出力する。尚、画
像符号化データと音声符号化データとに分離する方法
は、各符号化データの先頭に付加されている識別子を検
出することによって行われる。
【0040】そして、画像復号化部32が随時画像バッ
ファ31から画像符号化データを取り込んで復号化して
画面単位のディジタル画像データを作成して画像出力部
33に出力し、画像出力部33が入力されたディジタル
画像データをそのまま、又はアナログ画像データに変換
して表示装置等に出力して表示させるようになってい
る。一方、音声復号化部35でも、随時音声バッファ3
4から音声符号化データを取り込んで復号化してディジ
タル音声データを作成して音声出力部36に出力し、音
声出力部36が入力されたディジタル音声データをアナ
ログ音声信号に変換してスピーカ等に出力して発音させ
るようになっている。
ファ31から画像符号化データを取り込んで復号化して
画面単位のディジタル画像データを作成して画像出力部
33に出力し、画像出力部33が入力されたディジタル
画像データをそのまま、又はアナログ画像データに変換
して表示装置等に出力して表示させるようになってい
る。一方、音声復号化部35でも、随時音声バッファ3
4から音声符号化データを取り込んで復号化してディジ
タル音声データを作成して音声出力部36に出力し、音
声出力部36が入力されたディジタル音声データをアナ
ログ音声信号に変換してスピーカ等に出力して発音させ
るようになっている。
【0041】次に、本実施例の動画/音声符号化データ
多重化装置の符号化装置における多重化制御方法につい
て、図4を用いて説明する。図4は、本実施例の動画/
音声符号化データ多重化装置の符号化装置における多重
化制御方法を説明する概念図である。本実施例の動画/
音声符号化データ多重化装置の符号化装置における多重
化制御方法は、画像符号化部11が、画像入力部10か
ら受け取ったディジタル画像データを画面単位で符号化
して画像バッファ12に画像符号化データを格納し終わ
ると、画像データ符号化終了信号(a)をCPU20に
出力し、CPU20は、この画像データ符号化終了信号
(a)を受け取ると、マルチプレクサ16に多重化開始
信号(b)を出力する。
多重化装置の符号化装置における多重化制御方法につい
て、図4を用いて説明する。図4は、本実施例の動画/
音声符号化データ多重化装置の符号化装置における多重
化制御方法を説明する概念図である。本実施例の動画/
音声符号化データ多重化装置の符号化装置における多重
化制御方法は、画像符号化部11が、画像入力部10か
ら受け取ったディジタル画像データを画面単位で符号化
して画像バッファ12に画像符号化データを格納し終わ
ると、画像データ符号化終了信号(a)をCPU20に
出力し、CPU20は、この画像データ符号化終了信号
(a)を受け取ると、マルチプレクサ16に多重化開始
信号(b)を出力する。
【0042】マルチプレクサ16内には、DMA(Dire
ct Memory Access)が可能なローカルメモリ18と、F
IFO(First In First Out)のメモリであるFIFO
メモリ19とが設けられている。そして、マルチプレク
サ16がCPU20から多重化開始信号(b)を受け取
ると、ローカルメモリ18に画像識別子を格納し、更に
ローカルメモリ18が画像バッファ12又は音声バッフ
ァ15から転送されるデータを受け取れるように設定す
る。
ct Memory Access)が可能なローカルメモリ18と、F
IFO(First In First Out)のメモリであるFIFO
メモリ19とが設けられている。そして、マルチプレク
サ16がCPU20から多重化開始信号(b)を受け取
ると、ローカルメモリ18に画像識別子を格納し、更に
ローカルメモリ18が画像バッファ12又は音声バッフ
ァ15から転送されるデータを受け取れるように設定す
る。
【0043】次に、CPU20は、画像バッファ12に
対して記憶している1画面分の画像符号化データをロー
カルメモリ18に転送する指示(引き出し信号(c))
を出力する。画像バッファ12は、CPU20から引き
出し信号(c)を受け取ると、記憶している1画面分の
画像符号化データをローカルメモリ18に転送する。そ
して、マルチプレクサ16は、画像バッファ12からの
画像符号化データ転送が終了すると、ローカルメモリ1
8に音声識別子を格納する。
対して記憶している1画面分の画像符号化データをロー
カルメモリ18に転送する指示(引き出し信号(c))
を出力する。画像バッファ12は、CPU20から引き
出し信号(c)を受け取ると、記憶している1画面分の
画像符号化データをローカルメモリ18に転送する。そ
して、マルチプレクサ16は、画像バッファ12からの
画像符号化データ転送が終了すると、ローカルメモリ1
8に音声識別子を格納する。
【0044】次に、CPU20は、画像バッファ12の
データ転送に充分な時間をおいて、音声バッファ15に
対して記憶している1画面期間内の音声符号化データを
ローカルメモリ18に転送する指示(引き出し信号
(d))を出力する。音声バッファ15は、CPU20
から引き出し信号(d)を受け取ると、記憶している1
画面期間内の音声符号化データをローカルメモリ18に
転送する。尚、ローカルメモリ18では、画像バッファ
12から転送される画像符号化データに続いて音声バッ
ファ15から転送される音声符号化データを書き込むこ
とができるように、ポインタを設けて書込アドレスを制
御している。
データ転送に充分な時間をおいて、音声バッファ15に
対して記憶している1画面期間内の音声符号化データを
ローカルメモリ18に転送する指示(引き出し信号
(d))を出力する。音声バッファ15は、CPU20
から引き出し信号(d)を受け取ると、記憶している1
画面期間内の音声符号化データをローカルメモリ18に
転送する。尚、ローカルメモリ18では、画像バッファ
12から転送される画像符号化データに続いて音声バッ
ファ15から転送される音声符号化データを書き込むこ
とができるように、ポインタを設けて書込アドレスを制
御している。
【0045】そして、ローカルメモリ18はFIFOメ
モリ19に接続されており、マルチプレクサ16は、音
声バッファ15からの音声符号化データの転送が終了す
ると、1パケット分の画像符号化データと音声符号化デ
ータをローカルメモリ18からFIFOメモリ19に出
力し、FIFOメモリ19から通信制御装置に出力され
るようになっている。
モリ19に接続されており、マルチプレクサ16は、音
声バッファ15からの音声符号化データの転送が終了す
ると、1パケット分の画像符号化データと音声符号化デ
ータをローカルメモリ18からFIFOメモリ19に出
力し、FIFOメモリ19から通信制御装置に出力され
るようになっている。
【0046】尚、1画面分の画像符号化データのデータ
量が多すぎて、1画面分の画像符号化データと音声符号
化データが1パケット分に収まらない時には、1パケッ
ト分のデータをFIFOメモリ19に出力し、残りのデ
ータはローカルメモリ18に残すようにし、次の1パケ
ット分の出力でその残ったデータを出力するようにして
いる。この場合、次の1画面分の画像符号化データがロ
ーカルメモリ18に書き込まれる位置は、残りのデータ
の次のアドレス位置からとなるようマルチプレクサ16
で制御させるものである。
量が多すぎて、1画面分の画像符号化データと音声符号
化データが1パケット分に収まらない時には、1パケッ
ト分のデータをFIFOメモリ19に出力し、残りのデ
ータはローカルメモリ18に残すようにし、次の1パケ
ット分の出力でその残ったデータを出力するようにして
いる。この場合、次の1画面分の画像符号化データがロ
ーカルメモリ18に書き込まれる位置は、残りのデータ
の次のアドレス位置からとなるようマルチプレクサ16
で制御させるものである。
【0047】そして、本実施例の動画/音声符号化デー
タ多重化装置の復号化装置側では、デマルチプレクサ3
0が通信制御装置から多重化データを受け取ると、多重
化データの中の画像識別子を検出すると、それに続く画
像符号化データを画像バッファ31に出力し、多重化デ
ータの中の音声識別子を検出すると、それに続く音声符
号化データを音声バッファ34に出力して、それぞれを
復号化して出力するようになっている。
タ多重化装置の復号化装置側では、デマルチプレクサ3
0が通信制御装置から多重化データを受け取ると、多重
化データの中の画像識別子を検出すると、それに続く画
像符号化データを画像バッファ31に出力し、多重化デ
ータの中の音声識別子を検出すると、それに続く音声符
号化データを音声バッファ34に出力して、それぞれを
復号化して出力するようになっている。
【0048】本実施例の動画/音声符号化データ多重化
装置によれば、1画面分の画像符号化データに続いてそ
の画面期間内の音声符号化データを多重化するので、符
号化装置及び復号化装置における画像バッファ12,3
1と音声バッファ15,34がそれぞれ1画面分及び1
画面期間分の容量で充分であり、各装置においてバッフ
ァ容量を少なくすることができる効果がある。
装置によれば、1画面分の画像符号化データに続いてそ
の画面期間内の音声符号化データを多重化するので、符
号化装置及び復号化装置における画像バッファ12,3
1と音声バッファ15,34がそれぞれ1画面分及び1
画面期間分の容量で充分であり、各装置においてバッフ
ァ容量を少なくすることができる効果がある。
【0049】また、1画面分の画像符号化データに続い
てその画面期間内の音声符号化データを多重化するの
で、復号化装置において復号化してそれぞれのデータを
出力する際に、同期を取る必要がなく、タイムスタンプ
等を使った複雑な同期制御をなくして復号化処理を簡略
化することができる効果がある。
てその画面期間内の音声符号化データを多重化するの
で、復号化装置において復号化してそれぞれのデータを
出力する際に、同期を取る必要がなく、タイムスタンプ
等を使った複雑な同期制御をなくして復号化処理を簡略
化することができる効果がある。
【0050】また、本実施例の動画/音声符号化データ
多重化方法によれば、音声符号化データだけでパケット
を構成しないので、音声データにおけるバースト的な誤
りが発生しにくく、転送誤り等の影響を小さくすること
ができる効果がある。
多重化方法によれば、音声符号化データだけでパケット
を構成しないので、音声データにおけるバースト的な誤
りが発生しにくく、転送誤り等の影響を小さくすること
ができる効果がある。
【0051】また、本実施例の動画/音声符号化データ
多重化方法によれば、1画面分の画像符号化データに続
いてその画面期間内の音声符号化データを多重化するの
で、例えば、多重化データを蓄積メディア等に格納した
場合、再生段階で、早送りや巻き戻しといった操作を行
っても、画像と1対1に対応する音声が取得できる効果
がある。
多重化方法によれば、1画面分の画像符号化データに続
いてその画面期間内の音声符号化データを多重化するの
で、例えば、多重化データを蓄積メディア等に格納した
場合、再生段階で、早送りや巻き戻しといった操作を行
っても、画像と1対1に対応する音声が取得できる効果
がある。
【0052】
【発明の効果】請求項1記載の発明によれば、時分割多
重方式で動画/音声符号化データを伝送する場合に、パ
ケット長に関係なく、画像識別子が付加された1画面分
の画像符号化データに続いて音声識別子が付加された1
画面分の音声符号化データを多重化し、それらデータを
1パケット分のデータとして出力する動画/音声符号化
データ多重化方法としているので、1画面分の画像と音
声を一対にして伝送でき、画像と音声の同期を容易に取
ることができる効果があり、伝送データにバースト的な
誤りがあっても他の画面の画像と音声に影響を与えず、
信頼性を向上させることができる効果があり、また、受
信側の復号化装置では1画面分の画像と音声の符号化デ
ータを一対で受信するため、復号化装置でのメモリ容量
を小さくできる効果がある。
重方式で動画/音声符号化データを伝送する場合に、パ
ケット長に関係なく、画像識別子が付加された1画面分
の画像符号化データに続いて音声識別子が付加された1
画面分の音声符号化データを多重化し、それらデータを
1パケット分のデータとして出力する動画/音声符号化
データ多重化方法としているので、1画面分の画像と音
声を一対にして伝送でき、画像と音声の同期を容易に取
ることができる効果があり、伝送データにバースト的な
誤りがあっても他の画面の画像と音声に影響を与えず、
信頼性を向上させることができる効果があり、また、受
信側の復号化装置では1画面分の画像と音声の符号化デ
ータを一対で受信するため、復号化装置でのメモリ容量
を小さくできる効果がある。
【0053】請求項2記載の発明によれば、制御部の指
示信号によりマルチプレクサが、画像バッファから1画
面分の画像符号化データを、画像識別子を付加して格納
し、続いて音声バッファから1画面分の音声符号化デー
タを、音声識別子を付加して格納するデータの多重化を
行い、それらデータを1パケット分のデータとして出力
する動画/音声符号化データ多重化装置としているの
で、1画面分の画像と音声を一対にして伝送でき、画像
と音声の同期を容易に取ることができる効果があり、伝
送データにバースト的な誤りがあっても他の画面の画像
と音声に影響を与えず、信頼性を向上させることができ
る効果があり、また、受信側の復号化装置では1画面分
の画像と音声の符号化データを一対で受信するため、復
号化装置でのメモリ容量を小さくできる効果がある。
示信号によりマルチプレクサが、画像バッファから1画
面分の画像符号化データを、画像識別子を付加して格納
し、続いて音声バッファから1画面分の音声符号化デー
タを、音声識別子を付加して格納するデータの多重化を
行い、それらデータを1パケット分のデータとして出力
する動画/音声符号化データ多重化装置としているの
で、1画面分の画像と音声を一対にして伝送でき、画像
と音声の同期を容易に取ることができる効果があり、伝
送データにバースト的な誤りがあっても他の画面の画像
と音声に影響を与えず、信頼性を向上させることができ
る効果があり、また、受信側の復号化装置では1画面分
の画像と音声の符号化データを一対で受信するため、復
号化装置でのメモリ容量を小さくできる効果がある。
【図1】本発明の一実施例に係る動画/音声符号化デー
タ多重化方法を説明する多重化データストリームの構成
図である。
タ多重化方法を説明する多重化データストリームの構成
図である。
【図2】本実施例の動画/音声符号化データ多重化装置
の符号化装置の構成ブロック図である。
の符号化装置の構成ブロック図である。
【図3】本実施例の動画/音声符号化データ多重化装置
の復号化装置の構成ブロック図である。
の復号化装置の構成ブロック図である。
【図4】本実施例の動画/音声符号化データ多重化装置
の符号化装置における多重化制御方法を説明する概念図
である。
の符号化装置における多重化制御方法を説明する概念図
である。
【図5】従来の動画/音声符号化データ多重化方法を示
す模式説明図である。
す模式説明図である。
【図6】別の従来の動画/音声符号化データ多重化方法
を示す模式説明図である。
を示す模式説明図である。
10…画像入力部、 11…画像符号化部、 12…画
像バッファ、 13…音声入力部、 14…音声符号化
部、 15…音声バッファ、 16…マルチプレクサ、
17…メディア制御部、 18…ローカルメモリ、
19…FIFOメモリ、 20…CPU、 30…デマ
ルチプレクサ、 31…画像バッファ、32…画像復号
化部、 33…画像出力部、 34…音声バッファ、
35…音声復号化部、 36…音声出力部、 37…メ
ディア制御部、 40…CPU
像バッファ、 13…音声入力部、 14…音声符号化
部、 15…音声バッファ、 16…マルチプレクサ、
17…メディア制御部、 18…ローカルメモリ、
19…FIFOメモリ、 20…CPU、 30…デマ
ルチプレクサ、 31…画像バッファ、32…画像復号
化部、 33…画像出力部、 34…音声バッファ、
35…音声復号化部、 36…音声出力部、 37…メ
ディア制御部、 40…CPU
フロントページの続き (51)Int.Cl.6 識別記号 庁内整理番号 FI 技術表示箇所 H04J 3/17 Z 3/22 H04N 7/24
Claims (2)
- 【請求項1】 動画と音声の符号化データを時分割多重
方式で伝送する動画/音声符号化データ多重化方法にお
いて、パケット長に関係なく、画像識別子が付加された
1画面分の画像符号化データに続いて音声識別子が付加
された1画面分の音声符号化データを格納する多重化を
行い、前記格納した画像符号化データと音声符号化デー
タとを1パケット分のデータとして出力することを特徴
とする動画/音声符号化データ多重化方法。 - 【請求項2】 入力画像を符号化する画像符号化部と、
符号化された画像符号化データを格納して1画面分の画
像符号化データを転送する画像バッファと、入力音声を
符号化する音声符号化部と、符号化された音声符号化デ
ータを格納して1画面分の音声符号化データを転送する
音声バッファと、前記画像バッファから転送された画像
符号化データを画像識別子を付加して格納し、格納され
た前記画像符号化データに続いて音声バッファから転送
された音声符号化データを音声識別子を付加して格納す
る多重化を行い、前記画像符号化データと前記音声符号
化データとを1パケット分のデータとして出力するマル
チプレクサと、前記画像符号化部から1画面分の画像の
符号化終了を示す信号を受け取ると、前記マルチプレク
サに多重化開始を指示する信号を出力し、前記画像バッ
ファに画像符号化データの転送開始を指示する信号を出
力し、前記音声バッファに音声符号化データの転送開始
を指示する信号を出力する制御部とを有することを特徴
とする動画/音声符号化データ多重化装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP1838395A JPH08191434A (ja) | 1995-01-11 | 1995-01-11 | 動画/音声符号化データ多重化方法及び動画/音声符号化データ多重化装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP1838395A JPH08191434A (ja) | 1995-01-11 | 1995-01-11 | 動画/音声符号化データ多重化方法及び動画/音声符号化データ多重化装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JPH08191434A true JPH08191434A (ja) | 1996-07-23 |
Family
ID=11970199
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP1838395A Pending JPH08191434A (ja) | 1995-01-11 | 1995-01-11 | 動画/音声符号化データ多重化方法及び動画/音声符号化データ多重化装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JPH08191434A (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10320914A (ja) * | 1997-05-15 | 1998-12-04 | Sanyo Electric Co Ltd | 符号記録装置、符号多重方法 |
JPH11341066A (ja) * | 1998-03-30 | 1999-12-10 | Internatl Business Mach Corp <Ibm> | デ―タ・ストリ―ムの正しい同期点を見つける方法、デ―タ処理システム及びマルチメディア・アダプタ |
GB2386022A (en) * | 2002-01-31 | 2003-09-03 | Nec Corp | Time division multiplexing of video and audio frames |
JP2004519965A (ja) * | 2001-04-05 | 2004-07-02 | アルカテル | 通信端末宛のマルチメディアファイル生成装置および関連するマルチメディアファイル |
WO2009098744A1 (ja) * | 2008-02-04 | 2009-08-13 | Panasonic Corporation | ストリームデータの多重化装置および多重化方法 |
-
1995
- 1995-01-11 JP JP1838395A patent/JPH08191434A/ja active Pending
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10320914A (ja) * | 1997-05-15 | 1998-12-04 | Sanyo Electric Co Ltd | 符号記録装置、符号多重方法 |
JPH11341066A (ja) * | 1998-03-30 | 1999-12-10 | Internatl Business Mach Corp <Ibm> | デ―タ・ストリ―ムの正しい同期点を見つける方法、デ―タ処理システム及びマルチメディア・アダプタ |
JP2004519965A (ja) * | 2001-04-05 | 2004-07-02 | アルカテル | 通信端末宛のマルチメディアファイル生成装置および関連するマルチメディアファイル |
JP2010035208A (ja) * | 2001-04-05 | 2010-02-12 | Alcatel-Lucent | 通信端末宛のマルチメディアファイル生成装置および関連するマルチメディアファイル |
GB2386022A (en) * | 2002-01-31 | 2003-09-03 | Nec Corp | Time division multiplexing of video and audio frames |
GB2386022B (en) * | 2002-01-31 | 2006-01-25 | Nec Corp | Method, apparatus, and system for transmitting moving image data |
WO2009098744A1 (ja) * | 2008-02-04 | 2009-08-13 | Panasonic Corporation | ストリームデータの多重化装置および多重化方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP0634870B1 (en) | Synchronizing method for time division multiplexed video and audio signals | |
EP0460751B1 (en) | Method of transmitting audio and/or video signals | |
JP3330797B2 (ja) | 動画像データ格納方式および動画像データ復号方式 | |
US5572333A (en) | Compressed data recording method using integral logical block size and physical block size ratios | |
US5974223A (en) | Method of and apparatus for data recording, method of and apparatus for data reproduction, recording medium, and method of and apparatus for data transmission | |
JP3809220B2 (ja) | 伝送システム及び伝送方法 | |
JPH0686261A (ja) | 多重チャネル画像圧縮システム用の統計的マルチプレクサ | |
JPH10257502A (ja) | 階層画像符号化方法、階層画像多重化方法、階層画像復号方法及び装置 | |
WO2006137425A1 (ja) | オーディオ符号化装置、オーディオ復号化装置およびオーディオ符号化情報伝送装置 | |
US6754239B2 (en) | Multiplexing apparatus and method, transmitting apparatus and method, and recording medium | |
JPH11340938A (ja) | データ多重化装置及び方法 | |
US5333137A (en) | Coding system having data controlling mechanism activated when error is detected | |
US6185229B1 (en) | Data multiplexing apparatus and method thereof | |
KR20010015304A (ko) | 데이터 재생 전송 장치 및 데이터 재생 전송 방법 | |
JPH11317768A (ja) | 伝送システム、送信装置、記録再生装置、および記録装置 | |
JPH09331524A (ja) | ディジタル信号符号化方法、編集方法、及び伝送方法 | |
JPH08191434A (ja) | 動画/音声符号化データ多重化方法及び動画/音声符号化データ多重化装置 | |
KR100218523B1 (ko) | 엠펙 비디오 복호기 | |
JPH0746198A (ja) | 復号方法と復号装置 | |
JPH10276407A (ja) | ビデオ情報提供管理方法およびシステム | |
US6970514B1 (en) | Signal processing device, signal processing method, decoding device, decoding method and recording medium | |
JPH1013809A (ja) | Vodシステム及びvod端末装置 | |
JPH10174065A (ja) | 画像音声多重化データ編集方法およびその装置 | |
JP2000069081A (ja) | データ多重化方法および装置とその関連方法および装置 | |
JP2003143096A (ja) | データ伝送方法及びデータ伝送装置並びにデータ受信方法及びデータ受信装置 |