JP2001127726A - 信号処理装置及び方法並びに記録媒体 - Google Patents

信号処理装置及び方法並びに記録媒体

Info

Publication number
JP2001127726A
JP2001127726A JP30986499A JP30986499A JP2001127726A JP 2001127726 A JP2001127726 A JP 2001127726A JP 30986499 A JP30986499 A JP 30986499A JP 30986499 A JP30986499 A JP 30986499A JP 2001127726 A JP2001127726 A JP 2001127726A
Authority
JP
Japan
Prior art keywords
bit stream
multiplexing
use area
user use
signal processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP30986499A
Other languages
English (en)
Inventor
Takefumi Nagumo
武文 名雲
Yoichi Yagasaki
陽一 矢ケ崎
Kuniaki Takahashi
邦明 高橋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP30986499A priority Critical patent/JP2001127726A/ja
Priority to US09/699,209 priority patent/US6970514B1/en
Publication of JP2001127726A publication Critical patent/JP2001127726A/ja
Withdrawn legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365—Multiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4347—Demultiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Time-Division Multiplex Systems (AREA)
  • Television Systems (AREA)

Abstract

(57)【要約】 【課題】 簡易な構成により複数のビットストリームを
多重化する。 【解決手段】 第２のビットストリームをアクセスユニ
ットに分割する分割部１１と、分割部１１にて分割され
たビットストリームにスタートコード及びマーカービッ
トを付加する付加部１２と、第１のビットストリームの
ユーザ使用領域に付加部１２からの分割されたビットス
トリームを組み込む多重化部１３とを有する。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、複数のビットスト
リームを多重化する信号処理装置及び方法、並びに複数
のビットストリームを多重化するプログラムが記録され
てなる記録媒体に関する。
【０００２】
【従来の技術】例えば、テレビ会議システム、テレビ電
話システムなどのように、動画像信号を遠隔地に伝送す
るシステムにおいては、伝送路を効率良く利用するた
め、映像信号のライン相関やフレーム間相関を利用し
て、画像信号を圧縮符号化するようになされている。動
画像の高能率符号化方式の代表的なものとしてＭＰＥＧ
（Moving Picture Experts Group）（蓄積用動画像符号
化）方式がある。これはISO‐IEC/JTC1/SC2/WG11にて議
論され、標準とされたものであり、動き補償予測符号化
と離散コサイン変換（Discrete Cosine Transformatio
n; DCT ）符号化を組み合わせたハイブリッド方式が採
用されている。
【０００３】このような符号化方式を用いて、図６に示
すように、第１のビデオカメラ１０１及び第２のビデオ
カメラ１０２を用いて、画像の撮影及び符号化を行った
とする。
【０００４】さらに、第１のビデオカメラ１０１から出
力された第１のビットストリームＢＳ1 及び第２のビデ
オカメラ１０２から出力された第２のビットストリーム
ＢＳ2 を、撮影したフレーム単位等により同期させるこ
とにより、多重化部１０３にて一本の多重化されたビッ
トストリームＢＳMUX に多重化する場合を考える。
【０００５】このような場合、従来法ではいわゆるＭＰ
ＥＧ２システム（ISO/IEC13818-1）を用いて多重化を行
う。この多重化方法について図７を用いて説明する。
【０００６】図７は、いわゆるＭＰＥＧ２システムを用
いて２本の画像符号化ビットストリームを同時間のフレ
ーム単位に同期可能なように符号化した例である。
【０００７】図７のＡに第１のビットストリームＢＳ
1 、図７のＢに第２のビットストリームＢＳ2 を模式的
に示す。ここで、第１のビットストリームＢＳ1 及び第
２のビットストリームＢＳ2 の各矩形は、それぞれアク
セスユニット（Access Unit;AU）と呼ばれるビットスト
リームを構成する最小単位を示す。なお、いわゆるＭＰ
ＥＧ２の場合には、アクセスユニットは、ピクチャ（pi
cture）一枚に相当する。
【０００８】図７に示した例においては、第１のビット
ストリームＢＳ1 と第２のビットストリームＢＳ2 のフ
レームレートは、２：１になるように構成されている。
そのため、第１のビットストリームＢＳ1 のアクセスユ
ニット２つ分の時間が、第２のビットストリームＢＳ2
のアクセスユニット１つに相当する。
【０００９】いわゆるＭＥＰＧ２システムの場合、まず
入力されたビットストリームを任意の間隔で分割する。
ここでは簡単のために、第１のビットストリームＢＳ1
では、アクセスユニットＡＵ10とアクセスユニットＡＵ
11、アクセスユニットＡＵ12とアクセスユニットＡ
Ｕ13、・・・の間隔で分割するものとする。
【００１０】また、第２のビットストリームＢＳ2 は、
第１のビットストリームＢＳ1 と同様の時間もしくはフ
レームの間隔で分割される。すなわちこの例では、アク
セスユニットＡＵ20、アクセスユニットＡＵ21、アクセ
スユニットＡＵ2 2、アクセスユニットＡＵ23、・・・の
間隔で分割される。
【００１１】その後、図７のＣ及びＤに示すように、対
応する時間ごとに、分割されたビットストリームに対し
てＰＥＳ（Packetized Elementary Stream）パケットヘ
ッダを添付することによりＰＥＳパケットを構成する。
【００１２】ＰＥＳパケットヘッダには、時刻管理情報
であるＰＴＳ（Presentation TimeStamp ）が挿入され
る。このＰＴＳには、先頭のアクセスユニットの表示時
間情報が書き込まれる。そして、対応するＰＥＳパケッ
トについては、同じＰＴＳを有するように設定される。
【００１３】このようにして、分割された第１のビット
ストリームＢＳ1 及び第２のビットストリームＢＳ2 に
対して、それぞれＰＥＳパケットが作成される。これら
のＰＥＳパケットに基づいて、第１のビットストリーム
ＢＳ1 及び第２のビットストリームＢＳ2 は、一つのビ
ットストリームに変換される。
【００１４】すなわち、いわゆるＭＰＥＧ２システムに
従うと、ＰＥＳパケットにより、一つのプログラムを構
成するプログラムストリーム（Program Stream;PS）
や、複数のプログラムを構成するトランスポートストリ
ーム（Transport Stream; TS）が生成される。
【００１５】このように、いわゆるＭＰＥＧシステムを
用いることにより、２個のビットストリームを同期させ
つつ１個のビットストリームに多重化することができ
る。
【００１６】
【発明が解決しようとする課題】しかし、いわゆるＭＰ
ＥＧ２システムにより多重化を行う場合には、多重化さ
れたビットストリームＢＳMUX を復元する際に、多重化
されたビットストリームＢＳMUX を逆多重化してビット
ストリームを再構成した後、さらに復号を行う必要があ
る。
【００１７】従って、多重化されたビットストリームＢ
ＳMUX を復号する際には、逆多重化されたビットストリ
ームを再構成する手段と、再構成されたビットストリー
ムを復号する手段が必要になる。
【００１８】このため、従来は、多重化されたビットス
トリームＢＳMUX を復号するために、煩雑な装置や工程
を必要としていた。
【００１９】本発明は、上述の実情に鑑みて提案された
ものであって、簡単な構成で複数のビットストリームを
多重化するような信号処理装置及び方法並びに上記多重
化のプログラムが記録されてなる記録媒体を提供するこ
とを目的とする。
【００２０】
【課題を解決するための手段】上述の課題を解決するた
めに、本発明に係る信号処理装置は、複数のビットスト
リームを多重化する信号処理装置において、一のビット
ストリームにユーザー使用領域を定義し、このユーザー
使用領域に他のビットストリームの少なくとも一部を分
割して組み込むことにより多重化する多重化手段を有す
るものである。
【００２１】本発明に係る信号処理方法は、複数のビッ
トストリームを多重化する信号処理方法において、一の
ビットストリームにユーザー使用領域を定義し、このユ
ーザー使用領域に他のビットストリームの少なくとも一
部を分割して組み込むことにより多重化する多重化工程
を有するものである。
【００２２】本発明に係る記録媒体は、複数のビットス
トリームを多重化するプログラムが記録されてなる記録
媒体において、上記プログラムは、一のビットストリー
ムにユーザー使用領域を定義し、このユーザー使用領域
に他のビットストリームの少なくとも一部を分割して組
み込むことにより多重化する多重化処理を有するもので
ある。
【００２３】本発明は、いわゆるＭＰＥＧ２システムを
用いず、いわゆるＭＰＥＧ２ビデオ（video ）の規格内
で、同期を取りつつ、複数のビットストリームを多重化
するものである。
【００２４】この多重化は、ユーザーにより定義可能な
データ領域であるユーザー使用領域を利用して行われ
る。
【００２５】ユーザー使用領域は、フレーム単位、もし
くは複数のフレーム単位、例えばいわゆるＭＰＥＧ２に
おけるピクチャ群（group of pictures; GOP）ごとに挿
入が可能なものである。このユーザー使用領域は、いわ
ゆるＭＰＥＧ２の場合には、“user_data ”が該当す
る。
【００２６】例えばいわゆるＭＰＥＧ２を用いる場合
に、第１のビットストリームと第２のビットストリーム
とを多重化するには、第１のビットストリームと第２の
ビットストリームとの同期を取りつつ、第１のビットス
トリームの“user_data”を利用して多重化する。
【００２７】まず、第２のビットストリームをシーケン
スヘッダ（Sequence Header ）等の画像ビットストリー
ムの先頭にある画像情報、及びフレームごとに分割す
る。そして、分割した第２のビットストリームを“star
t_code”による誤作動を防ぐ処理をしたのち、“user_d
ata_start_code”を付加し、第１のビットストリームの
“user_data ”位置へ挿入する。
【００２８】この挿入時に、第１のビットストリームの
“user_data ”の位置及び挿入される第２のビットスト
リームが同じ表示時間もしくは復号時間を持つように挿
入する。これによって、いわゆるＭＰＥＧシステムを用
いることなく、第１のビットストリームと第２のビット
ストリームとを同期させることができる。
【００２９】また、このとき“user_data ”を挿入され
た第１のビットストリームは、いわゆるＭＰＥＧ２の構
文（syntax）に従っているため、特に処置を施さなくと
もいわゆるＭＰＥＧ２に対応する復号装置（decoder ）
で復号（decode）することができる。
【００３０】
【発明の実施の形態】以下、図面を参照して、本発明に
係る信号処理装置及び方法並びに記録媒体の実施の形態
について説明する。なお、以下では、特に断る箇所以外
ではいわゆるＭＰＥＧ２を用いるものと想定している。
【００３１】まず、信号処理装置の実施の形態につい
て、図１を参照して説明する。この信号処理装置は、入
力される第１のビットストリームＢＳ1 と第２のビット
ストリームＢＳ2 とについて、第１のビットストリーム
ＢＳ1 のユーザー使用領域“user_data”に第２のビッ
トストリームＢＳ2 を分割して挿入するものである。
【００３２】信号処理装置１０は、外部から入力される
第２のビットストリームＢＳ2 をアクセスユニットに分
割する分割部１１と、分割部１１から出力されたアクセ
スユニットに対して“start_code”及びマーカービット
（marker bit）を付加する付加部１２とを有している。
【００３３】この信号処理装置には、図２のＡに示すよ
うな第１のビットストリームＢＳ1と、図２のＢに示す
ような第２のビットストリームＢＳ2 とが、外部から入
力される。
【００３４】第１のビットストリームＢＳ1 及び第２の
ビットストリームＢＳ2 は、フレーム単位、もしくは複
数のフレーム等から構成される単位に分割することが可
能であるものとする。
【００３５】すなわち、第１のビットストリームＢＳ1
は、これらの単位を要素として、アクセスユニットＡＵ
10、アクセスユニットＡＵ11、アクセスユニットＡ
Ｕ1 2、・・・から構成されているものとする。
【００３６】同様に、第２のビットストリームＢＳ2
は、上記単位を要素として、アクセスユニットＡＵ20、
アクセスユニットＡＵ21、アクセスユニットＡＵ22、・
・・から構成されているものとする。
【００３７】ここで、アクセスユニットＡＵ10とアクセ
スユニットＡＵ20、アクセスユニットＡＵ12とアクセス
ユニットＡＵ21、アクセスユニットＡＵ14とアクセスユ
ニットＡＵ22、アクセスユニットＡＵ16とアクセスユニ
ットＡＵ23とは、同じ表示時刻もしくは復号化時刻を有
しているものとする。
【００３８】分割部１１には、この内の第２のビットス
トリームＢＳ2 が入力される。分割部１１は、入力され
た第２のビットストリームＢＳ2 をアクセスユニットご
とに分割する。そして、分割されたアクセスユニットを
出力する。なお、複数のアクセスユニットをまとめて一
つのユニットとしても問題ない。
【００３９】第２のビットストリームＢＳ2 を構成する
各アクセスユニットは、“start_code”が開始した時点
から、次の“start_code”もしくは任意個数後の“star
t_code”の直前までに分割されるものとする。
【００４０】いわゆるＭＰＥＧ２、いわゆるＭＰＥＧ４
等による符号化の場合、この分割されたアクセスユニッ
トはスタッフィングビット（stuffing bit）を含むため
８の整数倍のビット数を持つこととなる。
【００４１】付加部１２には、分割部１１にて分割され
たアクセスユニットが入力される。付加部１２は、図２
のＣに示すように、各アクセスユニットの先頭に、“us
er_data_start_code”と呼ばれるユーザー使用領域を示
すスタートコード（code）を付加する。そして、付加部
１２は、“user_data_start_code”が付加されたアクセ
スユニットを出力する。
【００４２】但し、組み込みを行う第１のビットストリ
ームＢＳ1 のユーザー使用領域“user_data”のデータ
構造等に何らかの制約があった場合、分割された第２の
ビットストリームＢＳ2 に関して、“user_data_start_
code”添付前に、データを変換する処理を行う必要があ
る。
【００４３】いわゆるＭＰＥＧ２のユーザー使用領域
“user_data ”には、その合計ビット数が８の整数倍で
あること、及びスタートコード“start_code”の誤検出
を防ぐため０の値を持つビット（bit ）が２３個以上連
続してはならないという制約が存在する。
【００４４】そのため、ＭＥＰＧ２のビットストリーム
へ組み込みを行う場合、図３に示すように、合計ビット
数を８の整数倍にし、またスタートコード“start_cod
e”の誤検出を防ぐための処理を行う。
【００４５】すなわち、図３のＡに示すように、分割部
１１に入力された第２のビットストリームＢＳ2 は、図
３のＢに示すように、８の整数倍のビット数に分割され
る。その後、分割されたビットストリームは、付加部１
２において処理が施される。
【００４６】ここで分割された第２のビットストリーム
ＢＳ2 がいわゆるＭＰＥＧ４の構文に従って符号化され
たものとし、この第２のビットストリームＢＳ2 が分割
された結果、８の整数倍のビット数ごとに分割されたも
のとする。
【００４７】すなわち、８の整数倍のビット数に分割さ
れた第２のビットストリームＢＳ2は、図３のＣに示す
ように、さらに７ビットごとに分割される。ここで、図
３のＤに示すように、最後のユニットが７ビットに足り
ない場合、“０”又は“１”のビットで７ビットになる
ように補間する。
【００４８】そして、図３のＥに示すように、各７ビッ
トのユニットの最後にスタートコード“start_code”の
誤検出を防ぐ１ビットの“１”を追加する。最後に、各
ユニットを結合することにより、分割された第２のビッ
トストリームＢＳ2 は、いわゆるＭＰＥＧ２によるユー
ザーデータの構文に適したデータに変換される。
【００４９】この処置の終了後、変換された各アクセス
ユニットの先頭に、“user_data_start_code”が付加さ
れる。
【００５０】また、信号処理装置１０は、外部から入力
される第１のビットストリームＢＳ1 と、付加部１２か
ら出力されるビットストリームとを多重化して多重化ビ
ットストリームＢＳMUX を出力する多重化部１３を有し
ている。
【００５１】多重化部１３は、図２のＤに示すように、
第１のビットストリームＢＳ1 の各アクセスユニットの
“user_data ”の挿入位置へと対応する同一の復号時刻
もしくは表示時刻を持つ第２のビットストリームＢＳ2
のアクセスユニットを挿入しすることにより多重化を行
う。
【００５２】このように、多重化部１３は、第１のビッ
トストリームＢＳ1 と第２のビットストリームＢＳ2 と
を、同期させて多重化する。
【００５３】次に、図１に示したような信号処理装置に
て得られた多重化されたビットストリームＢＳMUX の復
号について説明する。
【００５４】まず、多重化されたビットストリームＢＳ
MUX を復号する復号装置について、図４を参照して説明
する。
【００５５】図４のＡは、多重化されたビットストリー
ムＢＳMUX より、第１のビットストリームＢＳ1 を復号
する第１の復号装置である。第１の復号装置は、復号部
２１のみから構成されている。
【００５６】この多重化されたビットストリームＢＳ
MUX は第１のビットストリームＢＳ1の符号化規則に従
い、第２のビットストリームＢＳ2 の符号化データを挿
入されてなるものである。
【００５７】そのため、例えば第１のビットストリーム
ＢＳ1 がいわゆるＭＰＥＧ２の構文に従い記載されてい
る場合、多重化されたビットストリームをＭＰＥＧ２の
復号器で復号することにより第１のビットストリームの
復号画像を得ることができる。
【００５８】このように復号する場合には、ユーザー使
用領域“user_data ”に挿入された第２のビットストリ
ームＢＳ2 のデータは無視される。
【００５９】多重化されたビットストリームＢＳMUX か
ら第２のビットストリームＢＳ2 を得るには、図４のＢ
に示す第２の復号装置が用いられる。
【００６０】第２の復号装置は、多重化されたビットス
トリームＢＳMUX からユーザーデータを抜き出す抜き出
し部２２と、抜き出し部２２にて抜き出したユーザーデ
ータを第２のビットストリームＢＳ2 変換する変換部２
３とを有している。
【００６１】第２のビットストリームＢＳ2 のデータは
多重化されたビットストリームＢＳMUX におけるユーザ
ー使用領域“user_data”に記録されているため、抜き
出し部２２において“user_data ”が抜き出される。
【００６２】その後、変換部２３において“user_data_
start_code”の除去が行われ、さらに“start_code”の
誤検出を防ぐ処置が施されている場合、その変換処理が
行われる。
【００６３】ここで、“start_code”の誤検出防止のた
めの処理が施されている場合の逆変換方法を、図５を参
照して説明する。
【００６４】図５のＡに示すように、第１のビットスト
リームＢＳ1 がいわゆるＭＰＥＧ２の構文に従って記載
されている場合、ユーザー使用領域“user_data ”は８
の整数倍のビット列となる。
【００６５】まず、図５のＢに示すように、このユーザ
ー使用領域“user_data ”のビット列を８ビットごとに
分割する。その後、図５のＣに示すように、スタートコ
ードの誤検出を防ぐために添付したビットを１ビット除
去する。この後、図５のＤに示すように、これらのビッ
ト列を再び結合する。
【００６６】この結合されたビット列は、図５のＤに示
すように、ビット列の最後に付加したスタッフィングビ
ットを含んでいる。このため、図５のＥに示すように、
結合したビット列の先頭より８の整数倍の最大値のビッ
ト位置までを、第２のビットストリームＢＳ2 ビットス
トリームとして採用する。
【００６７】この例では、第２のビットストリームＢＳ
2 は、いわゆるＭＰＥＧ４によるものである。なお、残
りのビット列は破棄される。
【００６８】図４のＢに示した第２の復号装置の変換部
２３からの出力は、第２のビットストリームＢＳ2 とな
る。このように、第２の復号装置は、多重化されたビッ
トストリームＢＳMUX から第２のビットストリームＢＳ
2 を再構成する。
【００６９】また、図４のＡに示した第１の復号装置の
復号部２１がユーザー使用領域“user_data ”を出力す
る機能を有していた場合、図４のＢに示した第２の復号
装置と組み合わせることにより、図４のＣに示す第３の
復号装置のような構成にすることもできる。
【００７０】第３の復号装置は、第１のビットストリー
ムＢＳ1 の復号画像を生成し、同時に第２のビットスト
リームＢＳ2 を再構成する。
【００７１】第３の復号装置の復号部２５は、第１の復
号装置の復号部２１と同様の構成である。また、第３の
復号装置の変換部２６は、第２の復号装置の変換部２３
と同様の構成である。
【００７２】第３の復号装置の復号部２５は、第１のビ
ットストリームＢＳ1 の復号画像及び第１のビットスト
リームＢＳ1 に含まれているユーザー使用データを出力
するものとする。
【００７３】ユーザー使用領域“user_data”は、変換
部２６に出力され、第２のビットストリームＢＳ2 に変
換される。
【００７４】このようにして、２つの画像ビットストリ
ームをＭＥＰＧ２システムを使用せず多重化することが
可能となる。また、第１のビットストリームＢＳ1 に関
しては特に処理を行わず、組み込み前の復号器により復
号可能となる。
【００７５】次に、ビットストリームを多重化する多重
化処理プログラムが記録されてなる記録媒体について説
明する。この多重化処理プログラムは、例えばいわゆる
ＣＤ−ＲＯＭを記録媒体として提供される。
【００７６】本実施の形態の記録媒体は、複数のビット
を多重化処理するプログラムが記録されてなるものであ
る。プログラムは、図１に示した信号記録装置と同様の
多重化処理の手順からなるものである。
【００７７】すなわち、このプログラムは、第１のビッ
トストリームＢＳ1 のユーザー使用領域に、第２のビッ
トストリームＢＳ2 を組み込むことにより、多重化され
たビットストリームＢＸMUX を生成するものである。
【００７８】また、このプログラムは、第２のビットス
トリームＢＳ2 を第１のビットストリームＢＳ1 のユー
ザー使用領域に組み込む際に、第１のビットストリーム
ＢＳ1 の規則に従ってデータを変換して組み込みを行
う。これによって、第１のビットストリームＢＳ1 の画
像データを復号する際には特に処置を行わず、第１のビ
ットストリームＢＳ1 の通常の復号装置を用いて復号す
ることができる。
【００７９】さらに、このプログラムは、第２のビット
ストリームＢＳ2 をフレーム単位もしくは複数のフレー
ム単位に分割し、第１のビットストリームＢＳ1 の分割
した部分と同じ表示時刻もしくは復号時刻を有するフレ
ームのユーザー使用領域に挿入するものである。
【００８０】上述した本実施の形態は、特に、例えば、
光磁気ディスクや磁気テープ、フラッシュメモリ等の記
録媒体に記録し、これを再生してディスプレイなどに表
示したり、テレビ会議システムやテレビ電話システム、
インターネットやテレビ放送機器など、伝送路を介して
送信側から受信側に伝送し、受信側において、これを受
信して表示する場合などに用いて好適な符号化装置及び
方法、並びに提供媒体に適用することができる。
【００８１】なお、上述の実施の形態においては、いわ
ゆるＭＰＥＧ２を例示してビットストリームの多重化に
ついて説明したが、本発明はこれに限定されない。本発
明は、ユーザー定義のデータ領域を有する符号化方式に
対して、広く適用することができる。
【００８２】
【発明の効果】上述のように、本発明は、一のビットス
トリームのユーザー使用領域に他のビットストリームを
組み込むことにより、複数のビットストリームを多重化
するものである。
【００８３】従って、本発明によると、本来分離してい
た複数のビットストリームを一つのビットストリームと
して蓄積、伝送等を行うことが可能となる。またいわゆ
るＭＰＥＧ２における“user_data ”等のユーザー使用
領域を使用することにより既存の符号化方式を変更する
ことなく使用できるため、より少ない処理数により画像
の復号が可能である。
【図面の簡単な説明】
【図１】信号処理装置の概略的な構成を示すブロック図
である。
【図２】ビットストリームの多重化を説明する図であ
る。
【図３】スタートコードの誤検出を防止するための処理
を示す図である。
【図４】ビットストリームの復号の方法を示す図であ
る。
【図５】ビットストリームの逆多重化を説明する図であ
る。
【図６】多重化部へのビットストリームの入力を示す図
である。
【図７】従来のビットストリームの多重化を説明する図
である。
【符号の説明】
１０ 信号処理装置、１１ 分割部、１２ 付加部、１
３ 多重化部、２１復号部、２２ 抜き出し部、２３
変換部
───────────────────────────────────────────────────── フロントページの続き (72)発明者 高橋 邦明 東京都品川区北品川６丁目７番35号 ソニ ー株式会社内 Ｆターム(参考） 5C059 MA00 RB02 RB08 RC00 RC04 SS07 5C063 AA01 AB03 AB07 AC01 CA14 CA36 DA13 DA20 5K028 AA11 CC02 EE03 KK03 MM01 NN01 SS04 SS14

Claims (11)

    【特許請求の範囲】
  1. 【請求項１】 複数のビットストリームを多重化する信
    号処理装置において、 一のビットストリームにユーザー使用領域を定義し、こ
    のユーザー使用領域に他のビットストリームの少なくと
    も一部を分割して組み込むことにより多重化する多重化
    手段を有することを特徴とする信号処理装置。
  2. 【請求項２】 上記多重化手段は、上記一のビットスト
    リームの符号化規則に従って上記他のビットストリーム
    を多重化することにより、上記一のビットストリームを
    復号する復号手段を用いて、多重化されたビットストリ
    ームから上記一のビットストリームを再生することがで
    きるように多重化を行うことを特徴とする請求項１記載
    の信号処理装置。
  3. 【請求項３】 上記多重化手段は、上記ユーザー使用領
    域に先行する上記一のビットストリームと同一の時刻情
    報を有する上記他のビットストリームを構成する単位
    を、上記ユーザー使用領域に分割して組む込むことを特
    徴とする請求項１記載の信号処理装置。
  4. 【請求項４】 上記ビットストリームは符号化画像であ
    り、上記多重化手段は、上記他のビットストリームを１
    又は２以上の画像を単位として分割することを特徴とす
    る請求項３記載の信号処理装置。
  5. 【請求項５】 上記ビットストリームは符号化画像であ
    り、上記時刻情報は、上記ビットストリームが表示され
    る表示時刻又は上記ビットストリームが復号される復号
    時刻であることを特徴とする請求項３記載の信号処理装
    置。
  6. 【請求項６】 複数のビットストリームを多重化する信
    号処理方法において、 一のビットストリームにユーザー使用領域を定義し、こ
    のユーザー使用領域に他のビットストリームの少なくと
    も一部を分割して組み込むことにより多重化する多重化
    工程を有することを特徴とする信号処理方法。
  7. 【請求項７】 上記多重化工程は、上記一のビットスト
    リームの符号化規則に従って上記他のビットストリーム
    を多重化することにより、上記一のビットストリームを
    復号する復号手段を用いて、多重化されたビットストリ
    ームから上記一のビットストリームを再生することがで
    きるように多重化を行うことを特徴とする請求項６記載
    の信号処理方法。
  8. 【請求項８】 上記多重化工程は、上記ユーザー使用領
    域に先行する上記一のビットストリームと同一の時刻情
    報を有する上記他のビットストリームを構成する単位
    を、上記ユーザー使用領域に分割して組む込むことを特
    徴とする請求項６記載の信号処理方法。
  9. 【請求項９】 複数のビットストリームを多重化するプ
    ログラムが記録されてなる記録媒体において、上記プロ
    グラムは、 一のビットストリームにユーザー使用領域を定義し、こ
    のユーザー使用領域にに他のビットストリームの少なく
    とも一部を分割して組み込むことにより多重化する多重
    化処理を有することを特徴とする記録媒体。
  10. 【請求項１０】 上記多重化処理は、上記一のビットス
    トリームの符号化規則に従って上記他のビットストリー
    ムを多重化することにより、上記一のビットストリーム
    を復号する復号手段を用いて、多重化されたビットスト
    リームから上記一のビットストリームを再生することが
    できるように多重化を行うことを特徴とする請求項９記
    載の記録媒体。
  11. 【請求項１１】 上記多重化処理は、上記ユーザー使用
    領域に先行する上記一のビットストリームと同一の時刻
    情報を有する上記他のビットストリームを構成する単位
    を、上記ユーザー使用領域に分割して組む込むことを特
    徴とする請求項９記載の記録媒体。
JP30986499A 1999-10-29 1999-10-29 信号処理装置及び方法並びに記録媒体 Withdrawn JP2001127726A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP30986499A JP2001127726A (ja) 1999-10-29 1999-10-29 信号処理装置及び方法並びに記録媒体
US09/699,209 US6970514B1 (en) 1999-10-29 2000-10-27 Signal processing device, signal processing method, decoding device, decoding method and recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP30986499A JP2001127726A (ja) 1999-10-29 1999-10-29 信号処理装置及び方法並びに記録媒体

Publications (1)

Publication Number Publication Date
JP2001127726A true JP2001127726A (ja) 2001-05-11

Family

ID=17998227

Family Applications (1)

Application Number Title Priority Date Filing Date
JP30986499A Withdrawn JP2001127726A (ja) 1999-10-29 1999-10-29 信号処理装置及び方法並びに記録媒体

Country Status (2)

Country Link
US (1) US6970514B1 (ja)
JP (1) JP2001127726A (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002026889A (ja) * 2000-07-03 2002-01-25 Oki Electric Ind Co Ltd データ暗号化方法，画像伝送装置，及び，画像受信装置
WO2003015415A1 (en) * 2001-08-08 2003-02-20 Matsushita Electric Industrial Co., Ltd. Image encoding apparatus and image encoding method
JPWO2008146483A1 (ja) * 2007-05-28 2010-08-19 パナソニック株式会社 メタデータ記録装置及びメタデータ記録方法

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7880650B2 (en) * 2008-09-30 2011-02-01 Freescale Semiconductor, Inc. Method and apparatus for testing data converter
JP6119260B2 (ja) * 2013-01-16 2017-04-26 富士通株式会社 動画像多重化装置及び動画像多重化方法、ならびに多重化動画像復号装置及び多重化動画像復号方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3692616B2 (ja) * 1996-05-24 2005-09-07 ソニー株式会社 ディジタル信号多重化スケジュールの検証方法及びディジタル信号多重化装置
JPH1118083A (ja) * 1997-06-25 1999-01-22 Sony Corp ディジタル信号符号化方法及び装置、信号記録媒体並びに信号伝送方法
US6115422A (en) * 1997-09-26 2000-09-05 International Business Machines Corporation Protocol and procedure for time base change in an MPEG-2 compliant datastream
GB9813831D0 (en) * 1998-06-27 1998-08-26 Philips Electronics Nv Frame-accurate editing of encoded A/V sequences
US6483543B1 (en) * 1998-07-27 2002-11-19 Cisco Technology, Inc. System and method for transcoding multiple channels of compressed video streams using a self-contained data unit
WO2000068946A1 (fr) * 1999-05-07 2000-11-16 Kabushiki Kaisha Toshiba Structure de donnees pour donnees en continu, et procede d'enregistrement et de reproduction de donnees en continu

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002026889A (ja) * 2000-07-03 2002-01-25 Oki Electric Ind Co Ltd データ暗号化方法，画像伝送装置，及び，画像受信装置
JP4595170B2 (ja) * 2000-07-03 2010-12-08 沖電気工業株式会社 データ暗号化方法，画像伝送装置，及び，画像受信装置
WO2003015415A1 (en) * 2001-08-08 2003-02-20 Matsushita Electric Industrial Co., Ltd. Image encoding apparatus and image encoding method
JPWO2008146483A1 (ja) * 2007-05-28 2010-08-19 パナソニック株式会社 メタデータ記録装置及びメタデータ記録方法
US8509590B2 (en) 2007-05-28 2013-08-13 Panasonic Corporation Metadata recording device and method thereof

Also Published As

Publication number Publication date
US6970514B1 (en) 2005-11-29

Similar Documents

Publication Publication Date Title
CN102396221B (zh) 阻止特技模式操作的支持
KR101073777B1 (ko) 다중화 방식 변환 장치
US8351514B2 (en) Method, protocol, and apparatus for transporting advanced video coding content
KR100786925B1 (ko) 데이터 다중화 장치, 데이터 다중화 방법, 및 기록 매체
KR100420740B1 (ko) 인코딩 장치, 인코딩 방법, 디코딩 장치, 디코딩 방법,코딩 시스템, 코딩 방법
WO1998010591A1 (en) Information transmitting method, encoder/decoder of information transmitting system using the method, and encoding multiplexer/decoding inverse multiplexer
KR19990057100A (ko) 엠펙 디코더 및 디코딩 제어 방법
JPH11252552A (ja) ビデオ信号の圧縮符号化方法及び圧縮符号化装置、並びに、圧縮符号化データの多重化方法及び多重化装置
US6600787B2 (en) MPEG decoding device
US6754273B1 (en) Method for compressing an audio-visual signal
JP2000331421A (ja) 情報記録装置及び情報再生装置
JP2001127726A (ja) 信号処理装置及び方法並びに記録媒体
JP2001309307A (ja) 記録装置および方法、再生装置および方法、並びに記録媒体
JP2823806B2 (ja) 画像復号装置
JP3792770B2 (ja) 記録再生装置
JP4189430B2 (ja) 情報伝送システムにおける復号化・逆多重化装置
JP4000131B2 (ja) 符号化・多重化装置及び方法
US9219930B1 (en) Method and system for timing media stream modifications
JP4000132B2 (ja) 復号化・逆多重化装置及び方法
JP4189429B2 (ja) 情報伝送システムにおける符号化・多重化装置
JP4113165B2 (ja) 符号化プログラムを記録した記録媒体及び復号化プログラムを記録した記録媒体
JP2007312415A (ja) 情報伝送システムにおける復号化装置及び方法
JP2004312782A (ja) 情報伝送方法
JP2004304851A (ja) 情報伝送システムにおける復号化装置
JP2002290363A (ja) データ多重化伝送方法及びその装置

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20070109