JP3607681B2

JP3607681B2 - 副映像データ編集装置および編集方法

Info

Publication number: JP3607681B2
Application number: JP2002050776A
Authority: JP
Inventors: 由美子多賀
Original assignee: Toshiba Corp
Current assignee: Toshiba Corp
Priority date: 2002-02-27
Filing date: 2002-02-27
Publication date: 2005-01-05
Anticipated expiration: 2022-02-27
Also published as: JP2003259282A

Description

【０００１】
【発明の属する技術分野】
本発明は、字幕などの副映像データを含むシステムストリーム上の副映像データを編集する副映像データ編集装置および編集方法に関する。
【０００２】
【従来の技術】
大量の映像データ、音声データ及び字幕などの副映像データは、ＭＰＥＧ方式を用いて圧縮して１つのビットストリームとして多重化し、光ディスク等の記録媒体に記録される。ＭＰＥＧ方式は、国際規格機構（ＩＳＯ）が規格化したビットストリームの解釈およびその復号処理に関して規定した規格であり、ＭＰＥＧ２標準としてＩＳＯ１３８１８が標準化されている。
【０００３】
また、光ディスク等の記録媒体に記録する方式として、画像信号の圧縮符号化の方式を定めたＭＰＥＧビデオ、音声信号の圧縮符号化の方式を定めたＭＰＥＧオーディオ、文字データなどの副映像データの圧縮符号化方式を定めたサブピクチャを同期再生を含め統合して１本のストリームに多重化するＭＰＥＧ方式（ＩＳＯ１３８１８−１）およびＤＶＤビデオ方式（ＤＶＤＳｐｅｃｉｆｉｃａｔｉｏｎｓｆｏｒＲｅａｄ−ＯｎｌｙＶｅｒｓｉｏｎ１．０Ａｕｇｕｓｔ１９９６）が規定されている。
【０００４】
ＭＰＥＧビデオストリームでは、Ｉピクチャ、Ｐピクチャ、Ｂピクチャの３種類の符号化画像が規定されている。Ｉピクチャは、他のピクチャを参照せず、そのピクチャ自身で符号化を行うことができる画像である。また、Ｐピクチャは、前方予測符号化を用いて、符号化する際には、時間的に過去のＩピクチャまたは過去のＰピクチャが必要となる画像である。さらに、Ｂピクチャは、双方向予測符号化を用いて、時間的に過去および未来のＩピクチャまたはＰピクチャから予測して符号化された画像であり、このＢピクチャを符号化する際には、過去及び未来のＩピクチャ又はＰピクチャが必要となる。
【０００５】
ＭＰＥＧビデオストリームは、これらピクチャの集合体（ＧＯＰの集合）である。一般に、ＧＯＰは、ランダムアクセスと高符号化効率を実現するため、Ｉピクチャ、Ｐピクチャ、Ｂピクチャの組合せによって構成され、ＧＯＰの最初の符号化画像はＩピクチャである。Ｉピクチャは参照画面を用いずに独立して復号化できるため、ＧＯＰはＭＰＥＧデータからのランダムアクセスを行うポイントとして利用することができる。
【０００６】
また、ＭＰＥＧオーディオストリームは、ＡＡＵ（ＡｕｄｉｏＡｃｃｅｓｓＵｎｉｔ：オーディオアクセスユニット＝１つ１つ単独でオーディオ信号に復号化できる最小単位）の集合であり、サブピクチャストリームは、ＳＰＵ（ＳｕｂＰｉｃｔｕｒｅＵｎｉｔ：サブピクチャユニット＝１つ１つ単独で文字データに復号できる最小単位）の集合である。
【０００７】
ＭＰＥＧシステムストリームは、ＭＰＥＧビデオストリーム、ＭＰＥＧオーディオストリーム及びサブピクチャストリームとを含み、それらが同期再生できるように、ビデオ、やオーディオ並びにサブピクチャの再生単位ごとに、いつ復号再生すべきかの情報を付加して１つに多重化された符号化ストリームである。
【０００８】
このようなＭＰＥＧシステムストリームの一部分を切り出して、新しいＭＰＥＧシステムストリームを作成する編集システムが求められている。
【０００９】
従来の編集システムでは、ＤＶＤディスクから読み出されたシステムストリームに対して、使用者が指定した編集範囲の区間を切り出して新規のシステムストリームを作成するものがある。
【００１０】
このような場合、副映像データは、映像データと比べるとデータ量がかなり小さいため、再生時において、表示時刻より少し前にバッファに送っておくことが可能となり、副映像データは、システムストリーム上において同時刻の映像データより前に配置されることが多い。
【００１１】
そのため、編集点からの切り出し範囲に相当する新規のシステムストリームを作成すると、切り出し範囲内に表示すべき副映像データが存在しないこととなり、副映像データが表示されないこととなる。
【００１２】
この問題を解決するために、例えば、デマルチプレクサ（分離装置）を用いて、ＤＶＤディスクから読み出されたシステムストリームを映像ストリーム、音声ストリーム及び副映像ストリームとに分離する方法が考えられている。
【００１３】
分離された各ストリームは、画像データ、字幕などを再生するディスプレイ、音声データを再生するスピーカ、キーボード、マウスのような使用者が編集点を指定するための入力手段により、新規ストリームとなる表示期間を同期するようにして切り出され、更に、夫々のサイズのパックに分割し多重化され、ＤＶＤディスクに記録する。
【００１４】
【発明が解決しようとする課題】
この従来の方法によると、システムストリームから所定の範囲を切り出して作成したシステムストリームでは、副映像が表示されないことがあるという問題がある。
【００１５】
さらに、副映像を表示するために、既存のシステムストリームを分離して編集し、再度多重化する方法もあるが、この方法では、編集、多重化等のデータ加工に膨大な作業時間を費やしてしまうという問題がある。
【００１６】
そこで、本発明では、システムストリームを分離して編集し、再度多重化することなく、かつ映像データと同期するような副映像データの編集が可能な副映像データ編集装置及び編集方法を提供することを目的とする。
【００１７】
【課題を解決するための手段】
上記課題を解決するために、本発明に係る副映像データ編集装置では、映像データ、音声データ及び副映像データ以外のパケットデータを含むシステムストリーム上の副映像データを編集するものにおいて、編集範囲を決定する手段と、この決定手段にて決定された編集範囲内に相当する副映像データの存在位置を確認し、当該副映像データが編集範囲外に存在する場合には、編集範囲内に存在するパケットデータの位置に当該副映像データを書き込む情報書き換え手段とを具備することを特徴とするものである。
【００１８】
また、本発明に係る副映像データ編集装置では、システムストリーム上の副映像データを編集するものにおいて、編集範囲を決定する手段と、この決定手段にて決定された編集範囲内のデータの中から、この範囲内のデータのみでは復号処理が不可能なデータをフレーム単位で削除する編集手段と、この決定手段にて決定された編集範囲内に相当する副映像データの存在位置を確認し、当該副映像データが編集範囲外に存在する場合には、編集手段にて削除されたデータ領域に当該副映像データを書き込む情報書き換え手段とを具備したことを特徴とするものである。
【００１９】
すなわち、本発明においては、副映像データを含むシステムストリームの編集の際に、必要である副映像データが編集範囲外に存在する場合には、編集範囲内のパケットデータを副映像データに書き換えることによって、副映像データの表示の欠落を無くし、副映像データを正確に表示することができるものである。
【００２０】
また、本発明においては、副映像データを含むシステムストリームの編集の際に、必要である副映像データが編集範囲外に存在する場合には、編集範囲内のデータのみでは復号処理できないデータを削除し、その領域に当該副映像データに書き込むことによって、副映像データの表示の欠落を無くし、副映像データを正確に表示することができるものである。
【００２１】
【発明の実施の形態】
以下、この発明の実施の形態について図面を参照して説明する。
まず、図１を用いてＭＰＥＧシステムストリームを構成するパックデータにつき説明する。
【００２２】
ＭＰＥＧシステムストリームは、パックＰＡを単位として構成されており、パックＰＡ、パックヘッダＰＨと１つ以上のパケットＰＫから構成されている。
【００２３】
パックヘッダＰＨには、符号化したストリームを復号する際の時刻基準となるＳＣＲ（ＳｙｓｔｅｍＣｌｏｃｋＲｅｆｅｒｅｎｃｅ）の値が記録されているＳＣＲフィールドが設けられている。
【００２４】
また、パケットＰＫは、パケットヘッダＰＫＨと映像データ、音声データまたは副映像データのストリームが記録されるパケットデータＰＫＤから構成されている。また、パケットデータＰＫＤには、映像データ、音声データ及び副映像データのストリームが記録されず、例えばヘッダのみが記録されている領域もある。このようなパケットデータは、後述する処理で、編集範囲外に存在する副映像データを書き込む領域として使用される場合がある。
【００２５】
また、パケットヘッダＰＫＨには、パケットデータＰＫＤに含まれるビデオ、オーディオ及びサブピクチャを再生単位ごとに出力させるための時刻管理情報であるＰＴＳ（ＰｒｅｓｅｎｔａｔｉｏｎＴｉｍｅＳｔａｍｐ）が記録されているＤＴＳフィールドが設けられている。
【００２６】
次に、このようなＭＰＥＧシステムストリームの一部分を切り出して、新しいＭＰＥＧシステムストリームを作成する副映像データ編集装置の構成について説明する。
【００２７】
図２は、本発明の一実施の形態に係わる副映像データ編集装置の構成を示すものである。
【００２８】
この副映像データ編集装置は、ＤＶＤディスク１からシステムストリームを読み出す読出装置２、この読み出したシステムストリームを編集する編集装置３及びこの編集されたシステムストリームを再生する再生装置４とによって構成されている。また、編集装置３は、編集範囲決定部５、副映像データ置換部６及びストリーム切り出し部７とから構成されている。
【００２９】
読出装置２では、ＤＶＤディスク１からシステムストリームを読み出し、これを編集装置３に供給する。
【００３０】
編集装置３は、読出装置２にて読み出されたシステムストリームを編集する。まず、編集範囲決定部５において、使用者が指定した編集したい範囲（ＧＯＰ単位）に基づいて、編集範囲に相当するシステムストリーム中の映像データの区間を切り出し範囲として決定する。編集範囲決定部５は、その切り出し範囲の情報を副映像データ置換部６に供給する。
【００３１】
副映像データ置換部６では、編集範囲決定部５より供給された切り出し範囲の情報により切り出し範囲に相当するシステムストリーム上の副映像データの確認を行なう。この際、副映像データが切り出し範囲外に存在する場合には、そのデータを切り出し範囲内のその他のパケットデータに置き換え、置換済みシステムストリームをストリーム切り出し部７に供給する。この場合、副映像データが書き込まれるパケットデータの領域は、映像データ、音声データ及び副映像データが記録されておらず、例えばヘッダの情報のみが記録されている領域である。
【００３２】
さらに、編集装置３に設けられているストリーム切り出し部７は、置換済みシステムストリームから編集範囲決定部５にて決定された切り出し範囲を切り出して新規システムストリームを作成する。
【００３３】
また、再生装置４では、ストリーム切り出し部７より生成された新システムストリームを再生（表示等）を行なう。
【００３４】
次に、図３を用い、映像データと副映像データの表示タイミング及びシステムストリーム上の切り出し範囲及び副映像データの置き換え方法を説明する。
【００３５】
システムストリームは、ビデオパックＶ、サブピクチャパックＳ、ダミーパック（他のパケットを含むパック）Ｐから構成され、図３では、切り出し範囲に相当するシステムストリームはビデオパックＶ５以降となっている。一方、切り出し範囲内に表示すべき副映像ユニットＳＰ２のシステムストリーム上の配置（サブピクチャパックＳ２）は、ビデオパックＶ５より前に置かれているので、切り出し範囲内に存在するダミーパック（映像データ、音声データ及び副映像データが記録されていないパケットデータ領域）Ｐ３をサブピクチャパックＳ２に置き換える。図３では、副映像ユニットＳＰｎは、サブピクチャパックＳｎに対応している。
【００３６】
ダミーパックＰ３をサブピクチャＳ２に置き換えたシステムストリームは、ストリーム切り出し部７に供給される。このストリーム切り出し部７では、切り出し範囲に従って切り出し処理を実行し、新しいシステムストリームを作成する。この作成されたシステムストリームは、再生装置４に送られて表示される。
【００３７】
以上説明したようにこの副映像データ編集装置によれば、システムストリーム上の編集範囲（切り出し範囲）に相当する副映像データの存在位置を確認し、当該副映像データが編集範囲外に存在する場合には、編集範囲内に存在するパケットデータ（映像データ、音声データ及び副映像データが記録されていない領域）の位置に当該副映像データを書き込むことで副映像データの編集処理を実行している。
【００３８】
そのため、既存のシステムストリームを分離、編集して再度多重化することなく、且つ副映像の表示も欠けることなく編集することが可能であり、大幅に編集時間を短縮した上で、システムストリームの編集処理を行うことができる。
【００３９】
次に、図４を用いて、本発明における副映像データ編集装置の第２の実施の形態の構成について説明する。
【００４０】
この副映像データ編集装置では、副映像の表示タイミングに間に合う位置に映像データ、音声データ及び副映像データが記録されていないパケットデータが存在しなくても、スムーズな副映像データの表示を可能とする構成となっている。
【００４１】
この副映像データ編集装置では、図４に示す通り、ＤＶＤディスク１１からシステムストリームを読み出す読出装置１２、この読み出したシステムストリームを編集する編集装置１３及びこの編集されたシステムストリームを再生する再生装置１４とによって構成されている。
【００４２】
また、システムストリームを編集する編集装置１３は、編集範囲決定部１５、検出・ストリーム編集部１６、副映像データ置換部１７、時間情報書き換え部１８及びストリーム切り出し部１９の構成を備えている。
【００４３】
この編集装置１３では、読出装置１２から供給されるＤＶＤディスク１１から読み出されたシステムストリームに対して、編集範囲決定部１５において、使用者が指定した編集したい範囲（ＧＯＰ単位）に基づいて、編集範囲に相当するシステムストリーム中の映像データの区間を切り出し範囲として決定する。
【００４４】
次に、検出・ストリーム編集部１６では、編集範囲決定部１５より決定された切り出し範囲内のデータの中から復号不可能なデータをフレーム単位で切り出し範囲から除き、切り出し範囲からもれた副映像データに置換するためのスペースを確保する。
【００４５】
更に、副映像データ置換部１７では、編集範囲決定部１５にて決定された切り出し範囲の情報に基づき、切り出し範囲に相当するシステムストリーム上の副映像データの確認を行う。この際、副映像データが切り出し範囲外に存在する場合は、検出・ストリーム編集部１６にて作成したスペースに置換した上で、この置換済みシステムストリームを時間情報書き換え部１８に供給する。
【００４６】
時間情報書き換え部１８においては、検出・ストリーム編集部１７にてシステムストリーム上にスペースを確保したことに基づき、システムストリームを復号処理するための時刻の管理情報の変更を行なう。
【００４７】
ストリーム切り出し部１９は、変換済みシステムストリームから編集範囲決定部１５にて決定された切り出し範囲を切り出して、新規のシステムストリームを作成するものである。
【００４８】
ここで、検出・ストリーム編集部１６での編集処理の詳細を図５及び図６を用いて説明する。
【００４９】
図５は、編集点におけるビデオストリームの再生不可能なピクチャを説明するための図である。Ｂピクチャは、双方向予測符号化を用いて、時間的に過去および未来のＩピクチャまたはＰピクチャから予測して符号化された画像であるため、切り出し範囲の最初のＧＯＰにおいては、Ｂピクチャは復号化処理ができず、データの再生が不可能となる。
【００５０】
そこで、第２の実施の形態に示す副映像データ編集装置では、このＢピクチャのデータを削除して、編集範囲外に存在する副映像データを書き込む領域を作成し、システムストリームの編集処理を実行するものである。
【００５１】
次に、図６を用いて、システムストリーム上でのＢピクチャを削除してデータの編集を行う方法を説明する。
【００５２】
この図に示す通り、各ピクチャ（Ｉピクチャ、Ｐピクチャ、Ｂピクチャ）は複数のパケットＰＡを持ち、必ずしもピクチャ単位でパケットＰＡが完結しているとは限らず、１つのパケット内に、異なるピクチャが混在する場合がある。図６では、ＩピクチャとＢピクチャとが混在する場合の例を示している。
【００５３】
このようなデータ構造の場合、検出・ストリーム編集部１６では、まず、パック６から削除されたＢピクチャのサイズ（Ｖ（Ｂ１）＿２）を求める。次に、Ｉピクチャのデータサイズ（Ｖ（Ｉ２）＿１＋Ｖ（Ｉ２）＿２＋Ｖ（Ｉ２）＿３）を取得して、新規にパケット化する。この際、時間的に後方からパケット化し、パックを後ろ詰で配置する。そこで、先頭のパックは、後方からパケットデータＰＫＨを割り当てていくため、全てを満たされない場合には、パディングパケットＰＰ（ダミーデータの領域）のデータ領域とする。図６では、パック６からパック３に割り当て、パック３は、１パックサイズに満たなかったため、パディングパケットＰＰを挿入した例が示されており、パック１、２は、パディングパケットＰＰのみで構成されたダミーデータの領域となっている。
【００５４】
すなわち、この例では、削除したＢピクチャの領域に対して、パックを後ろ詰めでデータ再配置を行い、データの空き領域を作り、パティングパケットを挿入する領域を確保し、ダミーデータ領域としているものである。
【００５５】
このようにデータ編集されたシステムストリームに対して、編集装置１３では、次のような副映像データの編集処理を実行することで、副映像データの表示を可能としている。
【００５６】
図７は、編集装置１３での副映像データの編集を行うための処理の流れを説明するためのものである。
【００５７】
この図に示す通り、まず、編集範囲決定部１５において、システムストリーム中の映像データの区間を切り出し範囲が決定される（図７（ａ））。
【００５８】
検出・ストリーム編集部１６では、図６を用いて説明したように、副映像データに置き換えるためのダミーデータを確保したシステムストリームを生成し、副映像データ置換部１７に供給する（図７（ｂ））。
【００５９】
副映像データ置換部１７では、編集範囲決定部１３によって決定された切り出し範囲外に、切り出し範囲内に表示すべき副映像ユニットのシステムストリーム上のサブピクチャパックが存在する場合、検出・ストリーム編集部８で生成されたダミーデータに置き換える。この図に説明する例では、副映像ユニットＳＰ１のシステムストリーム上のサブピクチャＳ１が２パック存在しており、この２パックのサブピクチャＳ１をダミーパックと置換してシステムストリームを形成する（図７（ｃ））。
【００６０】
副映像データ置換部１７で置換されたシステムストリームは、時間情報書き換え部１８に供給され、システムストリームの時刻基準参照値と復号の時刻管理情報が、削除したＢピクチャのフレームの値だけ後方にずれるように、パックヘッダＰＨのＳＣＲフィールドの値を書き換える。
【００６１】
また、時間情報書き換え部１８により、パケットに含まれるＭＰＥＧビデオストリームの復号時間情報であるパケットヘッダのＤＴＳフィールドが書き換えられ、ストリーム切り出し部１９では、切り出し範囲に従ってデータの切り出し、新しいシステムストリームを作成する。このシステムストリームは、再生装置１４に供給されて再生（表示）されることとなる（図７（ｄ））。
【００６２】
この副映像データの編集方法によれば、副映像データを含むシステムストリームを編集処理する際に、必要である副映像データが編集範囲（切り出し範囲）外に存在する場合でも、編集範囲内に存在するデータのみでは復号処理できないデータを削除し、その領域に当該副映像データに書き込む処理を実施する。この処理によって、副映像データの表示の欠落を無くし、副映像データを正確に表示することができるものである。
【００６３】
そのため、この副映像データの編集処理では、既存のシステムストリームを分離して編集して再度多重化することなく、副映像データを編集することが可能であり、大幅に編集時間を削減することが可能となる。更に、元のシステムストリームに映像データ、音声データ及び副映像データ以外のパケットデータが存在しなくとも、副映像データの編集処理を可能とする。
【００６４】
尚、本発明は上述した実施の形態に限定されるものではなく、その要旨を逸脱しない範囲で種々変形実施することが可能である。
【００６５】
例えば、上記の実施例では、編集処理する対象のデータとして、ＤＶＤディスクから読出したシステムストリームを用いたが、他の記録媒体から読み出すシステムストリームでも同様に適用することが可能であり、更に、受信したデジタルテレビ信号等が入力される場合にも適用することが出来るものである。
【００６６】
【発明の効果】
以上説明した通り、本発明においては、副映像データを含むシステムストリームを編集処理する際に、映像データを基準に編集範囲を決定し、必要である副映像データが編集範囲外に存在する場合には、編集範囲内の所定の領域に当該副映像データを書き換えることによって、副映像データの表示の欠落を無くし、副映像データを正確に表示することができるものである。
【図面の簡単な説明】
【図１】本発明の実施の形態に係わる副映像データ編集装置で処理されるシステムストリームを構成するパックを説明するための図である。
【図２】本発明の実施の形態に係わる副映像データ編集装置の一構成例を示す図である。
【図３】図２に示す副映像データ編集装置での編集方法を説明するための図である。
【図４】本発明の実施の形態に係わる副映像データ編集装置の他の一構成例を説明するための図である。
【図５】図４に示す副映像データ編集装置で処理されるシステムストリームの編集点におけるＧＯＰ構成を示す図である。
【図６】図４に示す副映像データ編集装置での編集方法を説明するための図である。
【図７】同じく図４に示す副映像データ編集装置での編集方法を説明するための図である。
【符号の説明】
１、１１ … ＤＶＤディスク
２、１２ … 読出装置
３、１３ … 編集装置
４、１４ … 再生装置
５、１５ … 編集範囲決定部
６、１７ … 副映像データ置換部
７、１９ … ストリーム切り出し部
１６ … 検出・ストリーム編集部
１８ … 時間情報書き換え部

Claims

映像データ、音声データ及び副映像データ以外のパケットデータを含むシステムストリーム上の副映像データを編集する副映像データ編集装置において、
編集範囲を決定する手段と、
この決定手段にて決定された編集範囲内に相当する副映像データの存在位置を確認し、当該副映像データが編集範囲外に存在する場合には、編集範囲内に存在する前記パケットデータの位置に当該副映像データを書き込む情報書き換え手段と
を具備することを特徴とする副映像データ編集装置。
映像データ、音声データ及び副映像データ以外のパケットデータを含むシステムストリーム上の副映像データを編集する副映像データ編集方法において、
指定された編集範囲に基づいて、システムストリーム中の映像データの切り出し範囲を決定し、
この決定された切り出し範囲に相当する副映像データの存在位置を確認し、当該副映像データがシステムストリーム上に切り出し範囲外に存在する場合には、切り出し範囲内に存在する前記パケットデータの位置に当該副映像データを書き込み処理することを特徴とする副映像データの編集方法。
システムストリーム上の副映像データを編集する副映像データ編集装置において、
編集範囲を決定する手段と、
この決定手段にて決定された編集範囲内のデータの中から、この範囲内のデータのみでは復号処理が不可能なデータをフレーム単位で削除する編集手段と、
この決定手段にて決定された編集範囲内に相当する副映像データの存在位置を確認し、当該副映像データが編集範囲外に存在する場合には、前記編集手段にて削除されたデータ領域に当該副映像データを書き込む情報書き換え手段と、
を具備したことを特徴とする副映像データ編集装置。
前記システムストリームの映像データは、他のピクチャを参照せず当該ピクチャのみで符号化処理されるＩピクチャ、時間的に過去のＩピクチャ又はＰピクチャを用いて符号化処理されるＰピクチャ、及び時間的に過去と将来のＩピクチャ又はＰピクチャから予測して符号化処理されるＢピクチャの符号化画像から構成され、前記編集手段では、これらのピクチャの中からＢピクチャのデータを削除するものであることを特徴とする請求項３記載の副映像データ編集装置。
前記編集手段は、Ｂピクチャのデータを削除した領域にダミーデータを挿入する手段を更に具備し、前記情報書き換え手段では、このダミーデータを挿入した領域に編集範囲外に存在する副映像データを置換処理することを特徴とする請求項４記載の副映像データ編集装置。
前記編集手段は、Ｂピクチャのデータを削除した領域に対して、他のデータを再配置処理してダミーデータを挿入する領域を確保するために、他のＩピクチャ及び／又はＰピクチャのデータを再配置処理することを特徴とする請求項５記載の副映像データ編集装置。
システムストリーム上の副映像データを編集する副映像データ編集方法において、
指定された編集範囲に基づいて、システムストリーム中の映像データの切り出し範囲を決定し、
この決定された切り出し範囲内のデータの中から、この範囲内のデータのみでは復号処理が不可能なデータをフレーム単位で削除し、
前記切り出し範囲に相当する副映像データの存在位置を確認し、当該副映像データがシステムストリーム上の切り出し範囲外に存在する場合には、前記フレーム単位で削除されたデータ領域に当該副映像データを書き込み処理することを特徴とする副映像データの編集方法。
前記システムストリームの映像データは、他のピクチャを参照せず当該ピクチャのみで符号化処理されるＩピクチャ、時間的に過去のＩピクチャ又はＰピクチャを用いて符号化処理されるＰピクチャ、及び時間的に過去と将来のＩピクチャ又はＰピクチャから予測して符号化処理されるＢピクチャの符号化画像から構成され、
切り出し範囲内のデータのみでは復号処理が不可能なデータをフレーム単位で削除する際には、これらのピクチャの中からＢピクチャのデータを削除するものであることを特徴とする請求項７記載の副映像データ編集方法。
Ｂピクチャのデータを削除する際には、この削除した領域にダミーデータを挿入し、このダミーデータを挿入した領域に編集範囲外に存在する副映像データを置換処理することを特徴とする請求項８記載の副映像データ編集方法。
ダミーデータを挿入する際には、Ｂピクチャのデータを削除した領域に対して、他のデータを再配置処理してダミーデータを挿入する領域を確保するために、他のＩピクチャ及び／又はＰピクチャのデータを再配置処理することを特徴とする請求項９記載の副映像データ編集方法。