JPH11266431A

JPH11266431A - ビデオ編集方法及び装置

Info

Publication number: JPH11266431A
Application number: JP10340575A
Authority: JP
Inventors: Shanwei Cen; シャンウェイ・セン; Theodore O Brunner; セオドア・オー・ブランナー
Original assignee: Tektronix Inc
Current assignee: Tektronix Inc
Priority date: 1997-12-17
Filing date: 1998-11-30
Publication date: 1999-09-28
Also published as: EP0926678A3; EP0926678A2

Abstract

(57)【要約】【課題】ＭＰＥＧビデオ・ストリームのクリップをビ
デオ・セグメントにカットしたり連結して編集を行う。【解決手段】制御器11がビデオ・クリップからビデオ
・セグメントを選択し、これらセグメントのフレームの
関連リストを補助ストレージ15に蓄積する。リエンコー
ダ９は、選択された複数のセグメント間のカット・ポイ
ントにおける圧縮済み予測フレームを、デコード可能な
圧縮済み独立フレームに再エンコードする。デコーダ13
が蓄積されたリストに応じてフレーム連続的にデコード
する期間中に、選択されたセグメントの間の各カット・
ポイントになると、圧縮済み予測フレームを再エンコー
ドされた圧縮済み独立フレームに置き換える。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、一般に、デジタル
・ビデオの編集方法及び装置に関し、特に、動き予測圧
縮済み（動き予測により圧縮した）デジタル・ビデオ・
ストリームを編集するために、このビデオ・ストリーム
のクリップをビデオ・セグメントに切断（カット）した
り、これらビデオ・セグメントを連結する方法及び装置
に関する。

【０００２】

【従来の技術】ビデオにおいて、動き予測（動き補償予
測）を用いた圧縮規格の例は、ムービング・ピクチャ・
エキスパート・グループ（ＭＰＥＧ）圧縮標準規格であ
る。ＭＰＥＧ（ＩＳＯ／ＩＥＣ１１１７２−２及び１３
８１８−２）は、動き予測技術を用いて、高圧縮率を達
成できる。圧縮済みＭＰＥＧビデオ・ストリームは、
Ｉ、Ｐ及びＢフレームのシーケンスで構成されている。
独立（Ｉ）フレームは、それ自体が画像情報であり、動
き予測を行っていない。一方、予測（Ｐ又はＢ）フレー
ムは、現在のフレームと、これから又は過去の基準フレ
ームとの差を示す。動き予測によって、ＭＰＥＧビデオ
には、ジョイント・フォトグラフィク・エキスパート・
グループ（ＪＰＥＧ）標準規格の如き他の圧縮規格より
も、必要な帯域幅（ビット・レート）が低いという利点
がある。一方、動き予測によって、ＭＰＥＧビデオの編
集は、一層複雑である。ＭＰＥＧビデオは、再生の速度
の可変、順方向及び逆方向の再生、フレームの正確なラ
ンダム・アクセス、フレームの正確なカット・イン（レ
ベルを瞬間的に上げること）及びカット・アウト（レベ
ルを瞬間的に下げること）が困難なため、ＭＰＥＧビデ
オの編集は容易でない。

【０００３】ビデオ編集システムには、２つの構成要
素、即ち、ビデオ・メディア・ストレージ・サーバー及
び編集器（エディタ）がある。ビデオ・メディア・スト
レージ・サーバーは、編集中に変化しない複数のソース
・ビデオ・クリップ（ビデオ信号源としての一連のシー
ンの画像）を蓄積している。ソース・ビデオ・クリップ
を単にビデオ・クリップ又はソース・クリップと呼ぶこ
ともある。編集器を用いて、ビデオ・メディア・ストレ
ージ・サーバーから複数のビデオ・クリップを調べ、こ
れら複数のビデオ・クリップから複数のセグメントを識
別する。また、識別した複数のセグメントの関連性を示
す複数の編集決定リスト（エディット・デシジョン・リ
スト：ＥＤＬ）を作成する。なお、ビデオ・クリップを
切断して、複数のビデオ・セグメントを構成する。編集
器は、合成したビデオ・クリップをこのＥＤＬに応じて
再生できるようにする必要がある。すなわち、ＥＤＬに
は、かかる作用がある。この編集器は、カット・イン・
ポイント及びカット・アウト・ポイントを越えても、ま
た逆方向及び順方向でも、滑らかに再生できる必要があ
る。

【０００４】

【発明が解決しようとする課題】複数のカット・ポイン
ト（切断点：切断された位置）を越えて再生しようとす
る際、フレームの境界で、ソース・ビデオ・クリップの
セグメントを単純に切断（カット）し、これら切断され
たセグメントを互いに連結するだけでは、充分でない。
これは、再生するのに必要なカット・イン・ポイント及
びカット・アウト・ポイントに近いいくつかのＰフレー
ム又はＢフレームは、これらＰ又はＢフレームの基準フ
レームがセグメントから失われているので、デコードが
できないためである。

【０００５】カット・ポイントに近いＰ及びＢフレーム
を再エンコード（re-encode）する従来方法が存在する
が、この方法では、２個のデコーダを必要とするために
高価であり、また、逆方向再生ができないために用途が
制限された。

【０００６】したがって、多数のデコーダを必要とせず
に、カット・イン・ポイント及びカット・アウト・ポイ
ントを越えて順方向及び逆方向に編集器が滑らかにビデ
オ・シーケンスを再生できるようにした安価な動き予測
圧縮ビデオ編集システムが望まれている。

【０００７】

【課題を解決するための手段】本発明の方法及び装置に
よれば、動き予測圧縮形式のソース・ビデオ・クリップ
を複数のセグメントに切断（カット）し、これらセグメ
ントを連結して、カット・イン・ポイント及びカット・
アウト・ポイントを越えて滑らかに再生できる。ビデオ
・セグメント内でのカット・イン・ポイント及びカット
・アウト・ポイント付近で、それ自体のみではデコード
できないＰ及びＢフレームは、ビデオ・セグメントが識
別されるたびに、デコードされて、Ｉフレームに再エン
コードされる。元（オリジナル）のフレーム及び再エン
コードされたフレームと、セグメント内の識別フレーム
に関連したデータ構造（関連性のデータ）と共に、再エ
ンコードされたＩフレームは、編集器内部の補助ストレ
ージ（蓄積手段）内に蓄積される。ＥＤＬに応じた再生
期間中、データ構造を調べて、どのフレームを再生する
かを決定すると共に、オリジナル・フレーム又は再エン
コードしたフレームを使用するかを決定する。カット・
イン・ポイント及びカット・アウト・ポイントを越え
て、ＥＤＬに応じた滑らかな再生が行わうが、この際、
デコーダは、単一のＭＰＥＧデコーダのみを用い、ま
た、メディア・ストリーム・サーバーに蓄積された複数
のソース・ビデオ・クリップを変化させない。

【０００８】本発明のその他の目的、利点及び新規な特
徴は、添付図を参照した以下の説明から明らかになろ
う。

【０００９】

【発明の実施の形態】図１は、本発明によるビデオ編集
システムのブロック図である。この動き予測圧縮ビデオ
編集システムは、ビデオ・メディア・ストレージ・サー
バー５を具えており、このサーバー５は、種々のソース
・ビデオ・クリップを蓄積し、これらソース・ビデオ・
クリップを読み出して、ビデオ編集器７に供給する。ビ
デオ編集器７は、複数のソース・ビデオ・クリップから
セグメントを切断（カット）し、これらカットしたセグ
メントを連結する。そして、ビデオ編集器７は、ビデオ
・メディア・ストレージ・サーバー５に蓄積されている
ソース・ビデオを変更しないで、編集結果であるビデオ
・ストリームを順方向又は逆方向に種々の速度で出力で
きる。

【００１０】図２は、図１に示す編集器７の詳細なブロ
ック図である。ビデオ・メディア・ストレージ・サーバ
ー５からのビデオが制御器１１に入力すると、選択され
たセグメントが識別される。よって、この制御器１１
は、選択手段としても機能する。編集器が合成ビデオ・
クリップを再生する際に、これら識別されたセグメント
は、制御器１１による編集決定リスト（ＥＤＬ）に応じ
て関連付けられる。ＥＤＬと共に、このＥＤＬ上で識別
された複数のセグメント内の複数のフレームに対する複
数のインデックス・ポインタを補助ストレージ装置１５
内に蓄積する。なお、この補助ストレージ装置１５は、
制御器１１に結合している。また、ビデオ・メディア・
ストレージ・サーバー５に蓄積されているソース・ビデ
オ素材は、変更されない。

【００１１】選択された各セグメントが識別されると、
識別されたセグメントの初め及び終わりにおけるそのセ
グメント内のそれ自体のみではデコードできないＰ及び
Ｂフレームを、隣接するフレームからの情報を用いて、
デコーダ１３がデコードし、リエンコーダ（再度エンコ
ードを行う再エンコード手段）９が、これらデコードさ
れたＰ及びＢフレームをＩフレームに再エンコードす
る。デコーダ１３及びリエンコーダ９の両方は、制御器
１１及び補助ストレージ装置１５に結合している。よっ
て、制御器１１は、リエンコーダ９に対してエンコード
を制御し、デコード１３に対してエンコードを制御し、
補助ストレージ装置１５に対して蓄積を制御する。再エ
ンコードされたＩフレームは、独立でデコードできる独
立フレームであり、補助ストレージ装置１５に蓄積され
る。再エンコードされたＩフレーム及びそのオリジナル
のフレームの間の関連は、後で参照するために、補助ス
トレージ装置１５に蓄積される。必要に応じて、これら
再エンコードされたＩフレームや、この再エンコードさ
れたＩフレームに隣接したり、付近に存在するＩフレー
ムの順序を整理し直す。これは、補助ストレージ装置１
５内に蓄積されたセグメント内のフレームに対するイン
デックス・ポインタを更新することにより実施する。こ
の方法においては、これらセグメントを、両方向且つ可
変速度での再生に組み込める。識別した各セグメントの
終わり及び初め（カット・ポイント）におけるフレーム
も、滑らかに順方向及び逆方向に再生できる。なお、逆
方向の再生自体に関しては、本願出願人に譲渡されたア
メリカ合衆国特許第５７３９８６２号（特開平１０−１
９１２５９号公報に対応）にも記載されている。

【００１２】カット・ポイントの付近のどのＰ及びＢフ
レームを再エンコードするか、これらを囲むどのフレー
ムの順序を整理し直すかは、これらカット・ポイント付
近のフレームの形式に依存する。再エンコードされたフ
レーム及びこれらを囲むフレームを本発明に応じてどの
ように順序を再整理するかを説明するために、Ｐ及びＢ
フレーム（圧縮済み予測フレーム）の再エンコードと、
これらを囲むフレームの順序を再整理するかのいくつか
の例を図３に示す。ビデオ・メディア・ストレージ・サ
ーバー５に蓄積されたビデオ・クリップの表示順序及び
ビットストリーム順序の例を図３に示す。クリップの中
央でカットすると、２つの識別されたセグメントとな
る。セグメント１はカット・アウト・ポイントに関係
し、セグメント２はカット・イン・ポイントに関係す
る。Ｉ３、Ｂ４及びＢ５（表示順）の後のカットの典型
的な３例において、それのみではデコードできないＢフ
レームの再エンコードの後における結果は、図３の表に
列挙したフレームの順序となる。この表のセグメント・
フレームをビットストリーム順に示す。［］内のフレー
ムが再エンコードされたＩフレームを示し、（）内のフ
レームが順序の再整理されたフレームを示す。

【００１３】よって、ＥＤＬ上識別されたビデオ・セグ
メントが再生される。編集器は、制御器１１を用いるこ
とにより、ＥＤＬ上で識別されたビデオ・セグメントに
対応するインデックス・ポインタであって、補助ストリ
ーム装置１５に蓄積されたインデックス・ポインタを試
験する。また、デコーダ１３を用いて、これらインデッ
クスで指定されたフレームを表示用にデコードする。再
エンコードされたＩフレームが、補助ストリーム装置１
５内に蓄積されたフレームから見つかると、その再エン
コードされたフレームがデコーダ１３によりデコードさ
れて、オリジナルのフレームの代わりに表示される。す
なわち、制御器１１は、連続的なデコード期間中に、複
数の選択されたセグメントの間の各カット・ポイントに
なると、圧縮済み予測フレームを再エンコードされた圧
縮済み独立フレームに置き換える置換手段としても作用
する。そして、デコーダ１３が、この再エンコードされ
た圧縮済み独立フレームをデコードする。

【００１４】それ自体のみではデコードできないＰ及び
Ｂフレームの総てが再エンコードされるまで、ＥＤＬに
応じた再生を阻止する。また、カット・ポイントまで再
生がいっていない場合、再エンコード処理と並列にＥＤ
Ｌによる再生を行う。これらの動作は、制御器１１が制
御する。しかし、この阻止動作は、編集器７の応答に意
味ない制限を課すこともある。各セグメントを識別した
後に、操作者がマウスを動かしたりボタンを押したりす
るのにかかる時間は、操作者に固有の動作の遅延である
が、この遅延時間は、再エンコード処理を完了するのに
充分な時間である。これは、各カット・ポイントにおい
て、わずかな数のＰ及びＢフレームをＩフレームに再エ
ンコードする必要があるが、動き予測にかかる時間がな
いので、再エンコード処理が、簡単且つ短時間にできる
ためである。

【００１５】本発明の好適実施例について説明したが、
本発明の要旨を逸脱することなく、上述の特定実施例に
対して、必要に応じた手段の付加、削除及び他の変更が
可能である。

【００１６】

【発明の効果】上述の如く、本発明によれば、デコード
動作中に、複数の選択されたセグメントの間のカット・
ポイントになると、圧縮済み予測フレームを、再エンコ
ードされた圧縮済み独立フレームに置き換える。よっ
て、多数のデコーダを必要としないで、カット・イン・
ポイント及びカット・アウト・ポイントを越えて、順方
向及び逆方向に編集器が滑らかな再生をできるようにし
て、安価な動き予測圧縮ビデオ編集システムを提供でき
る。

【図面の簡単な説明】

【図１】本発明によるビデオ編集システムのブロック図
である。

【図２】本発明に用いる動き予測圧縮ビデオ編集器のブ
ロック図である。

【図３】本発明により、編集カット・ポイント近傍でフ
レームをどのように再エンコードするかを示す一例の説
明図である。

【符号の説明】

５ビデオ・メディア・ストレージ・サーバー７ビデオ編集器９リエンコーダ（再エンコード手段）１１制御器（選択手段／置換手段）１３デコーダ１５補助ストレージ装置

───────────────────────────────────────────────────── フロントページの続き (72)発明者セオドア・オー・ブランナーアメリカ合衆国オレゴン州 97210 ポートランドノース・ウェストラレイ 2845

Claims

【特許請求の範囲】

【請求項１】圧縮済みビデオ・セグメントを編集用に
切断及び連結する方法であって、特定順序で合成して再生するために、蓄積されたビデオ
・クリップからビデオ・セグメントを選択し、上記選択されたビデオ・セグメントのフレームの関連性
を蓄積し、複数の上記選択されたビデオ・セグメントの間のカット
・ポイントにおける圧縮済み予測フレームを、デコード
可能な圧縮済み独立フレームに再エンコードし、蓄積された上記フレームの関連性に応じて、上記選択さ
れたセグメントのフレームを再生するために、単一のデ
コーダを用いて連続的にデコードし、この連続的なデコード期間中に複数の上記選択されたセ
グメントの間の各カット・ポイントになると、上記圧縮
済み予測フレームを上記再エンコードされた圧縮済み独
立フレームに置き換えることを特徴とするビデオ編集方
法。
【請求項２】圧縮済みビデオ・セグメントを編集用に
切断及び連結する装置であって、特定順序で合成して再生するために、蓄積されたビデオ
・クリップからビデオ・セグメントを選択する選択手段
と、上記選択されたビデオ・セグメントのフレームに対する
関連性を蓄積する手段と、複数の上記選択されたビデオ・セグメントの間のカット
・ポイントにおける圧縮済み予測フレームを、デコード
可能な圧縮済み独立フレームに再エンコードする再エン
コード手段と、蓄積された上記フレームの関連性に応じて、上記選択さ
れたセグメントのフレームを再生するために、連続的に
デコードする単一のデコーダと、この連続的なデコード期間中に複数の上記選択されたセ
グメントの間の各カット・ポイントになると、上記圧縮
済み予測フレームを上記再エンコードされた圧縮済み独
立フレームに置き換える置換手段とを具えたビデオ編集
装置。
【請求項３】圧縮済みビデオを編集するシステムであ
って、ビデオ・メディア・ストレージ・サーバーと、該ビデオ・メディア・ストレージ・サーバーに結合さ
れ、上記サーバーから複数のビデオ・クリップを読み出
し、該ビデオ・クリップから再生用に複数のビデオ・セ
グメントを選択し、該複数のビデオ・セグメント内のフ
レームを再配列し、上記複数のビデオ・セグメントに対
するデコード、エンコード及び蓄積を指示する制御器
と、上記制御器に結合され、選択されたカット・ポイント
で、圧縮済み予測フレームを圧縮済み独立フレームに再
エンコードするリエンコーダと、該リエンコーダ及び上記制御器に結合され、上記再エン
コードされた圧縮済み独立フレーム、及び再生用に選択
されたビデオ・セグメント・フレームの基準を蓄積する
補助ストレージ装置と、該補助ストレージ装置及び上記制御器に結合され、上記
選択されたビデオ・セグメント・フレーム及び再エンコ
ードされた圧縮済み独立フレームの関連性に応じて、圧
縮済み予測ビデオ・ストリームを実時間でデコードして
再生する単一のデコーダとを具えたビデオ編集システ
ム。