JP2006121415A - 動画符号化装置 - Google Patents

Abstract

【課題】ＧＯＰのフレーム数を変化させることなく、後の編集に適した符号化を行うことができる動画符号化装置を提供すること。
【解決手段】画像データ入力部２１に動画像データが入力されると、この動画像データがフレーム単位で画像バッファ２２に記憶される。画像バッファ２２からはフレーム単位で動画像データが出力され、符号化部２３で符号化される。このときの符号ビットレートが編集ポイント判断部２６に出力される。符号ビットレートが所定のビットレートスレッシュ以上の場合には、符号化方法切替部２７から切替信号が出力される。これを受けて符号化部２３では、符号化が一旦中断され、符号化方法の切り替えが行われた後で、編集ポイントを含むＧＯＰの先頭フレームから再び符号化が開始される。
【選択図】 図２

Description

本発明は、動画像データを符号化する動画符号化装置に関する。

動画像データを符号化する際には、ＭＰＥＧ（Moving Picture Expert Group）Ｖｉｄｅｏ方式に準拠した符号化が用いられることが多い。このＭＰＥＧ符号化では、静止画と同様のＤＣＴ（Discrete Cosine Transform 離散コサイン変換）符号化と動き補償フレーム間予測とを組み合わせた符号化を行うことにより、画像の時間方向、空間方向の冗長度を効率良く除去して、極めて高い圧縮率の圧縮を行うことができる。

ここで、動き補償フレーム間予測を利用した符号化は圧縮率の高い符号化を行うことができるが、動画像を任意のポイントで再生するという点には向いていない。そこで、ＭＰＥＧ符号化においては、ＧＯＰ（Group Of Pictures）という複数のフレームからなる単位毎に符号化を行うようにして、任意のポイントで動画像を再生できるようにしている。

しかしながら、ＧＯＰ内で大きなシーンチェンジがある場合やユーザによって編集がなされた場合には、そのまま符号化を行ってしまうと符号化時に画質が劣化してしまうおそれがある。

そこで、特許文献１ではシーンチェンジが発生した場合に、シーンチェンジ前の符号データ系列とシーンチェンジ後の符号データ系列とをそれぞれ異なる系列のＧＯＰで構成し直すようにして符号化を行うようにしている。このような手法により、例えシーンチェンジがある画像であっても画質の劣化を起こさずに符号化を行うことができる。
特開平９−５１５３８号公報

一般にＭＰＥＧ符号化においては、１ＧＯＰを構成するフレーム数が一定であるが、特許文献１の手法ではシーンチェンジが発生したフレームの前後においてＧＯＰを構成し直すので、その部分のＧＯＰのフレーム数が他の部分のＧＯＰのフレーム数よりも減少してしまう。１ＧＯＰのフレーム数が一定であれば、符号データ中から任意のＧＯＰの先頭フレームを容易に検出することができるのでデータ管理がしやすい。しかしながら、１ＧＯＰのフレーム数が変化してしまうとＧＯＰの先頭フレームを検出しにくくなり、データ管理が複雑化するおそれがある。

また、例えばテレビ放送を録画して得られた動画像を編集する場合などにおいては、ユーザによって編集される可能性が高いポイントをある程度予測することができるので、そのようなポイントで編集がなされた場合に画質が劣化しないような工夫を録画時（ＭＰＥＧ符号化時）に行えるようにしておくことが好ましい。

本発明は、上記の事情に鑑みてなされたもので、ＧＯＰのフレーム数を変化させることなく、後の編集に適した符号化を行うことができる動画符号化装置を提供することを目的とする。

上記の目的を達成するために、本発明の第１の態様による動画符号化装置は、複数フレームからなる動画像データをＭＰＥＧ方式に準じた方式で符号化する動画符号化装置であって、上記動画像データに編集に適しているフレームが存在するか否かを判断する編集領域判断手段と、上記編集領域判断手段の判断結果に基づいて、上記符号化の際の符号化方法を一定のＧＯＰ単位毎に切り替える符号化方法切替手段とを具備することを特徴とする。

また、上記の目的を達成するために、本発明の第２の態様による動画符号化装置は、複数のフレームから構成される動画像データを入力する画像データ入力手段と、上記動画像データの中で編集対象となるフレームが存在するか否かを判断する編集領域判断手段と、上記動画像データを一定のＧＯＰ単位毎にフレーム内符号化とフレーム間符号化とを組み合わせて符号化する第１の符号化と、上記動画像データを上記一定のＧＯＰ単位毎にフレーム内符号化のみで符号化する第２の符号化の何れかにより上記動画像データを符号化すると共に、上記編集対象となるフレームが存在すると判断された場合には、上記動画像データの上記編集対象となるフレームを含むＧＯＰ単位を上記第２の符号化によって符号化する符号化手段と、上記符号化手段で符号化されて得られた符号データを出力する符号データ出力手段とを具備することを特徴とする。

上記の目的を達成するために、本発明の第３の態様による動画符号化装置は、複数のフレームから構成される動画像データを入力する画像データ入力手段と、上記画像データ入力手段によって入力された動画像データを一定のＧＯＰ単位で符号化する符号化手段と、上記動画像データの中で編集対象となるフレームが存在するか否かを判断する編集領域判断手段と、上記編集領域判断手段により、上記動画像データの中で編集対象となるフレームが存在すると判断された場合に、上記編集対象となるフレームを含むＧＯＰ単位を符号化する際の符号化方法を第１の符号化から第２の符号化に切り替える符号化方法切替手段と、上記符号化方法切替手段による符号化方法の切り替えに応じて上記符号化手段で符号化されて得られた符号データを出力する符号データ出力手段とを具備することを特徴とする。

これら、第１〜第３の態様によれば、編集対象となるフレームを含むＧＯＰ単位の符号化方法を他のＧＯＰ単位の符号化と異なる符号化方法にすることで、ＧＯＰのフレーム数を変えずに後の編集に適した符号化を行うことができる。

本発明によれば、ＧＯＰのフレーム数を変化させることなく、後の編集に適した符号化を行うことができる動画符号化装置を提供することができる。

以下、図面を参照して本発明の実施形態を説明する。

［第１の実施形態］
図１は、本発明の第１の実施形態に係る動画符号化装置の一例としてのデジタルビデオレコーダの構成について示す図である。この図１のデジタルビデオレコーダは、撮像素子１を介して撮像された動画像や、図示しない放送局から放送されたデジタルテレビ放送やアナログテレビ放送などによって放送された動画像、デジタルビデオ再生機器やアナログ再生機器から入力された動画像を記録することができるものを想定している。

図１に示すデジタルビデオレコーダは、撮像素子１と、ＡＤ変換部（図ではＡＤＣと記している）２と、バス３と、デジタルチューナ４と、ＭＰＥＧデコーダ５と、アナログチューナ６と、ビデオデコーダ７と、ＤＲＡＭ８と、ＣＰＵ９と、ＭＰＥＧエンコーダ１０と、ＤＲＡＭ１１と、記録媒体１２と、ビデオエンコーダ１３とから構成されている。

図１において、撮像素子１において得られた動画像は、ＡＤＣ２においてデジタルの動画像データに変換される。この動画像データがバス３を介してフレーム単位でＤＲＡＭ８に入力されてＤＲＡＭ８に一時記憶される。

また、デジタルテレビ放送などによって放送された動画像はデジタルチューナ４を介してＭＰＥＧデコーダ５に入力され、ＭＰＥＧデコーダ５において復号化される。そして、復号化されて得られた動画像データがフレーム単位でバス３を介してＤＲＡＭ８に入力されて一時記憶される。

また、デジタルビデオ再生機器から入力された動画像はＭＰＥＧデコーダ５において復号化され、復号化されて得られた動画像データがバス３を介してフレーム単位でＤＲＡＭ８に入力されて一時記憶される。

また、アナログテレビ放送はアナログチューナ６を介してビデオデコーダ７に入力されてアナログ映像信号に変換され、更にこのアナログ映像信号がデジタル化される。このデジタル化されて得られた動画像データがバス３を介してフレーム単位でＤＲＡＭ８に入力されて一時記憶される。

また、アナログビデオ再生機器から入力された動画像はビデオデコーダ７を介してデジタル化され、デジタル化されて得られた動画像データがバス３を介してフレーム単位でＤＲＡＭ８に一時記憶される。

ＤＲＡＭ８にフレーム単位で記憶された動画像データは、所定のタイミング毎にフレーム単位で順次ＭＰＥＧエンコーダ１０に転送される。このときの転送タイミングはＣＰＵ９によって制御される。なお、ＣＰＵ９では、動画像データの転送タイミングの制御の他に、デジタルビデオレコーダ全体の各種制御も行われる。

ＭＰＥＧエンコーダ１０では、フレーム単位で入力された動画像データがＭＰＥＧ方式により符号化され、その後、所定のＭＰＥＧ規則に則ってＭＰＥＧデータが生成される。また、このときにはＤＲＡＭ１１がフレームバッファメモリとして用いられる。なお、ＤＲＡＭ１１のような専用のフレームバッファメモリを持たせずにＤＲＡＭ８をフレームバッファメモリとして用いるようにしても良い。

ＭＰＥＧエンコーダ１０において得られたＭＰＥＧデータはＤＲＡＭ８に記憶される。その後、このＭＰＥＧデータに所定のＭＰＥＧヘッダ情報が付加されてＭＰＥＧファイルが生成され、このＭＰＥＧファイルが、例えばＦＬＡＳＨメモリや書き込み型光ディスク、ハードディスクドライブ（ＨＤＤ）などの記録媒体１２に記録される。

また、動画再生時には、ＡＤＣ２、ＭＰＥＧデコーダ５、ビデオデコーダ７から転送されてＤＲＡＭ８に記憶された動画像データがフレーム単位でビデオエンコーダ１３に転送され、ビデオエンコーダ１３を介して表示手段としてのテレビモニタなどに動画像が表示される。

以下、本発明の第１の実施形態に係る動画符号化装置について更に詳しく説明する。図２（ａ）は、図１の構成において、第１の実施の形態に係る動画符号化装置に関する構成を概念的に示した図である。

ここで、図２（ａ）の画像データ入力部２１は図１のデジタルチューナ４、ＭＰＥＧデコーダ５、アナログチューナ６、ビデオデコーダ７、及びＡＤＣ２に対応する。また、画像バッファ２２はＤＲＡＭ８に対応する。符号化部２３及び符号データ出力部２５はＭＰＥＧエンコーダ１０が対応する。また、符号バッファ２４はＤＲＡＭ１１に対応する。

図２（ａ）において、デジタルテレビ放送やアナログテレビ放送、デジタルビデオ再生機やアナログビデオ再生機、撮像素子などといった画像ソースから入力された動画像は、画像データ入力部２１に入力されて、それぞれ動画像データに変換される。画像データ入力部２１で得られた動画像データはフレーム単位で画像バッファ２２に一時記憶される。画像バッファ２２にフレーム単位で記憶された動画像データは所定タイミング毎にフレーム単位で符号化部２３に出力される。符号化部２３ではフレーム単位で入力された動画像データのＭＰＥＧ符号化が行われる。ここでの符号化は、ＧＯＰと呼ばれる複数フレームからなる単位毎に行われる。以後、このようなＧＯＰ単位毎の符号化をＧＯＰ符号化と呼ぶことにする。ＧＯＰ符号化によって得られた符号データは、符号バッファ２４に一時記憶される。符号データ出力部２５では、符号バッファ２４に記憶された符号データがＭＰＥＧ規則に則って編成されてＭＰＥＧデータが生成され、このＭＰＥＧデータに所定のＭＰＥＧヘッダ情報が付加されて、ＦＬＡＳＨメモリや書き込み型光ディスク、ＨＤＤといった記録手段としての記録媒体に記録される。

図３（ａ）は、符号化部２３で行われる通常のＧＯＰ符号化（第１の符号化）によって生成されたＭＰＥＧデータのＧＯＰ層のデータストリームについて示した図である。ここで、ＧＯＰには１つのＧＯＰ毎に所定のＧＯＰヘッダが付加されるが、ここではＧＯＰヘッダの図示を省略している。

第１の符号化時には、フレーム内符号化（Ｉフレーム符号化）とフレーム間符号化（Ｐフレーム符号化及びＢフレーム符号化）とを組み合わせた符号化が行われる。Ｉフレーム符号化は静止画の場合と同様のＤＣＴ符号化のみで符号化を行う。また、Ｐフレーム符号化は１つ前のＩフレーム若しくはＰフレームに基づく前方向予測とＤＣＴ符号化とを組み合わせた符号化を行う。例えば、図３（ａ）の４フレーム目のＰフレームは１フレーム目のＩフレームにおける動きベクトルに基づいて予測符号化が行われ、図３（ａ）の７フレーム目のＰフレームは４フレーム目のＰフレームにおける動きベクトルに基づいて予測符号化が行われる。更に、Ｂフレームでは前後のＩフレーム若しくはＰフレームに基づく両方向予測とＤＣＴ符号化とを組み合わせた符号化が行われる。例えば、２フレーム目及び３フレーム目のＢフレームは１フレーム目のＩフレームにおける動きベクトルと４フレーム目のＰフレームにおける動きベクトルとに基づいて予測符号化が行われる。

一般に、ＧＯＰ符号化時には、まず、Ｉフレーム符号化が行われ、次にＰフレーム符号化が行われ、最後にＢフレーム符号化が行われる。このため、符号データ出力部２５では、符号化部２３において得られた符号データをＭＰＥＧ規則に則って時系列順に編成する処理が行われる。これにより、図３（ａ）に示すようにＭＰＥＧデータの１ＧＯＰはＩＢＢＰＢＢＰＢＢＰＢＢＰＢの１５フレームにより構成される。

図３（ａ）のような構造を有するＭＰＥＧデータにおいて、例えばＧＯＰ内の５フレーム目のＢフレームが、ユーザによる後の編集操作によってカットされた場合、ＧＯＰの構成が変わるので、編集されたフレームを含むＧＯＰ内フレームは再び符号化し直す必要があり、画質が劣化してしまう。

そこで、第１の実施形態では、動画像データを符号化する際に、編集に適したフレーム（編集ポイント）を判断できるようにしておき、ＧＯＰ内に編集ポイントが存在する場合には、編集ポイントを含むＧＯＰを、第１の符号化とは異なる第２の符号化によって符号化するように符号化方法を切り替えることで、後でユーザによって編集が行われても画質が劣化しないようにする。また、後のデータ管理を容易にするために、第２の符号化による符号化時にも１ＧＯＰのフレーム数が変化しないような符号化を行う。このために、第１の実施形態では、編集領域判断手段としての編集ポイント判断部２６及び符号化方法切替手段としての符号化方法切替部２７が設けられている。これらは、図１のＣＰＵ９やＭＰＥＧエンコーダ１０の内部に設けるようにしても良いし、これらとは別に設けるようにしても良い。

即ち、第１の実施形態では、符号化部２３においてフレーム単位で動画像データの符号化を行う際に、そのときの符号ビットレート（単位時間あたりの符号データ量）を求めるようにしておく。ここで求められた符号ビットレートに基づいて編集ポイント判断部２６において現在のフレームが編集ポイントであるか否かが判断される。

図２（ｂ）は第１の実施形態における編集ポイント判断部２６の内部構成について示す図である。図２（ｂ）に示すように、第１の実施形態における編集ポイント判断部２６には、コンパレータ２６ａが設けられている。図２（ｂ）において、コンパレータ２６ａの一方の入力には符号化部２３からの符号ビットレートが入力され、他方の入力には予め設定された所定のビットレートスレッシュが入力される。コンパレータ２６ａでは、符号ビットレートが所定のビットレートスレッシュよりも高い場合にそのフレーム画像が編集ポイントであると判断される。このような符号ビットレートを持つフレームは、動きの激しいフレームや大きなシーンチェンジが発生したフレームである。このようなフレームは、後での編集に適している編集対象のフレームとして、このフレームを含むＧＯＰの符号化方法を切り替えるようにする。

即ち、編集ポイント判断部２６における判断の結果、符号化方法を切り替える必要があると判断された場合には、符号化方法切替部２７から画像バッファ２２及び符号化部２３に切替信号が出力される。この切替信号を受けて符号化部２３では現在の符号化が中断され、符号方法が第１の符号化から第２の符号化に切り替えられる。ここで、切替信号の出力タイミングはＣＰＵ９によって行われる。即ち、図２（ｂ）のコンパレータ２６ａにＣＰＵ９からの切替タイミング制御信号が入力された場合にのみ、符号化方法切替部２７から切替信号が出力される。

また、切替信号を受けた画像バッファ２２においては、符号化が中断されたＧＯＰの先頭フレームを再び出力する処理がなされる。このために、画像バッファ２２では、少なくともＧＯＰ符号化が終了するまでは、符号化対象のＧＯＰの動画像データを記憶しておくようにする。

画像バッファ２２からＧＯＰの先頭フレームが再び入力されると符号化部２３において第１の符号化とは異なる第２の符号化によって符号化が行われる。第２の符号化によって生成された符号データは、符号バッファ２４に記憶される。

ここで、符号バッファ２４は、第１の符号化によって生成された符号データと第２の符号化によって生成された符号データの２種類の符号データを記憶できるようにしておくか、第２の符号データによって生成された符号データで第１の符号データによって生成された符号データを上書きできるようにしておく。

次に、上記第２の符号化について説明する。この第２の符号化には、例えば以下に示す２通りの方法がある。

まず、第２の符号化の第１の手法は、図３（ｂ）に示すように編集ポイントを含むＧＯＰを全てＩフレーム符号化する方法である。このように符号化を行えば、後でＧＯＰ内の何れのフレームにおいて編集が行われても、再び符号化し直す必要がないので、編集後の動画像の画質を劣化させることのない符号化を行うことができる。また、１ＧＯＰのフレーム数が変化することもない。

また、第２の符号化の第２の手法は、第１の符号化と同様にＧＯＰをＩＢＢＰフレーム符号化するが、図３（ｃ）に示すように符号化時のＧＯＰの目標符号量（第２の目標符号量）Ｂを第１の符号化による符号化時の目標符号量（第１の目標符号量）Ａよりも大きくした状態で符号化する。なお、このときの目標符号量変更の指示はＣＰＵ９によって行われる。このような第２の手法による符号化は、編集ポイントを含むＧＯＰを他のＧＯＰよりも高画質に符号化しておくことに相当する。このような符号化により、後で編集がなされた場合でも、編集ポイントを含むＧＯＰの画質を他のＧＯＰに比べて高めてあるので、再符号化による画質の劣化を相対的に少なくすることができる。また、１ＧＯＰのフレーム数が変化することもない。

図４は、第１の実施形態に係る動画符号化装置におけるＧＯＰ符号化処理における処理手順について示したフローチャートである。

ＣＰＵ９の指示を受けて、画像バッファ２２から符号化部２３に動画像データがフレーム単位で入力されると（ステップＳ１）、フレーム単位で入力された動画像データがＩＢＢＰ符号化される（ステップＳ２）。また、このときの符号ビットレートが求められ、求められた符号ビットレートが編集ポイント判断部２６に入力される。そして、編集ポイント判断部２６において符号ビットレートが所定のビットレートスレッシュ以上であるか否かが判断される（ステップＳ３）。

ステップＳ３の判断において、符号ビットレートが所定のビットレートスレッシュ未満である場合には、現フレームは編集ポイントではない。この場合には、ＣＰＵ９においてＧＯＰ符号化処理が終了か否か、即ちＧＯＰ内の全フレームの符号化が終了したか否かが判断される（ステップＳ４）。ステップＳ４の判断において、ＧＯＰ符号化処理が終了していない場合には、ＣＰＵ９から画像バッファ２２に次のフレームを入力するように指示がなされる（ステップＳ５）。その後、ステップＳ１に移行して、次のフレームの符号化処理が行われる。一方、ステップＳ４の判断において、ＧＯＰ符号化処理が終了した場合には、図４の処理が終了する。

また、ステップＳ３の判断において、符号ビットレートが所定のビットレートスレッシュ以上である場合には現フレームは編集ポイントである。この場合には、符号化方法切替部２７から画像バッファ２２に切替信号が出力される。これを受けて、ＧＯＰ符号化処理の対象となるフレームをＧＯＰの先頭フレームに戻すように、画像バッファ２２から次に出力されるフレームをＧＯＰの先頭フレームに戻す処理が行われる（ステップＳ６）。この処理は、例えば画像バッファ２２内に設けられている図示しないアドレスカウンタの値を戻すことで行われる。

更に、何番目のＧＯＰの何番目のフレームに編集ポイントが存在するのかを示す編集ポイント情報が記録される（ステップＳ７）。このように、編集ポイント情報を記録しておくことにより、後で編集が行われた後も、編集ポイントの位置を容易に特定することができる。なお、編集ポイント情報は、図５（ａ）に示すようにＭＰＥＧファイル１０１ａのＧＯＰヘッダ毎に記録しても良いしＭＰＥＧヘッダに纏めて記録するようにしても良い。更には、図５（ｂ）に示すようにＭＰＥＧファイル１０１ｂとは別に、編集ポイント情報のみを記録した編集ポイント情報ファイル１０２ｂをＭＰＥＧ符号化処理が全て終了した後で生成するようにしても良い。ここで、編集ポイント情報ファイル１０２ｂの拡張子は一例であり、他のファイルと重複しないものであれば任意の拡張子を付けることができる。

また、ステップＳ７で記録された編集ポイント情報を抽出して、例えばテレビモニタなどに編集ポイント情報を表示可能としても良い。

以下の処理は、上記第１の手法と第２の手法の２つの符号化の何れを用いて符号化するのかによって異なる処理が行われる。

まず、上記第１の手法の場合には、ＣＰＵ９の指示を受けて画像バッファ２２から符号化部２３に再び動画像データがフレーム単位で入力されると（ステップＳ８）、フレーム単位で入力された動画像データがＩフレーム符号化される（ステップＳ９）。その後、ＣＰＵ９においてＧＯＰ符号化処理が終了か否か、即ちＧＯＰ内の全フレームの符号化が終了したか否かが判断される（ステップＳ１０）。ステップＳ１０の判断において、ＧＯＰ符号化処理が終了していない場合には、ＣＰＵ９から画像バッファ２２に次のフレームを入力するように指示がなされる（ステップＳ１１）。その後、ステップＳ８に移行して、次のフレームの符号化処理が行われる。一方、ステップＳ１０の判断において、ＧＯＰ符号化処理が終了した場合には、図４の処理が終了する。

また、上記第２の手法の場合には、まず、ＣＰＵ９から符号化部２３に目標符号量を高くするように指示がなされる（ステップＳ１２）。その後、ＣＰＵ９の指示を受けて画像バッファ２２から符号化部２３に動画像データがフレーム単位で入力されると（ステップＳ１３）、フレーム単位で入力された動画像データがＩＢＢＰ符号化される（ステップＳ１４）。その後、ＣＰＵ９においてＧＯＰ符号化処理が終了か否か、即ちＧＯＰ内の全フレームの符号化が終了したか否かが判断される（ステップＳ１５）。ステップＳ１５の判断において、ＧＯＰ符号化処理が終了していない場合には、ＣＰＵ９から画像バッファ２２に次のフレームを入力するように指示がなされる（ステップＳ１６）。その後、ステップＳ１３に移行して、次のフレームの符号化処理が行われる。一方、ステップＳ１５の判断において、ＧＯＰ符号化処理が終了した場合には、図４の処理が終了する。

以上説明したように、第１の実施形態によれば、ＧＯＰのフレーム数を変化させることなく、後の編集に適した動画像データの符号化を行うことができる。

ここで、上記した第２の符号化の第１の手法はＧＯＰを全てＩフレームで構成するようにしているので、ＧＯＰ内の何れのフレームで編集されても高画質を保つことができる一方で、符号化後のデータ量が増大してしまう。また、第２の符号化の第２の手法はＰフレーム符号化及びＢフレーム符号化も用いているので、符号化後のデータ量の増大を抑えることができるが、編集後には画質劣化が起こってしまう。そこで、状況に応じて第１の手法と第２の手法を使い分けて符号化することが望ましい。

［第２の実施形態］
次に本発明の第２の実施形態について説明する。第２の実施形態は、編集ポイントの判断手法の第１の変形例であり、画像ソースから動画像データとともに入力された音声データに基づいて編集ポイントを判断するものである。

図６（ａ）は、第２の実施の形態に係る動画符号化装置に関する構成を概念的に示した図である。ここで、図６（ａ）において図２（ａ）と同一の構成については図２（ａ）と同様の参照符号を付すことで説明を省略する。即ち、図６（ａ）においては、音声データ入力部２８が設けられている点が図２（ａ）と異なる。

デジタルテレビ放送やアナログテレビ放送、デジタルビデオ再生機やアナログビデオ再生機といった画像ソースからは、動画像データとともに音声データも入力されてくる。このようにして入力された音声データは、音声データ入力部２８を介して編集ポイント判断部２６に入力される。

図６（ｂ）は第２の実施形態における編集ポイント判断部２６の内部構成について説明するための図である。図６（ｂ）に示すように第２の実施形態における編集ポイント判断部２６には、音声データ判別部２６ｂが設けられている。音声データ判別部２６ｂでは入力された音声データの音声形態が判別され、判別された音声形態が別の音声形態に変化したか否かが判断される。例えば、音声形態がステレオからモノラルに変更された場合や、ステレオやモノラルから音声多重に変化した場合には、例えばテレビ放送などにおいては番組が切り換わったときであると判断することができる。そこで、このような音声形態が切り替わったタイミングを編集ポイントと判断するようにする。この場合には、第１の実施形態で説明したのと同様に符号化方法切替部２７から切替信号が出力される。

図７は、第２の実施形態に係る動画符号化装置におけるＧＯＰ符号化処理における処理手順について示したフローチャートである。

音声データ入力部２８を介して編集ポイント判断部２６に音声データが入力されてくると、編集ポイント判断部２６では音声形態が変化したか否かが判断される（ステップＳ２１）。ここで、ステップＳ２１の判断は、動画像の１フレームが入力されるのに同期して行われるものである。ステップＳ２１の判断において、音声形態が変化していないと判断された場合には、現フレームは編集ポイントではない。この場合には、ＣＰＵ９の指示を受けて、画像バッファ２２から符号化部２３に動画像データがフレーム単位で入力される（ステップＳ２２）。これ以後のステップＳ２３〜ステップＳ２５の処理は、図４のステップＳ２〜ステップＳ５の処理と同様にして行われる。即ち、音声形態が変化していない場合には図３（ａ）に示すような第１の符号化によるＩＢＢＰ符号化が行われる。

また、ステップＳ２１の判断において、音声形態が変化したと判断された場合には、現フレームが編集ポイントであるので、符号化方法切替部２７から画像バッファ２２に切替信号が出力される。これを受けて、ＧＯＰ符号化処理の対象となるフレームをＧＯＰの先頭フレームに戻す処理が行われる（ステップＳ２６）。以後のステップＳ２７〜ステップＳ３６の処理は、図４のステップＳ７〜ステップＳ１６の処理と同様にして行われる。即ち、音声形態が変化した場合には図３（ｂ）に示す第２の符号化の第１の手法又は図３（ｃ）に示す第２の符号化の第２の手法による符号化が行われる。

以上説明したように、第２の実施形態によれば、動画像データと共に入力されてくる音声データに基づいて編集ポイントを判断することができる。

［第３の実施形態］
次に本発明の第３の実施形態について説明する。第３の実施形態は、編集ポイントの判断手法の第２の変形例である。デジタルテレビ放送では通常、動画像データや音声データと共に、番組に関する種々の付加データも送られてくる。そこで、第３の実施形態ではこの付加データの中に編集ポイントに関する情報を追加しておくようにして、この付加データに基づいて編集ポイントを判断するようにする。ここでの編集ポイントに関する情報としては、例えば番組が本放送からコマーシャルに切り替わったことを示す情報などである。即ち、コマーシャルは後でユーザによって編集される可能性があるので、この部分を編集ポイントとしておく。

図８は、第３の実施の形態に係る動画符号化装置に関する構成を概念的に示した図である。ここで、図８において図２（ａ）と同一の構成については図２（ａ）と同様の参照符号を付すことで説明を省略する。即ち、図８においては、付加データ入力部２９が設けられている点が図２（ａ）と異なる。

図８において、上記付加データは、付加データ入力部２９を介して編集ポイント判断部２６に入力される。編集ポイント判断部２６では、付加データの内容が判断され、この判断の結果、編集ポイントが存在する場合には符号化方法切替部２７から切替信号が出力される。

図９は、第３の実施形態に係る動画符号化装置におけるＧＯＰ符号化処理における処理手順について示したフローチャートである。

付加データが編集ポイント判断部２６に入力されてくると、編集ポイント判断部２６では付加データの判断が行われ、ＧＯＰ内にコマーシャルと本放送との間の切り替えが行われるフレームがあるか否かが判断される（ステップＳ４１）。ステップＳ４１の判断において、コマーシャルと本放送との間の切り替えが行われるフレームがないと判断された場合には、ＧＯＰ内には編集ポイントが存在しない。この場合には、ＣＰＵ９の指示を受けて、画像バッファ２２から符号化部２３に動画像データがフレーム単位で入力される（ステップＳ４２）。これ以後のステップＳ４３〜ステップＳ４５の処理は、図４のステップＳ２〜ステップＳ５の処理と同様にして行われる。即ち、コマーシャルと本放送との間の切り替えが行われるフレームがない場合には図３（ａ）に示すような第１の符号化によるＩＢＢＰ符号化が行われる。

また、ステップＳ４１の判断において、コマーシャルと本放送との間の切り替えが行われるフレームがあると判断された場合には、ＧＯＰ内に編集ポイントが存在するので、符号化方法切替部２７から画像バッファ２２に切替信号が出力される。これを受けて、ＧＯＰ符号化処理の対象となるフレームをＧＯＰの先頭フレームに戻す処理が行われる（ステップＳ４６）。以後のステップＳ４７〜ステップＳ５６の処理は、図４のステップＳ７〜ステップＳ１６の処理と同様にして行われる。即ち、コマーシャルと本放送との間の切り替えが行われるフレームがある場合には図３（ｂ）に示す第２の符号化の第１の手法又は図３（ｃ）に示す第２の符号化の第２の手法による符号化が行われる。

以上説明したように、第３の実施形態によれば、デジタル放送において動画像データや音声データと共に送られてくる付加データから直接編集ポイントを判断することができる。

なお、付加データとして、第１の実施形態で説明した編集ポイント情報を利用できることは言うまでもない。

［第４の実施形態］
次に本発明の第４の実施形態について説明する。第４の実施形態は、編集ポイントの判断手法の第３の変形例であり、撮像素子によって撮像された動画像の輝度変化若しくはホワイトバランス（ＷＢ）変化に基づいて編集ポイントを判断するものである。即ち、輝度やＷＢが大きく変化した場合には、例えば撮影シーンが変化したと考えることができるので、このようなフレームを編集ポイントと考えることができる。

図１０は、第４の実施の形態に係る動画符号化装置に関する構成を概念的に示した図である。ここで、図１０において図２（ａ）と同一の構成については図２（ａ）と同様の参照符号を付すことで説明を省略する。即ち、図１０においては、ＷＢ・輝度解析部３０とＷＢ・露出補正部３１が設けられている点が図２（ａ）と異なる。

図１０において、撮像素子から入力された動画像は、画像データ入力部２１を介してＷＢ・輝度解析部３０及びＷＢ・露出補正部３１に入力される。ＷＢ・輝度解析部３０では入力された動画像データの現フレームにおけるＷＢ及び輝度が算出される。そして、これら算出されたホワイトバランス及び輝度に基づいて、次のフレームにおけるＷＢ補正量及び露出補正量が算出され、これら補正量に基づいてＷＢ・露出補正部３１では次のフレームのＷＢ補正及び露出補正が行われる。更に、ＷＢ・輝度解析部３０からは算出された現フレームのＷＢ及び現フレームの輝度が、編集ポイント判断部２６に入力される。編集ポイント判断部２６では、現フレームのＷＢと前フレームのＷＢ及び現フレームの輝度と前フレームの輝度が比較され、ＷＢ及び輝度の少なくとも何れか一方に変化があったか否かが判断される。この判断の結果に基づいて符号化方法切替部２７から切替信号が出力される。

図１１は、第４の実施形態に係る動画符号化装置におけるＧＯＰ符号化処理における処理手順について示したフローチャートである。

ＷＢ・輝度解析部３０において算出された現フレームのＷＢ及び輝度が編集ポイント判断部２６に入力されてくると、編集ポイント判断部２６では、ＷＢ及び輝度の判断が行われ、ＷＢ及び輝度の少なくとも何れか一方に変化があったか否かが判断される（ステップＳ６１）。ステップＳ６１の判断において、ＷＢ及び輝度の何れも変化していないと判断された場合には、現フレームは編集ポイントではない。この場合には、ＣＰＵ９の指示を受けて、画像バッファ２２から符号化部２３に動画像データがフレーム単位で入力される（ステップＳ６２）。これ以後のステップＳ６３〜ステップＳ６５の処理は、図４のステップＳ２〜ステップＳ５の処理と同様にして行われる。即ち、ＷＢ及び輝度の何れも変化していない場合には図３（ａ）に示すような第１の符号化によるＩＢＢＰ符号化が行われる。

また、ステップＳ６１の判断において、ＷＢ及び輝度の少なくとも何れか一方に変化があったと判断された場合には、現フレームは編集ポイントである。この場合には、符号化方法切替部２７から画像バッファ２２に切替信号が出力される。これを受けて、ＧＯＰ符号化処理の対象となるフレームをＧＯＰの先頭フレームに戻す処理が行われる（ステップＳ６６）。以後のステップＳ６７〜ステップＳ７６の処理は、図４のステップＳ７〜ステップＳ１６の処理と同様にして行われる。即ち、ＷＢ及び輝度の少なくとも何れか一方に変化があった場合には図３（ｂ）に示す第２の符号化の第１の手法又は図３（ｃ）に示す第２の符号化の第２の手法による符号化が行われる。

以上説明したように、第４の実施形態によれば、撮像素子から入力されてくる動画像データのホワイトバランスや輝度の変化に基づいて編集ポイントを判断することができる。

［第５の実施形態］
次に本発明の第５の実施形態について説明する。第５の実施形態は、編集ポイントの判断手法の第４の変形例であり、所定の時点で入力されてくるフレームを編集ポイントと判断するものである。例えば、コマーシャルはほぼ所定の時間毎（例えば、１５分毎）に放送されてくるので、この所定の時間がカウントされた時点を編集ポイントとする。若しくは、所定フレーム数の動画像データが入力された時点を編集ポイントとするようにしても良い。これら所定時間及び所定フレーム数は、ユーザが任意に設定できるようにしても良い。

図１２は、第５の実施の形態に係る動画符号化装置に関する構成を概念的に示した図である。ここで、図１２において図２（ａ）と同一の構成については図２（ａ）と同様の参照符号を付すことで説明を省略する。即ち、図１２においては、フレームカウンタ３２と時間測定手段としてのリアルタイムクロック３３が設けられている点が図２（ａ）と異なる。

図１２において、画像データ入力部２１からフレーム単位で動画像データが出力されるごとに、フレームカウンタ３２のカウント値がカウントアップされ、このカウント値が編集ポイント判断部２６に入力される。また、リアルタイムクロック３３において計測された現在の時刻も編集ポイント判断部２６に入力される。編集ポイント判断部２６では、フレームカウンタ３２のカウント値が予め設定されたフレーム数に到達したか或いはリアルタイムクロック３３で計測された現在の時刻が予め設定された時刻と一致したか否かが判断される。この判断の結果に基づいて符号化方法切替部２７から切替信号が出力される。

図１３は、第５の実施形態に係る動画符号化装置におけるＧＯＰ符号化処理における処理手順について示したフローチャートである。

リアルタイムクロック３３において計測された現在の時刻及びフレームカウンタ３２のカウント値が編集ポイント判断部２６に入力されてくると、編集ポイント判断部２６では、現在の時刻が予め設定された時刻と一致したか否かが判断される（ステップＳ８１）。ステップＳ８１の判断において、現在の時刻が予め設定された時刻と一致していないと判断された場合には、フレームカウンタ３２のカウント値が予め設定されたフレーム数に到達したか否かが判断される（ステップＳ８２）。

ステップＳ８２の判断において、フレームカウンタ３２のカウント値が予め設定されたフレーム数に到達していないと判断された場合には、ＣＰＵ９の指示を受けて、画像バッファ２２から符号化部２３に動画像データがフレーム単位で入力される（ステップＳ８３）。これ以後のステップＳ８４〜ステップＳ８６の処理は、図４のステップＳ２〜ステップＳ５の処理と同様にして行われる。即ち、現在時刻が設定時刻に一致しておらず、またフレームカウンタ３２のカウント値が予め設定されたフレーム数に到達していない場合には図３（ａ）に示すような第１の符号化によるＩＢＢＰ符号化が行われる。

また、ステップＳ８１の判断において現在時刻が設定時刻に一致したと判断された場合、またはステップＳ８２の判断においてフレームカウンタ３２のカウント値が予め設定されたフレーム数に到達したと判断された場合には、符号化方法切替部２７から画像バッファ２２に切替信号が出力される。これを受けて、ＧＯＰ符号化処理の対象となるフレームをＧＯＰの先頭フレームに戻す処理が行われる（ステップＳ８７）。以後のステップＳ８８〜ステップＳ９７の処理は、図４のステップＳ７〜ステップＳ１６の処理と同様にして行われる。即ち、現在時刻が設定時刻に一致した場合、またはフレームカウンタ３２のカウント値が予め設定されたフレーム数に到達した場合には、図３（ｂ）に示す第２の符号化の第１の手法又は図３（ｃ）に示す第２の符号化の第２の手法による符号化が行われる。

以上説明したように、第５の実施形態によれば、時間測定やフレーム数カウントによって編集ポイントを判断することができる。

［第６の実施形態］
次に本発明の第６の実施形態について説明する。第６の実施形態は、編集ポイントの判断手法の第５の変形例であり、ユーザによって設定された設定情報に基づいて編集ポイントを判断するものである。ここでは、ユーザは、例えばフレーム画像のフレーム数を直接指定して編集ポイントとしたり、第１の実施形態で説明したビットレートスレッシュを設定したりすることができる。

図１４は、第６の実施の形態に係る動画符号化装置に関する構成を概念的に示した図である。ここで、図１４において図２（ａ）と同一の構成については図２（ａ）と同様の参照符号を付すことで説明を省略する。即ち、図１４においては、編集領域指示手段としてのユーザ設定入力部３４が設けられている点が図２（ａ）と異なる。

図１４において、リモートコントローラ（リモコン）、キーボード、マウスなどのユーザインターフェース（Ｉ／Ｆ）を介して入力された設定情報は、ユーザ設定入力部３４を介して編集ポイント判断部２６に入力される。編集ポイント判断部２６では設定情報が判断され、この判断の結果、ユーザによって編集ポイントであると判断されたフレームの符号化時に符号化方法切替部２７から切替信号が出力される。

図１５は、第６の実施形態に係る動画符号化装置におけるＧＯＰ符号化処理における処理手順について示したフローチャートである。

設定情報が編集ポイント判断部２６に入力されてくると、編集ポイント判断部２６ではユーザ設定のフラグが立ったか否かが判断される（ステップＳ１０１）。ステップＳ１０１の判断において、ユーザ設定のフラグが立っていないと判断された場合には、ＣＰＵ９の指示を受けて、画像バッファ２２から符号化部２３に動画像データがフレーム単位で入力される（ステップＳ１０２）。これ以後のステップＳ１０３〜ステップＳ１０５の処理は、図４のステップＳ２〜ステップＳ５の処理と同様にして行われる。即ち、コマーシャルと本放送との間の切り替えが行われるフレームがない場合には図３（ａ）に示すような第１の符号化によるＩＢＢＰ符号化が行われる。

また、ステップＳ１０１の判断において、ユーザ設定のフラグが立ったと判断された場合には、そのフレームが編集ポイントであるので、符号化方法切替部２７から画像バッファ２２に切替信号が出力される。これを受けて、ＧＯＰ符号化処理の対象となるフレームをＧＯＰの先頭フレームに戻す処理が行われる（ステップＳ１０６）。以後のステップＳ１０７〜ステップＳ１１６の処理は、図４のステップＳ７〜ステップＳ１６の処理と同様にして行われる。即ち、コマーシャルと本放送との間の切り替えが行われるフレームがある場合には図３（ｂ）に示す第２の符号化の第１の手法又は図３（ｃ）に示す第２の符号化の第２の手法による符号化が行われる。

以上説明したように、第６の実施形態によれば、ユーザが任意に編集ポイントを設定することができる。

以上実施形態に基づいて本発明を説明したが、本発明は上記した実施形態に限定されるものではなく、本発明の要旨の範囲内で種々の変形や応用が可能なことは勿論である。

さらに、上記した実施形態には種々の段階の発明が含まれており、開示される複数の構成要件の適当な組合せにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除された構成も発明として抽出され得る。

本発明の第１の実施形態に係る動画符号化装置の一例としてのデジタルビデオレコーダの構成について示す図である。 図２（ａ）は第１の実施の形態に係る動画符号化装置に関する構成を概念的に示した図であり、図２（ｂ）は第１の実施形態における編集ポイント判断部の内部構成について示す図である。 図３（ａ）は第１の符号化によって生成されたＭＰＥＧデータのＧＯＰ層のデータストリームについて示した図であり、図３（ｂ）は第２の符号化の第１の手法によって生成されたＭＰＥＧデータのＧＯＰ層のデータストリームについて示した図であり、図３（ｃ）は第２の符号化の第２の手法によって生成されたＭＰＥＧデータのＧＯＰ層のデータストリームについて示した図である。 第１の実施形態に係る動画符号化装置におけるＧＯＰ符号化処理における処理手順について示したフローチャートである。 図５（ａ）はＭＰＥＧファイルに編集ポイント情報を記録する際の例を示す図であり、図５（ｂ）はＭＰＥＧファイルとは別のファイルに編集ポイント情報を記録する際の例を示す図である。 図６（ａ）は第２の実施の形態に係る動画符号化装置に関する構成を概念的に示した図であり、図６（ｂ）は第２の実施形態における編集ポイント判断部の内部構成について示す図である。 第２の実施形態に係る動画符号化装置におけるＧＯＰ符号化処理における処理手順について示したフローチャートである。 第３の実施の形態に係る動画符号化装置に関する構成を概念的に示した図である。 第３の実施形態に係る動画符号化装置におけるＧＯＰ符号化処理における処理手順について示したフローチャートである。 第４の実施の形態に係る動画符号化装置に関する構成を概念的に示した図である。 第４の実施形態に係る動画符号化装置におけるＧＯＰ符号化処理における処理手順について示したフローチャートである。 第５の実施の形態に係る動画符号化装置に関する構成を概念的に示した図である。 第５の実施形態に係る動画符号化装置におけるＧＯＰ符号化処理における処理手順について示したフローチャートである。 第６の実施の形態に係る動画符号化装置に関する構成を概念的に示した図である。 第６の実施形態に係る動画符号化装置におけるＧＯＰ符号化処理における処理手順について示したフローチャートである。

符号の説明

１…撮像素子、２…ＡＤ変換部（ＡＤＣ）、３…バス、４…デジタルチューナ、５…ＭＰＥＧデコーダ、６…アナログチューナ、７…ビデオデコーダ、８…ＤＲＡＭ、９…ＣＰＵ、１０…ＭＰＥＧエンコーダ、１１…ＤＲＡＭ、１２…記録媒体、１３…ビデオエンコーダ、２１…画像データ入力部、２２…画像バッファ、２３…符号化部、２４…符号バッファ、２５…符号データ出力部、２６…編集ポイント判断部、２６ａ…コンパレータ、２６ｂ…音声データ判別部、２７…符号化方法切替部、２８…音声データ入力部、２９…付加データ入力部、３０…ＷＢ・輝度解析部、３１…ＷＢ・露出補正部、３２…フレームカウンタ、３３…リアルタイムクロック、３４…ユーザ設定入力部

Claims (20)

1. 複数フレームからなる動画像データをＭＰＥＧ方式に準じた方式で符号化する動画符号化装置であって、
   上記動画像データに編集に適しているフレームが存在するか否かを判断する編集領域判断手段と、
   上記編集領域判断手段の判断結果に基づいて、上記符号化の際の符号化方法を一定のＧＯＰ単位毎に切り替える符号化方法切替手段と、
   を具備することを特徴とする動画符号化装置。
2. 複数のフレームから構成される動画像データを入力する画像データ入力手段と、
   上記動画像データの中で編集対象となるフレームが存在するか否かを判断する編集領域判断手段と、
   上記動画像データを一定のＧＯＰ単位毎にフレーム内符号化とフレーム間符号化とを組み合わせて符号化する第１の符号化と、上記動画像データを上記一定のＧＯＰ単位毎にフレーム内符号化のみで符号化する第２の符号化の何れかにより上記動画像データを符号化すると共に、上記編集対象となるフレームが存在すると判断された場合には、上記動画像データの上記編集対象となるフレームを含むＧＯＰ単位を上記第２の符号化によって符号化する符号化手段と、
   上記符号化手段で符号化されて得られた符号データを出力する符号データ出力手段と、
   を具備することを特徴とする動画符号化装置。
3. 複数のフレームから構成される動画像データを入力する画像データ入力手段と、
   上記画像データ入力手段によって入力された動画像データを一定のＧＯＰ単位で符号化する符号化手段と、
   上記動画像データの中で編集対象となるフレームが存在するか否かを判断する編集領域判断手段と、
   上記編集領域判断手段により、上記動画像データの中で編集対象となるフレームが存在すると判断された場合に、上記編集対象となるフレームを含むＧＯＰ単位を符号化する際の符号化方法を第１の符号化から第２の符号化に切り替える符号化方法切替手段と、
   上記符号化方法切替手段による符号化方法の切り替えに応じて上記符号化手段で符号化されて得られた符号データを出力する符号データ出力手段と、
   を具備することを特徴とする動画符号化装置。
4. 上記編集領域判断手段は、上記動画像データが符号化された際の符号ビットレートの大きさに基づいて、上記動画像データの中で編集対象となるフレームが存在するか否かを判断することを特徴とする請求項３に記載の動画符号化装置。
5. 上記編集領域判断手段は、上記符号ビットレートが所定のビットレートスレッシュよりも大きい場合に、上記動画像データの中で編集対象となるフレームが存在すると判断することを特徴とする請求項４に記載の動画符号化装置。
6. 音声データを入力するための音声データ入力手段を更に具備し、
   上記編集領域判断手段は、上記音声データ入力手段によって入力された上記音声データに基づいて、上記動画像データの中で編集対象となるフレームが存在するか否かを判断することを特徴とする請求項３に記載の動画符号化装置。
7. 上記編集領域判断手段は、上記音声データの音声形態が別の音声形態に変化したときに、上記動画像データの中で編集対象となるフレームが存在すると判断することを特徴とする請求項６に記載の動画符号化装置。
8. 上記動画像データには、上記動画像データの中で編集対象となるフレームを含むＧＯＰ単位の情報を示す付加データが更に付加されており、
   上記付加データを入力するための付加データ入力手段を更に具備し、
   上記編集領域判断手段は、上記付加データ入力手段によって入力された上記付加データに基づいて、上記動画像データの中で編集対象となるフレームが存在するか否かを判断することを特徴とする請求項３に記載の動画符号化装置。
9. 上記編集領域判断手段は、上記動画像データのホワイトバランスの変化に基づいて、上記動画像データの中で編集対象となるフレームが存在するか否かを判断することを特徴とする請求項３に記載の動画符号化装置。
10. 上記編集領域判断手段は、上記動画像データのホワイトバランスの変化が大きい場合に、上記動画像データの中で編集対象となるフレームが存在すると判断することを特徴とする請求項９に記載の動画符号化装置。
11. 上記編集領域判断手段は、上記動画像データの輝度の変化に基づいて、上記動画像データの中で編集対象となるフレームが存在するか否かを判断することを特徴とする請求項３に記載の動画符号化装置。
12. 上記編集領域判断手段は、上記動画像データの輝度の変化が大きい場合に、上記動画像データの中で編集対象となるフレームが存在すると判断することを特徴とする請求項１１に記載の動画符号化装置。
13. 時間を測定する時間測定手段を更に具備し、
    上記編集領域判断手段は、上記時間測定手段によって測定された時間に基づいて、上記動画像データの中で編集対象となるフレームが存在するか否かを判断することを特徴とする請求項３に記載の動画符号化装置。
14. 上記編集に適しているフレームを指示するための編集領域指示手段を更に具備し、
    上記編集領域判断手段は、上記編集領域指示手段によって上記編集に適しているフレームが指示されているか否かに応じて、上記動画像データの中で編集対象となるフレームが存在するか否かを判断することを特徴とする請求項３に記載の動画符号化装置。
15. 上記第１の符号化は、上記一定のＧＯＰ単位をフレーム内符号化とフレーム間符号化とを組み合わせて符号化する符号化であり、
    上記第２の符号化は、上記一定のＧＯＰ単位をフレーム内符号化のみで符号化する符号化であることを特徴とする請求項３に記載の動画符号化装置。
16. 上記第１の符号化は、上記一定のＧＯＰ単位を第１の目標符号量で符号化する符号化であり、
    上記第２の符号化は、上記一定のＧＯＰ単位を上記第１の目標符号量よりも大きい第２の目標符号量で符号化する符号化であることを特徴とする請求項３に記載の動画符号化装置。
17. 上記符号データ出力手段から出力された上記符号データと共に、上記動画像データの中で編集対象となるフレームを含むＧＯＰ単位を示す情報を記録する記録手段を更に具備することを特徴とする請求項３に記載の動画符号化装置。
18. 上記記録手段は、上記符号データと上記動画像データの中で編集対象となるフレームを含むＧＯＰ単位を示す情報とを１つのＭＰＥＧファイルとして記録することを特徴とする請求項１７に記載の動画符号化装置。
19. 上記記録手段は、上記符号データをＭＰＥＧファイルとして記録すると共に、上記動画像データの中で編集対象となるフレームを含むＧＯＰ単位を示す情報を上記ＭＰＥＧファイルに関連付けられた別ファイルとして記録することを特徴とする請求項１７に記載の動画符号化装置。
20. 上記記録手段に記録された上記動画像データの中で編集対象となるフレームを含むＧＯＰ単位を示す情報を表示する表示手段を更に具備することを特徴とする請求項１７に記載の動画符号化装置。

Images