JP3817828B2

JP3817828B2 - Authoring apparatus and method and multiplexing apparatus and method

Info

Publication number: JP3817828B2
Application number: JP11314597A
Authority: JP
Inventors: 剛小田; 宣行高須; 俊明瀬戸川
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 1997-04-30
Filing date: 1997-04-30
Publication date: 2006-09-06
Anticipated expiration: 2017-04-30
Also published as: JPH10304302A

Description

【０００１】
【発明の属する技術分野】
本発明は、映像や音声の符号化データを多重化して光ディスク等の記録媒体に対して記録する記録用データを生成するオーサリング装置及び方法並びに多重化装置及び方法に関する。
【０００２】
【従来の技術】
近年、映像や音声を圧縮符号化して大容量のデータを記録することができるＤＶＤと呼ばれる光ディスクが提案されている。このＤＶＤでは、ビデオ信号やオーディオ信号の圧縮方式としてＭＰＥＧ方式等が採用されており、映像や音声等を効率よく記録することができる。
【０００３】
このようなＤＶＤに対して記録する記録用データは、動画像や静止画像或いは音声等がＭＰＥＧ方式等に基づいて符号化され、これらの符号化データを例えばＤＶＤ−ＶＩＤＥＯ規格等に沿った形式で多重化され生成される。このような編集作業は一般にオーサリングと呼ばれ、その編集作業を行う装置はオーサリング装置と呼ばれている。
【０００４】
従来のオーサリング装置は、映像を符号化するビデオエンコーダ、音声を符号化するオーディオエンコーダ、符号化したビデオデータ及びオーディオデータを多重化して目的の記録用データを生成するマルチプレクサ、並びに、符号化したビデオデータと符号化したオーディオデータと記録用データとを記録するサーバ等から構成されているのが一般的である。
【０００５】
この従来のオーサリング装置のビデオエンコーダは、映像ソースとなるビデオテープ等の記録媒体から映像を再生してＭＰＥＧ方式で画像圧縮をし、符号化したビデオデータを生成する。そして、この符号化したビデオデータをサーバに記録する。このとき、ビデオエンコーダは、符号化したビデオデータを一時バッファに格納しておき、所定容量の符号化が完了した段階でビデオバッファ内の符号化したビデオデータの全てをサーバに記録する処理を行う。ビデオバッファの容量は、サーバとの整合性をとるため、サーバの記録単位（例えばセクタ単位）の整数倍に設定されている。
【０００６】
オーディオエンコーダもビデオエンコーダと同様に音声ソースとなるオーディオテープ等からの記録媒体から音声を再生してＭＰＥＧ方式等で信号圧縮し、符号化したオーディオデータをサーバに記録する。
【０００７】
また、サーバは、例えばハードディスクアレイ等からなり、ビデオエンコーダ及びオーディオエンコーダにより符号化されたビデオデータ及びオーディオデータがそれぞれ異なる記録領域に記録される。また、サーバは、符号化データを記憶し得るだけの充分な記憶領域を有している。
【０００８】
そして、マルチプレクサは、信号圧縮したビデオデータ及びオーディオデータ等をサーバから順次読み出し、これらのデータをＤＶＤ−ＶＩＤＥＯ規格に沿って多重化し、その結果得られる多重化データを記録用データとしてサーバに順次記録する。
【０００９】
【発明が解決しようとする課題】
このようなオーサリングを行う場合、ビデオテープ等の映像ソースからビデオデータ等を再生して、この再生信号を符号化する処理を行う。
【００１０】
ところが、映画１作品分の映像等が、複数本のビデオテープにまたがって記録されている場合がある。このような場合、ビデオエンコーダは、最初のビデオテープに記録された映像を全て符号化したのちに、次のビデオテープに記録された映像を符号化する処理を行う。すなわち、映画１作品毎に符号化するのではなく、映像ソースである記録媒体単位で符号化を行わなければならない。また、複数の音声ソースであるオーディオテープ等の記録媒体に記録された音声を、符号化する際も同様である。
【００１１】
図４は、複数のビデオテープ又はオーディオテープにまたがって記録されている映画等の映像及び音声を符号化した場合において、サーバに記録される符号化されたビデオデータ及びオーディオデータのディスクイメージを示した図である。
【００１２】
例えば、３本のビデオテープである第１から第３の映像ソースに基づき映画１作品分のオーサリングを行う場合、サーバの映像用の記録領域には、第１の映像ソースＲＯＬＬ１の映像を符号化した第１のビデオデータと、第２の映像ソースＲＯＬＬ２の映像を符号化した第２のビデオデータと、第３の映像ソースＲＯＬＬ３の映像を符号化した第３のビデオデータとが記録される。同様に、サーバの音声用の記録領域には、符号化した第１から第３のオーディオデータが記録される。
【００１３】
ここで、映像用の記録領域には、符号化した第１と第２のビデオデータの間の領域には、ビデオデータが記録されていないギャップ領域が存在する。また、第２と第３の映像符号化データの間の領域にもギャップ（Ｇａｐ）領域が存在している。同様に、サーバの音声用の記録領域にも符号化したオーディオデータの間の領域にギャップ（Ｇａｐ）が存在している。
【００１４】
この理由は、以下のとおりである。すなわち、ビデオエンコーダやオーディオエンコーダは、符号化データを一時バッファに格納しておき、所定容量の符号化が完了した段階でバッファ内の符号化データの全てをサーバに記録する。このバッファの容量は、サーバとの整合性をとるためサーバの記録単位（例えばセクタ単位）の整数倍に設定されている。そのため、映像ソースであるビデオテープ等の最後の部分に記録された映像の符号化データは、必ずバッファがいっぱいとなった状態でサーバに記録されるとは限らない。従って、サーバでは、各映像ソース等に対応する複数の符号化データのストリームとストリームの間の領域にギャップが生じてしまうのである。
【００１５】
ところで、このように符号化したビデオデータやオーディオデータをマルチプレクサで多重化する場合、各映像ソース等に基づいて複数の符号化したビデオデータ等のストリームを、１本のデータストリームとして扱う必要がある。そのため、各映像ソース又は各音声ソースに対応する複数の符号化したビデオデータ及び複数の符号化したオーディオデータを、サーバの他の記録領域に複製等して、複数のストリームであるビデオデータ及びオーディオデータを接続する必要がある。
【００１６】
しかしながら、複製等をして１本のデータストリームとするのは、扱うデータ量が非常に大きいことから時間がかかり、効率が悪い。
【００１７】
本発明は、このような実情を鑑みてなされたものであり、符号化する映像や音声等が複数のビデオテープ等に記録されている場合であっても、効率的に多重化をする編集装置及びデータ編集方法を提供することを目的とする。
【００１８】
【課題を解決するための手段】
上述の課題を解決するために、本発明に係るオーサリング装置は、複数の映像データを符号化して複数の符号化映像データを生成する映像符号化手段と、複数の音声データを符号化して複数の符号化音声データを生成する音声符号化手段と、各上記符号化映像データ及び各上記符号化音声データを記憶する記憶手段と、各上記符号化映像データのデータサイズ及び上記記憶手段の記録開始アドレスを含む映像符号化情報を上記符号化映像データ毎に生成するとともに、各上記符号化音声データのデータサイズ及び上記記憶手段の記録開始アドレスを含む音声符号化情報を上記符号化音声データ毎に生成する符号化情報生成手段と、上記符号化情報生成手段により生成された各上記映像符号化情報及び各上記音声符号化情報を参照しながら、上記記憶手段の記憶領域に対するアドレスポインタを制御することによって、上記記憶手段から各上記符号化映像データ及び各上記符号化音声データを読み出し、読み出した各上記符号化映像データ及び各上記符号化音声データをそれぞれ多重化する多重化手段とを有する。そして、上記多重化手段は、上記映像符号化情報及び上記音声符号化情報を参照して上記符号化映像データ間及び上記符号化音声データ間でアドレスポインタをジャンプさせることにより、上記記憶手段から次の上記符号化映像データ及び上記符号化音声データを読み出す。
【００１９】
本発明に係るオーサリング方法は、複数の映像データを符号化して複数の符号化映像データを生成するステップと、複数の音声データを符号化して複数の符号化音声データを生成するステップと、各上記符号化映像データ及び各上記符号化音声データを記憶手段に記憶するステップと、各上記符号化映像データのデータサイズ及び上記記憶手段の記録開始アドレスを含む映像符号化情報を上記符号化映像データ毎に生成するとともに、各上記符号化音声データのデータサイズ及び上記記憶手段の記録開始アドレスを含む音声符号化情報を上記符号化音声データ毎に生成するステップと、上記符号化情報生成手段により生成された各上記映像符号化情報及び各上記音声符号化情報を参照しながら、上記記憶手段の記憶領域に対するアドレスポインタを制御することによって、上記記憶手段から各上記符号化映像データ及び各上記符号化音声データを読み出し、読み出した各上記符号化映像データ及び各上記符号化音声データをそれぞれ多重化するステップとを有する。そして、上記多重化のステップは、上記映像符号化情報及び上記音声符号化情報を参照して上記符号化映像データ間及び上記符号化音声データ間でアドレスポインタをジャンプさせることにより、上記記憶手段から次の上記符号化映像データ及び上記符号化音声データを読み出す。
【００２０】
本発明に係る多重化装置は、複数の映像データを符号化して得られる各上記符号化映像データ及び複数の音声データを符号化して得られる各上記符号化音声データを記憶する記憶手段と、各上記符号化映像データのデータサイズ及び上記記憶手段の記録開始アドレスを含む上記符号化映像データ毎の映像符号化情報と、各上記符号化音声データのデータサイズ及び上記記憶手段の記録開始アドレスを含む上記符号化音声データ毎の音声符号化情報とを入力する入力手段と、上記入力手段により入力された各上記映像符号化情報及び各上記音声符号化情報を参照しながら、上記記憶手段の記憶領域に対するアドレスポインタを制御することによって、上記記憶手段から各上記符号化映像データ及び各上記符号化音声データを読み出し、読み出した各上記符号化映像データ及び各上記符号化音声データをそれぞれ多重化する多重化手段とを有する。そして、上記多重化手段は、上記映像符号化情報及び上記音声符号化情報を参照して上記符号化映像データ間及び上記符号化音声データ間でアドレスポインタをジャンプさせることにより、上記記憶手段から次の上記符号化映像データ及び上記符号化音声データを読み出す。
【００２１】
本発明に係る多重化方法は、複数の映像データを符号化して得られる各上記符号化映像データ及び複数の音声データを符号化して得られる各上記符号化音声データを記憶手段に記憶するステップと、各上記符号化映像データのデータサイズ及び上記記憶手段の記録開始アドレスを含む上記符号化映像データ毎の映像符号化情報と、各上記符号化音声データのデータサイズ及び上記記憶手段の記録開始アドレスを含む上記符号化音声データ毎の音声符号化情報とを入力するステップと、上記入力された各上記映像符号化情報及び各上記音声符号化情報を参照しながら、上記記憶手段の記憶領域に対するアドレスポインタを制御することによって、上記記憶手段から各上記符号化映像データ及び各上記符号化音声データを読み出し、読み出した各上記符号化映像データ及び各上記符号化音声データをそれぞれ多重化するステップとを有する。上記多重化のステップは、上記映像符号化情報及び上記音声符号化情報を参照して上記符号化映像データ間及び上記符号化音声データ間でアドレスポインタをジャンプさせることにより、上記記憶手段から次の上記符号化映像データ及び上記符号化音声データを読み出す。
【００２２】
【発明の実施の形態】
以下、本発明を適用した実施の形態であるオーサリング装置について、図面を参照しながら説明する。
【００２３】
図１に示す本発明を適用した実施の形態であるオーサリング装置１０は、画像や音声を圧縮符号化して多重化することによりＤＶＤ−ＶＩＤＥＯ規格で光ディスクに対して記録する記録用データを生成する。
【００２４】
オーサリング装置１０は、動画像を符号化するビデオエンコーダ１１と、音声を符号化するオーディオエンコーダ１２と、静止画像等を符号化するサブピクチャエンコーダと、符号化されたそれぞれのデータを記憶するサーバ１４と、符号化された各データを多重化し記録用データを生成するマルチプレクサ１５と、装置全体の動作を管理するシステムコントローラ１６とを備えている。また、このオーサリング装置１０は、生成された記録用データを検査するビューア１７と、生成された記録用データを磁気テープ等の所定の記録媒体に記録するテープストリーマ１８とを備えている。
【００２５】
ビデオエンコーダ１１は、映像ソースであるビデオテープ等を再生して供給されるビデオ信号Ｓ１０をＭＰＥＧ方式に基づいて圧縮符号化し、その結果得られるビデオ符号化データＳ１１をサーバ１４の所定記憶領域に順次格納する。このビデオエンコーダ１１は、符号化に際して必要な各種情報、例えば符号化処理を行う動画像の情報や符号化データを格納する記憶領域のアドレス情報をネットワーク１９を介してシステムコントローラ１６から受け、これらの情報を基に符号化処理を実行してビデオ符号化データＳ１１をサーバ１４の指示された記憶領域に格納する。
【００２６】
オーディオエンコーダ１２は、音声ソースであるオーディオテープ等を再生して供給されるオーディオ信号Ｓ１２をＭＰＥＧ音声方式又はＡＣ−３方式（変形離散コサイン変換（ＭＤＣＴ）とスペクトラムエンベロープ符号化を組み合わせた圧縮符号化方式）に基づいて圧縮符号化し、その結果得られるオーディオ符号化データＳ１３をサーバ１４の所定記憶領域に順次格納する。このオーディオエンコーダ１２も、符号化に際して必要な各種情報、例えば符号化処理を行う音声の情報や符号化データを格納する記憶領域のアドレス情報等をネットワーク１９を介してシステムコントローラ１６から受け、これらの情報を基に符号化処理を実行してオーディオ符号化データＳ１３をサーバ１４の指示された記憶領域に格納する。
【００２７】
サブピクチャエンコーダ１３は、副映像ソースであるビデオテープ等を再生して供給される字幕等のサブピクチャ信号Ｓ１４を所定の符号化方式で符号化し、その結果得られるサブピクチャ符号化データＳ１５をサーバ１４の所定記憶領域に順次格納する。このサブピクチャエンコーダ１３も同様に、符号化に際して必要な各種情報、例えば符号化処理を行うピクチャの枚数や符号化データを格納する記憶領域のアドレス情報等をネットワーク１９を介してシステムコントローラ１６から受け、これらの情報を基にサブピクチャ符号化データＳ１５をサーバ１４の指示された記憶領域に格納する。
【００２８】
サーバ１４は、複数の入出力ポートを有するハードデイスクアレイからなり、入力される各符号化データＳ１１、Ｓ１３、Ｓ１５をそれぞれ異なる記憶領域に格納する。また、サーバ１４には、各符号化データＳ１１、Ｓ１３、Ｓ１５の記憶領域の他にも、後述するマルチプレクサ１５によって生成される多重化データを格納する記憶領域も確保されており、この多重化データをその記憶領域に格納する。すなわち、サーバ１４は、各符号化データＳ１１、Ｓ１３、Ｓ１５や多重化データを記憶し得るだけの充分な記憶領域を有している。
【００２９】
また、サーバ１４は、各エンコーダ１１〜１３とを接続するインターフェースとして、高速伝送が可能なＳＣＳＩ等が使用されている。
【００３０】
マルチプレクサ１５は、各符号化データＳ１１、Ｓ１３、Ｓ１５を処理対象データとしてサーバ１４から順次読み出し、これらのデータをＤＶＤ−ＶＩＤＥＯ規格に沿って多重化し、その結果得られる多重化データＳ１７を記録用データとしてサーバ１４の所定記憶装置に順次格納する。このマルチプレクサ１５は、多重化に際して必要な情報、例えば各符号化データＳ１１、Ｓ１３、Ｓ１５が格納されている記憶領域のアドレス情報や多重化したデータを格納する記憶領域のアドレス情報等をネットワーク１９を介してシステムコントローラ１６から受け、これらの情報を基に多重化処理を実行して多重化データＳ１７をサーバ１４の指示された記憶領域に格納する。
【００３１】
ビューア１７は、各エンコーダ１１〜１３の符号化処理やマルチプレクサ１５の多重化処理が正常に行われたか否かを検査するためのものである。このビューア１７は、サーバ１４に格納されている多重化データＳ１７を読み出して復号化し、これをモニタに出力する。このようなビューア１７を設けることにより、このオーサリング装置１０では、符号化処理や多重化処理が正常に行われたか否かを即座にかつ容易に検査することができる。なお、このビューア１７も、復号化に際して必要な情報、例えば多重化データＳ１７が格納されている記憶領域のアドレス情報や符号化方式の情報をネットワーク１９を介してシステムコントローラ１６から受け、これらの情報を基に復号化処理を実行する。
【００３２】
テープストリーマ１８は、デイスク製造工程に多重化データＳ１７を渡すためにこの多重化データＳ１７を磁気テープ等に記録するものである。このテープストリーマ１８は、記録動作に必要な情報、例えば多重化データＳ１７が格納されている記憶領域のアドレス情報や記録方式の情報等をネットワーク１９を介してシステムコントローラ１６から受け、これらの情報を基にサーバ１４から順次多重化データＳ１７を読み出して磁気テープ等に記録する。このようなテープストリーマ１８を設けることにより、このオーサリング装置１０では、デイスク製造工程に渡す記録用データである多重化データＳ１７を即座にかつ容易に記録することができる。
【００３３】
なお、マルチプレクサ１５やビューア１７、及びテープストリーマ１８と、サーバ１４との接続は、高速伝送が可能なＳＣＳＩ等のインターフェースが使用されている。
【００３４】
システムコントローラ１６は、各エンコーダ１１〜１３やマルチプレクサ１５、或いはビューア１７やテープストリーマ１８の動作を管理するとともに、サーバ１４のデータ記録領域を管理する。
【００３５】
具体的には、システムコントローラ１６は、オペレータによって入力されたオーサリング作業に必要なオーサリング情報Ｓ１８を基に各エンコーダ１１〜１３に符号化処理開始の指示を与える。また、システムコントローラ１６は、各エンコーダ１１〜１３の符号化処理が終了すると、マルチプレクサ１５に多重化処理開始の指示を与える。またシステムコントローラ１６は、マルチプレクサ１５の処理が終了すると、ビューア１７やテープストリーマ１８に対して処理開始の指示を与える。
【００３６】
また、システムコントローラ１６は、各エンコーダ１１〜１３によって生成された各符号化データＳ１１、Ｓ１３、Ｓ１５やマルチプレクサ１５によって生成された多重化データＳ１７の記憶領域を管理し、各エンコーダ１１〜１３に対してデータ格納先としてそれぞれ異なる記憶領域を指示すると共に、マルチプレクサ１５に対してはデータ格納先として符号化データＳ１１、Ｓ１３、Ｓ１５とは異なる記憶領域を指示する。
【００３７】
このようなシステムコントローラ１６を設けることにより、各エンコーダ１１〜１３等は、自分に割り当てられた作業を実行することができると共に、生成したデータＳ１１、Ｓ１３、Ｓ１５及びＳ１７の格納先が重複しないようにしてサーバ１４を各装置間で共有することができる。
【００３８】
なお、システムコントローラ１６からの動作指示やデータ格納先の指示は、それぞれネットワーク１９を介して各エンコーダ１１〜１３等に与えられる。
【００３９】
つぎに、ビデオエンコーダ１１，オーディオエンコーダ１２及びサブピクチャエンコーダ１３がビデオ信号Ｓ１０等を符号化し、ビデオ符号化データＳ１１等とともに生成する符号化情報について説明する。
【００４０】
このオーサリング装置１０の各エンコーダ１１，１２，１３は、複数の映像ソースであるビデオテープ等の記録媒体に、映画１作品分の映像がまたがって記録されている場合など、各映像ソースごとの符号化情報を生成する。
【００４１】
ビデオエンコーダ１１は、符号化情報として、各映像ソースであるビデオテープに対応するビデオ符号化データＳ１１のデータサイズと、サーバ１４上の記録開始アドレスとをビデオ符号化情報として生成する。このビデオ符号化情報は、ファイル化され、ネットワーク１９を介してマルチプレクサ１５に供給される。また、オーディオエンコーダ１２は、符号化情報として、各音声ソースであるオーディオテープに対応するオーディオ符号化データＳ１３のデータサイズと、サーバ１４上の記録開始アドレスとをオーディオ符号化情報として生成する。このオーディオ符号化情報も、ファイル化され、ネットワーク１９を介してマルチプレクサ１５に供給される。
【００４２】
また、サブピクチャエンコーダ１３は、符号化情報として、各映像ソースであるビデオテープに対応するサブピクチャ符号化データＳ１５のデータサイズと、サーバ１４上の記録開始アドレスとをサブピクチャ符号化情報として生成する。このサブピクチャ符号化情報も、ファイル化され、ネットワーク１９を介してマルチプレクサ１５に供給される。
【００４３】
つぎに、ビデオエンコーダ１１，オーディオエンコーダ１２及びサブピクチャエンコーダ１３から供給された符号化情報に基づき、記録用データである多重化データＳ１７を生成するマルチプレクサ１５について説明する。
【００４４】
マルチプレクサ１５は、上述したように、ビデオ符号化情報，オーディオ符号化情報，サブピクチャ符号化情報がファイル形式で供給される。マルチプレクサ１５は、システムコントローラ１６の制御に基づき多重化を開始する。
【００４５】
マルチプレクサ１５は、この多重化をするに際し、各エンコーダ１１〜１３が符号化し、サーバ１４に記録したビデオ符号化データＳ１１，オーディオ符号化データＳ１３，サブピクチャ符号化データＳ１５の読出しを行う。マルチプレクサ１５は、この読出しを行うためのアドレスポインタを有しており、このアドレスポインタに示されたアドレスをサーバから読み出していく。
【００４６】
マルチプレクサ１５は、まず、最初の映像ソースであるビデオテープに対応するビデオ符号化データＳ１１のサーバ１４上のアドレスを、ビデオ符号化情報に基づき、アドレスポインタとして設定する。そして、このアドレスポインタに示されたアドレスからビデオ符号化データＳ１１の読出しを開始し、多重化を行う。マルチプレクサ１５は、ビデオ符号化データＳ１１のビデオストリームに従い、順次サーバ１４からデータを読出していくが、このとき、アドレスポインタの値を単純増加させていく。
【００４７】
マルチプレクサ１５は、アドレスポインタの値の増加量を監視し、このアドレスポインタの値がビデオ符号化情報のデータサイズに示されている値だけ増加しときに読出しを終了する。
【００４８】
読出しを終了すると、マルチプレクサ１５は、次の映像ソースであるビデオテープに対応するビデオ符号化データＳ１１のサーバ１４上のアドレスを、ビデオ符号化情報に基づきアドレスポインタとして設定する。そして、このアドレスにジャンプをしてビデオ符号化データＳ１１の読出しを再度開始し、処理を繰り返す。
【００４９】
また、マルチプレクサ１５は、ビデオ符号化データの読出し用のアドレスポインタのみならず、オーディオ符号化データ及びサブピクチャ符号化データの読出し用アドレスポインタも有しており、このオーディオ符号化データ等の読出し、多重化も同様に行う。
【００５０】
つぎに、具体的に、３本のビデオテープである第１から第３の映像ソースに基づき映画１作品分のオーサリングを行う場合の、このオーサリング装置１０の処理内容について説明する。
【００５１】
３本のビデオテープである第１から第３の映像ソースに基づき映画１作品分のオーサリングを行う場合、図２に示すように、サーバ１４の映像用の記録領域には、第１の映像ソースの映像を符号化した第１のビデオ符号化データＶ−ＲＯＬＬ１と、第２の映像ソースの映像を符号化した第２のビデオデータＶ−ＲＯＬＬ２と、第３の映像ソースの映像を符号化した第３のビデオデータＶ−ＲＯＬＬ３とが記録される。同様に、サーバの音声用の記録領域には、符号化した第１から第３のオーディオデータＡ−ＲＯＬＬ１〜Ａ−ＲＯＬＬ３が記録される。
【００５２】
そして、ビデオエンコーダ１１は、サーバ１４に記録した第１のビデオ符号化データＶ−ＲＯＬＬ１の記録開始アドレスＶ．ａｄｄｒｅｓｓ．１とデータサイズＶ．ｓｉｚｅ．１をビデオ符号化情報として生成する。また、同様に、第２のビデオ符号化データＶ−ＲＯＬＬ２の記録開始アドレスＶ．ａｄｄｒｅｓｓ．２とデータサイズＶ．ｓｉｚｅ．２、並びに、第３のビデオ符号化データＶ−ＲＯＬＬ３の記録開始アドレスＶ．ａｄｄｒｅｓｓ．３とデータサイズＶ．ｓｉｚｅ．３をビデオ符号化情報として生成する。
【００５３】
また、オーディオエンコーダ１２は、サーバ１４に記録した第１のオーディオ符号化データＡ−ＲＯＬＬ１の記録開始アドレスＡ．ａｄｄｒｅｓｓ．１とデータサイズＡ．ｓｉｚｅ．１をオーディオ符号化情報として生成する。また、同様に、第２のオーディオ符号化データＡ−ＲＯＬＬ２の記録開始アドレスＡ．ａｄｄｒｅｓｓ．２とデータサイズＡ．ｓｉｚｅ．２、並びに、第３のオーディオ符号化データＡ−ＲＯＬＬ３の記録開始アドレスＡ．ａｄｄｒｅｓｓ．３とデータサイズＡ．ｓｉｚｅ．３をオーディオ符号化情報として生成する。
【００５４】
このように生成されたビデオ符号化情報とオーディオ符号化情報は、図３に示すように、ファイル化され、ビデオエンコーダ１１及びオーディオエンコーダ１２からマルチプレクサ１５にネットワーク１９を介して供給される。
【００５５】
マルチプレクサ１５は、多重化処理を開始すると、ビデオアドレスポインタ（Ｖ．ａｄｄ．Ｐｏｉｎｔｅｒ）を、図２中Ａで示すポイントのアドレスである記録開始アドレスＶ．ａｄｄｒｅｓｓ．１に設定する。そして、第１のビデオ符号化データＶ−ＲＯＬＬ１の読出しを行う。次にアドレスポインタの増加量がデータサイズＶ．ｓｉｚｅ．１となると、第１のビデオ符号化データＶ−ＲＯＬＬ１の読出しを終了する。
【００５６】
マルチプレクサ１５は、第１のビデオ符号化データＶ−ＲＯＬＬ１の読出しを終了すると、ビデオアドレスポインタ（Ｖ．ａｄｄ．Ｐｏｉｎｔｅｒ）を、図２中Ｂで示すポイントのアドレスである記録開始アドレスＶ．ａｄｄｒｅｓｓ．２に設定する。そして、第１のビデオ符号化データＶ−ＲＯＬＬ１と第２のビデオ符号化データＶ−ＲＯＬＬ２の間に生じているギャップ部分をジャンプして、第２のビデオ符号化データＶ−ＲＯＬＬ２の読出しを行う。次にアドレスポインタの増加量がデータサイズＶ．ｓｉｚｅ．２となると、第２のビデオ符号化データＶ−ＲＯＬＬ２の読出しを終了する。
【００５７】
また、マルチプレクサ１５は、第２のビデオ符号化データＶ−ＲＯＬＬ２の読出しを終了すると、ビデオアドレスポインタ（Ｖ．ａｄｄ．Ｐｏｉｎｔｅｒ）を、図２中Ｃで示すポイントのアドレスである記録開始アドレスＶ．ａｄｄｒｅｓｓ．３に設定する。そして、第２のビデオ符号化データＶ−ＲＯＬＬ２と第３のビデオ符号化データＶ−ＲＯＬＬ３の間に生じているギャップ部分をジャンプして、第３のビデオ符号化データＶ−ＲＯＬＬ３の読出しを行う。次にアドレスポインタの増加量がデータサイズＶ．ｓｉｚｅ．３となると、第２のビデオ符号化データＶ−ＲＯＬＬ２の読出しを終了する。
【００５８】
同様に、マルチプレクサ１５は、多重化処理を開始すると、オーディオアドレスポインタ（Ａ．ａｄｄ．Ｐｏｉｎｔｅｒ）を、図２中Ｄで示すポイントのアドレスである記録開始アドレスＡ．ａｄｄｒｅｓｓ．１に設定する。そして、第１のオーディオ符号化データＡ−ＲＯＬＬ１の読出しを行う。次にアドレスポインタの増加量がデータサイズＡ．ｓｉｚｅ．１となると、第１のオーディオ符号化データＡ−ＲＯＬＬ１の読出しを終了する。
【００５９】
マルチプレクサ１５は、第１のオーディオ符号化データＡ−ＲＯＬＬ１の読出しを終了すると、オーディオアドレスポインタ（Ａ．ａｄｄ．Ｐｏｉｎｔｅｒ）を、図２中Ｅで示すポイントのアドレスである記録開始アドレスＡ．ａｄｄｒｅｓｓ．２に設定する。そして、第１のオーディオ符号化データＡ−ＲＯＬＬ１と第２のオーディオ符号化データＡ−ＲＯＬＬ２の間に生じているギャップ部分をジャンプして、第２のオーディオ符号化データＡ−ＲＯＬＬ２の読出しを行う。次にアドレスポインタの増加量がデータサイズＡ．ｓｉｚｅ．２となると、第２のオーディオ符号化データＡ−ＲＯＬＬ２の読出しを終了する。
【００６０】
また、マルチプレクサ１５は、第２のオーディオ符号化データＡ−ＲＯＬＬ２の読出しを終了すると、オーディオアドレスポインタ（Ａ．ａｄｄ．Ｐｏｉｎｔｅｒ）を、図２中Ｆで示すポイントのアドレスである記録開始アドレスＡ．ａｄｄｒｅｓｓ．３に設定する。そして、第２のオーディオ符号化データＡ−ＲＯＬＬ２と第３のオーディオ符号化データＡ−ＲＯＬＬ３の間に生じているギャップ部分をジャンプして、第３のオーディオ符号化データＡ−ＲＯＬＬ３の読出しを行う。次にアドレスポインタの増加量がデータサイズＡ．ｓｉｚｅ．３となると、第２のオーディオ符号化データＡ−ＲＯＬＬ２の読出しを終了する。
【００６１】
以上のように、この実施の形態のオーサリング装置１０では、各エンコーダ１１〜１３の符号化データの記録開始アドレス及びデータサイズの符号化情報に基づき、マルチプレクサ１５が各符号化データを多重化することにより、効率よく符号化データを多重化することができる。
【００６２】
なお、本実施の形態を説明するにあたり、映像ソースとしてビデオテープ、音声ソースとしてオーディオテープと説明したが、これらに限られず、他の記録媒体であってもよい。
【００６３】
また、実施の形態を説明するにあたり、ＤＶＤに対応したオーサリング装置について説明したが、本発明は、このＤＶＤのオーサリング装置に限られず、他の記録媒体のオーサリング装置に適用しても良い。例えば、各エンコーダ１１〜１３及びマルチプレクサ１５をその記録媒体のフォーマットに規定する符号化処理を行うようにすればよい。すなわち、各エンコーダの符号化情報をマルチプレクサに供給し、マルチプレクサがこの符号化情報に基づき多重化をすることにより、効率よく符号化データを多重化することができる。
【００６４】
【発明の効果】
本発明によれば、映像符号化情報及び音声符号化情報を参照して、符号化映像データ間及び上記符号化音声データ間でアドレスポインタをジャンプさせることにより、記憶手段から次の符号化映像データ及び符号化音声データを読み出すことから、効率よく符号化データを多重化することができる。
【図面の簡単な説明】
【図１】本発明を適用したＤＶＤのオーサリング装置のブロック構成図である。
【図２】本発明を適用したＤＶＤのオーサリング装置のサーバのディスクイメージを示す図である。
【図３】本発明を適用したＤＶＤのオーサリング装置のエンコーダが生成する符号化情報ファイルを説明する図である。
【図４】従来のＤＶＤのオーサリング装置のサーバのディスクイメージを示す図である。
【符号の説明】
１０オーサリング装置、１１ビデオエンコーダ、１２オーディオエンコーダ、１３サブピクチャエンコーダ、１４サーバ、１５マルチプレクサ、１６システムコントローラ、１７ビューア、１８テープストリーマ、１９ネットワーク[0001]
BACKGROUND OF THE INVENTION
The present invention generates recording data to be recorded on a recording medium such as an optical disc by multiplexing video and audio encoded data.Authoring apparatus and method and multiplexing apparatus and methodAbout.
[0002]
[Prior art]
In recent years, there has been proposed an optical disc called DVD that can record a large amount of data by compressing and encoding video and audio. This DVD employs an MPEG system or the like as a video signal or audio signal compression system, and can efficiently record video, audio, and the like.
[0003]
In such recording data recorded on a DVD, a moving image, a still image, audio, or the like is encoded based on the MPEG system or the like, and the encoded data is, for example, in a format according to the DVD-VIDEO standard or the like. Multiplexed and generated. Such an editing operation is generally called authoring, and a device that performs the editing operation is called an authoring device.
[0004]
A conventional authoring apparatus includes a video encoder that encodes video, an audio encoder that encodes audio, a multiplexer that multiplexes encoded video data and audio data to generate target recording data, and encoded video Generally, it is composed of a server for recording data, encoded audio data, and recording data.
[0005]
The video encoder of this conventional authoring apparatus reproduces a video from a recording medium such as a video tape serving as a video source, compresses the image by the MPEG method, and generates encoded video data. The encoded video data is recorded on the server. At this time, the video encoder stores the encoded video data in a temporary buffer, and performs a process of recording all of the encoded video data in the video buffer in the server when the encoding of a predetermined capacity is completed. . The capacity of the video buffer is set to an integral multiple of the recording unit (for example, sector unit) of the server for consistency with the server.
[0006]
Similarly to the video encoder, the audio encoder reproduces audio from a recording medium such as an audio tape as an audio source, compresses the signal by the MPEG method, and records the encoded audio data on the server.
[0007]
The server is composed of, for example, a hard disk array, and the video data and the audio data encoded by the video encoder and the audio encoder are recorded in different recording areas. The server also has a sufficient storage area that can store the encoded data.
[0008]
Then, the multiplexer sequentially reads out the signal-compressed video data and audio data from the server, multiplexes these data in accordance with the DVD-VIDEO standard, and sequentially records the resulting multiplexed data as recording data on the server. To do.
[0009]
[Problems to be solved by the invention]
When such authoring is performed, video data or the like is reproduced from a video source such as a video tape, and a process for encoding the reproduction signal is performed.
[0010]
However, there are cases in which video for a movie is recorded across multiple video tapes. In such a case, the video encoder performs the process of encoding the video recorded on the next video tape after encoding all the video recorded on the first video tape. That is, instead of encoding for each movie, the encoding must be performed in units of recording media as video sources. The same applies to encoding audio recorded on a recording medium such as an audio tape as a plurality of audio sources.
[0011]
FIG. 4 shows a disk image of encoded video data and audio data recorded in a server when video and audio such as a movie recorded over a plurality of video tapes or audio tapes are encoded. It is a figure.
[0012]
For example, when authoring one movie based on the first to third video sources, which are three video tapes, the video of the first video source ROLL1 is encoded in the video recording area of the server. The first video data, the second video data obtained by encoding the video of the second video source ROLL2, and the third video data encoded by the video of the third video source ROLL3 are recorded. Similarly, the encoded first to third audio data are recorded in the voice recording area of the server.
[0013]
Here, in the video recording area, there is a gap area in which no video data is recorded in the area between the encoded first and second video data. A gap (Gap) region also exists in the region between the second and third video encoded data. Similarly, a gap (Gap) exists in an area between encoded audio data in the audio recording area of the server.
[0014]
The reason for this is as follows. That is, the video encoder or the audio encoder stores the encoded data in a temporary buffer, and records all of the encoded data in the buffer in the server when the encoding of a predetermined capacity is completed. The capacity of this buffer is set to an integral multiple of the recording unit (for example, sector unit) of the server for consistency with the server. Therefore, the encoded data of the video recorded in the last part of the video tape or the like that is the video source is not always recorded on the server with the buffer full. Therefore, in the server, a gap is generated in a region between a plurality of encoded data streams corresponding to each video source and the like.
[0015]
By the way, when the encoded video data and audio data are multiplexed by the multiplexer, it is necessary to handle a plurality of encoded video data streams as one data stream based on each video source. . Therefore, a plurality of encoded video data and a plurality of encoded audio data corresponding to each video source or each audio source are copied to another recording area of the server, and the video data and audio as a plurality of streams are recorded. You need to connect data.
[0016]
However, duplication or the like to form one data stream takes time because the amount of data handled is very large, and is inefficient.
[0017]
The present invention has been made in view of such circumstances, and an editing apparatus that efficiently multiplexes even when video or audio to be encoded is recorded on a plurality of video tapes or the like. It is an object to provide a data editing method.
[0018]
[Means for Solving the Problems]
In order to solve the above-described problems, the present invention relates toThe authoring device includes: a video encoding unit that encodes a plurality of video data to generate a plurality of encoded video data; a voice encoding unit that encodes the plurality of audio data to generate a plurality of encoded audio data; Storage means for storing each encoded video data and each encoded audio data, and video encoding information including a data size of each encoded video data and a recording start address of the storage means for each encoded video data Encoding information generating means for generating, for each encoded audio data, audio encoding information including the data size of each encoded audio data and the recording start address of the storage means, and the encoding information generation Address pointers for the storage area of the storage means while referring to each of the video encoded information and each of the audio encoded information generated by the means. By controlling each of the encoded video data and the encoded audio data from the storage means, and multiplexing the read encoded video data and the encoded audio data respectively. And have. Then, the multiplexing means refers to the video encoded information and the audio encoded information, and jumps the address pointer between the encoded video data and between the encoded audio data, so that the next from the storage means. The encoded video data and the encoded audio data are read out.
[0019]
The authoring method according to the present invention includes a step of encoding a plurality of video data to generate a plurality of encoded video data, a step of encoding a plurality of audio data to generate a plurality of encoded audio data, A step of storing the encoded video data and each encoded audio data in a storage means; and video encoding information including a data size of each encoded video data and a recording start address of the storage means for each encoded video data And generating the encoded audio data including the data size of each encoded audio data and the recording start address of the storage unit for each encoded audio data, and the encoded information generating unit In addition, while referring to each of the video encoding information and each of the audio encoding information, an address pointer for the storage area of the storage means Each of the encoded video data and the encoded audio data is read from the storage means, and the read encoded video data and the encoded audio data are multiplexed. Have. In the multiplexing step, the address pointer is jumped between the encoded video data and between the encoded audio data by referring to the video encoded information and the audio encoded information. Next, the encoded video data and the encoded audio data are read out.
[0020]
The multiplexing apparatus according to the present invention includes a storage unit that stores each encoded video data obtained by encoding a plurality of video data and each encoded audio data obtained by encoding a plurality of audio data; Includes video encoding information for each encoded video data including the data size of the encoded video data and the recording start address of the storage means, the data size of each encoded audio data, and the recording start address of the storage means An input unit for inputting audio encoding information for each encoded audio data, and a storage area of the storage unit while referring to each of the video encoding information and each audio encoding information input by the input unit By reading the address pointer, the encoded video data and the encoded audio data are read from the storage means and read out. Each said encoded video data and each said encoded audio data, respectively, and a multiplexing means for multiplexing. Then, the multiplexing means refers to the video encoded information and the audio encoded information, and jumps the address pointer between the encoded video data and between the encoded audio data, so that the next from the storage means. The encoded video data and the encoded audio data are read out.
[0021]
A multiplexing method according to the present invention includes storing each encoded video data obtained by encoding a plurality of video data and each encoded audio data obtained by encoding a plurality of audio data in a storage means; Video encoded information for each encoded video data including the data size of each encoded video data and the recording start address of the storage means; the data size of each encoded audio data and the recording start address of the storage means Input the audio encoding information for each encoded audio data including the address, and the address for the storage area of the storage means while referring to the input video encoding information and the audio encoding information. By controlling the pointer, each encoded video data and each encoded audio data is read from the storage means, and each read Serial coded video data and each said encoded audio data, respectively, and a step of multiplexing. The multiplexing step is performed by jumping an address pointer between the encoded video data and between the encoded audio data with reference to the video encoded information and the audio encoded information, and The encoded video data and the encoded audio data are read out.
[0022]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, an authoring apparatus according to an embodiment to which the present invention is applied will be described with reference to the drawings.
[0023]
An authoring apparatus 10 that is an embodiment to which the present invention shown in FIG. 1 is applied generates recording data to be recorded on an optical disc in accordance with the DVD-VIDEO standard by compressing and encoding images and audio.
[0024]
The authoring apparatus 10 includes a video encoder 11 that encodes a moving image, an audio encoder 12 that encodes audio, a sub-picture encoder that encodes a still image, and a server 14 that stores the encoded data. A multiplexer 15 that multiplexes the encoded data to generate recording data, and a system controller 16 that manages the operation of the entire apparatus. In addition, the authoring apparatus 10 includes a viewer 17 that inspects the generated recording data and a tape streamer 18 that records the generated recording data on a predetermined recording medium such as a magnetic tape.
[0025]
The video encoder 11 compresses and encodes a video signal S10 supplied by reproducing a video tape or the like as a video source based on the MPEG system, and sequentially obtains the video encoded data S11 obtained as a result in a predetermined storage area of the server 14. Store. The video encoder 11 receives various information necessary for encoding, for example, moving image information to be encoded and address information of a storage area for storing encoded data from the system controller 16 via the network 19, Encoding processing is executed based on the information, and the encoded video data S11 is stored in the designated storage area of the server.
[0026]
The audio encoder 12 compresses and encodes an audio signal S12 supplied by reproducing an audio tape or the like, which is an audio source, by combining MPEG audio system or AC-3 system (modified discrete cosine transform (MDCT) and spectrum envelope encoding). The audio encoded data S13 obtained as a result is stored in a predetermined storage area of the server 14 sequentially. The audio encoder 12 also receives various kinds of information necessary for encoding, for example, voice information to be encoded and address information of a storage area for storing encoded data from the system controller 16 via the network 19, Encoding processing is executed based on the information, and the audio encoded data S13 is stored in the designated storage area of the server.
[0027]
The sub-picture encoder 13 encodes a sub-picture signal S14 such as subtitles supplied by reproducing a video tape or the like as a sub-picture source by a predetermined encoding method, and the sub-picture encoded data S15 obtained as a result is encoded by the server. The data are sequentially stored in 14 predetermined storage areas. Similarly, the sub-picture encoder 13 receives various information necessary for encoding, for example, the number of pictures to be encoded and address information of a storage area for storing encoded data from the system controller 16 via the network 19. Based on these pieces of information, the sub-picture encoded data S15 is stored in the storage area designated by the server 14.
[0028]
The server 14 is composed of a hard disk array having a plurality of input / output ports, and stores input encoded data S11, S13, and S15 in different storage areas. In addition to the storage areas for the encoded data S11, S13, and S15, the server 14 has a storage area for storing multiplexed data generated by the multiplexer 15 described later. Are stored in the storage area. That is, the server 14 has a sufficient storage area that can store the encoded data S11, S13, S15 and multiplexed data.
[0029]
Further, the server 14 uses, for example, SCSI capable of high-speed transmission as an interface for connecting the encoders 11 to 13.
[0030]
The multiplexer 15 sequentially reads out the encoded data S11, S13, and S15 from the server 14 as processing target data, multiplexes these data in accordance with the DVD-VIDEO standard, and multiplex data S17 obtained as a result is recorded data. Are sequentially stored in a predetermined storage device of the server 14. The multiplexer 15 transmits information necessary for multiplexing, for example, address information of a storage area in which each encoded data S11, S13, S15 is stored, address information of a storage area in which multiplexed data is stored, and the like through the network 19. Through the system controller 16, the multiplexing process is executed based on these pieces of information, and the multiplexed data S 17 is stored in the designated storage area of the server 14.
[0031]
The viewer 17 is for inspecting whether the encoding process of each encoder 11-13 and the multiplexing process of the multiplexer 15 were normally performed. The viewer 17 reads and decodes the multiplexed data S17 stored in the server 14, and outputs this to the monitor. By providing such a viewer 17, the authoring apparatus 10 can immediately and easily inspect whether the encoding process and the multiplexing process are normally performed. The viewer 17 also receives information necessary for decoding, for example, address information of a storage area in which the multiplexed data S17 is stored and information on the encoding method from the system controller 16 via the network 19 and receives the information. The decryption process is executed based on the above.
[0032]
The tape streamer 18 records the multiplexed data S17 on a magnetic tape or the like in order to pass the multiplexed data S17 to the disk manufacturing process. The tape streamer 18 receives information necessary for the recording operation, for example, address information of a storage area in which the multiplexed data S17 is stored, information on a recording method, and the like from the system controller 16 via the network 19, and receives these information. Based on this, the multiplexed data S17 is sequentially read from the server 14 and recorded on a magnetic tape or the like. By providing such a tape streamer 18, the authoring apparatus 10 can immediately and easily record multiplexed data S17, which is recording data to be passed to the disk manufacturing process.
[0033]
Note that the multiplexer 15, the viewer 17, the tape streamer 18, and the server 14 are connected using an interface such as SCSI capable of high-speed transmission.
[0034]
The system controller 16 manages the operations of the encoders 11 to 13, the multiplexer 15, the viewer 17, and the tape streamer 18, and manages the data recording area of the server 14.
[0035]
Specifically, the system controller 16 gives an instruction to start the encoding process to each of the encoders 11 to 13 based on the authoring information S18 necessary for the authoring work input by the operator. Further, when the encoding process of each encoder 11 to 13 is completed, the system controller 16 gives the multiplexer 15 an instruction to start the multiplexing process. Further, when the processing of the multiplexer 15 is completed, the system controller 16 gives an instruction to start processing to the viewer 17 and the tape streamer 18.
[0036]
Further, the system controller 16 manages the storage area of the encoded data S11, S13, S15 generated by the encoders 11-13 and the multiplexed data S17 generated by the multiplexer 15, and Each storage area is designated as a data storage destination, and a storage area different from the encoded data S11, S13, S15 is designated as a data storage destination for the multiplexer 15.
[0037]
By providing such a system controller 16, each of the encoders 11 to 13 and the like can execute the work assigned to them, and the storage destinations of the generated data S11, S13, S15, and S17 do not overlap. Thus, the server 14 can be shared among the devices.
[0038]
The operation instruction and the data storage destination instruction from the system controller 16 are given to the encoders 11 to 13 through the network 19, respectively.
[0039]
Next, encoding information generated by the video encoder 11, the audio encoder 12, and the sub-picture encoder 13 that encode the video signal S10 and the like together with the video encoded data S11 and the like will be described.
[0040]
The encoders 11, 12, and 13 of the authoring device 10 are codes for each video source, such as when video for one movie is recorded across a recording medium such as a video tape as a plurality of video sources. Generate information.
[0041]
The video encoder 11 generates, as the encoded information, the data size of the encoded video data S11 corresponding to the video tape as each video source and the recording start address on the server 14 as encoded information. This encoded video information is filed and supplied to the multiplexer 15 via the network 19. Also, the audio encoder 12 generates, as encoded information, the data size of the encoded audio data S13 corresponding to the audio tape that is each audio source and the recording start address on the server 14 as encoded audio information. This audio encoded information is also filed and supplied to the multiplexer 15 via the network 19.
[0042]
Further, the sub-picture encoder 13 generates, as the sub-picture encoding information, the data size of the sub-picture encoded data S15 corresponding to the video tape as each video source and the recording start address on the server 14 as the encoding information. To do. This sub-picture encoded information is also filed and supplied to the multiplexer 15 via the network 19.
[0043]
Next, the multiplexer 15 that generates the multiplexed data S17 that is recording data based on the encoding information supplied from the video encoder 11, the audio encoder 12, and the sub-picture encoder 13 will be described.
[0044]
As described above, the multiplexer 15 is supplied with video encoded information, audio encoded information, and sub-picture encoded information in a file format. The multiplexer 15 starts multiplexing based on the control of the system controller 16.
[0045]
The multiplexer 15 reads the encoded video data S11, encoded audio data S13, and encoded sub-picture data S15 that are encoded by the encoders 11 to 13 and recorded in the server 14 when the multiplexing is performed. The multiplexer 15 has an address pointer for performing this reading, and reads the address indicated by this address pointer from the server.
[0046]
The multiplexer 15 first sets the address on the server 14 of the video encoded data S11 corresponding to the video tape as the first video source as an address pointer based on the video encoded information. Then, reading of the video encoded data S11 is started from the address indicated by the address pointer, and multiplexing is performed. The multiplexer 15 sequentially reads data from the server 14 in accordance with the video stream of the video encoded data S11. At this time, the value of the address pointer is simply increased.
[0047]
The multiplexer 15 monitors the amount of increase in the value of the address pointer, and ends reading when the value of the address pointer increases by the value indicated by the data size of the video encoding information.
[0048]
When the reading is completed, the multiplexer 15 sets the address on the server 14 of the video encoded data S11 corresponding to the video tape as the next video source as an address pointer based on the video encoded information. Then, a jump is made to this address, reading of the video encoded data S11 is started again, and the processing is repeated.
[0049]
The multiplexer 15 has not only an address pointer for reading video encoded data but also an address pointer for reading audio encoded data and sub-picture encoded data. Multiplexing is performed in the same way.
[0050]
Next, the processing content of the authoring apparatus 10 when authoring one movie based on the first to third video sources, which are three video tapes, will be described.
[0051]
When authoring for one movie based on the first to third video sources which are three video tapes, as shown in FIG. 2, the video recording area of the server 14 includes the first video source. Encoded first video encoded data V-ROLL1, encoded second video data V-ROLL2, and encoded third video source video. Third video data V-ROLL3 is recorded. Similarly, encoded first to third audio data A-ROLL1 to A-ROLL3 are recorded in the voice recording area of the server.
[0052]
The video encoder 11 then records the recording start address V.1 of the first encoded video data V-ROLL1 recorded in the server 14. address. 1 and data size size. 1 is generated as video encoding information. Similarly, the recording start address V.2 of the second video encoded data V-ROLL2. address. 2 and data size size. 2 and the recording start address V.3 of the third video encoded data V-ROLL3. address. 3 and data size size. 3 is generated as video encoding information.
[0053]
The audio encoder 12 also records the recording start address A.R of the first audio encoded data A-ROLL1 recorded in the server 14. address. 1 and data size A.1. size. 1 is generated as audio encoding information. Similarly, the recording start address A.2 of the second audio encoded data A-ROLL2 is recorded. address. 2 and data size A.2. size. 2 and the recording start address A.3 of the third audio encoded data A-ROLL3. address. 3 and data size A.3. size. 3 is generated as audio encoding information.
[0054]
The video encoding information and the audio encoding information generated in this way are converted into a file as shown in FIG. 3 and supplied from the video encoder 11 and the audio encoder 12 to the multiplexer 15 via the network 19.
[0055]
When the multiplexing process is started, the multiplexer 15 sets the video address pointer (V.add.Pointer) to the recording start address V.D. that is the address of the point indicated by A in FIG. address. Set to 1. Then, the first video encoded data V-ROLL1 is read. Next, the increment of the address pointer is the data size V.P. size. When 1, the reading of the first video encoded data V-ROLL1 is finished.
[0056]
When the multiplexer 15 finishes reading the first video encoded data V-ROLL1, the multiplexer 15 sets the video address pointer (V.add.Pointer) to the recording start address V.point, which is the address of the point indicated by B in FIG. address. Set to 2. Then, the second video encoded data V-ROLL2 is read by jumping a gap portion generated between the first video encoded data V-ROLL1 and the second video encoded data V-ROLL2. . Next, the increment of the address pointer is the data size V.P. size. When 2, the reading of the second video encoded data V-ROLL2 ends.
[0057]
Further, when the multiplexer 15 finishes reading the second video encoded data V-ROLL2, the multiplexer 15 sets the video address pointer (V.add.Pointer) to the recording start address V.point which is the address of the point indicated by C in FIG. address. Set to 3. Then, the gap portion generated between the second video encoded data V-ROLL2 and the third video encoded data V-ROLL3 is jumped to read out the third video encoded data V-ROLL3. . Next, the increment of the address pointer is the data size V.P. size. When 3, the reading of the second video encoded data V-ROLL2 ends.
[0058]
Similarly, when the multiplexing process is started, the multiplexer 15 sets the audio address pointer (A.add.Pointer) to a recording start address A.point which is the address of the point indicated by D in FIG. address. Set to 1. Then, the first audio encoded data A-ROLL1 is read. Next, the increment of the address pointer is the data size A.E. size. When 1, the reading of the first audio encoded data A-ROLL1 is terminated.
[0059]
When the multiplexer 15 finishes reading the first encoded audio data A-ROLL1, the multiplexer 15 sets the audio address pointer (A.add.Pointer) to the recording start address A.point which is the address of the point indicated by E in FIG. address. Set to 2. Then, the second audio encoded data A-ROLL2 is read by jumping the gap portion generated between the first audio encoded data A-ROLL1 and the second audio encoded data A-ROLL2. . Next, the increment of the address pointer is the data size A.E. size. When 2, the reading of the second audio encoded data A-ROLL2 ends.
[0060]
When the multiplexer 15 finishes reading the second encoded audio data A-ROLL2, the multiplexer 15 sets the audio address pointer (A.add.Pointer) to the recording start address A.point which is the address of the point indicated by F in FIG. address. Set to 3. Then, the third audio encoded data A-ROLL3 is read by jumping a gap portion generated between the second audio encoded data A-ROLL2 and the third audio encoded data A-ROLL3. . Next, the increment of the address pointer is the data size A.E. size. When 3, the reading of the second audio encoded data A-ROLL2 ends.
[0061]
As described above, in the authoring apparatus 10 according to this embodiment, the multiplexer 15 multiplexes each encoded data based on the encoding start information of the encoded data of each of the encoders 11 to 13 and the encoding information of the data size. Thus, the encoded data can be multiplexed efficiently.
[0062]
In the description of the present embodiment, the video source is described as a video tape, and the audio source is described as an audio tape. However, the present invention is not limited to this, and other recording media may be used.
[0063]
In the description of the embodiment, the authoring apparatus corresponding to the DVD has been described. However, the present invention is not limited to this DVD authoring apparatus, and may be applied to other recording medium authoring apparatuses. For example, the encoders 11 to 13 and the multiplexer 15 may perform an encoding process that defines the format of the recording medium. That is, the encoded information of each encoder is supplied to the multiplexer, and the multiplexer multiplexes based on the encoded information, so that the encoded data can be efficiently multiplexed.
[0064]
【The invention's effect】
According to the present invention, by referring to the video encoded information and the audio encoded information, the next encoded video data is stored from the storage means by jumping the address pointer between the encoded video data and between the encoded audio data. And read out the encoded audio dataTherefore, the encoded data can be multiplexed efficiently.
[Brief description of the drawings]
FIG. 1 is a block diagram of a DVD authoring apparatus to which the present invention is applied.
FIG. 2 is a diagram showing a disk image of a server of a DVD authoring apparatus to which the present invention is applied.
FIG. 3 is a diagram illustrating an encoded information file generated by an encoder of a DVD authoring apparatus to which the present invention is applied.
FIG. 4 is a diagram showing a disk image of a server of a conventional DVD authoring apparatus.
[Explanation of symbols]
10 authoring device, 11 video encoder, 12 audio encoder, 13 sub-picture encoder, 14 server, 15 multiplexer, 16 system controller, 17 viewer, 18 tape streamer, 19 network

Claims

複数の映像データを符号化して複数の符号化映像データを生成する映像符号化手段と、
複数の音声データを符号化して複数の符号化音声データを生成する音声符号化手段と、
各上記符号化映像データ及び各上記符号化音声データを記憶する記憶手段と、
各上記符号化映像データのデータサイズ及び上記記憶手段の記録開始アドレスを含む映像符号化情報を上記符号化映像データ毎に生成するとともに、各上記符号化音声データのデータサイズ及び上記記憶手段の記録開始アドレスを含む音声符号化情報を上記符号化音声データ毎に生成する符号化情報生成手段と、
上記符号化情報生成手段により生成された各上記映像符号化情報及び各上記音声符号化情報を参照しながら、上記記憶手段の記憶領域に対するアドレスポインタを制御することによって、上記記憶手段から各上記符号化映像データ及び各上記符号化音声データを読み出し、読み出した各上記符号化映像データ及び各上記符号化音声データをそれぞれ多重化する多重化手段とを有し、
上記多重化手段は、上記映像符号化情報及び上記音声符号化情報を参照して上記符号化映像データ間及び上記符号化音声データ間でアドレスポインタをジャンプさせることにより、上記記憶手段から次の上記符号化映像データ及び上記符号化音声データを読み出すオーサリング装置。Video encoding means for encoding a plurality of video data to generate a plurality of encoded video data;
Audio encoding means for encoding a plurality of audio data to generate a plurality of encoded audio data;
Storage means for storing each encoded video data and each encoded audio data;
Video encoding information including the data size of each encoded video data and the recording start address of the storage means is generated for each encoded video data, and the data size of each encoded audio data and the recording of the storage means Encoded information generating means for generating encoded audio information including a start address for each encoded audio data;
By referring to each video encoded information and each audio encoded information generated by the encoded information generating means, by controlling an address pointer for the storage area of the storage means, each code from the storage means Multiplexed video data and each encoded audio data is read, and each of the encoded video data and each encoded audio data read out is multiplexed,
The multiplexing means refers to the video encoded information and the audio encoded information, and jumps an address pointer between the encoded video data and between the encoded audio data, so that the next means An authoring device that reads out encoded video data and the encoded audio data.

更に、上記多重化手段により生成されたデータを記録媒体に記録する記録手段を有する請求項１に記載のオーサリング装置。 The authoring apparatus according to claim 1, further comprising recording means for recording data generated by the multiplexing means on a recording medium.

上記多重化手段は、上記アドレスポインタを、上記符号化映像データ及び上記符号化音声データ毎に制御することによって、上記記憶手段から各上記符号化映像データ及び各上記符号化音声データを読み出す請求項１に記載のオーサリング装置。 The multiplexing means reads out each encoded video data and each encoded audio data from the storage means by controlling the address pointer for each of the encoded video data and the encoded audio data. The authoring apparatus according to 1.

上記多重化手段は、多重化処理を開始する際の上記アドレスポインタを上記記録開始アドレスに設定して、上記記憶手段から上記符号化映像データ及び上記符号化音声データを読み出し、上記アドレスポインタの増加量が上記データサイズとなった場合に、上記符号化映像データ及び上記符号化音声データの読み出し処理を終了する請求項３に記載のオーサリング装置。 The multiplexing means sets the address pointer when starting the multiplexing process to the recording start address, reads the encoded video data and the encoded audio data from the storage means, and increases the address pointer. The authoring device according to claim 3, wherein when the amount reaches the data size, the read processing of the encoded video data and the encoded audio data is terminated.

複数の映像データを符号化して複数の符号化映像データを生成するステップと、
複数の音声データを符号化して複数の符号化音声データを生成するステップと、
各上記符号化映像データ及び各上記符号化音声データを記憶手段に記憶するステップと、
各上記符号化映像データのデータサイズ及び上記記憶手段の記録開始アドレスを含む映像符号化情報を上記符号化映像データ毎に生成するとともに、各上記符号化音声データのデータサイズ及び上記記憶手段の記録開始アドレスを含む音声符号化情報を上記符号化音声データ毎に生成するステップと、
上記符号化情報生成手段により生成された各上記映像符号化情報及び各上記音声符号化情報を参照しながら、上記記憶手段の記憶領域に対するアドレスポインタを制御することによって、上記記憶手段から各上記符号化映像データ及び各上記符号化音声データを読み出し、読み出した各上記符号化映像データ及び各上記符号化音声データをそれぞれ多重化するステップとを有し、
上記多重化のステップは、上記映像符号化情報及び上記音声符号化情報を参照して上記符号化映像データ間及び上記符号化音声データ間でアドレスポインタをジャンプさせることにより、上記記憶手段から次の上記符号化映像データ及び上記符号化音声データを読み出すオーサリング方法。Encoding a plurality of video data to generate a plurality of encoded video data;
Encoding a plurality of audio data to generate a plurality of encoded audio data;
Storing each encoded video data and each encoded audio data in a storage means;
Video encoding information including the data size of each encoded video data and the recording start address of the storage means is generated for each encoded video data, and the data size of each encoded audio data and the recording of the storage means Generating speech encoding information including a start address for each encoded speech data;
By referring to each video encoded information and each audio encoded information generated by the encoded information generating means, by controlling an address pointer for the storage area of the storage means, each code from the storage means Reading the encoded video data and the encoded audio data, and multiplexing the read encoded video data and the encoded audio data, respectively.
The multiplexing step is performed by jumping an address pointer between the encoded video data and between the encoded audio data with reference to the video encoded information and the audio encoded information, and An authoring method for reading out the encoded video data and the encoded audio data.

複数の映像データを符号化して得られる各上記符号化映像データ及び複数の音声データを符号化して得られる各上記符号化音声データを記憶する記憶手段と、
各上記符号化映像データのデータサイズ及び上記記憶手段の記録開始アドレスを含む上記符号化映像データ毎の映像符号化情報と、各上記符号化音声データのデータサイズ及び上記記憶手段の記録開始アドレスを含む上記符号化音声データ毎の音声符号化情報とを入力する入力手段と、
上記入力手段により入力された各上記映像符号化情報及び各上記音声符号化情報を参照しながら、上記記憶手段の記憶領域に対するアドレスポインタを制御することによって、上記記憶手段から各上記符号化映像データ及び各上記符号化音声データを読み出し、読み出した各上記符号化映像データ及び各上記符号化音声データをそれぞれ多重化する多重化手段とを有し、
上記多重化手段は、上記映像符号化情報及び上記音声符号化情報を参照して上記符号化映像データ間及び上記符号化音声データ間でアドレスポインタをジャンプさせることにより、上記記憶手段から次の上記符号化映像データ及び上記符号化音声データを読み出す多重化装置。Storage means for storing each encoded video data obtained by encoding a plurality of video data and each encoded audio data obtained by encoding a plurality of audio data;
Video encoding information for each encoded video data including the data size of each encoded video data and the recording start address of the storage means, the data size of each encoded audio data, and the recording start address of the storage means Input means for inputting speech encoding information for each of the encoded speech data including,
Each encoded video data from the storage means is controlled by controlling an address pointer for the storage area of the storage means while referring to each of the video encoded information and the audio encoded information input by the input means. And each of the encoded audio data is read, and each of the encoded video data and the encoded audio data that have been read out is multiplexed,
The multiplexing means refers to the video encoded information and the audio encoded information, and jumps an address pointer between the encoded video data and between the encoded audio data, so that the next means A multiplexing apparatus for reading out encoded video data and the encoded audio data.

更に、上記多重化手段により生成されたデータを記録媒体に記録する記録手段を有する請求項６に記載の多重化装置。 7. The multiplexing apparatus according to claim 6, further comprising recording means for recording the data generated by the multiplexing means on a recording medium.

上記多重化手段は、上記アドレスポインタを、上記符号化映像データ及び上記符号化音声データ毎に制御することによって、上記記憶手段から各上記符号化映像データ及び各上記符号化音声データを読み出す請求項６に記載の多重化装置。The multiplexing means reads out each encoded video data and each encoded audio data from the storage means by controlling the address pointer for each of the encoded video data and the encoded audio data. 6. The multiplexing apparatus according to 6 .

上記多重化手段は、多重化処理を開始する際の上記アドレスポインタを上記記録開始アドレスに設定して、上記記憶手段から上記符号化映像データ及び上記符号化音声データを読み出し、上記アドレスポインタの増加量が上記データサイズとなった場合に、上記符号化映像データ及び上記符号化音声データの読み出し処理を終了する請求項８に記載の多重化装置。 The multiplexing means sets the address pointer when starting the multiplexing process to the recording start address, reads the encoded video data and the encoded audio data from the storage means, and increases the address pointer. 9. The multiplexing apparatus according to claim 8, wherein when the amount reaches the data size, the read processing of the encoded video data and the encoded audio data is terminated.

複数の映像データを符号化して得られる各上記符号化映像データ及び複数の音声データを符号化して得られる各上記符号化音声データを記憶手段に記憶するステップと、
各上記符号化映像データのデータサイズ及び上記記憶手段の記録開始アドレスを含む上記符号化映像データ毎の映像符号化情報と、各上記符号化音声データのデータサイズ及び上記記憶手段の記録開始アドレスを含む上記符号化音声データ毎の音声符号化情報とを入力するステップと、
上記入力された各上記映像符号化情報及び各上記音声符号化情報を参照しながら、上記記憶手段の記憶領域に対するアドレスポインタを制御することによって、上記記憶手段から各上記符号化映像データ及び各上記符号化音声データを読み出し、読み出した各上記符号化映像データ及び各上記符号化音声データをそれぞれ多重化するステップとを有し、
上記多重化のステップは、上記映像符号化情報及び上記音声符号化情報を参照して上記符号化映像データ間及び上記符号化音声データ間でアドレスポインタをジャンプさせることにより、上記記憶手段から次の上記符号化映像データ及び上記符号化音声データを読み出す多重化方法。Storing each encoded video data obtained by encoding a plurality of video data and each encoded audio data obtained by encoding a plurality of audio data in a storage means;
Video encoding information for each encoded video data including the data size of each encoded video data and the recording start address of the storage means, the data size of each encoded audio data, and the recording start address of the storage means Including the step of inputting speech encoding information for each of the encoded speech data including:
By referring to each of the inputted video encoding information and each of the audio encoding information, by controlling an address pointer with respect to a storage area of the storage unit, each encoded video data and each of the above-mentioned data from the storage unit Reading encoded audio data, and multiplexing each of the encoded video data and the encoded audio data read out,
The multiplexing step is performed by jumping an address pointer between the encoded video data and between the encoded audio data with reference to the video encoded information and the audio encoded information, and A multiplexing method for reading out the encoded video data and the encoded audio data.