JP4096310B2 - 情報作成装置および方法、再生装置および方法、並びにプログラム - Google Patents

情報作成装置および方法、再生装置および方法、並びにプログラム Download PDF

Info

Publication number
JP4096310B2
JP4096310B2 JP2003172791A JP2003172791A JP4096310B2 JP 4096310 B2 JP4096310 B2 JP 4096310B2 JP 2003172791 A JP2003172791 A JP 2003172791A JP 2003172791 A JP2003172791 A JP 2003172791A JP 4096310 B2 JP4096310 B2 JP 4096310B2
Authority
JP
Japan
Prior art keywords
picture
information
point
decoding
pictures
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP2003172791A
Other languages
English (en)
Other versions
JP2005012390A (ja
Inventor
誠司 河
隆夫 鈴木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2003172791A priority Critical patent/JP4096310B2/ja
Priority to US10/868,839 priority patent/US20050008328A1/en
Publication of JP2005012390A publication Critical patent/JP2005012390A/ja
Application granted granted Critical
Publication of JP4096310B2 publication Critical patent/JP4096310B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/12Formatting, e.g. arrangement of data block or words on the record carriers
    • G11B20/1217Formatting, e.g. arrangement of data block or words on the record carriers on discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/327Table of contents
    • G11B27/329Table of contents on a disc [VTOC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • G11B2020/10537Audio or video recording
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B2020/10935Digital recording or reproducing wherein a time constraint must be met
    • G11B2020/10944Real-time recording or reproducing, e.g. for ensuring seamless playback of AV data
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2541Blu-ray discs; Blue laser DVR discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2545CDs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2562DVDs [digital versatile discs]; Digital video discs; MMCDs; HDCDs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/78Television signal recording using magnetic recording
    • H04N5/781Television signal recording using magnetic recording on disks or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal

Description

【0001】
【発明の属する技術分野】
本発明は、情報作成装置および方法、再生装置および方法、並びにプログラムに関し、特に、画質等の劣化を生じさせることなく、画像データのリアルタイム再生を保証することができるようにする情報作成装置および方法、再生装置および方法、並びにプログラムに関する。
【0002】
【従来の技術】
近年、データの書き込みや消去を繰り返し行うことができるCD-RW(Compact Disk-ReWritable)、DVD-RW(Digital Versatile Disc-ReWritable)などの記録媒体が、その低価格化に伴い普及しつつある。
【0003】
これらのディスク状の記録媒体では、所定のデータへのランダムアクセスが可能であり、ビデオデータやオーディオデータなどのAV(Audio Visual)データ(画像データ)の書き込みや消去が繰り返し行われた場合、連続して再生されるべき画像データが、それぞれ離れた領域に分断して記録されることがある。
【0004】
また、連続するデータが分断してディスク上に記録されることは、画像データの非破壊編集が行われた場合にも生じうる。
【0005】
非破壊編集とは、例えば、光ディスク等に記録された素材データとしての画像データに対して、IN点やOUT点などのいわゆる編集点を設定するだけで、素材データそのものを編集しない(破壊しない)編集方法である。非破壊編集においては、例えば、エディトリスト(Edit List)などと呼ばれる、編集時に設定された編集点のリストが作成される。そして、その編集結果の再生は、エディトリストに記述されている編集点にしたがって、光ディスクに記録された素材データを再生することにより行われる。
【0006】
このような非破壊編集によれば、例えば、素材データがMPEG(Moving Picture Experts Group)エンコードなどの非可逆変換されている場合に、素材データをデコードしてから、そのデコード結果を、エディトリストに記述されている編集点にしたがってつなぎ合わせ、再度、そのつなぎ合わせられた素材データをMPEGエンコードする必要がない。従って、デコードとエンコードが繰り返されることによる、画質等の劣化を防止することができる。
【0007】
ところで、それぞれ離れた領域に分断して光ディスク上に記録された画像データを非破壊編集により再生する場合、その再生を行う再生装置では、ある領域から他の領域に再生対象が移行するときに、シークが発生する。
【0008】
そして、このシークに要するシーク時間が大である場合には、そのとき再生すべき画像データの読み出しが、その再生時刻に間に合わず、再生が途切れること、すなわち、画像データのリアルタイム再生ができないことがある。
【0009】
そこで、シーク時間が小となるように、分断して記録されている所定の素材データをブリッジクリップ(Bridge Clip)として再配置する技術が特許文献1に記載されている。これにより、シーク時間が大であることにより生じるバッファアンダーランを回避し、画像データのリアルタイム再生を確保することができる。
【0010】
【特許文献1】
特開2002−158974号公報
【0011】
【発明が解決しようとする課題】
しかしながら、ブリッジクリップを作成し、それを参照して再生することによっては、再生装置において生じるシーク時間の問題は解決することができるものの、その再生装置に用意されているデコーダが、例えば、1倍速のデコード処理速度を有する1つのデコーダのみである場合には、エディトリストに記述される編集点にしたがって、光ディスクにMPEG方式で記録された画像データ(MPEGストリーム)を再生することは困難である。
【0012】
すなわち、MPEGでは、I(Intra)ピクチャ、P(Predictive)ピクチャ、B(Bidirectionally predictive)ピクチャの3つのピクチャタイプがある。Iピクチャは、他のピクチャを参照せずにイントラ符号化(エンコード)される。Pピクチャは、イントラ符号化されるか、あるいは、時間的に先に表示されるIピクチャまたはPピクチャを参照して、その参照されるピクチャから生成される予測画像を用いて予測符号化される。Bピクチャは、イントラ符号化されるか、時間的に先に表示されるIピクチャまたはPピクチャと、時間的に後に表示されるIピクチャまたはPピクチャとのうちの一方または両方を参照して、その参照されるピクチャから生成される予測画像を用いて予測符号化される。
【0013】
デコード(復号)処理も、この順番で行われ、必要に応じて、時間的に後に表示されるピクチャが参照される。
【0014】
このことから、例えば、IN点が設定されているピクチャのタイプ(Iピクチャ、Pピクチャ、Bピクチャのいずれか)によっては、他のピクチャをデコードするために参照されるだけの、つまりは、表示されないピクチャを、実際に表示するピクチャをデコードする前にデコードしておかなければならない場合があり、1倍速の1つのデコーダでは、リアルタイム再生を確保することができないことがある。
【0015】
具体的には、いま、例えば、15フレームのピクチャで構成され、IピクチャまたはPピクチャが、3ピクチャ単位で配置されるGOP構造のLong GOP(Group Of Picture)を考える。
【0016】
この場合、GOPを構成する各ピクチャを、そのピクチャタイプを表すアルファベット(I,P,B)と、表示順を表す数字との組み合わせで表すこととすると、1GOPは、B1,B2,I3,B4,B5,P6,B7,B8,P9,B10,B11,P12,B13,B14,P15で構成される。
【0017】
Bピクチャは、時間的に先に表示されるピクチャだけでなく、時間的に後に表示されるピクチャを参照してエンコードされる場合があるため、デコード時には、その後に表示されるピクチャがデコードされていないと、Bピクチャをデコードすることはできない。
【0018】
そこで、MPEGでは、Bピクチャのデコードに参照されるピクチャは、そのBピクチャよりも先にデコードされる。このため、上述のGOPを構成するB1乃至P15は、I3,B1,B2,P6,B4,B5,P9,B7,B8,P12,B10,B11,P15,B13,B14の順番でデコードされる。
【0019】
即ち、ピクチャB1,B2は、先に表示される1つ前のGOPのピクチャP15と、後に表示される、同一のGOPのピクチャI3を参照してデコードされる。ピクチャI3は、他のピクチャを参照せずにデコードされる。ピクチャB4,B5は、先に表示される、同一GOPのピクチャI3と、後に表示される、同一のGOPのピクチャP6を参照してデコードされる。ピクチャP6は、先に表示される、同一GOPのピクチャI3を参照してデコードされる。ピクチャB7,B8は、先に表示される、同一GOPのピクチャP6と、後に表示される、同一のGOPのピクチャP9を参照してデコードされる。ピクチャP9は、先に表示される、同一GOPのピクチャP6を参照してデコードされる。ピクチャB10,B11は、先に表示される、同一GOPのピクチャP9と、後に表示される、同一のGOPのピクチャP12を参照してデコードされる。ピクチャP12は、先に表示される、同一GOPのピクチャP9を参照して復号される。ピクチャB13,B14は、先に表示される、同一GOPのピクチャP12と、後に表示される、同一のGOPのピクチャP15を参照してデコードされる。ピクチャP15は、先に表示される、同一GOPのピクチャP12を参照してデコードされる。
【0020】
以上のように、編集点が設定されているピクチャのタイプによって、そのピクチャをデコードする前に、予めデコードしておく必要のあるピクチャの数が異なるため、それに伴い、デコードの開始時刻や開始位置が異なることになる。
【0021】
ここで、図1A乃至図1Cを参照して、MPEG方式により記録された画像データのデコードについて説明する。
【0022】
画像データの先頭からm番目のGOPをGOP(m)と表し、いま、図1Aに示されるように、例えば、エディトリストにより、時刻t1から時刻t2までの期間に、GOP(m)のピクチャB1からピクチャB13までを表示し、その後の時刻t2から時刻t3までの期間に、GOP(n)のピクチャP9から、GOP(n)に続けて配置されるGOP(n+1)のピクチャP9までを表示することが要求されている場合、その要求に応じて行われるデコードは、図1Bに示されるようにして行われる。
【0023】
すなわち、時刻t1から時刻t2までの期間に表示するGOP(m)のピクチャB1乃至B13を、その順番で表示させるためには、ピクチャI3,B1,B2,P6,B4,B5,P9,B7,B8,P12,B10,B11,P15,B13の順番で、それぞれのピクチャをデコードする必要がある。
【0024】
また、時刻t2から時刻t3までの期間に表示するGOP(n)のピクチャP9乃至B15を、その順番で表示させるためには、ピクチャI3,P6,P9,P12,B10,B11,P15,B13,B14の順番で、それぞれのピクチャをデコードする必要がある。このとき、IN点が設定されているGOP(n)のピクチャP9をデコードするためには、ピクチャP6を参照する必要があり、ピクチャP6をデコードするためには、ピクチャI3を参照する必要がある。従って、GOP(n)に関しては、表示しないピクチャI3、ピクチャP6を含めて、ピクチャI3,P6,P9,…の順番に、デコードが行われる。
【0025】
同様に、GOP(n+1)のピクチャB1乃至P9を、その順番で表示させるためには、ピクチャI3,B1,B2,P6,B4,B5,P9,B7,B8の順番で、それぞれのピクチャをデコードする必要がある。
【0026】
なお、図1Bにおいて、GOP(m)のピクチャB1のデコードは、その表示開始が要求されている時刻t1までに終了している必要があり、これにより、GOP(m)のピクチャI3のデコードを開始しなければならない時刻は、時刻t1から、2ピクチャ(ピクチャI3,B1)のデコードに要する時間だけ前の、時刻t1'に定まる。
【0027】
同様に、GOP(n)のピクチャP9のデコードは、その表示開始が要求されている時刻t2(GOP(m)のピクチャB13の表示終了時刻)までに終了している必要があり、これにより、ピクチャP9のデコードは、本来、時刻t2から、ピクチャP9自身のデコードに要する時間だけ前の、時刻t2'までに開始されている必要がある。
【0028】
しかしながら、図1Bに示されるように、ピクチャP9のデコードは、実際には、時刻t2から、1ピクチャ(ピクチャP6)のデコードに要する時間だけ後の、時刻t2"に開始されており、この時刻t2'から時刻t2"までの期間の分だけデコードの開始位置が遅れている。すなわち、表示はしないが、ピクチャP9のデコードにおいて参照されるピクチャI3,P6のデコードに要する期間だけ、表示される映像にフリーズが発生することになる。
【0029】
図1Cに示されるように、GOP(m)のピクチャB13の表示が終了される時刻t2(本来、GOP(n)のピクチャB9の表示が開始されるべき時刻)から、GOP(n)のピクチャP9の表示開始時刻t4までの期間は、図1Bの時刻t2'から時刻t2"までの期間(2ピクチャのデコードに要する期間)に対応し、この期間において、表示のフリーズが生じている。
【0030】
すなわち、編集点の位置によっては、表示されるピクチャの他に、表示されないピクチャをもデコードする必要があり、特許文献1に記載されている発明によっては、シーク時間の問題を解決することはできるものの、それだけでは、画像データのリアルタイム再生を保証することができない。
【0031】
なお、図1Aおよび図1Bにおいて、GOP(m)とGOP(n)がそれぞれ離れた領域に配置されている場合には、再生対象を切り換えるためのシーク時間も発生するため、実際には、フリーズが生じる期間は、2ピクチャのデコードに要する時間よりも、より長い期間となる。
【0032】
また、特許文献1に記載の発明では、編集が行われた画像データに対する制限として、接続点(編集点)をシームレスに再生するために、接続点付近の不要なピクチャを除去したものを再エンコードし、それぞれの画像データを、連続した1つのMPEG規格のストリームにしなければならないことが規定されている(例えば、段落番号「0290」の段落の記載)。従って、再エンコードを行うことにより、画質の劣化を招いてしまうという課題もある。
【0033】
例えば、複数のGOPからなるブリッジクリップ中に編集点が含まれている場合には、それを1度デコードし、そこから、不要なピクチャを除去したものを再エンコードしてブリッジクリップを作成する必要があり、再エンコードすることにより、ブリッジクリップを再生して得られる映像の画質が劣化してしまう。
【0034】
本発明は、このような状況に鑑みてなされたものであり、画質等の劣化を生じさせることなく、画像データのリアルタイム再生を保証することができるようにするものである。
【0035】
【課題を解決するための手段】
本発明の情報作成装置は、ビデオデータに対して設定された開始点と終了点が記述される編集点情報を取得する取得手段と、終了点が設定される第1のピクチャのデコードの前にデコードしておく必要がある、終了点後の第2のピクチャの数を表す情報開始点から終了点までを表示させるために必要なデコードの終了位置を表す情報、開始点が設定される第3のピクチャのデコードの前にデコードしておく必要がある、開始点後の第4のピクチャの数を表す情報、および、開始点から表示させるために必要なデコードの開始位置を表す情報を編集点情報に基づいて設定し、設定した情報が開始点と前記終了点によって設定される各クリップに対応して記述される、ビデオデータの再生を制御する再生制御情報を作成する作成手段と、作成手段により作成された再生制御情報を、再生制御情報により再生対象とされるビデオデータを構成する各ピクチャに関する情報が記述されることによって作成されたピクチャ情報とともに記録媒体に記録させる記録制御手段とを備えることを特徴とする。
【0037】
作成手段は、ビデオデータをデコードする再生装置のデコーダを指定する情報をさらに含む再生制御情報を作成するようにすることができる。
【0038】
作成手段は、ビデオデータの位置を、再生装置が処理可能なアドレス情報で指定する再生制御情報を作成するようにすることができる。
【0039】
本発明の情報作成方法は、ビデオデータに対して設定された開始点と終了点が記述される編集点情報を取得する取得ステップと、終了点が設定される第1のピクチャのデコードの前にデコードしておく必要がある、終了点後の第2のピクチャの数を表す情報開始点から終了点までを表示させるために必要なデコードの終了位置を表す情報、開始点が設定される第3のピクチャのデコードの前にデコードしておく必要がある、開始点後の第4のピクチャの数を表す情報、および、開始点から表示させるために必要なデコードの開始位置を表す情報を編集点情報に基づいて設定し、設定した情報が開始点と前記終了点によって設定される各クリップに対応して記述される、ビデオデータの再生を制御する再生制御情報を作成する作成ステップと、作成ステップの処理により作成された再生制御情報を、再生制御情報により再生対象とされるビデオデータを構成する各ピクチャに関する情報が記述されることによって作成されたピクチャ情報とともに記録媒体に記録させる記録制御ステップとを含むことを特徴とする。
【0040】
本発明の第1のプログラムは、ビデオデータに対して設定された開始点と終了点が記述される編集点情報を取得する取得ステップと、終了点が設定される第1のピクチャのデコードの前にデコードしておく必要がある、終了点後の第2のピクチャの数を表す情報開始点から終了点までを表示させるために必要なデコードの終了位置を表す情報、開始点が設定される第3のピクチャのデコードの前にデコードしておく必要がある、開始点後の第4のピクチャの数を表す情報、および、開始点から表示させるために必要なデコードの開始位置を表す情報を編集点情報に基づいて設定し、設定した情報が開始点と前記終了点によって設定される各クリップに対応して記述される、ビデオデータの再生を制御する再生制御情報を作成する作成ステップと、作成ステップの処理により作成された再生制御情報を、再生制御情報により再生対象とされるビデオデータを構成する各ピクチャに関する情報が記述されることによって作成されたピクチャ情報とともに記録媒体に記録させる記録制御ステップとを含むことを特徴とする。
【0041】
本発明の再生装置は、ビデオデータに対して設定された開始点と終了点が記述される編集点情報に基づいて情報作成装置により設定された情報が記述されることによって作成され、前記記録媒体にあらかじめ記録された再生制御情報を、再生制御情報により再生対象とされるビデオデータを構成する各ピクチャに関する情報が記述されることによって作成されたピクチャ情報とともに記録媒体から取得する取得手段と、取得手段により取得された再生制御情報に開始点と終了点によって設定される各クリップに対応して記述される、終了点が設定される第1のピクチャのデコードの前にデコードしておく必要がある、終了点後の第2のピクチャの数を表す情報開始点から終了点までを表示させるために必要なデコードの終了位置を表す情報、開始点が設定される第3のピクチャのデコードの前にデコードしておく必要がある、開始点後の第4のピクチャの数を表す情報、および、開始点から表示させるために必要なデコードの開始位置を表す情報を用いて、対応するクリップを再生する再生手段とを備えることを特徴とする。
【0042】
本発明の再生方法は、ビデオデータに対して設定された開始点と終了点が記述される編集点情報に基づいて情報作成装置により設定された情報が記述されることによって作成され、記録媒体にあらかじめ記録された再生制御情報を、再生制御情報により再生対象とされるビデオデータを構成する各ピクチャに関する情報が記述されることによって作成されたピクチャ情報とともに記録媒体から取得する取得ステップと、取得ステップの処理により取得された再生制御情報に開始点と終了点によって設定される各クリップに対応して記述される、終了点が設定される第1のピクチャのデコードの前にデコードしておく必要がある、終了点後の第2のピクチャの数を表す情報開始点から終了点までを表示させるために必要なデコードの終了位置を表す情報、開始点が設定される第3のピクチャのデコードの前にデコードしておく必要がある、開始点後の第4のピクチャの数を表す情報、および、開始点から表示させるために必要なデコードの開始位置を表す情報を用いて、対応するクリップを再生する再生ステップとを含むことを特徴とする。
【0043】
本発明の第2のプログラムは、ビデオデータに対して設定された開始点と終了点が記述される編集点情報に基づいて情報作成装置により設定された情報が記述されることによって作成され、記録媒体にあらかじめ記録された再生制御情報を、再生制御情報により再生対象とされるビデオデータを構成する各ピクチャに関する情報が記述されることによって作成されたピクチャ情報とともに記録媒体から取得する取得ステップと、取得ステップの処理により取得された再生制御情報に開始点と終了点によって設定される各クリップに対応して記述される、終了点が設定される第1のピクチャのデコードの前にデコードしておく必要がある、終了点後の第2のピクチャの数を表す情報、開始点から終了点までを表示させるために必要なデコードの終了位置を表す情報、開始点が設定される第3のピクチャのデコードの前にデコードしておく必要がある、開始点後の第4のピクチャの数を表す情報、および、開始点から表示させるために必要なデコードの開始位置を表す情報を用いて、対応するクリップを再生する再生ステップとを含むことを特徴とする。
本発明の他の情報作成装置は、 MPEG 方式のビデオデータを再生する再生装置に記録媒体によって提供される情報を作成する情報作成装置において、前記ビデオデータに対して設定された開始点と終了点が記述される編集点情報を取得する取得手段と、編集点が設定されるピクチャのピクチャタイプと、前記編集点が設定されるピクチャのデコードの前にデコードしておく必要がある前記編集点後のピクチャの数に応じて設定されるデコードの開始位置を表す情報が、前記開始点と前記終了点によって設定される各クリップに対応して記述される、前記ビデオデータの再生を制御する再生制御情報を作成する作成手段と、前記作成手段により作成された前記再生制御情報を、前記再生制御情報により再生対象とされる前記ビデオデータを構成する各ピクチャに関する情報が記述されることによって作成されたピクチャ情報とともに前記記録媒体に記録させる記録制御手段とを備えることを特徴とする。
本発明の他の再生装置は、記録媒体によって提供される、情報作成装置により作成された情報を取得し、 MPEG 方式のビデオデータを再生する再生装置において、前記ビデオデータに対して設定された開始点と終了点が記述される編集点情報に基づいて前記情報作成装置により設定された情報が記述されることによって作成され、前記記録媒体にあらかじめ記録された再生制御情報を、前記再生制御情報により再生対象とされる前記ビデオデータを構成する各ピクチャに関する情報が記述されることによって作成されたピクチャ情報とともに前記記録媒体から取得する取得手段と、前記取得手段により取得された前記再生制御情報に前記開始点と前記終了点によって設定される各クリップに対応して記述される、編集点が設定されるピクチャのピクチャタイプと、前記編集点が設定されるピクチャのデコードの前にデコードしておく必要がある前記編集点後のピクチャの数に応じて設定されるデコードの開始位置を表す情報を用いて、対応するクリップを再生する再生手段とを備えることを特徴とする。
【0044】
本発明の情報作成装置および方法、並びに第1のプログラムにおいては、ビデオデータに対して設定された開始点と終了点が記述される編集点情報が取得され、終了点が設定される第1のピクチャのデコードの前にデコードしておく必要がある、終了点後の第2のピクチャの数を表す情報開始点から終了点までを表示させるために必要なデコードの終了位置を表す情報、開始点が設定される第3のピクチャのデコードの前にデコードしておく必要がある、開始点後の第4のピクチャの数を表す情報、および、開始点から表示させるために必要なデコードの開始位置を表す情報が編集点情報に基づいて設定され、設定された情報が開始点と終了点によって設定される各クリップに対応して記述される、ビデオデータの再生を制御する再生制御情報が作成される。また、作成された再生制御情報が、再生制御情報により再生対象とされるビデオデータを構成する各ピクチャに関する情報が記述されることによって作成されたピクチャ情報とともに記録媒体に記録される。
【0045】
本発明の再生装置および方法、並びに第2のプログラムにおいては、ビデオデータに対して設定された開始点と終了点が記述される編集点情報に基づいて情報作成装置により設定された情報が記述されることによって作成され、記録媒体にあらかじめ記録された再生制御情報が、再生制御情報により再生対象とされるビデオデータを構成する各ピクチャに関する情報が記述されることによって作成されたピクチャ情報とともに記録媒体から取得され、取得された再生制御情報に開始点と終了点によって設定される各クリップに対応して記述される、終了点が設定される第1のピクチャのデコードの前にデコードしておく必要がある、終了点後の第2のピクチャの数を表す情報、開始点から終了点までを表示させるために必要なデコードの終了位置を表す情報、開始点が設定される第3のピクチャのデコードの前にデコードしておく必要がある、開始点後の第4のピクチャの数を表す情報、および、開始点から表示させるために必要なデコードの開始位置を表す情報を用いて、対応するクリップ再生される。
本発明の他の情報作成装置においては、ビデオデータに対して設定された開始点と終了点が記述される編集点情報が取得され、編集点が設定されるピクチャのピクチャタイプと、前記編集点が設定されるピクチャのデコードの前にデコードしておく必要がある前記編集点後のピクチャの数に応じて設定されるデコードの開始位置を表す情報が、前記開始点と前記終了点によって設定される各クリップに対応して記述される、前記ビデオデータの再生を制御する再生制御情報が作成される。また、作成された再生制御情報が、再生制御情報により再生対象とされるビデオデータを構成する各ピクチャに関する情報が記述されることによって作成されたピクチャ情報とともに記録媒体に記録される。
本発明の他の再生装置においては、ビデオデータに対して設定された開始点と終了点が記述される編集点情報に基づいて情報作成装置により設定された情報が記述されることによって作成され、記録媒体にあらかじめ記録された再生制御情報が、再生制御情報により再生対象とされるビデオデータを構成する各ピクチャに関する情報が記述されることによって作成されたピクチャ情報とともに記録媒体から取得され、取得された前記再生制御情報に前記開始点と前記終了点によって設定される各クリップに対応して記述される、編集点が設定されるピクチャのピクチャタイプと、前記編集点が設定されるピクチャのデコードの前にデコードしておく必要がある前記編集点後のピクチャの数に応じて設定されるデコードの開始位置を表す情報を用いて、対応するクリップが再生される。
【0057】
【発明の実施の形態】
図2は、本発明を適用したディスク装置1(情報作成装置)の構成例を示すブロック図である。
【0058】
図2において、ディスク装置1は、情報処理部11とドライブ12から構成されている。
【0059】
情報処理部11は、I/F(Interface)21、制御部22、アドレス管理部23、リアルタイム再生可否判定部24、機器情報記憶部25、ブリッジエッセンス作成部26、付加情報作成部27、プレイリスト作成部28、ピクチャポインタ作成部29、読み出し部30、書き込み部31から構成され、ドライブ12に装着された光ディスク52に記憶されているエディトリスト(Edit List)を読み出し、それに基づいてプレイリスト(Play List)を作成する。
【0060】
ここで、エディトリストとは、光ディスク52に記録されているAV(Audio Visual)データ(本発明においては、特に、ビデオ(画像)データ)の所定の位置に設定された、いわゆる編集点(IN点(開始点)とOUT点(終了点))のリストをいう。また、プレイリストとは、エディトリストに記述されたIN点とOUT点による非破壊編集結果の画像データ(プレイリストとともに光ディスク52に記録されている画像データ)を再生装置が再生する場合に、そのリアルタイム再生が保証されるようにエディトリストが書き換えられたものをいう。
【0061】
すなわち、光ディスク52には、MPEG(Moving Picture Experts Group)方式によりエンコードされた画像データと、その画像データの編集において作成されたエディトリストが記録されているが、光ディスク52が装着された再生装置が、単に、そのエディトリストに従って画像データを再生した場合には、上述した、シーク時間の問題から、或いは、編集点の位置によって生じるフリーズの問題から、画像データのリアルタイム再生を行うことができない場合がある。
【0062】
そこで、情報処理部11は、光ディスク52に記録されている画像データのリアルタイム再生が保証されるようにエディトリストを書き換え、新たに作成したプレイリストを光ディスク52に書き込む。その後、プレイリストが書き込まれた光ディスク52が装着された再生装置(例えば、後述する再生装置101(図6))においては、プレイリストに従って、プレイリストとともに光ディスク52に記録されている画像データの再生、すなわち、リアルタイム性が保証された画像データの再生が行われる。
【0063】
プレイリストの作成、および、それに基づいて行われる画像データの再生については、フローチャートを参照して後に詳述する。
【0064】
図2において、I/F21は、キーボードやマウスなどの操作部や、画像を表示するディスプレイ、音声(音)を出力するスピーカ(いずれも図示せず)に対する制御を行う。そして、I/F21は、ユーザによって操作部が操作された場合に、その操作に対応する信号を制御部22に供給する。また、I/F21は、制御部22から供給される情報を、適宜、ディスプレイやスピーカから出力する。
【0065】
制御部22は、例えば、I/F21から供給される操作信号に応じて、リアルタイム再生可否判定部24や、機器情報記憶部25、ブリッジエッセンス作成部26、付加情報作成部27、プレイリスト作成部28、ピクチャポインタ作成部29を制御する。
【0066】
アドレス管理部23は、ファイルシステム81(図5)により実現され、光ディスク52の物理アドレスと論理アドレスを管理する。例えば、アドレス管理部23は、画像データの論理アドレスがリアルタイム再生可否判定部24から供給されたとき、それを物理アドレスに変換し、物理アドレスをリアルタイム再生可否判定部24に出力する。リアルタイム再生可否判定部24においては、アドレス管理部23から供給された物理アドレスに基づいて、光ディスク52に記録される画像データのリアルタイム再生が可能であるか否かが判定される。
【0067】
リアルタイム再生可否判定部24は、ピクチャポインタ読み出し部41から供給されるピクチャポインタやエディトリスト、或いは、機器情報記憶部25から供給される情報などに基づいて、非破壊編集結果の画像データを、再生装置がリアルタイムで再生することができるか否かを判定する。
【0068】
後述するように、ピクチャポインタは、例えば、それぞれのクリップに付加されるテーブル情報であり、そのテーブルには、クリップを構成する各ピクチャのデータ量、ファイルアドレス(論理アドレス)、および、そのピクチャが、I(Intra)ピクチャ、P(Predictive)ピクチャ、B(Bidirectionally predictive)ピクチャのうちのいずれのピクチャであるのかを表すピクチャタイプなどの、各ピクチャに関する情報が記述される。
【0069】
機器情報記憶部25は、再生装置の仕様に関する情報である機器情報を記憶し、適宜、それらの情報をリアルタイム再生可否判定部24やブリッジエッセンス作成部26に提供する。機器情報記憶部25により記憶される機器情報には、例えば、再生装置に設けられるディスクドライブの読み出しレートや、バッファの容量、画像データの再生レート(デコード速度)、デコーダの数などが含まれる。この機器情報は、ユーザが、操作部を操作することで設定できるようにしてもよいし、再生装置の標準化された仕様に関する情報が予め記憶されているようにしてもよい。
【0070】
ブリッジエッセンス作成部26は、リアルタイム再生可否判定部24により、再生装置が、所定の範囲の画像データ(以下、適宜、クリップ(例えば、GOP(Group Of Picture)単位で構成される、一連のビデオデータ)とも称する)のリアルタイム再生を行うことができないと判定された場合、画像データの再生時にシーク時間が小となるように、本線データ読み出し部43から供給されるデータに基づいてブリッジクリップ(Bridge Clip)(適宜、ブリッジエッセンス(Bridge
Essennce)とも称する)を作成する。
【0071】
上述したように、ブリッジエッセンス(ブリッジクリップ)は、それぞれ離れた領域に分断して光ディスク上に記録された画像データを再生する場合に、ある領域から他の領域に再生対象を移行するときにかかるシーク時間が大であり、バッファアンダーフローを引き起こすときに作成する必要がある。
【0072】
ここで、図3Aおよび図3Bを参照して、ブリッジエッセンス作成部26によるブリッジエッセンスの作成について説明する。図3Aおよび図3Bにおいては、その左から右方向が光ディスク52に対するデータの読み書き方向となっている。
【0073】
いま、画像データの先頭からm番目のGOPをGOP(m)と表すこととして、図3Aには、GOP(m),GOP(m+1),GOP(m+2)からなるクリップ#1、GOP(o)からなるクリップ#2、GOP(n),GOP(n+1),GOP(n+2)からなるクリップ#3が示されている。また、GOP(m+2)とGOP(n)の間、および、GOP(n+2)とGOP(o)の間には、空き領域#1および#2がそれぞれ形成されている。このように、データの記録や消去が繰り返し行われた場合には、光ディスク52に空き領域が形成されることがある。
【0074】
この状態において、例えば、図3Aに示されるように、画像データを、GOP(m)の最初のピクチャ(IN1点が設定されたピクチャ)から、GOP(m+2)のOUT1点が設定されたピクチャまでを再生し、その後、GOP(m+2)よりも後に配置されたGOP(o)のIN2点が設定されたピクチャから、その後にあるOUT2点が設定されたピクチャまでを再生し、さらに、GOP(o)よりも前に配置されたGOP(n)のIN3点が設定されたピクチャからGOP(n+2)の最後のピクチャ(OUT3点が設定されたピクチャ)までを再生するような編集が行われているとする。
【0075】
すなわち、この再生は、図4に示されるようなエディトリストに従って行われる。
【0076】
図4において、TC(IN1)は、クリップ#1に設定されたIN1点のタイムコード(TC(Time Code))を表し、TC(OUT1)は、クリップ#1に設定されたOUT1点のタイムコードを表している。同様に、TC(IN2)とTC(OUT2)は、クリップ#2に設定されたIN2点のタイムコードとOUT2点のタイムコードを、TC(IN3)とTC(OUT3)は、クリップ#3に設定されたIN3点のタイムコードとOUT3点のタイムコードを、それぞれ表している。
【0077】
図4のエディトリストにより、TC(IN1)で指定されるピクチャからTC(OUT1)で指定されるピクチャまでが第1番目に再生され、第2番目に、TC(IN2)で指定されるピクチャからTC(OUT2)で指定されるピクチャまでが再生される。また、第3番目に、TC(IN3)で指定されるピクチャからTC(OUT3)で指定されるピクチャまでが再生される。すなわち、図3Aに示される画像データの再生が行われる。
【0078】
このように、エディトリストを作成し、再生時には、作成されたエディトリストに従って再生を行うことで、画像データの再エンコードを行うことなく、所望の編集を行うことができる(所望の編集結果を得ることができる)。
【0079】
また、エディトリストによる非破壊編集によっては、MPEG方式などの非可逆変換によりエンコードされた画像データを1度デコードし、再生対象ではないものとされた不要なピクチャ(IN点からOUT点までに含まれないピクチャ)を除いた後、再度、その不要なピクチャを除いた残りの画像データをエンコードして画像データの編集を行う場合に較べて、画質の劣化を防止することができる。
【0080】
図3Aの説明に戻り、クリップ#1とクリップ#2、クリップ#2とクリップ#3は、それぞれ、離れた領域に記録されているため、図4のエディトリストに従って再生を行う場合、クリップ#1のOUT1点からクリップ#2のIN2点に読み出し対象を移行するとき、および、クリップ#2のOUT2点からクリップ#3のIN3点に読み出し対象を移行するとき、シーク#1およびシーク#2がそれぞれ発生する。
【0081】
従って、上述したように、そのシーク時間が大であると、光ディスク52からの画像データの読み出しが、そのリアルタイムでの再生に間に合わず、再生が途切れることになる。
【0082】
例えば、再生装置には、光ディスク52から読み出された画像データを一時的に記憶する(バッファリングする)バッファと、バッファリングされた画像データを読み出し、それをデコードするデコーダが設けられるが、シークが行われている間に、そのバッファリングされた画像データがデコーダにより読み出され尽くし、バッファアンダーフローが生じた場合に、リアルタイム再生が途切れる。すなわち、リアルタイム再生を保証するためには、シークが発生した場合であっても、そのシークに要する時間分のデコードを確保するための画像データがバッファに記憶されている必要がある。
【0083】
そこで、図2のブリッジエッセンス作成部26は、シーク時間が短くなるように、例えば、GOP単位でクリップの一部を空き領域に再配置し、再配置した複数のGOPからなるブリッジエッセンスを再生対象のデータとすることによって、再生装置における再生のリアルタイム性を保証する。
【0084】
具体的には、図3Aの画像データを、再生装置がエディトリストに従って再生した場合、シーク#1またはシーク#2が発生している間にバッファアンダーフローが生じる、とリアルタイム再生可否判定部24により判定された場合、ブリッジエッセンス作成部26は、図3Bに示されるように、シークを必要とするクリップの所定の範囲のデータである、例えば、GOP単位のデータを空き領域#1に再配置し、ブリッジエッセンスを作成する。
【0085】
図3Bの例においては、クリップ#1のGOP(m+2)、クリップ#2のGOP(o)、クリップ#3のGOP(n)が空き領域#1に再配置され、GOP(m+2),GOP(o),GOP(n)からなるブリッジエッセンスが作成されている。
【0086】
ディスク装置1は、このようにしてブリッジエッセンスを作成した後、ブリッジエッセンスを参照して再生が行われるように、エディトリストを書き換え、作成したプレイリストを画像データとともに再生装置に提供する。
【0087】
プレイリストと画像データが提供された再生装置は、プレイリストに従って、図3Bに示されるように、GOP(m)の最初のピクチャからGOP(m+1)の最後のピクチャまで再生した後、再生対象をブリッジエッセンスに切り換える。すなわち、再生装置は、ブリッジエッセンスを構成するGOP(m+2)の最初のピクチャからOUT1点が設定されているピクチャまで再生し、その後、GOP(o)のIN2点が設定されているピクチャからOUT2点が設定されているピクチャまで再生し、さらに、GOP(n)のIN3点が設定されているピクチャからGOP(n)の最後のピクチャまで再生する。ブリッジエッセンスを再生した後、再生装置は、クリップ#3のGOP(n+1)の最初のピクチャからGOP(n+2)の最後のピクチャまでを再生する。
【0088】
なお、図3Bにおいては、再生されないGOPには斜線が付されている。
【0089】
ブリッジエッセンスを再生対象とした場合、GOP(m+1)の最後のピクチャから、ブリッジエッセンスのGOP(m+2)の最初のピクチャに読み出し対象を移行するときにシーク#3が発生し、GOP(m+2)のOUT1点が設定されているピクチャからGOP(o)のIN2点が設定されているピクチャに読み出し対象を移行するときにシーク#4が発生する。また、GOP(o)のOUT2点が設定されているピクチャからGOP(n)のIN3点が設定されているピクチャに読み出し対象を移行するときにシーク#5が発生し、GOP(n)の最後のピクチャからGOP(n+1)の最初のピクチャに読み出し対象を移行するときにシーク#6が発生する。
【0090】
図3Aと図3Bを比較して明らかなように、ともに、同じ映像が表示されるにもかかわらず、シーク#3乃至#6(図3B)に要する合計時間は、シーク#1とシーク#2(図3A)に要する合計時間に較べて短い。従って、ブリッジエッセンスを参照することで、シーク時間を短くすることができ、バッファアンダーフローの発生を防止することができる。
【0091】
図2の説明に戻り、ブリッジエッセンス作成部26は、以上のようにして作成したブリッジエッセンスを書き込み部31に出力し、ディスクI/F51を介してブリッジエッセンスをディスク52に書き込む。また、ブリッジエッセンス作成部26は、ブリッジエッセンスに関する情報として、ブリッジエッセンスが配置されたタイムコードやアドレスなどの情報をプレイリスト作成部28、およびピクチャポインタ作成部29等に出力する。
【0092】
付加情報作成部27は、プレイリストの作成に用いられる付加情報を作成し、それをプレイリスト作成部28に出力する。付加情報には、例えば、各クリップのデコード開始位置を指定する情報、デコードの終了位置を指定する情報、再生装置にデコーダが複数設けられている場合に、どのクリップを、どのデコーダにより再生するかといった、デコーダを指定する情報などが含まれる。
【0093】
プレイリスト作成部28は、制御部22から供給されるエディトリスト、ブリッジエッセンス作成部26から供給されるブリッジエッセンスに関する情報、付加情報作成部27から供給される付加情報に基づいて、プレイリストを作成する。プレイリストは、例えば、XML(eXtensible Markup Language)ベースの所定の言語などにより記述される。プレイリスト作成部28により作成されたプレイリストは、ピクチャポインタ作成部29および書き込み部31に出力される。
【0094】
ピクチャポインタ作成部29は、制御部22から供給されるピクチャポインタに基づいて、プレイリストで参照される(再生対象とされる)クリップのピクチャポインタを作成し、それを書き込み部31に出力する。光ディスク52に記録されている全てのクリップに関するピクチャポインタは、ピクチャポインタ読み出し部41により光ディスク52から読み出され、リアルタイム再生可否判定部24と制御部22を介してピクチャポインタ作成部29に供給されている。
【0095】
読み出し部30は、ピクチャポインタ読み出し部41、エディトリスト読み出し部42、および本線データ読み出し部43から構成される。エディトリスト読み出し部42は、光ディスク52に記録されているエディトリストを読み出し、それをピクチャポインタ読み出し部41に出力する。
【0096】
ピクチャポインタ読み出し部41は、エディトリスト読み出し部42から供給されるエディトリストに基づいて、そのエディトリストで参照されるクリップのピクチャポインタを光ディスク52から読み出す。光ディスク52には、画像データと、その画像データを構成する各クリップのピクチャポインタが記録されている。ピクチャポインタ読み出し部41により読み出されたピクチャポインタは、エディトリストとともにリアルタイム再生可否判定部24に出力される。
【0097】
本線データ読み出し部43は、光ディスク52に記録されている本線データ(画像データ)をディスクI/F51を介して読み出し、それをブリッジエッセンス作成部26に出力する。
【0098】
書き込み部31は、ブリッジエッセンス作成部26から供給されるブリッジエッセンスを、光ディスク52の空き領域にドライブI/F51を介して書き込む。また、書き込み部31は、プレイリスト作成部28により作成されたプレイリスト、ピクチャポインタ作成部29により作成されたピクチャポインタ(プレイリストで参照されるクリップのピクチャポインタ)をディスクI/F51を介して光ディスク52に書き込む。
【0099】
ドライブ12は、ディスクI/F51で構成され、ドライブ12に装着された光ディスク52に対して、データの書き込みや読み出しを行う。即ち、ディスクドライブ12に対しては、光ディスク52を容易に着脱することができるようになっている。
【0100】
光ディスク52には、例えば、ビデオカメラで撮影された画像データ、画像データを構成する各クリップのピクチャポインタ、エディトリスト等の情報が記録されている。光ディスク52は、例えば、Blu-ray(商標)ディスクや、CD(Compact Disk),DVD(Digital Versatile Disk)などとされる。
【0101】
以上の各構成は、例えば、図5に示されるパーソナルコンピュータにより実現される。
【0102】
CPU(Central Processing Unit)61は、ROM(Read Only Memory)62に記憶されているプログラム、または、記憶部68からRAM(Random Access Memory)63にロードされたプログラムに従って各種の処理を実行する。記憶部68には、例えば、ファイルシステム81が格納されており、これが実行されることで、図2のアドレス管理部23が実現される。
【0103】
RAM63にはまた、CPU61が各種の処理を実行する上において必要なデータなどが適宜記憶される。
【0104】
CPU61、ROM62、およびRAM63は、バス64を介して相互に接続されている。このバス64にはまた、入出力インタフェース65も接続されている。
【0105】
入出力インタフェース65には、キーボード、マウスなどよりなる入力部66、CRT(Cathode Ray Tube),LCD(Liquid Crystal Display)などよりなるディスプレイ、並びにスピーカなどよりなる出力部67が接続されている。入力部66が操作されて入力されたユーザからの指示は、図2のI/F21に入力される。一方、出力部67を構成するディスプレイには、例えば、光ディスク52に記憶されているエディトリストの一覧が表示される。その一覧の中から選択されたエディトリストに基づいて、情報処理部11によりプレイリストが作成される。
【0106】
また、入出力インタフェース65には、ハードディスクなどより構成される記憶部68、ドライブ69、ドライブ12(図2)が接続されている。ドライブ69には、光ディスク52以外の記録媒体である、例えば、フラッシュメモリを内蔵するメモリカード、磁気ディスク、磁気テープなどのリムーバルメディア70が装着され、リムーバルメディア70に対するデータの読み書きがドライブ69により行われる。
【0107】
図6は、再生装置101の構成例を示すブロック図である。
【0108】
再生制御部111は、読み出し部121、アドレス管理部122、デコードスケジューリング部123、デコーダ制御部124から構成される。これらは、図7のコントローラ153により所定の制御プログラムが実行されて実現される。
【0109】
再生制御部111は、ドライブ112に装着された光ディスク52に記録されている画像データを、画像データとともに光ディスク52に記録されているプレイリストに従って再生する。光ディスク52には、画像データの他、ディスク装置1により作成された各クリップのピクチャポインタ、プレイリスト等が記録されている。
【0110】
読み出し部121は、ピクチャポインタ読み出し部131とプレイリスト読み出し部132から構成される。プレイリスト読み出し部132は、光ディスク52に記録されているプレイリストを読み出し、それをピクチャポインタ読み出し部131に出力する。
【0111】
ピクチャポインタ読み出し部131は、プレイリスト読み出し部132から供給されるプレイリストで参照されるクリップのピクチャポインタを光ディスク52から読み出す。ピクチャポインタ読み出し部131により読み出されたピクチャポインタは、プレイリストとともにデコードスケジューリング部123に出力される。
【0112】
アドレス管理部122は、光ディスク52の物理アドレスと論理アドレスを管理する。すなわち、図7のコントローラ153にも、図5のファイルシステム81と同様のプログラムモジュールが用意されており、それが実行されることでアドレス管理部122が実現される。例えば、アドレス管理部122は、デコードスケジューリング部123から供給される論理アドレスを物理アドレスに変換し、それをデコードスケジューリング部123に提供する。
【0113】
デコードスケジューリング部123は、画像データの物理アドレスをアドレス管理部122から取得した後、ピクチャポインタ読み出し部131から供給されるプレイリストとピクチャポインタに基づいて、デコードのスケジューリングを行い、各クリップのデコード開始位置(ピクチャ)を決定する。
【0114】
また、デコードスケジューリング部123は、決定したデコード開始位置から、どのデコーダがデコードを開始するかをデコーダ選択部133により決定する。図7に示されるように、再生装置101には、複数のデコーダ(図7の例においては2つ)のデコーダが用意されている。デコード開始位置等を表すスケジュール情報と、デコーダの指定を表すデコーダ指定情報はデコーダ制御部124に出力される。
【0115】
デコーダ制御部124は、スケジュール情報とデコーダ指定情報に基づいて、デコーダを制御する。
【0116】
ドライブ112は、ディスクI/F141で構成され、ドライブ112に装着された光ディスク52に対して、データの書き込みや読み出しを行う。
【0117】
以上の再生制御部111の各構成は、例えば、図7の再生装置101により実現される。
【0118】
操作部152は、ユーザによって操作され、その操作に対応する操作信号を、コントローラ153に出力する。
【0119】
コントローラ153は、操作部152からの操作信号などに対応して、ディスクドライブ112や、デコーダ部155、スイッチャ156を制御する。すなわち、コントローラ153は、操作部152から、プレイリストに従って画像データを再生することを要求する操作信号を受信すると、ディスクドライブ112にプレイリストを要求する。さらに、コントローラ153は、その要求に応じて、ディスクドライブ112が光ディスク52からプレイリストを読み出し、バス151上に出力したプレイリストを受信する。
【0120】
また、コントローラ153(図6のデコードスケジューリング部123)は、受信したプレイリストに基づいて、デコードのスケジューリングやデコーダの選択を行い、スケジュール情報やデコード指定情報に基づいて、デコーダ1551と1552による画像データのデコードを制御する。また、コントローラ153は、プレイリストから検出した編集点に基づいて、スイッチャ156を制御することにより、スイッチャ156に、デコーダ1551または1552でデコードされたピクチャのうちのいずれかを選択して出力させる。
【0121】
バッファ部154は、バッファ1541と1542から構成され、ドライブ112により読み出された画像データをバッファリングする。バッファ1541にバッファリングされた画像データは、その後段にあるデコーダ1551によりデコードされ、バッファ1542にバッファリングされた画像データは、その後段にあるデコーダ1552によりデコードされる。なお、上述したように、適宜、ブリッジエッセンスを参照するようにプレイリストが記述されているため、プレイリストに従って行われる再生によっては、バッファ1541と1542においてバッファアンダーフローは生じない。
【0122】
デコーダ部155を構成するデコーダ1551と1552は、それぞれ、バス151を介して、ドライブ112に画像データを要求し、その要求に応じて、ドライブ112からバス151上に出力される画像データを、バッファ1541と1542を介して受信する。また、デコーダ1551と1552は、受信した画像データを、コントローラ153からの制御に従ってデコードし、そのデコード画像(ピクチャ)を、スイッチャ156に出力する。
【0123】
なお、デコーダ155を構成するデコーダ1551および1552は、ここでは、例えば、1倍速のデコード処理速度を有しているものとする。また、ドライブ112は、光ディスク52から画像データを読み出し、その画像データを、バッファ1541(デコーダ1551)とバッファ1542(デコーダ1552)に対して供給するが、その供給のための十分な読み出し速度(伝送帯域)を有しているものとする。
【0124】
スイッチャ156は、コントローラ153による制御に基づいて、デコーダ1551または1552でデコードされたピクチャのうちのいずれかを選択してディスプレイ157に出力する。ディスプレイ157は、スイッチャ156が出力するピクチャを表示する。従って、ディスプレイ157には、デコーダ1551または1552がデコードしたピクチャのうちの、スイッチャ156で選択される方が表示される。
【0125】
ここで、デコードスケジューリング部123により行われるデコードのスケジューリングについて説明する。
【0126】
上述したように、Long GOPでエンコードされている画像データのデコードにおいては、リアルタイム再生を保証するために、IN点が設定されているピクチャのタイプ(Iピクチャ、Pピクチャ、Bピクチャのいずれか)によって、他のピクチャをデコードするために参照されるだけの、つまりは、表示されないピクチャを、実際に表示するピクチャをデコードする前にデコードしておかなければならない場合がある。
【0127】
そこで、デコードスケジューリング部123は、図8に示されるように、デコードのスケジューリングを行う。すなわち、デコードスケジューリング部123は、ピクチャポインタ読み出し部131から供給されるプレイリストとピクチャポインタから、編集点(IN点)が設定されているピクチャを検出し、その編集点が設定されているピクチャに応じて、デコーダ1551または1552にデコードさせるピクチャシーケンスを決定する。図8においても、画像データの先頭からn番目のGOPがGOP(n)と表されている。
【0128】
具体的には、図8に示されるように、編集点が設定されているピクチャが、GOP(n)のピクチャB1である場合には、GOP(n)のピクチャB1のデコードのためにデコードしなければならない必要最小限の、表示されないピクチャは、GOP(n-1)のピクチャI3,P6,P9,P12,P15の5つのピクチャであるから、デコードスケジューリング部123は、GOP(n-1)のピクチャI3,P6,P9,P12,P15からデコードするようにスケジューリングする。さらに、その後は、GOP(n)以降のピクチャを順次デコードすればよいから、デコードスケジューリング部123は、GOP(n-1)のピクチャI3,P6,P9,P12,P15の後は、GOP(n)以降のピクチャを通常のデコード順(I3B1,B2,P6,B4,・・・)でデコードするようにスケジューリングする。
【0129】
編集点が設定されているピクチャが、GOP(n)のピクチャB2である場合には、上述したように、GOP(n)のピクチャB2のデコードのためにデコードしなければならない必要最小限の、表示されないピクチャは、GOP(n-1)のピクチャI3,P6,P9,P12,P15の5つのピクチャであるから、デコードスケジューリング部123は、GOP(n-1)のピクチャI3,P6,P9,P12,P15からデコードするようにスケジューリングする。さらに、その後は、GOP(n)のピクチャI3,B1,B2,P6,・・・をデコードするが、編集点が設定されているピクチャB2より表示順で前のピクチャB1は表示も参照もされないからデコードする必要がない。そこで、デコードスケジューリング部123は、GOP(n-1)のピクチャI3,P6,P9,P12,P15の後は、GOP(n)のピクチャI3をデコードした後、ピクチャB2 をデコードし、続いてピクチャP6をデコードするようにスケジューリングし、以下、通常のデコード順でデコードするようにスケジューリングする。
【0130】
編集点が設定されているピクチャが、GOP(n)のピクチャI3である場合には、そのピクチャI3をデコードするのに、他のピクチャを参照する必要はないから、GOP(n)のピクチャI3からデコードするが、編集点が設定されているピクチャI3より表示順で前のピクチャB1,B2は表示も参照もされないからデコードする必要がない。そこで、デコードスケジューリング部123は、GOP(n)のピクチャI3をデコードした後、ピクチャB1とB2はデコードせずに、ピクチャP6をデコードするようにスケジューリングし、以下、通常のデコード順でデコードするようにスケジューリングする。
【0131】
編集点が設定されているピクチャが、GOP(n)のピクチャB4である場合には、GOP(n)のピクチャB4のデコードのためにデコードしなければならない必要最小限の、表示されないピクチャは、GOP(n)のピクチャI3であり、デコードスケジューリング部123は、GOP(n)のピクチャI3からデコードするようにスケジューリングする。さらに、その後は、GOP(n)のピクチャI3よりもデコード順(エンコード順)で後のピクチャB1,B2,P6,B4,B5・・・をデコードするが、編集点が設定されているピクチャB4より表示順で前のピクチャB1,B2は表示も参照もされないからデコードする必要がない。そこで、デコードスケジューリング部123は、GOP(n)のピクチャI3をデコードした後、ピクチャB1とB2はデコードせずに、ピクチャP6をデコードするようにスケジューリングし、以下、通常のデコード順でデコードするようにスケジューリングする。
【0132】
編集点が設定されているピクチャが、GOP(n)のピクチャB5である場合には、GOP(n)のピクチャB5のデコードのためにデコードしなければならない必要最小限の、表示されないピクチャは、GOP(n)のピクチャI3であり、デコードスケジューリング部123は、GOP(n)のピクチャI3からデコードするようにスケジューリングする。さらに、その後は、GOP(n)のピクチャI3よりもデコード順で後のピクチャB1,B2,P6,B4,B5・・・をデコードするが、編集点が設定されているピクチャB5より表示順で前のピクチャB1,B2,B4は表示も参照もされないからデコードする必要がない。そこで、デコードスケジューリング部123は、GOP(n)のピクチャI3をデコードした後、ピクチャB1,B2はデコードせずに、ピクチャP6をデコードするようにスケジューリングする。さらに、デコードスケジューリング部123は、その後、ピクチャB4をデコードせずに、ピクチャB5をデコードするようにスケジューリングし、以下、通常のデコード順でデコードするようにスケジューリングする。
【0133】
編集点が設定されているピクチャが、GOP(n)のピクチャP6である場合には、GOP(n)のピクチャP6のデコードのためにデコードしなければならない必要最小限の、表示されないピクチャは、GOP(n)のピクチャI3であり、デコードスケジューリング部123は、GOP(n)のピクチャI3からデコードするようにスケジューリングする。さらに、その後は、GOP(n)のピクチャI3よりもデコード順で後のピクチャB1,B2,P6,B4,B5・・・をデコードするが、編集点が設定されているピクチャP6より表示順で前のピクチャB1,B2,B4,B5は表示も参照もされないからデコードする必要がない。そこで、デコードスケジューリング部123は、GOP(n)のピクチャI3をデコードした後、ピクチャB1,B2はデコードせずに、ピクチャP6をデコードするようにスケジューリングする。さらに、デコードスケジューリング部123は、その後、ピクチャB4,B5をデコードせずに、ピクチャP9をデコードするようにスケジューリングし、以下、通常のデコード順でデコードするようにスケジューリングする。
【0134】
編集点が設定されているピクチャが、GOP(n)のピクチャB7である場合には、GOP(n)のピクチャB7のデコードのためにデコードしなければならない必要最小限の、表示されないピクチャは、GOP(n)のピクチャI3,P6であり、デコードスケジューリング部123は、GOP(n)のピクチャI3,P6からデコードするようにスケジューリングする。さらに、その後は、GOP(n)のピクチャP6よりもデコード順で後のピクチャB4,B5,P9,B7,B8,・・・をデコードするが、編集点が設定されているピクチャB7より表示順で前のピクチャB4,B5は表示も参照もされないからデコードする必要がない。そこで、デコードスケジューリング部123は、GOP(n)のピクチャP6をデコードした後、ピクチャB4,B5はデコードせずに、ピクチャP9をデコードするようにスケジューリングし、以下、通常のデコード順でデコードするようにスケジューリングする。
【0135】
編集点が設定されているピクチャが、GOP(n)のピクチャB8である場合には、GOP(n)のピクチャB8のデコードのためにデコードしなければならない必要最小限の、表示されないピクチャは、GOP(n)のピクチャI3,P6であり、デコードスケジューリング部123は、GOP(n)のピクチャI3,P6からデコードするようにスケジューリングする。さらに、その後は、GOP(n)のピクチャP6よりもデコード順で後のピクチャB4,B5,P9,B7,B8,・・・をデコードするが、編集点が設定されているピクチャB8より表示順で前のピクチャB4,B5,B7は表示も参照もされないからデコードする必要がない。そこで、デコードスケジューリング部123は、GOP(n)のピクチャP6をデコードした後、ピクチャB4,B5はデコードせずに、ピクチャP9をデコードするようにスケジューリングする。さらに、デコードスケジューリング部123は、その後、ピクチャB7をデコードせずに、ピクチャB8をデコードするようにスケジューリングし、以下、通常のデコード順でデコードするようにスケジューリングする。
【0136】
編集点が設定されているピクチャが、GOP(n)のピクチャP9である場合には、GOP(n)のピクチャP9のデコードのためにデコードしなければならない必要最小限の、表示されないピクチャは、GOP(n)のピクチャI3,P6であり、デコードスケジューリング部123は、GOP(n)のピクチャI3,P6からデコードするようにスケジューリングする。さらに、その後は、GOP(n)のピクチャP6よりもデコード順で後のピクチャB4,B5,P9,B7,B8,P12,B10,B11,・・・をデコードするが、編集点が設定されているピクチャP9より表示順で前のピクチャB4,B5,B7,B8は表示も参照もされないからデコードする必要がない。そこで、デコードスケジューリング部123は、GOP(n)のピクチャP6をデコードした後、ピクチャB4,B5はデコードせずに、ピクチャP9をデコードするようにスケジューリングする。さらに、デコードスケジューリング部123は、その後、ピクチャB7,B8をデコードせずに、ピクチャP12をデコードするようにスケジューリングし、以下、通常のデコード順でデコードするようにスケジューリングする。
【0137】
編集点が設定されているピクチャが、GOP(n)のピクチャB10である場合には、GOP(n)のピクチャB10のデコードのためにデコードしなければならない必要最小限の、表示されないピクチャは、GOP(n)のピクチャI3,P6,P9であり、デコードスケジューリング部123は、GOP(n)のピクチャI3,P6,P9からデコードするようにスケジューリングする。さらに、その後は、GOP(n)のピクチャP9よりもデコード順で後のピクチャB7,B8,P12,B10,B11,・・・をデコードするが、編集点が設定されているピクチャB10より表示順で前のピクチャB7,B8は表示も参照もされないからデコードする必要がない。そこで、デコードスケジューリング部123は、GOP(n)のピクチャP9をデコードした後、ピクチャB7,B8はデコードせずに、ピクチャP12をデコードするようにスケジューリングし、以下、通常のデコード順でデコードするようにスケジューリングする。
【0138】
編集点が設定されているピクチャが、GOP(n)のピクチャB11である場合には、GOP(n)のピクチャB11のデコードのためにデコードしなければならない必要最小限の、表示されないピクチャは、GOP(n)のピクチャI3,P6,P9であり、デコードスケジューリング部123は、GOP(n)のピクチャI3,P6,P9からデコードするようにスケジューリングする。さらに、その後は、GOP(n)のピクチャP9よりもデコード順で後のピクチャB7,B8,P12,B10,B11,・・・をデコードするが、編集点が設定されているピクチャB11より表示順で前のピクチャB7,B8,B10は表示も参照もされないからデコードする必要がない。そこで、デコードスケジューリング部123は、GOP(n)のピクチャP9をデコードした後、ピクチャB7,B8はデコードせずに、ピクチャP12をデコードするようにスケジューリングする。さらに、デコードスケジューリング部123は、その後、ピクチャB10をデコードせずに、ピクチャB11をデコードするようにスケジューリングし、以下、通常のデコード順でデコードするようにスケジューリングする。
【0139】
編集点が設定されているピクチャが、GOP(n)のピクチャP12である場合には、GOP(n)のピクチャP12のデコードのためにデコードしなければならない必要最小限の、表示されないピクチャは、GOP(n)のピクチャI3,P6,P9であり、デコードスケジューリング部123は、GOP(n)のピクチャI3,P6,P9からデコードするようにスケジューリングする。さらに、その後は、GOP(n)のピクチャP9よりもデコード順で後のピクチャB7,B8,P12,B10,B11,P15,B13,B14,次のGOPのピクチャをデコードするが、編集点が設定されているピクチャP12より表示順で前のピクチャB7,B8,B10,B11は表示も参照もされないからデコードする必要がない。そこで、デコードスケジューリング部123は、GOP(n)のピクチャP9をデコードした後、ピクチャB7,B8はデコードせずに、ピクチャP12をデコードするようにスケジューリングする。さらに、デコードスケジューリング部123は、その後、ピクチャB10,B11をデコードせずに、ピクチャP15をデコードするようにスケジューリングし、以下、通常のデコード順でデコードするようにスケジューリングする。
【0140】
編集点が設定されているピクチャが、GOP(n)のピクチャB13である場合には、GOP(n)のピクチャB13のデコードのためにデコードしなければならない必要最小限の、表示されないピクチャは、GOP(n)のピクチャI3,P6,P9,P12であり、デコードスケジューリング部123は、GOP(n)のピクチャI3,P6,P9,P12からデコードするようにスケジューリングする。さらに、その後は、GOP(n)のピクチャP12よりもデコード順で後のピクチャB10,B11,P15,B13,B14,次のGOPのピクチャをデコードするが、編集点が設定されているピクチャB13より表示順で前のピクチャB10,B11は表示も参照もされないからデコードする必要がない。そこで、デコードスケジューリング部123は、GOP(n)のピクチャP12をデコードした後、ピクチャB10,B11はデコードせずに、ピクチャP15をデコードするようにスケジューリングし、以下、通常のデコード順でデコードするようにスケジューリングする。
【0141】
編集点が設定されているピクチャが、GOP(n)のピクチャB14である場合には、GOP(n)のピクチャB14のデコードのためにデコードしなければならない必要最小限の、表示されないピクチャは、GOP(n)のピクチャI3,P6,P9,P12であり、デコードスケジューリング部123は、GOP(n)のピクチャI3,P6,P9,P12からデコードするようにスケジューリングする。さらに、その後は、GOP(n)のピクチャP12よりもデコード順で後のピクチャB10,B11,P15,B13,B14,次のGOPのピクチャをデコードするが、編集点が設定されているピクチャB14より表示順で前のピクチャB10,B11,B13は表示も参照もされないからデコードする必要がない。そこで、デコードスケジューリング部123は、GOP(n)のピクチャP12をデコードした後、ピクチャB10,B11はデコードせずに、ピクチャP15をデコードするようにスケジューリングする。さらに、デコードスケジューリング部123は、その後、ピクチャB13をデコードせずに、ピクチャB14をデコードするようにスケジューリングし、以下、通常のデコード順でデコードするようにスケジューリングする。
【0142】
編集点が設定されているピクチャが、GOP(n)のピクチャP15である場合には、GOP(n)のピクチャP15のデコードのためにデコードしなければならない必要最小限の、表示されないピクチャは、GOP(n)のピクチャI3,P6,P9,P12であり、デコードスケジューリング部123は、GOP(n)のピクチャI3,P6,P9,P12からデコードするようにスケジューリングする。さらに、その後は、GOP(n)のピクチャP12よりもデコード順で後のピクチャB10,B11,P15,B13,B14,次のGOPのピクチャをデコードするが、編集点が設定されているピクチャP15より表示順で前のピクチャB10,B11,B13,B14は表示も参照もされないからデコードする必要がない。そこで、デコードスケジューリング部123は、GOP(n)のピクチャP12をデコードした後、ピクチャB10,B11はデコードせずに、ピクチャP15をデコードするようにスケジューリングする。さらに、デコードスケジューリング部123は、その後、ピクチャB13,B14をデコードせずに、次のGOP(のピクチャI3)をデコードするようにスケジューリングし、以下、通常のデコード順でデコードするようにスケジューリングする。
【0143】
以上のように、編集点(IN点)が設定されているピクチャによって、他のピクチャのデコードにおいて参照するために、そのデコードの前にデコードしておく必要があるピクチャの数が異なる。従って、この数に応じて、デコードの開始位置が決定される。
【0144】
例えば、図9Aに示されるように、画像データを、あるGOPiから、OUT1点が設定されているGOP(m)のピクチャP6までを表示し、その後、IN2点が設定されているGOP(n)のピクチャB1から、OUT2点が設定されているGOP(n)のピクチャP6までを表示し、さらに、IN3点が設定されているGOP(m+2)のピクチャB1から、それ以降のピクチャを表示する場合、デコーダ1551および1552のそれぞれのデコード開始位置と開始時刻は、以下のように定まる。
【0145】
この場合、デコードスケジューリング部123は、2つのデコーダ1551と1552のうちの一方である、例えば、デコーダ1551に、図9Bに示されるように、GOP(m)において表示されるピクチャI3,B1,B2,P6,B4,B5をデコードさせる。
【0146】
なお、GOP(m)のピクチャI3,B1,B2,P6,B4,B5のデコードについては、そのGOP(m)のピクチャの中で最後にデコードされるピクチャB5のデコードが、そのピクチャB5が表示される時刻tn-2までに終了している必要がある。従って、このことから、GOP(m)のデコードを開始しなければならない時刻は、時刻tn-2から、GOP(m)のピクチャB1乃至P6の6ピクチャに対応する表示時間だけ前の時刻tn-8に定まる。
【0147】
ここで、図9A乃至図9Cでは、時刻tnは、GOP(n)の最初のピクチャB1の表示が開始される時刻(GOP(m)のピクチャP6の表示が終了される時刻)を表す。また、時刻tn-iは、時刻tnから、iフレームの表示時間だけ前の時刻を表す。
【0148】
デコーダ1551によりGOP(m)のピクチャB1乃至P6がデコードされて表示された後は、図9Aに示されるように、OUT1点に到達するから、次は、IN2点から始まり、OUT2点で終了するGOP(n)のピクチャB1乃至P6をデコードして表示しなければならない。
【0149】
いま、IN2点が設定されているのは、GOP(n)のピクチャB1であるから、デコードスケジューリング部123は、図9Cに示されるように、2つのデコーダ1551と1552のうちの他方のデコーダ1552に、図8を参照して説明したように、GOP(n)の1GOP前のGOP(n-1)のピクチャI3,P6,P9,P12,P15をデコードさせ、さらに、その後、GOP(n)のピクチャI3,B1,B2,P6,B4,B5をデコードさせる。従って、デコードの開始位置は、GOP(n-1)のピクチャI3に定まる。
【0150】
なお、GOP(n)のピクチャI3,B1,B2,P6,B4,B5のデコードについては、IN2点が設定されているピクチャB1のデコードが、その表示時刻tnまでに終了している必要がある。従って、デコードスケジューリング部123は、GOP(n)のピクチャB1よりも7ピクチャ前のGOP(n-1)のピクチャI3のデコードが、時刻tnから7ピクチャに対応する表示時間だけ前の時刻tn-7までに開始されるように、デコーダ1552のデコード開始時刻を決定する。
【0151】
一方、デコーダ1551は、GOP(m)のピクチャI3,B1,B2,P6,B4,B5のデコードの終了後、デコード処理を終了するが、デコーダ1552においてGOP(n)のピクチャB5がデコードされ、先にデコードされているピクチャP6が表示された後は、図9Aに示されるように、OUT2点に到達するから、次は、IN3点から始まるGOP(m+2)以降をデコードして表示しなければならない。
【0152】
IN3点が設定されているのは、GOP(m+2)のピクチャB1であるから、デコードスケジューリング部123は、図9Bに示されるように、デコーダ1551に、図8を参照して説明したように、GOP(m+2)の1GOP前のGOP(m+1)のピクチャI3,P6,P9,P12,P15をデコードさせ、さらに、その後、GOP(m+2)のピクチャI3,B1,B2,P6,B4,B5,・・・をデコードさせる。従って、デコード開始位置は、GOP(m+1)のピクチャI3に定まる。
【0153】
GOP(m+2)のデコードについては、IN3点が設定されているピクチャB1のデコードが、その表示時刻t'nまでに終了している必要がある。従って、デコードスケジューリング部123は、GOP(m+2)のピクチャB1よりも7ピクチャ前のGOP(m+1)のピクチャI3のデコードが、時刻t'nから7ピクチャに対応する表示時間だけ前の時刻t'n-7までに開始されるように、デコーダ1551のデコード開始時刻を決定する。
【0154】
ここで、図9A乃至図9Cでは、時刻t'nは、GOP(m+2)の最初のピクチャB1の表示が開始される時刻(GOP(n)のピクチャP6の表示が終了する時刻)を表す。また、時刻t'n-iは、時刻t'nから、iフレームの表示時間だけ前の時刻を表す。
【0155】
以上のように、デコードスケジューリング部123は、編集点が設定されているピクチャを表示する前に予めデコードしておく必要があるピクチャの数を算出し、その、予めデコードしておく必要のある先頭のピクチャを、デコード開始位置として決定する。また、デコードスケジューリング部123は、その数のピクチャのデコードに要する時間だけ、編集点が設定されているピクチャの表示時刻から遡り、デコード開始時刻を決定する。
【0156】
図10は、編集点が設定されているピクチャを表示するために、その表示時刻の前にデコードしておく必要があるピクチャの数についてまとめた図である。
【0157】
図10に示されるように、編集点が設定されているピクチャを表示する前にデコードしておく必要があるピクチャの数は、その編集点が設定されているピクチャから、時間的に遡って最初のIピクチャまでの間にあるIピクチャとPピクチャの数に相当する。図10においては、編集点が設定されているピクチャがIピクチャまたはPピクチャである場合には、そのピクチャ自身の数をも含めて、編集点が設定されているピクチャから、時間的に遡って最初のIピクチャまでの間にあるIピクチャとPピクチャの数がNipで表されている。
【0158】
例えば、編集点が設定されているピクチャが、GOP(n)のピクチャB1またはB2である場合には、そのデコードの前にデコードしておく必要があるピクチャは、GOP(n-1)のピクチャI3,P6,P9,P12,P15とGOP(n)のピクチャI3の6つのピクチャであり、Nipは「6」である。
【0159】
また、編集点が設定されているピクチャが、GOP(n)のピクチャI3である場合には、そのピクチャI3をデコードするのに、他のピクチャを参照する必要はないから、Nipは、ピクチャI3自身の数、すなわち「1」である。
【0160】
編集点が設定されているピクチャが、GOP(n)のピクチャB4またはピクチャB5である場合には、そのデコードの前にデコードしておく必要があるピクチャは、GOP(n)のピクチャI3,P6の2つのピクチャであり、Nipは「2」である。
【0161】
編集点が設定されているピクチャが、GOP(n)のピクチャP6である場合には、そのデコードの前にデコードしておく必要があるピクチャは、GOP(n)のピクチャI3であり、Nipは、それにピクチャP6自身の数を加えた「2」である。
【0162】
編集点が設定されているピクチャが、GOP(n)のピクチャB7またはピクチャB8である場合には、そのデコードの前にデコードしておく必要があるピクチャは、GOP(n)のピクチャI3,P6,P9の3つのピクチャであり、Nipは「3」である。
【0163】
編集点が設定されているピクチャが、GOP(n)のピクチャP9である場合には、そのデコードの前にデコードしておく必要があるピクチャは、GOP(n)のピクチャI3,P6の2つのピクチャであり、Nipは、それにピクチャP9自身の数を加えた「3」である。
【0164】
編集点が設定されているピクチャが、GOP(n)のピクチャB10またはピクチャB11である場合には、そのデコードの前にデコードしておく必要があるピクチャは、GOP(n)のピクチャI3,P6,P9,P12の4つのピクチャであり、Nipは「4」である。
【0165】
編集点が設定されているピクチャが、GOP(n)のピクチャP12である場合には、そのデコードの前にデコードしておく必要があるピクチャは、GOP(n)のピクチャI3,P6,P9の3つのピクチャであり、Nipは、それにピクチャP12自身の数を加えた「4」である。
【0166】
編集点が設定されているピクチャが、GOP(n)のピクチャB13またはピクチャB14である場合には、そのデコードの前にデコードしておく必要があるピクチャは、GOP(n)のピクチャI3,P6,P9,P12,P15の5つのピクチャであり、Nipは「5」である。
【0167】
編集点が設定されているピクチャが、GOP(n)のピクチャP15である場合には、そのデコードの前にデコードしておく必要があるピクチャは、GOP(n)のピクチャI3,P6,P9,P12の4つのピクチャであり、Nipは、それにピクチャP15自身の数を加えた「5」である。
【0168】
図11は、デコードのスケジューリングにおける条件について示す図である。
【0169】
いま、編集点nの位置をEP(n)、編集点nの1つ前の編集点n−1の位置をEP(n-1)と表し、EP(n-1)にOUT点を有するクリップをクリップA、EP(n)にOUT点を有するクリップをクリップB、EP(n)にIN点を有するクリップをクリップCと表すとする。また、クリップBの表示するピクチャの数をP(n)、クリップCのIN点が設定されているピクチャを表示する前にデコードしておく必要があるピクチャの数を、上述したNipとする。
【0170】
この場合、図7に示されるように、2つのデコーダが設けられる再生装置101によるデコードのスケジューリングは、クリップAとクリップCが同一クリップであるか否かに応じて、以下のような条件を満たすように行われる。
【0171】
(1)クリップAとクリップCが同一クリップでない場合
P(n)≧Nip
であること。
【0172】
すなわち、クリップAとクリップCが同一クリップでない場合には、一方のデコーダがP(n)で表される数のピクチャをデコードしている間に、それと並行して、他方のデコーダがNipで表される数のピクチャを、クリップCのIN点が設定されているピクチャを表示する前にデコードしておく必要があるため、この条件を満たすようにデコードのスケジューリングが行われる。
【0173】
(2)クリップAとクリップCが同一クリップである場合
(イ)クリップCのIN点とクリップAのOUT点の時間差が、P(n)の表示時間よりも短いこと。
【0174】
すなわち、クリップCのIN点とクリップAのOUT点の時間差が、P(n)の表示時間よりも短い場合には、クリップAとクリップCが同一のクリップであることから、クリップAのOUT点からクリップCのIN点にシークすることなく、クリップAのOUT点からクリップCのIN点の間にあるピクチャをも含めて、続けてデコードすることで、クリップCのIN点が設定されているピクチャの表示時刻に、そのデコードが終了しているようにスケジューリングすることが可能となる。
【0175】
(ロ)上記条件(イ)を満たさない場合、条件(1)を満たすこと。
一方、クリップCのIN点とクリップAのOUT点の時間差が、P(n)の表示時間よりも長い場合には、上述したように、Nipにより表される数のピクチャを、クリップCのIN点が設定されているピクチャを表示する前にデコードしておく必要がある。
【0176】
再生装置101においては、以上のようにして、デコードのスケジューリングが行われ、スケジューリング結果を表すスケジュール情報に従って、画像データのデコードが行われる。これにより、表示される映像にフリーズ(図1Cの状態)が生じることを回避することができ、リアルタイム再生を行うことができる。
【0177】
なお、以上においては、再生装置101に、1倍速のデコード速度を有する2つのデコーダが設けられている場合について説明したが、3つ以上のデコーダが設けられている場合、デコーダの数を「DN」、デコード速度を「DS」とすると、
P(n)は
P(n)=EP(n)-EP(n-DN+1)
で表され、
上記条件(1)は
P(n)≧Nip/DS
のように書き換えられる。
【0178】
次に、以上の構成を有するディスク装置1と再生装置101の動作についてフローチャートを参照して説明する。
【0179】
始めに、図12および図13のフローチャートを参照して、図2のディスク装置1により行われるプレイリスト作成処理について説明する。
【0180】
この処理は、例えば、ユーザにより、画像データとエディトリスト等が記録された光ディスク52がドライブ12に装着され、記録されているエディトリストの中から、プレイリストに変換する所定のエディトリストが選択されたときに実行される。
【0181】
ステップS1において、エディトリスト読み出し部42は、光ディスク52に記録されているエディトリストを読み出し、それを解釈する。具体的には、エディトリスト読み出し部42は、例えば、図14に示されるようなエディトリストを読み出し、それを情報処理部11において処理可能な形式に変換する。
【0182】
図14は、エディトリストのうちの、開始タグである<body>タグから、終了タグである</body>タグにより指定される範囲のコードの例について示している。なお、図14において、各行頭の数字と、コロン記号(:)は、説明の便宜上付加したものであり、コードの一部ではない。後述する、図18、図19、図26、図32、図35、図37においても同様である。
【0183】
上述したように、エディトリストは、編集点の位置(タイムコード)を表すものであり、その内容が、第2行目の<par>タグから、第12行目の</par>タグまでの間に記述されている。
【0184】
第3行目の「<!--Clip1-->」は、その下の第4行目および第5行目に、クリップ#1に関するコードが記述されることを表している。
【0185】
第4行目および第5行目の「<ref src="urn:smpte:umid:XX...VA clipBegin="smpte=00:00:00:00" clipEnd="smpte=00:05:00:12"/>」のうち、「ref src="urn:smpte:umid:XX...VA」は、SMPTE(Society of Motion Picture and Television Engineers)で定義される「umid:XX...VA」(クリップ#1のファイル名)を再生対象とすることを表している。また、「clipBegin="smpte=00:00:00:00"」は、クリップ#1のIN点が「TC=00:00:00:00」に設定されていることを表し、「clipEnd="smpte=00:05:00:12"」は、クリップ#1のOUT点が「TC=00:05:00:12」に設定されていることを表している。
【0186】
ここで、umid(unique material identifier)は、参照されるデータに設定される、ワールドワイドで唯一のIDである。umid(UMID)には、Basic UMIDとExtended UMIDとがあり、そのうちのBasic UMIDは、画像データ等の唯一のIDである。また、Extended UMIDは、ソースパック(時間、場所、撮影者等)を示し、映像の性質を表すためや、検索に利用されるためにBasic UMIDに付加される。
【0187】
第6行目の「<!--Clip2-->」は、その下の第7行目および第8行目に、クリップ#2に関するコードが記述されることを表している。
【0188】
第7行目および第8行目の「<ref src="urn:smpte:umid:YY...VA begin="smpte=00:05:00:12" clipBegin="smpte=00:02:00:00" clipEnd="smpte=00:02:00:10"/>」のうちの「ref src="urn:smpte:umid:YY...VA」は、クリップ#2のファイル名が「umid:YY...VA」であることを表し、「begin="smpte=00:05:00:12"」は、クリップ#2の表示が「TC=00:05:00:12」から開始されることを表している。
【0189】
また、「clipBegin="smpte=00:02:00:00"」は、クリップ#2のIN点が「TC=00:02:00:00」に設定されていることを表し、「clipEnd="smpte=00:02:00:10"」は、クリップ#2のOUT点が「TC=00:02:00:10」に設定されていることを表している。
【0190】
第9行目の「<!--Clip3-->」は、その下の第10行目および第11行目に、クリップ#3に関するコードが記述されることを表している。
【0191】
第10行目および第11行目の「<ref src="urn:smpte:umid:ZZ...VA begin="smpte=00:05:00:22" clipBegin="smpte=00:10:00:03"/>」のうちの「ref src="urn:smpte:umid:ZZ...VA」は、クリップ#3のファイル名が「umid:ZZ...VA」であることを表し、「begin="smpte=00:05:00:22"」は、クリップ#3の表示が「TC=00:05:00:22」から開始されることを表している。
【0192】
また、「clipBegin="smpte=00:10:00:03"」は、クリップ#3のIN点が「TC=00:10:00:03」に設定されていることを表している。
【0193】
このように、光ディスク52に記録されるエディトリスト、および、それから作成されるプレイリストは、例えば、XMLベースの所定の編集記述言語により記述される。
【0194】
エディトリスト読み出し部42により読み出されたエディトリストは、所定の形式に変換された後、ピクチャポインタ読み出し部41に出力される。
【0195】
ステップS2において、ピクチャポインタ読み出し部41は、エディトリスト読み出し部42から供給されるエディトリストに基づいて、そのエディトリストにより参照されるクリップのピクチャポインタを光ディスク52から読み出す。例えば、ピクチャポインタ読み出し部41は、クリップ#1乃至#3を参照する図14のエディトリストがエディトリスト読み出し部42から供給されてきたとき、クリップ#1乃至#3のピクチャポインタを取得する。
【0196】
図15は、ピクチャポインタの例を示す図である。
【0197】
図15に示されるようなテーブル情報が、例えば、各クリップ毎に、ピクチャポインタとして、画像データの記録時(エンコード時)に作成され、光ディスク52に記録される。このテーブルは、複数のエントリ(欄)により構成され、各エントリは、一定の大きさとされている。図15の例においては、各エントリは、8バイトの大きさとされている。
【0198】
1つのエントリには、1つのピクチャの情報が記録される。各エントリには、各ピクチャの情報が、表示の順番に従って記録される。
【0199】
各ピクチャの情報としては、GOP先頭フラグ、top_field_firstフラグ、repeat_first_fieldフラグが、その先頭に、1ビットずつ記録される。例えば、図15では、GOP先頭フラグの「1」は、そのピクチャがGOPの先頭であることを表し、「0」は、GOPの先頭でないことを表す。
【0200】
3つのフラグの次には、各ピクチャのデータ量(size)が21ビットで記録される。
【0201】
サイズの次には、ピクチャタイプ(picture type)が3ビットで記述される。ピクチャタイプの「001」は、そのピクチャがIピクチャであることを表し、「010」は、Pピクチャであることを表し、「011」は、Bピクチャであることを表す。そして「000」は、そのピクチャがダミーのピクチャであることを表す。
【0202】
ピクチャタイプの次には、そのピクチャの先頭のファイルアドレス(論理アドレス)が37ビットで記述される。
【0203】
ピクチャポインタ読み出し部41により読み出されたピクチャポインタは、エディトリストとともにリアルタイム再生可否判定部24に出力される。
【0204】
再生装置101が画像データのリアルタイム再生を行うことができるか否かを判定するためには、各ピクチャの光ディスク52上の物理アドレスが必要である。従って、リアルタイム再生可否判定部24は、ピクチャポインタ読み出し部41から供給されたピクチャポインタに記述されるファイルアドレス(論理アドレス)をアドレス管理部23に出力する。
【0205】
ステップS3において、アドレス管理部23は、リアルタイム再生可否判定部24から供給された論理アドレスを物理アドレスに変換し、得られた物理アドレスをリアルタイム再生可否判定部24に出力する。
【0206】
リアルタイム再生可否判定部24は、アドレス変換部23から供給される物理アドレス(各ピクチャの物理アドレス)を取得し、ステップS4において、再生装置101が、エディトリストで参照される画像データを、その編集点に従ってリアルタイムで再生することが可能であるか否かを判定する(リアルタイム再生可否判定を行う)。リアルタイム再生可否判定は、シークの発生位置の全てを対象として行われる。
【0207】
このとき、リアルタイム再生可否判定部24には、再生装置101のバッファ容量やデコード速度などの情報が機器情報記憶部25から供給されており、リアルタイム再生可否判定において用いられる。
【0208】
なお、リアルタイム再生可否判定については、特願2002−366197号、および、特願2002−366199号に、その詳細が記載されている。これらの文献に記載されている技術を、図2のディスク装置1により行われるリアルタイム再生可否判定に適用することも可能である。当然、例えば、再生装置101と同じ条件で仮想的に画像データを再生し、リアルタイム再生判定可否判定部24が、それがリアルタイムで行われているか否かを判定するなどの、様々な方法により、リアルタイム再生可否判定が行われるようにしてもよい。
【0209】
ステップS5において、リアルタイム再生可否判定部24は、リアルタイム再生可否判定の結果に基づいて、ブリッジエッセンスを作成する必要があるか否かを判定する。
【0210】
図3Aおよび図3Bを参照して説明したように、シーク時間が大であるため、再生装置101が、エディトリストに従ってリアルタイム再生を行うことができないと判定した場合、リアルタイム再生可否判定部24は、ステップS5において、ブリッジエッセンスを作成する必要があると判定し、ステップS6に進む。このとき、エディトリスト、ピクチャポインタ、各ピクチャの物理アドレス等の情報が、制御部22を介して、ブリッジエッセンス作成部26に出力される。
【0211】
ステップS6において、ブリッジエッセンス作成部26は、リアルタイム再生可否判定の結果に基づいて、ブリッジエッセンスの作成位置を決定する。
【0212】
ステップS7において、ブリッジエッセンス作成部26は、ステップS6で決定した位置に、例えば、GOP単位のブリッジエッセンスを作成する。
【0213】
図16および図17は、ブリッジエッセンスの作成について示す図である。
【0214】
図16の白抜き矢印は、映像の表示順を表している。すなわち、あるGOPiからGOP(m+2)のOUT1点が設定されたピクチャまでを表示し、その後、GOP(n)のIN2点が設定されたピクチャから、その後にあるOUT2点が設定されたピクチャまでを表示し、さらに、GOP(o)のIN3点が設定されたピクチャから、それ以降にあるGOPjの所定のピクチャまでを表示することとする。
【0215】
なお、図16においては、GOPiの開始位置(クリップ#1を格納するファイルの先頭位置)を「TC=00:00:00:00」とした場合、GOP(m+2)の先頭は「TC=00:05:00:00」で表される。また、OUT1点は「TC=00:05:00:12」に、IN2点は「TC=00:02:00:00」に、OUT2点は「TC=00:02:00:10」に、IN3点は「TC=00:10:00:03」に、それぞれ設定されている。従って、IN2点とOUT2点は、OUT1点よりも前方にあり、IN3点は、OUT1点よりも後方にある。
【0216】
すなわち、この表示は、図14のエディトリストに基づくものである。
【0217】
例えば、OUT1点からIN2点まで、または、OUT2点からIN3点までのシーク時間が大であるため、リアルタイム再生可否判定部24により、再生装置101が、図16の白抜き矢印で示される順序で各クリップのリアルタイム再生を行うことができないと判定された場合、ブリッジエッセンス作成部26は、クリップ#1のGOP(m+2)、クリップ#2のGOP(n)、クリップ#3のGOP(o)からなる、図17に示されるようなブリッジエッセンスを、光ディスク52の空き領域に作成する。
【0218】
図17においては、GOP(m+2)の先頭(図17のブリッジエッセンスを格納するファイルの先頭)を「TC=00:00:00:00」とした場合、GOP(m+2)に設定されているOUT1点が「TC=00:00:00:12」で表示され、GOP(n)に設定されているIN2点とOUT2点が「TC=00:00:00:17」と「TC=00:00:00:27」でそれぞれ表示される。また、GOP(o)に設定されているIN3点が「TC=00:00:01:03」で表され、GOP(o)の終了位置が「TC=00:00:01:14」で表される。
【0219】
このようにして、作成する必要があると判定された全ての位置(シーク時間が大である位置)についてブリッジエッセンスが作成され、作成されたブリッジエッセンスを参照して画像データの再生が行われるように、エディトリストが書き換えられる。
【0220】
ブリッジエッセンス作成部26により作成されたブリッジエッセンスは、書き込み部31に出力され、ディスクI/F51を介して光ディスク52に書き込まれる。また、ブリッジエッセンスに関する情報として、ブリッジエッセンスの作成位置、ブリッジエッセンスのファイル名等の情報がプレイリスト作成部28およびピクチャポインタ作成部29に出力される。
【0221】
ブリッジエッセンス作成部26は、ステップS8において、全ての位置について、ブリッジエッセンスを作成したか否かを判定し、作成していないと判定した場合、ステップS7に戻り、必要とされるそれぞれの位置についてブリッジエッセンスを作成する。
【0222】
ステップS8において、全ての位置についてブリッジエッセンスを作成したと判定された場合、ステップS9に進み、ピクチャポインタ作成部29は、ブリッジエッセンスのピクチャポインタを作成する。すなわち、ピクチャポインタ作成部29は、制御部22から供給されるピクチャポインタ(ピクチャポインタ読み出し部41により読み出された、エディトリストで参照されるクリップのピクチャポインタ)から、ブリッジエッセンスを構成するピクチャに関する情報のみを抽出し、それを、ブリッジエッセンスのピクチャポインタとする。なお、ここで作成されたブリッジエッセンスのピクチャポインタは、ステップS13で作成されるプレイリストのピクチャポインタに含まれるものである。
【0223】
ステップS10において、プレイリスト作成部28は、ブリッジエッセンスを参照して再生が行われるように、制御部22から供給されるエディトリストを書き換え、プレイリストを作成する。
【0224】
図18は、図17のブリッジエッセンスが参照されるように、図14のエディトリストが書き換えられたプレイリストの例を示す図である。図14と重複する部分については、適宜、その説明を省略する。
【0225】
図18の第3行目乃至第5行目は、クリップ#1(Clip1)に関するコードであり、第6行目乃至第12行目は、新たに作成されたブリッジエッセンス(Bridge Essence)に関するコードである。また、第13行目乃至第15行目は、クリップ#3(Clip3)に関するコードである。すなわち、プレイリストにおいては、新たに作成されたブリッジエッセンスが再生対象とされている。
【0226】
具体的には、第4行目および第5行目の「<ref src="urn:smpte:umid:XX...VA clipBegin="smpte=00:00:00:00" clipEnd="smpte=00:05:00:00"/>」は、「umid:XX...VA」で指定されるクリップ#1を、「TC=00:00:00:00」から「TC=00:05:00:00」まで(図示せぬGOPiから、図16のGOP(m+1)の最後のピクチャまで)表示するように再生することを表している。
【0227】
第6行目の「<!?--Bridge Essence-->」は、その下の第7行目乃至第12行目に、ブリッジエッセンスに関するコードが記述されることを表している。
【0228】
第7行目の「<ref src="urn:smpte:umid:AA...VA begin="smpte=00:05:00:00"」は、「umid:AA...VA」で指定されるブリッジエッセンスの表示を「TC=00:05:00:00」から開始することを表している。
【0229】
第8行目の「clipBegin="smpte=00:00:00:00" clipEnd="smpte=00:00:00:12"/」は、ブリッジエッセンス内の所定の位置を基準として、「TC=00:00:00:00」から「TC=00:00:00:12」までのピクチャ(ブリッジエッセンスを構成するGOP(m+2)の先頭からOUT1点までのピクチャ(図17))を表示するように再生することを表している。
【0230】
第9行目の「<ref src="urn:smpte:umid:AA...VA begin="smpte=00:05:00:12"」は、第10行目のコードにより指定される範囲の表示を、「TC=00:05:00:12」から開始することを表している。
【0231】
第10行目の「clipBegin="smpte=00:00:00:17" clipEnd="smpte=00:00:00:27"/」は、ブリッジエッセンス内の所定の位置を基準として、「TC=00:00:00:17」から「TC=00:00:00:27」までのピクチャ(ブリッジエッセンスを構成するIN2点からOUT2点までのピクチャ(図17))を表示するように再生することを表している。
【0232】
第11行目の「<ref src="urn:smpte:umid:AA...VA begin="smpte=00:05:00:22"」は、第12行目のコードにより指定される範囲の表示を、「TC=00:05:00:22」から開始することを表している。
【0233】
第12行目の「clipBegin="smpte=00:00:01:03" clipEnd="smpte=00:00:01:14"/」は、ブリッジエッセンス内の所定の位置を基準として、「TC=00:00:01:03」から「TC=00:00:01:14」までのピクチャ(ブリッジエッセンスを構成するIN3点からGOP(o)の最後のピクチャ(図17))を表示するように再生することを表している。
【0234】
プレイリスト作成部28により作成されたプレイリストは、ピクチャポインタ作成部29、および書き込み部31に出力される。
【0235】
図19は、ステップS10において、図14のエディトリストに基づいて作成されるプレイリストの他の例を示す図である。図19のプレイリストは、図18のプレイリストと比較して、ファイルの参照形式が異なっている。
【0236】
すなわち、図19のプレイリストにおいては、その第4行目で、クリップ#1が「"../0001/video01.mpg"」により指定され、その第7行目、第9行目、第11行目で、ブリッジエッセンスが「"../../Edit/0002/video02.mpg"」により指定されている。また、第13行目で、クリップ#3が「"../0005/video05.mpg"」により指定されている。このように、プレイリスト作成部28は、様々な形式でクリップが指定されるように、プレイリストを記述することもできる。
【0237】
図13の説明に戻り、ステップS11において、プレイリスト作成部28は、ステップS10で作成したプレイリストに、付加情報作成部27により作成される付加情報を付加する必要があるか否かを判定し、それを付加する必要があると判定した場合、ステップS12に進む。
【0238】
ステップS12において、プレイリスト作成部28は、付加情報作成部27により作成される付加情報を付加する。後述するように、例えば、付加情報として、スケジュール情報やデコード指定情報等が付加される。
【0239】
一方、ステップS11において、付加情報を付加する必要がないと判定された場合、ステップS12はスキップされる。
【0240】
ステップS13において、ピクチャポインタ作成部29は、プレイリストで参照されるクリップのピクチャポインタを作成する。例えば、ピクチャポインタ作成部29は、ステップS9で作成したブリッジエッセンスのピクチャポインタに、プレイリストで参照される、ブリッジエッセンス以外のクリップのピクチャポインタを付加し、得られるピクチャポインタを、プレイリストのピクチャポインタとする。作成されたピクチャポインタは、書き込み部31に出力される。
【0241】
ステップS14において、書き込み部31は、プレイリスト作成部28から供給されたプレイリストと、ピクチャポインタ作成部29から供給されたピクチャポインタを、ディスクI/F51を介して光ディスク52の所定の領域に書き込み、処理を終了させる。
【0242】
一方、図12のステップS5において、ブリッジエッセンスを作成する必要がないと判定された場合、ステップS15に進み、エディトリストがプレイリストとされ、その後、ステップS11以降の処理が実行される。すなわち、エディトリストに従って、再生装置101が画像データをリアルタイムで再生することができる場合には、ブリッジエッセンスは作成されず、エディトリストで参照されるクリップを、そのまま再生対象にするように、プレイリストが作成される。
【0243】
このように、画像データを再生した場合に、そのリアルタイム性が保証されるようにプレイリストを作成し、再生装置101に提供するようにしたため、再生装置101においては、作成されたプレイリストに従って画像データを再生することにより、シーク時間が大であることにより生じるフリーズを回避することができる。
【0244】
次に、図20のフローチャートを参照して、図12および図13の処理により作成されたプレイリストに基づいて、画像データを再生する再生装置101の処理について説明する。
【0245】
プレイリストが記録された光ディスク52がドライブ112に装着され、プレイリストに従って、画像データを再生することが指示されたとき、プレイリスト読み出し部132は、ステップS31において、光ディスク52からプレイリストを読み出し、それを、内部において処理可能な形式に変換するなどの解釈を行う。プレイリスト読み出し部132により読み出され、解釈されたプレイリストは、ピクチャポインタ読み出し部131に出力される。
【0246】
例えば、プレイリスト読み出し部132により、図18または図19のプレイリストが読み出される。
【0247】
ピクチャポインタ読み出し部131は、ステップS32において、プレイリストで参照されるクリップのピクチャポインタを光ディスク52から読み出す。ピクチャポインタ読み出し部131により読み出されたピクチャポインタは、プレイリストとともにデコードスケジューリング部123に出力される。
【0248】
デコードスケジューリング部123は、ステップS33において、ピクチャポインタ読み出し部131から供給されたプレイリストとピクチャポインタに基づいて、画像データのデコード開始位置とデコード開始時刻をスケジューリングする。
【0249】
すなわち、デコードスケジューリング部123は、プレイリストから、編集点(IN点)が設定されているピクチャを検出し、そのピクチャのピクチャタイプを、ピクチャポインタから取得する。また、デコードスケジューリング部123は、図8、図9等を参照して説明したように、編集点が設定されているピクチャをデコードする前に、予めデコードしておく必要があるピクチャの数を取得し、それに基づいて、デコード開始位置(ピクチャ)とデコードの開始時刻を決定する。
【0250】
また、デコードスケジューリング部123は、ステップS34において、デコードを行うデコーダをデコーダ選択部133により選択する。
【0251】
ステップS35において、デコードスケジューリング部123は、プレイリストで参照されるクリップのファイルアドレスをピクチャポインタから取得する。また、デコードスケジューリング部123は、ステップS36において、アドレス管理部122に問い合わせ、ファイルアドレスに対応する、各ピクチャの物理アドレスを取得する。
【0252】
デコードスケジューリング部123によるスケジューリング結果を表すスケジュール情報、デコーダ指定情報、参照クリップの物理アドレス等の情報は、デコーダ制御部124に出力される。
【0253】
図6の再生装置101においては、主に、デコード開始位置とデコード開始時刻のスケジューリング(ステップS33)、デコーダの選択(ステップS34)、物理アドレスの取得(ステップS36)が、画像データを再生するための前処理として行われる。
【0254】
デコーダ制御部124は、ステップS37において、スケジュール情報とデコーダ指定情報に従って、デコード1551および1552を制御し、画像データを再生する。
【0255】
ステップS38において、デコーダ制御部124は、ユーザにより停止操作が行われたか否かを判定し、停止操作が行われていないと判定した場合、ステップS39に進み、次にプレイリストに基づく画像データの再生を終了するか否かを判定する。
【0256】
デコーダ制御部124は、ステップS39において、再生を終了しないと判定した場合、ステップS37に戻り、それ以降の処理を実行し、一方、再生を終了すると判定した場合、処理を終了させる。なお、ステップS38において、停止操作が行われたと判定された場合も、同様に、処理が終了される。
【0257】
図21は、図19のプレイリストが提供された場合にステップS37で行われる画像データの再生について示す図である。
【0258】
図21においては、表示順序が白抜き矢印で、デコーダ1551によるデコード(再生)が画像データ(GOP)上の実線矢印で、デコーダ1552によるデコードが画像データ上の破線矢印で、それぞれ示されている。
【0259】
図19の第4行目および第5行目の記述に従って、図21に示されるように、「"../0001/video01.mpg"」で指定されるクリップ#1の「TC=00:00:00:00」から「TC=00:05:00:00」まで(GOPiの先頭からGOP(m+1)の最後のピクチャまで)が、例えば、上述した処理(ステップS34)において選択されたデコード1551によりデコードされる。
【0260】
GOP(m+1)の最後のピクチャのデコードに続けて(「TC=00:05:00:00」において)、図19の第7行目および第8行目の記述に従って、「"../../Edit/0002/video02.mpg"」で指定されるブリッジエッセンスのうちの、「TC=00:00:00:00」から「TC=00:00:00:12」まで(GOP(m+2)の最初のピクチャからOUT1点が設定されているピクチャまで)が、デコード1551によりデコードされる。
【0261】
なお、クリップ#1の再生開始位置である「TC=00:00:00:00」を基準とした場合、OUT1点は、GOP(m+1)の最後のピクチャのデコードが終了された「TC=00:05:00:00」に、ブリッジエッセンスのGOP(m+2)の先頭からOUT1点までの期間(「00:00:00:12」)を加えた「TC=00:05:00:12」となる。
【0262】
OUT1点が設定されるピクチャのデコードに続けて(「TC=00:05:00:12」において)、図19の第9行目および第10行目の記述に従って、「TC=00:00:00:17」から「TC=00:00:00:27」まで(GOP(n)のIN2点が設定されているピクチャからOUT2点が設定されているピクチャまで)が、例えば、デコーダ1552によりデコードされる。
【0263】
ここで、図21の範囲A1は、その範囲にあるピクチャ(IN2点が設定されているピクチャより時間的に前にある表示されないピクチャ)が、デコーダ1552によりデコードされていることを示している。上述したように、リアルタイム再生を行うためには、デコード1552により、表示されないピクチャのデコードが、IN2点が設定されているピクチャのデコードに先行して行われている必要がある。
【0264】
なお、クリップ#1の再生開始位置を基準とした場合、OUT2点は、OUT1点が設定されている「TC=00:05:00:12」に、ブリッジエッセンスのGOP(n)のIN2点からOUT2点までの期間(「00:00:00:10」)を加えた「TC=00:05:00:22」となる。
【0265】
OUT2点が設定されるピクチャのデコードに続けて(「TC=00:05:00:22」において)、図19の第11行目および第12行目の記述に従って、「TC=00:00:01:03」から「TC=00:00:01:14」まで(GOP(o)のIN3点が設定されているピクチャから、GOP(o)の最後のピクチャまで)が、例えば、デコーダ1551によりデコードされる。
【0266】
図21の範囲A2は、その範囲にあるピクチャ(IN3点が設定されているピクチャより時間的に前にある表示されないピクチャ)が、IN3点が設定されているピクチャのデコードに先行して、デコーダ1551によりデコードされていることを示している。
【0267】
なお、クリップ#1の再生開始位置を基準とした場合、GOP(o)の最後は、OUT2点が設定されている「TC=00:05:00:22」に、ブリッジエッセンスのGOP(o)のIN3点からOUT3点までの期間(「00:00:00:11」)を加えた「TC=00:05:00:33」となる。
【0268】
ブリッジエッセンスのデコードに続けて(「TC=00:05:00:33」において)、図19の第14行目および第15行目の記述に従って、クリップ#3の「TC=00:10:00:00」から(GOP(o+1)の最初のピクチャから)、それ以降の所定のピクチャまでが、例えば、デコーダ1551によりデコードされる。
【0269】
以上のようにしてデコードが行われ、それぞれのピクチャがディスプレイ157に表示される。なお、デコードの切り替えに連動して、ディスプレイ157への出力がスイッチャ156により適宜切り換えられる。
【0270】
図22は、ディスプレイ157の表示について示す図である。
【0271】
図22に示されるように、図19のプレイリストに従ってブリッジエッセンスを参照してデコードを行うことで、或いは、編集点が設定されているピクチャに応じて、そのピクチャを表示する前の所定の位置からデコードを開始することで、それにより表示される映像は、リアルタイム性が保証されたものとなる。
【0272】
すなわち、図22に示されるように、クリップ#1、クリップ#3、ブリッジエッセンスのうちの再生対象とされている非破壊編集結果のピクチャ(図16の白抜き矢印の範囲にあるピクチャ)が、途切れることなく連続して表示されることになる。
【0273】
以上のディスク装置1と再生装置101の処理により、編集者であるユーザは、編集結果である画像データのリアルタイム再生が可能であるか否かを意識することなく、編集を行うことが可能となる。
【0274】
また、ブリッジエッセンスの作成においては、デコードや再エンコードなどが行われていないため、ブリッジエッセンスが参照されて表示される映像の画質が劣化することを防止することができる。
【0275】
図23は、ディスク装置1の他の構成例を示すブロック図である。図23において、図2と同一の構成については、同一の符号を付してあり、その説明を適宜省略する。
【0276】
図23のディスク装置1においては、付加情報作成部27に、デコーダ選択部201が設けられている点が、図2のディスク装置1と異なる。
【0277】
デコーダ選択部201は、制御部22を介してブリッジエッセンス作成部26から供給されるブリッジエッセンスに関する情報、制御部22から供給されるピクチャポインタ、再生装置101のデコーダの数などの機器情報等に基づいて、付加情報であるデコーダ指定情報を作成し、それをプレイリスト作成部28に供給する。
【0278】
すなわち、上述した例においては、画像データの再生時に、その前処理として、再生装置101自身が、デコーダを選択するとしたが(図20のステップS34)、この例においては、ディスク装置1により、デコードを行うデコーダが予め選択され、デコーダを指定する情報がプレイリストに含まれる。
【0279】
これにより、再生装置101は、画像データの再生時に、その前処理としてのデコーダの選択を行うことなく、迅速に、再生処理を開始することが可能となる。
【0280】
また、ブリッジエッセンスが作成された場合、そのブリッジエッセンスを構成するGOPは、ブリッジエッセンスを構成するGOPとして再配置される前に構成していたクリップをデコードするものと、同一のデコーダによりデコードされることが好ましい。
【0281】
例えば、図21に示されるブリッジエッセンスを構成するGOP(m+2)は、ブリッジエッセンスを構成するGOPとして再配置される前に構成していた、クリップ#1をデコードするデコーダ1551によりデコードされるのが好ましい。なぜなら、GOP(m+1)の最後のピクチャと、GOP(m+2)の最初のピクチャは、本来、連続する映像を構成するものであるところ、それぞれ、異なるデコーダによりデコードされることにより、デコーダの切り換え点において、映像の連続性が失われることがあるためである。
【0282】
従って、ブリッジエッセンスを作成する機器であるディスク装置1により作成されたデコーダの指定情報を含むプレイリストに従って、画像データ(ブリッジエッセンス)をデコードすることで、画質の劣化を防止することができる。
【0283】
プレイリスト作成部28は、デコーダ選択部201から供給されるデコーダ指定情報に基づいて、デコーダを指定するコードを含むプレイリストを作成する。作成されたプレイリストは、光ディスク52に記録され、再生装置101に提供される。
【0284】
図24は、再生装置101の他の構成例を示すブロック図である。
【0285】
図24の再生装置101は、図23のディスク装置1により作成されたプレイリストに従って画像データの再生を行う。
【0286】
図23のディスク装置1により作成されたプレイリストには、デコーダを指定する情報も含まれているため、再生装置101は、画像データの再生時に、そのデコードを行うデコーダを選択する必要がない。従って、図24の再生装置101には、図6とは異なり、デコードスケジューリング部123にデコーダ選択部133が含まれていない。
【0287】
図24の再生装置101の他の構成は、図6の構成と同様である。すなわち、ピクチャポインタ読み出し部131から供給されるプレイリストとピクチャポインタに基づいて、デコードスケジューリング部123により、デコードのスケジューリングが行われ、そのスケジューリング結果がデコード制御部124に出力される。図6と同一の他の構成については、その説明を省略する。
【0288】
次に、図25のフローチャートを参照して、図23のディスク装置1により行われるデコーダ指定情報の付加処理について説明する。
【0289】
この処理は、図12および図13を参照して説明したプレイリスト作成処理における、ステップS12、すなわち、ステップS11において、プレイリストを作成するために、付加情報が必要であると判定された場合に行われる。
【0290】
プレイリスト作成部28から付加情報が必要であることが指示されたとき、デコーダ選択部201は、ステップS51において、1つのクリップを構成する全てのGOPが、同じデコーダによってデコードされるように、各クリップをデコードするデコーダを選択する。
【0291】
デコーダの選択結果であるデコーダ指定情報は、プレイリスト作成部28に出力される。
【0292】
ステップS52において、プレイリスト作成部28は、デコーダ選択部201から供給されてくるデコーダ指定情報に基づいて、デコーダを指定する情報を、図12のステップ10で作成したプレイリストに付加する。
【0293】
図26は、図25の処理により、デコーダを指定する情報が付加されたプレイリストの例を示す図である。
【0294】
図26のプレイリストは、第6行目、第10行目、第13行目、第16行目、および、第19行目に、デコーダを指定する記述が付加されている点を除いて、図19のプレイリストと同様である。
【0295】
なお、図26においては、デコーダを指定する記述である「decoder="0"」は、その記述が付加されるクリップ#1のデコードを、再生装置101の2つのデコーダのうちのデコーダ1551により行うことを指定し、「decoder="1"」は、デコーダ1552により行うことを指定する。
【0296】
図26の第6行目の「decoder="0"」は、第4行目および第5行目のコードにより指定されるクリップ#1の「TC=00:00:00:00」から「TC=00:05:00:00」までを、デコーダ1551によりデコードすることを指定する。
【0297】
第10行目の「decoder="0"」は、第8行目および第9行目のコードにより指定されるブリッジエッセンスの「TC=00:00:00:00」から「TC=00:00:00:12」までを、デコーダ1551によりデコードすることを指定する。
【0298】
第13行目の「decoder="1"」は、第11行目および第12行目のコードにより指定されるブリッジエッセンスの「TC=00:00:00:17」から「TC=00:00:00:27」までを、デコーダ1552によりデコードすることを指定する。
【0299】
第16行目の「decoder="0"」は、第14行目および第15行目のコードにより指定されるブリッジエッセンスの「TC=00:00:01:03」から「TC=00:00:01:14」までを、デコーダ1551によりデコードすることを指定する。
【0300】
第19行目の「decoder="0"」は、第18行目および第19行目のコードにより指定されるクリップ#3の「TC=00:10:00:15」からそれ以降を、デコーダ1551によりデコードすることを指定する。
【0301】
このように、デコーダを指定する情報(記述)がプレイリスト中に予め含められ、図24の再生装置101に提供される。
【0302】
次に、図27のフローチャートを参照して、デコーダを指定する情報が付加されたプレイリストに従って、図24の再生装置101により行われる再生処理について説明する。
【0303】
図27の処理は、デコードを選択する処理(図20のステップS34に対応する処理)が省略されている点を除いて、基本的には、図20の処理と同様である。すなわち、ステップS66において、デコーダ制御部124は、プレイリストの記述に基づいてデコーダを切り換え、画像データの再生(デコード)を行う。図27の他の処理は、上述した処理と同様であるため、その詳細な説明は省略する。
【0304】
なお、図26のプレイリストが記録された光ディスク52が装着された場合、プレイリストとともに光ディスク52に記録された画像データは、図24の再生装置101により、図21に示されるようにしてデコーダが切り換えられ、デコードされる。
【0305】
このように、デコーダを指定する情報がプレイリストに含まれている場合、図20の処理では行われていたデコーダを選択する前処理は、図24の再生装置101においては行われない。従って、画像データの再生を、より迅速に、開始させることが可能となる。
【0306】
また、再生装置101において行われる再生のリアルタイム性を保証することができる。
【0307】
さらに、映像の連続性を考慮したデコーダの切り換えが可能となり、画質を向上させることも可能となる。
【0308】
以上においては、「decoder="0"」または「decoder="1"」のプレイリスト中の記述により、デコーダが指定されるとしたが、再生装置101にさらに多数の(3以上の)デコーダが用意されている場合、「decoder="00"」,「decoder="01"」,・・・などのように、2ビットで、或いは、それ以上のビットでデコーダが指定されるようにしてもよい。
【0309】
図28は、ディスク装置1のさらに他の構成例を示すブロック図である。図28において、図2と同一の構成については、同一の符号を付してあり、その説明を適宜省略する。
【0310】
図28のディスク装置1においては、付加情報作成部27に、デコードスケジューリング部211が設けられている点が、図2のディスク装置1と異なる。
【0311】
デコードスケジューリング部211は、付加情報として、デコード開始位置等を表わすスケジュール情報を作成し、それをプレイリスト作成部28に供給する。すなわち、図6の再生装置101においては、画像データの再生時に、その前処理として、デコードのスケジューリングと、デコードの選択が行われるとしたが(図20のステップS33,S34)、この例においては、ディスク装置1により、スケジューリングが予め行われ、スケジュール情報がプレイリストに含まれる。
【0312】
これにより、再生装置101は、画像データの再生時に、その前処理としてのデコードのスケジューリングを行うことなく、迅速に、再生処理を開始することが可能となる。また、その再生は、リアルタイム性が保証されたものとなる。
【0313】
また、デコードスケジューリング部211は、デコードの終了位置を表すスケジュール情報を作成し、それをプレイリスト作成部28に供給する。上述したように、Long GOPで符号化する場合、あるピクチャのデコードの前にデコードしておく必要がある、表示されないピクチャがあることから、表示開始位置とデコード開始位置にずれが生じることがあるのと同様に、OUT点の位置によっては(OUT点が設定されているピクチャのタイプによっては)、表示終了位置とデコード終了位置にもずれが生じることがある。従って、デコードスケジューリング部211は、そのデコード終了位置を表す情報もプレイリストに記述されるようにスケジューリングを行い、作成したスケジュール情報をプレイリスト作成部28に供給する。
【0314】
デコードスケジューリング部211は、制御部22から供給される、エディトリスト、ブリッジエッセンスに関する情報、ピクチャポインタ、再生装置101のデコーダの数などの機器情報等に基づいて、デコードのスケジューリングを行う。
【0315】
図8、図9等を参照して説明したように、デコードスケジューリング部211は、編集点が設定されているピクチャを、制御部22から供給されるエディトリストから検出し、そのピクチャタイプを、ピクチャポインタから取得する。また、デコードスケジューリング部211は、編集点(IN点)が設定されているピクチャに応じて、編集点が設定されているピクチャをデコードする前にデコードしておく必要があるピクチャの数を検出し、デコード開始位置およびデコード開始時刻を決定する。
【0316】
デコードスケジューリング部211により決定されたスケジューリング結果であるスケジュール情報は、プレイリスト作成部28に出力される。
【0317】
プレイリスト作成部28は、スケジュール情報に基づいて、デコード開始位置(デコーダの切り換え位置)を指定する情報を、例えば、「decBegin」という名前の属性情報(Attribute)でプレイリストに含める。また、プレイリスト作成部28は、必要に応じて、編集点が設定されているピクチャのデコードの前にデコードしておく必要のあるI,Pピクチャの数を表わす情報を、例えば、「preDecDur」という名前の属性情報でプレイリストに含める。
【0318】
さらに、プレイリスト作成部28は、スケジュール情報に基づいて、デコード終了位置を指定する情報を、例えば、「decEnd」という名前の属性情報でプレイリストに含める。また、プレイリスト作成部28は、必要に応じて、OUT点が設定されているピクチャをデコードするためにデコードする必要がある、表示順では、そのピクチャより後方にあるピクチャの数を表す情報を、例えば、「postDecDur」という名前の属性情報でプレイリストに含める。
【0319】
図29は、再生装置101のさらに他の構成例を示すブロック図である。
【0320】
図29の再生装置101は、図28のディスク装置1により作成されたプレイリストに従って画像データを再生する。
【0321】
図28のディスク装置1により作成されたプレイリストには、デコード開始位置とデコード終了位置を指定する属性情報が含まれているため、再生装置101において、画像データの再生時の前処理として、デコードのスケジューリングを行う必要がない。従って、図29の再生装置101には、図6の再生装置101とは異なり、デコードスケジューリング部123と、デコードスケジューリング部123内のデコーダ選択部133が含まれていない。
【0322】
図29の再生装置101の他の構成は、図6の再生装置101の構成と同様である。すなわち、ピクチャポインタ読み出し部131から供給されるプレイリストとピクチャポインタに基づいて、デコーダ制御部124によりデコードが制御され、画像データのデコードが行われる。例えば、デコーダ制御部124は、preDecDur Attributeの値が1以上であるとき、すなわち、表示しないが、予めデコードしておく必要のあるピクチャがあるとき、そのときデコードを行っていないデコーダによりデコードが行われるようにデコーダを切り換える。図6と同一の他の構成については、その説明を省略する。
【0323】
次に、図30のフローチャートを参照して、図28のディスク装置1により行われる属性情報の付加処理について説明する。
【0324】
図30の処理も、図25の処理と同様に、図13のステップS11において、プレイリストを作成するための付加情報が必要であると判定された場合に行われる。
【0325】
プレイリスト作成部28から付加情報が必要であることが指示されたとき、デコードスケジューリング部211は、ステップS81において、各デコーダによるデコード開始位置とデコード終了位置をスケジューリングする。すなわち、ここでは、図8および図9等を参照して説明したスケジューリングが行われ、デコード開始位置が求められる。
【0326】
また、デコードスケジューリング部211は、OUT点が設定されているピクチャのピクチャタイプから、そのOUT点が設定されているピクチャをデコードする前に、表示はされないがデコードしておく必要がある他のピクチャがあると判定した場合、その、他のピクチャの数だけOUT点の位置から後方の位置をデコード終了位置とする。
【0327】
具体的には、OUT点が設定されているピクチャがBピクチャである場合、そのBピクチャをデコードするためには、表示順では後方にあるため、表示されることのない、1つのIピクチャ、または、1つのPピクチャをデコードする必要があり、その1つのピクチャの分だけ、OUT点の位置から表示順で後方の位置がデコード終了位置とされる。一方、OUT点が設定されているピクチャがIピクチャまたはPピクチャである場合、そのピクチャをデコードするために予めデコードしなければならない、表示されないピクチャはないことから、OUT点の位置とデコード終了位置は同じ位置になる。
【0328】
また、以上のことから、プレイリストに含まれる、他のピクチャをデコードするためにデコードする必要があるピクチャの数を表す情報であるpostDecDur Attributeの値は、OUT点が設定されているピクチャがBピクチャである場合には「1」となり、IピクチャまたはPピクチャである場合には「0」となる。
【0329】
図31は、OUT点が設定されているピクチャと、postDecDur Attributeの値の対応を示す図である。
【0330】
図31に示されるように、OUT点が設定されているピクチャがB1またはB2である場合、それをデコードする前に、表示されないI3(図の「()」内に示されるピクチャ)をデコードする必要があるため、postDecDur Attributeの値は「1」となる。
【0331】
OUT点が設定されているピクチャがI3である場合、それをデコードする前にデコードする必要がある、表示されないピクチャはないため、postDecDur Attributeの値は「0」となる。
【0332】
OUT点が設定されているピクチャがB4,B5である場合、それをデコードする前に、表示されないP6をデコードする必要があるため、postDecDur Attributeの値は「1」となる。
【0333】
OUT点が設定されているピクチャがP6である場合、それをデコードする前にデコードする必要がある、表示されないピクチャはないため、postDecDur Attributeの値は「0」となる。
【0334】
OUT点が設定されているピクチャがB7,B8である場合、それをデコードする前に、表示されないP9をデコードする必要があるため、postDecDur Attributeの値は「1」となる。
【0335】
OUT点が設定されているピクチャがP9である場合、それをデコードする前にデコードする必要がある、表示されないピクチャはないため、postDecDur Attributeの値は「0」となる。
【0336】
OUT点が設定されているピクチャがB10,B11である場合、それをデコードする前に、表示されないP12をデコードする必要があるため、postDecDur Attributeの値は「1」となる。
【0337】
OUT点が設定されているピクチャがP12である場合、それをデコードする前にデコードする必要がある、表示されないピクチャはないため、postDecDur Attributeの値は「0」となる。
【0338】
OUT点が設定されているピクチャがB13,B14である場合、それをデコードする前に、表示されないP15をデコードする必要があるため、postDecDur Attributeの値は「1」となる。
【0339】
OUT点が設定されているピクチャがP15である場合、それをデコードする前にデコードする必要がある、表示されないピクチャはないため、postDecDur Attributeの値は「0」となる。
【0340】
ステップS82において、プレイリスト作成部28は、デコードスケジューリング部211から供給されたスケジュール情報に基づいて、デコード開始位置を表す属性情報であるdecBegin Attribute、デコード終了位置を表す属性情報であるdecEnd Attributeを、図13のステップ10で作成したプレイリストに付加し、付加情報を含むプレイリストを作成する。
【0341】
図32は、デコード開始位置を表す属性情報とデコード終了位置を表す属性情報が付加されたプレイリストの例を示す図である。また、図32に示されるプレイリストには、編集点が設定されているピクチャのデコードの前に、デコードしておく必要のあるI,Pピクチャの数を表わす属性情報であるpreDecDur Attribute、および、postDecDur Attributeも含まれている。preDecDur Attributeの値(ピクチャの数)は、図8より求まり、postDecDur Attributeの値は図31より求まる。
【0342】
図32のプレイリストは、第11行目および第12行目、並びに、第15行目および第16行目に、decBegin Attribute,preDecDur Attribute,decEnd Attribute,postDecDur Attributeが付加されている点、および、デコーダを指定する情報が含まれていない点を除いて、図26のプレイリストと同様である。
【0343】
すなわち、第11行目の「decBegin="smpte=00:00:00:15"」は、第9行目および第10行目のコードにより指定されるブリッジエッセンスのデコードを、「TC=00:00:00:15」において開始することを指示する。また、「preDecDur ="1"」は、「TC=00:00:00:17」で表示すべきピクチャをデコードするために、予めデコードしておく必要があるI,Pピクチャの数が「1」であることを表している。
【0344】
この属性情報に基づいて「TC=00:00:00:15」からデコードを開始することで、再生装置101は、「TC=00:00:00:17」になったときに表示すべきブリッジエッセンスのピクチャを、リアルタイム再生することができる。
【0345】
なお、decBegin Attributeで指定される「TC=00:00:00:15」からのデコードは、それまでに、第7行目および第8行目のコードで指定されるブリッジエッセンスのデコードを行っていたデコーダと異なるデコーダにより行われる。上述したように、preDecDur Attributeの値が1以上である場合、デコーダが切り換えられる。
【0346】
第11行目の「decEnd="smpte=00:00:00:28"」は、第9行目および第10行目のコードにより指定されるブリッジエッセンスのデコードを、「TC=00:00:00:28」まで行うことを指示する。すなわち、この例においては、OUT点が設定されているピクチャがBピクチャであり、その位置(clipEnd="smpte=00:00:00:27")と、デコードの終了位置(decEnd="smpte=00:00:00:28")にずれが生じている。
【0347】
第12行目の「postDecDur="1"」は、OUT点が設定されているピクチャをデコードする前にデコードする必要がある、表示されないピクチャが1つあることを表している。
【0348】
同様に、第15行目の「decBegin="00:00:01:00"」は、第13行目および第14行目のコードにより指定されるブリッジエッセンスのデコードを、「TC=00:00:01:00」において開始することを指示する。また、「preDecDur ="2"」は、「TC=00:00:01:03」で表示すべきピクチャをデコードするために、予めデコードしておく必要があるI,Pピクチャの数が「2」であることを表している。
【0349】
この属性情報に基づいて「TC=00:00:01:00」からデコードを開始することで、再生装置101は、「TC=00:00:01:03」になったときに表示すべきブリッジエッセンスのピクチャを、リアルタイム再生することができる。
【0350】
なお、decBegin Attributeで指定される「TC=00:00:01:00」からのデコードは、それまでに、第9行目および第10行目のコードで指定されるブリッジエッセンスのデコードを行っていたデコーダと異なるデコーダにより行われる。
【0351】
第15行目の「decEnd="smpte=00:00:01:14"」は、第13行目および第14行目のコードにより指定されるブリッジエッセンスのデコードを、「TC=00:00:01:14」まで行うことを指示する。すなわち、この例においては、OUT点が設定されているピクチャがIピクチャまたはPピクチャであり、その位置(clipEnd="smpte=00:00:01:14")と、デコードの終了位置(decEnd="smpte=00:00:01:14")は同じである。
【0352】
第16行目の「postDecDur="0"」は、OUT点が設定されているピクチャをデコードする前にデコードする必要がある、表示されないピクチャがないことを表している。
【0353】
このように、デコード開始位置およびデコード終了位置を指定する情報がディスク装置1によりプレイリストに予め含められ、図29の再生装置101に提供される。
【0354】
なお、図32にも示されるように、clipBeginとdecBegin、clipEndとdecEndが示す位置関係は、以下のようになる。
decBegin≦clipBegin
clipEnd≦decEnd
【0355】
また、preDecDurとpostDeuDurは、画像データの位置が図32に示されるようにタイムコードで指定される場合、それぞれ、以下のように表される。
preDecDur≦clipBegin-decBegin
postDeuDur≦decEnd-clipEnd
いずれも単位はフレーム数
【0356】
次に、図33のフローチャートを参照して、デコード開始位置およびデコード終了位置を指定する属性情報が付加されたプレイリストに従って、図29の再生装置101により行われる再生処理について説明する。
【0357】
図33の処理は、図20または図27の処理と比較して、デコードのスケジューリング(図20のステップS33、図27のステップS63に対応する処理)が省略されている点が異なる。
【0358】
また、図33の処理においては、ステップS95で再生(デコード)が開始された後、ステップS96において、そのとき参照しているプレイリストのコードのpreDecDur Attributeの値が1以上であるか否かが、デコーダ制御部124により判定される。
【0359】
ステップS96において、preDecDur Attributeの値が1以上でないと判定された場合、ステップS98に進み、それ以降、図20を参照して説明した処理と同様の処理が行われる。
【0360】
一方、ステップS96において、preDecDur Attributeの値が1以上であると判定された場合、ステップS97に進み、デコーダ制御部124により、それまでデコードを行っていたデコーダとは異なるデコーダによりデコードが行われる。図33の他の処理は、上述した処理と同様であるため、その詳細な説明は省略する。
【0361】
このように、デコード開始位置および終了位置を表す情報がプレイリストに含まれている場合には、画像データの再生の前処理として、デコードのスケジューリングが再生装置101において行われない。また、preDecDur Attributeの値が1以上であるとき(予めデコードを行う必要があるとき)デコードが切り換えられるようになされているため、デコーダを選択する処理も行われない。
【0362】
以上の処理により、例えば、図32のプレイリストが提供された図29の再生装置101においては、図21を参照して説明したデコードが、デコーダ1551および1552により行われる。
【0363】
すなわち、図21の範囲A1のデコードの開始位置(IN2点が設定されているピクチャをデコードするために予め行っておく必要があるデコードの開始位置)は、図32の第11行目のdecBegin Attributeで指定される「TC=00:00:00:15」である。また、図21の範囲A2のデコードの開始位置(IN3点が設定されているピクチャをデコードするために予め行っておく必要があるデコードの開始位置)は、図32の第15行目のdecBegin Attributeで指定される「TC=00:00:01:00」である。
【0364】
なお、図21に示されるように、図32の第11行目のdecBegin Attributeで指定される「TC=00:00:00:15」からのデコードは、デコーダが切り換えられ、それまで(OUT1点まで)デコードを行っていたデコーダ1551とは異なるデコーダ1552により行われている。また、図32の第15行目のdecBegin Attributeで指定される「TC=00:00:01:00」からのデコードは、デコーダが切り換えられ、それまで(OUT2点まで)デコードを行っていたデコーダ1552とは異なるデコーダ1551により行われている。
【0365】
このように、再生装置101は、画像データの再生時に、その前処理としてのデコードのスケジューリングとデコーダの選択を行うことなく、迅速に、再生処理を開始することが可能となる。また、その再生は、リアルタイム性が保証されたものとなる。
【0366】
また、再生装置101は、プレイリストの記述に従ってデコーダを切り換えればよいため、ディスク装置1によりプレイリストが作成された後に、デコーダの数が増えるなどのハードウェア構成の変更があった場合であっても、それに対応することができる。
【0367】
例えば、図26に示されるようにして、デコーダがディスク装置1により直接指定されているプレイリストが作成された後に、再生装置101のデコーダの数が増えた場合、再生装置101においては、プレイリストで指定されるデコーダと、再生装置101が有するデコーダの対応が取れず、プレイリストに従って、画像データを再生することができなくなる。
【0368】
また、プレイリストの作成時に想定していた数とは異なる数のデコーダを有する機器(再生装置)により再生が行われる場合であっても、その再生装置に、プレイリストに基づく画像データの再生を行わせることができる。
【0369】
従って、ディスク装置1からすれば、様々な構成の機器に汎用のプレイリストを作成することができる。
【0370】
次に、図34のフローチャートを参照して、図28のディスク装置1により行われる他の付加処理について説明する。
【0371】
図34の処理においては、図30の処理と較べて、デコード開始位置や終了位置を指定するdecBegin AttributeやdecEnd Attributeなどの属性情報を含むだけでなく、さらに、ステップS112において、再生装置101が処理可能なファイルアドレスによって参照クリップが指定されるプレイリストが作成される点が異なる。ステップS111の処理は、図30のステップS81の処理と同様である。
【0372】
図35は、図34の処理により作成されたプレイリストの例を示す図である。図35のプレイリストは、基本的には、図32のプレイリストと同様である。
【0373】
図35のプレイリストの第5行目においては、参照するクリップが、図32のプレイリストのようにタイムコードではなく、「clipBegin="faddress=0x00000" clipEnd="faddress=0x002fa"」のようにファイルアドレス(論理アドレス)で指定されている。
【0374】
このファイルアドレスは、図28のプレイリスト作成部28により、制御部22から供給されるピクチャポインタから取得されたものである。
【0375】
同様に、参照するクリップが、第8行目においては、「clipBegin="faddress=0x00000" clipEnd="faddress=0x001bc"」で、第10行目においては、「clipBegin="faddress=0x0045d" clipEnd="faddress=0x0084f"」で、第11行目においては、「decBegin="faddress=0x00421"」で、第14行目においては、「clipBegin="faddress=0x00a01" clipEnd="faddress=0x00df1"」で、第15行目においては、「decBegin="faddress=0x00970""」で、第19行目においては、「clipBegin="faddress=0x00ec0"」で、それぞれ指定されている。
【0376】
また、デコード終了位置は、第12行目においては、「decEnd="faddress=0x00810"」で、第16行目においては、「decEnd="faddress=0x00da0"」で、それぞれ指定されている。ここで、図35においては、図32の場合とは異なり、clipEndで指定される位置(例えば、faddress=0x00df1)より、decEndで指定される位置(例えば、faddress=0x00da0)の方が前方にあるが、これは、ファイルアドレスで位置を指定する場合、画像データのデコードの順に、各ピクチャにファイルアドレスが割り当てられるためである。
【0377】
このように、プレイリストにおいて、参照する範囲をファイルアドレスで指定しておくことにより、プレイリストを取得した図29の再生装置101は、ピクチャポインタから参照クリップのファイルアドレスを取得する、再生時の前処理を省略することができる。すなわち、この場合においても、図29の再生装置101は、より迅速に、再生処理を開始することが可能となる。
【0378】
次に、図36のフローチャートを参照して、図35のプレイリストを取得した図29の再生装置101により行われる再生処理について説明する。
【0379】
図36の処理は、図33の処理と較べて、参照クリップのファイルアドレスをピクチャポインタから取得する処理(図33のステップS93に対応する処理)が省略されている。すなわち、図29のデコーダ制御部124は、ステップS123において、プレイリストに記述されるファイルアドレスに基づいて、アドレス管理部122から参照クリップの物理アドレスを取得する。
【0380】
参照クリップの物理アドレスを取得したデコーダ制御部124は、それ以降の、図33を参照して説明したものと同様の画像データの再生処理を行う。
【0381】
これにより、図29の再生装置101は、デコードのスケジューリング、デコードの選択、ファイルアドレスの取得といった前処理を行うことなく、より迅速に、画像データの再生を開始することができる。また、その再生は、リアルタイム性が保証されたものとなる。
【0382】
以上のように、デコードを指定する情報、デコード開始位置、或いは、デコード終了位置などの様々な属性情報をプレイリストに付加することができる。当然、図37に示されるように、デコードを指定する情報(decoder=”0”,”1”)、デコード終了位置を表す情報(decEnd)などが、組み合わされて付加情報としてプレイリストに記述されるようにしてもよい。
【0383】
以上においては、decEnd AttributeとpostDecDur Attributeの双方がプレイリストに記述されるとしたが、decEnd Attributeのみが記述されている場合でも、そのプレイリストを取得した再生装置101は、postDecDur Attributeの値(1または0)を自ら判断することができる。
【0384】
例えば、図32の第10行目と第11行目に記述されているように、「clipEnd」の値と、「decEnd」の値が異なる場合、再生装置101は、postDecDur Attributeの値を「1」として判断することができ、反対に、第14行目と第15行目に記述されているように、「clipEnd」の値と、「decEnd」の値が同じである場合、再生装置101は、postDecDur Attributeの値を「0」として判断することができる。
【0385】
また、図31を参照して説明したように、OUT点が設定されているピクチャがBピクチャである場合にpostDecDur Attributeの値が「1」になることから、OUT点が設定されているピクチャのピクチャタイプをピクチャポインタから取得し、それに基づいて、postDecDur Attributeの値を判断するようにしてもよい。
【0386】
さらに、decEnd Attributeの値は記述されずに、postDecDur Attributeのみがプレイリストに記述されているようにしてもよい。これによっても、プレイリストを取得した再生装置101は、postDecDur Attributeの値から、OUT点の位置と、デコードの終了位置がずれるか否かを判断することができ、その判断結果に基づいて、デコーダの制御などを行うことができる。すなわち、decEndやpostDecDur Attributeなどは冗長な情報であり、他の情報を参照することで再生装置101が値を判断することができる場合は、それらの情報はなくてもよい。
【0387】
以上においては、ディスク装置1と再生装置101は、それぞれ異なる装置として構成されるとしたが、図38に示されるように、それらの装置が一体的に情報処理装置221として構成されるようにしてもよい。
【0388】
この場合、ディスク装置1により作成されたプレイリストが再生装置101に出力され、再生装置101は、ディスク装置1から供給されてきたプレイリストに従って、画像データをリアルタイム再生することができる。
【0389】
また、以上においては、ディスク装置1により作成されたプレイリストは、光ディスク52に記録されて再生装置101に提供されるとしたが、画像データやピクチャポインタなどとともにネットワークを介して提供されるようにしてもよい。また、プレイリストなどの情報が、フラッシュメモリを内蔵するメモリカード、着脱可能なハードディスク、光カード等のリムーバルメディア70(図5)を介して、再生装置101に提供されるようにしてもよい。
【0390】
さらに、以上においては、再生装置101に、2つのデコーダが設けられる場合について主に説明したが、当然、1つのデコーダが設けられるようにしてもよいし、3つ以上のデコーダが設けられるようにしてもよい。
【0391】
以上においては、1GOPが、ピクチャB1,B2,I3,B4,B5,P6,B7,B8,P9,B10,B11,P12,B13,B14,P15で構成されるものとしたが、当然、本発明は、これ以外の構造のGOPにも適用可能である。
【0392】
また、本発明は、MPEG2以外の、他の予測符号化による画像データを処理する場合にも適用可能である。
【0393】
また、以上においては、光ディスク52に記録された画像データを再生対象としたが、本発明は、光ディスク52以外の、例えば、磁気ディスクや、磁気テープ、半導体メモリ、その他の記録媒体に記録された画像データや、インターネットなどの伝送媒体を介して伝送されてくる画像データを再生する場合にも適用可能である。
【0394】
上述した一連の処理は、ハードウェアにより行うこともできるし、ソフトウェアにより行うこともできる。一連の処理をソフトウェアによって行う場合には、そのソフトウェアを構成するプログラムが、汎用のコンピュータ等にインストールされる。
【0395】
一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば、汎用のパーソナルコンピュータなどに、ネットワークや記録媒体からインストールされる。
【0396】
この記録媒体は、図5に示されるように、装置本体とは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている光ディスク52やリムーバルメディア70などよりなるパッケージメディアにより構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される、プログラムが記録されているROM62や、記憶部68に含まれるハードディスクなどで構成される。
【0397】
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に従って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【0398】
また、プログラムは、1のコンピュータにより処理されるものであっても良いし、複数のコンピュータによって分散処理されるものであっても良い。さらに、プログラムは、遠方のコンピュータに転送されて実行されるものであっても良い。
【0399】
【発明の効果】
本発明によれば、画像データのリアルタイム再生を実行させることがができる。
【0400】
また、本発明によれば、より迅速に、画像データの再生を開始させることができる。
【図面の簡単な説明】
【図1】画像データの再生例について示す図である。
【図2】本発明を適用したディスク装置の構成例を示すブロック図である。
【図3】ブリッジエッセンスの作成例について示す図である。
【図4】エディトリストの例について示す図である。
【図5】ディスク装置の構成例を示すブロック図である。
【図6】本発明を適用した再生装置の構成例を示すブロック図である。
【図7】再生装置の構成例を示すブロック図である。
【図8】デコードのスケジューリングについて示す図である。
【図9】複数のデコーダによるデコードの例について示す図である。
【図10】各ピクチャのNipについて示す図である。
【図11】スケジューリングの条件について示す図である。
【図12】図2のディスク装置により行われるプレイリスト作成処理について説明するフローチャートである。
【図13】図2のディスク装置により行われるプレイリスト作成処理について説明する、図12に続くフローチャートである。
【図14】エディトリストの例を示す図である。
【図15】ピクチャポインタの例を示す図である。
【図16】ブリッジエッセンスの作成例について示す図である。
【図17】ブリッジエッセンスの例を示す図である。
【図18】プレイリストの例を示す図である。
【図19】プレイリストの他の例を示す図である。
【図20】図6の再生装置により行われる再生処理について説明するフローチャートである。
【図21】画像データの再生について示す図である。
【図22】画像データの表示例について示す図である。
【図23】本発明を適用したディスク装置の他の構成例を示すブロック図である。
【図24】本発明を適用した再生装置の他の構成例を示すブロック図である。
【図25】図23のディスク装置により行われる処理について説明するフローチャートである。
【図26】図25の処理により作成されるプレイリストの例を示す図である。
【図27】図24の再生装置により行われる再生処理について説明するフローチャートである。
【図28】本発明を適用したディスク装置のさらに他の構成例を示すブロック図である。
【図29】本発明を適用した再生装置のさらに他の構成例を示すブロック図である。
【図30】図28のディスク装置により行われる処理について説明するフローチャートである。
【図31】 OUT点が設定されているピクチャと、postDecDur Attributeの対応を示す図である。
【図32】図30の処理により作成されるプレイリストの例を示す図である。
【図33】図29の再生装置により行われる処理について説明するフローチャートである。
【図34】図28のディスク装置により行われる他の処理について説明するフローチャートである。
【図35】図34の処理により作成されるプレイリストの例を示す図である。
【図36】図29の再生装置により行われる他の処理について説明するフローチャートである。
【図37】他のプレイリストの例を示す図である。
【図38】情報処理装置の構成例を示すブロック図である。
【符号の説明】
1 ディスク装置, 11 情報処理部, 12 ドライブ, 22 制御部, 24 リアルタイム再生可否判定部, 25 機器情報記憶部, 26 ブリッジエッセンス作成部, 27 付加情報作成部, 28 プレイリスト作成部, 29 ピクチャポインタ作成部, 41 ピクチャポインタ読み出し部,42 エディトリスト読み出し部, 101 再生装置, 111 再生制御部, 112 ドライブ, 121 デコードスケジューリング部, 124 デコーダ制御部, 131 ピクチャポインタ読み出し部, 132 プレイリスト読み出し部

Claims (10)

  1. MPEG方式のビデオデータを再生する再生装置に記録媒体によって提供される情報を作成する情報作成装置において、
    前記ビデオデータに対して設定された開始点と終了点が記述される編集点情報を取得する取得手段と、
    前記終了点が設定される第1のピクチャのデコードの前にデコードしておく必要がある、前記終了点後の第2のピクチャの数を表す情報、前記開始点から前記終了点までを表示させるために必要なデコードの終了位置を表す情報、前記開始点が設定される第3のピクチャのデコードの前にデコードしておく必要がある、前記開始点後の第4のピクチャの数を表す情報、および、前記開始点から表示させるために必要なデコードの開始位置を表す情報を前記編集点情報に基づいて設定し、設定した情報が前記開始点と前記終了点によって設定される各クリップに対応して記述される、前記ビデオデータの再生を制御する再生制御情報を作成する作成手段と、
    前記作成手段により作成された前記再生制御情報を、前記再生制御情報により再生対象とされる前記ビデオデータを構成する各ピクチャに関する情報が記述されることによって作成されたピクチャ情報とともに前記記録媒体に記録させる記録制御手段と
    を備えることを特徴とする情報作成装置。
  2. 前記再生装置は複数のデコーダを含み、複数のデコーダによりデコードされたピクチャのうちのいずれかの出力を行う装置であり、
    前記作成手段は、前記ビデオデータをデコードする前記再生装置のデコーダを指定する情報をさらに含む前記再生制御情報を作成する
    ことを特徴とする請求項1に記載の情報作成装置。
  3. 前記作成手段は、前記ビデオデータの位置を、前記再生装置が処理可能なアドレス情報で指定する前記再生制御情報を作成する
    ことを特徴とする請求項1に記載の情報作成装置。
  4. MPEG方式のビデオデータを再生する再生装置に記録媒体によって提供される情報を作成する情報作成方法において、
    前記ビデオデータに対して設定された開始点と終了点が記述される編集点情報を取得する取得ステップと、
    前記終了点が設定される第1のピクチャのデコードの前にデコードしておく必要がある、前記終了点後の第2のピクチャの数を表す情報、前記開始点から前記終了点までを表示させるために必要なデコードの終了位置を表す情報、前記開始点が設定される第3のピクチャのデコードの前にデコードしておく必要がある、前記開始点後の第4のピクチャの数を表す情報、および、前記開始点から表示させるために必要なデコードの開始位置を表す情報を前記編集点情報に基づいて設定し、設定した情報が前記開始点と前記終了点によって設定される各クリップに対応して記述される、前記ビデオデータの再生を制御する再生制御情報を作成する作成ステップと、
    前記作成ステップの処理により作成された前記再生制御情報を、前記再生制御情報により再生対象とされる前記ビデオデータを構成する各ピクチャに関する情報が記述されることによって作成されたピクチャ情報とともに前記記録媒体に記録させる記録制御ステップと
    を含むことを特徴とする情報作成方法。
  5. MPEG方式のビデオデータを再生する再生装置に記録媒体によって提供される情報を作成する処理をコンピュータに実行させるプログラムにおいて、
    前記ビデオデータに対して設定された開始点と終了点が記述される編集点情報を取得する取得ステップと、
    前記終了点が設定される第1のピクチャのデコードの前にデコードしておく必要がある、前記終了点後の第2のピクチャの数を表す情報、前記開始点から前記終了点までを表示させるために必要なデコードの終了位置を表す情報、前記開始点が設定される第3のピクチャのデコードの前にデコードしておく必要がある、前記開始点後の第4のピクチャの数を表す情報、および、前記開始点から表示させるために必要なデコードの開始位置を表す情報を前記編集点情報に基づいて設定し、設定した情報が前記開始点と前記終了点によって設定される各クリップに対応して記述される、前記ビデオデータの再生を制御する再生制御情報を作成する作成ステップと、
    前記作成ステップの処理により作成された前記再生制御情報を、前記再生制御情報により再生対象とされる前記ビデオデータを構成する各ピクチャに関する情報が記述されることによって作成されたピクチャ情報とともに前記記録媒体に記録させる記録制御ステップと
    を含むことを特徴とするコンピュータが読み取り可能なプログラム。
  6. 記録媒体によって提供される、情報作成装置により作成された情報を取得し、MPEG方式のビデオデータを再生する再生装置において、
    前記ビデオデータに対して設定された開始点と終了点が記述される編集点情報に基づいて前記情報作成装置により設定された情報が記述されることによって作成され、前記記録媒体にあらかじめ記録された再生制御情報を、前記再生制御情報により再生対象とされる前記ビデオデータを構成する各ピクチャに関する情報が記述されることによって作成されたピクチャ情報とともに前記記録媒体から取得する取得手段と、
    前記取得手段により取得された前記再生制御情報に前記開始点と前記終了点によって設定される各クリップに対応して記述される、前記終了点が設定される第1のピクチャのデコードの前にデコードしておく必要がある、前記終了点後の第2のピクチャの数を表す情報、前記開始点から前記終了点までを表示させるために必要なデコードの終了位置を表す情報、前記開始点が設定される第3のピクチャのデコードの前にデコードしておく必要がある、前記開始点後の第4のピクチャの数を表す情報、および、前記開始点から表示させるために必要なデコードの開始位置を表す情報を用いて、対応するクリップを再生する再生手段と
    を備えることを特徴とする再生装置。
  7. 記録媒体によって提供される、情報作成装置により作成された情報を取得し、MPEG方式のビデオデータを再生する再生方法において、
    前記ビデオデータに対して設定された開始点と終了点が記述される編集点情報に基づいて前記情報作成装置により設定された情報が記述されることによって作成され、前記記録媒体にあらかじめ記録された再生制御情報を、前記再生制御情報により再生対象とされる前記ビデオデータを構成する各ピクチャに関する情報が記述されることによって作成されたピクチャ情報とともに前記記録媒体から取得する取得ステップと、
    前記取得ステップの処理により取得された前記再生制御情報に前記開始点と前記終了点によって設定される各クリップに対応して記述される、前記終了点が設定される第1のピクチャのデコードの前にデコードしておく必要がある、前記終了点後の第2のピクチャの数を表す情報、前記開始点から前記終了点までを表示させるために必要なデコードの終了位置を表す情報、前記開始点が設定される第3のピクチャのデコードの前にデコードしておく必要がある、前記開始点後の第4のピクチャの数を表す情報、および、前記開始点から表示させるために必要なデコードの開始位置を表す情報を用いて、対応するクリップを再生する再生ステップと
    を含むことを特徴とする再生方法。
  8. 記録媒体によって提供される、情報作成装置により作成された情報を取得し、MPEG方式のビデオデータを再生する処理をコンピュータに実行させるプログラムにおいて、
    前記ビデオデータに対して設定された開始点と終了点が記述される編集点情報に基づいて前記情報作成装置により設定された情報が記述されることによって作成され、前記記録媒体にあらかじめ記録された再生制御情報を、前記再生制御情報により再生対象とされる前記ビデオデータを構成する各ピクチャに関する情報が記述されることによって作成されたピクチャ情報とともに前記記録媒体から取得する取得ステップと、
    前記取得ステップの処理により取得された前記再生制御情報に前記開始点と前記終了点によって設定される各クリップに対応して記述される、前記終了点が設定される第1のピクチャのデコードの前にデコードしておく必要がある、前記終了点後の第2のピクチャの数を表す情報、前記開始点から前記終了点までを表示させるために必要なデコードの終了位置を表す情報、前記開始点が設定される第3のピクチャのデコードの前にデコードしておく必要がある、前記開始点後の第4のピクチャの数を表す情報、および、前記開始点から表示させるために必要なデコードの開始位置を表す情報を用いて、対応するクリップを再生する再生ステップと
    を含むことを特徴とするコンピュータが読み取り可能なプログラム。
  9. MPEG 方式のビデオデータを再生する再生装置に記録媒体によって提供される情報を作成する情報作成装置において、
    前記ビデオデータに対して設定された開始点と終了点が記述される編集点情報を取得する取得手段と、
    編集点が設定されるピクチャのピクチャタイプと、前記編集点が設定されるピクチャのデコードの前にデコードしておく必要がある前記編集点後のピクチャの数に応じて設定されるデコードの開始位置を表す情報が、前記開始点と前記終了点によって設定される各クリップに対応して記述される、前記ビデオデータの再生を制御する再生制御情報を作成する作成手段と、
    前記作成手段により作成された前記再生制御情報を、前記再生制御情報により再生対象とされる前記ビデオデータを構成する各ピクチャに関する情報が記述されることによって作成されたピクチャ情報とともに前記記録媒体に記録させる記録制御手段と
    を備えることを特徴とする情報作成装置。
  10. 記録媒体によって提供される、情報作成装置により作成された情報を取得し、 MPEG 方式のビデオデータを再生する再生装置において、
    前記ビデオデータに対して設定された開始点と終了点が記述される編集点情報に基づいて前記情報作成装置により設定された情報が記述されることによって作成され、前記記録媒体にあらかじめ記録された再生制御情報を、前記再生制御情報により再生対象とされる前記ビデオデータを構成する各ピクチャに関する情報が記述されることによって作成されたピクチャ情報とともに前記記録媒体から取得する取得手段と、
    前記取得手段により取得された前記再生制御情報に前記開始点と前記終了点によって設定される各クリップに対応して記述される、編集点が設定されるピクチャのピクチャタイプと、前記編集点が設定されるピクチャのデコードの前にデコードしておく必要がある前記編集点後のピクチャの数に応じて設定されるデコードの開始位置を表す情報を用いて、対応するクリップを再生する再生手段と
    を備えることを特徴とする再生装置。
JP2003172791A 2003-06-18 2003-06-18 情報作成装置および方法、再生装置および方法、並びにプログラム Expired - Lifetime JP4096310B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2003172791A JP4096310B2 (ja) 2003-06-18 2003-06-18 情報作成装置および方法、再生装置および方法、並びにプログラム
US10/868,839 US20050008328A1 (en) 2003-06-18 2004-06-17 Information creating apparatus and method, reproducing apparatus, and method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003172791A JP4096310B2 (ja) 2003-06-18 2003-06-18 情報作成装置および方法、再生装置および方法、並びにプログラム

Publications (2)

Publication Number Publication Date
JP2005012390A JP2005012390A (ja) 2005-01-13
JP4096310B2 true JP4096310B2 (ja) 2008-06-04

Family

ID=33562225

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003172791A Expired - Lifetime JP4096310B2 (ja) 2003-06-18 2003-06-18 情報作成装置および方法、再生装置および方法、並びにプログラム

Country Status (2)

Country Link
US (1) US20050008328A1 (ja)
JP (1) JP4096310B2 (ja)

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2348717B1 (en) 2004-07-01 2015-01-28 Mitsubishi Electric Corporation Randomly accessible visual information recording medium and reproducing device
JP2006229592A (ja) * 2005-02-17 2006-08-31 Fujinon Corp コンテンツ作成装置、画像/音声出力装置および制御プログラム
CN101110085B (zh) * 2006-07-21 2010-06-02 索尼株式会社 再现装置、再现方法
JP4573130B2 (ja) * 2006-07-21 2010-11-04 ソニー株式会社 再生装置、記録媒体、再生方法及び再生プログラム
US8706775B2 (en) * 2006-10-30 2014-04-22 Gvbb Holdings S.A.R.L. Editing device and editing method using metadata
JP4807250B2 (ja) * 2006-12-27 2011-11-02 株式会社日立製作所 記録方法
JP4946426B2 (ja) * 2006-12-27 2012-06-06 株式会社日立製作所 記録方法
JP4591549B2 (ja) * 2008-06-05 2010-12-01 ソニー株式会社 再生処理装置、および再生処理方法、並びにプログラム
JP5671949B2 (ja) * 2010-11-04 2015-02-18 ソニー株式会社 情報処理装置、および情報記録媒体、並びに情報処理方法
US9578370B2 (en) 2012-03-26 2017-02-21 Max Abecassis Second screen locations function
US9609395B2 (en) 2012-03-26 2017-03-28 Max Abecassis Second screen subtitles function
US9576334B2 (en) 2012-03-26 2017-02-21 Max Abecassis Second screen recipes function
US9183884B2 (en) 2013-08-01 2015-11-10 Customplay Llc Downloading video bookmark generating data
US9583147B2 (en) 2012-03-26 2017-02-28 Max Abecassis Second screen shopping function
US9324378B2 (en) * 2013-07-30 2016-04-26 Customplay Llc Synchronizing navigators to play non-sequential segments
US9058846B2 (en) * 2013-07-31 2015-06-16 Customplay Llc Video map synchronizing diagnostic information
US9236093B2 (en) 2013-08-01 2016-01-12 Customplay Llc Video bookmark generating data
TWI548266B (zh) * 2014-06-24 2016-09-01 愛爾達科技股份有限公司 多媒體檔案儲存系統與相關裝置
US9596502B1 (en) 2015-12-21 2017-03-14 Max Abecassis Integration of multiple synchronization methodologies
US9516373B1 (en) 2015-12-21 2016-12-06 Max Abecassis Presets of synchronized second screen functions

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6208805B1 (en) * 1992-02-07 2001-03-27 Max Abecassis Inhibiting a control function from interfering with a playing of a video
US5930446A (en) * 1995-04-08 1999-07-27 Sony Corporation Edition system
US6167083A (en) * 1997-04-04 2000-12-26 Avid Technology, Inc. Computer system and process for capture editing and playback of motion video compressed using interframe and intraframe techniques
GB9813831D0 (en) * 1998-06-27 1998-08-26 Philips Electronics Nv Frame-accurate editing of encoded A/V sequences
CN1253885C (zh) * 1999-09-30 2006-04-26 松下电器产业株式会社 包括***控制器并用于记录和再现信息的装置及方法
US7020381B1 (en) * 1999-11-05 2006-03-28 Matsushita Electric Industrial Co., Ltd. Video editing apparatus and editing method for combining a plurality of image data to generate a series of edited motion video image data
GB0007868D0 (en) * 2000-03-31 2000-05-17 Koninkl Philips Electronics Nv Methods and apparatus for editing digital video recordings and recordings made by such methods

Also Published As

Publication number Publication date
US20050008328A1 (en) 2005-01-13
JP2005012390A (ja) 2005-01-13

Similar Documents

Publication Publication Date Title
JP4096310B2 (ja) 情報作成装置および方法、再生装置および方法、並びにプログラム
JP4286660B2 (ja) 順次走査フレーム構造フォーマットで記録されたビデオ表示のための再生速度の変更
JP4684319B2 (ja) データ記録方法、データ編集方法およびデータ復号方法、並びにその装置、及び記録媒体
US9015583B2 (en) Editing apparatus and an editing method
US20060029364A1 (en) Digital video stream trick play
JP2004297441A (ja) 情報作成装置および方法、再生装置および方法、並びにプログラム
JPH10162560A (ja) 映像編集方法、及びノンリニア映像編集装置
US20060031767A1 (en) Information recording and reproducing device
JP4583738B2 (ja) 復号装置、および復号制御方法、情報処理装置、および情報処理方法、記録媒体、並びにプログラム
KR20070095904A (ko) 오디오-비주얼 스트림들의 프레임 정밀 편집을 위한 방법및 장치
JPWO2004102561A1 (ja) コンテンツ記録再生装置および方法
US8086089B2 (en) Recording apparatus
JP4784466B2 (ja) 映像情報再生方法
WO2004112390A1 (ja) 情報処理装置および方法、記録媒体、並びにプログラム
JP2003168283A (ja) データ編集方法およびデータ記録媒体
JP4217545B2 (ja) データ処理方法
JP4322216B2 (ja) データ記録方法
JP2000201319A (ja) ディジタル信号の記録再生装置及びそれを使用したディジタル信号の倍速再生方法

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070117

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070123

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070326

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070425

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070621

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070824

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20071019

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20071116

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080111

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080215

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080228

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110321

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120321

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130321

Year of fee payment: 5