JP2000354241A - Image decoder - Google Patents

Abstract

PROBLEM TO BE SOLVED: To prevent a displayed field from missing and a PTS synchronization image output operation from disturbing at a stream switching position in the case of decoding an image with a different frame or field frequency. SOLUTION: A decoding means 40 decodes a 1st bit stream encoding an image with a frame frequency and detects new input of a 2nd bit stream resulting from encoding an image with a different frame frequency. In this case, a mode transition detection means 12 outputs mode transition information to a 1st sequencer 8. A control means 41 sets a decoding start time of a prescribed number of frames from the top on the basis of a frame frequency of the 1st bit stream in the case of decoding the 2nd bit stream depending on the mode transition information.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【０００１】[0001]

【発明の属する技術分野】本発明は、ディジタル放送信
号を受信するセットトップボックスなどに内蔵され、選
択されたビデオストリームから動画を復号化して表示す
るＭＰＥＧ２ビデオデコーダなどの画像復号化装置に関
するものである。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image decoding apparatus such as an MPEG2 video decoder built in a set-top box for receiving a digital broadcast signal and decoding and displaying a moving image from a selected video stream. is there.

【０００２】[0002]

【従来の技術】従来の画像復号化装置として、多数チャ
ンネルの番組が多重化されたディジタル衛星放送からデ
ータを受信し、画像復号化を施して動画信号を得る装置
がある。動画を圧縮したビデオ・エレメンタリ・ストリ
ーム（以下、ビデオＥＳという）と、音声を圧縮したオ
ーディオ・エレメンタリ・ストリーム（以下、オーディ
オＥＳという）と、夫々の表示時刻を指定するための時
間情報とを多重化して番組ストリームを作成する。そし
て番組ストリームを多くのチャネル数分に多重化し、デ
ィジタル放送信号を送出する。受信側ではディジタル放
送信号から１つの番組ストリームを選択し、この番組ス
トリームから分離されたビデオＥＳ又はビデオ・パケッ
タイズド・エレメンタリ・ストリーム（以下、ビデオＰ
ＥＳという）を取り出す。そして画像復号化を施し、復
号された動画を表示する。このようなシステムは例え
ば、日経エレクトロニクス（日経ＢＰ社）に、「７０近
くの多チャネルを実現する日本初のディジタル衛星放
送」として、１９９６年９月２日号（１４９頁〜１６４
頁）に紹介されている。2. Description of the Related Art As a conventional image decoding apparatus, there is an apparatus which receives data from a digital satellite broadcast in which programs of many channels are multiplexed and performs image decoding to obtain a moving image signal. A video elementary stream (hereinafter, referred to as video ES) obtained by compressing a moving image and an audio elementary stream (hereinafter referred to as audio ES) obtained by compressing audio are multiplexed with time information for designating respective display times. And create a program stream. Then, the program stream is multiplexed into a number of channels and a digital broadcast signal is transmitted. On the receiving side, one program stream is selected from the digital broadcast signal, and a video ES or a video packetized elementary stream (hereinafter, video P) separated from this program stream is selected.
ES). Then, image decoding is performed, and the decoded moving image is displayed. Such a system is disclosed, for example, to Nikkei Electronics (Nikkei BP) as “Japan's First Digital Satellite Broadcasting Realizing Nearly 70 Multi-Channels”, September 2, 1996 (pp. 149-164).
Page).

【０００３】画像信号の圧縮方式としてＭＰＥＧ２を用
いた場合、圧縮の際に複数の動き予測（以下、ＭＣとい
う）モード及び符号化モードを、画像の特性によって切
り替える。これらのモードの選択結果をヘッダとしてビ
デオＥＳの中に多重して伝送する。画像復号化装置にお
いては、このヘッダの情報を解析し、解析結果に基づい
て内部の動作を切り替える。この技術は、例えば「ビデ
オ圧縮」としてテレビジョン学会誌、Vol.49、No.4、４
３５頁〜４６６頁、（１９９５）に発表されている。When MPEG2 is used as a compression method of an image signal, a plurality of motion prediction (hereinafter, referred to as MC) modes and encoding modes are switched at the time of compression depending on image characteristics. The selection results of these modes are multiplexed and transmitted as a header in the video ES. The image decoding apparatus analyzes the information of the header and switches the internal operation based on the analysis result. This technology is used, for example, in "Video Compression", Journal of the Institute of Television Engineers of Japan, Vol.
Pp. 35-466, (1995).

【０００４】[0004]

【発明が解決しようとする課題】このような、従来の画
像復号化装置においては、夫々の画像フォーマットをそ
れぞれ復号化して出力することは問題なく行うことがで
きる。例えば、現行のテレビ放送の信号で用いられてい
る５９．９４フィールド／秒の飛び越し走査画像（３０
Ｉという）を符号化したビデオＥＳを復号化し、５９．
９４フィールド／秒の飛び越し走査画像として出力する
ことができる。また、２４フレーム／秒の順次走査画像
（２４Ｐという）を符号化したビデオＥＳを復号化し、
２４フレーム／秒の順次走査画像として出力するよう構
成することも可能である。あるいは、５９．９４フレー
ム／秒の順次走査画像（６０Ｐという）を符号化したビ
デオＥＳを復号化し、５９．９４フレーム／秒の順次走
査画像として出力するよう構成することも可能である。In such a conventional image decoding apparatus, decoding and outputting each image format can be performed without any problem. For example, an interlaced scan image (30.94 fields / second) used in current television broadcast signals (30
I) and decode the video ES, and 59.
It can be output as an interlaced scan image of 94 fields / second. Also, the video ES that encodes a progressively scanned image (referred to as 24P) of 24 frames / second is decoded,
It is also possible to configure so as to output as a progressively scanned image of 24 frames / sec. Alternatively, it is also possible to decode the video ES obtained by encoding the progressively scanned image of 59.94 frames / sec (referred to as 60P) and output the decoded video ES as the progressively scanned image of 59.94 frames / sec.

【０００５】しかし、これら３種類のフォーマットのう
ち、いずれかのフォーマットの画像を符号化したビデオ
ＥＳを復号化し、それぞれ元のフォーマットで出力する
ことを、単一の画像復号化装置で行うことを考えると、
問題を生ずる。すなわち、それぞれの画像フォーマット
に対して、少ないメモリで効率的に復号しようとする
と、各フォーマットにおいて夫々異なった内部動作タイ
ミングで復号しなければならない。このため、異なるフ
ォーマットの画像を符号化したビデオＥＳを連続的に復
号した場合、画像フォーマットの切り替わり時点におい
て、特定のフィールド又はフレームの画像が表示され
ず、送信した全ての画像情報を受信できなくなる。また
特定のフィールド又はフレームの画像データが異なる画
像フォーマットで出力されてしまい、正常に表示されな
くなるという問題も生ずる。However, it is required that a single image decoding apparatus decodes a video ES in which an image of one of these three formats is encoded and outputs the decoded video ES in the original format. Thinking,
Cause problems. That is, in order to efficiently decode each image format with a small amount of memory, it is necessary to decode each format at a different internal operation timing. For this reason, when the video ES in which the images of different formats are encoded is continuously decoded, the image of the specific field or frame is not displayed at the time of switching the image format, and all the transmitted image information cannot be received. . In addition, there is also a problem that image data of a specific field or frame is output in a different image format and cannot be displayed normally.

【０００６】本発明は、このような従来の問題点に鑑み
てなされたものであって、入力信号が複数のフォーマッ
トの画像を符号化したビデオＥＳであり、それぞれ元の
フォーマットで表示する場合に、入力画像のフォーマッ
トが切り替わっても、切り替わり時点において正常に表
示できないフィールド又はフレームを生じることなく、
全画像情報を復号できる画像復号化装置を実現すること
を目的とする。[0006] The present invention has been made in view of such a conventional problem. When the input signal is a video ES in which images in a plurality of formats are encoded and each of the video ESs is displayed in the original format, Even if the format of the input image is switched, without causing a field or frame that cannot be displayed normally at the time of switching,
It is an object of the present invention to realize an image decoding device capable of decoding all image information.

【０００７】[0007]

【問題点を解決するための手段】本願の請求項１の発明
は、第１フレーム周波数の順次走査画像が符号化された
第１ビットストリーム、及び前記第１フレーム周波数よ
りも高い第２フレーム周波数の順次走査画像が符号化さ
れた第２ビットストリームを入力し、前記第１ビットス
トリームのデータ及び第２ビットストリームのデータを
復号する復号手段と、前記復号手段により前記第１ビッ
トストリームが復号された後に、前記第２ビットストリ
ームが入力されたことを検出し、モード遷移情報を出力
するモード遷移検出手段と、前記モード遷移検出手段に
よりモード遷移情報が出力されたとき、前記第２ビット
ストリームの先頭から所定数のフレームに対する復号開
始時刻を、前記第１フレーム周波数に基づいて設定し、
前記復号手段の出画動作を制御する制御手段と、を具備
することを特徴とするものである。According to a first aspect of the present invention, there is provided a first bit stream in which a progressively scanned image having a first frame frequency is encoded, and a second frame frequency higher than the first frame frequency. Decoding means for inputting a second bit stream in which the progressive scan image is encoded, decoding the data of the first bit stream and the data of the second bit stream, and decoding the first bit stream by the decoding means. Detecting that the second bit stream has been input and outputting mode transition information; and outputting the mode transition information by the mode transition detecting means, Setting a decoding start time for a predetermined number of frames from the top based on the first frame frequency;
Control means for controlling the image output operation of the decoding means.

【０００８】本願の請求項２の発明は、第１フレーム周
波数の順次走査画像が符号化された第１ビットストリー
ム、及び前記第１フレーム周波数よりも高い第２フレー
ム周波数の順次走査画像が符号化された第２ビットスト
リームを入力し、前記第１ビットストリームのデータ及
び第２ビットストリームのデータを復号する復号手段
と、前記復号手段により前記第２ビットストリームが復
号された後に、前記第１ビットストリームが入力された
ことを検出し、モード遷移情報を出力するモード遷移検
出手段と、前記モード遷移検出手段によりモード遷移情
報が出力されたとき、前記第１ビットストリームの先頭
から所定数のフレームに対する復号開始時刻を、前記第
２フレーム周波数に基づいて設定し、かつ前記第１ビッ
トストリームの先頭から２番目のフレームに対する復号
開始時刻を、前記第２フレーム周波数における１垂直期
間以上遅らせ、前記復号手段の出画動作を制御する制御
手段と、具備することを特徴とするものである。According to a second aspect of the present invention, a first bit stream in which a progressively scanned image of a first frame frequency is encoded and a progressively scanned image of a second frame frequency higher than the first frame frequency are encoded. Decoding means for inputting the second bit stream, and decoding the data of the first bit stream and the data of the second bit stream; and the first bit after the second bit stream is decoded by the decoding means. A mode transition detecting means for detecting that a stream has been input, and outputting mode transition information; and when the mode transition information is outputted by the mode transition detecting means, a predetermined number of frames from the head of the first bit stream are output. A decoding start time is set based on the second frame frequency, and a start time of the first bit stream is set. The decoding start time for et second frame, delayed by one vertical period or more in the second frame frequency, and control means for controlling the image output operation of the decoding means, is characterized in that it comprises.

【０００９】本願の請求項３の発明は、第１フレーム周
波数の順次走査画像が符号化された第１ビットストリー
ム、又は前記第１フレーム周波数より高い第２フレーム
周波数の順次走査画像が符号化された第２ビットストリ
ームのいずれかと、前記第２フレーム周波数と同一値の
第３フィールド周波数の飛び越し走査画像が符号化され
た第３ビットストリームを入力し、前記第１ビットスト
リームのデータ又は前記第２ビットストリームのデー
タ、及び第３ビットストリームのデータを復号する復号
手段と、前記復号手段により前記第１ビットストリーム
のデータ又は前記第２ビットストリームのデータを復号
した後に、前記第３ビットストリームが入力されたこと
を検出し、モード遷移情報を出力するモード遷移検出手
段と、前記モード遷移検出手段によりモード遷移情報が
出力されたとき、前記第３ビットストリームの先頭から
所定数のフレームに対する復号開始時刻を、前記第１の
フレーム周波数又は前記第２のフレーム周波数に基づい
て設定し、かつ前記第３ビットストリーム先頭から３番
目のフレームに対する復号開始時刻を、前記第３フィー
ルド周波数における２垂直期間以上遅らせ、前記復号手
段の出画動作を制御する制御手段と、具備することを特
徴とするものである。According to a third aspect of the present invention, a first bit stream in which a progressively scanned image of a first frame frequency is encoded or a progressively scanned image of a second frame frequency higher than the first frame frequency is encoded. And a third bit stream in which an interlaced scan image of a third field frequency having the same value as the second frame frequency is encoded, and the data of the first bit stream or the second bit stream is input. Decoding means for decoding the data of the bit stream and the data of the third bit stream; and after decoding the data of the first bit stream or the data of the second bit stream by the decoding means, the third bit stream is inputted. Mode transition detecting means for detecting that the mode transition has been performed and outputting mode transition information; When the mode transition information is output by the detecting means, a decoding start time for a predetermined number of frames from the head of the third bit stream is set based on the first frame frequency or the second frame frequency, and Control means for delaying the decoding start time for the third frame from the head of the third bit stream by at least two vertical periods at the third field frequency, and controlling the image output operation of the decoding means. Things.

【００１０】本願の請求項４の発明は、請求項３の画像
復号化装置において、前記第３ビットストリームは、ボ
トム・フィールドがトップ・フィールドよりも先に符号
化されたボトム・フィールド・ファーストのビットスト
リームであり、前記制御手段は、前記第３ビットストリ
ームにおける先頭フレーム及び２番目のフレームのデー
タを、前記トップ・フィールド・ファーストのビットス
トリームを復号する場合と同一タイミングで復号開始す
ると共に、前記第３ビットストリームにおける３番目の
フレームの復号開始時刻を第３フィールド周波数におけ
る１垂直期間以上遅らせ、３番目以降のフレームのデー
タを前記ボトム・フィールド・ファーストのビットスト
リームを復号する場合のタイミングで復号開始する機能
を付加したことを特徴とするものである。According to a fourth aspect of the present invention, in the image decoding apparatus according to the third aspect, the third bit stream is a bottom field first in which a bottom field is coded before a top field. A bit stream, wherein the control means starts decoding data of a first frame and a second frame of the third bit stream at the same timing as when decoding the top field first bit stream, The decoding start time of the third frame in the third bit stream is delayed by one vertical period or more at the third field frequency, and the data of the third and subsequent frames are decoded at the timing when the bottom field first bit stream is decoded. That we added the function to start It is an butterfly.

【００１１】本願の請求項５の発明は、第１フレーム周
波数の順次走査画像が符号化された第１ビットストリー
ム、及び前記第１フレーム周波数よりも高い第３フィー
ルド周波数の飛び越し走査画像が符号化された第３ビッ
トストリームを入力し、前記第１ビットストリームのデ
ータ及び前記第３ビットストリームのデータを復号する
復号手段と、前記復号手段により前記第３ビットストリ
ームを復号した後に前記第１ビットストリームが入力さ
れたことを検出し、モード遷移情報を出力するモード遷
移検出手段と、前記モード遷移検出手段によりモード遷
移情報が出力されたとき、前記第１ビットストリームの
先頭から所定数のフレームに対する復号開始時刻を、前
記第３フィールド周波数に基づいて設定し、かつ先頭か
ら２番目以降のフレームに対する復号開始時刻を、前記
第３のフィールド周波数のトップ・フィールドの復号時
刻に設定すると共に、このフレームの復号開始時刻を第
３のフィールド周波数における２垂直期間以上遅らせ、
前記復号手段の出画動作を制御する制御手段と、具備す
ることを特徴とするものである。According to a fifth aspect of the present invention, a first bit stream in which a progressively scanned image at a first frame frequency is encoded and an interlaced scanned image at a third field frequency higher than the first frame frequency are encoded. Decoding means for inputting the obtained third bit stream and decoding the data of the first bit stream and the data of the third bit stream; and the first bit stream after decoding the third bit stream by the decoding means. And a mode transition detecting means for detecting that the first bit stream has been inputted and outputting mode transition information. When the mode transition information is outputted by the mode transition detecting means, decoding of a predetermined number of frames from the head of the first bit stream is performed. The start time is set based on the third field frequency, and the second and subsequent frames from the top are set. The decoding start time for the over-time, delaying the addition to set the third field decoding time of the top field frequency, two vertical periods or a decoding start time of the frame in the third field frequency,
Control means for controlling the image output operation of the decoding means.

【００１２】本願の請求項６の発明は、第２フレーム周
波数の順次走査画像が符号化された第２ビットストリー
ム、及び前記第２フレーム周波数と同一である第３フィ
ールド周波数の飛び越し走査画像が符号化された第３ビ
ットストリームを入力し、前記第２ビットストリームの
データ及び前記第３ビットストリームのデータを復号す
る復号手段と、前記復号手段によりトップ・フィールド
・ファーストの前記第３ビットストリームを復号した後
に前記第２ビットストリームが入力されたことを検出
し、モード遷移情報を出力するモード遷移検出手段と、
前記モード遷移検出手段によりモード遷移情報が出力さ
れたとき、前記第２ビットストリームの先頭から所定数
のフレームに対する復号開始時刻を、前記第３フィール
ド周波数におけるトップ・フィールドの復号時刻に設定
し、前記復号手段の出画動作を制御する制御手段と、具
備することを特徴とするものである。According to a sixth aspect of the present invention, a second bit stream in which a progressively scanned image of a second frame frequency is encoded and an interlaced scanned image of a third field frequency which is the same as the second frame frequency are encoded. Decoding means for receiving the converted third bit stream, decoding the data of the second bit stream and the data of the third bit stream, and decoding the third bit stream of top field first by the decoding means A mode transition detecting means for detecting that the second bit stream has been input and outputting mode transition information;
When mode transition information is output by the mode transition detecting means, a decoding start time for a predetermined number of frames from the beginning of the second bit stream is set to a top field decoding time at the third field frequency; And a control means for controlling the image output operation of the decoding means.

【００１３】本願の請求項７の発明は、第２フレーム周
波数の順次走査画像が符号化された第２ビットストリー
ム、及び前記第２フレーム周波数と同一である第３フィ
ールド周波数の飛び越し走査画像が符号化された第３ビ
ットストリームを入力し、前記第２ビットストリームの
データ及び前記第３ビットストリームのデータを復号す
る復号手段と、前記復号手段によりボトム・フィールド
・ファーストの前記第３ビットストリームのデータを復
号した後に、前記第２ビットストリームが入力されたこ
とを検出し、モード遷移情報を出力するモード遷移検出
手段と、前記モード遷移検出手段によりモード遷移情報
が出力されたとき、前記第２ビットストリームの先頭か
ら所定数のフレームに対する復号開始時刻を、前記第３
のフィールド周波数におけるボトム・フィールドの復号
時刻に設定し、前記復号手段の出画動作を制御する制御
手段と、具備することを特徴とするものである。According to a seventh aspect of the present invention, a second bit stream in which a progressively scanned image of a second frame frequency is encoded and an interlaced scanned image of a third field frequency which is the same as the second frame frequency are encoded. Decoding means for receiving the converted third bit stream and decoding the data of the second bit stream and the data of the third bit stream; and the bottom field first data of the third bit stream by the decoding means. After decoding, the mode transition detecting means for detecting that the second bit stream is input and outputting mode transition information; and when the mode transition information is output by the mode transition detecting means, the second bit The decoding start time for a predetermined number of frames from the head of the stream is determined by the third
And control means for setting the decoding time of the bottom field at the field frequency of, and controlling the image output operation of the decoding means.

【００１４】本願の請求項８の発明は、請求項１〜７の
いずれか１項の画像復号化装置において、前記制御手段
は、前記モード遷移検出手段からモード遷移情報が出力
されてからの所定数のフレームについて、表示タイムス
タンプに基づいて出力画像を基準時刻に同期させる動作
を停止する機能を付加したことを特徴とするものであ
る。According to an eighth aspect of the present invention, in the image decoding apparatus according to any one of the first to seventh aspects, the control means includes: For a number of frames, a function of stopping the operation of synchronizing the output image with the reference time based on the display time stamp is added.

【００１５】本願の請求項９の発明は、請求項１〜８の
いずれか１項の画像復号化装置において、前記第１のフ
レーム周波数は２４Ｈｚであり、前記第２のフレーム周
波数及び前記第３のフィールド周波数は夫々５９．９４
Ｈｚ又は６０Ｈｚであることを特徴とするものである。According to a ninth aspect of the present invention, in the image decoding apparatus according to any one of the first to eighth aspects, the first frame frequency is 24 Hz, the second frame frequency and the third Have a field frequency of 59.94, respectively.
Hz or 60 Hz.

【００１６】[0016]

【発明の実施の形態】以下、本発明の各実施の形態にお
ける画像復号化装置について、図面を参照しながら説明
する。DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, an image decoding apparatus according to each embodiment of the present invention will be described with reference to the drawings.

【００１７】（実施の形態）図１は本発明の実施の形態
における画像復号化装置の構成を示すブロック図であ
る。この画像復号化装置は、入力端子３０，３１、ＥＳ
分離手段１、ストリームバッファメモリ２、可変長復号
手段３、逆量子化手段４、逆ＤＣＴ手段５、加算手段
６、ヘッダ解析手段７、第１のシーケンサ８、動き補償
手段９、第１のフレームメモリ１０、第２のフレームメ
モリ１１、モード遷移検出手段１２、復号タイミング生
成手段１４、第２のシーケンサ２０、表示用メモリ２
１、出力端子２３、表示画像選択手段２４を含んで構成
される。ここで上の破線部は復号手段４０の機能を有
し、下の破線部は制御手段４１の機能を有している。(Embodiment) FIG. 1 is a block diagram showing a configuration of an image decoding apparatus according to an embodiment of the present invention. The image decoding apparatus includes input terminals 30, 31, ES,
Separation means 1, stream buffer memory 2, variable length decoding means 3, inverse quantization means 4, inverse DCT means 5, addition means 6, header analysis means 7, first sequencer 8, motion compensation means 9, first frame Memory 10, second frame memory 11, mode transition detecting means 12, decoding timing generating means 14, second sequencer 20, display memory 2
1, an output terminal 23 and a display image selecting means 24. Here, the upper broken line portion has the function of the decoding means 40, and the lower broken line portion has the function of the control means 41.

【００１８】復号手段４０は、第１フレーム周波数の順
次走査画像が符号化された第１ビットストリーム、第１
フレーム周波数よりも高い第２フレーム周波数の順次走
査画像が符号化された第２ビットストリーム、第２フレ
ーム周波数と同一値の第３フィールド周波数の飛び越し
走査画像が符号化された第３ビットストリームのいずれ
かが入力されたとき、入力されたビットストリームのデ
ータを復号するものである。ｉ，ｊ，ｋを互いに重複し
ない１〜３のいずれかの数とするとき、モード遷移検出
手段１２は、復号手段４０により第ｉ，ｊ，ｋのいずれ
か１つのビットストリームが復号された後に、第ｉ，
ｊ，ｋのいずれか他の１つのビットストリームが入力さ
れたことを検出し、モード遷移情報を出力するものであ
る。The decoding means 40 comprises: a first bit stream in which a progressively scanned image of a first frame frequency is encoded;
Either a second bit stream in which a progressive scan image of a second frame frequency higher than the frame frequency is encoded, or a third bit stream in which an interlaced scan image of a third field frequency having the same value as the second frame frequency is encoded When this is input, the data of the input bit stream is decoded. When i, j, and k are any of numbers 1 to 3 that do not overlap with each other, the mode transition detection unit 12 performs the decoding after the decoding unit 40 decodes any one of the i, j, and k bit streams. , I,
It detects that one other bit stream of j or k has been input, and outputs mode transition information.

【００１９】制御手段４１は、モード遷移検出手段１２
によりモード遷移情報が出力されたとき、第ｉ，ｊ，ｋ
のいずれか他のビットストリームの先頭から所定数のフ
レームに対する復号開始時刻を、第ｉ，ｊ，ｋのいずれ
か１つのビットストリームのフレーム周波数に基づいて
設定し、復号手段４０の出画動作を制御するものであ
る。以下の説明では、第１のフレーム周波数を２４Ｈｚ
とし、第２のフレーム周波数を６０Ｈｚとし、第３のフ
ィールド周波数を５９．９４Ｈｚとする。The control means 41 includes a mode transition detecting means 12
When the mode transition information is output from the i, j, k
The decoding start time for a predetermined number of frames from the head of any of the other bit streams is set based on the frame frequency of any one of the i, j, and k bit streams, and the output operation of the decoding means 40 is performed. To control. In the following description, the first frame frequency is set to 24 Hz.
The second frame frequency is 60 Hz, and the third field frequency is 59.94 Hz.

【００２０】入力端子３０からビデオＰＥＳが入力され
ると、このビデオＰＥＳはＥＳ分離手段１でビデオＥＳ
のみが分離されて、ストリームバッファメモリ２に一時
蓄積される。また、ＥＳ分離手段１はビデオＰＥＳから
ＰＴＳを抜き取り、ＰＴＳを第１のシーケンサ８に出力
する。When a video PES is input from the input terminal 30, the video PES is converted by the ES separating means 1 into a video ES.
Are separated and temporarily stored in the stream buffer memory 2. The ES separation means 1 extracts the PTS from the video PES and outputs the PTS to the first sequencer 8.

【００２１】ストリームバッファメモリ２に蓄積された
ビデオＥＳは、可変長復号手段３に出力される。可変長
復号手段３は、ＭＰＥＧ規格により可変長符号化された
ビデオＥＳを復号し、量子化ＤＣＴ係数データを逆量子
化手段４に出力すると共に、必要な情報をヘッダ解析手
段７に出力する。逆量子化手段４は、量子化ＤＣＴ係数
データを逆量子化してＤＣＴ係数データに変換し、逆Ｄ
ＣＴ手段５に出力する。逆ＤＣＴ手段５は、ＤＣＴ係数
データを逆ＤＣＴ処理して差分画像データに変換し、加
算手段６に出力する。加算手段６は、差分画像データを
動き予測データと加算して復号画像データに変換して出
力する。The video ES stored in the stream buffer memory 2 is output to the variable length decoding means 3. The variable length decoding unit 3 decodes the video ES that has been subjected to the variable length encoding according to the MPEG standard, outputs the quantized DCT coefficient data to the inverse quantization unit 4, and outputs necessary information to the header analysis unit 7. The inverse quantization means 4 inversely quantizes the quantized DCT coefficient data and converts it into DCT coefficient data.
Output to CT means 5. The inverse DCT unit 5 performs an inverse DCT process on the DCT coefficient data, converts the data into differential image data, and outputs the difference image data to the adding unit 6. The adding means 6 adds the difference image data to the motion prediction data, converts the data into decoded image data, and outputs the decoded image data.

【００２２】復号タイミング生成手段１４は垂直同期信
号１０３を生成して、第１のシーケンサ８及び第２のシ
ーケンサ２０に与えると共に、第１の復号開始信号７５
０及び第２の復号開始信号７５１を生成して、第１のシ
ーケンサ８に与えるものである。第１の復号開始信号７
５０は順次走査画像のフレームの復号開始時刻、又は飛
び越し走査画像のトップ・フィールドの復号開始時刻を
示す信号である。第２の復号開始信号７５１は飛び越し
走査画像のボトム・フィールドの復号開始時刻を示す信
号である。また、モード遷移検出手段１２はモード遷移
情報を第１のシーケンサ８に与えるものである。The decoding timing generating means 14 generates the vertical synchronizing signal 103 and supplies it to the first sequencer 8 and the second sequencer 20, and the first decoding start signal 75
0 and a second decoding start signal 751 are generated and supplied to the first sequencer 8. First decoding start signal 7
A signal 50 indicates the decoding start time of the frame of the progressive scan image or the decoding start time of the top field of the interlaced scan image. The second decoding start signal 751 is a signal indicating the decoding start time of the bottom field of the interlaced scan image. The mode transition detecting means 12 provides mode transition information to the first sequencer 8.

【００２３】加算手段６から出力された復号画像データ
は、第２のシーケンサ２０の制御により、第１のフレー
ムメモリ１０、第２のフレームメモリ１１、表示用メモ
リ２１のうちで、最適なメモリに記憶される。即ち、動
き補償の際に参照画像として用いられるフレーム内符号
化画像（以下、Ｉピクチャという）又はフレーム間順方
向予測符号化画像（以下、Ｐピクチャという）の復号画
像データは、第１のフレームメモリ１０又は第２のフレ
ームメモリ１１に記憶されると共に、動き補償（以下、
ＭＣという）を行う動き補償手段９に入力されて、動き
予測データに変換される。参照画像として用いられない
フレーム間双方向予測符号化画像（以下、Ｂピクチャと
いう）の復号画像データは、表示用メモリ２１に記憶さ
れる。Under the control of the second sequencer 20, the decoded image data output from the adding means 6 is converted into an optimum memory among the first frame memory 10, the second frame memory 11, and the display memory 21. It is memorized. That is, decoded image data of an intra-frame coded image (hereinafter, referred to as an I picture) or an inter-frame forward prediction coded image (hereinafter, referred to as a P picture) used as a reference image in motion compensation is a first frame. While being stored in the memory 10 or the second frame memory 11, motion compensation (hereinafter, referred to as
MC) and is converted into motion prediction data. Decoded image data of an inter-frame bidirectional predictive encoded image (hereinafter, referred to as a B picture) that is not used as a reference image is stored in the display memory 21.

【００２４】表示画像選択手段２４は、第２のシーケン
サ２０の制御により、第１のフレームメモリ１０、第２
のフレームメモリ１１、表示用メモリ２１に記憶された
復号画像データのうち、適切なフレームデータを順次読
み出して出力端子２３に出力する。The display image selecting means 24 controls the first frame memory 10, the second frame
Among the decoded image data stored in the frame memory 11 and the display memory 21, appropriate frame data is sequentially read and output to the output terminal 23.

【００２５】なお本実施の形態においては、第１のフレ
ームメモリ１０及び第２のフレームメモリ１１は、それ
ぞれ１フレーム分のメモリからなり、Ｉピクチャ又はＰ
ピクチャを記憶する。記憶された復号画像データは、続
くＰピクチャ又はＢピクチャの復号をする際に、動き予
測データを作成用として用いられる。しかしＢピクチャ
は他のピクチャの処理に用いられないため、加算手段６
から出力されると、直接表示用メモリ２１に一時記憶さ
れる。そしてすぐに読み出されて表示画像選択手段２４
に出力される。従って、表示用メモリ２１は１フレーム
分のメモリを必要とせず、メモリ容量を削減することが
できる。In the present embodiment, each of the first frame memory 10 and the second frame memory 11 is a memory for one frame, and is composed of an I picture or a P picture.
Store the picture. The stored decoded image data is used for creating motion prediction data when decoding a subsequent P picture or B picture. However, since the B picture is not used for processing other pictures, the adding means 6
Is temporarily stored in the direct display memory 21. Then, it is read out immediately and displayed image selecting means 24
Is output to Therefore, the display memory 21 does not require a memory for one frame, and the memory capacity can be reduced.

【００２６】ヘッダ解析手段７では、ビデオストリーム
に多重されたヘッダ情報から、フレームレートなどの原
画の画像フォーマット、動き予測モード、ＤＣＴモー
ド、動きベクトルなどの付加情報を解析し、解析結果を
逆量子化手段４、逆ＤＣＴ手段５、動き補償手段９、及
びモード遷移検出手段１２に出力する。モード遷移検出
手段１２は、ヘッダ解析手段７からのヘッダ情報のう
ち、必要なものを第１のシーケンサ８に出力すると同時
に、入力されたビデオＥＳの画像フォーマットの切り替
わりを検出して、これをモード遷移情報として第１のシ
ーケンサ８に出力する。第１のシーケンサ８は、モード
遷移検出手段１２からのヘッダ情報、モード遷移情報、
及び復号タイミング生成手段１４からのタイミング信号
に基づき、可変長復号手段３、逆量子化手段４、逆ＤＣ
Ｔ手段５、動き補償手段９、及び第２のシーケンサ２０
に対して制御信号を出力し、復号及び表示動作の制御を
行う。The header analysis means 7 analyzes the image information of the original picture such as the frame rate, additional information such as the motion prediction mode, the DCT mode, and the motion vector from the header information multiplexed in the video stream, and converts the analysis result into the inverse quantum Output to the converting means 4, the inverse DCT means 5, the motion compensating means 9, and the mode transition detecting means 12. The mode transition detection means 12 outputs necessary header information from the header analysis means 7 to the first sequencer 8 and, at the same time, detects a change in the image format of the input video ES, and outputs this to the mode. The transition information is output to the first sequencer 8. The first sequencer 8 includes header information, mode transition information from the mode transition detecting unit 12,
And the variable length decoding means 3, the inverse quantization means 4, the inverse DC
T means 5, motion compensation means 9, and second sequencer 20
To output a control signal to control decoding and display operations.

【００２７】また、第１のシーケンサ８は、入力端子３
１を介して入力されるＰＣＲと、ＥＳ分離手段１から入
力されたＰＴＳとを用いて、復号画像の表示タイミング
がＰＴＳで指定されたタイミングになるように、可変長
復号手段３、逆量子化手段４、逆ＤＣＴ手段５、ヘッダ
解析手段７、動き補償手段９、及び第２のシーケンサ２
０を制御する。従って、復号後の映像は、ＰＣＲから再
生したシステムの基準時間（以下、ＳＴＣという）と同
期して出力端子２３から出力される。図１には示してい
ないが、音声の復号化装置もＰＣＲを入力し、ＰＣＲか
ら再生したＳＴＣと音声データのＰＴＳを同期させて、
復号後の音声を出力する。これにより、ＳＴＣを介し
て、映像と音声との同期が実現される。The first sequencer 8 has an input terminal 3
The variable-length decoding means 3 uses the PCR input via the PTS 1 and the PTS input from the ES separation means 1 so that the display timing of the decoded image becomes the timing specified by the PTS, Means 4, inverse DCT means 5, header analysis means 7, motion compensation means 9, and second sequencer 2
Control 0. Therefore, the decoded video is output from the output terminal 23 in synchronization with the reference time (hereinafter, referred to as STC) of the system reproduced from the PCR. Although not shown in FIG. 1, the audio decoding device also inputs the PCR, synchronizes the STC reproduced from the PCR with the PTS of the audio data,
Outputs the decoded audio. As a result, synchronization between video and audio is realized via the STC.

【００２８】復号タイミング生成手段１４は、第１のシ
ーケンサ８からの制御により、第１の復号開始信号７５
０及び第２の復号開始信号７５１を生成し、第１のシー
ケンサ８に出力する。また、復号タイミング生成手段１
４は垂直同期信号１０３を生成し、第２のシーケンサ２
０に出力する。The decoding timing generating means 14 controls the first decoding start signal 75 under the control of the first sequencer 8.
0 and a second decoding start signal 751 are generated and output to the first sequencer 8. Also, the decoding timing generating means 1
4 generates a vertical synchronizing signal 103 and outputs the second sequencer 2
Output to 0.

【００２９】本実施の形態の画像復号化装置において、
入力信号が２４フレーム／秒の順次走査画像（２４Ｐ画
像）を符号化したビデオＥＳから、５９．９４フレーム
／秒の順次走査画像（６０Ｐ画像）を符号化したビデオ
ＥＳへ切り替わったときの動作タイミングチャートを図
２に示す。図２において（ａ）は復号区間２０１、
（ｂ）は第１の復号開始信号７５０、（ｃ）は第２の復
号開始信号７５１、（ｄ）は垂直同期信号１０３、
（ｅ）は表示区間２０２を示す。また図中のＩはイント
ラ符号化されたフレームを示し、Ｐは前方向予測符号化
されたフレームを示し、Ｂは双方向予測符号化されたフ
レームを示し、Ｉ，Ｐ，Ｂに続く数字は画像番号を示
す。In the image decoding apparatus according to the present embodiment,
Operation timing when the input signal switches from a video ES encoding a progressively scanned image (24P image) of 24 frames / sec to a video ES encoding a progressively scanned image (60P image) of 59.94 frames / sec. The chart is shown in FIG. 2A shows a decoding section 201,
(B) is a first decoding start signal 750, (c) is a second decoding start signal 751, (d) is a vertical synchronization signal 103,
(E) shows the display section 202. In the figure, I indicates an intra-coded frame, P indicates a frame subjected to forward predictive coding, B indicates a frame subjected to bidirectional predictive coding, and numbers following I, P, and B indicate Indicates the image number.

【００３０】なお、図２においては、当初入力されてい
るビデオＥＳに符号化されている画像も、切り替わり後
のビデオＥＳに符号化されている画像も、共に順次走査
画像であるため、飛び越し走査画像のボトム・フィール
ドの復号開始を示す第２の復号開始信号７５１は全く出
力されず、Ｈレベルのままである。In FIG. 2, since both the image encoded in the initially input video ES and the image encoded in the video ES after the switching are sequentially scanned images, the interlaced scanning is performed. The second decoding start signal 751 indicating the start of decoding the bottom field of the image is not output at all and remains at the H level.

【００３１】図１において、モード遷移検出手段１２
は、２４Ｐ画像を符号化したビデオＥＳから、図２のタ
イミング２０７に示すように６０Ｐ画像を符号化したビ
デオＥＳへ切り替わった最初のフレームＩ０を検出し
て、このモード遷移情報を第１のシーケンサ８に出力す
る。第１のシーケンサ８はこのモード遷移情報を受け取
ると、２番目のフレームＰ３は６０Ｐ画像であるにも関
わらず、フレームＰ３の復号が２４Ｐ画像に合ったタイ
ミングで開始されるように、復号タイミング生成手段１
４を制御し、第１の復号開始信号７５０を図２のタイミ
ング２０３で発生する。図２（ｄ）に示すように、次の
タイミング２０４における垂直同期信号１０３以降は、
垂直同期信号１０３の周波数を２４Ｈｚから５９．９４
Ｈｚに切り替える。また３番目のフレームＢ１以降の復
号動作に対応して、図２のタイミング２０５以降は、６
０Ｐ画像の復号に合ったタイミングで第１の復号開始信
号７５０を出力する。このような制御を行うことによ
り、２４Ｐ画像の最後のフレームＰ２９を、図２（ｅ）
に示すように、２４Ｈｚの垂直同期信号１０３に同期し
たタイミングで正常に画像を表示することができる。In FIG. 1, the mode transition detecting means 12
Detects the first frame I0 at which the video ES encoding the 24P image is switched to the video ES encoding the 60P image as shown at timing 207 in FIG. 2, and transmits the mode transition information to the first sequencer. 8 is output. When receiving the mode transition information, the first sequencer 8 generates a decoding timing so that the decoding of the frame P3 is started at a timing suitable for the 24P image even though the second frame P3 is a 60P image. Means 1
4 to generate the first decoding start signal 750 at the timing 203 in FIG. As shown in FIG. 2D, after the vertical synchronization signal 103 at the next timing 204,
The frequency of the vertical synchronization signal 103 is increased from 24 Hz to 59.94.
Hz. In addition, corresponding to the decoding operation of the third frame B1 and thereafter, the timing 205 and subsequent timings of FIG.
The first decoding start signal 750 is output at a timing suitable for decoding the 0P image. By performing such control, the last frame P29 of the 24P image is changed to the state shown in FIG.
As shown in (5), an image can be displayed normally at a timing synchronized with the vertical synchronization signal 103 of 24 Hz.

【００３２】前記のような制御は、モード遷移情報を判
別して、２４Ｐ画像から６０Ｐ画像への切り替わりであ
れば、復号タイミング生成手段１４でのモード切り替え
を１垂直同期期間だけ遅らせることで実現できる。復号
タイミング生成手段１４において、２４Ｐ画像に合った
タイミング信号を出力するモード（以下、２４Ｐモード
という）から、６０Ｐ画像に合ったタイミング信号を出
力するモード（以下、６０Ｐモードという）に切り替え
る際に、従来の画像復号化装置のように、入力されたス
トリームのヘッダ情報を解析して直ちに切り替えた場合
は、図２（ｄ）に示すタイミング２０６で６０Ｐモード
に切り替わってしまう。しかし本実施の形態において
は、これを１垂直同期期間だけ遅らせ、図２（ｄ）のタ
イミング２０４までは２４Ｐモードで動作させ、タイミ
ング２０４から６０Ｐモードに切り替える。The control as described above can be realized by discriminating the mode transition information and delaying the mode switching by the decoding timing generation means 14 by one vertical synchronization period if the switching is from the 24P image to the 60P image. . When the decoding timing generating means 14 switches from a mode for outputting a timing signal suitable for a 24P image (hereinafter referred to as a 24P mode) to a mode for outputting a timing signal suitable for a 60P image (hereinafter referred to as a 60P mode), When the header information of the input stream is analyzed and switched immediately, as in the conventional image decoding apparatus, the mode is switched to the 60P mode at the timing 206 shown in FIG. However, in the present embodiment, this is delayed by one vertical synchronization period, the operation is performed in the 24P mode until the timing 204 in FIG. 2D, and the mode is switched from the timing 204 to the 60P mode.

【００３３】上記のような制御を実現するための第１の
シーケンサ８及び復号タイミング生成手段１４の構成例
を図３に示す。図３の上部実線で示す第１のシーケンサ
８は、第１のプロセッサ３００、割り込みコントローラ
３０１、ＳＴＣ再生手段３０８、入力端子３１０，３１
１，３１２，３１３，３１５，３１６，３２６、出力端
子３１４，３２０，３２１，３２２，３２３，３２４，
３２５を含んで構成される。図３の下部実線で示す復号
タイミング生成手段１４は、レジスタ３０３を有する第
２のプロセッサ３０２、第１のデコーダ３０４、第２の
デコーダ３０５、第３のデコーダ３０６、マスタカウン
タ３０７、入力端子３３０、出力端子３３１，３３２，
３３３を含んで構成される。FIG. 3 shows a configuration example of the first sequencer 8 and the decoding timing generation means 14 for realizing the above control. The first sequencer 8 shown by the upper solid line in FIG. 3 includes a first processor 300, an interrupt controller 301, STC reproducing means 308, and input terminals 310 and 31.
1, 312, 313, 315, 316, 326, output terminals 314, 320, 321, 322, 323, 324,
325. The decoding timing generating means 14 indicated by the lower solid line in FIG. 3 includes a second processor 302 having a register 303, a first decoder 304, a second decoder 305, a third decoder 306, a master counter 307, an input terminal 330, Output terminals 331, 332,
333 are included.

【００３４】入力端子３１０にはモード遷移検出手段１
２からヘッダ情報が入力される。入力端子３１１には同
じくモード遷移検出手段１２からモード遷移情報が入力
される。入力端子３１２にはＥＳ分離手段１からＰＴＳ
が入力される。以上の３入力信号は、第１のプロセッサ
３００に与えられる。入力端子３１３（図１の入力端子
３１）にはＰＣＲが入力され、ＳＴＣ再生手段３０８に
与えられる。ＳＴＣ再生手段３０８は、いわゆるＰＬＬ
で構成され、入力されたＰＣＲからＳＴＣを再生して第
１のプロセッサ３００に出力する。The mode transition detecting means 1 is connected to the input terminal 310.
2, header information is input. The mode transition information is input to the input terminal 311 from the mode transition detecting means 12. The input terminal 312 has a PTS
Is entered. The above three input signals are provided to the first processor 300. The PCR is input to the input terminal 313 (the input terminal 31 in FIG. 1) and is supplied to the STC reproducing means 308. The STC reproducing means 308 is a so-called PLL
And reproduces the STC from the input PCR and outputs it to the first processor 300.

【００３５】第１のプロセッサ３００は、出力端子３２
０，３２１，３２２，３２３，３２４を介して、図１の
ヘッダ解析手段７、可変長復号手段３、逆量子化手段
４、逆ＤＣＴ手段５、動き補償手段９に夫々制御信号を
出力する。また図３の出力端子３２５及び入力端子３２
６を介して、図１の第２のシーケンサ２０と制御信号を
やり取りする。これらの制御信号により、復号手段４０
の動作タイミングが制御される。The first processor 300 is connected to the output terminal 32
The control signals are output to the header analysis unit 7, the variable length decoding unit 3, the inverse quantization unit 4, the inverse DCT unit 5, and the motion compensation unit 9 of FIG. 1 via 0, 321, 322, 323, and 324, respectively. The output terminal 325 and the input terminal 32 of FIG.
The control signal is exchanged with the second sequencer 20 of FIG. By these control signals, the decoding means 40
Is controlled.

【００３６】また、第１のプロセッサ３００は、復号タ
イミング生成手段１４の動作モード即ち、６０Ｐ、３０
Ｉ、２４Ｐのいずれかを決定し、出力端子３１４及び入
力端子３３０を介して第２のプロセッサ３０２のレジス
タ３０３に動作モードを書き込む。復号タイミング生成
手段１４は、書き込まれた動作モードに応じて第１の復
号開始信号７５０及び第２の復号開始信号７５１を作成
し、入力端子３１５及び３１６を介して割り込みコント
ローラ３０１に出力する。割り込みコントローラ３０１
は、復号開始信号が入力されたことを割り込みとして第
１のプロセッサ３００に通知し、第１の復号開始信号又
は第２の復号開始信号のいずれの信号が入力されたかの
情報を与える。The first processor 300 operates in the operation mode of the decoding timing generation means 14, ie, 60P, 30P.
I or 24P is determined, and the operation mode is written to the register 303 of the second processor 302 via the output terminal 314 and the input terminal 330. The decoding timing generation means 14 creates a first decoding start signal 750 and a second decoding start signal 751 according to the written operation mode, and outputs the signals to the interrupt controller 301 via the input terminals 315 and 316. Interrupt controller 301
Notifies the first processor 300 of the input of the decoding start signal as an interrupt, and gives information on which of the first decoding start signal and the second decoding start signal has been input.

【００３７】図４及び図５は第１のプロセッサ３００の
動作フロー図である。割り込みコントローラ３０１から
復号開始信号が入力されたことが通知されると、図４の
ステップＳ１０から処理を開始する。そして次に述べる
一通りの処理が終了して図５のステップＳ２４に到達す
ると、第１のプロセッサ３００は信号処理を停止し、次
の割り込みを待つ状態となる。FIGS. 4 and 5 are operation flow charts of the first processor 300. When notified that the decoding start signal has been input from the interrupt controller 301, the processing is started from step S10 in FIG. When one of the processes described below is completed and the process reaches step S24 in FIG. 5, the first processor 300 stops the signal processing and enters a state of waiting for the next interrupt.

【００３８】図２（ａ）における復号区間２０１の夫々
の信号処理は、図５におけるステップＳ２２の画像デー
タのデコードに相当する。即ち図２において、第１の復
号開始信号７５０が発生したとき、第１のプロセッサ３
００は図４のステップＳ１０から処理を開始し、条件が
合えば図５のステップＳ２２においてフレームのデコー
ドを開始する。これが図２の復号区間２０１における各
区間の復号開始時刻にあたる。第１のプロセッサ３００
は、１フレーム分のデコードが終了すると、ステップＳ
２２からステップＳ２４に移行し、次の復号開始信号が
発生するのを待つ。これが図２の復号区間２０１におけ
る各区間の終了時刻にあたる。Each signal processing in the decoding section 201 in FIG. 2A corresponds to the decoding of the image data in step S22 in FIG. That is, in FIG. 2, when the first decoding start signal 750 is generated, the first processor 3
00 starts the processing from step S10 in FIG. 4, and if the conditions are met, starts decoding the frame in step S22 in FIG. This corresponds to the decoding start time of each section in the decoding section 201 of FIG. First processor 300
When decoding of one frame is completed, step S
Then, the process shifts from step S22 to step S24 to wait for the next decoding start signal to be generated. This corresponds to the end time of each section in the decoding section 201 of FIG.

【００３９】本実施の形態の第１のプロセッサ３００
は、モード遷移情報に基づいた制御を行うため、制御を
行う割り込み数をＮとして、Ｎの値を内部変数として持
つ。Ｎは正の整数で、Ｎ＝０のときはモード遷移情報に
基づいた制御を行わず、通常のデコード動作を行うもの
とする。復号開始信号の入力により処理が開始された
後、図４のステップＳ１１でＮ＞０のときはＮをデクリ
メントした後、ステップＳ１２に進む。そしてモード遷
移情報を判定することにより、入力ストリームのフレー
ムレートが変化したか否かを調べる。入力ストリームの
フレームレートが変化していたときは、ステップＳ１３
に分岐し、入力されたモード遷移情報に基づいてモード
遷移時の制御を行う割り込み数Ｎを所定値に設定する。
そして次のステップＳ１４に進んで、モード遷移情報を
内部に記憶する。First processor 300 of the present embodiment
Has the number of interrupts to be controlled as N and the value of N as an internal variable in order to perform control based on mode transition information. N is a positive integer. When N = 0, control based on the mode transition information is not performed and normal decoding operation is performed. After the processing is started by the input of the decoding start signal, if N> 0 in step S11 of FIG. 4, N is decremented, and the process proceeds to step S12. Then, by determining the mode transition information, it is checked whether or not the frame rate of the input stream has changed. If the frame rate of the input stream has changed, the process proceeds to step S13.
The number of interrupts N for performing control at the time of mode transition is set to a predetermined value based on the input mode transition information.
Then, the process proceeds to the next step S14, in which the mode transition information is stored.

【００４０】例えば、図２のタイミング２０７から開始
された処理が、図４のステップＳ１３に進むと、２４Ｐ
モードから６０Ｐモードへの切り替わりであると判定し
て、Ｎ＝２に設定する。これによりステップＳ１４、Ｓ
１５を経てステップＳ１６に進む。図２のタイミング２
０７から開始されるフレームＩ０の復号は、２４Ｐモー
ドから６０Ｐモードへの切り替わるＮ＝２の処理として
識別され、これに対応した処理がステップＳ１６で行わ
れる。まず、第１の復号開始信号７５０のマスクは解除
され、第２の復号開始信号７５１のマスクは設定状態に
される。従って、図５のステップＳ１７に進むと、入力
された復号開始信号に対してマスクが設定されているか
否かが調べられる。現在、第１の復号開始信号７５０に
対するマスクが解除されているので、ステップＳ１８か
らステップＳ２１に進む。For example, if the processing started from the timing 207 in FIG. 2 proceeds to step S13 in FIG.
It is determined that the mode has been switched to the 60P mode, and N = 2 is set. Thereby, steps S14 and S
After that, the process proceeds to step S16. Timing 2 in FIG.
The decoding of the frame I0 starting from 07 is identified as N = 2 processing for switching from the 24P mode to the 60P mode, and the corresponding processing is performed in step S16. First, the mask of the first decoding start signal 750 is released, and the mask of the second decoding start signal 751 is set. Therefore, when the process proceeds to step S17 in FIG. 5, it is checked whether or not a mask has been set for the input decoding start signal. Since the masking of the first decoding start signal 750 has been released at present, the process proceeds from step S18 to step S21.

【００４１】ステップＳ２１で、２４Ｐモードから６０
Ｐモードへの切り替わるＮ＝２の処理において、図２に
示したように表示タイミングは２４Ｐモードになる。こ
のため、２４Ｐモードに対応した表示フレーム情報を第
２のシーケンサ２０に出力し、復号タイミング生成モー
ドとして２４Ｐモードをレジスタ３０３に書き込む。こ
の後ステップＳ２２に進み、フレームＩ０をデコードす
る。In step S21, the mode is changed from 24P mode to 60
In the process of switching to the P mode when N = 2, the display timing becomes the 24P mode as shown in FIG. Therefore, the display frame information corresponding to the 24P mode is output to the second sequencer 20, and the 24P mode is written to the register 303 as the decoding timing generation mode. Thereafter, the flow advances to step S22 to decode the frame I0.

【００４２】第１のプロセッサ３００に次の割り込みが
入力されるタイミング２０３からの処理においては、ス
テップＳ１１でＮの値がデクリメントされる。従って、
図２のタイミング２０３から開始されたフレームＰ３の
復号は、２４Ｐモードから６０Ｐモードへの切り替わる
Ｎ＝１の処理として識別され、これに対応したモード遷
移時の制御が行われる。次の割り込みが発生するタイミ
ング２０５では、Ｎ＝０となり、これ以降は通常のデコ
ード動作になる。In the processing from the timing 203 when the next interrupt is input to the first processor 300, the value of N is decremented in step S11. Therefore,
The decoding of the frame P3 started from the timing 203 in FIG. 2 is identified as the process of N = 1 for switching from the 24P mode to the 60P mode, and the corresponding control at the time of the mode transition is performed. At the timing 205 when the next interrupt occurs, N = 0, and thereafter the normal decoding operation is performed.

【００４３】図２においては、モード遷移の前後がいず
れも順次走査のモードであるため、ステップＳ１７では
常にステップＳ１８に進む判定が行われる。しかし、モ
ード遷移の前後のいずれかが３０Ｉであった場合には、
第１又は第２の復号開始信号を無視するような制御が必
要になる場合がある。このときには、ステップＳ１６で
モード遷移情報とＮの値に基づいてマスクを設定し、そ
の結果としてステップＳ１７からステップＳ２４に処理
を移行することで、必要であれば復号開始信号を無視す
る制御が可能となる。In FIG. 2, since the mode is a sequential scanning mode before and after the mode transition, it is determined in step S17 that the process always proceeds to step S18. However, if any of before and after the mode transition was 30I,
In some cases, control for ignoring the first or second decoding start signal is required. At this time, in step S16, a mask is set based on the mode transition information and the value of N, and as a result, the processing shifts from step S17 to step S24, so that control to ignore the decoding start signal can be performed if necessary. Becomes

【００４４】また、Ｎ＝０となって通常のデコード動作
を行う場合には、図５のステップＳ１９において同期出
画制御の処理が行われる。具体的には、ＳＴＣに対して
ＰＴＳの遅れ又は進みを判定する。同期している場合に
はステップＳ２１を通してステップＳ２２に進み、通常
の画像データのデコードを行う。ステップＳ１９におい
てＰＴＳが遅れていると判定された場合、ステップＳ２
０に進み、入力ストリームを１フレーム分廃棄し、次の
フレームについて通常の画像データのデコードを行う。
この場合、１フレーム分の画像がスキップされ、ＰＴＳ
が進む。この動作をＳＴＣとＰＴＳが同期するまで繰り
返す。When N = 0 and the normal decoding operation is performed, the synchronous output control process is performed in step S19 in FIG. Specifically, the delay or advance of the PTS is determined with respect to the STC. If they are synchronized, the process proceeds to step S22 through step S21, and normal image data is decoded. If it is determined in step S19 that the PTS is late, step S2
The process proceeds to 0, where the input stream is discarded for one frame, and normal image data is decoded for the next frame.
In this case, the image of one frame is skipped and the PTS
Advances. This operation is repeated until the STC and the PTS are synchronized.

【００４５】一方、ステップＳ１９において、ＰＴＳが
進んでいると判定された場合はステップＳ２３に進み、
直前に表示したＩピクチャ又はＰピクチャを再表示し
て、画像のデコードは行わずにステップＳ２４に進み、
次の復号開始信号待ちに入る。こうして１フレーム分の
画像がホールドされ、ＰＴＳの遅延制御により、同期出
画制御が行われる。On the other hand, if it is determined in step S19 that the PTS has advanced, the process proceeds to step S23,
The I picture or the P picture displayed immediately before is displayed again, and the process proceeds to step S24 without decoding the image.
It waits for the next decoding start signal. Thus, an image for one frame is held, and synchronous output control is performed by delay control of the PTS.

【００４６】図３に戻って、第２のプロセッサ３０２
は、レジスタ３０３に書き込まれた動作モード情報に基
づいて、第１のデコーダ３０４、第２のデコーダ３０
５、及び第３のデコーダ３０６を制御し、垂直同期信号
１０３、第１の復号開始信号７５０、第２の復号開始信
号７５１を発生させる。第１のデコーダ３０４、第２の
デコーダ３０５、第３のデコーダ３０６は、夫々プログ
ラマブルなディジタル値デコーダであり、マスタカウン
タ３０７から入力されたカウンタ値をデコードして、Ｌ
ｏｗ（Ｌ）又はＨｉｇｈ（Ｈ）のレベル信号を出力す
る。カウンタ値がいくらのときにＬレベルを出力し、い
くらのときにＨレベルを出力するかは、第２のプロセッ
サ３０２からの設定により変更される。第２のプロセッ
サ３０２は、レジスタ３０３に書き込まれたモード情報
が６０Ｐ、２４Ｐ、３０Ｉのいずれであるかに対応し
て、必要なデコード値を第１のデコーダ３０４、第２の
デコーダ３０５、第３のデコーダ３０６に設定する。Returning to FIG. 3, the second processor 302
Are based on the operation mode information written in the register 303, the first decoder 304, the second decoder 30
5 and the third decoder 306 to generate the vertical synchronization signal 103, the first decoding start signal 750, and the second decoding start signal 751. Each of the first decoder 304, the second decoder 305, and the third decoder 306 is a programmable digital value decoder, and decodes a counter value input from the master counter 307, and
An ow (L) or High (H) level signal is output. The level at which the L level is output and the level at which the H level is output are changed by the setting from the second processor 302. The second processor 302 sets the necessary decode value to the first decoder 304, the second decoder 305, the third decoder 305 according to whether the mode information written in the register 303 is 60P, 24P, or 30I. Is set in the decoder 306.

【００４７】復号タイミング生成手段１４の動作タイミ
ングを図６に示す。図６（ａ）はマスタカウンタ３０７
の内部クロック３７０を示し、図６（ｂ）はマスタカウ
ンタ３０７から出力されるカウンタ値３７１を示す。図
６（ｃ）は第１のデコーダ３０４から出力される垂直同
期信号３７２を示す。図６（ｄ）は第２のデコーダ３０
５から出力される第１の復号開始信号３７３（７５０）
を示し、図６（ｅ）は第３のデコーダ３０６から出力さ
れる第２の復号開始信号３７４（７５１）を示す。尚、
図６は６０Ｐモードに対するタイミング図としている。FIG. 6 shows the operation timing of the decoding timing generation means 14. FIG. 6A shows the master counter 307.
6B shows a counter value 371 output from the master counter 307. FIG. 6C shows the vertical synchronization signal 372 output from the first decoder 304. FIG. 6D shows the second decoder 30.
5, the first decoding start signal 373 (750) output from
FIG. 6E shows the second decoding start signal 374 (751) output from the third decoder 306. still,
FIG. 6 is a timing chart for the 60P mode.

【００４８】図３のマスタカウンタ３０７は、図６
（ａ）に示すように内部で一定周期のクロック３７０を
発生しており、このクロックに合わせて（ｂ）に示すよ
うなカウントアップを行う。このカウンタ値３７１は、
第１のデコーダ３０４、第２のデコーダ３０５、第３の
デコーダ３０６に出力される。第１のデコーダ３０４は
第２のプロセッサの制御により、図６のタイミング３８
０に示すように、カウンタ値が５２５になると、すぐに
Ｌレベルになる。これは図６（ｃ）のタイミング３８４
で示される。The master counter 307 of FIG.
As shown in (a), a clock 370 having a constant period is internally generated, and the count-up as shown in (b) is performed in accordance with this clock. This counter value 371 is
The signals are output to the first decoder 304, the second decoder 305, and the third decoder 306. The first decoder 304 controls the timing 38 in FIG. 6 under the control of the second processor.
As shown by 0, when the counter value reaches 525, it immediately goes to the L level. This is the timing 384 in FIG.
Indicated by

【００４９】マスタカウンタ３０７は第１のデコーダ３
０４の出力する垂直同期信号３７２を入力としており、
垂直同期信号３７２がＬレベルになるエッジを検出する
と、図６（ｂ）のタイミング３８１に示すように、カウ
ンタ値を０にリセットする。この後、マスタカウンタ３
０７はクロック３７０に合わせて０から５２４に向けて
カウントアップする。このカウンタ値が６になったとこ
ろで、第１のデコーダ３０４はＨレベルに遷移し、その
後タイミング３８２で示すようにカウンタ値が５２５に
なるまでＨレベルを保持する。これを繰り返すことによ
り、一定周期で垂直同期信号３７２を発生する。第２の
プロセッサ３０２は、第１のデコーダ３０４がＬレベル
を出力するカウンタ値を５２５から別の値に変更するこ
とで、３０Ｉ及び２４Ｐに対応した垂直同期信号を発生
することができる。The master counter 307 is the first decoder 3
04 receives the vertical synchronization signal 372,
When the edge at which the vertical synchronization signal 372 becomes L level is detected, the counter value is reset to 0 as shown at a timing 381 in FIG. After this, the master counter 3
07 counts up from 0 to 524 in synchronization with the clock 370. When the counter value reaches 6, the first decoder 304 transitions to the H level, and thereafter holds the H level until the counter value reaches 525 as indicated by the timing 382. By repeating this, the vertical synchronization signal 372 is generated at a constant cycle. The second processor 302 can generate a vertical synchronization signal corresponding to 30I and 24P by changing the counter value at which the first decoder 304 outputs the L level from 525 to another value.

【００５０】第２のデコーダ３０５は、図６（ｄ）に示
すように第２のプロセッサ３０２の制御により、カウン
タ値が４００になったときのみＬレベルのパルスを発生
する。これが６０Ｐモードにおける第１の復号開始信号
３８６（７５０）である。第３のデコーダ３０６は、図
６（ｅ）に示すように第２のプロセッサ３０２の制御に
よりパルスを全く発生しない。これらについても、第２
のプロセッサ３０２が、第２のデコーダ３０５及び第３
のデコーダ３０６がＬレベルのパルスを発生するカウン
タ値を設定し直すことで、３０Ｉ及び２４Ｐに対応した
復号開始信号を発生することができる。The second decoder 305 generates an L-level pulse only when the counter value reaches 400 under the control of the second processor 302 as shown in FIG. 6D. This is the first decoding start signal 386 (750) in the 60P mode. The third decoder 306 does not generate any pulse under the control of the second processor 302 as shown in FIG. These are also the second
Of the second decoder 305 and the third
Decoder 306 resets the counter value for generating an L-level pulse, whereby a decoding start signal corresponding to 30I and 24P can be generated.

【００５１】なお、第２のプロセッサ３０２には、第１
のデコーダ３０４から出力された垂直同期信号が入力さ
れており、第１のデコーダ３０４、第２のデコーダ３０
５、及び第３のデコーダ３０６への設定は、垂直同期信
号に同期して行われる。即ち、第１のプロセッサ３００
からレジスタ３０３へのモード情報の書き込みが、図６
のタイミング３８６直後に行われたとしても、書き込ま
れたモード情報は次の垂直同期信号が発生するタイミン
グ３８７になってから反映される。The second processor 302 has the first processor
The vertical synchronization signal output from the decoder 304 is input to the first decoder 304 and the second decoder 30.
5 and the setting to the third decoder 306 are performed in synchronization with the vertical synchronization signal. That is, the first processor 300
The writing of the mode information to the register 303 from FIG.
Even if it is performed immediately after the timing 386, the written mode information is reflected after the timing 387 at which the next vertical synchronizing signal is generated.

【００５２】図２のタイミング２０３から開始されるＰ
３の復号処理においては、図５の動作フローのステップ
Ｓ２１において、２４Ｐモードから６０Ｐモードへの切
り替わるＮ＝１の処理として、レジスタ３０３へは６０
Ｐモードが書き込まれる。しかし、この情報は図２
（ｄ）に示すように、次の垂直同期信号２０４まで反映
されず、それ以前のフレームＰ２９の表示は２４Ｐモー
ドで行われる。図２（ｄ）に示す垂直同期信号２０４で
復号タイミング生成手段１４が６０Ｐモードに切り替わ
るため、これ以降の垂直同期信号１０３、第１の復号開
始信号７５０、及び第２の復号開始信号７５１は６０Ｐ
モードで出力される。P starting from timing 203 in FIG.
In the decoding process of No. 3, in step S21 of the operation flow of FIG. 5, as the process of N = 1 for switching from the 24P mode to the 60P mode, 60
P mode is written. However, this information is not
As shown in (d), the display of the frame P29 before that is not reflected until the next vertical synchronization signal 204 is performed in the 24P mode. Since the decoding timing generation means 14 is switched to the 60P mode by the vertical synchronization signal 204 shown in FIG. 2D, the subsequent vertical synchronization signal 103, the first decoding start signal 750, and the second decoding start signal 751 become 60P mode.
Output in mode.

【００５３】図１に示す本実施の形態の画像復号化装置
において、入力信号が６０Ｐ画像を符号化したビデオＥ
Ｓから、２４Ｐ画像を符号化したビデオＥＳへ切り替わ
ったときの動作タイミングチャートを図７に示す。図７
において各信号のタイムチャートの記載順序は図２と同
様であり、（ａ）は復号区間４０１を示し、（ｅ）は表
示区間４０２を示す。In the image decoding apparatus according to the present embodiment shown in FIG. 1, the input signal is a video E obtained by encoding a 60P image.
FIG. 7 shows an operation timing chart when switching from S to video ES in which a 24P image is encoded. FIG.
2, the description order of the time chart of each signal is the same as that of FIG. 2, (a) shows the decoding section 401, and (e) shows the display section 402.

【００５４】図７（ａ）のタイミング４０６で示すよう
に、図１のモード遷移検出手段１２は、６０Ｐ画像を符
号化したビデオＥＳから、２４Ｐ画像を符号化したビデ
オＥＳへ切り替わった最初のフレームＩ０を検出する
と、このモード遷移情報を第１のシーケンサ８に出力す
る。第１のシーケンサ８はこのモード遷移情報を受け取
ると、Ｎ＝３を設定する。図７（ｂ）のタイミング４０
３に示すように、その次に入力される第１の復号開始信
号７５０を処理する際にはＮ＝２となる。このとき、図
４のステップＳ１６において、６０Ｐから２４Ｐへの遷
移であり、かつＮ＝２であることが検出され、第１の復
号開始信号７５０に対してマスクが設定される。これに
より、タイミング４０３の復号開始信号は無視される。
図７のタイミング４０４に示すように、その次の第１の
復号開始信号７５０では、図４のステップＳ１６におい
て、６０Ｐから２４Ｐへの遷移であり、かつＮ＝１であ
ることが検出され、第１の復号開始信号７５０に対して
マスクが解除される。これにより、２番目のフレームＰ
３の復号が図７のタイミング４０４から開始される。As shown by the timing 406 in FIG. 7A, the mode transition detecting means 12 in FIG. 1 switches the first frame from the video ES encoding the 60P image to the video ES encoding the 24P image. When I0 is detected, this mode transition information is output to the first sequencer 8. Upon receiving this mode transition information, the first sequencer 8 sets N = 3. Timing 40 in FIG. 7B
As shown in FIG. 3, when processing the first decoding start signal 750 input next, N = 2. At this time, in step S16 of FIG. 4, it is detected that the transition is from 60P to 24P and N = 2, and a mask is set for the first decoding start signal 750. As a result, the decoding start signal at the timing 403 is ignored.
As shown in the timing 404 in FIG. 7, in the next first decoding start signal 750, it is detected in step S16 in FIG. 4 that the transition is from 60P to 24P and N = 1. The mask is released for one decoding start signal 750. Thus, the second frame P
3 starts at timing 404 in FIG.

【００５５】また、図７のタイミング４０４で開始され
る処理において、図５のステップＳ２１において、６０
Ｐから２４Ｐへの遷移であり、かつＮ＝１であることが
検出されると、レジスタ３０３に２４Ｐモードで復号タ
イミングを生成するように設定される。この設定は図７
（ｄ）に示すように、直後の垂直同期信号４０５におい
て有効になり、これ以降はＮ＝０であるため、２４Ｐモ
ードで通常のデコードが実行される。In the process started at timing 404 in FIG. 7, in step S21 in FIG.
When it is detected that the transition is from P to 24P and N = 1, the register 303 is set to generate the decoding timing in the 24P mode. This setting is shown in FIG.
As shown in (d), it becomes valid in the immediately following vertical synchronizing signal 405, and since then N = 0, normal decoding is performed in the 24P mode.

【００５６】このような制御を行うことにより、図７
（ｅ）に示す６０Ｐ画像の最後のフレームＰ２９を、５
９．９４Ｈｚの垂直同期信号で正常に表示し、且つ２４
Ｐ画像の最初のフレームＩ０を正常に復号することがで
きる。By performing such control, FIG.
The last frame P29 of the 60P image shown in FIG.
Normal display with 9.94 Hz vertical sync signal and 24
The first frame I0 of the P image can be decoded normally.

【００５７】なお、フレームＩ０の復号動作中は、第１
の復号開始信号７５０が図７のタイミング４０３で入力
されても無視し、次のフレームＰ３の復号に移行しない
ようにする制御方法もある。しかし、この場合、符号化
されている画像のフォーマットによっては、符号量によ
りフレームＩ０の復号が第１の復号開始信号７５０のタ
イミング４０３までに終了する場合と、終了しない場合
とが発生する。これに伴い、６０Ｐ画像の最後のフレー
ムＰ２９が１回表示される場合と、２回表示される場合
とが生じる。本実施の形態においてはこのような変動は
生じない。この点について以下に説明を加える。During the decoding operation of the frame I0, the first
There is also a control method for ignoring the decoding start signal 750 input at the timing 403 in FIG. However, in this case, depending on the format of the encoded image, there are cases where the decoding of the frame I0 is completed by the timing 403 of the first decoding start signal 750 and cases where it is not completed depending on the code amount. Accordingly, there are a case where the last frame P29 of the 60P image is displayed once and a case where it is displayed twice. Such a change does not occur in the present embodiment. This will be described below.

【００５８】６０Ｐ画像の画像サイズは横７２０サンプ
ル及び縦４８０サンプルであり、２４Ｐ画像の画像サイ
ズは横１２８０サンプル及び縦７２０サンプルとする。
この場合、１秒間に処理して出力するサンプル数は、６
０Ｐ画像では７２０×４８０×６０＝２０，７３６，０
００となる。また２４Ｐ画像では１２８０×７２０×２
４＝２２，１１８，４００となる。従って６０Ｐ画像と
２４Ｐ画像とで画像復号化装置に要求される処理速度が
ほぼ同等になる。このため６０Ｐ画像と２４Ｐ画像とを
共通に復号する画像復号化装置を無駄なく構成できる。The image size of the 60P image is 720 horizontal samples and 480 vertical samples, and the image size of the 24P image is 1280 horizontal samples and 720 vertical samples.
In this case, the number of samples processed and output per second is 6
720 × 480 × 60 = 20,736,0 for the 0P image
00. In the case of a 24P image, 1280 × 720 × 2
4 = 22,118,400. Accordingly, the processing speed required for the image decoding device is substantially equal between the 60P image and the 24P image. Therefore, an image decoding device that commonly decodes the 60P image and the 24P image can be configured without waste.

【００５９】しかし１フレームの時間の間に処理すべき
サンプル数は、６０Ｐ画像では７２０×４８０＝３４
５，６００となるのに対し、２４Ｐ画像では１２８０×
７２０＝９２１，６００となり、６０Ｐ画像に対して約
２．７倍にもなる。従って、図７（ａ）の区間４０７に
示した２４Ｐ画像のＩ０フレームを、６０Ｐ画像の１フ
レーム分の処理時間、即ちタイミング４０６と４０３の
間で常に復号完了できるような高速処理が可能なように
構成にすると、他の部分では必要な処理速度に対して画
像復号化装置の処理速度がオーバースペックとなって無
駄が多くなる。However, the number of samples to be processed in one frame time is 720 × 480 = 34 for a 60P image.
In contrast to 5,600, a 1280 ×
720 = 921,600, which is about 2.7 times that of a 60P image. Therefore, it is possible to perform high-speed processing such that decoding of the I0 frame of the 24P image shown in the section 407 of FIG. 7A for one frame of the 60P image, that is, between the timings 406 and 403, can always be completed. In other parts, the processing speed of the image decoding device is overspecified with respect to the required processing speed in other parts, and waste is increased.

【００６０】従って、Ｉ０フレームのように処理量の多
いフレームが入力された場合は、タイミング４０３で示
される第１の復号開始信号７５０を無視して、６０Ｐ画
像２フレーム分の処理時間で１フレームを処理する。こ
うすると信号処理の効率が改善される。ただし、Ｉ０フ
レームの処理量は、符号化した画像の性質により変化す
るため、タイミング４０６と４０３の間で復号が完了す
る場合も有り得る。これによって、６０Ｐ画像の最後の
フレームＰ２９が１回表示される場合と２回表示される
場合との間で変動することになる。本実施の形態のよう
に、タイミング４０３で出力されるような第１の復号開
始信号７５０を常に無視するような構成にすれば、この
ような１回表示か２回表示かの変動は生じない。Accordingly, when a frame having a large processing amount such as an I0 frame is input, the first decoding start signal 750 shown at the timing 403 is ignored, and one frame is processed in a processing time for two frames of a 60P image. Process. This improves the efficiency of signal processing. However, since the processing amount of the I0 frame changes depending on the characteristics of the encoded image, decoding may be completed between timings 406 and 403. As a result, the last frame P29 of the 60P image fluctuates between when it is displayed once and when it is displayed twice. If the configuration is such that the first decoding start signal 750 output at the timing 403 is always ignored as in the present embodiment, such a change between one-time display and two-time display does not occur. .

【００６１】また、Ｐ２９が常に２回表示されるように
なるため、同一ＰＴＳのフレームを２回表示することに
なり、復号後の画像をシステムの基準時間と同期して出
画する動作において、同期乱れが発生する。これを避け
るために、図５のステップＳ１８において、Ｎ＝０以
外、即ちストリームの切り替わり時における制御が行わ
れている期間には、ステップＳ１９でＳＴＣとＰＴＳの
同期判定を行わずに、必ず次のフレームのデコードを行
うようにしている。言い換えると、ストリームの切り替
わり時における制御期間、即ち図７のタイミング４０６
以降で復号後の画像をシステムの基準時間と同期して出
画する動作を一時中止する。このことにより、Ｐ２９が
２回表示されることによる同期乱れを避けることができ
る。Since P29 is always displayed twice, the frame of the same PTS is displayed twice. In the operation of outputting the decoded image in synchronization with the system reference time, Synchronization disorder occurs. In order to avoid this, in step S18 in FIG. 5, during the period other than N = 0, that is, during the period when the control at the time of switching the stream is performed, the synchronization determination of the STC and the PTS is not performed in step S19 and the next step is always performed. Frame is decoded. In other words, the control period when the stream is switched, that is, the timing 406 in FIG.
Thereafter, the operation of outputting the decoded image in synchronization with the reference time of the system is temporarily stopped. As a result, it is possible to avoid synchronization disorder due to P29 being displayed twice.

【００６２】なお、ストリーム作成時に、Ｐ２９が常に
２回表示されることを計算に入れてＰＴＳを付加するこ
とも可能である。この場合、本発明の画像復号化装置で
はＰ２９が常に２回表示されるため、ＳＴＣとＰＴＳと
の同期が乱れることはない。しかし、本発明の処理を行
わずに、Ｉ０フレームの処理量によってＰ２９の表示回
数が１回になったり２回になったりする場合は、ＳＴＣ
とＰＴＳとの同期乱れが発生したり、しなかったりする
という現象が発生することになる。It should be noted that it is also possible to add PTS by taking into account that P29 is always displayed twice when creating a stream. In this case, since the P29 is always displayed twice in the image decoding apparatus of the present invention, the synchronization between the STC and the PTS is not disturbed. However, in the case where the number of display times of P29 becomes one or two depending on the processing amount of the I0 frame without performing the processing of the present invention, the STC
A phenomenon occurs in which synchronization disturbance between the PTS and the PTS occurs or does not occur.

【００６３】図１に示す本実施の形態の画像復号化装置
において、入力信号が２４Ｐ画像を符号化したビデオＥ
Ｓから、ボトム・フィールドよりもトップ・フィールド
の方が先（以下、トップ・フィールド・ ファーストとい
う）に符号化された５９．９４フィールド／秒の飛び越
し走査画像（以下、３０Ｉ画像という）を符号化したビ
デオＥＳへ切り替わったときの動作タイミングチャート
を図８に示す。図８において各信号のタイムチャートの
記載順序は図２と同様であり、（ａ）は復号区間５０１
を示し、（ｅ）は表示区間５０２を示す。In the image decoding apparatus according to the present embodiment shown in FIG. 1, the input signal is a video E obtained by encoding a 24P image.
From S, a 59.94 field / second interlaced scan image (hereinafter, referred to as a 30I image) encoded earlier in the top field than in the bottom field (hereinafter, referred to as top field first) is encoded. FIG. 8 shows an operation timing chart at the time of switching to the changed video ES. In FIG. 8, the description order of the time chart of each signal is the same as that of FIG.
(E) shows the display section 502.

【００６４】図８のタイミング５０７で示すように、図
１のモード遷移検出手段１２は、２４Ｐ画像を符号化し
たビデオＥＳから、３０Ｉ画像を符号化したビデオＥＳ
へ切り替わった最初のフレームＩ０を検出すると、この
モード遷移情報を第１のシーケンサ８に出力する。第１
のシーケンサ８がこのモード遷移情報を受け取ると、Ｎ
＝５を設定する。Ｎ＝５のときのレジスタ３０３への復
号タイミング信号のモード設定は２４Ｐモードのままで
ある。従って、図８のタイミング５０３で示すように、
Ｎ＝４の第１の復号開始信号７５０はそのまま２４Ｐ画
像の復号に合ったタイミングで出力される。また、トッ
プ・フィールド・ファーストであることから、第２の復
号開始信号７５１に対してマスクを設定する。これ以降
は第２の復号開始信号７５１に対してマスクが設定され
たままであるため、第２の復号開始信号７５１は暫くの
間無視される。As shown by the timing 507 in FIG. 8, the mode transition detecting means 12 in FIG. 1 converts the video ES encoding the 24P image into the video ES encoding the 30I image.
When the first frame I0 switched to is detected, the mode transition information is output to the first sequencer 8. First
When the sequencer 8 receives the mode transition information,
= 5 is set. When N = 5, the mode setting of the decoding timing signal to the register 303 remains in the 24P mode. Therefore, as shown by the timing 503 in FIG.
The first decoding start signal 750 of N = 4 is output as it is at a timing suitable for decoding a 24P image. Also, since it is top field first, a mask is set for the second decoding start signal 751. Thereafter, since the mask is still set for the second decoding start signal 751, the second decoding start signal 751 is ignored for a while.

【００６５】図８のタイミング５０３で開始される処理
において、図５のステップＳ２１では２４Ｐから３０Ｉ
への遷移であり、かつＮ＝４であることが検出され、レ
ジスタ３０３に対して３０Ｉモードで復号タイミングを
生成するように設定される。この設定は、図８（ｄ）に
示すように、直後の垂直同期信号５０４において有効に
なり、これ以降は３０Ｉモードで垂直同期信号１０３、
第１の復号開始信号７５０及び第２の復号開始信号７５
１が出力される。３０Ｉ画像の復号においては、５９．
９４フィールド／秒であるから、図８（ｂ），（ｃ）に
示すように、５９．９４Ｈｚの周期でトップ・フィール
ドの復号開始を示す第１の復号開始信号７５０と、ボト
ム・フィールドの復号開始を示す第２の復号開始信号７
５１とが交互に出力される。In the process started at timing 503 in FIG. 8, in step S21 in FIG.
, And that N = 4 is set, and the register 303 is set to generate the decoding timing in the 30I mode. This setting is effective in the immediately following vertical synchronization signal 504 as shown in FIG. 8D, and thereafter, in the 30I mode, the vertical synchronization signal 103,
First decoding start signal 750 and second decoding start signal 75
1 is output. In decoding 30I images, 59.
Since the rate is 94 fields / sec, as shown in FIGS. 8B and 8C, the first decoding start signal 750 indicating the start of decoding of the top field at a period of 59.94 Hz, and the decoding of the bottom field Second decoding start signal 7 indicating start
51 are output alternately.

【００６６】図８のタイミング５０５に示すように、そ
の次に入力される第１の復号開始信号７５０を処理する
際にはＮ＝３となっている。このとき、図４のステップ
Ｓ１６において、２４Ｐから３０Ｉへの遷移であり、か
つＮ＝３であることが検出され、第１の復号開始信号７
５０に対してマスクが設定される。これにより、タイミ
ング５０５の第１の復号開始信号７５０は無視される。
図８のタイミング５０６に示すように、その次の第１の
復号開始信号７５０では、図４のステップＳ１６におい
て、２４Ｐから３０Ｉトップ・フィールド・ファースト
への遷移であり、かつＮ＝１であることが検出されて、
第１の復号開始信号７５０に対してマスクが解除され
る。これにより、３番目のフレームＢ１の復号が、図８
のタイミング５０６から開始される。これ以降はＮ＝０
であることから、通常の３０Ｉの復号動作が行われる。As shown by the timing 505 in FIG. 8, when processing the first decoding start signal 750 input next, N = 3. At this time, in step S16 of FIG. 4, it is detected that the transition is from 24P to 30I and N = 3, and the first decoding start signal 7
A mask is set for 50. As a result, the first decoding start signal 750 at the timing 505 is ignored.
As shown in timing 506 in FIG. 8, the next first decoding start signal 750 is a transition from 24P to 30I top field first in step S16 in FIG. 4, and N = 1. Is detected,
The mask is released for the first decoding start signal 750. Thus, decoding of the third frame B1 is performed as shown in FIG.
At a timing 506. After this, N = 0
Therefore, a normal 30I decoding operation is performed.

【００６７】このような制御を行うことにより、２４Ｐ
画像の最後のフレームＰ２９を正常に表示させると共
に、３０Ｉ画像の２番目のフレームＩ０を正常に復号す
ることができる。By performing such control, 24P
The last frame P29 of the image can be displayed normally, and the second frame I0 of the 30I image can be decoded normally.

【００６８】図１に示す本実施の形態の画像復号化装置
において、入力信号が２４Ｐ画像を符号化したビデオＥ
Ｓから、トップ・フィールドよりもボトム・フィールド
の方が先（以下、ボトム・フィールド・ ファーストとい
う）に符号化された３０Ｉ画像を符号化したビデオＥＳ
へ切り替わったときの動作タイミングチャートを図９に
示す。図９において（ａ）は復号区間６０１を示し、
（ｅ）は表示区間６０２を示す。In the image decoding apparatus of the present embodiment shown in FIG. 1, the input signal is a video E obtained by encoding a 24P image.
From S, the video ES in which the 30I image encoded in the bottom field is earlier than the top field (hereinafter referred to as bottom field first) is encoded.
FIG. 9 shows an operation timing chart at the time of switching to. In FIG. 9, (a) shows a decoding section 601;
(E) shows the display section 602.

【００６９】図９のタイミング６０９で示すように、図
１のモード遷移検出手段１２は２４Ｐ画像を符号化した
ビデオＥＳから、３０Ｉ画像を符号化したビデオＥＳへ
切り替わった最初のフレームＩ０を検出すると、このモ
ード遷移情報を第１のシーケンサ８に出力する。なお、
この際にＩ０のフレームのヘッダ情報が解析されるまで
は、Ｉ０を含むビデオＥＳがボトム・フィールド・ファ
ーストで符号化されていることが判らないため、Ｉ０の
復号は第１の復号開始信号７５０により開始される。As shown by the timing 609 in FIG. 9, when the mode transition detecting means 12 in FIG. 1 detects the first frame I0 in which the video ES encoding the 24P image is switched to the video ES encoding the 30I image, , And outputs this mode transition information to the first sequencer 8. In addition,
At this time, it is not known that the video ES including I0 is encoded in the bottom field first until the header information of the frame of I0 is analyzed, so that the decoding of I0 is performed by the first decoding start signal 750. Is started by

【００７０】第１のシーケンサ８はこのモード遷移情報
を受け取ると、Ｎ＝５を設定する。Ｎ＝５のときのレジ
スタ３０３への復号タイミング信号のモード設定は２４
Ｐモードのままである。従って、Ｎ＝４における次の第
１の復号開始信号７５０は、図９のタイミング６０３に
示すように、そのまま２４Ｐ画像の復号に合ったタイミ
ングで出力される。また、当初は第２の復号開始信号７
５１に対してマスクが設定される。図９においては、こ
れ以降の第２の復号開始信号７５１に対してマスクが設
定されたままであり、タイミング６０７でマスクが解除
されるまでは第２の復号開始信号７５１は全て無視され
る。When receiving the mode transition information, the first sequencer 8 sets N = 5. The mode setting of the decoding timing signal in the register 303 when N = 5 is 24
It remains in the P mode. Therefore, the next first decoding start signal 750 at N = 4 is output as it is at a timing suitable for decoding the 24P image, as shown at timing 603 in FIG. Initially, the second decoding start signal 7
A mask is set for 51. In FIG. 9, the mask is still set for the subsequent second decoding start signal 751, and the second decoding start signal 751 is completely ignored until the mask is released at timing 607.

【００７１】図９のタイミング６０３で開始される処理
において、図５のステップＳ２１では２４Ｐから３０Ｉ
への遷移であり、かつＮ＝４であることが検出され、レ
ジスタ３０３に３０Ｉモードで復号タイミングを生成す
るように設定される。この設定は図９（ｄ）に示すよう
に、直後の垂直同期信号６０４において有効になり、こ
れ以降は３０Ｉモードで垂直同期信号１０３、第１の復
号開始信号７５０、及び第２の復号開始信号７５１が出
力される。In the processing started at timing 603 in FIG. 9, in step S21 in FIG.
Is detected, and that N = 4 is set, and the register 303 is set to generate the decoding timing in the 30I mode. As shown in FIG. 9D, this setting is valid in the immediately following vertical synchronization signal 604, and thereafter, in the 30I mode, the vertical synchronization signal 103, the first decoding start signal 750, and the second decoding start signal 751 is output.

【００７２】図９のタイミング６０５で示すように、そ
の次に入力される第１の復号開始信号７５０を処理する
際にはＮ＝３となっている。このとき、図４のステップ
Ｓ１６において、２４Ｐから３０Ｉへの遷移であり、か
つＮ＝３であることが検出されて、第１の復号開始信号
７５０に対してマスクが設定される。これにより、タイ
ミング６０５の復号開始信号は無視される。図９のタイ
ミング６０６で示すように、その次の第１の復号開始信
号７５０では、図４のステップＳ１６において、２４Ｐ
から３０Ｉへの遷移であり、かつＮ＝１であることが検
出されて、第１の復号開始信号７５０に対してマスクが
設定され、第２の復号開始信号７５１に対するマスクが
解除される。これにより、タイミング６０６の第１の復
号開始信号７５０を無視し、３番目のフレームＢ１の復
号を図９のタイミング６０７から開始する。これ以降は
Ｎ＝０であることから、通常の３０Ｉボトム・ フィール
ド・ ファーストの復号動作が行われる。すなわち、ボト
ム・フィールド・ファーストであるから、これ以降のフ
レームの復号は全て第２の復号開始信号７５１により開
始される。As shown by the timing 605 in FIG. 9, when processing the first decoding start signal 750 input next, N = 3. At this time, in step S16 in FIG. 4, it is detected that the transition is from 24P to 30I and N = 3, and a mask is set for the first decoding start signal 750. As a result, the decoding start signal at the timing 605 is ignored. As shown by the timing 606 in FIG. 9, the next first decoding start signal 750 includes 24P in step S16 in FIG.
Is detected, and it is detected that N = 1, a mask is set for the first decoding start signal 750, and the mask for the second decoding start signal 751 is released. As a result, the first decoding start signal 750 at the timing 606 is ignored, and the decoding of the third frame B1 is started from the timing 607 in FIG. Thereafter, since N = 0, a normal 30I bottom field first decoding operation is performed. That is, since it is the bottom field first, decoding of all subsequent frames is started by the second decoding start signal 751.

【００７３】なお、ここではビデオＥＳが切り替わった
後の３０Ｉ画像は、ボトム・フィールド・ファーストで
符号化されている。しかし、３番目のフレームＢ１のヘ
ッダ情報の解析までは、第１のシーケンサ８はトップ・
フィールドの復号開始を示す第１の復号開始信号７５０
で復号を開始する。従って、ここまでの図９における動
作は、図８における動作と同様になる。このように処理
を行うことで、３０Ｉ画像のビデオＥＳがトップ・フィ
ールド・ファーストであっても、ボトム・フィールド・
ファーストであっても、ストリーム切り替え時の対応を
同様に行うことができ、処理を共通化することができ
る。Here, the 30I image after the video ES is switched is encoded in the bottom field first. However, until the analysis of the header information of the third frame B1, the first sequencer 8 is
First decoding start signal 750 indicating start of decoding of field
To start decoding. Therefore, the operation in FIG. 9 so far is the same as the operation in FIG. By performing the processing in this manner, even if the video ES of the 30I image is top field first, the bottom field field is displayed.
Even in the first case, the response at the time of stream switching can be similarly performed, and the processing can be shared.

【００７４】このような制御を行うことにより、２４Ｐ
画像の最後のフレームＰ２９を正常に表示させると共
に、３０Ｉ画像の最初のフレームＩ０を正常に復号する
ことができる。By performing such control, 24P
The last frame P29 of the image can be displayed normally, and the first frame I0 of the 30I image can be decoded normally.

【００７５】図１に示す本実施の形態の画像復号化装置
において、入力信号がトップ・フィールド・ ファースト
の３０Ｉ画像を符号化したビデオＥＳから、２４Ｐ画像
を符号化したビデオＥＳへ切り替わったときの動作タイ
ミングチャートを図１０に示す。図１０において（ａ）
は復号区間７０１を示し、（ｅ）は表示区間７０２を示
す。In the image decoding apparatus of the present embodiment shown in FIG. 1, when the input signal is switched from the video ES encoding the 30I image of the top field first to the video ES encoding the 24P image, FIG. 10 shows an operation timing chart. In FIG. 10, (a)
Indicates a decoding section 701, and (e) indicates a display section 702.

【００７６】図１０のタイミング７０３で示すように、
図１のモード遷移検出手段１２は３０Ｉ画像を符号化し
たビデオＥＳから、２４Ｐ画像を符号化したビデオＥＳ
へ切り替わった最初のフレームＩ０を検出すると、この
モード遷移情報を第１のシーケンサ８に出力する。第１
のシーケンサ８はこのモード遷移情報を受け取ると、Ｎ
＝５を設定する。図１０のタイミング７０４で示すよう
に、その次に入力される第１の復号開始信号７５０を処
理する際にはＮ＝３となっている。このとき、図４のス
テップＳ１６において、３０Ｉトップ・フィールド・フ
ァーストから２４Ｐへの遷移であり、かつＮ＝３である
ことが検出されて、第１の復号開始信号７５０に対して
マスクが設定される。これにより、タイミング７０４に
おける第１のの復号開始信号７５０は無視される。図１
０のタイミング７０５で示すように、その次の第１の復
号開始信号７５０では、図４のステップＳ１６におい
て、３０Ｉトップ・フィールド・ファーストから２４Ｐ
への遷移であり、かつＮ＝１であることが検出され、第
１の復号開始信号７５０に対してマスクが解除される。
これにより、２番目のフレームＰ３の復号を図１０のタ
イミング７０５から開始する。As shown by the timing 703 in FIG.
The mode transition detecting means 12 in FIG. 1 converts a video ES encoding a 30I image into a video ES encoding a 24P image.
When the first frame I0 switched to is detected, the mode transition information is output to the first sequencer 8. First
Receives this mode transition information,
= 5 is set. As shown by the timing 704 in FIG. 10, when processing the first decoding start signal 750 input next, N = 3. At this time, in step S16 of FIG. 4, it is detected that the transition is from 30I top field first to 24P and N = 3, and a mask is set for the first decoding start signal 750. You. As a result, the first decoding start signal 750 at the timing 704 is ignored. FIG.
As shown by the timing 705 of 0, in the next first decoding start signal 750, in step S16 of FIG.
, And that N = 1 is detected, and the masking of the first decoding start signal 750 is released.
As a result, decoding of the second frame P3 starts at timing 705 in FIG.

【００７７】また、図１０のタイミング７０５で開始さ
れる処理において、図４のステップＳ１６では、３０Ｉ
トップ・フィールド・ファーストから２４Ｐへの遷移で
あり、かつＮ＝１であることが検出され、レジスタ３０
３に対して２４Ｐモードで復号タイミングを生成するよ
うに設定される。この設定は図１０（ｄ）に示すよう
に、直後の垂直同期信号７０９において有効になり、こ
れ以降はＮ＝０であるため、２４Ｐモードで通常のデコ
ードが実行される。なお、図１０のタイミング７０３以
降は３０Ｉトップ・フィールド・ファーストから２４Ｐ
への遷移であることが検出され、Ｎの値に関わらず第２
の復号開始信号７５１に対してはマスクが設定される。
図１０のタイミング７０６以降に出力される第２の復号
開始信号、即ちタイミング７０６、７０７、７０８にお
ける第２の復号開始信号７５１は、復号する画像が順次
走査画像であるため、すべて無視される。Further, in the processing started at the timing 705 in FIG. 10, in step S16 in FIG.
A transition from top field first to 24P and N = 1 is detected and register 30
3 is set to generate the decoding timing in the 24P mode. As shown in FIG. 10D, this setting is valid in the immediately following vertical synchronizing signal 709. Thereafter, since N = 0, normal decoding is performed in the 24P mode. In addition, after timing 703 in FIG. 10, 30I top field first to 24P
Is detected, and the second transition is performed regardless of the value of N.
A mask is set for the decoding start signal 751 of.
The second decoding start signal output after the timing 706 in FIG. 10, that is, the second decoding start signal 751 at the timings 706, 707, and 708 is all ignored because the image to be decoded is a progressively scanned image.

【００７８】このような制御を行うことにより、３０Ｉ
画像の最後のフレームＰ２９を正常に表示させると共
に、２４Ｐ画像の最初のフレームＩ０を正常に復号する
ことができる。By performing such control, 30I
The last frame P29 of the image can be displayed normally, and the first frame I0 of the 24P image can be decoded normally.

【００７９】図１に示す本実施の形態の画像復号化装置
において、入力信号がボトム・フィールド・ ファースト
の３０Ｉ画像を符号化したビデオＥＳから、２４Ｐ画像
を符号化したビデオＥＳへ切り替わったときの動作タイ
ミングチャートを図１１に示す。図１１において（ａ）
は復号区間８０１を示し、（ｅ）は表示区間８０２を示
す。In the image decoding apparatus of the present embodiment shown in FIG. 1, when the input signal is switched from a video ES encoding a 30I image of bottom field first to a video ES encoding a 24P image. FIG. 11 shows an operation timing chart. In FIG. 11, (a)
Indicates a decoding section 801, and (e) indicates a display section 802.

【００８０】図１のモード遷移検出手段１２は、３０Ｉ
画像を符号化したビデオＥＳから、２４Ｐ画像を符号化
したビデオＥＳへ切り替わった最初のフレームＩ０を検
出すると、このモード遷移情報を第１のシーケンサ８に
出力する。なお、この際に、Ｉ０のフレームのヘッダ情
報が解析されるまでは、Ｉ０を含むビデオＥＳが順次走
査画像を符号化したものであることが判らないため、Ｉ
０の復号はボトム・フィールド・ファーストの３０Ｉ画
像と同様に、タイミング８０５における第２の復号開始
信号７５１により開始される。The mode transition detecting means 12 shown in FIG.
When the first frame I0 in which the image ES is switched to the video ES encoding the 24P image is detected, the mode transition information is output to the first sequencer 8. Note that, at this time, it is not known that the video ES including I0 is a coded progressively scanned image until the header information of the I0 frame is analyzed.
The decoding of 0 is started by the second decoding start signal 751 at the timing 805, similarly to the bottom field first 30I image.

【００８１】第１のシーケンサ８はモード遷移情報を受
け取ると、Ｎ＝５を設定する。図１１のタイミング８０
３に示すように、その次に入力される第１の復号開始信
号７５０を処理する際にはＮ＝４となっている。このと
き、図４のステップＳ１６において、３０Ｉボトム・フ
ィールド・ファーストから２４Ｐへの遷移であり、かつ
Ｎ＝４であることが検出され、第１の復号開始信号７５
０に対してマスクが設定される。これにより、タイミン
グ８０３における第１の復号開始信号７５０は無視され
る。図１１のタイミング８０６で示すように、その次の
第２の復号開始信号７５１においても、Ｎ＝３であるこ
とが検出され、同様の処理が行われる。その結果、タイ
ミング８０６の第１の復号開始信号７５０も無視され
る。When the first sequencer 8 receives the mode transition information, it sets N = 5. Timing 80 in FIG.
As shown in FIG. 3, N = 4 when processing the first decoding start signal 750 input next. At this time, in step S16 in FIG. 4, it is detected that the transition is from 30I bottom field first to 24P and N = 4, and the first decoding start signal 75
A mask is set for 0. As a result, the first decoding start signal 750 at the timing 803 is ignored. As indicated by the timing 806 in FIG. 11, N = 3 is also detected in the next second decoding start signal 751, and the same processing is performed. As a result, the first decoding start signal 750 at the timing 806 is also ignored.

【００８２】図１１のタイミング８０４に示すように、
その次の第１の復号開始信号７５０では、図４のステッ
プＳ１６において、３０Ｉボトム・フィールド・ファー
ストから２４Ｐへの遷移であり、かつＮ＝２であること
が検出され、第１の復号開始信号７５０に対してマスク
が解除される。これにより、２番目のフレームＰ３の復
号を、図１１のタイミング８０４から開始する。As shown at timing 804 in FIG.
In the next first decoding start signal 750, it is detected in step S16 of FIG. 4 that the transition is from 30I bottom field first to 24P and N = 2, and the first decoding start signal 750 is detected. The mask is released for 750. As a result, decoding of the second frame P3 starts at timing 804 in FIG.

【００８３】また、図１１のタイミング８０４で開始さ
れる処理において、図４のステップＳ１６では、３０Ｉ
ボトム・フィールド・ファーストから２４Ｐへの遷移で
あり、かつＮ＝２であることが検出され、レジスタ３０
３に２４Ｐモードで復号タイミングを生成するように設
定される。この設定は、図１１（ｄ）に示すように、直
後の垂直同期信号８０８において有効になり、これ以降
は２４Ｐモードで通常のデコードが実行される。なお、
図１１のタイミング８０７に出力される第２の復号開始
信号７５１は２４Ｐモードでのデコードであるため、マ
スクが設定されて無視される。Further, in the processing started at timing 804 in FIG. 11, in step S16 in FIG.
It is detected that the transition is from bottom field first to 24P and N = 2.
3 is set to generate the decoding timing in the 24P mode. This setting is effective in the immediately following vertical synchronization signal 808 as shown in FIG. 11D, and thereafter, normal decoding is performed in the 24P mode. In addition,
Since the second decoding start signal 751 output at the timing 807 in FIG. 11 is decoding in the 24P mode, a mask is set and ignored.

【００８４】このような制御を行うことにより、３０Ｉ
画像の最後のフレームＰ２９を正常に表示させると共
に、２４Ｐ画像の最初のフレームＩ０を正常に復号する
ことができる。By performing such control, 30I
The last frame P29 of the image can be displayed normally, and the first frame I0 of the 24P image can be decoded normally.

【００８５】図１に示す本実施の形態の画像復号化装置
において、入力信号が６０Ｐ画像を符号化したビデオＥ
Ｓから、トップ・フィールド・ファーストの３０Ｉ画像
を符号化したビデオＥＳへ切り替わったときの動作タイ
ミングチャートを図１２に示す。図１２において（ａ）
は復号区間９０１を示し、（ｅ）は表示区間９０２を示
す。In the image decoding apparatus according to the present embodiment shown in FIG. 1, the input signal is a video E in which a 60P image is encoded.
FIG. 12 shows an operation timing chart when switching from S to video ES in which a top field first 30I image is encoded. In FIG. 12, (a)
Indicates a decoding section 901, and (e) indicates a display section 902.

【００８６】図１２のタイミング９０３に示すように、
図１のモード遷移検出手段１２は、６０Ｐ画像を符号化
したビデオＥＳから、３０Ｉ画像を符号化したビデオＥ
Ｓへ切り替わった最初のフレームＩ０を検出するとき、
このモード遷移情報を第１のシーケンサ８に出力する。
第１のシーケンサ８は、モード遷移情報を受け取ると、
Ｎ＝５を設定する。Ｎ＝５のときのレジスタ３０３への
復号タイミング信号のモード設定は、６０Ｐモードのま
まである。従って、Ｎ＝４における第１の復号開始信号
７５０はそのまま６０Ｐ画像の復号に合ったタイミン
グ、即ち図１２のタイミング９０４で出力される。ま
た、トップ・フィールド・ファーストであることから、
第２の復号開始信号７５１に対してマスクが設定され
る。図１２においては、これ以降の第２の復号開始信号
７５１に対してマスクが設定されたままであるため、第
２の復号開始信号７５１は全て無視される。As shown at timing 903 in FIG.
The mode transition detecting means 12 in FIG. 1 converts the video ES encoding the 60P image into the video E encoding the 30I image.
When detecting the first frame I0 switched to S,
This mode transition information is output to the first sequencer 8.
When the first sequencer 8 receives the mode transition information,
Set N = 5. When N = 5, the mode setting of the decoding timing signal to the register 303 remains in the 60P mode. Therefore, the first decoding start signal 750 at N = 4 is output as it is at the timing suitable for decoding the 60P image, that is, at the timing 904 in FIG. Also, because it is top field first,
A mask is set for the second decoding start signal 751. In FIG. 12, since the mask is still set for the second decoding start signal 751 thereafter, all the second decoding start signals 751 are ignored.

【００８７】図１２のタイミング９０４で開始される処
理において、図５のステップＳ２１では６０Ｐから３０
Ｉへの遷移であり、かつＮ＝４であることが検出され、
レジスタ３０３に３０Ｉモードで復号タイミングを生成
するように設定される。この設定は図１２（ｄ）に示す
ように、直後の垂直同期信号９０７において有効にな
り、これ以降は３０Ｉモードで垂直同期信号１０３、第
１の復号開始信号７５０、及び第２の復号開始信号７５
１が出力される。３０Ｉ画像の復号においては、５９．
９４フィールド／秒であるから、５９．９４Ｈｚの周期
で、トップ・フィールドの復号開始を示す第１の復号開
始信号７５０と、ボトム・フィールドの復号開始を示す
第２の復号開始信号７５１とが交互に出力される。In the processing started at timing 904 in FIG. 12, in step S21 in FIG.
Transition to I and N = 4 is detected,
The register 303 is set so as to generate the decoding timing in the 30I mode. As shown in FIG. 12D, this setting is effective in the immediately following vertical synchronization signal 907, and thereafter, in the 30I mode, the vertical synchronization signal 103, the first decoding start signal 750, and the second decoding start signal 75
1 is output. In decoding 30I images, 59.
Since the rate is 94 fields / sec, the first decoding start signal 750 indicating the start of decoding of the top field and the second decoding start signal 751 indicating the start of decoding of the bottom field are alternately performed at a period of 59.94 Hz. Is output to

【００８８】図１２のタイミング９０５に示すように、
その次に入力される第１の復号開始信号７５０を処理す
る際にはＮ＝３となっている。このとき、図４のステッ
プＳ１６において、６０Ｐから３０Ｉへの遷移であり、
かつＮ＝３であることが検出され、第１の復号開始信号
７５０に対してマスクが設定される。これにより、タイ
ミング９０５の復号開始信号は無視される。図１２のタ
イミング９０６で示すように、その次の第１の復号開始
信号７５０では、図４のステップＳ１６において、６０
Ｐから３０Ｉへの遷移であり、かつＮ＝１であることが
検出され、第１の復号開始信号７５０に対してマスクが
解除される。これにより、３番目のフレームＢ１の復号
を図１２のタイミング９０６から開始する。これ以降は
Ｎ＝０であることから、通常の３０Ｉトップ・フィール
ド・ファーストの復号動作が行われる。As shown at timing 905 in FIG.
When processing the first decoding start signal 750 input next, N = 3. At this time, in step S16 in FIG. 4, the transition is from 60P to 30I.
Further, it is detected that N = 3, and a mask is set for the first decoding start signal 750. As a result, the decoding start signal at timing 905 is ignored. As shown by the timing 906 in FIG. 12, in the next first decoding start signal 750, in the step S16 in FIG.
It is detected that the transition is from P to 30I and N = 1, and the masking of the first decoding start signal 750 is released. As a result, decoding of the third frame B1 is started from timing 906 in FIG. Thereafter, since N = 0, a normal 30I top field first decoding operation is performed.

【００８９】このような制御を行うことにより、２４Ｐ
画像の最後のフレームＰ２９を正常に表示させると共
に、３０Ｉ画像の２番目のフレームＰ３を正常に復号す
ることができる。By performing such control, 24P
The last frame P29 of the image can be displayed normally, and the second frame P3 of the 30I image can be decoded normally.

【００９０】図１に示す本実施の形態の画像復号化装置
において、入力信号が６０Ｐ画像を符号化したビデオＥ
Ｓから、ボトム・フィールド・ファーストの３０Ｉ画像
を符号化したビデオＥＳへ切り替わったときの動作タイ
ミングチャートを図１３に示す。図１３において（ａ）
は復号区間１００１を示し、（ｅ）は表示区間１００２
を示す。In the image decoding apparatus according to the present embodiment shown in FIG. 1, an input signal is a video E in which a 60P image is encoded.
FIG. 13 shows an operation timing chart when switching from S to the video ES in which the bottom field first 30I image is encoded. In FIG. 13, (a)
Indicates a decoding section 1001, and (e) indicates a display section 1002.
Is shown.

【００９１】図１３のタイミング１００３に示すよう
に、図１のモード遷移検出手段１２は、６０Ｐ画像を符
号化したビデオＥＳから、３０Ｉ画像を符号化したビデ
オＥＳへ切り替わった最初のフレームＩ０を検出する
と、このモード遷移情報を第１のシーケンサ８に出力す
る。なおこの際に、Ｉ０のフレームのヘッダ情報が解析
されるまでは、Ｉ０を含むビデオＥＳがボトム・フィー
ルド・ファーストで符号化されていることが判らないた
め、Ｉ０の復号は第１の復号開始信号７５０により開始
される。As shown at a timing 1003 in FIG. 13, the mode transition detecting means 12 in FIG. 1 detects the first frame I0 in which the video ES encoding the 60P image is switched to the video ES encoding the 30I image. Then, this mode transition information is output to the first sequencer 8. At this time, it is not known that the video ES including I0 is encoded in the bottom field first until the header information of the frame of I0 is analyzed. Started by signal 750.

【００９２】第１のシーケンサ８はモード遷移情報を受
け取ると、Ｎ＝５を設定する。Ｎ＝５のときのレジスタ
３０３への復号タイミング信号のモード設定は、６０Ｐ
モードのままである。従って、Ｎ＝４の第１の復号開始
信号７５０は、図１３のタイミング１００４に示すよう
に、６０Ｐ画像の復号に合ったタイミングで出力され
る。また、当初は第２の復号開始信号７５１に対してマ
スクが設定される。図１３においては、これ以降第２の
復号開始信号７５１に対してマスクが設定されたままで
あり、タイミング１００９でマスクが解除されるまで、
第２の復号開始信号７５１は全て無視される。Upon receiving the mode transition information, the first sequencer 8 sets N = 5. The mode setting of the decoding timing signal in the register 303 when N = 5 is 60P
Mode remains. Accordingly, the first decoding start signal 750 of N = 4 is output at a timing that matches the decoding of the 60P image, as shown by the timing 1004 in FIG. Initially, a mask is set for the second decoding start signal 751. In FIG. 13, the mask is still set for the second decoding start signal 751 thereafter, and until the mask is released at timing 1009,
All the second decoding start signals 751 are ignored.

【００９３】図１３のタイミング１００４で開始される
処理において、図５のステップＳ２１では６０Ｐから３
０Ｉへの遷移であり、かつＮ＝４であることが検出さ
れ、レジスタ３０３に３０Ｉモードで復号タイミングを
生成するように設定される。この設定は、図１３（ｄ）
に示すように、直後の垂直同期信号１００７において有
効になり、これ以降は３０Ｉモードで垂直同期信号１０
３、第１の復号開始信号７５０、及び第２の復号開始信
号７５１が出力される。In the processing started at timing 1004 in FIG. 13, in step S21 in FIG.
The transition to 0I and N = 4 are detected, and the register 303 is set to generate the decoding timing in the 30I mode. This setting is as shown in FIG.
As shown in the figure, the signal becomes valid in the immediately following vertical synchronization signal 1007, and thereafter, the vertical synchronization signal 10
3. A first decoding start signal 750 and a second decoding start signal 751 are output.

【００９４】図１３のタイミング１００５に示すよう
に、その次に入力される第１の復号開始信号７５０を処
理する際にはＮ＝３となっている。このとき、図４のス
テップＳ１６において、６０Ｐから３０Ｉへの遷移であ
り、かつＮ＝３であることが検出され、第１の復号開始
信号７５０に対してマスクが設定される。これにより、
タイミング１００５の復号開始信号は無視される。図１
３のタイミング１００６で示すように、その次の第１の
復号開始信号７５０では、図４のステップＳ１６におい
て、６０Ｐから３０Ｉへの遷移であり、かつＮ＝１であ
ることが検出され、第１の復号開始信号７５０に対して
マスクが設定され、第２の復号開始信号７５１に対する
マスクが解除される。これにより、タイミング１００６
の第１の復号開始信号７５０を無視し、３番目のフレー
ムＢ１の復号を図１３のタイミング１００９から開始す
る。As shown at timing 1005 in FIG. 13, N = 3 when processing the first decoding start signal 750 input next. At this time, in step S16 in FIG. 4, it is detected that the transition is from 60P to 30I and N = 3, and a mask is set for the first decoding start signal 750. This allows
The decoding start signal at timing 1005 is ignored. FIG.
As shown by the timing 1006 in FIG. 3, in the next first decoding start signal 750, it is detected in step S16 in FIG. 4 that the transition is from 60P to 30I, and that N = 1, Is set for the decoding start signal 750, and the mask for the second decoding start signal 751 is released. As a result, the timing 1006
Ignoring the first decoding start signal 750, and starts decoding the third frame B1 from timing 1009 in FIG.

【００９５】これ以降はＮ＝０であることから、通常の
３０Ｉボトム・ フィールド・ ファーストの復号動作が行
われる。すなわち、ボトム・フィールド・ファーストで
あるから、第１の復号開始信号７５０には常にマスクが
設定され、これ以降のフレームの復号は全て第２の復号
開始信号７５１により開始される。Thereafter, since N = 0, a normal 30I bottom field first decoding operation is performed. That is, since it is the bottom field first, a mask is always set to the first decoding start signal 750, and decoding of all subsequent frames is started by the second decoding start signal 751.

【００９６】なお、ここではビデオＥＳが切り替わった
後の３０Ｉ画像は、ボトム・フィールド・ファーストで
符号化されている。しかし、第１のシーケンサ８は、３
番目のフレームＢ１のヘッダ情報解析までは、トップ・
フィールドの復号開始を示す第１の復号開始信号７５０
で復号を開始する。従って、ここまでの図１３における
動作は、図１２における動作と同様になる。このように
処理を行うことで、３０Ｉ画像のビデオＥＳが、トップ
・フィールド・ファーストであっても、ボトム・フィー
ルド・ファーストであっても、ストリーム切り替え時の
対応を同様に行うことができ、処理を共通化することが
できる。Here, the 30I image after the video ES is switched is encoded in the bottom field first. However, the first sequencer 8 has 3
Up to the top frame B1 header information analysis,
First decoding start signal 750 indicating start of decoding of field
To start decoding. Therefore, the operation in FIG. 13 so far is the same as the operation in FIG. By performing the processing in this way, whether the video ES of the 30I image is top-field first or bottom-field first, it is possible to perform the same process at the time of stream switching in the same manner. Can be shared.

【００９７】このような制御を行うことにより、６０Ｐ
画像の最後のフレームＰ２９を正常に表示させると共
に、３０Ｉ画像の２番目のフレームＰ３を正常に復号す
ることができる。By performing such control, 60P
The last frame P29 of the image can be displayed normally, and the second frame P3 of the 30I image can be decoded normally.

【００９８】図１に示す本実施の形態の画像復号化装置
において、入力信号がトップ・フィールド・ファースト
の３０Ｉ画像を符号化したビデオＥＳから、６０Ｐ画像
を符号化したビデオＥＳへ切り替わったときの動作タイ
ミングチャートを図１４に示す。図１４において（ａ）
は復号区間１１０１を示し、（ｅ）は表示区間１１０２
を示す。In the image decoding apparatus of the present embodiment shown in FIG. 1, when the input signal is switched from the video ES encoding the top field first 30I image to the video ES encoding the 60P image, FIG. 14 shows an operation timing chart. In FIG. 14, (a)
Indicates a decoding section 1101, and (e) indicates a display section 1102.
Is shown.

【００９９】図１４のタイミング１１０３に示すよう
に、図１のモード遷移検出手段１２は、３０Ｉ画像を符
号化したビデオＥＳから、６０Ｐ画像を符号化したビデ
オＥＳへ切り替わった最初のフレームＩ０を検出する
と、このモード遷移情報を第１のシーケンサ８に出力す
る。第１のシーケンサ８はこのモード遷移情報を受け取
ると、Ｎ＝４を設定する。図１４のタイミング１１０６
に示すように、その次に入力される第２の復号開始信号
７５１を処理する際にはＮ＝３となっている。このと
き、図４のステップＳ１６において、３０Ｉトップ・フ
ィールド・ファーストから６０Ｐへの遷移であり、かつ
Ｎ＝３であることが検出され、第２の復号開始信号７５
１に対してマスクが設定される。これにより、タイミン
グ１１０６の復号開始信号は無視される。As shown at the timing 1103 in FIG. 14, the mode transition detecting means 12 in FIG. 1 detects the first frame I0 in which the video ES encoding the 30I image is switched to the video ES encoding the 60P image. Then, this mode transition information is output to the first sequencer 8. When the first sequencer 8 receives the mode transition information, it sets N = 4. Timing 1106 in FIG.
As shown in (1), when processing the second decoding start signal 751 input next, N = 3. At this time, in step S16 in FIG. 4, it is detected that the transition is from 30I top field first to 60P and N = 3, and the second decoding start signal 75
A mask is set for one. As a result, the decoding start signal at timing 1106 is ignored.

【０１００】図１４のタイミング１１０４で示すよう
に、その次の第１の復号開始信号７５０では、図４のス
テップＳ１６において、３０Ｉトップ・フィールド・フ
ァーストから６０Ｐへの遷移であり、かつＮ＝２である
ことが検出され、第１の復号開始信号７５０に対してマ
スクが解除される。これにより、２番目のフレームＰ３
の復号を、図１４のタイミング１１０４から開始する。As shown by timing 1104 in FIG. 14, in the next first decoding start signal 750, in step S16 in FIG. 4, the transition from 30I top field first to 60P and N = 2 Is detected, and the masking of the first decoding start signal 750 is released. Thereby, the second frame P3
Starts at timing 1104 in FIG.

【０１０１】また、図１４のタイミング１１０４で開始
される処理において、図５のステップＳ２１では３０Ｉ
トップ・フィールド・ファーストから６０Ｐへの遷移で
あり、かつＮ＝２であることが検出され、レジスタ３０
３に対して６０Ｐモードで復号タイミングを生成するよ
うに設定される。この設定は図１４（ｄ）に示すよう
に、直後の垂直同期信号１１０７において有効になり、
これ以降は６０Ｐモードで通常のデコードが実行され
る。In the process started at the timing 1104 in FIG. 14, 30I in step S21 in FIG.
The transition from top field first to 60P and N = 2 is detected and register 30
3 is set to generate the decoding timing in the 60P mode. This setting is effective in the immediately following vertical synchronization signal 1107 as shown in FIG.
Thereafter, normal decoding is performed in the 60P mode.

【０１０２】一方、従来の復号化装置のように最初のフ
レームＩ０を検出した時点でヘッダ情報を参照してすぐ
に６０Ｐモードに切り替えた場合は、６０Ｐ画像の２番
目のフレームＰ３の復号が図１４のタイミング１１０６
で開始されてしまう。このため、図１の第１のフレーム
メモリ１０及び第２のフレームメモリ１１に６０Ｐ画像
のＩ０及びＰ３の２つのフレームが記憶され、３０Ｉ画
像の最後のボトム・フィールド１１０８が表示されなく
なってしまう。On the other hand, when the mode is switched to the 60P mode immediately by referring to the header information at the time when the first frame I0 is detected as in the conventional decoding apparatus, the decoding of the second frame P3 of the 60P image is performed. 14 timing 1106
It starts with. Therefore, two frames I0 and P3 of the 60P image are stored in the first frame memory 10 and the second frame memory 11 of FIG. 1, and the last bottom field 1108 of the 30I image is not displayed.

【０１０３】これに対して、本実施の形態で説明した制
御を行うことにより、３０Ｉ画像の最後のフレームＰ２
９をボトム・フィールドが抜けることなく正常に表示さ
せることができる。On the other hand, by performing the control described in the present embodiment, the last frame P2 of the 30I image is obtained.
9 can be displayed normally without missing the bottom field.

【０１０４】図１に示す本実施の形態の画像復号化装置
において、入力信号がボトム・フィールド・ ファースト
の３０Ｉ画像を符号化したビデオＥＳから、６０Ｐ画像
を符号化したビデオＥＳへ切り替わったときの動作タイ
ミングチャートを図１５に示す。図１５において（ａ）
は復号区間１２０１を示し、（ｅ）は表示区間１２０２
を示す。In the image decoding apparatus according to the present embodiment shown in FIG. 1, when the input signal is switched from the video ES encoding the 30I image of the bottom field first to the video ES encoding the 60P image, FIG. 15 shows an operation timing chart. In FIG. 15, (a)
Indicates a decoding section 1201, and (e) indicates a display section 1202.
Is shown.

【０１０５】図１５のタイミング１２０６で示すよう
に、図１のモード遷移検出手段１２は３０Ｉ画像を符号
化したビデオＥＳから、６０Ｐ画像を符号化したビデオ
ＥＳへ切り替わった最初のフレームＩ０を検出すると、
このモード遷移情報を第１のシーケンサ８に出力する。
なおこの際に、Ｉ０のフレームのヘッダ情報が解析され
るまでは、Ｉ０を含むビデオＥＳが順次走査画像が符号
化されたものであることが判らないため、Ｉ０の復号は
第２の復号開始信号７５１により開始される。As shown by the timing 1206 in FIG. 15, when the mode transition detecting means 12 in FIG. 1 detects the first frame I0 in which the video ES encoding the 30I image is switched to the video ES encoding the 60P image, ,
This mode transition information is output to the first sequencer 8.
Note that, at this time, it is not known that the video ES including I0 is a coded progressively scanned image until the header information of the I0 frame is analyzed. Started by signal 751.

【０１０６】第１のシーケンサ８はこのモード遷移情報
を受け取ると、Ｎ＝４を設定する。図１５のタイミング
１２０３に示すように、その次に入力される第１の復号
開始信号７５０を処理する際にはＮ＝３となっている。
このとき、図４のステップＳ１６において、３０Ｉボト
ム・フィールド・ファーストから６０Ｐへの遷移であ
り、かつＮ＝３であることが検出され、第１の復号開始
信号７５０に対してマスクが設定される。これにより、
タイミング１２０３の復号開始信号は無視される。Upon receiving this mode transition information, the first sequencer 8 sets N = 4. As shown at a timing 1203 in FIG. 15, when processing the first decoding start signal 750 input next, N = 3.
At this time, in step S16 of FIG. 4, it is detected that the transition is from 30I bottom field first to 60P and N = 3, and a mask is set for the first decoding start signal 750. . This allows
The decoding start signal at timing 1203 is ignored.

【０１０７】図１５のタイミング１２０７で示すよう
に、その次の第２の復号開始信号７５１は、図４のステ
ップＳ１６において３０Ｉボトム・フィールド・ファー
ストから６０Ｐへの遷移であり、かつＮ＝２であること
が検出され、第２の復号開始信号７５１に対してマスク
が解除される。これにより、２番目のフレームＰ３の復
号を、図１５のタイミング１２０７から開始する。As shown by the timing 1207 in FIG. 15, the next second decoding start signal 751 is a transition from 30I bottom field first to 60P in step S16 in FIG. It is detected that there is, and the mask is released for the second decoding start signal 751. Thus, decoding of the second frame P3 is started from timing 1207 in FIG.

【０１０８】また、図１５のタイミング１２０７で開始
される処理において、図５のステップＳ２１では、３０
Ｉボトム・フィールド・ファーストから６０Ｐへの遷移
であり、かつＮ＝２であることが検出され、レジスタ３
０３に６０Ｐモードで復号タイミングを生成するように
設定される。この設定は図１５（ｄ）に示すように、直
後の垂直同期信号１２０８において有効になり、これ以
降の第１の復号開始信号７５０は６０Ｐモードで出力さ
れる。In the processing started at timing 1207 in FIG. 15, 30 in FIG.
It is detected that the transition is from I bottom field first to 60P and N = 2.
03 is set to generate the decoding timing in the 60P mode. As shown in FIG. 15D, this setting is valid in the immediately following vertical synchronization signal 1208, and the subsequent first decoding start signal 750 is output in the 60P mode.

【０１０９】図１５のタイミング１２０５に示すよう
に、次に入力される第１の復号開始信号７５０を処理す
る際には、Ｎ＝１となっている。このとき、図４のステ
ップＳ１６において、３０Ｉボトム・フィールド・ファ
ーストから６０Ｐへの遷移であり、かつＮ＝１であるこ
とが検出され、第１の復号開始信号７５０に対するマス
クが解除される。これ以降は、Ｎ＝０であり、６０Ｐモ
ードで通常のデコードが実行される。As shown at a timing 1205 in FIG. 15, when the first decoding start signal 750 to be input next is processed, N = 1. At this time, in step S16 of FIG. 4, it is detected that the transition is from 30I bottom field first to 60P and N = 1, and the masking of the first decoding start signal 750 is released. Thereafter, N = 0 and normal decoding is performed in the 60P mode.

【０１１０】ここで、ビデオＥＳが切り替わった後の画
像は順次走査画像であるため、本来は第１の復号開始信
号７５０で復号が開始される。しかし、モード遷移情報
でボトム・フィールド・ファーストの３０Ｉ画像から６
０Ｐ画像への遷移であることが伝達された場合のみ、第
１のシーケンサ８は２番目のフレームＰ３を第２の復号
開始信号７５１で復号開始するように制御する。Here, since the image after the switching of the video ES is a progressively scanned image, decoding is originally started by the first decoding start signal 750. However, in the mode transition information, 6I
Only when the transition to the 0P image is transmitted, the first sequencer 8 controls to start decoding the second frame P3 with the second decoding start signal 751.

【０１１１】このような制御を行わずに、ヘッダ情報を
参照した結果をすぐに用いて、６０Ｐ画像の２番目のフ
レームＰ３の復号をタイミング１２０３における第１の
復号開始信号７５０で開始した場合、この直後の垂直同
期期間１２０９において、図１の第１のフレームメモリ
１０及び第２のフレームメモリ１１に６０Ｐ画像のＩ０
及びＰ３の２つのフレームのデータが記憶されてしま
う。この場合、３０Ｉ画像の最後のトップ・フィールド
１２１０が表示されなくなってしまう。これに対し、本
実施の形態で説明したような制御を行うことにより、３
０Ｉ画像の最後のフレームＰ２９を、トップ・フィール
ドが抜けることなく正常に表示させることができる。If the decoding of the second frame P3 of the 60P image is started by the first decoding start signal 750 at the timing 1203 without using such control and immediately using the result obtained by referring to the header information, In the vertical synchronization period 1209 immediately after this, the I0 of the 60P image is stored in the first frame memory 10 and the second frame memory 11 in FIG.
And P3 are stored. In this case, the last top field 1210 of the 30I image is not displayed. In contrast, by performing the control described in the present embodiment, 3
The last frame P29 of the 01 image can be displayed normally without missing the top field.

【０１１２】以上、本発明の実施の形態においては、画
像復号化装置の入力が、２４フレーム／秒の順次走査画
像を符号化したビデオＥＳ、５９．９４フレーム／秒の
順次走査画像を符号化したビデオＥＳ、５９．９４フィ
ールド／秒の飛び越し走査画像を符号化したビデオＥＳ
のいずれかとするとき、これらいずれか２つのビデオＥ
Ｓ間で切り替わった場合について説明した。しかし、フ
レームレート及びフィールドレートはこの数字に限られ
るものではなく、タイミング図の関係が本実施の形態に
示したような関係になるものであれば何でも良い。例え
ば、６０フィールド／秒の飛び越し走査画像を符号化し
たビデオＥＳと、５９．９４フレーム／秒の順次走査画
像を符号化したビデオＥＳとの場合を考えても良い。ま
た２９．９７フィールド／秒の飛び越し走査画像を符号
化したビデオＥＳと、３０フレーム／秒の順次走査画像
を符号化したビデオＥＳとの場合を考えても良い。As described above, in the embodiment of the present invention, the input of the image decoding apparatus is a video ES that encodes a progressively scanned image of 24 frames / sec, and encodes a progressively scanned image of 59.94 frames / sec. Video ES, encoded video of 59.94 fields / second interlaced image
, One of these two videos E
The case of switching between S has been described. However, the frame rate and the field rate are not limited to these numbers, and may be anything as long as the relationship in the timing chart is such as that shown in the present embodiment. For example, a case may be considered where a video ES encodes a 60-field / sec interlaced scan image and a video ES encodes a 59.94 frame / sec progressive scan image. It is also possible to consider the case of a video ES encoding a 29.97 fields / sec interlaced scanning image and a video ES encoding a 30 frames / sec progressive scanning image.

【０１１３】[0113]

【発明の効果】以上のように、本発明によれば、画像復
号化装置の入力が複数のフォーマットのうち、いずれか
のフォーマットの画像を符号化したビデオＥＳであり、
それぞれ元のフォーマットで表示する場合に、入力画像
のフォーマットが切り替わっても、切り替わり時点にお
いて正常に表示できないフィールド又はフレームを生じ
ることなく、全画像情報を復号することができる。As described above, according to the present invention, the input of the image decoding apparatus is a video ES which encodes an image of any one of a plurality of formats,
When displaying in the original format, even if the format of the input image is switched, all image information can be decoded without generating a field or frame that cannot be displayed normally at the time of switching.

【０１１４】また、飛び越し走査のビデオＥＳから順次
走査のビデオＥＳへの切り替わりにおいて、飛び越し走
査のビデオＥＳがトップ・フィールド・ファーストで
も、ボトム・フィールド・ファーストでも、ビデオＥＳ
の切り替わり時点で全てのフレームを表示できる。In switching from the interlaced video ES to the progressively scanned video ES, whether the interlaced video ES is the top field first or the bottom field first, the video ES is switched.
All frames can be displayed at the time of switching.

【０１１５】さらに、ビデオＥＳの切り替わり時に、特
定のフィールド又はフレームの画像が繰り返して表示さ
れることに伴うＰＴＳ同期出画の動作異常を避けること
ができるという顕著な効果を得ることが出来る。Furthermore, when switching the video ES, it is possible to obtain a remarkable effect that it is possible to avoid a PTS-synchronous output operation abnormality caused by repeatedly displaying an image of a specific field or frame.

【図面の簡単な説明】[Brief description of the drawings]

【図１】本発明の実施の形態における画像復号化装置の
基本構成を示すブロック図である。FIG. 1 is a block diagram illustrating a basic configuration of an image decoding device according to an embodiment of the present invention.

【図２】本実施の形態による画像復号化装置において、
２４フレーム／秒の順次走査画像を復号した後に、５
９．９４フレーム／秒の順次走査画像を復号する場合の
動作例を示すタイミング図である。FIG. 2 shows an image decoding apparatus according to the present embodiment.
After decoding a progressively scanned image of 24 frames / second, 5
FIG. 10 is a timing chart showing an operation example when decoding a progressively scanned image at 9.94 frames / sec.

【図３】本実施の形態による画像復号化装置において、
第１のシーケンサ及び復号タイミング生成手段の構成例
を示すブロック図である。FIG. 3 shows an image decoding apparatus according to the present embodiment.
FIG. 3 is a block diagram illustrating a configuration example of a first sequencer and a decoding timing generation unit.

【図４】本実施の形態による画像復号化装置において、
第１のプロセッサの動作を示すフローチャート（その
１）である。FIG. 4 shows an image decoding apparatus according to the present embodiment.
9 is a flowchart (part 1) illustrating an operation of the first processor.

【図５】本実施の形態による画像復号化装置において、
第１のプロセッサの動作を示すフローチャート（その
２）である。FIG. 5 shows an image decoding apparatus according to the present embodiment.
10 is a flowchart (part 2) illustrating the operation of the first processor.

【図６】本実施の形態による画像復号化装置において、
復号タイミング生成手段の動作を示すタイミング図であ
る。FIG. 6 shows an image decoding apparatus according to the present embodiment.
FIG. 5 is a timing chart showing the operation of the decoding timing generation means.

【図７】本実施の形態による画像復号化装置において、
５９．９４フレーム／秒の順次走査画像を復号した後
に、２４フレーム／秒の順次走査画像を復号する場合の
動作例を示すタイミング図である。FIG. 7 shows an image decoding apparatus according to the present embodiment.
FIG. 10 is a timing chart showing an operation example when decoding a progressively scanned image at 24 frames / sec after decoding a progressively scanned image at 59.94 frames / sec.

【図８】本実施の形態による画像復号化装置において、
２４フレーム／秒の順次走査画像を復号した後に、５
９．９４フィールド／秒のトップ・フィールド・ファー
ストの飛び越し走査画像を復号する場合の動作例を示す
タイミング図である。FIG. 8 shows an image decoding apparatus according to the present embodiment.
After decoding a progressively scanned image of 24 frames / second, 5
FIG. 9 is a timing chart showing an operation example when decoding a top field first interlaced scan image of 9.94 fields / second.

【図９】本実施の形態による画像復号化装置において、
２４フレーム／秒の順次走査画像を復号した後に、５
９．９４フィールド／秒のボトム・フィールド・ファー
ストの飛び越し走査画像を復号する場合の動作例を示す
タイミング図である。FIG. 9 shows an image decoding apparatus according to the present embodiment.
After decoding a progressively scanned image of 24 frames / second, 5
FIG. 10 is a timing chart showing an operation example when decoding a bottom-field-first interlaced scan image at 9.94 fields / second.

【図１０】本実施の形態による画像復号化装置におい
て、５９．９４フィールド／秒のトップ・フィールド・
ファーストの飛び越し走査画像を復号した後に、２４フ
レーム／秒の順次走査画像を復号する場合の動作例を示
すタイミング図である。FIG. 10 is a block diagram showing an image decoding apparatus according to an embodiment of the present invention.
FIG. 9 is a timing chart showing an operation example in the case of decoding a 24 frame / second progressively scanned image after decoding a first interlaced scanned image.

【図１１】本実施の形態による画像復号化装置におい
て、５９．９４フィールド／秒のボトム・フィールド・
ファーストの飛び越し走査画像を復号した後に、２４フ
レーム／秒の順次走査画像を復号する場合の動作例を示
すタイミング図である。FIG. 11 is a block diagram showing a bottom field of 59.94 fields / second in the image decoding apparatus according to the present embodiment;
FIG. 9 is a timing chart showing an operation example in the case of decoding a 24 frame / second progressively scanned image after decoding a first interlaced scanned image.

【図１２】本実施の形態による画像復号化装置におい
て、５９．９４フレーム／秒の順次走査画像を復号した
後に、５９．９４フィールド／秒のトップ・フィールド
・ファーストの飛び越し走査画像を復号する場合の動作
例を示すタイミング図である。FIG. 12 illustrates a case where the image decoding apparatus according to the present embodiment decodes a 59.94 frames / sec progressive scan image and then decodes a 59.94 fields / sec top field first interlaced scan image. FIG. 6 is a timing chart showing an operation example of FIG.

【図１３】本実施の形態による画像復号化装置におい
て、５９．９４フレーム／秒の順次走査画像を復号した
後に、５９．９４フィールド／秒のボトム・フィールド
・ファーストの飛び越し走査画像を復号する場合の動作
例を示すタイミング図である。FIG. 13 illustrates a case where the image decoding apparatus according to the present embodiment decodes a 59.94 frames / second progressively scanned image and then decodes a 59.94 fields / second bottom field first interlaced scanned image. FIG. 6 is a timing chart showing an operation example of FIG.

【図１４】本実施の形態による画像復号化装置におい
て、５９．９４フィールド／秒のトップ・フィールド・
ファーストの飛び越し走査画像を復号した後に、５９．
９４フレーム／秒の順次走査画像を復号する場合の動作
例を示すタイミング図である。FIG. 14 is a diagram illustrating an image decoding apparatus according to the present embodiment, in which 59.94 fields / second top field
After decoding the first interlaced image, 59.
FIG. 9 is a timing chart showing an operation example when decoding a progressively scanned image of 94 frames / sec.

【図１５】本実施の形態による画像復号化装置におい
て、５９．９４フィールド／秒のボトム・フィールド・
ファーストの飛び越し走査画像を復号した後に、５９．
９４フレーム／秒の順次走査画像を復号する場合の動作
例を示すタイミング図である。FIG. 15 is a block diagram showing a bottom field of 59.94 fields / second in the image decoding apparatus according to the present embodiment;
After decoding the first interlaced image, 59.
FIG. 9 is a timing chart showing an operation example when decoding a progressively scanned image of 94 frames / sec.

【符号の説明】[Explanation of symbols]

１ ＥＳ分離手段 ２ ストリームバッファメモリ ３ 可変長復号手段 ４ 逆量子化手段 ５ 逆ＤＣＴ手段 ６ 加算手段 ７ ヘッダ解析手段 ８ 第１のシーケンサ ９ 動き補償手段 １０ 第１のフレームメモリ １１ 第２のフレームメモリ １２ モード遷移検出手段 １４ 復号タイミング生成手段 ２０ 第２のシーケンサ ２１ 表示用メモリ ２３，３１４，３２０，３２１，３２２，３２３，３２
４，３２５，３３１，３３２，３３３ 出力端子 ２４ 表示画像選択手段 ３０，３１，３０１，３０２，３１０，３１１，３１
２，３１３，３１５，３１６，３２６，３３０ 入力端
子 ４０ 復号手段 ４１ 制御手段 ３００ 第１のプロセッサ ３０１ 割り込みコントローラ ３０２ 第２のプロセッサ ３０３ レジスタ ３０４ 第１のデコーダ ３０５ 第２のデコーダ ３０６ 第３のデコーダ ３０７ マスタカウンタ ３０８ ＳＴＣ再生手段Reference Signs List 1 ES separation means 2 Stream buffer memory 3 Variable length decoding means 4 Inverse quantization means 5 Inverse DCT means 6 Addition means 7 Header analysis means 8 First sequencer 9 Motion compensation means 10 First frame memory 11 Second frame memory 12 Mode transition detecting means 14 Decoding timing generating means 20 Second sequencer 21 Display memory 23, 314, 320, 321, 322, 323, 32
4,325,331,332,333 Output terminal 24 Display image selection means 30,31,301,302,310,311,31
2, 313, 315, 316, 326, 330 Input terminal 40 Decoding means 41 Control means 300 First processor 301 Interrupt controller 302 Second processor 303 Register 304 First decoder 305 Second decoder 306 Third decoder 307 Master counter 308 STC reproduction means

Claims (9)

【特許請求の範囲】[Claims] 【請求項１】 第１フレーム周波数の順次走査画像が符
号化された第１ビットストリーム、及び前記第１フレー
ム周波数よりも高い第２フレーム周波数の順次走査画像
が符号化された第２ビットストリームを入力し、前記第
１ビットストリームのデータ及び第２ビットストリーム
のデータを復号する復号手段と、 前記復号手段により前記第１ビットストリームが復号さ
れた後に、前記第２ビットストリームが入力されたこと
を検出し、モード遷移情報を出力するモード遷移検出手
段と、 前記モード遷移検出手段によりモード遷移情報が出力さ
れたとき、前記第２ビットストリームの先頭から所定数
のフレームに対する復号開始時刻を、前記第１フレーム
周波数に基づいて設定し、前記復号手段の出画動作を制
御する制御手段と、を具備することを特徴とする画像復
号化装置。1. A first bit stream in which a progressively scanned image of a first frame frequency is encoded and a second bit stream in which a progressively scanned image of a second frame frequency higher than the first frame frequency are encoded. Decoding means for inputting and decoding the data of the first bit stream and the data of the second bit stream; and that the second bit stream has been input after the first bit stream has been decoded by the decoding means. A mode transition detecting means for detecting and outputting mode transition information; and when the mode transition information is outputted by the mode transition detecting means, the decoding start time for a predetermined number of frames from the head of the second bit stream is Control means for setting based on one frame frequency and controlling an image output operation of the decoding means. Image decoding apparatus according to claim. 【請求項２】 第１フレーム周波数の順次走査画像が符
号化された第１ビットストリーム、及び前記第１フレー
ム周波数よりも高い第２フレーム周波数の順次走査画像
が符号化された第２ビットストリームを入力し、前記第
１ビットストリームのデータ及び第２ビットストリーム
のデータを復号する復号手段と、 前記復号手段により前記第２ビットストリームが復号さ
れた後に、前記第１ビットストリームが入力されたこと
を検出し、モード遷移情報を出力するモード遷移検出手
段と、 前記モード遷移検出手段によりモード遷移情報が出力さ
れたとき、前記第１ビットストリームの先頭から所定数
のフレームに対する復号開始時刻を、前記第２フレーム
周波数に基づいて設定し、かつ前記第１ビットストリー
ムの先頭から２番目のフレームに対する復号開始時刻
を、前記第２フレーム周波数における１垂直期間以上遅
らせ、前記復号手段の出画動作を制御する制御手段と、
具備することを特徴とする画像復号化装置。2. A first bit stream in which a progressive scan image of a first frame frequency is encoded, and a second bit stream in which a progressive scan image of a second frame frequency higher than the first frame frequency are encoded. Decoding means for inputting and decoding the data of the first bit stream and the data of the second bit stream; and that the first bit stream is input after the decoding of the second bit stream. A mode transition detecting means for detecting and outputting mode transition information; and when the mode transition information is outputted by the mode transition detecting means, the decoding start time for a predetermined number of frames from the head of the first bit stream is Set based on two frame frequencies, and set to the second frame from the head of the first bit stream. The decoding start time to, delayed by one vertical period or more in the second frame frequency, and control means for controlling the image output operation of the decoding means,
An image decoding device, comprising: 【請求項３】 第１フレーム周波数の順次走査画像が符
号化された第１ビットストリーム、又は前記第１フレー
ム周波数より高い第２フレーム周波数の順次走査画像が
符号化された第２ビットストリームのいずれかと、前記
第２フレーム周波数と同一値の第３フィールド周波数の
飛び越し走査画像が符号化された第３ビットストリーム
を入力し、前記第１ビットストリームのデータ又は前記
第２ビットストリームのデータ、及び第３ビットストリ
ームのデータを復号する復号手段と、 前記復号手段により前記第１ビットストリームのデータ
又は前記第２ビットストリームのデータを復号した後
に、前記第３ビットストリームが入力されたことを検出
し、モード遷移情報を出力するモード遷移検出手段と、 前記モード遷移検出手段によりモード遷移情報が出力さ
れたとき、前記第３ビットストリームの先頭から所定数
のフレームに対する復号開始時刻を、前記第１のフレー
ム周波数又は前記第２のフレーム周波数に基づいて設定
し、かつ前記第３ビットストリーム先頭から３番目のフ
レームに対する復号開始時刻を、前記第３フィールド周
波数における２垂直期間以上遅らせ、前記復号手段の出
画動作を制御する制御手段と、具備することを特徴とす
る画像復号化装置。3. A first bit stream in which a progressive scan image of a first frame frequency is encoded, or a second bit stream in which a progressive scan image of a second frame frequency higher than the first frame frequency is encoded. And a third bit stream in which an interlaced scan image of a third field frequency having the same value as the second frame frequency is encoded, and the data of the first bit stream or the data of the second bit stream is input. Decoding means for decoding data of a three-bit stream; detecting that the third bit stream has been input after decoding the data of the first bit stream or the data of the second bit stream by the decoding means; Mode transition detecting means for outputting mode transition information; When the transfer information is output, a decoding start time for a predetermined number of frames from the beginning of the third bit stream is set based on the first frame frequency or the second frame frequency, and the third bit An image decoding apparatus, comprising: control means for delaying the decoding start time for the third frame from the head of the stream by at least two vertical periods at the third field frequency, and controlling the image output operation of the decoding means. . 【請求項４】 前記第３ビットストリームは、ボトム・
フィールドがトップ・フィールドよりも先に符号化され
たボトム・フィールド・ファーストのビットストリーム
であり、 前記制御手段は、前記第３ビットストリームにおける先
頭フレーム及び２番目のフレームのデータを、前記トッ
プ・フィールド・ファーストのビットストリームを復号
する場合と同一タイミングで復号開始すると共に、前記
第３ビットストリームにおける３番目のフレームの復号
開始時刻を第３フィールド周波数における１垂直期間以
上遅らせ、３番目以降のフレームのデータを前記ボトム
・フィールド・ファーストのビットストリームを復号す
る場合のタイミングで復号開始する機能を付加したこと
を特徴とする請求項３記載の画像復号化装置。4. The method of claim 3, wherein the third bit stream is a bottom bit stream.
The field is a bottom-field first bitstream encoded before the top field, and the control means converts the data of the first frame and the second frame in the third bitstream into the top field. Decoding is started at the same timing as when decoding the first bit stream, and the decoding start time of the third frame in the third bit stream is delayed by one vertical period at the third field frequency, and 4. The image decoding apparatus according to claim 3, further comprising a function of starting decoding data at a timing when the bottom field first bit stream is decoded. 【請求項５】 第１フレーム周波数の順次走査画像が符
号化された第１ビットストリーム、及び前記第１フレー
ム周波数よりも高い第３フィールド周波数の飛び越し走
査画像が符号化された第３ビットストリームを入力し、
前記第１ビットストリームのデータ及び前記第３ビット
ストリームのデータを復号する復号手段と、 前記復号手段により前記第３ビットストリームを復号し
た後に前記第１ビットストリームが入力されたことを検
出し、モード遷移情報を出力するモード遷移検出手段
と、 前記モード遷移検出手段によりモード遷移情報が出力さ
れたとき、前記第１ビットストリームの先頭から所定数
のフレームに対する復号開始時刻を、前記第３フィール
ド周波数に基づいて設定し、かつ先頭から２番目以降の
フレームに対する復号開始時刻を、前記第３のフィール
ド周波数のトップ・フィールドの復号時刻に設定すると
共に、このフレームの復号開始時刻を第３のフィールド
周波数における２垂直期間以上遅らせ、前記復号手段の
出画動作を制御する制御手段と、具備することを特徴と
する画像復号化装置。5. A first bit stream in which a progressive scan image of a first frame frequency is encoded and a third bit stream in which an interlaced scan image of a third field frequency higher than the first frame frequency are encoded. type in,
Decoding means for decoding the data of the first bit stream and the data of the third bit stream; and detecting that the first bit stream has been input after decoding the third bit stream by the decoding means. A mode transition detecting means for outputting transition information; and when the mode transition information is outputted by the mode transition detecting means, a decoding start time for a predetermined number of frames from the head of the first bit stream is set to the third field frequency. And the decoding start time for the second and subsequent frames from the beginning is set to the decoding time of the top field of the third field frequency, and the decoding start time of this frame is set at the third field frequency. Control for delaying two or more vertical periods to control the image output operation of the decoding means Image decoding device comprising a stage, in that it comprises. 【請求項６】 第２フレーム周波数の順次走査画像が符
号化された第２ビットストリーム、及び前記第２フレー
ム周波数と同一である第３フィールド周波数の飛び越し
走査画像が符号化された第３ビットストリームを入力
し、前記第２ビットストリームのデータ及び前記第３ビ
ットストリームのデータを復号する復号手段と、 前記復号手段によりトップ・フィールド・ファーストの
前記第３ビットストリームを復号した後に前記第２ビッ
トストリームが入力されたことを検出し、モード遷移情
報を出力するモード遷移検出手段と、 前記モード遷移検出手段によりモード遷移情報が出力さ
れたとき、前記第２ビットストリームの先頭から所定数
のフレームに対する復号開始時刻を、前記第３フィール
ド周波数におけるトップ・フィールドの復号時刻に設定
し、前記復号手段の出画動作を制御する制御手段と、具
備することを特徴とする画像復号化装置。6. A second bit stream in which a progressively scanned image of a second frame frequency is encoded, and a third bit stream in which an interlaced scanned image of a third field frequency identical to the second frame frequency is encoded. And decoding means for decoding the data of the second bit stream and the data of the third bit stream; and decoding the third bit stream of top field first by the decoding means. A mode transition detecting means for detecting that the input has been input, and outputting mode transition information; and decoding the predetermined number of frames from the head of the second bit stream when the mode transition information is output by the mode transition detecting means. Decoding the start time of the top field at the third field frequency Set time, and control means for controlling the image output operation of the decoding means, the image decoding apparatus characterized by comprising. 【請求項７】 第２フレーム周波数の順次走査画像が符
号化された第２ビットストリーム、及び前記第２フレー
ム周波数と同一である第３フィールド周波数の飛び越し
走査画像が符号化された第３ビットストリームを入力
し、前記第２ビットストリームのデータ及び前記第３ビ
ットストリームのデータを復号する復号手段と、 前記復号手段によりボトム・フィールド・ファーストの
前記第３ビットストリームのデータを復号した後に、前
記第２ビットストリームが入力されたことを検出し、モ
ード遷移情報を出力するモード遷移検出手段と、 前記モード遷移検出手段によりモード遷移情報が出力さ
れたとき、前記第２ビットストリームの先頭から所定数
のフレームに対する復号開始時刻を、前記第３のフィー
ルド周波数におけるボトム・フィールドの復号時刻に設
定し、前記復号手段の出画動作を制御する制御手段と、
具備することを特徴とする画像復号化装置。7. A second bit stream in which a progressively scanned image having a second frame frequency is encoded, and a third bit stream in which an interlaced scanned image having a third field frequency identical to the second frame frequency is encoded. And decoding means for decoding the data of the second bit stream and the data of the third bit stream; and decoding the data of the third bit stream in bottom field first by the decoding means. A mode transition detecting means for detecting that a 2-bit stream has been input and outputting mode transition information; and when the mode transition information is output by the mode transition detecting means, a predetermined number of The decoding start time for the frame is set to the bottom field at the third field frequency. Set the decoding time of the field, and control means for controlling the image output operation of the decoding means,
An image decoding device, comprising: 【請求項８】 前記制御手段は、 前記モード遷移検出手段からモード遷移情報が出力され
てからの所定数のフレームについて、表示タイムスタン
プに基づいて出力画像を基準時刻に同期させる動作を停
止する機能を付加したことを特徴とする請求項１〜７の
いずれか１項記載の画像復号化装置。8. A function for stopping an operation of synchronizing an output image with a reference time based on a display time stamp for a predetermined number of frames after mode transition information is output from the mode transition detection unit. The image decoding apparatus according to any one of claims 1 to 7, further comprising: 【請求項９】 前記第１のフレーム周波数は２４Ｈｚで
あり、前記第２のフレーム周波数及び前記第３のフィー
ルド周波数は夫々５９．９４Ｈｚ又は６０Ｈｚであるこ
とを特徴とする請求項１〜８のいずれか１項記載の画像
復号化装置。9. The method according to claim 1, wherein the first frame frequency is 24 Hz, and the second frame frequency and the third field frequency are 59.94 Hz or 60 Hz, respectively. The image decoding device according to claim 1.