JPH08205147A - Method and device for decoding image - Google Patents
Method and device for decoding imageInfo
- Publication number
- JPH08205147A JPH08205147A JP1025395A JP1025395A JPH08205147A JP H08205147 A JPH08205147 A JP H08205147A JP 1025395 A JP1025395 A JP 1025395A JP 1025395 A JP1025395 A JP 1025395A JP H08205147 A JPH08205147 A JP H08205147A
- Authority
- JP
- Japan
- Prior art keywords
- picture
- frame memory
- frame
- decoding
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Image Processing (AREA)
- Television Signal Processing For Recording (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
Description
【０００１】[0001]
【産業上の利用分野】本発明は、画像復号化方法及び画
像復号化装置に関し、特に、画像圧縮の国際標準化委員
会の一つであるＭＰＥＧ（Moving Picture Experts Gro
up）によって制定された動画像符号化／復号化方式（Ｍ
ＰＥＧ１又はＭＰＥＧ２）を適用する画像復号化方法及
び画像復号化装置に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image decoding method and an image decoding apparatus, and more particularly to MPEG (Moving Picture Experts Gro) which is one of the international standardization committees for image compression.
video coding / decoding method (M
The present invention relates to an image decoding method and an image decoding device to which PEG1 or MPEG2) is applied.
【０００２】[0002]
【背景説明】ＣＤ−ＲＯＭ等の蓄積メディアによる再生
には、早送り、巻き戻し、中途再生、逆転再生又は停止
といったトリック・モードが必要とされるが、ＭＰＥＧ
１やＭＰＥＧ２（以下「ＭＰＥＧ」と略す）では、符号
化された画像データが前後の画面データをもとにした
「双方向予測」（後述）で作られているために、１画面
だけでは完結した情報にならず、上記トリック・モード
の実現に不都合をきたすから、何枚かの画面データを一
まとまりにしたＧＯＰ（Group of Pictures）構造を採
用する。BACKGROUND ART Playback by a storage medium such as a CD-ROM requires a trick mode such as fast forward, rewind, halfway play, reverse play or stop.
In 1 and MPEG2 (hereinafter abbreviated as "MPEG"), the encoded image data is created by "bidirectional prediction" (described later) based on the previous and next screen data, so one screen is sufficient. Therefore, the GOP (Group of Pictures) structure in which several pieces of screen data are grouped together is adopted because the above-mentioned information is not obtained and it is inconvenient to realize the trick mode.
【０００３】一つのＧＯＰは、一般に、０．５秒（１５
枚の画面データ）程度の画像情報をグループ化して構成
される。その中の少なくとも１枚の画面データは、完結
情報（前後画面の情報を利用せずに再生できる画面デー
タ）である。この完結情報をもとに、他の画面データの
再生が可能になる。双方向予測は、過去再生画面からの
画面予測（順方向予測）に加えて、未来再生画面からの
画面予測（逆方向予測）も行なうというものである。な
お、未来の画面を予測に使うということは、単に、処理
順の変更と時間の基準をずらしただけのことであり、ス
キップした過去の画面（以前の現在）を、現在の画面
（以前の未来）と、ずっと前の画面（以前の過去）から
つくるという意味である。Generally, one GOP is 0.5 seconds (15 seconds).
Image information of about screen data) is grouped and configured. At least one screen data among them is completion information (screen data that can be reproduced without using the information of the previous and next screens). Based on this completion information, other screen data can be reproduced. The bidirectional prediction is to perform screen prediction (forward prediction) from the future playback screen in addition to screen prediction (forward prediction) from the past playback screen. Note that using the future screen for prediction is simply changing the processing order and shifting the time reference.The skipped past screen (previous present) is replaced with the current screen (previous It means making from the future) and the screen long ago (the past).
【０００４】ＭＰＥＧでは、上述の双方向予測を実現す
るために、Ｉピクチャ、Ｐピクチャ及びＢピクチャとい
った三つの画像タイプ（ピクチャ・タイプ）を規定す
る。 『Ｉピクチャ』Intra-Picture（イントラ符号化画像）
の略。フレーム内符号化画像ともいう。その情報だけか
ら符号化された画面で、フレーム間予測を使わずに生成
される。フレーム内の空間的な冗長度を除くことで圧縮
を実行する。他の参照フレームを必要としない。一つの
ＧＯＰ内にはランダム・アクセスのために最低１枚のＩ
ピクチャが必要で、かつ、ＧＯＰの先頭（伝送メディア
上の並び順で）には必ずＩピクチャを置くことが規定さ
れている。Ｉピクチャ内のすべてのマクロブロック・タ
イプは、イントラ（フレーム内符号化）である。 『Ｐピクチャ』Predictive-Picture（Predictive符号化
画像）の略。フレーム間順方向予測符号化画像ともい
う。過去の参照フレーム（Ｉ又はＰピクチャ）からのフ
レーム間予測を行うことによってできる圧縮画面。一般
的にＰピクチャ内のマクロブロック・タイプは、イント
ラ・マクロブロック（フレーム内予測画面）と、フォワ
ード・インター・マクロブロック（順方向フレーム間予
測画面）の両方を含む。 『Ｂピクチャ』Bidirectionally Predictive-Picture
（Bidirectionally Predictive符号化画像）の略。双方
向予測符号化画像ともいう。Ｂピクチャは、ＭＰＥＧの
特徴である双方向予測……過去の参照フレーム（Ｉ又は
Ｐピクチャ）と未来の参照フレーム（Ｉ又はＰピクチ
ャ）から予測した画面を符号化し圧縮する……によって
できる画面であり、双方向予測によって、より少ないビ
ット数で符号化できる（圧縮率が高い）。Ｂピクチャ
は、一般的に以下に示すａ〜ｄのマクロブロック・タイ
プを含む。 ａ．フレーム内情報だけで符号化するフレーム内予測符
号化、 ｂ．過去（の再生画像）から予測する順方向（forwar
d）フレーム間予測符号化、 ｃ．未来（の再生画面）から予測する逆方向（backwar
d）フレーム間予測符号化、 ｄ．過去と未来（の再生画面）からの予測による内挿的
（interpolative）フレーム間予測符号化、 なお、ｄの内挿的予測とは、順方向予測と逆方向予測の
二つの予測を対応画素間で、（丸め付き）平均すること
である。Ｂピクチャは、ＧＯＰ内になくても構わない
（すなわち、Ｉ、Ｐピクチャの周期Ｍが１の場合）が、
存在する場合（Ｍ＞１）は、ＧＯＰ内の先頭と最後にＢ
ピクチャを置いてはならない（要するに、ＧＯＰの先頭
はＩピクチャであり、最後はＩピクチャかＰピクチャで
ある）。In MPEG, three image types (picture types) such as an I picture, a P picture and a B picture are specified in order to realize the above-described bidirectional prediction. "I picture" Intra-Picture (Intra coded image)
Stands for. Also called an intra-frame coded image. A screen encoded from only that information and generated without interframe prediction. Performs compression by removing spatial redundancy within the frame. No other reference frame is needed. At least one I for random access in one GOP
It is stipulated that a picture is required and that an I picture is always placed at the head of the GOP (in the order of arrangement on the transmission medium). All macroblock types in I-pictures are intra (intraframe coded). "P picture" Abbreviation of Predictive-Picture (Predictive coded image). It is also called an inter-frame forward prediction coded image. A compressed screen obtained by performing inter-frame prediction from past reference frames (I or P pictures). Generally, the macroblock type in a P picture includes both an intra macroblock (intra-frame prediction screen) and a forward inter macroblock (forward inter-frame prediction screen). "B picture" Bidirectionally Predictive-Picture
Abbreviation for (Bidirectionally Predictive encoded image). It is also called a bidirectional predictive coded image. A B picture is a screen that can be formed by bidirectional prediction, which is a feature of MPEG ... A screen predicted from a past reference frame (I or P picture) and a future reference frame (I or P picture) is encoded and compressed. Yes, bidirectional prediction enables coding with a smaller number of bits (higher compression rate). B-pictures generally include the following macroblock types a to d. a. Intra-frame predictive coding that encodes only intra-frame information, b. Forward direction (forwar) predicted from the past (reproduced image)
d) interframe predictive coding, c. Reverse direction (backwar) to predict from the future (playback screen)
d) interframe predictive coding, d. Interpolative inter-frame predictive coding by prediction from past and future (reproduction screens), and interpolative prediction of d means that two predictions of forward prediction and backward prediction are performed between corresponding pixels. And it is to average (with rounding). The B picture does not have to be in the GOP (that is, when the cycle M of the I and P pictures is 1),
If present (M> 1), B at the beginning and end of the GOP
No picture should be placed (in short, a GOP starts with an I picture and ends with an I or P picture).
【０００５】図１１は、処理及び各メディア上における
画面の並びを示す模式図である。上から順に、原画像、
符号化処理、メディア上（蓄積メディア又は伝送メディ
ア）、復号化処理、再生画像である。升目は画面を表し
ており、升目内に記した符号の１文字目（Ｉ、Ｐ又は
Ｂ）はピクチャタイプを、２文字目（０、１、……、１
４）は１ＧＯＰ内における画面の順番を表している。な
お、ここでは、Ｎ（ピクチャ数）＝１５の例を示してい
るが、これに限定されない。FIG. 11 is a schematic diagram showing processing and arrangement of screens on each medium. From top to bottom, the original image,
Encoding processing, on media (storage medium or transmission medium), decoding processing, and reproduced image. The square represents a screen, and the first character (I, P or B) of the code written in the square indicates the picture type and the second character (0, 1, ..., 1).
4) represents the order of screens in one GOP. Although an example of N (number of pictures) = 15 is shown here, the present invention is not limited to this.
【０００６】各ピクチャの処理順を追ってみると、符号
化処理では、Ｂピクチャをスキップして次のＩ又はＰピ
クチャを符号化し、その後、間にあるＢピクチャを符号
化する。具体的には、Ｂ０、Ｂ１をスキップしてＩ２を
符号化し、そのＩ２をＧＯＰの先頭に配置した後、Ｂ
０、Ｂ１を符号化してＩ２の後に並べる。以降、Ｐ５、
Ｂ３、Ｂ４、Ｐ８、Ｂ６、Ｂ７、……、Ｂ１２、Ｂ１３
の順に配置して１ＧＯＰのビットストリーム（ビット
列）を完成する。復号化処理では、Ｂピクチャは直ちに
復号して表示されるが、Ｉ及びＰピクチャは、復号後
も、間に入るＢピクチャの処理が終わってから表示され
る。In the coding process, the B picture is skipped, the next I or P picture is coded, and then the intervening B picture is coded. Specifically, after skipping B0 and B1, encoding I2 and arranging I2 at the head of GOP,
0 and B1 are encoded and arranged after I2. After that, P5,
B3, B4, P8, B6, B7, ..., B12, B13
Are arranged in this order to complete a bit stream (bit string) of 1 GOP. In the decoding process, the B picture is immediately decoded and displayed, but the I and P pictures are displayed even after the decoding of the intervening B picture.
【０００７】復号化処理において、ＰピクチャとＢピク
チャでは、それぞれ予測参照画面（もとになる画像）が
必要になる。たとえば、ＭＰＥＧ１（及びＭＰＥＧ２の
フレーム構造）では、Ｐピクチャは、最近に復号された
１枚のＩピクチャ（又はＰピクチャ）を参照画面とす
る。また、Ｂピクチャは、最近に復号された過去と未来
のＩピクチャ（又はＰピクチャ）のうち、過去から１
枚、未来から１枚を参照画面とする。In the decoding process, the P picture and the B picture each require a prediction reference screen (original image). For example, in MPEG1 (and the frame structure of MPEG2), the P picture uses one recently decoded I picture (or P picture) as a reference screen. The B picture is one of the past and future I pictures (or P pictures) that has been recently decoded.
One sheet from the future and one sheet from the future are used as reference screens.
【０００８】[0008]
【従来の技術】図１２は、従来の画像復号化装置の概略
ブロック図であり、１はバッファ制御部、２は可変長復
号器、３はスキャン変換器、４は逆量子化器、５は逆Ｄ
ＣＴ部、６は動き補償画像再生部、７はバッファ８及び
三つのフレームメモリ９〜１１を含むメモリ部である。
なお、各部の詳細な説明は、後述の実施例と共通する部
分が多いため、ここでは、発明の課題の理解に必要な程
度にとどめるものとする。2. Description of the Related Art FIG. 12 is a schematic block diagram of a conventional image decoding apparatus, in which 1 is a buffer controller, 2 is a variable length decoder, 3 is a scan converter, 4 is a dequantizer, and 5 is a dequantizer. Reverse D
A CT unit, 6 is a motion compensation image reproducing unit, and 7 is a memory unit including a buffer 8 and three frame memories 9 to 11.
It should be noted that since the detailed description of each part has many parts in common with the embodiments described later, the description here is limited to the extent necessary for understanding the problems of the invention.
【０００９】第１のフレームメモリ９は、Ｉピクチャ又
はＰピクチャを格納し、第２のフレームメモリ１０は、
Ｐピクチャを格納し、第３のフレームメモリ１１は、Ｂ
ピクチャを格納する。先にも述べたように、ＭＰＥＧ１
（及びＭＰＥＧ２のフレーム構造）では、Ｐピクチャの
参照画面に、最近に復号された１枚のＩピクチャ（又は
Ｐピクチャ）を使用する。また、Ｂピクチャの参照画面
に、最近に復号された過去と未来のＩピクチャ（又はＰ
ピクチャ）のうち、過去から１枚、未来から１枚を使用
する。The first frame memory 9 stores I pictures or P pictures, and the second frame memory 10 stores
P picture is stored, and the third frame memory 11 stores B picture.
Stores a picture. As mentioned earlier, MPEG1
In (and the frame structure of MPEG2), one recently decoded I picture (or P picture) is used as a P picture reference screen. In addition, the past and future I pictures (or P) that have been recently decoded are displayed on the B picture reference screen.
Of the pictures, one from the past and one from the future are used.
【００１０】たとえば、第１のフレームメモリ９にＩピ
クチャが格納されている状態で、次のＰピクチャを再生
する際には、第１のフレームメモリ９内のＩピクチャを
参照画面として使用する。再生されたＰピクチャは、第
２のフレームメモリ１０に格納され、所定の表示タイミ
ングで読み出される。又は、第１のフレームメモリ９に
Ｉピクチャが格納され、さらに、第２のフレームメモリ
１０にＰピクチャが格納されている状態で、これらのＩ
ピクチャとＰピクチャの間に挿入するＢピクチャを再生
する際には、第１及び第２のフレームメモリ９、１０内
のＩピクチャ及びＰピクチャを参照画面として使用す
る。再生されたＢピクチャは第３のフレームメモリ１１
に格納され、所定の表示タイミングで読み出される。For example, when the next P picture is reproduced with the I picture stored in the first frame memory 9, the I picture in the first frame memory 9 is used as a reference screen. The reproduced P picture is stored in the second frame memory 10 and read at a predetermined display timing. Alternatively, when I pictures are stored in the first frame memory 9 and P pictures are stored in the second frame memory 10, these I pictures are stored.
When reproducing the B picture inserted between the picture and the P picture, the I picture and the P picture in the first and second frame memories 9 and 10 are used as reference screens. The reproduced B picture is stored in the third frame memory 11
And is read at a predetermined display timing.
【００１１】ここで、ＭＰＥＧのトリックモードの「停
止」には、「ポーズ」と「フリーズ」がある。どちらも
画面を停止させる点では同じであるが、ポーズは、その
解除時に、ポーズ開始直後の画面から表示を再開するの
に対し、フリーズは、フリーズ期間中の画面を読み飛ば
して表示を再開する点で相違する。本願発明は、フリー
ズ機能に関するものである。Here, the "stop" of the trick mode of MPEG includes "pause" and "freeze". Both of them are the same in that the screen is stopped, but the pause restarts the display from the screen immediately after the start of the pause when releasing it, whereas the freeze restarts the display by skipping the screen during the freeze period. Differences in points. The present invention relates to a freeze function.
【００１２】かかるフリーズ機能は、図１２の構成であ
れば、フリーズが指示された時点で読み出しモードとな
っていたフレームメモリ（第１〜第３のフレームメモリ
９〜１１の一つ）を、フリーズの期間中、そのまま読み
出しモードに固定し続けることによって実現できる。た
とえば、第１のフレームメモリ９が読み出しモードとな
っているときに、フリーズが指示されたら、以降、その
第１のフレームメモリ９を読み出しモードに固定すれば
よい。同一のピクチャが継続的に出力され続けるから、
画面表示が１枚の絵でフリーズされる。With the configuration shown in FIG. 12, the freeze function freezes the frame memory (one of the first to third frame memories 9 to 11) in the read mode when the freeze is instructed. This can be achieved by keeping the read mode fixed during the period. For example, when the freeze is instructed while the first frame memory 9 is in the read mode, the first frame memory 9 may be fixed to the read mode thereafter. Since the same picture is continuously output,
The screen display is frozen with one picture.
【００１３】図１２の構成の場合、フリーズ期間中は、
復号化処理が行われないようになっている。すなわち、
同期間中は、入力ビットストリームを破棄し続け、フリ
ーズの解除指示に応答して復号を再開する。そして、新
しい復号画像が得られた時点で、フリーズを実際に解除
するようになっている。In the case of the configuration of FIG. 12, during the freeze period,
Decryption processing is not performed. That is,
During the same period, the input bit stream is continuously discarded and decoding is restarted in response to the freeze release instruction. Then, when a new decoded image is obtained, the freeze is actually released.
【００１４】[0014]
【発明が解決しようとする課題】しかしながら、上述の
フリーズ技術では、フリーズの解除指示と、実際のフリ
ーズ解除との間にタイムラグが生じるから、操作上の違
和感を否めないという問題点がある。なお、フリーズ専
用のフレームメモリを備え、フリーズ期間中は、この専
用のメモリから表示画像を読み出し、それと並行して、
第１〜第３のフレームメモリ９〜１１に復号画像を書き
込むようにすれば、フリーズの解除後、直ちに新しい復
号画像が得られ、上記問題点を解消できるが、反面、フ
リーズ専用のフレームメモリの分だけメモリ容量が増え
るという集積回路にとって無視できない欠点を招来する
ことになる。However, in the above-mentioned freeze technique, there is a problem that a sense of incompatibility cannot be denied because a time lag occurs between the freeze release instruction and the actual freeze release. A frame memory dedicated to freeze is provided, and during the freeze period, the display image is read from this dedicated memory and in parallel with it,
If the decoded image is written in the first to third frame memories 9 to 11, a new decoded image can be obtained immediately after releasing the freeze, and the above problem can be solved, but on the other hand, in the frame memory dedicated to the freeze, This brings about a drawback that the memory capacity increases by an amount which cannot be ignored for the integrated circuit.
【００１５】[0015]
【目的】そこで、本発明は、メモリ容量を増やさずに、
フリーズの解除指示と実際のフリーズ解除との間のタイ
ムラグをなくすことを目的とする。[Purpose] Therefore, the present invention, without increasing the memory capacity,
The purpose is to eliminate the time lag between the freeze release instruction and the actual freeze release.
【００１６】[0016]
【課題を解決するための手段】請求項１記載の方法発明
は、他の参照フレームを必要とせずに符号化されたＩピ
クチャと、過去のフレームを参照フレームとして符号化
されたＰピクチャと、過去のフレーム及び未来のフレー
ムを参照フレームとして符号化されたＢピクチャと、を
含むビットストリームから、前記Ｉピクチャ、Ｐピクチ
ャ及びＢピクチャを復号化し、各画像を再生する画像復
号化方法であって、前記Ｉピクチャの再生を自己完結で
行う一方、前記Ｐピクチャの再生を過去のＩピクチャ又
はＰピクチャからの予測で行なうとともに、前記Ｂピク
チャの再生を過去のＩピクチャ又はＰピクチャと未来の
Ｉピクチャ又はＰピクチャからの予測で行なう画像復号
化方法において、画面表示の停止と同停止期間中におけ
る画面情報の破棄とを指令するフリーズ動作の開始が指
示されると、 該指示の時点で表示読み出しの対象とな
っていた、Ｉピクチャ、Ｐピクチャ又はＢピクチャの再
生画像格納用フレームメモリを、その後も表示読み出し
用に固定し、かつ、前記フリーズ動作の期間中は、復号
化される前又は復号化の途中でＢピクチャのビットスト
リームを破棄するとともに、復号化後のＩピクチャ又は
Ｐピクチャを、表示読み出し用に固定されているフレー
ムメモリ以外のフレームメモリに書き込む、ことを特徴
とする。According to a first aspect of the present invention, an I picture encoded without requiring another reference frame and a P picture encoded with a past frame as a reference frame are provided. An image decoding method for decoding the I-picture, P-picture and B-picture from a bitstream including a B-picture encoded using a past frame and a future frame as a reference frame and reproducing each image. , The I picture is reproduced by itself, the P picture is reproduced by prediction from the past I picture or P picture, and the B picture is reproduced by past I picture or P picture and future I picture. In the image decoding method performed by prediction from a picture or P picture, screen display is stopped and screen information is discarded during the stop period. When an instruction to start a freeze operation is issued, the frame memory for storing the reproduced image of the I picture, P picture, or B picture, which was the target of display readout at the time of the instruction, is used for display readout thereafter. It is fixed, and during the freeze operation, the bit stream of B picture is discarded before decoding or during decoding, and the decoded I picture or P picture is fixed for display readout. Writing to a frame memory other than the existing frame memory.
【００１７】請求項２記載の装置発明は、１ＧＯＰ内の
Ｉピクチャ、Ｐピクチャ及びＢピクチャを識別するピク
チャ識別手段と、画面表示の停止と同停止期間中におけ
る画面情報の破棄とを指令するフリーズ動作の開始指示
及び解除指示を検出するフリーズ動作検出手段と、フリ
ーズ動作の開始指示の時点で表示読み出しの対象となっ
ていた、Ｉピクチャ、Ｐピクチャ又はＢピクチャの再生
画像格納用フレームメモリを、その後も表示読み出し用
に固定するメモリ固定手段と、フリーズ動作の開始指示
から解除指示までの期間、復号化される前又は復号化の
途中でＢピクチャのビットストリームを破棄するビット
ストリーム破棄手段と、フリーズ動作の開始指示から解
除指示までの期間、復号化後のＩピクチャ又はＰピクチ
ャを、表示読み出し用に固定されているフレームメモリ
以外のフレームメモリに書き込む書込み手段と、を備え
たことを特徴とする。According to a second aspect of the present invention, a freeze for instructing a picture identification means for identifying an I picture, a P picture and a B picture in one GOP, and stopping the screen display and discarding the screen information during the same stop period. A freeze operation detecting means for detecting an operation start instruction and an operation release instruction; and a frame memory for storing a reproduced image of an I picture, a P picture or a B picture, which was a display read target at the time of the freeze operation start instruction. After that, memory fixing means for fixing the display reading, and bitstream discarding means for discarding the B-picture bitstream before or during decoding during the period from the freeze operation start instruction to the release instruction, During the period from the freeze operation start instruction to the release instruction, the decoded I-picture or P-picture is displayed and read. And writing means for writing into the frame memory other than the frame memory, which is fixed in use, characterized by comprising a.
【００１８】[0018]
【作用】請求項１又は２記載の発明では、 （１）フリーズ動作が開始されると、その時点で表示読
み出しになっていたフレームメモリが、以降も表示読み
出しに固定される。したがって、同フレームメモリが、
あたかもフリーズ用のフレームメモリとして機能するか
ら、別途にフリーズ専用のフレームメモリを設ける必要
がなく、メモリ容量の増加が回避される。 （２）また、フリーズ期間中は、Ｂピクチャのビットス
トリームが破棄され、それ以外のピクチャ（Ｉピクチャ
又はＰピクチャ）の復号処理だけが継続される。したが
って、フリーズ期間が終わったときには、最新の参照情
報（Ｉピクチャ又はＰピクチャ）がフレームメモリに格
納されているから、この最新の参照情報を元にして、フ
リーズ動作解除後のＰピクチャやＢピクチャを直ちに再
生でき、タイムラグをなくすことができる。According to the invention described in claim 1 or 2, (1) When the freeze operation is started, the frame memory, which has been subjected to the display reading at that time, is fixed to the display reading thereafter. Therefore, the same frame memory
Since it functions as a frame memory for freeze, it is not necessary to separately provide a frame memory dedicated to freeze, and an increase in memory capacity can be avoided. (2) Also, during the freeze period, the bit stream of B picture is discarded, and only the decoding process of other pictures (I picture or P picture) is continued. Therefore, when the freeze period ends, the latest reference information (I picture or P picture) is stored in the frame memory. Therefore, based on this latest reference information, the P picture or B picture after the freeze operation is released. Can be immediately regenerated and the time lag can be eliminated.
【００１９】[0019]
【実施例】以下、本発明の実施例を図面に基づいて説明
する。図１〜図８は本発明に係る画像復号化方法及び画
像復号化装置の第１実施例を示す図である。なお、本実
施例において、従来例（図１２）と共通する回路要素に
は同一の符号（１桁の数字）を付してある。Embodiments of the present invention will be described below with reference to the drawings. 1 to 8 are diagrams showing a first embodiment of an image decoding method and an image decoding apparatus according to the present invention. In the present embodiment, circuit elements common to the conventional example (FIG. 12) are designated by the same reference numerals (single digit number).
【００２０】まず、構成を説明する。図１において、１
はバッファ制御部、２０は可変長復号器、３はスキャン
変換器、４は逆量子化器、５は逆ＤＣＴ部、６０は動き
補償画像再生部、１００はモードレジスタ、７はメモリ
部であり、メモリ部７は、バッファ８、第１のフレーム
メモリ９、第２のフレームメモリ１０及び第３のフレー
ムメモリ１１を含んでいる。First, the structure will be described. In FIG. 1, 1
Is a buffer control unit, 20 is a variable length decoder, 3 is a scan converter, 4 is an inverse quantizer, 5 is an inverse DCT unit, 60 is a motion compensation image reproducing unit, 100 is a mode register, and 7 is a memory unit. The memory unit 7 includes a buffer 8, a first frame memory 9, a second frame memory 10 and a third frame memory 11.
【００２１】バッファ制御部１は、入力ビットストリー
ムのバッファ８への書込みと読み出しを制御するもの
で、内部の処理スピードに合うように入力ビットストリ
ームの速度を調節をするものである。可変長復号器２０
は、入力ビットストリームを構成する各階層を上位階層
から順番に復号化するもので、図２に示すように、シー
ケンス層復号部２１、ＧＯＰ復号部２２、ピクチャ層復
号部２３、スライス層復号部２４及びスライスデータ復
号部２５などから構成されている。ここで、ピクチャ層
復号部２３は、１ＧＯＰ内に含まれる少なくとも１枚以
上の画面データのピクチャタイプ（Ｉ、Ｐ又はＢ）を識
別し、その情報（以下、単に「ピクチャタイプ」と言
う）を出力する機能を有している。たとえば、ピクチャ
層のＰＣＴ（Picture Coding Type）エントリをデコー
ドし、その値が「００１」であればＩピクチャを、「０
１０」であればＰピクチャを、「０１１」であればＢピ
クチャを識別できる。したがって、ピクチャ復号部２３
は、発明の要旨に記載の「ピクチャ識別手段」に相当す
る。The buffer control unit 1 controls writing and reading of the input bit stream to and from the buffer 8, and adjusts the speed of the input bit stream to match the internal processing speed. Variable length decoder 20
Is for decoding each layer forming the input bitstream in order from the upper layer, and as shown in FIG. 2, a sequence layer decoding unit 21, a GOP decoding unit 22, a picture layer decoding unit 23, and a slice layer decoding unit. 24, a slice data decoding unit 25, and the like. Here, the picture layer decoding unit 23 identifies the picture type (I, P, or B) of at least one or more pieces of screen data included in one GOP, and uses that information (hereinafter, simply referred to as “picture type”). It has a function to output. For example, a PCT (Picture Coding Type) entry in the picture layer is decoded, and if the value is “001”, the I picture is set to “0”.
A "10" can identify a P picture, and a "011" can identify a B picture. Therefore, the picture decoding unit 23
Corresponds to the "picture identifying means" described in the summary of the invention.
【００２２】スキャン変換器３は、可変長復号器２０の
出力、すなわち、動画のデータストリームをエントロピ
復号化（ハフマン復号化）して、可変長符号を固定長符
号に戻したものを受け、その順番を並べ替える処理を行
う。逆量子化器４は、並べ替えられた各画像の画素ブロ
ック（８×８画素）内の画素ごとにその各係数に所定の
乗数（量子化ステップと呼ばれる）を掛ける処理を行
う。逆ＤＣＴ部５は、符号器側で実行される離散コサイ
ン変換（Discrete Cosine Transform）とほぼ逆の処理
（逆ＤＣＴ処理）を画素ブロック（以下、便宜的にブロ
ック＝フレームとする）ごとに行なうもので、これによ
り、周波数領域から元の空間領域へと戻される。イント
ラ符号化（Ｉピクチャ）については、実際の画素値が取
り出され、また、フレーム間順方向予測符号化（Ｐピク
チャ）や双方向予測符号化（Ｂピクチャ）については、
各画素の差分量が取り出される。動き補償画像再生部６
０は、ＰピクチャとＢピクチャに対する動き補償を行な
うもので、Ｐピクチャについては、動きベクトルを考慮
しながら、逆ＤＣＴ処理で計算した差分量を対応する画
素に加える。Ｂピクチャに対しては、過去の参照フレー
ムと未来の参照フレームの平均値に差分量を加える。The scan converter 3 receives the output of the variable length decoder 20, that is, the one obtained by entropy decoding (Huffman decoding) the data stream of the moving image and converting the variable length code into the fixed length code. Perform processing to rearrange the order. The inverse quantizer 4 performs processing for multiplying each coefficient by a predetermined multiplier (called a quantization step) for each pixel in the pixel block (8 × 8 pixels) of each rearranged image. The inverse DCT unit 5 performs a process (inverse DCT process) that is almost the reverse of the discrete cosine transform performed on the encoder side for each pixel block (hereinafter, for convenience, block = frame). Then, this returns the frequency domain to the original spatial domain. For intra coding (I picture), the actual pixel value is extracted, and for interframe forward predictive coding (P picture) and bidirectional predictive coding (B picture),
The difference amount of each pixel is extracted. Motion compensation image reproduction unit 6
0 is for performing motion compensation on the P picture and the B picture. For the P picture, the difference amount calculated by the inverse DCT process is added to the corresponding pixel while considering the motion vector. For the B picture, the difference amount is added to the average value of the past reference frame and the future reference frame.
【００２３】図３は、動き補償画像再生部６０の要部ブ
ロック図である。ここに、６１はフリーズ動作（後述）
期間中のＢピクチャを破棄するステップである。すなわ
ち、ステップ６１は、フリーズ期間を示す信号がアクテ
ィブで、かつ、ピクチャタイプが“Ｂ”のときに“ＹＥ
Ｓ”となって、ループを繰り返すもので、ループ中は、
動き補償画像再生処理６２へのデータ送出を禁止するも
のである。したがって、このステップ６１は、フリーズ
期間中、復号化の途中でＢピクチャのビットストリーム
を破棄する「ビットストリーム破棄手段」としての機能
を有している。なお、ここでは、ステップ６１をソフト
ウエア的に表現しているが、ハードロジックで構成して
も構わない。FIG. 3 is a block diagram of the essential parts of the motion compensation image reproducing unit 60. Here, 61 is a freeze operation (described later).
This is a step of discarding B-pictures during the period. That is, in step 61, when the signal indicating the freeze period is active and the picture type is “B”, “YE
It becomes "S" and repeats the loop. During the loop,
Data transmission to the motion compensation image reproduction processing 62 is prohibited. Therefore, this step 61 has a function as "bitstream discarding means" for discarding the B-picture bitstream during decoding during the freeze period. Although step 61 is expressed as software here, it may be configured by hardware logic.
【００２４】動き補償画像再生部６０には、アドレス生
成部６３も含まれている。このアドレス生成部６３は、
ピクチャタイプ（Ｉ、Ｐ、Ｂ）とフリーズ期間（期間
内、期間外）に応じて、メモリ部７に形成された三つの
フレームメモリ（第１〜第３のフレームメモリ９〜１
１）を選択するアドレスを発生するものである。図４
は、三つのフレームメモリ９〜１１とバッファ８とを１
６メガビットの容量をもつシンクロナス・ダイナミック
メモリを用いて構成した場合のアドレスマップの例であ
る。マップは、特に限定しないが、同一容量（５１２行
×２５６列×２バンク）の四つの領域に分けられてお
り、一番下の領域がバッファ８に、２番目の領域が第１
のフレームメモリ９に、３番目の領域が第２のフレーム
メモリ１０に、一番上の領域が第３のフレームメモリ１
１に割り当てられている。便宜的に図面の下から上へと
連続して行アドレスが振られているとすると、マップの
行数は最大２，０４８行であるから、行アドレスは１１
ビットで「00,000,000,000」から「11,111,111,111」ま
での範囲となり、その範囲内で、バッファ８は「00,00
0,000,000」〜「00,111,111,111」まで、第１のフレー
ムメモリ９は「01,000,000,000」〜「01,111,111,111」
まで、第２のフレームメモリ１０は「10,000,000,000」
〜「10,111,111,111」まで、第３のフレームメモリ１１
は「11,000,000,000」〜「11,111,111,111」までの範囲
をとる。ここで、行アドレスの上位２ビットに着目する
と、バッファ８では常に「００」、第１のフレームメモ
リ９では常に「０１」、第２のフレームメモリ１０では
常に「１０」、第３のフレームメモリ１１では常に「１
１」になっている。したがって、図４のマップであれ
ば、行アドレスの上位２ビットを指定するだけで、三つ
のフレームメモリ（第１〜第３のフレームメモリ９〜１
１）を自在に切り換えることができ、たとえば、フリー
ズ動作の開始時点で表示読み出しのモードになっていた
フレームメモリの行アドレス（の上位２ビット）を出力
し続ければ、そのフレームメモリを、その後も表示読み
出し用に固定し続けることができるから、アドレス生成
部６３は、発明の要旨に記載の「メモリ固定手段」に相
当している。また、表示読み出しに固定されていない他
のフレームメモリに対しては、通常どおりのアドレスを
出力できるから、アドレス生成部６３は、発明の要旨に
記載の「書込み手段」にも相当している。The motion compensation image reproducing section 60 also includes an address generating section 63. The address generator 63
Three frame memories (first to third frame memories 9 to 1) formed in the memory unit 7 according to the picture type (I, P, B) and the freeze period (inside period, outside period).
An address for selecting 1) is generated. FIG.
Sets the three frame memories 9 to 11 and the buffer 8 to 1
It is an example of an address map in the case of using a synchronous dynamic memory having a capacity of 6 megabits. Although the map is not particularly limited, it is divided into four areas having the same capacity (512 rows × 256 columns × 2 banks). The bottom area is the buffer 8 and the second area is the first area.
Frame memory 9, the third area is the second frame memory 10, and the uppermost area is the third frame memory 1.
It is assigned to 1. For convenience sake, if the row addresses are continuously assigned from the bottom to the top of the drawing, the maximum number of rows in the map is 2,048, so the row address is 11
Bits range from "00,000,000,000" to "11,111,111,111". Within that range, buffer 8 is "00,00".
From 0,000,000 "to" 00,111,111,111 ", the first frame memory 9 is" 01,000,000,000 "to" 01,111,111,111 "
Up to the second frame memory 10 is "10,000,000,000"
~ Up to "10,111,111,111", the third frame memory 11
Ranges from "11,000,000,000" to "11,111,111,111". Focusing on the upper 2 bits of the row address, the buffer 8 is always "00", the first frame memory 9 is always "01", the second frame memory 10 is always "10", and the third frame memory is In 11 always "1
It is 1 ”. Therefore, in the case of the map shown in FIG. 4, by designating the upper 2 bits of the row address, three frame memories (first to third frame memories 9 to 1) can be obtained.
1) can be freely switched. For example, if the row address (upper 2 bits of) of the frame memory that was in the display reading mode at the start of the freeze operation is continuously output, that frame memory will be The address generation unit 63 corresponds to the “memory fixing unit” described in the gist of the invention because the address generation unit 63 can be continuously fixed for display readout. Further, since the address can be output to the other frame memories not fixed to the display reading as usual, the address generation unit 63 corresponds to the "writing means" described in the gist of the invention.
【００２５】図５は、「フリーズ動作検出手段」として
のモードレジスタ１００を示す図である。モードレジス
タ１００は、所定のモード指定信号（たとえば、スイッ
チ操作によってローカル入力されたもの、又は通信回線
等を介してリモート入力されたもの）を復号化のタイミ
ング信号に同期させて取り込むもので、そのタイミング
チャートは図６に示される。すなわち、フリーズ入力が
アクティブ（ここではＨレベル）になる時点ＴONは、フ
リーズ動作の開始が指示された時点であり、また、フリ
ーズ入力がインアクティブになった時点ＴOFF はフリー
ズ動作の解除が指示された時点である。これらのＴON、
ＴOFF は、任意のタイミングで発生するため、実際の復
号処理の周期に合わせる必要がある。ＴON′及び
ＴOFF ′は復号処理の周期で同期を取った後のフリーズ
動作開始及び解除のタイミングである。FIG. 5 is a diagram showing the mode register 100 as "freezing operation detecting means". The mode register 100 takes in a predetermined mode designating signal (for example, one locally input by a switch operation or one remotely input via a communication line) in synchronization with a decoding timing signal. The timing chart is shown in FIG. That is, the time T ON at which the freeze input becomes active (here, H level) is the time at which the start of the freeze operation is instructed, and the time T OFF at which the freeze input becomes inactive indicates that the freeze operation is released. It is the time when it is instructed. These T ON ,
Since T OFF occurs at an arbitrary timing, it has to match the cycle of actual decoding processing. T ON ′ and T OFF ′ are timings for starting and releasing the freeze operation after synchronization is achieved in the decoding process cycle.
【００２６】次に、作用を説明する。図７は、フリーズ
期間を含む画像処理の動作フローである。最上行は復号
周期を表しており、復号対象のピクチャは、便宜的に、
Ｂ０、Ｐ１、Ｂ１、Ｂ２、Ｐ２、Ｂ３、Ｂ４、Ｐ３、…
…の順番に並んでいるものとする。なお、符号の一文字
目はピクチャタイプを、２文字目は原画像の順番を表し
ている。また、上から２行目は、再生画像の表示順を表
しており、ここでは、Ｂ０、Ｉ、Ｂ１、Ｂ１、Ｂ１、Ｂ
１、Ｂ４、Ｐ２、……の順番で表示される。なお、Ｂ１
は４つ連続しているが、これは、同一の再生画像（Ｂ
１）で表示画面がフリーズされている状態を示してい
る。升目に区切られた３本の帯（イ）、（ロ）、（ハ）
は、それぞれ第１のフレームメモリ９（イ）、第２のフ
レームメモリ１０（ロ）及び第３のフレームメモリ１１
（ハ）の状態を表している。各升目の中に記した符号
は、コロン（：）を間にして、前が書き込まれた再生画
像のピクチャタイプと順番を、後ろと下がメモリモード
を表している。ここで、メモリモードは、再生画像の書
込みモード（ＲＷ：再生ライト）、他の画像に対する参
照画像の読み出しモード（ＲＲ：再生リード）、及び、
表示のための読み出しモード（ＤＲ：表示リード）の３
種類である。Next, the operation will be described. FIG. 7 is an operation flow of image processing including a freeze period. The top row represents the decoding cycle, and the picture to be decoded is, for convenience,
B0, P1, B1, B2, P2, B3, B4, P3, ...
It is assumed that they are arranged in the order of. The first character of the code represents the picture type, and the second character represents the order of the original images. Further, the second line from the top represents the display order of the reproduced images, and here, B0, I, B1, B1, B1, B1, B
It is displayed in the order of 1, B4, P2, .... In addition, B1
4 are consecutive, but this is the same reproduced image (B
In 1), the display screen is frozen. Three strips (a), (b), (c) divided into squares
Are the first frame memory 9 (a), the second frame memory 10 (b) and the third frame memory 11 respectively.
The state of (c) is shown. The symbols in each square indicate the picture type and order of the written reproduced image with a colon (:) in between, and the back and bottom indicate the memory mode. Here, the memory mode is a reproduction image write mode (RW: reproduction write), a reference image read mode for another image (RR: reproduction read), and
Reading mode for display (DR: display read) 3
It is a kind.
【００２７】いま、Ｂ０の復号周期では、既に、第１の
フレームメモリ１０（ロ）に“Ｐ０”（過去の参照フレ
ーム）が書き込まれており、また、第２のフレームメモ
リ９（イ）に“Ｉ”（未来の参照フレーム）が書き込ま
れているから、この周期では、Ｉ及びＰ０を再生リード
（ＲＲ）し、これらの参照フレームからＢ０を双方向予
測して、第３のフレームメモリ１１（ハ）に再生ライト
（ＲＷ）するとともに、再生されたＢ０を表示リード
（ＤＲ）する。Now, in the decoding cycle of B0, "P0" (past reference frame) has already been written in the first frame memory 10 (b), and also in the second frame memory 9 (a). Since "I" (future reference frame) is written, in this cycle, I and P0 are read and read (RR), B0 is bidirectionally predicted from these reference frames, and the third frame memory 11 (C) is reproduced and written (RW), and the reproduced B0 is read (DR).
【００２８】次のＰ１の復号周期では、第１のフレーム
メモリ９（イ）の“Ｉ”（過去の参照フレーム）を再生
リード（ＲＲ）し、この参照フレームからＰ１を順方向
予測して、第２のフレームメモリ１０（ロ）に再生ライ
ト（ＲＷ）するとともに、この復号周期の前半部ではＢ
０を表示リード（ＤＲ）し、後半部ではＩを表示リード
（ＤＲ）する。In the next P1 decoding cycle, "I" (past reference frame) of the first frame memory 9 (a) is read and read (RR), and P1 is forward predicted from this reference frame, Playback write (RW) is performed to the second frame memory 10 (b), and B is used in the first half of this decoding cycle.
The display read (DR) is 0, and the display read (DR) is I in the latter half.
【００２９】図７の例では、次いで、Ｂ１の復号化周期
に入るが、このＢ１の復号化周期中にフリーズ動作の開
始が指示されたと仮定すると、フレームメモリの状態は
以下のとおりになる。すなわち、Ｂ１の復号化周期中に
おいて、フリーズ動作の開始指示以前では、通常どお
り、第１のフレームメモリ９（イ）に書き込まれている
“Ｉ”と、第２のフレームメモリ１０（ロ）に書き込ま
れている“Ｐ１”とによって、Ｂ１が双方向予測され、
第３のフレームメモリ１１（ハ）に再生ライトされると
ともに、同メモリ１１（ハ）から表示リードされるが、
フリーズ動作の開始から解除までの間は、すべてのＢピ
クチャに対する復号処理が停止され、かつ、表示リード
のメモリが、フリーズ動作の開始時点のもの（ここでは
第３のフレームメモリ１１）に固定されるようになって
いる。すなわち、フリーズ期間では、動き補償画像再生
部６０のステップ６１（図３参照）で、Ｂピクチャのビ
ットストリームが破棄されるため、すべてのＢピクチャ
に対する復号化処理が禁止される。また、同期間中で
は、動き補償画像再生部６０のアドレス生成部６３（図
３参照）によって、フリーズ開始時点で表示リード（Ｄ
Ｒ）モードになっていた一つのフレームメモリ（第１〜
第３のフレームメモリ９〜１１の何れか一つ）を特定す
るアドレス（行アドレスの上位２ビット）が出力され続
けるから、そのフレームメモリを、フリーズ用のフレー
ムメモリに兼用でき、専用のフリーズメモリを備える必
要がない。したがって、メモリ容量を増やすことなく、
フリーズ機能を実現できる。In the example of FIG. 7, the decoding cycle of B1 is entered next, but assuming that the start of the freeze operation is instructed during the decoding cycle of B1, the state of the frame memory is as follows. That is, in the decoding cycle of B1, before the start instruction of the freeze operation, “I” written in the first frame memory 9 (a) and the second frame memory 10 (b) are normally written. B1 is bidirectionally predicted by the written "P1",
While being reproduced and written to the third frame memory 11 (c), the display is read from the memory 11 (c),
From the start to the release of the freeze operation, the decoding process for all B pictures is stopped, and the display read memory is fixed to that at the start of the freeze operation (here, the third frame memory 11). It has become so. That is, during the freeze period, the bit stream of B pictures is discarded in step 61 (see FIG. 3) of the motion compensation image reproducing unit 60, so that the decoding processing for all B pictures is prohibited. During the synchronization, the address read unit 63 (see FIG. 3) of the motion-compensated image playback unit 60 reads the display (D
One frame memory (first to first)
Since the address (the upper 2 bits of the row address) for specifying the third frame memory 9 to 11 is continuously output, the frame memory can also be used as the freeze frame memory, and the dedicated freeze memory can be used. There is no need to prepare. Therefore, without increasing the memory capacity,
Freeze function can be realized.
【００３０】ここで、フリーズ期間中は、先にも述べた
ように、Ｂピクチャの復号化処理を禁止する。このこと
は、言い換えてみれば、ＩピクチャとＰピクチャの復号
化処理は、通常どおり継続するということである。これ
らのＩピクチャ又はＰピクチャは、Ｂピクチャと違い、
他のピクチャに対する参照画像としての役目がある。し
たがって、本実施例では、フリーズ期間中、通常と同じ
ように参照画像を再生し続けるので、フリーズ動作の解
除と同時に、ＰピクチャやＢピクチャを速やかに再生で
き、タイムラグをなくすことができる。Here, during the freeze period, as described above, the decoding process of the B picture is prohibited. In other words, this means that the decoding process for I and P pictures continues as usual. These I pictures or P pictures are different from B pictures.
It serves as a reference image for other pictures. Therefore, in the present embodiment, since the reference image continues to be reproduced during the freeze period in the same manner as usual, at the same time as releasing the freeze operation, the P picture and the B picture can be rapidly reproduced and the time lag can be eliminated.
【００３１】なお、図７の動作例では、フリーズ期間
中、第３のフレームメモリ１１を表示リードに固定し
て、そのメモリからＢ１をリードし続けているが、これ
は、フリーズ動作の開始が指示された時点で、第３のフ
レームメモリ１１が表示リードモードだったからであ
る。たとえば、図８に示すように、フリーズ動作の開始
が指示された時点で、第１のフレームメモリ９が表示リ
ードモードであった場合には、フリーズ期間中は、当
然、この第１のフレームメモリ９が表示リードモードに
固定される。要は、フリーズ動作の開始時点で表示リー
ドモードであったフレームメモリを、そのまま表示リー
ドモードに固定すればよい。In the operation example of FIG. 7, the third frame memory 11 is fixed to the display read and B1 is continuously read from the memory during the freeze period. This is because the third frame memory 11 was in the display read mode at the point of instruction. For example, as shown in FIG. 8, when the first frame memory 9 is in the display read mode at the time when the start of the freeze operation is instructed, the first frame memory 9 is naturally in the freeze period. 9 is fixed to the display read mode. In short, the frame memory that was in the display read mode at the start of the freeze operation may be fixed in the display read mode as it is.
【００３２】図９及び図１０は、本発明の第２実施例を
示す図であり、フリーズ期間中におけるＢピクチャのビ
ットストリームの破棄位置を、できるだけ処理順の手前
にした例である。すなわち、ピクチャタイプは、可変長
復号器２００のピクチャ層復号部２３で識別されるか
ら、このピクチャ層復号部２３の出力側が、Ｂピクチャ
のビットストリームを破棄できる最も手前の位置であ
る。このような考えに基づき、本実施例では、図１０に
示すように、ピクチャ層復号部２３の出力側に、フリー
ズ期間中で、かつ、Ｂピクチャの場合には、その場で処
理をループするステップ２０１（ビットストリーム破棄
手段に相当）を追加している。これによれば、処理順の
最も先頭の位置で、Ｂピクチャのビットストリームを破
棄できるから、無駄な処理の実行を回避できて好まし
い。FIGS. 9 and 10 are diagrams showing a second embodiment of the present invention, which is an example in which the discard position of the bit stream of the B picture during the freeze period is as close to the processing order as possible. That is, since the picture type is identified by the picture layer decoding unit 23 of the variable length decoder 200, the output side of the picture layer decoding unit 23 is the closest position where the B picture bit stream can be discarded. Based on this idea, in the present embodiment, as shown in FIG. 10, the process is looped to the output side of the picture layer decoding unit 23 during the freeze period and in the case of a B picture on the spot. Step 201 (corresponding to bitstream discarding means) is added. According to this, the bit stream of the B picture can be discarded at the headmost position in the processing order, which is preferable because it is possible to avoid performing unnecessary processing.
【００３３】なお、Ｂピクチャのビットストリームの破
棄位置は、以上の例示に限定されない。Ｂピクチャに対
する復号化処理の全部又は一部を行なわないようにする
ことができる位置であればよく、ピクチャ層復号部２３
の出力と、動き補償画像再生部６０の動き補償画像再生
処理６２（図３参照）の入力との間であれば、どこでも
構わない。The discard position of the B picture bit stream is not limited to the above example. The picture layer decoding unit 23 may be located at a position where all or part of the decoding processing for the B picture is not performed.
, And the input of the motion compensation image reproduction processing 62 (see FIG. 3) of the motion compensation image reproduction unit 60.
【００３４】[0034]
【発明の効果】請求項１又は２記載の発明によれば、フ
リーズ動作が開始されると、その時点で表示読み出しに
なっていたフレームメモリが、以降も表示読み出しに固
定されるので、同フレームメモリを、あたかもフリーズ
用のフレームメモリとして使用することができる。した
がって、別途にフリーズ専用のフレームメモリを設ける
必要がなく、メモリ容量の増加を回避できる。また、フ
リーズ期間中は、Ｂピクチャのビットストリームを破棄
し、それ以外のピクチャ（Ｉピクチャ又はＰピクチャ）
の復号処理だけを継続するので、フリーズ期間が終わっ
たときには、最新の参照情報（Ｉピクチャ又はＰピクチ
ャ）を得ることができる。したがって、この最新の参照
情報を元にして、フリーズ動作解除後のＰピクチャやＢ
ピクチャを直ちに再生でき、タイムラグをなくすことが
できる。According to the invention described in claim 1 or 2, when the freeze operation is started, the frame memory which has been subjected to display reading at that time is fixed to display reading thereafter. The memory can be used as if it were a frame memory for freezes. Therefore, it is not necessary to separately provide a frame memory dedicated to freeze, and an increase in memory capacity can be avoided. Also, during the freeze period, the B picture bit stream is discarded, and other pictures (I picture or P picture) are discarded.
Since only the decoding process of 1 is continued, the latest reference information (I picture or P picture) can be obtained when the freeze period ends. Therefore, based on this latest reference information, the P picture and B after the freeze operation is released.
The picture can be played immediately and the time lag can be eliminated.
【図面の簡単な説明】[Brief description of drawings]
【図１】第１実施例の全体ブロック図である。FIG. 1 is an overall block diagram of a first embodiment.
【図２】第１実施例の可変長復号器のブロック図であ
る。FIG. 2 is a block diagram of a variable length decoder of the first embodiment.
【図３】第１実施例の動き補償画像再生部のブロック図
である。FIG. 3 is a block diagram of a motion compensation image reproducing unit according to the first embodiment.
【図４】第１実施例のメモリマップ図である。FIG. 4 is a memory map diagram of the first embodiment.
【図５】第１実施例のモードレジスタのブロック図であ
る。FIG. 5 is a block diagram of a mode register of the first embodiment.
【図６】モードレジスタの動作タイミングチャートであ
る。FIG. 6 is an operation timing chart of a mode register.
【図７】第１実施例のフレームメモリの動作フローであ
る。FIG. 7 is an operation flow of the frame memory of the first embodiment.
【図８】第１実施例のフレームメモリの他の動作フロー
である。FIG. 8 is another operation flow of the frame memory of the first embodiment.
【図９】第２実施例の全体ブロック図である。FIG. 9 is an overall block diagram of a second embodiment.
【図１０】第２実施例の可変長復号器のブロック図であ
る。FIG. 10 is a block diagram of a variable length decoder according to a second embodiment.
【図１１】処理及びメディア上における画面配列の模式
図である。FIG. 11 is a schematic diagram of processing and a screen arrangement on a medium.
【図１２】従来例の全体ブロック図である。FIG. 12 is an overall block diagram of a conventional example.
２３：ピクチャ復号部（ピクチャ識別手段） ６１：ステップ（ビットストリーム破棄手段） ６３：アドレス生成部（メモリ固定手段、書込み手段） １００：モードレジスタ（フリーズ動作検出手段） ２０１：ステップ（ビットストリーム破棄手段） 23: picture decoding unit (picture identifying unit) 61: step (bitstream discarding unit) 63: address generating unit (memory fixing unit, writing unit) 100: mode register (freeze operation detecting unit) 201: step (bitstream discarding unit) )
フロントページの続き (51)Int.Cl.6 識別記号 庁内整理番号 ＦＩ 技術表示箇所 Ｈ０４Ｎ 5/92 Ｈ０４Ｎ 5/92 Ｚ (72)発明者 川村 嘉郁 東京都渋谷区代々木４丁目36番19号 株式 会社グラフィックス・コミュニケーショ ン・ラボラトリーズ内 (72)発明者 小林 孝之 東京都渋谷区代々木４丁目36番19号 株式 会社グラフィックス・コミュニケーショ ン・ラボラトリーズ内 (72)発明者 小松 茂 東京都渋谷区代々木４丁目36番19号 株式 会社グラフィックス・コミュニケーショ ン・ラボラトリーズ内 (72)発明者 西塔 隆二 東京都渋谷区代々木４丁目36番19号 株式 会社グラフィックス・コミュニケーショ ン・ラボラトリーズ内 (72)発明者 後藤 勝巳 東京都渋谷区代々木４丁目36番19号 株式 会社グラフィックス・コミュニケーショ ン・ラボラトリーズ内Continuation of the front page (51) Int.Cl. 6 Identification number Office reference number FI Technical indication location H04N 5/92 H04N 5/92 Z (72) Inventor Kaoru Kawamura 4-36-19 Yoyogi, Shibuya-ku, Tokyo Shares in Graphics Communication Laboratories (72) Inventor Takayuki Kobayashi 4-36-19 Yoyogi, Shibuya-ku, Tokyo Shares in Graphics Communication Laboratories (72) Inventor Shigeru Komatsu Yoyogi, Shibuya-ku, Tokyo 4-36-19, Inc. in Graphics Communications Laboratories, Inc. (72) Inventor Ryuji Nishito 4-36-19, Yoyogi, Shibuya-ku, Tokyo Within Graphics Communications Laboratories, Inc. (72) Inventor Goto Katsumi 4-36-19 Yoyogi, Shibuya-ku, Tokyo Within Graphics Communications Laboratories, Inc.
Claims (2)
れたＩピクチャと、過去のフレームを参照フレームとし
て符号化されたＰピクチャと、過去のフレーム及び未来
のフレームを参照フレームとして符号化されたＢピクチ
ャと、を含むビットストリームから、前記Ｉピクチャ、
Ｐピクチャ及びＢピクチャを復号化し、各画像を再生す
る画像復号化方法であって、 前記Ｉピクチャの再生を自己完結で行う一方、前記Ｐピ
クチャの再生を過去のＩピクチャ又はＰピクチャからの
予測で行なうとともに、前記Ｂピクチャの再生を過去の
Ｉピクチャ又はＰピクチャと未来のＩピクチャ又はＰピ
クチャからの予測で行なう画像復号化方法において、 画面表示の停止と同停止期間中における画面情報の破棄
とを指令するフリーズ動作の開始が指示されると、 該指示の時点で表示読み出しの対象となっていた、Ｉピ
クチャ、Ｐピクチャ又はＢピクチャの再生画像格納用フ
レームメモリを、その後も表示読み出し用に固定し、 かつ、前記フリーズ動作の期間中は、復号化される前又
は復号化の途中でＢピクチャのビットストリームを破棄
するとともに、 復号化後のＩピクチャ又はＰピクチャを、表示読み出し
用に固定されているフレームメモリ以外のフレームメモ
リに書き込む、ことを特徴とする画像復号化方法。1. An I picture encoded without requiring other reference frames, a P picture encoded with a past frame as a reference frame, and a past frame and a future frame as a reference frame. From the bitstream including the
An image decoding method for decoding a P picture and a B picture and reproducing each image, wherein the reproduction of the I picture is self-contained, while the reproduction of the P picture is predicted from the past I picture or P picture. In the image decoding method of reproducing the B picture by predicting the past I picture or P picture and the future I picture or P picture, the screen information is stopped and the screen information is discarded during the stop period. When the start of the freeze operation is instructed, the frame memory for storing the reproduced image of the I picture, P picture, or B picture, which was the target of display readout at the time of the instruction, is used for display readout thereafter. , And during the freeze operation, the bit stream of the B picture is decoded before decoding or during decoding. An image decoding method characterized by discarding and writing the decoded I picture or P picture in a frame memory other than the frame memory fixed for display and reading.
クチャ、Ｐピクチャ及びＢピクチャを識別するピクチャ
識別手段と、 画面表示の停止と同停止期間中における画面情報の破棄
とを指令するフリーズ動作の開始指示及び解除指示を検
出するフリーズ動作検出手段と、 フリーズ動作の開始指示の時点で表示読み出しの対象と
なっていた、Ｉピクチャ、Ｐピクチャ又はＢピクチャの
再生画像格納用フレームメモリを、その後も表示読み出
し用に固定するメモリ固定手段と、 フリーズ動作の開始指示から解除指示までの期間、復号
化される前又は復号化の途中でＢピクチャのビットスト
リームを破棄するビットストリーム破棄手段と、 フリーズ動作の開始指示から解除指示までの期間、復号
化後のＩピクチャ又はＰピクチャを、表示読み出し用に
固定されているフレームメモリ以外のフレームメモリに
書き込む書込み手段と、を備えたことを特徴とする画像
復号化装置。2. A picture identifying means for identifying an I picture, a P picture and a B picture in 1 GOP (Group of Pictures), and a freeze operation for instructing stop of screen display and discard of screen information during the same stop period. The freeze operation detecting means for detecting the start instruction and the release instruction, and the frame memory for storing the reproduced image of the I picture, P picture, or B picture, which was the display read target at the time of the start instruction of the freeze operation, Memory fixing means for fixing for reading out the display, bitstream discarding means for discarding the B-picture bitstream before or during decoding during the period from the start instruction of the freeze operation to the release instruction, and the freeze operation During the period from the start instruction to the release instruction, the decoded I picture or P picture is fixed for display readout. Image decoding apparatus comprising: the writing means, the writing to the frame memory other than the frame memory being.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP1025395A JP2823809B2 (en) | 1995-01-26 | 1995-01-26 | Image decoding method and image decoding device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP1025395A JP2823809B2 (en) | 1995-01-26 | 1995-01-26 | Image decoding method and image decoding device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH08205147A true JPH08205147A (en) | 1996-08-09 |
| JP2823809B2 JP2823809B2 (en) | 1998-11-11 |
Family
ID=11745161
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP1025395A Expired - Fee Related JP2823809B2 (en) | 1995-01-26 | 1995-01-26 | Image decoding method and image decoding device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2823809B2 (en) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE19644650A1 (en) * | 1996-10-26 | 1998-04-30 | Thomson Brandt Gmbh | Method for processing digitally coded images of an image sequence and device for carrying out the method and device for temporarily storing decoded images |
| WO1998057496A1 (en) * | 1997-06-12 | 1998-12-17 | Sony Corporation | Decoder and decoding method for information signal |
| US6353633B1 (en) | 1996-12-20 | 2002-03-05 | Lg Electronics Inc. | Device and methods for transposing matrix of video signal and T.V. receiver employing the same |
| US6356317B1 (en) | 1996-08-22 | 2002-03-12 | Matsushita Electric Industrial Co., Ltd. | Image processor |
| KR100969224B1 (en) * | 2007-10-12 | 2010-07-09 | 브로드콤 코포레이션 | Method and system for processing b pictures with missing or invalid forward reference pictures |
-
1995
- 1995-01-26 JP JP1025395A patent/JP2823809B2/en not_active Expired - Fee Related
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6356317B1 (en) | 1996-08-22 | 2002-03-12 | Matsushita Electric Industrial Co., Ltd. | Image processor |
| DE19644650A1 (en) * | 1996-10-26 | 1998-04-30 | Thomson Brandt Gmbh | Method for processing digitally coded images of an image sequence and device for carrying out the method and device for temporarily storing decoded images |
| US6353633B1 (en) | 1996-12-20 | 2002-03-05 | Lg Electronics Inc. | Device and methods for transposing matrix of video signal and T.V. receiver employing the same |
| US6404816B1 (en) | 1996-12-20 | 2002-06-11 | Lg Electronics Inc. | Device and method for transposing matrix of video signal and T.V. receiver employing the same |
| WO1998057496A1 (en) * | 1997-06-12 | 1998-12-17 | Sony Corporation | Decoder and decoding method for information signal |
| KR100629097B1 (en) * | 1997-06-12 | 2006-09-28 | 소니 가부시끼 가이샤 | Decoder and decoding method for information signal |
| KR100969224B1 (en) * | 2007-10-12 | 2010-07-09 | 브로드콤 코포레이션 | Method and system for processing b pictures with missing or invalid forward reference pictures |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2823809B2 (en) | 1998-11-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR100796085B1 (en) | Decoder, decoding method, and recorded medium | |
| JP3825719B2 (en) | Image reproduction method, image reproduction apparatus, and image recording apparatus | |
| JPH0974566A (en) | Compression encoder and recording device for compression encoded data | |
| US20090252228A1 (en) | Trick Play Using Temporal Layering | |
| JP3147792B2 (en) | Video data decoding method and apparatus for high-speed playback | |
| US20030099293A1 (en) | Image reproducing method, and image processing method, and image reproducing device, image processing device, and television receiver capable of using the methods | |
| CA2124391A1 (en) | Digital high definition video recorder having high definition display in trick-play modes | |
| JP2823809B2 (en) | Image decoding method and image decoding device | |
| JPH08130707A (en) | Picture signal processor | |
| JP3860319B2 (en) | Image reproduction method and apparatus | |
| JP3233232B2 (en) | Moving picture decoding method and apparatus | |
| JP2820631B2 (en) | Image decoding method and apparatus | |
| JP2007158778A (en) | Forming method and device of trick reproducing content, transmitting method and device of trick reproducing compressed moving picture data, and trick reproducing content forming program | |
| JP2002010263A (en) | Motion picture encoding apparatus and its method | |
| JP3296758B2 (en) | Moving picture coding apparatus and moving picture coding / reproducing apparatus | |
| JPH0898142A (en) | Picture reproduction device | |
| JP2006187037A (en) | Image reproducing method | |
| JPH09261641A (en) | Method and device for processing compressed picture data | |
| JPH10136358A (en) | Image decoder | |
| JPH08223534A (en) | Image reproducing device | |
| JP2785640B2 (en) | Image reproducing method from moving image information encoded with high efficiency by the MPEG method | |
| JP2005159832A (en) | Signal processor | |
| JPH05122687A (en) | Method and device for picture display | |
| JPH08130715A (en) | Picture reproducing device | |
| JP2000032395A (en) | Decoding method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080904 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080904 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090904 Year of fee payment: 11 |
|
| LAPS | Cancellation because of no payment of annual fees |