JP2000333166A - Means for decoding high efficiency coded image and image display device having the means - Google Patents
Means for decoding high efficiency coded image and image display device having the meansInfo
- Publication number
- JP2000333166A JP2000333166A JP13887199A JP13887199A JP2000333166A JP 2000333166 A JP2000333166 A JP 2000333166A JP 13887199 A JP13887199 A JP 13887199A JP 13887199 A JP13887199 A JP 13887199A JP 2000333166 A JP2000333166 A JP 2000333166A
- Authority
- JP
- Japan
- Prior art keywords
- resolution
- decoding
- image
- reduction
- resolution conversion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
Description
【０００１】[0001]
【発明の属する技術分野】本発明は、高効率符号化画像
を復号する復号手段及びその手段を有する画像表示装置
に係わり、特に、ＭＰＥＧ２規格など、高能率符号化手
法に基づいて符号化された画像データを復号し表示する
ための高効率符号化画像の復号手段及び同手段を有する
画像表示装置に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a decoding means for decoding a high-efficiency coded image and an image display apparatus having the means. In particular, the present invention relates to a high-efficiency coding method such as the MPEG2 standard. The present invention relates to a high-efficiency coded image decoding unit for decoding and displaying image data, and an image display apparatus having the unit.
【０００２】[0002]
【従来の技術】画像データの伝送及び記録技術は、人間
の情報活動の中でも大きな比重を占める技術である。近
年、これらの技術として、画像データをディジタル化
し、時間的・空間的冗長性などを除去してデータを圧縮
符号化する高能率符号化技術が用いられるようになり、
伝送あるいは記録に要するコストを低減することが図ら
れている。このような符号化技術の一つとして、ＩＳＯ
／ＳＣ２９／ＷＧ１１で標準化されたＭＰＥＧ２方式
（ＩＳＯ／ＩＥＣ １３８１８−２）が知られている。
ＭＰＥＧ２は各種ディジタル衛星放送の高能率符号化方
式として、また大容量記録メディアであるＤＶＤ−ＲＯ
ＭあるいはＤＶＤ−ＲＡＭへ画像データを記録するため
の符号化方式として採用されており、２１世紀初頭のデ
ィジタル画像伝送・記録のための高能率符号化技術の主
流となりつつある。2. Description of the Related Art Image data transmission and recording techniques occupy a large part of human information activities. In recent years, as these techniques, high-efficiency coding techniques for digitizing image data and compressing and coding data by removing temporal and spatial redundancy have been used,
The cost required for transmission or recording is reduced. As one of such coding techniques, ISO
The MPEG2 system (ISO / IEC 13818-2) standardized by / SC29 / WG11 is known.
MPEG2 is used as a high-efficiency encoding method for various digital satellite broadcasts, and is a DVD-RO which is a large-capacity recording medium.
It has been adopted as an encoding system for recording image data on M or DVD-RAM, and is becoming the mainstream of high-efficiency encoding technology for digital image transmission and recording in the early 21st century.
【０００３】ＭＰＥＧ２方式に基づく画像符号化では、
画像データはフレームと呼ばれる画像単位で処理され
る。一般に画像データは複数の静止画像を連続的に表示
することで構成されており、ＭＰＥＧではこの静止画一
枚を１フレームとして扱うのが一般的である。フレーム
には３種類あり、他のフレームを参照画として用いず、
そのフレーム内の空間的冗長性のみを除去して符号化さ
れるＩフレーム（Ｉｎｔｒａ Ｆｒａｍｅ）、表示順に
おいて過去にあるフレームを参照して予測値を導き、こ
れを利用して空間的・時間的冗長性を除去して符号化す
るＰフレーム（Ｐｒｅｄｉｃｔｉｖｅ Ｆｒａｍｅ）、
そして表示順において過去にあたるフレームと未来にあ
たるフレームを参照して予測値を導き、これを利用して
空間的・時間的冗長性を除去して符号化するＢフレーム
（Ｂｉｄｉｒｅｃｔｉｏｎａｌ Ｆｒａｍｅ）が存在す
る。In image coding based on the MPEG2 system,
Image data is processed in image units called frames. Generally, image data is constituted by displaying a plurality of still images successively. In MPEG, one still image is generally treated as one frame. There are three types of frames, without using other frames as reference images,
An I frame (Intra Frame) that is coded by removing only the spatial redundancy in the frame, a predicted value is derived by referring to a past frame in the display order, and the spatial and temporal P frame (Predictive Frame) to be encoded by removing redundancy,
Then, there is a B-frame (Bidirectional Frame) to derive a predicted value by referring to a past frame and a future frame in the display order, and to use this to remove spatial / temporal redundancy to perform coding.
【０００４】上記手法で符号化されたデータを復号し表
示する画像表示装置では、送られてきた符号化画像デー
タを符号化された順番で復号するため、Ｂフレームを符
号化する際に参照フレームとして用いられる過去と未来
のフレームは、Ｂフレームに先だって過去と未来の参照
フレームが復号される。すなわち、過去のフレーム、未
来のフレーム、その間のＢフレーム、の順に復号され
る。しかしながら、これらのフレームの復号後は、過去
のフレーム、Ｂフレーム、未来のフレームの順で表示す
る必要がある。このため、復号後のフレームの並べ替え
が必要であり、このために復号された画像データは一旦
メモリに格納される。An image display device that decodes and displays data encoded by the above method decodes the transmitted encoded image data in the order in which it was encoded. In the past and future frames used as, the past and future reference frames are decoded prior to the B frame. That is, decoding is performed in the order of a past frame, a future frame, and a B frame therebetween. However, after decoding these frames, it is necessary to display past frames, B frames, and future frames in this order. Therefore, it is necessary to rearrange the frames after decoding, and the image data decoded for this purpose is temporarily stored in the memory.
【０００５】復号画像データをメモリに格納する際、Ｉ
フレーム及びＰフレームの復号画像データは、表示順で
この両フレームの間に存在するＢフレームを復号するた
めの参照フレームとして用いる必要があるため、該当Ｂ
フレームの復号が終了するまで必ず２フレーム分の画像
データをメモリ内に保持しておく必要がある。更に、復
号画像データは１フレームを単位として符号化されてい
るため、現行のテレビジョン信号のように、１フレーム
がインタレースした２つのフィールドから構成されてい
る場合、復号されたフレームの画像データはフィールド
データに変換されなければならない。従って、復号され
たＢフレームについても、一旦メモリに格納される必要
がある。When storing decoded image data in a memory,
The decoded image data of the frame and the P frame need to be used as a reference frame for decoding the B frame existing between the two frames in the display order.
Until the decoding of the frame is completed, it is necessary to hold the image data of two frames in the memory. Further, since the decoded image data is encoded in units of one frame, if one frame is composed of two interlaced fields as in a current television signal, the image data of the decoded frame is Must be converted to field data. Therefore, the decoded B frame needs to be temporarily stored in the memory.
【０００６】図１８に、ＭＰＥＧ２方式による符号化画
像放送を受信して復号し表示する画像表示装置の一般的
な構成を示す。１がＭＰＥＧ２の復号機能を有する復号
器である。アンテナ３１で受信された放送電波はチュー
ナ３２でディジタル符号化データ列に復元され、デマル
チプレクサ３３で任意のチャンネルの符号化画像データ
が取り出され、復号器１へ入力される。入力された符号
化画像データはまず可変長符号復号器（ＶＬＤ）３で可
変長復号される。逆量子化器（ＩＱ）４で逆量子化され
た後、離散コサイン逆変換器（ＩＤＣＴ）５で離散コサ
イン逆変換処理が施され、加算器６で参照画像と加算さ
れて復号画像が得られる。得られた復号画像は復号器１
の外部に接続された外部メモリ２へ格納された後、表示
順に並べ替え読み出し器１９によって読み出され、表示
用画像としてディジタル−アナログ変換器（Ｄ／Ａコン
バータ、ＤＡＣ）３４へ送られ、Ｄ／Ａ変換処理を受け
て画像表示装置３５へ出力される。また、Ｉフレーム及
びＰフレームは動き補償器（ＭＣ）９によって参照画像
として読み出され、加算器６で他のフレームと加算され
る。これら各部の動作はＣＰＵ３６によって制御され
る。FIG. 18 shows a general configuration of an image display device which receives, decodes, and displays an encoded image broadcast according to the MPEG2 system. Reference numeral 1 denotes a decoder having an MPEG2 decoding function. The broadcast wave received by the antenna 31 is restored to a digital coded data sequence by the tuner 32, and coded image data of an arbitrary channel is extracted by the demultiplexer 33 and input to the decoder 1. The input coded image data is first subjected to variable length decoding by a variable length code decoder (VLD) 3. After being inversely quantized by the inverse quantizer (IQ) 4, the inverse discrete cosine transform (IDCT) 5 performs inverse discrete cosine transform processing, and the adder 6 adds the result to the reference image to obtain a decoded image. . The decoded image obtained is the decoder 1
After being stored in the external memory 2 connected to the outside of the device, it is read out by the reordering and reading unit 19 in the display order, and sent to the digital-analog converter (D / A converter, DAC) 34 as a display image. After undergoing the / A conversion process, it is output to the image display device 35. Further, the I frame and the P frame are read as reference images by the motion compensator (MC) 9 and are added by the adder 6 to other frames. The operations of these units are controlled by the CPU 36.
【０００７】なお、現在では、復号画像の格納などに用
いるメモリ手段は、図１８に示すように復号器１の外部
に接続する形態が一般的である。At present, the memory means used for storing decoded images is generally connected to the outside of the decoder 1 as shown in FIG.
【０００８】図１９に、並べ替え読み出し部１９による
読み出し順を示す。並べ替え読み出し部１９は、復号系
垂直同期信号（ｄｅｃ＿ｖ＿ｓｙｎｃ）のタイミング
で、次に復号するフレームがＩまたはＰフレーム（アン
カーフレームと総称する）であるかＢフレームであるか
を常にチェックしている。あるフレームの復号開始時点
において、そのフレームがアンカーフレームであった場
合（時刻ｔ０）、その次の表示系垂直同期信号（ｄｉｓ
ｐ＿ｖ＿ｓｙｎｃ）において、現在復号しているアンカ
ーフレームの１つ前のアンカーフレームを選択して読み
出す。あるフレームの復号開始時点においてそのフレー
ムがＢフレームであった場合には、その次の表示系垂直
同期信号（ｄｉｓｐ＿ｖ＿ｓｙｎｃ）において現在復号
中のＢフレームを読み出す。FIG. 19 shows a reading order by the rearrangement reading unit 19. At the timing of the decoding vertical synchronization signal (dec_v_sync), the reordering and reading unit 19 always checks whether the next frame to be decoded is an I or P frame (collectively referred to as an anchor frame) or a B frame. . If the frame is an anchor frame at the start of decoding of a certain frame (time t0), the next display system vertical synchronization signal (dis
In p_v_sync), the anchor frame immediately before the currently decoded anchor frame is selected and read. If the frame is a B frame at the start of decoding a certain frame, the B frame that is currently being decoded is read by the next display system vertical synchronization signal (disp_v_sync).
【０００９】上記のように、ＭＰＥＧ２方式により符号
化画像データを復号する画像表示装置では、合計３フレ
ームの入力画像を格納するためのメモリ容量が必要であ
る。特に、米国のディジタル地上波や、日本の衛星（Ｂ
ｒｏａｄｃａｓｔｉｎｇ Ｓａｔｅｌｌｉｔｅ：ＢＳ）
ディジタル放送などで採用が決定されているＭＰＥＧ２
ハイレベル（ＨＬ）においては、最大で１９２０画素
（水平）×１０８０画素（垂直）×６０Ｈｚの解像度及
び画像表示周波数を有する画像が規定されている。この
ＨＬに対応する画像表示装置では、復号画像データを格
納する領域だけで９ＭＢｙｔｅ近くの格納用メモリを必
要とし、入力符号化画像データの格納分などを合わせる
と１２ＭＢｙｔｅ程度のメモリを必要とする。As described above, an image display device that decodes encoded image data according to the MPEG2 system requires a memory capacity for storing a total of three frames of input images. In particular, digital terrestrial broadcasting in the United States and satellites in Japan (B
loadcasting Satellite: BS)
MPEG2 decided to be adopted in digital broadcasting etc.
At the high level (HL), an image having a maximum resolution of 1920 pixels (horizontal) × 1080 pixels (vertical) × 60 Hz and an image display frequency is defined. In an image display device corresponding to this HL, a storage memory of about 9 MBytes is required only for the area for storing the decoded image data, and a memory of about 12 MBytes is required when the storage of the input coded image data is combined.
【００１０】また、現在の画像表示装置では、復号・表
示機能以外にも、装置を特徴づけるための付加的なアプ
リケーション機能を有することが主流となっている。こ
れらの付加的なアプリケーションの例として、ピクチャ
ーインピクチャー（ＰｉｎＰ）機能、オンスクリーンデ
ィスプレイ（ＯＳＤ）機能、レターボックス（ＬＢ）機
能がある。[0010] In addition, the current image display apparatus mainly has an additional application function for characterizing the apparatus in addition to the decoding / display function. Examples of these additional applications include a picture-in-picture (PinP) function, an on-screen display (OSD) function, and a letterbox (LB) function.
【００１１】図２０に、ピクチャーインピクチャー（Ｐ
ｉｎＰ）機能の概略を示す。FIG. 20 shows a picture-in-picture (P
inP) The outline of the function is shown.
【００１２】ＰｉｎＰ機能は、２つの異なる入力画像を
一つの画像表示装置に同時に出力するための技術であ
り、２つの入力画像のうち、一方の入力画像のサイズを
縮小し、他方の一部分に挿入して画像表示装置に出力す
ることにより、一つの画像表示装置で同時に２つの画像
を表示することを可能にするものである。この機能によ
り、ユーザはディジタル放送による映像と従来の地上波
放送やビデオデッキなどからの副入力映像を同時に見る
などの利用法が可能になる。[0012] The PinP function is a technique for simultaneously outputting two different input images to one image display device, and reduces the size of one of the two input images and inserts it into a part of the other. Then, by outputting the image to the image display device, two images can be simultaneously displayed on one image display device. This function allows the user to use the digital broadcast video and the conventional terrestrial broadcast or sub-input video from a video deck at the same time.
【００１３】図２１は、ＰｉｎＰ機能の応用の一例を示
すものであり、２つの入力画像を並べて画像表示装置に
出力する場合である。FIG. 21 shows an example of an application of the PinP function, in which two input images are arranged and output to an image display device.
【００１４】図２２に、オンスクリーンディスプレイ
（ＯＳＤ）機能の概略を示す。FIG. 22 schematically shows an on-screen display (OSD) function.
【００１５】ＯＳＤ機能は、復号画像に付帯情報を上書
きして出力するための技術であり、放送番組に付帯して
送信されてくる番組案内や字幕、表示している番組のチ
ャンネルや音量などを復号画像に上書きし、同時に画像
表示装置に画像表示するものである。[0015] The OSD function is a technique for overwriting and outputting supplementary information on a decoded image. The OSD function includes a program guide and subtitles transmitted along with a broadcast program, and a channel and volume of a displayed program. This is to overwrite the decoded image and simultaneously display the image on the image display device.
【００１６】図２３に、レターボックス（ＬＢ）機能の
概略を示す。FIG. 23 shows an outline of the letter box (LB) function.
【００１７】ＬＢ機能は、入力画像の縦横サイズ比（ア
スペクト比）が１６：９であり、画像表示装置のアスペ
クト比が４：３である時に、入力画像に解像度縮小処理
を施して画像表示装置に出力する機能である。アスペク
ト比１６：９の入力画像をそのままアスペクト比４：３
の画像表示装置に表示すると、スクイーズ画像と呼ばれ
る、画像の横方向のみ縮小された画像になってしまう
が、入力画像にＬＢ処理を施すことにより、スクイーズ
を起こさないで画像を表示することが可能になる。The LB function performs resolution reduction processing on an input image when the aspect ratio of the input image is 16: 9 and the aspect ratio of the image display device is 4: 3. Function to output to An input image with an aspect ratio of 16: 9 is used as it is in an aspect ratio of 4: 3.
When displayed on an image display device, an image called a squeezed image is reduced only in the horizontal direction of the image. However, by performing LB processing on the input image, the image can be displayed without causing squeezing. become.
【００１８】前述のように、ＭＰＥＧ２方式により画像
を復号する画像表示装置では、復号処理のために大容量
の外部メモリを必要とする。また、ＰｉｎＰ機能、ＯＳ
Ｄ機能、ＬＢ機能などのアプリケーション機能を実現す
るためにも外部メモリを必要とする。すなわち、Ｐｉｎ
Ｐ機能では子画面と親画面のフレームレートを同期させ
るため、また子画面を親画面内の任意の位置に表示する
ために遅延させるため、子画面を格納するだけのメモリ
容量（子画面サイズが７２０画素×４８０画素の場合、
約０．５ＭＢｙｔｅ）が必要となる。またＯＳＤ機能で
は画像表示装置の解像度と同じだけのメモリ容量（１９
２０画素×１０８０画素の場合、約３ＭＢｙｔｅ）が必
要になる。さらにＯＳＤ機能では、画像２フレーム分の
メモリ容量を用い、一方を書き込み、一方を表示用とし
て切り替えて用いる場合もあり、この場合は表示画像２
枚分のメモリ容量が必要となる。またＬＢ機能では入力
画像を表示するために遅延させるため、画像表示装置の
解像度が７２０画素×４８０画素の解像度の場合、約
０．１２ＭＢｙｔｅのメモリ容量を必要とするが、実際
にはメモリの取り扱いを容易にするために、約０．５Ｍ
Ｂｙｔｅのメモリ容量が使用される。As described above, an image display device that decodes an image according to the MPEG2 method requires a large-capacity external memory for decoding. Also, PinP function, OS
An external memory is also required to realize application functions such as D function and LB function. That is, Pin
In the P function, in order to synchronize the frame rates of the child screen and the parent screen, and to delay the child screen to be displayed at an arbitrary position in the parent screen, the memory capacity for storing the child screen (the child screen size is In the case of 720 pixels × 480 pixels,
About 0.5 MByte) is required. In the OSD function, the memory capacity (19
In the case of 20 pixels × 1080 pixels, about 3 MByte is required. Further, in the OSD function, there is a case where a memory capacity for two frames of an image is used, one of which is used for writing, and the other is used for display.
Memory capacity for the number of sheets is required. In addition, the LB function requires a memory capacity of about 0.12 MBytes when the resolution of the image display device is 720 pixels × 480 pixels to delay the display of the input image. About 0.5M to facilitate
Byte memory capacity is used.
【００１９】このように、高効率符号化画像を復号して
表示する画像表示装置は、装置が必要とするメモリ容量
が増加の一途をたどっており、装置全体のコストを押し
上げる大きな要因となっている。特に、画像表示装置自
体が入力符号化画像に比べて低い解像度しか持っていな
い場合、復号・表示に必要な復号画像３フレーム分のメ
モリ容量を確保することは、装置のコストパフォーマン
スを著しく下げることになる。As described above, the image display device which decodes and displays a high-efficiency coded image is continually increasing in the memory capacity required by the device, which is a major factor that increases the cost of the entire device. I have. In particular, if the image display device itself has only a lower resolution than the input coded image, securing the memory capacity for three frames of the decoded image required for decoding and display significantly reduces the cost performance of the device. become.
【００２０】また、復号画像の高解像度化、及びＰｉｎ
Ｐ機能やＯＳＤ機能などの充実により、復号器とメモリ
との間の１秒あたりのデータ転送量（バンド幅）も増大
している。例えば、１９２０画素×１０８０画素の解像
度で、毎秒３０枚のフレームレートの画像を復号するに
は、平均して約４００ＭＢｙｔｅ／秒のバンド幅が必要
である。また、７２０画素×４８０画素のＰｉｎＰ機能
の子画面の実現には約３０ＭＢｙｔｅ／秒、１９２０画
素×１０８０画素のＯＳＤ機能の実現には約８９ＭＢｙ
ｔｅ／秒のバンド幅を、７２０画素×４８０画素×３０
Ｈｚの表示のためのＬＢ機能の実現には約７．４ＭＢｙ
ｔｅ／秒のバンド幅を必要とする。しかしながら、上記
の画像表示装置の許容バンド幅は復号器の動作周波数と
復号器−外部メモリの間のデータバス幅に応じて一意に
決定され、この限界を超えると実時間内の復号・表示処
理が不可能になってしまう。Also, the resolution of the decoded image is increased, and
With the enhancement of the P function and the OSD function, the data transfer amount (bandwidth) per second between the decoder and the memory is also increasing. For example, decoding an image with a resolution of 1920 pixels × 1080 pixels at a frame rate of 30 frames per second requires an average bandwidth of about 400 MByte / sec. In addition, about 30 MByte / sec for realizing the child screen of the PinP function of 720 pixels × 480 pixels, and about 89 MBy for realizing the OSD function of 1920 pixels × 1080 pixels.
te / sec bandwidth is 720 pixels × 480 pixels × 30
Approximately 7.4 MBy for realizing LB function for display of Hz
Requires a bandwidth of te / sec. However, the allowable bandwidth of the image display device is uniquely determined according to the operating frequency of the decoder and the data bus width between the decoder and the external memory. Becomes impossible.
【００２１】[0021]
【発明が解決しようとする課題】前述の問題点に関して
は、特開平８−２０５１６１号公報では、復号した画像
に解像度縮小処理を施してから外部メモリに格納し、外
部メモリから読み出した後の画像に解像度拡大処理を施
して縮小前の解像度に戻す手法が提案されている。しか
し、この手法では常に復号画像に対し解像度変換処理を
行うため、復号画像の画質の劣化が常に発生するという
問題がある。Regarding the above-mentioned problem, Japanese Patent Laid-Open Publication No. Hei 8-205161 discloses a method in which a decoded image is subjected to resolution reduction processing, stored in an external memory, and read out from the external memory. A method has been proposed in which the image is subjected to a resolution enlargement process to restore the resolution before the reduction. However, in this method, since the resolution conversion processing is always performed on the decoded image, there is a problem that the image quality of the decoded image always deteriorates.
【００２２】本発明の目的は、かかる問題点に鑑みて、
入力符号化画像の符号化前の解像度やＰｉｎＰ機能、Ｏ
ＳＤ機能、ＬＢ機能などのアプリケーションの動作のオ
ン・オフが外部から変更された場合に、復号処理に要す
る外部メモリ容量及びバンド幅を変更し、かつ前述の解
像度縮小処理及び解像度拡大処理における解像度変換率
の変更のタイミング及び上記アプリケーションの動作の
オン・オフのタイミングを正しく制御する機能を有す
る、高効率符号化画像の復号手段及び同手段を有する画
像表示装置を提案することにある。An object of the present invention is to solve the above problems,
Resolution of input encoded image before encoding, PinP function, O
When the on / off of the operation of the application such as the SD function and the LB function is externally changed, the external memory capacity and the bandwidth required for the decoding processing are changed, and the resolution conversion in the above-described resolution reduction processing and resolution expansion processing is performed. An object of the present invention is to propose a high-efficiency coded image decoding means and an image display apparatus having the same, which have a function of correctly controlling the timing of changing the rate and the on / off timing of the operation of the application.
【００２３】[0023]
【課題を解決するための手段】本発明は、上記の目的を
達成するために、次のような手段を採用した。In order to achieve the above object, the present invention employs the following means.
【００２４】高効率符号化画像の復号手段として、高効
率符号化された符号化画像データを復号化して復号画像
データを得る復号画像化手段と、復号時に解像度縮小処
理を行う解像度縮小手段と、該解像度縮小手段によって
縮小処理された復号画像データを格納するメモリ手段
と、該メモリ手段から前記解像度縮小手段で縮小処理さ
れた復号順の復号画像データを表示順に読み出す並べ替
え読み出し手段と、該並べ替え読み出し手段によって読
み出された復号画像データを縮小処理前の解像度に拡大
する解像度拡大手段と、前記メモリ手段において必要と
するメモリ容量の増減または前記メモリ手段と前記復号
画像化手段間のデータ転送レートの増減の要求があった
時に、前記解像度縮小手段及び前記解像度拡大手段の解
像度変換倍率を変更する解像度変換制御手段とを備え、
前記並べ替え読み出し手段は、前記解像度変換率制御手
段による前記解像度縮小手段における縮小率及び前記解
像度拡大手段における拡大率を変更するタイミングを制
御することを特徴とする。[0024] As decoding means for a high-efficiency coded image, decoded image means for decoding coded image data subjected to high-efficiency coding to obtain decoded image data, resolution reducing means for performing resolution reduction processing at the time of decoding, A memory for storing the decoded image data reduced by the resolution reducing unit; a rearrangement reading unit for reading out the decoded image data in the decoding order reduced by the resolution reducing unit from the memory in a display order; Resolution enlarging means for enlarging the decoded image data read by the replacement reading means to the resolution before the reduction processing, increasing or decreasing the memory capacity required in the memory means, or transferring data between the memory means and the decoded image decoding means When there is a request to increase or decrease the rate, change the resolution conversion magnification of the resolution reducing means and the resolution enlarging means And a resolution conversion control unit that,
The rearrangement readout unit controls a timing at which the resolution conversion ratio control unit changes a reduction ratio in the resolution reduction unit and an enlargement ratio in the resolution enlargement unit.
【００２５】また、請求項１に記載の高効率符号化画像
の復号手段おいて、前記解像度変換制御部は、前記符号
化画像データの解像度の変更の要求があった時に、前記
解像度縮小手段及び前記解像度拡大手段の解像度変換倍
率を変更するとともに、前記並べ替え読み出し手段は、
前記符号化画像データの解像度が変更されるタイミング
に基づいて、前記解像度変換率制御手段による前記解像
度縮小手段における縮小率及び該解像度拡大手段におけ
る拡大率を変更するタイミングを制御することを特徴と
する。Further, in the high-efficiency encoded image decoding means according to claim 1, the resolution conversion control unit is configured to, when a request to change the resolution of the encoded image data is issued, change the resolution reduction means and the resolution conversion means. While changing the resolution conversion magnification of the resolution expansion means, the rearrangement reading means,
The resolution conversion rate control means controls the reduction rate of the resolution reduction means and the timing of changing the enlargement rate of the resolution expansion means based on the timing at which the resolution of the encoded image data is changed. .
【００２６】また、請求項１に記載の高効率符号化画像
の復号手段おいて、付加機能の実施時に前記メモリ手段
において必要とするメモリ容量の増大または前記メモリ
手段と前記復号画像化手段間のデータ転送レートの増大
を要する付加機能実施手段を有し、前記解像度変換制御
部は、前記付加機能手段の実施または非実施時に応じ
て、前記解像度縮小手段及び前記解像度拡大手段の解像
度変換倍率を変更するとともに、前記並べ替え読み出し
手段は、前記付加機能手段が非実施から実施に変更され
る場合は、前記解像度変換率制御手段による前記解像度
縮小手段における縮小率及び該解像度拡大手段における
拡大率を変更するタイミングを指令し、前記メモリ手段
において必要とするメモリ容量の低減または前記メモリ
手段と前記復号画像化手段間のデータ転送レートが低減
された後に、前記付加機能手段の実施のタイミングを指
令することを特徴とする。In the high-efficiency coded image decoding means according to claim 1, the memory capacity required for the memory means at the time of performing the additional function is increased or the memory capacity between the memory means and the decoded image decoding means is increased. A resolution conversion control unit that changes a resolution conversion magnification of the resolution reduction unit and the resolution expansion unit according to whether the additional function unit is performed or not. And when the additional function means is changed from non-execution to execution, the rearrangement reading means changes the reduction ratio in the resolution reduction means and the enlargement ratio in the resolution expansion means by the resolution conversion rate control means. To reduce the memory capacity required in the memory means or the memory means and the decoded image After the data transfer rate between means is reduced, characterized by directing the timing of implementation of the additional function unit.
【００２７】また、請求項１に記載の高効率符号化画像
の復号手段おいて、付加機能の実施時に前記メモリ手段
において必要とするメモリ容量の増大または前記メモリ
手段と前記復号画像化手段間のデータ転送レートの増大
を要する付加機能実施手段を有し、前記解像度変換制御
部は、前記付加機能手段の実施または非実施時に応じ
て、前記解像度縮小手段及び前記解像度拡大手段の解像
度変換倍率を変更するとともに、前記並べ替え読み出し
手段は、前記付加機能手段が非実施から実施に変更され
る場合は、前記変更の指令後初めて復号され、後に他の
画像の復号の際に参照画像として用いられるアンカーフ
レーム画像の復号開始のタイミングで、前記解像度変換
率制御手段が前記解像度縮小手段における所定の縮小率
を設定するタイミング信号を前記解像度変換率制御手段
に供給し、前記アンカーフレーム画像の次のアンカーフ
レーム画像ではない画像の復号開始のタイミングで、前
記解像度変換率制御手段が前記解像度縮小手段における
等倍の変換率を設定するタイミング信号を前記解像度変
換率制御手段に供給し、前記アンカーフレーム画像の次
に初めて復号されるアンカーフレーム画像の復号開始の
タイミングで、前記解像度変換率制御手段が前記解像度
縮小手段における所定の縮小率を設定するタイミング信
号を前記解像度変換率制御手段に供給するすることを特
徴とする。[0027] In the decoding means for high-efficiency coded images according to claim 1, the memory capacity required for the memory means at the time of performing the additional function is increased or the capacity between the memory means and the decoded image decoding means is increased. A resolution conversion control unit that changes a resolution conversion magnification of the resolution reduction unit and the resolution expansion unit according to whether the additional function unit is performed or not. In addition, when the additional function unit is changed from non-execution to execution, the rearrangement reading unit decodes the anchor for the first time after the instruction for the change, and later uses an anchor used as a reference image when decoding another image. At the timing of starting the decoding of the frame image, the resolution conversion rate control means sets a predetermined reduction rate in the resolution reduction means. A signal is supplied to the resolution conversion rate control means, and at the timing of starting decoding of an image which is not the anchor frame image next to the anchor frame image, the resolution conversion rate control means changes the unity conversion rate in the resolution reduction means. A timing signal to be set is supplied to the resolution conversion rate control means, and at a timing of starting decoding of an anchor frame image decoded for the first time after the anchor frame image, the resolution conversion rate control means outputs a predetermined signal in the resolution reduction means. A timing signal for setting a reduction ratio is supplied to the resolution conversion ratio control means.
【００２８】また、請求項３または請求項４に記載の高
効率符号化画像の復号手段おいて、前記付加機能手段
が、前記符号化画像データを復号して得られた復号画像
の一部に副画像を合成するピクチャーインピクチャー
（ＰｉｎＰ）手段であることを特徴とする。According to a third aspect of the present invention, in the high efficiency coded image decoding means, the additional function means includes a part of a decoded image obtained by decoding the coded image data. It is a picture-in-picture (PinP) means for synthesizing sub-images.
【００２９】また、請求項３または請求項４に記載の高
効率符号化画像の復号手段おいて、前記付加機能手段
が、前記符号化画像データを復号して得られた縦横サイ
ズ比（アスペクト比）が所定比の復号画像を前記所定比
と異なる縦横サイズ比（アスペクト比）の復号画像に変
更するレターボックス（ＬＢ）手段であることを特徴と
する。According to a third aspect of the present invention, in the high efficiency coded image decoding means, the additional function means decodes the coded image data to obtain a vertical / horizontal size ratio (aspect ratio). ) Is a letterbox (LB) means for changing a decoded image having a predetermined ratio to a decoded image having a vertical / horizontal size ratio (aspect ratio) different from the predetermined ratio.
【００３０】また、請求項３または請求項４に記載の高
効率符号化画像の復号手段おいて、前記付加機能手段
が、前記符号化画像データを復号して得られた復号画像
に番組案内や字幕・チャンネル番号などを挿入するオン
スクリーンディスプレイ（ＯＳＤ）手段であることを特
徴とする。In the high-efficiency coded image decoding means according to claim 3 or 4, the additional function means adds a program guide or the like to a decoded image obtained by decoding the coded image data. It is an on-screen display (OSD) means for inserting subtitles, channel numbers, and the like.
【００３１】また、画像表示装置として、請求項１ない
しは請求項７のいずれか１つの請求項に記載の復号手段
によって復号された画像を表示することを特徴とする。According to another aspect of the present invention, an image display device displays an image decoded by the decoding unit according to any one of the first to seventh aspects.
【００３２】[0032]
【発明の実施の形態】本発明の第１の実施形態を図１か
ら図９を用いて説明する。DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS A first embodiment of the present invention will be described with reference to FIGS.
【００３３】本実施形態は、入力されたＭＰＥＧ２方式
により符号化された符号化画像データを復号処理してＤ
／Ａコンバータへデジタル復号画像を出力するものであ
り、復号処理に要するメモリは復号器の外部に接続し、
入力符号化画像の解像度に基づいて、復号画像に対して
解像度縮小処理部における縮小処理の縮小率及び解像度
拡大処理部における拡大処理の拡大率を変更し、変更の
ためのタイミングを制御する信号を並べ替え読み出し部
から発行させることを特徴とするものである。In this embodiment, decoding processing is performed on the input coded image data coded according to the MPEG2 system, and
A digitally decoded image is output to the A / A converter, and a memory required for the decoding process is connected to the outside of the decoder,
Based on the resolution of the input coded image, a signal for changing the reduction ratio of the reduction process in the resolution reduction processing unit and the enlargement ratio of the enlargement process in the resolution expansion processing unit for the decoded image and controlling the timing for the change is output. It is characterized by being issued from the rearrangement readout unit.
【００３４】図１は、本実施形態に係る高効率符号化画
像の復号手段を示すブロック図である。FIG. 1 is a block diagram showing a means for decoding a highly efficient coded image according to the present embodiment.
【００３５】同図において、１は復号器、２は外部メモ
リ、３は可変長復号器（ＶＬＤ）、４は逆量子化器（Ｉ
Ｑ）、５は離散コサイン逆変換器（ＩＤＣＴ）、６は加
算器、７はデータバス、８はメモリＩ／Ｆ、９は動き補
償回路（ＭＣ）、１０は解像度縮小処理部、１１及び１
２は解像度拡大処理部、１３は解像度変換制御部、１４
は解像度変換部、１８はレジスタ、１９は並べ替え読み
出し部、３６はＣＰＵである。In the figure, 1 is a decoder, 2 is an external memory, 3 is a variable length decoder (VLD), and 4 is an inverse quantizer (I
Q), 5 is a discrete cosine inverse transformer (IDCT), 6 is an adder, 7 is a data bus, 8 is a memory I / F, 9 is a motion compensation circuit (MC), 10 is a resolution reduction processing unit, 11 and 1
2 is a resolution enlargement processing unit, 13 is a resolution conversion control unit, 14
Denotes a resolution conversion unit, 18 denotes a register, 19 denotes a rearrangement reading unit, and 36 denotes a CPU.
【００３６】外部メモリ２は、符号化画像データ格納領
域（ＥＳバッファ）２１、参照画像格納領域２２及び２
３、Ｂフレーム格納領域２４の各領域に分割される。The external memory 2 includes an encoded image data storage area (ES buffer) 21, reference image storage areas 22 and 2
3. It is divided into each area of the B frame storage area 24.
【００３７】以下に、図１を用いて復号器１の動作につ
いて説明する。The operation of the decoder 1 will be described below with reference to FIG.
【００３８】符号化画像データが復号器１に入力される
と、そのデータはデータバス７、メモリＩ／Ｆ８を介し
て外部メモリ２へ転送され、ＥＳバッファ２１に格納さ
れる。ＥＳバッファ２１に格納された符号化画像データ
は再びメモリＩ／Ｆ８によって読み出され、データバス
７を介してＶＬＤ３に転送される。ＶＬＤ３では符号化
画像データを可変長復号し、復号で得られた離散コサイ
ン変換係数からなる画像データをＩＱ４へ入力する。ま
た、符号化画像データから量子化係数や画像の解像度、
動きベクトルを抽出し、各々ＩＱ４、ＩＤＣＴ５、解像
度変換制御部１３、及びＭＣ９にサイド情報として入力
する。When the encoded image data is input to the decoder 1, the data is transferred to the external memory 2 via the data bus 7 and the memory I / F 8 and stored in the ES buffer 21. The encoded image data stored in the ES buffer 21 is read again by the memory I / F 8 and transferred to the VLD 3 via the data bus 7. The VLD 3 performs variable length decoding of the encoded image data, and inputs the image data composed of the discrete cosine transform coefficients obtained by the decoding to the IQ 4. In addition, quantization coefficient and image resolution,
The motion vectors are extracted and input as side information to IQ4, IDCT5, resolution conversion control unit 13, and MC9, respectively.
【００３９】ＩＱ４では、入力された離散コサイン変換
係数の画像データが量子化係数に基づいて逆量子化処理
され、ＩＤＣＴ５に入力される。In IQ4, the input discrete cosine transform coefficient image data is subjected to inverse quantization based on the quantization coefficient, and is input to IDCT5.
【００４０】ＩＤＣＴ５では、画像データは逆コサイン
変換処理が施され、これにより動き補償前の画像データ
が得られる。動き補償前の画像データは、後述の処理に
よりＭＣ９により生成された動き補償用データと加算器
６で加算され、復号画像データが得られる。In the IDCT 5, the image data is subjected to an inverse cosine transform process, whereby image data before motion compensation is obtained. The image data before the motion compensation is added by the adder 6 to the motion compensation data generated by the MC 9 by the processing described later, and decoded image data is obtained.
【００４１】加算器６より得られた復号画像は、解像度
縮小処理部１０へ入力される。解像度縮小処理部１０
は、解像度変換制御部１３より解像度縮小倍率の入力を
受け、復号画像の解像度を縮小した後、データバス７を
介してメモリＩ／Ｆ８へ送る。メモリＩ／Ｆ８は解像度
縮小処理部１０から送られた画像のうち、Ｉフレームと
Ｐフレームは参照画像格納領域２２及び２３へ、Ｂフレ
ームはＢフレーム格納領域２４へ格納する。The decoded image obtained by the adder 6 is input to the resolution reduction processing section 10. Resolution reduction processing unit 10
Receives the input of the resolution reduction ratio from the resolution conversion control unit 13, reduces the resolution of the decoded image, and sends the decoded image to the memory I / F 8 via the data bus 7. The memory I / F 8 stores the I frame and the P frame in the reference image storage areas 22 and 23 and stores the B frame in the B frame storage area 24 among the images sent from the resolution reduction processing unit 10.
【００４２】表示のために外部メモリ２から読み出され
た復号画像データは、メモリＩ／Ｆ８、データバス７を
経由し、並べ替え読み出し部１９で並べ替えられて解像
度拡大処理部１２へ送られる。解像度拡大処理部１２は
解像度変換制御部１３より解像度拡大倍率の入力を受
け、復号画像の解像度を拡大し、符号化画像が符号化さ
れる前の解像度に復元した後、解像度変換処理部１４へ
出力する。The decoded image data read from the external memory 2 for display is rearranged by the rearrangement reading unit 19 via the memory I / F 8 and the data bus 7 and sent to the resolution enlargement processing unit 12. . The resolution enlargement processing unit 12 receives an input of the resolution enlargement magnification from the resolution conversion control unit 13, enlarges the resolution of the decoded image, restores the resolution before the encoded image is encoded, and then sends the resolution conversion processing unit 14 Output.
【００４３】解像度変換処理部１４では、解像度拡大処
理部１２から入力された復号画像に解像度変換処理を施
す。一般に、入力符号化画像の解像度は一定ではなく、
図２に示すように、符号化画像の制作者の意図により様
々な解像度を採られる。同様に、復号画像を表示する画
像表示装置自体についても、図２に示すような複数の解
像度が考えられる。このため、復号画像の解像度を画像
表示装置の解像度に一致させるために解像度変換処理を
解像度変換処理部１４によって行う。以上の処理を経て
得られたディジタル復号画像は、復号器１の出力として
Ｄ／Ａコンバータへ送られる。The resolution conversion processing section 14 performs resolution conversion processing on the decoded image input from the resolution enlargement processing section 12. Generally, the resolution of the input coded image is not constant,
As shown in FIG. 2, various resolutions can be adopted depending on the intention of the creator of the encoded image. Similarly, a plurality of resolutions as shown in FIG. 2 can be considered for the image display device itself for displaying the decoded image. For this reason, the resolution conversion processing is performed by the resolution conversion processing unit 14 in order to match the resolution of the decoded image with the resolution of the image display device. The digitally decoded image obtained through the above processing is sent to the D / A converter as an output of the decoder 1.
【００４４】ここで、加算器６へ供給される動き補償用
データは、以下のようにして生成される。Here, the motion compensation data supplied to the adder 6 is generated as follows.
【００４５】ＭＰＥＧ２においては、画像データはマク
ロブロック（ＭＢ）と呼ばれる単位に細分化され、ＭＢ
ごとに符号化・復号化が行われる。４：２：０画像フォ
ーマットの場合、ＭＢは１６画素（水平）×１６画素
（垂直）の輝度データと８×８の色差（Ｃｂ、Ｃｒの２
成分）で構成される。In MPEG2, image data is subdivided into units called macroblocks (MB).
Encoding / decoding is performed every time. In the case of the 4: 2: 0 image format, MB is composed of 16 pixel (horizontal) × 16 pixel (vertical) luminance data and 8 × 8 color difference (Cb, Cr 2).
Component).
【００４６】ＩＤＣＴ５で得られた動き補償前の画像デ
ータは、サイド情報として最大で４つの動きベクトルを
有している。この動きベクトルはＭＣ９に送られ、ＭＣ
９は解像度拡大処理部１１に対し、参照画像２２及び２
３内の動きベクトルに対応した位置にある輝度成分１６
×１６、Ｃｂ成分８×８、Ｃｒ成分８×８の参照データ
を読み出すよう指示する。解像度拡大処理部１１もま
た、解像度縮小処理部１０及び解像度拡大処理部１２と
同様に、解像度変換制御部１３による制御を受けてお
り、この制御に従って参照画像格納領域２２及び２３か
ら読み出した参照画像データに対し解像度拡大処理を行
い、動きベクトルによって指定された参照画像データを
復元してＭＣ９へ入力する。この結果、ＭＣ９は、最大
で４つのＭＢ参照画像データ（輝度成分１６×１６、Ｃ
ｂ成分８×８、Ｃｒ成分８×８）を外部メモリ２から得
る。これらのＭＢ参照画像データの平均を取り、得られ
た参照画像（輝度成分１６×１６、Ｃｂ成分８×８、Ｃ
ｒ成分８×８）を加算器６に入力する。The image data before motion compensation obtained by the IDCT 5 has a maximum of four motion vectors as side information. This motion vector is sent to MC9,
Reference numeral 9 denotes the reference images 22 and 2
3, a luminance component 16 at a position corresponding to the motion vector
It instructs to read reference data of × 16, Cb component 8 × 8, and Cr component 8 × 8. The resolution enlargement processing unit 11 is also controlled by the resolution conversion control unit 13 similarly to the resolution reduction processing unit 10 and the resolution enlargement processing unit 12, and the reference images read from the reference image storage areas 22 and 23 according to this control. The data is subjected to resolution enlargement processing, and the reference image data designated by the motion vector is restored and input to the MC 9. As a result, the MC 9 outputs a maximum of four MB reference image data (a luminance component of 16 × 16, C
The b component 8 × 8 and the Cr component 8 × 8) are obtained from the external memory 2. The average of these MB reference image data is taken, and the obtained reference image (luminance component 16 × 16, Cb component 8 × 8, C
The r component (8 × 8) is input to the adder 6.
【００４７】レジスタ１８には復号器１の動作に必要な
各種のパラメータが格納されており、それらのパラメー
タはＣＰＵ３６によって指定され、その値は復号器１内
の各ブロックによって参照される。Various parameters necessary for the operation of the decoder 1 are stored in the register 18. These parameters are designated by the CPU 36, and their values are referred to by each block in the decoder 1.
【００４８】解像度縮小処理部１０において解像度縮小
処理を行った場合、復号画像の画質が劣化するが、この
劣化を最小限にとどめる解像度縮小処理部１０の構成を
図３に示す。When the resolution reduction processing section 10 performs the resolution reduction processing, the image quality of the decoded image is deteriorated. FIG. 3 shows the configuration of the resolution reduction processing section 10 for minimizing the deterioration.
【００４９】同図において、１０１は低域通過フィルタ
（ＬＰＦ）、１０２はダウンサンプラであり、ＬＰＦ１
０１で解像度縮小処理の際に画質劣化を引き起こす折り
返し成分の要因となる高周波成分を除去した後、ダウン
サンプラ１０２で解像度を１／ｎに縮小する。In the figure, 101 is a low-pass filter (LPF), 102 is a down sampler, and LPF 1
After removing high-frequency components that cause aliasing components that cause image quality degradation during resolution reduction processing at 01, the downsampler 102 reduces the resolution to 1 / n.
【００５０】また、解像度拡大処理部１１及び１２にお
いて解像度拡大処理を行った場合にも復号画像の画質は
劣化するが、この劣化を最小限にとどめる解像度拡大処
理部１１及び１２の構成を図４に示す。When the resolution expansion processing is performed in the resolution expansion processing units 11 and 12, the image quality of the decoded image is degraded. However, the configuration of the resolution expansion processing units 11 and 12 for minimizing the deterioration is shown in FIG. Shown in
【００５１】同図において、１１１はアップサンプラ、
１１２は低域通過フィルタ（ＬＰＦ）であり、アップサ
ンプラ１１１において復号画像の解像度をｎ倍に拡大し
た後、ＬＰＦ１１２によって画質劣化の要因となるイメ
ージング成分を除去する。In the figure, 111 is an upsampler,
Reference numeral 112 denotes a low-pass filter (LPF). After increasing the resolution of the decoded image by n times in the upsampler 111, the LPF 112 removes an imaging component that causes image quality deterioration.
【００５２】また、解像度変換処理部１４も解像度縮小
処理機能と解像度拡大処理機能の両方を有しているの
で、各処理を行った際に画質が劣化するが、この劣化を
最小限にとどめる解像度変換処理部１４の構成を図５に
示す。Further, since the resolution conversion processing section 14 also has both the resolution reduction processing function and the resolution enlargement processing function, the image quality deteriorates when each processing is performed. FIG. 5 shows the configuration of the conversion processing unit 14.
【００５３】同図において、１０１は低域通過フィルタ
（ＬＰＦ）、１０２はダウンサンプラ、１１１はアップ
サンプラ、１１２は低域通過フィルタ（ＬＰＦ）であ
り、これらは図３及び図４で説明したものと同様に機能
して画質の劣化を防止する。In the figure, 101 is a low-pass filter (LPF), 102 is a down-sampler, 111 is an up-sampler, and 112 is a low-pass filter (LPF), which are described with reference to FIGS. And functions to prevent image quality deterioration.
【００５４】このように、解像度縮小処理部１０、解像
度拡大処理部１１及び１２、解像度変換処理部１４を上
記のように構成することにより、解像度変換処理の際の
画質の劣化を最小限にとどめることができる。As described above, by configuring the resolution reduction processing unit 10, the resolution expansion processing units 11 and 12, and the resolution conversion processing unit 14 as described above, the deterioration of the image quality during the resolution conversion processing is minimized. be able to.
【００５５】以下に、図１及び図６から図８を用いて、
解像度変換制御部１３による解像度縮小処理部１０、解
像度拡大処理部１１及び１２における処理について詳細
に説明する。Hereinafter, referring to FIG. 1 and FIGS. 6 to 8,
The processing in the resolution reduction processing unit 10 and the resolution expansion processing units 11 and 12 by the resolution conversion control unit 13 will be described in detail.
【００５６】図６は、図示していないメモリに保存さ
れ、ＣＰＵ３６によってＶＬＤ３から得られる各入力画
像解像度に対応して付された符号表である。FIG. 6 is a code table stored in a memory (not shown) and assigned according to each input image resolution obtained from the VLD 3 by the CPU 36.
【００５７】また、図７は、本実施形態に係る解像度変
換制御部１３の構成を示すブロック図であり、同図にお
いて、１３１はＲＯＭであり、ＲＯＭ１３１には、図８
に示す解像度変換倍率表が格納されている。FIG. 7 is a block diagram showing the configuration of the resolution conversion control section 13 according to the present embodiment. In FIG. 7, reference numeral 131 denotes a ROM, and
Is stored.
【００５８】はじめに、ＶＬＤ３は入力符号化画像から
入力画像の解像度を解析し、その情報をＣＰＵ３６へ送
る。ＣＰＵ３６は、図６に示す符号表に従って得られた
入力画像解像度に対応する符号をレジスタ１８へ入力す
る。レジスタ１８に入力された符号は解像度変換制御部
１３によって参照される。なお、解像度変換制御部１３
による参照のタイミングについては後述する。First, the VLD 3 analyzes the resolution of the input image from the input coded image and sends the information to the CPU 36. The CPU 36 inputs a code corresponding to the input image resolution obtained according to the code table shown in FIG. The code input to the register 18 is referred to by the resolution conversion control unit 13. The resolution conversion control unit 13
Will be described later.
【００５９】解像度変換制御部１３は、参照した符号を
アドレスとしてＲＯＭ１３１に格納されている図８に示
す解像度変換倍率表を参照する。例えば、入力符号化画
像の解像度が１９２０×１０８０ならばＲＯＭ１３１上
の“００”というアドレスを、また入力画像の解像度が
７２０×１８０であれば“１１”というアドレスを参照
する。参照したアドレスに応じて解像度変換制御部１３
から解像度変換倍率が引き出され、それぞれの解像度変
換倍率が解像度縮小処理部１０、解像度拡大処理部１１
及び１２へ入力される。The resolution conversion control section 13 refers to the resolution conversion magnification table shown in FIG. For example, if the resolution of the input coded image is 1920 × 1080, the address “00” on the ROM 131 is referred to, and if the resolution of the input image is 720 × 180, the address “11” is referred to. Resolution conversion control unit 13 according to the referenced address
The resolution conversion magnification is derived from the resolution conversion processing unit 10 and the resolution conversion processing unit 11
And 12.
【００６０】図８に示す解像度変換倍率表において、ア
ドレス“００”の符号では、入力画像は１９２０画素
（水平）×１０８０画素（垂直）の解像度を持ってお
り、この解像度の入力符号化画像の復号には大容量の外
部メモリと大きなバンド幅（外部メモリとのデータ転送
レート）が必要となるため、解像度縮小処理部１０で水
平解像度を１／２にしてから外部メモリ２に格納し、外
部メモリ２から表示順に並べ替え読み出し部１９が読み
出した後で、解像度拡大処理部１２において水平解像度
を２倍にし、解像度縮小処理部１０が縮小処理を行う前
の解像度の復号画像に復元する。また、他フレームを復
号する際の参照画像とする場合には、解像度拡大処理部
１１において水平解像度を２倍にし、縮小前の解像度の
参照画像を得る。この解像度変換処理により、入力画像
の解像度が大きい場合に必要としていたメモリ容量及び
バンド幅を低減することができる。In the resolution conversion magnification table shown in FIG. 8, the input image has a resolution of 1920 pixels (horizontal) .times.1080 pixels (vertical) with the code of address "00". Since decoding requires a large-capacity external memory and a large bandwidth (data transfer rate with the external memory), the horizontal resolution is reduced to １ ／ by the resolution reduction processing unit 10 and stored in the external memory 2. After the reordering and reading unit 19 reads out from the memory 2 in the display order, the horizontal resolution is doubled in the resolution enlargement processing unit 12 and restored to a decoded image of the resolution before the resolution reduction processing unit 10 performs the reduction processing. When the reference image is used for decoding another frame, the horizontal resolution is doubled in the resolution enlargement processing unit 11 to obtain a reference image having a resolution before reduction. By this resolution conversion processing, the memory capacity and bandwidth required when the resolution of the input image is large can be reduced.
【００６１】また、解像度変換倍率表のアドレス“１
１”の符号では、入力画像は７２０画素（水平）×４８
０画素（水平）の解像度を持っており、この場合は、
“００”の場合と比較して必要なメモリ容量及びバンド
幅はそれぞれ約１／６となるため、必要なメモリ容量及
びバンド幅を低減する必要がない。この場合には、解像
度縮小処理部１０、解像度拡大処理部１１及び１２にお
いて解像度変換処理は行わず、復号画像は元来の画質が
維持される。The address “1” in the resolution conversion magnification table
With a code of 1 ″, the input image is 720 pixels (horizontal) × 48
It has a resolution of 0 pixels (horizontal). In this case,
Since the required memory capacity and bandwidth are each about 1/6 as compared with the case of "00", it is not necessary to reduce the required memory capacity and bandwidth. In this case, the resolution conversion processing is not performed in the resolution reduction processing unit 10 and the resolution expansion processing units 11 and 12, and the original image quality of the decoded image is maintained.
【００６２】ここで、解像度縮小処理部１０、解像度拡
大処理部１１及び１２における解像度変換倍率は、入力
画像の解像度が受信チャンネルの変更や番組の切り替わ
りで変化する度に解像度変換制御部１３によって変更さ
れる。Here, the resolution conversion magnification in the resolution reduction processing unit 10 and the resolution expansion processing units 11 and 12 is changed by the resolution conversion control unit 13 every time the resolution of the input image changes due to the change of the receiving channel or the switching of the program. Is done.
【００６３】次に、解像度変換制御部１３によって変換
倍率が変更されるタイミングの制御について図９を用い
て説明する。Next, control of the timing at which the conversion magnification is changed by the resolution conversion control unit 13 will be described with reference to FIG.
【００６４】同図において、入力フレームＰ０、Ｂ１、
Ｂ２は解像度が１９２０画素（水平）×１０８０画素
（垂直）、フレームＩ３、Ｂ４、Ｂ５は解像度が７２０
画素（水平）×４８０画素（垂直）である。フレームＢ
１、Ｂ２はフレームＰ０を、フレームＢ４、Ｂ５はフレ
ームＩ３を復号時の参照画像として用いる。この場合
は、図８に示す解像度変換倍率表に示すように、解像度
縮小処理部１０の水平解像度変換倍率は、フレームＰ
０、Ｂ１、Ｂ２の復号処理中は１／２倍、フレームＩ
３、Ｂ４、Ｂ５の復号処理中は等倍となり、その切り替
えタイミングは時刻（Ａ）である。同様に解像度拡大処
理部１１の水平解像度変換倍率は、フレームＰ０、Ｂ
１、Ｂ２の復号処理中は２倍、フレームＩ３、Ｂ４、Ｂ
５の復号処理中は等倍となり、その切り替えタイミング
は解像度縮小処理部１０と同じく時刻（Ａ）である。一
方、解像度拡大処理部１２の水平解像度変換倍率は、フ
レームＰ０、Ｂ１、Ｂ２の復号処理中は２倍、フレーム
Ｉ３、Ｂ４、Ｂ５の復号処理中は等倍となり、その切り
替えタイミングは時刻（Ｂ）である。In the figure, input frames P0, B1,.
B2 has a resolution of 1920 pixels (horizontal) × 1080 pixels (vertical), and frames I3, B4, and B5 have a resolution of 720 pixels.
Pixels (horizontal) × 480 pixels (vertical). Frame B
1, B2 uses the frame P0, and frames B4, B5 use the frame I3 as a reference image at the time of decoding. In this case, as shown in the resolution conversion magnification table shown in FIG.
0, B1, and B2 during the decoding process, the frame I
During the decoding process of 3, B4 and B5, the magnification becomes the same, and the switching timing is time (A). Similarly, the horizontal resolution conversion magnification of the resolution enlargement processing unit 11 is set to the frames P0, B
1, during the decoding process of B2, the frame I3, B4, B
5 during the decoding process, the switching timing is time (A) as in the resolution reduction processing unit 10. On the other hand, the horizontal resolution conversion magnification of the resolution enlargement processing unit 12 is double during the decoding processing of the frames P0, B1, and B2, and is equal during the decoding processing of the frames I3, B4, and B5. ).
【００６５】時刻（Ａ）において入力画像の解像度が変
化すると、その情報はＶＬＤ３からＣＰＵ３６へ伝えら
れる。ＣＰＵ３６は変化後の解像度に基づいて、図６に
示す符号表に従って、入力画像解像度に対応する符号を
レジスタ１８へ書き込む。解像度変換制御部１３はレジ
スタ１８内の符号を参照し、即座に解像度縮小処理部１
０及び解像度拡大処理部１１における水平解像度変換倍
率を変更する。When the resolution of the input image changes at time (A), the information is transmitted from the VLD 3 to the CPU 36. The CPU 36 writes a code corresponding to the input image resolution into the register 18 based on the changed resolution according to the code table shown in FIG. The resolution conversion control unit 13 refers to the code in the register 18 and immediately executes the resolution reduction processing unit 1.
0 and the horizontal resolution conversion magnification in the resolution enlargement processing unit 11 are changed.
【００６６】先に図１９において説明したように、並べ
替え読み出し部１９は、図９の時刻（Ａ）に基づいて、
時刻（Ｘ）でアンカーフレームを選択して読み出す機能
を有している。これを利用し、並べ替え読み出し部１９
は時刻（Ｘ）のｄｉｓｐ＿ｖ＿ｓｙｎｃパルスの次のｄ
ｉｓｐ＿ｖ＿ｓｙｎｃパルスの時刻（Ｂ）を検出する機
能を備えている。そして、この時刻（Ｂ）のタイミング
で並べ替え読み出し部１９は制御信号ｄｉｓｐ＿ｃｈ＿
ｅｎを解像度変換制御部１３に対して出力する。解像度
変換制御部１３はｄｉｓｐ＿ｃｈ＿ｅｎを受けて、時刻
（Ｂ）において解像度拡大処理部１２の解像度拡大倍率
を変更する。As described above with reference to FIG. 19, the rearranging and reading unit 19 performs the following based on the time (A) in FIG.
It has a function of selecting and reading an anchor frame at time (X). Using this, the sorting and reading unit 19
Is the next d of the disp_v_sync pulse at time (X)
It has a function of detecting the time (B) of the isp_v_sync pulse. Then, at the timing of this time (B), the reordering and reading unit 19 outputs the control signal disp_ch_
en to the resolution conversion control unit 13. Upon receiving disp_ch_en, the resolution conversion control unit 13 changes the resolution enlargement magnification of the resolution enlargement processing unit 12 at time (B).
【００６７】このように、並べ替え読み出し部１９によ
り、入力画像の解像度の変化に基づく解像度変換倍率の
変更処理を正しいタイミングで行うことができる。As described above, the reordering / reading section 19 can change the resolution conversion magnification based on the change in the resolution of the input image at the correct timing.
【００６８】次に、本発明の第２の実施形態を図１０か
ら図１５を用いて説明する。Next, a second embodiment of the present invention will be described with reference to FIGS.
【００６９】本実施形態は、ＰｉｎＰ機能を備え、外部
から与えられるＰｉｎＰ機能の動作を指令するオン・オ
フ命令に基づいて、復号画像に対し解像度縮小処理部に
おける縮小処理の縮小率及び解像度拡大処理部における
拡大処理の拡大率を変更し、その変更タイミング及びＰ
ｉｎＰ機能の動作タイミングを制御する信号を並べ替え
読み出し部から発行させることを特徴としている。This embodiment is provided with a PinP function, and based on an on / off command instructing the operation of the PinP function given from the outside, the reduction ratio of the reduction processing and the resolution enlargement processing in the resolution reduction processing section for the decoded image. Section changes the enlargement ratio of the enlargement process, the change timing and P
It is characterized in that a signal for controlling the operation timing of the inP function is issued from the rearrangement readout unit.
【００７０】図１０は、本実施形態に係る高効率符号化
画像データの復号手段を示すブロック図である。FIG. 10 is a block diagram showing a means for decoding highly efficient encoded image data according to the present embodiment.
【００７１】同図において、１５はＰｉｎＰ処理部、２
５はＰｉｎＰ機能用メモリ領域である。なお、その他の
構成は図１に示す同符号の構成に対応する。解像度拡大
処理部１２から出力された復号画像は、ＰｉｎＰ処理部
１５へ入力される。また、副入力画像もＰｉｎＰ処理部
１５へ入力される。ＰｉｎＰ処理部１５では、復号画像
と副入力画像の同期をとり、また一方の解像度を縮小し
て他方の一部へ挿入するための時間遅延を行うために、
復号画像及び副入力画像を外部メモリ２内のＰｉｎＰ用
メモリ２５へ格納する。その後、ＰｉｎＰ用メモリ２５
から読み出された両画像はＰｉｎＰ処理部１５において
１つの画像に合成され、解像度変換処理部１４で画像表
示装置の解像度に変換され、画像表示装置へ送られる。
ＰｉｎＰ機能を動作させるためのオン・オフ命令は外部
から与えられ、その命令を受けてＣＰＵ３６はＰｉｎＰ
動作のオン・オフを切り替える。In the figure, reference numeral 15 denotes a PinP processing unit, 2
Reference numeral 5 denotes a memory area for the PinP function. Other configurations correspond to the configurations of the same reference numerals shown in FIG. The decoded image output from the resolution enlargement processing unit 12 is input to the PinP processing unit 15. The sub input image is also input to the PinP processing unit 15. In the PinP processing unit 15, in order to synchronize the decoded image and the sub-input image, and to perform a time delay for reducing one resolution and inserting it into the other part,
The decoded image and the sub-input image are stored in the PinP memory 25 in the external memory 2. After that, the PinP memory 25
Are combined into one image in the PinP processing unit 15, converted to the resolution of the image display device by the resolution conversion processing unit 14, and sent to the image display device.
An on / off command for operating the PinP function is externally given, and in response to the command, the CPU 36 causes the PinP function to operate.
Switches the operation on and off.
【００７２】以下に、図１０から図１３を用いて、解像
度変換制御部１３による解像度縮小処理部１０、解像度
拡大処理部１１及び１２における処理について詳細に説
明する。The processing performed by the resolution conversion control unit 13 in the resolution reduction processing unit 10, and the resolution enlargement processing units 11 and 12 will be described below in detail with reference to FIGS.
【００７３】図１１は、図示されていないメモリに格納
され、ＣＰＵ３６によって外部からＰｉｎＰ機能の動作
オン・オフ命令に対応して付された符号表である。FIG. 11 is a code table stored in a memory (not shown) and given by the CPU 36 in response to an external ON / OFF command of the PinP function.
【００７４】図１２は、本実施形態に係る解像度変換制
御部１３の構成を示すブロック図であり、同図におい
て、１３２はＲＯＭであり、ＲＯＭ１３２には、図１３
に示す解像度変換倍率表が格納されている。FIG. 12 is a block diagram showing the configuration of the resolution conversion control unit 13 according to the present embodiment. In FIG. 12, reference numeral 132 denotes a ROM, and FIG.
Is stored.
【００７５】はじめに、外部からＰｉｎＰ機能の動作オ
ン・オフ命令が与えられると、ＣＰＵ３６は、図１１に
示す符号表に従って動作オン・オフ命令に対応する符号
をレジスタ１８内の所定の領域に書き込む。レジスタ１
８内の符号は解像度変換制御部１３によって参照され
る。なお、解像度変換制御部１３による参照のタイミン
グについては後述する。First, when an operation ON / OFF command of the PinP function is given from outside, the CPU 36 writes a code corresponding to the operation ON / OFF command in a predetermined area in the register 18 according to a code table shown in FIG. Register 1
The code in 8 is referred to by the resolution conversion control unit 13. The timing of reference by the resolution conversion control unit 13 will be described later.
【００７６】解像度変換制御部１３は、参照した符号を
アドレスとして解像度変換制御部１３のＲＯＭ１３２に
格納されている図１３に示す解像度変換倍率表を参照す
る。例えば、外部からのＰｉｎＰ機能の動作命令がオフ
ならばＲＯＭ１３２上の“０”というアドレスを、動作
命令がオンならば“１”というアドレスを参照する。参
照したアドレスに応じて解像度変換制御部１３から解像
度変換倍率が引き出され、それぞれの解像度変換倍率が
解像度縮小処理部１０、解像度拡大処理部１１及び１２
へ入力される。The resolution conversion control unit 13 refers to the resolution conversion magnification table shown in FIG. 13 stored in the ROM 132 of the resolution conversion control unit 13 using the referenced code as an address. For example, if the operation command of the PinP function from the outside is off, the address “0” on the ROM 132 is referred to, and if the operation command is on, the address “1” is referred. The resolution conversion magnification is extracted from the resolution conversion control unit 13 in accordance with the referred address, and the respective resolution conversion magnifications are determined by the resolution reduction processing unit 10, the resolution expansion processing units 11 and 12, and
Is input to
【００７７】図１３に示す解像度変換倍率表において、
アドレス“０”の符号では、外部からのＰｉｎＰ機能の
動作命令はオフである。この場合にはＰｉｎＰ機能のた
めの外部メモリ容量及びバンド幅が必要でないため、解
像度縮小処理部１０、解像度拡大処理部１１及び１２に
おいて解像度変換処理は行わず、復号画像は元来の画質
が維持される。解像度変換倍率表において、アドレス
“１”の場合は、外部からのＰｉｎＰ機能の動作命令は
オンである。この場合は、“０”の場合と比較してＰｉ
ｎＰ機能のための外部メモリ領域及びバンド幅が必要と
なるため、解像度縮小処理部１０で水平解像度を１／２
にしてから外部メモリ２内に格納し、外部メモリから表
示順に並べ替え読み出し部１９が読み出した後で、解像
度拡大処理部１２において水平解像度を２倍にし、解像
度縮小処理部１０が縮小処理を行う前の解像度の復号画
像に復元する。また、他フレームを復号する際の参照画
像とする場合には、解像度拡大処理部１１において水平
解像度を２倍にし、縮小前の解像度の参照画像を得る。
この解像度変換処理により、ＰｉｎＰ機能の動作がオン
の場合の必要メモリ容量及びバンド幅を低減することが
できる。In the resolution conversion magnification table shown in FIG.
In the code of the address “0”, the external operation command of the PinP function is off. In this case, since the external memory capacity and the bandwidth for the PinP function are not required, the resolution reduction processing unit 10, the resolution expansion processing units 11 and 12 do not perform the resolution conversion processing, and the original image quality of the decoded image is maintained. Is done. In the resolution conversion magnification table, when the address is “1”, an external operation command of the PinP function is on. In this case, Pi is compared with the case of “0”.
Since the external memory area and the bandwidth for the nP function are required, the horizontal resolution is reduced to １ ／ by the resolution reduction processing unit 10.
After that, the image data is stored in the external memory 2 and rearranged in the display order from the external memory and read out by the reading unit 19. Then, the horizontal resolution is doubled in the resolution enlargement processing unit 12, and the resolution reduction processing unit 10 performs reduction processing. Restore to the decoded image of the previous resolution. When the reference image is used for decoding another frame, the horizontal resolution is doubled in the resolution enlargement processing unit 11 to obtain a reference image having a resolution before reduction.
This resolution conversion processing can reduce the required memory capacity and bandwidth when the operation of the PinP function is on.
【００７８】解像度縮小処理部１０、解像度拡大処理部
１１及び１２の解像度変換倍率は、外部からＰｉｎＰ機
能の動作のオン・オフ命令が与えられる度に解像度変換
制御部１３によって変更される。The resolution conversion magnification of the resolution reduction processing unit 10 and the resolution expansion processing units 11 and 12 is changed by the resolution conversion control unit 13 every time an on / off command for the operation of the PinP function is given from outside.
【００７９】以下に、本実施形態に係る解像度変換制御
部１３における変換倍率を変更するタイミングの制御に
ついて図１４及び図１５を用いて説明する。Hereinafter, the control of the timing for changing the conversion magnification in the resolution conversion control unit 13 according to the present embodiment will be described with reference to FIGS.
【００８０】図１４は、ＰｉｎＰ機能の動作命令がオフ
状態からオン状態へ変更された場合の解像度変換率の変
更のタイミング制御を説明するための図である。FIG. 14 is a diagram for explaining the timing control for changing the resolution conversion rate when the operation command of the PinP function is changed from the off state to the on state.
【００８１】時刻（Ｙ）において外部からのＰｉｎＰ機
能動作命令がオフからオンへ変化したとすると、この場
合時刻（Ｙ）からある程度の時間をかけて、ＣＰＵ３６
がレジスタ１８内にＰｉｎＰ動作オンのための諸パラメ
ータを設定する。その設定が終了した時刻（Ｚ）をもっ
て、ＣＰＵ３６は信号ｌａｓｔ＿ｒｅｇを並べ替え読み
出し部１９へ発行する。並べ替え読み出し部１９はｌａ
ｓｔ＿ｒｅｇを受けた次のアンカーフレームの復号開始
時刻（Ａ）において、信号パルスｖ＿ｒｅｇｃｈ＿ｅｎ
＿Ａとｖ＿ｆｕｌｌ＿ｈａｌｆを解像度変換制御部１３
に発行する。解像度変換制御部１３はｖ＿ｆｕｌｌ＿ｈ
ａｌｆを受けて、解像度縮小処理部１０の縮小倍率を等
倍から１／２倍へ変更する。その後、並べ替え読み出し
部１９は、時刻（Ａ）の次に初めて復号されるＢフレー
ムの復号開始時刻（Ｃ０）において、再びｖ＿ｆｕｌｌ
＿ｈａｌｆを解像度変換制御部１３に発行する。解像度
変換制御部１３はｖ＿ｆｕｌｌ＿ｈａｌｆを受けて、解
像度縮小処理部１０の縮小倍率を１／２倍からもとの等
倍へ変更する。さらにその後初めて復号されるアンカー
フレームの復号開始時刻（Ｃ１）において、三たびｆｕ
ｌｌ＿ｈａｌｆを解像度変換制御部１３に発行する。解
像度変換制御部１３はｆｕｌｌ＿ｈａｌｆを受けて、解
像度縮小処理部１０の縮小倍率を等倍から１／２倍へ変
更する。Assuming that the external PinP function operation command changes from off to on at time (Y), the CPU 36 takes some time from time (Y) in this case.
Sets various parameters for turning on the PinP operation in the register 18. At the time (Z) when the setting is completed, the CPU 36 issues the signal last_reg to the rearrangement reading unit 19. The rearrangement readout unit 19
At the decoding start time (A) of the next anchor frame that has received st_reg, the signal pulse v_regch_en
_A and v_full_half are converted to a resolution conversion control unit 13
Issue to The resolution conversion control unit 13 sets v_full_h
In response to alf, the reduction magnification of the resolution reduction processing unit 10 is changed from the same magnification to 1/2. Then, at the decoding start time (C0) of the B frame to be decoded for the first time after the time (A), the reordering and reading unit 19 returns v_full again.
_Half is issued to the resolution conversion control unit 13. Upon receiving v_full_half, the resolution conversion control unit 13 changes the reduction magnification of the resolution reduction processing unit 10 from 1/2 to the original one. Further, at the decoding start time (C1) of the anchor frame decoded for the first time after that, fu is repeated three times.
ll_half is issued to the resolution conversion control unit 13. Upon receiving the full_half, the resolution conversion control unit 13 changes the reduction magnification of the resolution reduction processing unit 10 from the same magnification to 1/2.
【００８２】Ｂ４、Ｂ５の復号期間（時刻（Ｃ０）から
時刻（Ｃ１）まで）には、解像度拡大処理部１１の拡大
率は等倍と２倍の混在となる。これは、Ｐ０を参照画像
とする場合には等倍、Ｐ３を参照画像とする場合には２
倍とするためである。その後、ｖ＿ｒｅｇｃｈ＿ｅｎ＿
Ａの次のアンカーフレーム復号開始時刻（Ｃ１）におい
て、並べ替え読み出し部１９は信号パルスｖ＿ｒｅｇｃ
ｈ＿ｅｎ＿Ｂを解像度変換制御部１３へ送る。解像度変
換制御部１３はｖ＿ｒｅｇｃｈ＿ｅｎ＿Ｂを受けて、解
像度拡大処理部１１の拡大率を２倍に設定する。During the decoding period of B4 and B5 (from time (C0) to time (C1)), the enlargement ratio of the resolution enlargement processing unit 11 is a mixture of the same size and twice. This is 1 × when P0 is the reference image, and 2 when P3 is the reference image.
This is to make it double. After that, v_regch_en_
At the anchor frame decoding start time (C1) next to A, the reordering and reading unit 19 outputs the signal pulse v_regc.
h_en_B is sent to the resolution conversion control unit 13. Upon receiving v_regch_en_B, the resolution conversion control unit 13 sets the enlargement ratio of the resolution enlargement processing unit 11 to twice.
【００８３】時刻（Ｃ１）の次のｄｉｓｐ＿ｖ＿ｓｙｎ
ｃのタイミング時刻（Ｂ）で、並べ替え読み出し部１９
は信号パルスｄｉｓｐ＿ｃｈ＿ｅｎを解像度変換制御部
１３とＰｉｎＰ処理部１５へ発行する。解像度変換制御
部１３はｄｉｓｐ＿ｃｈ＿ｅｎを受けて解像度拡大処理
部１２の拡大率を２倍に設定する。また、ＰｉｎＰ処理
部１５はｄｉｓｐ＿ｃｈ＿ｅｎを受けてＰｉｎＰ動作を
開始する。Disp_v_syn next to time (C1)
At the timing time (B) of FIG.
Issues a signal pulse disp_ch_en to the resolution conversion control unit 13 and the PinP processing unit 15. Upon receiving disp_ch_en, the resolution conversion control unit 13 sets the enlargement ratio of the resolution enlargement processing unit 12 to twice. Further, the PinP processing unit 15 starts the PinP operation in response to disp_ch_en.
【００８４】図１５は、ＰｉｎＰ機能の動作命令がオフ
状態からオン状態へ変更された場合の解像度変換率の変
更のタイミング制御を説明するための図である。FIG. 15 is a diagram for explaining timing control for changing the resolution conversion rate when the operation command of the PinP function is changed from the off state to the on state.
【００８５】時刻（Ｙ）において外部からのＰｉｎＰ機
能の動作命令がオンからオフへ変化したとする。この場
合、時刻（Ｙ）からある程度の時間をかけ、ＣＰＵ３６
がレジスタ１８内にＰｉｎＰ動作オンのための諸パラメ
ータを設定する。諸パラメータのうち、ＰｉｎＰ動作の
オフを示す符号“０”がレジスタ１８内に書き込まれた
時刻（Ｗ）をもって、並べ替え読み出し部１９は信号パ
ルスＰｉｎＰ＿ｏｆｆをＰｉｎＰ処理部１５へ発行す
る。ＰｉｎＰ処理部１５はＰｉｎＰ＿ｏｆｆを受けてＰ
ｉｎＰ機能の動作をオフにする。Assume that at time (Y), an external operation command of the PinP function changes from on to off. In this case, it takes some time from the time (Y) and the CPU 36
Sets various parameters for turning on the PinP operation in the register 18. At the time (W) at which the code “0” indicating the OFF of the PinP operation is written in the register 18 among the various parameters, the reordering / reading unit 19 issues a signal pulse PinP_off to the PinP processing unit 15. The PinP processing unit 15 receives PinP_off and
Turn off the operation of the inP function.
【００８６】レジスタ１８への全ての設定が終了した時
刻（Ｚ）をもって、ＣＰＵ３６は信号ｌａｓｔ＿ｒｅｇ
を並べ替え読み出し部１９へ発行する。並べ替え読み出
し部１９はｌａｓｔ＿ｒｅｇを受けた次のアンカーフレ
ームのデコード開始時刻（Ａ）において、信号パルスｖ
＿ｒｅｇｃｈ＿ｅｎ＿Ａとｖ＿ｆｕｌｌ＿ｈａｌｆを解
像度変換制御部１３に発行する。解像度変換制御部１３
はｖ＿ｆｕｌｌ＿ｈａｌｆを受けて、解像度縮小処理部
１０の縮小倍率を１／２倍から等倍へ変更する。その
後、並べ替え読み出し部１９は、時刻（Ａ）の次に初め
て復号されるＢフレームの復号開始時刻（Ｃ０）におい
て、再びｖ＿ｆｕｌｌ＿ｈａｌｆを解像度変換制御部１
３に発行する。解像度変換制御部１３はｖ＿ｆｕｌｌ＿
ｈａｌｆを受けて、解像度縮小処理部１０の縮小率を等
倍からもとの１／２倍へ変更する。さらにその後初めて
復号されるアンカーフレームの復号開始時刻（Ｃ１）に
おいて、三たびｆｕｌｌ＿ｈａｌｆを解像度変換制御部
１３に発行する。解像度変換制御部１３はｆｕｌｌ＿ｈ
ａｌｆを受けて、解像度縮小処理部１０の縮小倍率を１
／２倍から等倍へ変更する。At the time (Z) when all the settings in the register 18 are completed, the CPU 36 outputs the signal last_reg.
Is issued to the sorting and reading unit 19. At the decoding start time (A) of the next anchor frame that has received the last_reg, the rearrangement reading unit 19 outputs the signal pulse v
_Regch_en_A and v_full_half are issued to the resolution conversion control unit 13. Resolution conversion control unit 13
Receives v_full_half, and changes the reduction magnification of the resolution reduction processing unit 10 from 1/2 to 1: 1. After that, at the decoding start time (C0) of the B frame to be decoded for the first time after the time (A), the rearrangement reading unit 19 again converts v_full_half into the resolution conversion control unit 1
Issue to 3. The resolution conversion control unit 13 sets v_full_
In response to the half, the reduction ratio of the resolution reduction processing unit 10 is changed from the same magnification to the original 1/2 times. Further, at the decoding start time (C1) of the anchor frame to be decoded for the first time after that, full_half is issued to the resolution conversion control unit 13 three times. The resolution conversion control unit 13 outputs full_h
lf, the reduction magnification of the resolution reduction processing unit 10 is set to 1
Change from / 2 to 1: 1.
【００８７】Ｂ４、Ｂ５の復号期間（時刻（Ｃ０）から
時刻（Ｃ１）まで）には、解像度拡大処理部１１の拡大
率は等倍と２倍の混在となる。これは、Ｐ０を参照画像
とする場合には２倍、Ｐ３を参照画像とする場合には等
倍とするためである。その後、ｖ＿ｒｅｇｃｈ＿ｅｎ＿
Ａの次のアンカーフレームの復号開始時刻（Ｃ１）にお
いて、並べ替え読み出し部１９は信号パルスｖ＿ｒｅｇ
ｃｈ＿ｅｎ＿Ｂを解像度変換制御部１３へ送る。解像度
変換制御部１３はｖ＿ｒｅｇｃｈ＿ｅｎ＿Ｂを受けて、
解像度拡大処理部１１の拡大率を等倍に設定する。During the decoding period of B4 and B5 (from time (C0) to time (C1)), the enlargement ratio of the resolution enlargement processing unit 11 is a mixture of the same size and twice. This is because when P0 is set as the reference image, the size is doubled, and when P3 is set as the reference image, the size is doubled. After that, v_regch_en_
At the decoding start time (C1) of the anchor frame next to A, the reordering and reading unit 19 outputs the signal pulse v_reg.
The ch_en_B is sent to the resolution conversion control unit 13. The resolution conversion control unit 13 receives v_regch_en_B,
The enlargement ratio of the resolution enlargement processing unit 11 is set to the same magnification.
【００８８】時刻（Ｃ１）の次のｄｉｓｐ＿ｖ＿ｓｙｎ
ｃのタイミングで、並べ替え読み出し部１９は信号パル
スｄｉｓｐ＿ｃｈ＿ｅｎを解像度変換制御部１３へ発行
する。解像度変換制御部１３はｄｉｓｐ＿ｃｈ＿ｅｎを
受けて解像度拡大処理部１２の拡大率を等倍に設定す
る。The next disp_v_syn after the time (C1)
At timing c, the rearrangement readout unit 19 issues a signal pulse disp_ch_en to the resolution conversion control unit 13. Upon receiving disp_ch_en, the resolution conversion control unit 13 sets the enlargement ratio of the resolution enlargement processing unit 12 to 1: 1.
【００８９】以上のごとく、本実施形態によれば、図１
４及び図１５で説明したようなタイミングで制御する機
能を並べ替え読み出し部１９に実装することにより、外
部からのＰｉｎＰ機能の動作オン・オフ命令に基づいて
解像度変換倍率の変更処理及びＰｉｎＰ動作を正しいタ
イミングで行うことができる。As described above, according to the present embodiment, FIG.
15 and the function of controlling at the timing as described in FIG. 15 are implemented in the reordering and reading unit 19, so that the resolution conversion magnification change process and the PinP operation can be performed based on the externally ON / OFF operation of the PinP function. It can be done at the right time.
【００９０】次に、本発明の第３の実施形態を図１６を
用いて説明する。Next, a third embodiment of the present invention will be described with reference to FIG.
【００９１】本実施形態は、ＬＢ機能を備え、外部から
のＬＢ機能の動作を指令するオン・オフ命令に基づい
て、復号画像に対し解像度縮小処理部における縮小処理
の縮小率及び解像度拡大処理部における拡大処理の拡大
率を変更し、その変更タイミング及びＬＢ機能の動作タ
イミングを制御する信号を並べ替え読み出し部から発行
させることを特徴としている。This embodiment is provided with an LB function, and based on an on / off command for instructing the operation of the LB function from the outside, a reduction ratio of the reduction processing in the resolution reduction processing section and a resolution expansion processing section for the decoded image. Is characterized in that the enlargement ratio of the enlargement process in (1) is changed, and a signal for controlling the change timing and the operation timing of the LB function is issued from the rearrangement readout unit.
【００９２】図１６は、本実施形態に係る高効率符号化
画像データの復号手段を示すブロック図である。FIG. 16 is a block diagram showing a means for decoding highly efficient encoded image data according to the present embodiment.
【００９３】同図において、１６はＬＢ処理部、２６は
ＬＢ機能用メモリ領域である。なお、その他の構成は図
１に示す同符号の構成に対応する。In the figure, reference numeral 16 denotes an LB processing unit, and reference numeral 26 denotes an LB function memory area. Other configurations correspond to the configurations of the same reference numerals shown in FIG.
【００９４】解像度拡大処理部１２から出力された復号
画像は、ＬＢ処理部１６へ入力される。ＬＢ処理部で
は、復号画像に解像度変換処理を施し、また復号画像を
画像表示装置の一部に出力するための時間遅延を行うた
めに、復号画像を外部メモリ２内のＬＢ用メモリ２６へ
格納する。その後、ＬＢ用メモリ２６から読み出された
復号画像は解像度変換処理部１４で画像表示装置の解像
度に変換され、画像表示装置へ送られる。ＬＢ機能の動
作のオン・オフ命令は外部から与えられ、その命令を受
けてＣＰＵ３６はＬＢ動作のオン・オフを切り替える。The decoded image output from the resolution enlargement processing section 12 is input to the LB processing section 16. The LB processing unit stores the decoded image in the LB memory 26 in the external memory 2 in order to perform a resolution conversion process on the decoded image and to perform a time delay for outputting the decoded image to a part of the image display device. I do. After that, the decoded image read from the LB memory 26 is converted to the resolution of the image display device by the resolution conversion processing unit 14 and sent to the image display device. An on / off command for the operation of the LB function is given from the outside, and the CPU 36 switches the LB operation on / off in response to the command.
【００９５】本実施形態においても、第２の実施形態と
同様の機能を並べ替え読み出し部１９及び解像度変換制
御部１３に実装することにより、外部からのＬＢ機能の
動作オン・オフ命令に基づく解像度変換倍率の変更処理
及びＬＢ動作を正しいタイミングで行うことができる。
なお、本実施形態の動作の説明は第２の実施形態のもの
に準ずるので説明を省略する。次に、本発明の第４の実
施形態を図１７を用いて説明する。Also in this embodiment, the same functions as those in the second embodiment are implemented in the reordering / reading unit 19 and the resolution conversion control unit 13, so that the resolution based on the external LB function operation on / off command is provided. The conversion magnification changing process and the LB operation can be performed at the correct timing.
Note that the description of the operation of the present embodiment is similar to that of the second embodiment, and thus the description is omitted. Next, a fourth embodiment of the present invention will be described with reference to FIG.
【００９６】本実施形態は、ＯＳＤ機能を備え、外部か
らのＯＳＤ機能の動作を指令するオン・オフ命令に基づ
いて、復号画像に対し解像度縮小処理部における縮小処
理の縮小率及び解像度拡大処理部における拡大処理の拡
大率を変更し、その変更タイミング及びＯＳＤ機能の動
作タイミングを制御する信号を並べ替え読み出し部から
発行させることを特徴としている。This embodiment is provided with an OSD function, and based on an ON / OFF command instructing the operation of the OSD function from the outside, a reduction ratio of the reduction processing in the resolution reduction processing section and a resolution expansion processing section for the decoded image. The enlargement ratio of the enlargement process in (1) is changed, and a signal for controlling the change timing and the operation timing of the OSD function is issued from the rearrangement reading unit.
【００９７】図１７は、本実施形態に係る高効率符号化
画像データの復号手段を示すブロック図である。FIG. 17 is a block diagram showing a means for decoding highly efficient encoded image data according to the present embodiment.
【００９８】同図において、１７はＯＳＤ処理部、２７
はＯＳＤ機能用メモリ領域である。その他の構成は図１
に示す同符号の構成に対応する。In the figure, reference numeral 17 denotes an OSD processing unit;
Is a memory area for the OSD function. Other configurations are shown in FIG.
Corresponds to the configuration of the same symbol shown in FIG.
【００９９】解像度拡大処理部１２から出力された復号
画像は、ＯＳＤ処理部１７へ入力される。ＯＳＤ処理部
１７はあらかじめＣＰＵ３６によってＯＳＤ用メモリ領
域２７に格納されたＯＳＤ画像データを読み出し、復号
画像と合成する。その後、復号画像は解像度変換処理部
１４で画像表示装置の解像度に変換され、画像表示装置
へ送られる。ＯＳＤ機能の動作のオン・オフ命令は外部
から与えられ、その命令を受けてＣＰＵ３６はＯＳＤ動
作のオン・オフを切り替える。The decoded image output from the resolution enlargement processing section 12 is input to the OSD processing section 17. The OSD processing unit 17 reads out the OSD image data stored in the OSD memory area 27 by the CPU 36 in advance, and combines the OSD image data with the decoded image. After that, the decoded image is converted to the resolution of the image display device by the resolution conversion processing unit 14 and sent to the image display device. An ON / OFF command for the operation of the OSD function is given from the outside, and the CPU 36 switches the ON / OFF of the OSD operation in response to the command.
【０１００】本実施形態においても、第２の実施形態と
同様の機能を並べ替え読み出し部１９及び解像度変換制
御部１３に実装することにより、外部からのＯＳＤ機能
の動作オン・オフ命令に基づく解像度変換倍率の変更処
理及びＯＳＤ動作を正しいタイミングで行うことができ
る。なお、本実施形態の動作の説明も第２の実施形態の
ものに準ずるので説明を省略する。なお、第１から第４
の実施形態では、図１、図１０、図１６、図１７で示さ
れる解像度変換制御機能を個々に有する場合について説
明したが、これらの機能を複合して有するように構成し
てもよいことは言うまでもない。Also in this embodiment, the same functions as those in the second embodiment are implemented in the reordering / reading unit 19 and the resolution conversion control unit 13, so that the resolution based on the OSD function operation on / off command from the outside can be obtained. The conversion magnification changing process and the OSD operation can be performed at the correct timing. Note that the description of the operation of the present embodiment is similar to that of the second embodiment, and thus the description is omitted. In addition, the first to fourth
In the embodiment, the case where the resolution conversion control functions shown in FIG. 1, FIG. 10, FIG. 16, and FIG. 17 are individually provided has been described. However, it may be configured to have these functions in combination. Needless to say.
【０１０１】また、第１から第４の実施形態において
は、解像度変換制御部１３が解像度縮小処理部１０にお
ける縮小率及び解像度拡大処理部１１及び１２における
拡大率を有するＲＯＭテーブルを内蔵する形態を示した
が、この他に、ＣＰＵ３６に外付けされたＲＯＭやＲＡ
Ｍ（図１８に示したＲＯＭ３７やＲＡＭ３８）内に縮小
率及び拡大率を有するテーブルを内蔵し、ＣＰＵ３６が
解像度縮小処理部１０、解像度拡大処理部１１及び１２
に縮小率や拡大率を直接供給するように構成してもよ
い。この場合、並べ替え読み出し部１９が発行するタイ
ミング信号はＣＰＵ３６に供給され、ＣＰＵ３６はこの
タイミング信号に従って各解像度変換率、及びＰｉｎＰ
処理部、ＬＢ処理部、ＯＳＤ処理部の動作のオン・オフ
を設定することになる。In the first to fourth embodiments, the resolution conversion control unit 13 incorporates a ROM table having a reduction ratio in the resolution reduction processing unit 10 and a magnification ratio in the resolution expansion processing units 11 and 12. Although shown, the ROM or RA externally connected to the CPU 36 is also used.
M (the ROM 37 and the RAM 38 shown in FIG. 18) has a table having a reduction ratio and an enlargement ratio therein, and the CPU 36 controls the resolution reduction processing unit 10 and the resolution expansion processing units 11 and 12.
It is also possible to directly supply the reduction ratio and the enlargement ratio to the image data. In this case, the timing signal issued by the rearranging and reading unit 19 is supplied to the CPU 36, and the CPU 36 determines each resolution conversion rate and PinP according to the timing signal.
On / off of the operations of the processing unit, the LB processing unit, and the OSD processing unit are set.
【０１０２】また、上記の各実施形態では解像度縮小及
び拡大の倍率を１／２倍及び２倍で制御する場合につい
て説明したが、これ以外の倍率（１／３倍及び３倍、２
／３倍及び３／２倍など）で制御を行っても本発明が有
効であることは言うまでもない。In each of the above embodiments, the case where the resolution reduction and enlargement magnifications are controlled by 1/2 times and 2 times has been described. However, other magnifications (1/3 times and 3 times, 2 times and 2 times) are described.
It is needless to say that the present invention is effective even if control is performed at / 3 times and 3/2 times.
【０１０３】[0103]
【発明の効果】本発明によれば、外部メモリ容量の増大
またはデータ転送レートの増大の要求があった時は、復
号処理に要する外部メモリ容量及びバンド幅を低減させ
ることができ、またこれらを低減するための復号画像の
縮小を開始するタイミング及び縮小した画像を読み出す
際の拡大を開始するタイミングを正しく制御することが
可能になる。According to the present invention, when an increase in external memory capacity or an increase in data transfer rate is required, the external memory capacity and bandwidth required for decoding can be reduced. It is possible to correctly control the timing of starting the reduction of the decoded image for reduction and the timing of starting the enlargement when reading the reduced image.
【０１０４】また、入力される符号化画像データの解像
度が大きい場合や、ＰｉｎＰ機能、ＬＢ機能、ＯＳＤ機
能などの外部メモリ容量とバンド幅の増大を要する付加
機能を動作させる場合に、復号処理に要する外部メモリ
容量及びバンド幅を低減させることができ、またこれら
の付加機能を動作させるために復号画像の縮小を開始す
るタイミング、縮小した画像を読み出す際の拡大を開始
するタイミング、及び付加機能を動作させるタイミング
を正しく制御することが可能になる。Further, when the resolution of the input coded image data is large or when an additional function that requires an increase in the external memory capacity and the bandwidth such as the PinP function, the LB function, and the OSD function is operated, the decoding processing is performed. The required external memory capacity and bandwidth can be reduced, and the timing for starting the reduction of the decoded image to operate these additional functions, the timing for starting the enlargement when reading the reduced image, and the additional functions It is possible to correctly control the operation timing.
【図１】本発明の第１の実施形態に係る高効率符号化画
像の復号手段を示すブロック図である。FIG. 1 is a block diagram illustrating a high-efficiency coded image decoding unit according to a first embodiment of the present invention.
【図２】符号化画像の制作者の意図により採用される画
像解像度の一例を示す図である。FIG. 2 is a diagram illustrating an example of an image resolution adopted by a creator of an encoded image.
【図３】図１に示す解像度縮小処理部１０の構成を示す
ブロック図である。FIG. 3 is a block diagram showing a configuration of a resolution reduction processing unit 10 shown in FIG.
【図４】図１に示す解像度拡大処理部１１及び１２の構
成を示すブロック図である。FIG. 4 is a block diagram showing a configuration of resolution enlargement processing units 11 and 12 shown in FIG.
【図５】図１に示す解像度変換処理部１４の構成を示す
ブロック図である。FIG. 5 is a block diagram showing a configuration of a resolution conversion processing unit 14 shown in FIG.
【図６】本実施形態に係り、ＣＰＵ３６によってＶＬＤ
３から得られる各入力画像解像度に対応して付された符
号表である。FIG. 6 is a block diagram showing a VLD according to the embodiment;
3 is a code table assigned corresponding to each input image resolution obtained from No. 3.
【図７】図１に示す解像度変換制御部１３の構成を示す
ブロック図である。FIG. 7 is a block diagram showing a configuration of a resolution conversion control unit 13 shown in FIG.
【図８】図７に示す解像度変換制御部１３のＲＯＭ１３
１に格納されている解像度変換倍率表である。FIG. 8 shows a ROM 13 of the resolution conversion control unit 13 shown in FIG.
3 is a resolution conversion magnification table stored in the table 1.
【図９】本実施形態に係る解像度変換制御部１３によっ
て変換倍率が変更されるタイミングの制御を説明するた
めの図である。FIG. 9 is a diagram for explaining control of timing at which a conversion magnification is changed by a resolution conversion control unit 13 according to the embodiment.
【図１０】本発明の第２の実施形態に係る高効率符号化
画像の復号手段を示すブロック図である。FIG. 10 is a block diagram showing a means for decoding a highly efficient encoded image according to a second embodiment of the present invention.
【図１１】本実施形態に係り、ＣＰＵ３６によって外部
からＰｉｎＰ機能の動作オン・オフ命令に対応して付さ
れた符号表である。FIG. 11 is a code table assigned by the CPU 36 in response to an externally ON / OFF command of the PinP function according to the embodiment.
【図１２】図１０に示す解像度変換制御部１３の構成を
示すブロック図である。FIG. 12 is a block diagram showing a configuration of a resolution conversion control unit 13 shown in FIG.
【図１３】図１２に示す解像度変換制御部１３のＲＯＭ
１３２に格納されている解像度変換倍率表である。FIG. 13 shows a ROM of the resolution conversion control unit 13 shown in FIG. 12;
132 is a resolution conversion magnification table stored in 132.
【図１４】ＰｉｎＰ機能の動作命令がオフ状態からオン
状態へ変更された場合の解像度変換率の変更のタイミン
グ制御を説明するための図である。FIG. 14 is a diagram for explaining timing control for changing the resolution conversion rate when the operation command of the PinP function is changed from the off state to the on state.
【図１５】ＰｉｎＰ機能の動作命令がオン状態からオフ
状態へ変更された場合の解像度変換率の変更のタイミン
グ制御を説明するための図である。FIG. 15 is a diagram for explaining timing control for changing the resolution conversion rate when the operation command of the PinP function is changed from the ON state to the OFF state.
【図１６】本発明の第３の実施形態に係る高効率符号化
画像の復号手段を示すブロック図である。FIG. 16 is a block diagram showing a means for decoding a highly efficient encoded image according to a third embodiment of the present invention.
【図１７】本発明の第３の実施形態に係る高効率符号化
画像の復号手段を示すブロック図である。FIG. 17 is a block diagram showing a means for decoding a highly efficient encoded image according to a third embodiment of the present invention.
【図１８】ＭＰＥＧ２方式による符号化画像放送を受信
して復号し表示する画像表示装置の一般的な構成を示す
ブロック図である。FIG. 18 is a block diagram illustrating a general configuration of an image display device that receives, decodes, and displays an encoded image broadcast according to the MPEG2 system.
【図１９】図１８に示す並べ替え読み出し部１９による
並び替え読み出しのタイミング制御を説明するための図
である。19 is a diagram for explaining timing control of rearrangement reading by the rearrangement reading unit 19 shown in FIG. 18;
【図２０】ピクチャーインピクチャー（ＰｉｎＰ）機能
の概略を示すブロック図である。FIG. 20 is a block diagram schematically showing a picture-in-picture (PinP) function.
【図２１】ピクチャーインピクチャー（ＰｉｎＰ）機能
の概略を示すブロック図である。FIG. 21 is a block diagram schematically illustrating a picture-in-picture (PinP) function.
【図２２】オンスクリーンディスプレイ（ＯＳＤ）機能
の概略を示すブロック図である。FIG. 22 is a block diagram schematically showing an on-screen display (OSD) function.
【図２３】レターボックス（ＬＢ）機能の概略を示すブ
ロック図である。FIG. 23 is a block diagram schematically showing a letter box (LB) function.
１ 復号器 ２ 外部メモリ ３ ＶＬＤ ４ ＩＱ ５ ＩＤＣＴ ６ 加算器 ７ データバス ８ メモリＩ／Ｆ ９ ＭＣ １０ 解像度縮小処理部 １１ 解像度拡大処理部 １２ 解像度拡大処理部 １３ 解像度変換制御部 １４ 解像度変換処理部 １５ ＰｉｎＰ処理部 １６ ＬＢ処理部 １７ ＯＳＤ処理部 １８ レジスタ １９ 並べ替え読み出し部 ２１ ＥＳバッファ ２２，２３ 参照画像格納領域 ２４ Ｂフレーム格納領域 ２５ ＰｉｎＰ用メモリ領域 ２６ ＬＢ用メモリ領域 ２７ ＯＳＤ用メモリ領域 ３４ Ｄ／Ａコンバータ ３５ 画像表示装置 ３６ ＣＰＵ ３７ ＲＯＭ ３８ ＲＡＭ REFERENCE SIGNS LIST 1 decoder 2 external memory 3 VLD 4 IQ 5 IDCT 6 adder 7 data bus 8 memory I / F 9 MC 10 resolution reduction processing unit 11 resolution expansion processing unit 12 resolution expansion processing unit 13 resolution conversion control unit 14 resolution conversion processing unit Reference Signs List 15 PinP processing section 16 LB processing section 17 OSD processing section 18 Register 19 Rearrangement reading section 21 ES buffer 22, 23 Reference image storage area 24 B frame storage area 25 PinP memory area 26 LB memory area 27 OSD memory area 34 D / A converter 35 Image display device 36 CPU 37 ROM 38 RAM
フロントページの続き (72)発明者 小味 弘典 神奈川県横浜市戸塚区吉田町292番地 株 式会社日立製作所マルチメディアシステム 開発本部内 Ｆターム(参考） 5C025 AA28 BA02 BA25 BA27 BA28 BA30 CA06 CA09 CB05 CB09 CB10 DA01 DA04 DA05 DA08 5C059 KK08 LB05 LB15 MA00 MA05 MA14 MA23 MC14 ME01 NN21 PP05 PP06 PP07 PP16 RC14 RC16 SS02 SS13 TA06 TA08 TB01 TC37 TC39 TD00 UA05 UA33 UA38 Continuing from the front page (72) Inventor Hironori Komi 292 Yoshida-cho, Totsuka-ku, Yokohama-shi, Kanagawa Prefecture F-term in the multimedia system development headquarters of Hitachi, Ltd. 5C025 AA28 BA02 BA25 BA27 BA28 BA30 CA06 CA09 CB05 CB09 CB10 DA01 DA04 DA05 DA08 5C059 KK08 LB05 LB15 MA00 MA05 MA14 MA23 MC14 ME01 NN21 PP05 PP06 PP07 PP16 RC14 RC16 SS02 SS13 TA06 TA08 TB01 TC37 TC39 TD00 UA05 UA33 UA38
Claims (8)
復号化して復号画像データを得る復号画像化手段と、復
号時に解像度縮小処理を行う解像度縮小手段と、該解像
度縮小手段によって縮小処理された復号画像データを格
納するメモリ手段と、該メモリ手段から前記解像度縮小
手段で縮小処理された復号順の復号画像データを表示順
に読み出す並べ替え読み出し手段と、該並べ替え読み出
し手段によって読み出された復号画像データを縮小処理
前の解像度に拡大する解像度拡大手段と、前記メモリ手
段において必要とするメモリ容量の増減または前記メモ
リ手段と前記復号画像化手段間のデータ転送レートの増
減の要求があった時に、前記解像度縮小手段及び前記解
像度拡大手段の解像度変換倍率を変更する解像度変換制
御手段とを備え、前記並べ替え読み出し手段は、前記解
像度変換率制御手段による前記解像度縮小手段における
縮小率及び前記解像度拡大手段における拡大率を変更す
るタイミングを制御することを特徴とする高効率符号化
画像の復号手段。A decoding unit that decodes the encoded image data that has been encoded with high efficiency to obtain decoded image data; a resolution reducing unit that performs a resolution reducing process at the time of decoding; Memory means for storing the decoded image data, and rearrangement reading means for reading out from the memory means the decoded image data in the decoding order reduced by the resolution reducing means in the display order; There has been a request for a resolution enlarging means for enlarging the decoded image data to the resolution before the reduction processing, and for increasing or decreasing the memory capacity required in the memory means, or for increasing or decreasing the data transfer rate between the memory means and the decoded image forming means. A resolution conversion control unit for changing a resolution conversion magnification of the resolution reduction unit and the resolution expansion unit. The high-efficiency coded image decoding means, characterized in that the reordering and reading means controls the timing at which the resolution conversion rate control means changes the reduction ratio in the resolution reduction means and the enlargement ratio in the resolution expansion means.
度の変更の要求があった時に、前記解像度縮小手段及び
前記解像度拡大手段の解像度変換倍率を変更するととも
に、前記並べ替え読み出し手段は、前記符号化画像デー
タの解像度が変更されるタイミングに基づいて、前記解
像度変換率制御手段による前記解像度縮小手段における
縮小率及び該解像度拡大手段における拡大率を変更する
タイミングを制御することを特徴とする高効率符号化画
像の復号手段。2. The resolution conversion control unit according to claim 1, wherein the resolution conversion control unit changes a resolution conversion magnification of the resolution reduction unit and the resolution expansion unit when a request to change the resolution of the encoded image data is received. The reordering and reading means, based on the timing at which the resolution of the encoded image data is changed, the timing at which the resolution conversion rate control means changes the reduction rate in the resolution reduction means and the enlargement rate in the resolution expansion means. Means for decoding a highly efficient encoded image.
メモリ容量の増大または前記メモリ手段と前記復号画像
化手段間のデータ転送レートの増大を要する付加機能実
施手段を有し、前記解像度変換制御部は、前記付加機能
手段の実施または非実施時に応じて、前記解像度縮小手
段及び前記解像度拡大手段の解像度変換倍率を変更する
とともに、前記並べ替え読み出し手段は、前記付加機能
手段が非実施から実施に変更される場合は、前記解像度
変換率制御手段による前記解像度縮小手段における縮小
率及び該解像度拡大手段における拡大率を変更するタイ
ミングを指令し、前記メモリ手段において必要とするメ
モリ容量の低減または前記メモリ手段と前記復号画像化
手段間のデータ転送レートが低減された後に、前記付加
機能手段の実施のタイミングを指令することを特徴とす
る高効率符号化画像の復号手段。3. The additional function executing means according to claim 1, wherein an additional memory capacity required in said memory means at the time of performing the additional function or a data transfer rate between said memory means and said decoded image forming means is required to be increased. The resolution conversion control unit changes the resolution conversion magnification of the resolution reduction unit and the resolution expansion unit according to whether the additional function unit is performed or not, and the reordering and reading unit includes When the function means is changed from non-execution to execution, the resolution conversion rate control means instructs the timing of changing the reduction rate in the resolution reduction means and the enlargement rate in the resolution expansion means, and it is necessary for the memory means. The data transfer rate between the memory means and the decoded image forming means is reduced. Later, the decoding means of the high efficiency coded image, characterized by directing the timing of implementation of the additional function unit.
メモリ容量の増大または前記メモリ手段と前記復号画像
化手段間のデータ転送レートの増大を要する付加機能実
施手段を有し、前記解像度変換制御部は、前記付加機能
手段の実施または非実施時に応じて、前記解像度縮小手
段及び前記解像度拡大手段の解像度変換倍率を変更する
とともに、前記並べ替え読み出し手段は、前記付加機能
手段が非実施から実施に変更される場合は、前記変更の
指令後初めて復号され、後に他の画像の復号の際に参照
画像として用いられるアンカーフレーム画像の復号開始
のタイミングで、前記解像度変換率制御手段が前記解像
度縮小手段における所定の縮小率を設定するタイミング
信号を前記解像度変換率制御手段に供給し、前記アンカ
ーフレーム画像の次のアンカーフレーム画像ではない画
像の復号開始のタイミングで、前記解像度変換率制御手
段が前記解像度縮小手段における等倍の変換率を設定す
るタイミング信号を前記解像度変換率制御手段に供給
し、前記アンカーフレーム画像の次に初めて復号される
アンカーフレーム画像の復号開始のタイミングで、前記
解像度変換率制御手段が前記解像度縮小手段における所
定の縮小率を設定するタイミング信号を前記解像度変換
率制御手段に供給するすることを特徴とする高効率符号
化画像の復号手段。4. The additional function executing means according to claim 1, wherein said additional means requires an increase in a memory capacity required in said memory means when executing the additional function or an increase in a data transfer rate between said memory means and said decoded image forming means. The resolution conversion control unit changes the resolution conversion magnification of the resolution reduction unit and the resolution expansion unit according to whether the additional function unit is performed or not, and the reordering and reading unit includes When the function means is changed from non-execution to execution, the resolution conversion is performed only at the timing of starting decoding of the anchor frame image which is decoded for the first time after the change instruction and is later used as a reference image when decoding another image. The rate control means supplies a timing signal for setting a predetermined reduction rate in the resolution reduction means to the resolution conversion rate control means. Then, at the timing of starting decoding of an image that is not the anchor frame image next to the anchor frame image, the resolution conversion rate control means sends a timing signal for setting the same conversion rate in the resolution reduction means to the resolution conversion rate control. At the timing of starting decoding of the anchor frame image decoded for the first time after the anchor frame image, the resolution conversion rate control means sends a timing signal for setting a predetermined reduction rate in the resolution reduction means to the resolution. Decoding means for a high-efficiency coded image, which is supplied to a conversion rate control means.
得られた復号画像の一部に副画像を合成するピクチャー
インピクチャー（ＰｉｎＰ）手段であることを特徴とす
る高効率符号化画像の復号手段。5. The picture-in-picture (PinP) means according to claim 3, wherein said additional function means combines a sub-picture with a part of a decoded picture obtained by decoding said coded picture data. Means for decoding a highly efficient encoded image.
得られた縦横サイズ比（アスペクト比）が所定比の復号
画像を前記所定比と異なる縦横サイズ比（アスペクト
比）の復号画像に変更するレターボックス（ＬＢ）手段
であることを特徴とする高効率符号化画像の復号手段。6. The image processing apparatus according to claim 3, wherein the additional function unit sets a decoded image having a predetermined ratio of an aspect ratio, obtained by decoding the encoded image data, to the predetermined ratio. Decoding means for a high-efficiency coded image, which is a letterbox (LB) means for changing to a decoded image having a different vertical / horizontal size ratio (aspect ratio).
得られた復号画像に番組案内や字幕・チャンネル番号な
どを挿入するオンスクリーンディスプレイ（ＯＳＤ）手
段であることを特徴とする高効率符号化画像の復号手
段。7. The on-screen display according to claim 3, wherein the additional function means inserts a program guide, a caption, a channel number, and the like into a decoded image obtained by decoding the encoded image data. Means for decoding a high-efficiency coded image, which is an OSD) means.
つの請求項に記載の復号手段によって復号された画像を
表示することを特徴とする画像表示装置。8. The method according to claim 1, wherein
An image display device displaying an image decoded by the decoding means according to one of the claims.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP13887199A JP2000333166A (en) | 1999-05-19 | 1999-05-19 | Means for decoding high efficiency coded image and image display device having the means |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP13887199A JP2000333166A (en) | 1999-05-19 | 1999-05-19 | Means for decoding high efficiency coded image and image display device having the means |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2000333166A true JP2000333166A (en) | 2000-11-30 |
Family
ID=15232069
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP13887199A Pending JP2000333166A (en) | 1999-05-19 | 1999-05-19 | Means for decoding high efficiency coded image and image display device having the means |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2000333166A (en) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2005109869A1 (en) * | 2004-05-07 | 2005-11-17 | Matsushita Electric Industrial Co., Ltd. | Osd synthesis device, integrated circuit, osd synthesis method, program, and recording medium |
| US7512324B2 (en) | 2002-01-11 | 2009-03-31 | Hitachi, Ltd. | Data recording apparatus, reproduction apparatus, recording/reproduction method, and imaging apparatus |
| JP2010512046A (en) * | 2006-11-30 | 2010-04-15 | エルエスアイ コーポレーション | H264 / MPEG-4AVC codec with reduced memory |
| JP2010118863A (en) * | 2008-11-12 | 2010-05-27 | Canon Inc | Image display apparatus |
| CN115278264A (en) * | 2022-09-26 | 2022-11-01 | 杭州雄迈集成电路技术股份有限公司 | Image amplification and OSD superposition coding method and system |
-
1999
- 1999-05-19 JP JP13887199A patent/JP2000333166A/en active Pending
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7512324B2 (en) | 2002-01-11 | 2009-03-31 | Hitachi, Ltd. | Data recording apparatus, reproduction apparatus, recording/reproduction method, and imaging apparatus |
| WO2005109869A1 (en) * | 2004-05-07 | 2005-11-17 | Matsushita Electric Industrial Co., Ltd. | Osd synthesis device, integrated circuit, osd synthesis method, program, and recording medium |
| JP2010512046A (en) * | 2006-11-30 | 2010-04-15 | エルエスアイ コーポレーション | H264 / MPEG-4AVC codec with reduced memory |
| JP2010118863A (en) * | 2008-11-12 | 2010-05-27 | Canon Inc | Image display apparatus |
| CN115278264A (en) * | 2022-09-26 | 2022-11-01 | 杭州雄迈集成电路技术股份有限公司 | Image amplification and OSD superposition coding method and system |
| CN115278264B (en) * | 2022-09-26 | 2023-02-28 | 杭州雄迈集成电路技术股份有限公司 | Image amplification and OSD superposition coding method and system |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4588122B2 (en) | Parallel decoding of interleaved data streams in an MPEG decoder | |
| JP3395166B2 (en) | Integrated video decoding system, frame buffer, encoded stream processing method, frame buffer allocation method, and storage medium | |
| US6519283B1 (en) | Integrated video processing system having multiple video sources and implementing picture-in-picture with on-screen display graphics | |
| US6014178A (en) | Receiver having analog and digital video modes and receiving method thereof | |
| US6917652B2 (en) | Device and method for decoding video signal | |
| JP3639517B2 (en) | Moving picture decoding apparatus and moving picture decoding method | |
| US6091458A (en) | Receiver having analog and digital video modes and receiving method thereof | |
| EP0793389B1 (en) | Memory reduction in the MPEG-2 main profile main level decoder | |
| JPH08205161A (en) | Digital video decoder for decoding digital high-definition and/or digital standard-definition television signal | |
| KR100710290B1 (en) | Apparatus and method for video decoding | |
| KR20040013765A (en) | Video decoding system | |
| US5754243A (en) | Letter-box transformation device | |
| US5929911A (en) | Multiformat reduced memory MPEG-2 compliant decoder | |
| JPH08280022A (en) | Method and apparatus for decoded video signal | |
| JP2000333166A (en) | Means for decoding high efficiency coded image and image display device having the means | |
| JP4010617B2 (en) | Image decoding apparatus and image decoding method | |
| US6973131B2 (en) | Decoding apparatus, decoding method, decoding processing program and computer-readable storage medium having decoding processing program codes stored therein | |
| JP2002500480A (en) | Format and frame rate conversion for 24Hz source video display | |
| JP2002125200A (en) | Moving picture format converter | |
| KR19990003971A (en) | PDP driving device of PDP-TV | |
| JP3990011B2 (en) | Decoded image conversion circuit and decoded image conversion device | |
| JPH11298892A (en) | Decoding device of encoded image and image display device | |
| JP3685386B2 (en) | Integrated video processing system with multiple video sources and enabling in-picture pictures with on-screen display graphics | |
| KR100327202B1 (en) | Image device and method using memory efficiently | |
| JPH07264583A (en) | Method for encoding picture |