JP2010199648A

JP2010199648A - Device, method, and program for processing image

Info

Publication number: JP2010199648A
Application number: JP2009038807A
Authority: JP
Inventors: Kenji Tanaka; 健次田中
Original assignee: Renesas Electronics Corp
Current assignee: Renesas Electronics Corp
Priority date: 2009-02-23
Filing date: 2009-02-23
Publication date: 2010-09-09

Abstract

<P>PROBLEM TO BE SOLVED: To provide a device and method for processing an image which prevents degradation of image quality when a continuous field image is not input in an IP conversion process. <P>SOLUTION: In this device for processing an image, a decoder part 101 decodes image data to generate a reference field image, an IP conversion processing part 103 converts a plurality of reference field images to generate an interpolation field image, and a display processing part 105 outputs an image using the reference field image and the interpolation field image. A control part 106 detects whether newly-received image data are in a repeat state, clears a counter (repeat_count) and causes an interpolation field image to be newly generated when the data are not in the repeat state and, when the data are in the repeat state, causes the counter to increase the count to maintain the previously generated interpolation field image without being changed, selects an image to be displayed from the reference field image and the interpolation field image based on the value of the counter to output the selected image to the display processing part 105. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、画像の変換技術に関し、特に、インタレース画像からプログレッシブ画像への変換を行うＩＰ変換技術に関する。 The present invention relates to an image conversion technique, and more particularly, to an IP conversion technique for converting an interlaced image into a progressive image.

現行の映像信号方式は、インタレース走査を前提としたインタレース信号方式と、プログレッシブ走査を前提としたプログレッシブ信号方式に大別される。インタレース走査とは、映像の１画面を構成する５２５本または１１２５本の走査線中、１本ずつ走査線を飛び越して走査する方式である。この方式では、１つの表示画面（１フレーム）は２回のインタレース走査により生成され、走査線が互い違いの２つの走査画面（第１および第２フィールド）により１フレームが構成される。一方、プログレッシブ走査は、走査線を１本ずつ順次に走査する方式である。 Current video signal systems are roughly classified into an interlace signal system based on interlace scanning and a progressive signal system based on progressive scanning. Interlaced scanning is a method in which scanning is performed by skipping scanning lines one by one out of 525 or 1125 scanning lines constituting one screen of an image. In this method, one display screen (one frame) is generated by two interlace scans, and one frame is constituted by two scan screens (first and second fields) with alternate scanning lines. On the other hand, progressive scanning is a method in which scanning lines are sequentially scanned one by one.

例えば地上デジタル放送の場合においてテレビ局から送られてくるストリームの解像度は１９２０×１０８０ｉ（インタレース）または１４４０×１０８０ｉのインタレース画像となっている。 For example, in the case of terrestrial digital broadcasting, the resolution of a stream sent from a television station is 1920 × 1080i (interlace) or 1440 × 1080i interlaced images.

近年発売されているディスプレイ装置である、プラズマディスプレイパネル、液晶表示パネル、エレクトロルミネッセンス表示パネル等はマトリクス駆動方式の表示パネルを搭載したものとなっている。このようなディスプレイ装置では、入力映像信号に応じた画像表示（又は画素データの書込）を１表示ライン分ずつ順次実行する、プログレッシブ駆動を行うようにしている。
そのため、地上デジタル放送のようにインタレース方式の映像信号が表示装置に対して入力される場合は、これをプログレッシブ方式の映像信号に変換する必要がある。インタレース方式の映像信号を入力し、プログレッシブ方式の映像信号に変換する処理をＩＰ変換処理という。 Plasma display panels, liquid crystal display panels, electroluminescence display panels, and the like, which are display devices released in recent years, are mounted with a matrix drive type display panel. In such a display device, progressive driving is performed in which image display (or writing of pixel data) corresponding to an input video signal is sequentially executed for each display line.
For this reason, when an interlaced video signal is input to the display device as in terrestrial digital broadcasting, it is necessary to convert it to a progressive video signal. The process of inputting an interlaced video signal and converting it to a progressive video signal is called IP conversion processing.

ＩＰ変換処理は一般的に、動画像において連続する複数のフィールド画像を入力し、１枚の補間フィールド画像を生成する。補間フィールド画像の生成においては、入力された複数のフィールド画像から、入力された画像の動き検出を行い、その検出結果に応じて補間フィールドを生成する。生成した補間フィールド画像と、元のフィールド画像（参照フィールド画像）から１枚のプログレッシブ画像が構成される。 In general, the IP conversion process inputs a plurality of continuous field images in a moving image and generates one interpolated field image. In the generation of the interpolation field image, the motion of the input image is detected from the plurality of input field images, and the interpolation field is generated according to the detection result. One progressive image is composed of the generated interpolation field image and the original field image (reference field image).

図１にＩＰ変換処理を行う画像処理装置の一般的な構成図を示す。
デコーダ部１０１はＭＰＥＧ（Moving Picture Expert Group）やＨ．２６４などの画像圧縮規格に基づいて復号処理を行う。復号された画像データは参照フィールド用画像メモリ１０２にｓｏｕｒｃｅｆｉｅｌｄとして格納されるものとする。
参照フィールド用画像メモリ１０２にはｓｏｕｒｃｅｆｉｅｌｄ、ｐｒｅｖｆｉｅｌｄ、ｐｒｅｖ２ｆｉｅｌｄ、ｐｒｅｖ３ｆｉｅｌｄの４つ参照フィールド画像を格納するメモリが存在する。制御部１０６からの指示により、１枚の参照フィールド画像が参照フィールド用画像メモリ１０２のｓｏｕｒｃｅｆｉｅｌｄに格納される毎、ｐｒｅｖ２ｆｉｅｌｄ→ｐｒｅｖ３ｆｉｅｌｄ、ｐｒｅｖｆｉｅｌｄ→ｐｒｅｖ２ｆｉｅｌｄ、ｓｏｕｒｃｅｆｉｅｌｄ→ｐｒｅｖｆｉｅｌｄのように、参照フィールド画像を格納するメモリを順次移すことにより、ＩＰ変換処理を行うタイミングでは、３世代前までの過去画像を保存している。 FIG. 1 shows a general configuration diagram of an image processing apparatus that performs IP conversion processing.
The decoder unit 101 is a moving picture expert group (MPEG) or H.264. Decoding processing is performed based on an image compression standard such as H.264. It is assumed that the decoded image data is stored in the reference field image memory 102 as a source field.
The reference field image memory 102 has a memory for storing four reference field images, that is, a source field, a prev field, a prev2 field, and a prev3 field. Every time one reference field image is stored in the source field of the reference field image memory 102 in accordance with an instruction from the control unit 106, as in prev2 field → prev3 field, prev field → prev2 field, source field → prev field By sequentially moving the memory for storing the reference field image, the past images up to three generations before are stored at the timing of performing the IP conversion process.

ＩＰ変換処理部１０３は参照フィールド用画像メモリ１０２から最大４つのフィールド画像を入力し、補間フィールド画像を生成し、補間フィールド用画像メモリ１０４に格納する。ここでは、ＩＰ変換処理部１０３は４つのフィールド画像を用いて補間フィールド画像を生成することを前提とする。
表示処理部１０５は制御部１０６からの指示により、補間フィールド画像と参照フィールド画像を入力し、１枚のプログレッシブ画像として出力する。また、表示処理部１０５は最終出力解像度にあわせてプログレッシブ画像を拡大／縮小する機能を有す。
制御部１０６は、各構成要素の動作を制御する。 The IP conversion processing unit 103 inputs up to four field images from the reference field image memory 102, generates interpolation field images, and stores them in the interpolation field image memory 104. Here, it is assumed that the IP conversion processing unit 103 generates an interpolated field image using four field images.
In response to an instruction from the control unit 106, the display processing unit 105 inputs the interpolation field image and the reference field image, and outputs them as one progressive image. The display processing unit 105 has a function of enlarging / reducing the progressive image in accordance with the final output resolution.
The control unit 106 controls the operation of each component.

前述の通り、ＩＰ変換処理部１０３は連続する４つのフィールド画像が入力され、１つの補間フィールド画像を作成する。この補間フィールドは、ｓｏｕｒｃｅｆｉｅｌｄの補間画像であるとは限らず、ｐｒｅｖｆｉｅｌｄやｐｒｅｖ２ｆｉｅｌｄの補間画像を作成することもありえる。これはＩＰ変換のモードとして存在するもので、ｓｏｕｒｃｅｆｉｅｌｄの補間フィールド画像を作成する場合０Ｄｅｌａｙモード、ｐｒｅｖｆｉｅｌｄの補間フィールド画像を作成する場合を１Ｄｅｌａｙモード、ｐｒｅｖ２ｆｉｅｌｄの補間フィールド画像を作成する場合を２Ｄｅｌａｙモードと呼ぶこととする。０Ｄｅｌａｙモードの場合、過去画像のみを参照することとなる。１Ｄｅｌａｙモードや２Ｄｅｌａｙモードの場合、未来画像も参照することになる。このため、１Ｄｅｌａｙモードや２Ｄｅｌａｙモードは、０Ｄｅｌａｙモードと比べ、より精度の高いＩＰ変換が可能となる。 As described above, the IP conversion processing unit 103 receives four consecutive field images and creates one interpolation field image. This interpolation field is not necessarily a source field interpolation image, and may also generate a prev field or prev2 field interpolation image. This exists as an IP conversion mode. When creating a source field interpolation field image, 0 Delay mode, when creating a prev field interpolation field image, when 1 Delay mode, when creating a prev2 field interpolation field image. This will be referred to as 2Delay mode. In the case of the 0 Delay mode, only past images are referred to. In the case of the 1 Delay mode or the 2 Delay mode, the future image is also referred to. For this reason, the 1 Delay mode and the 2 Delay mode can perform IP conversion with higher accuracy than the 0 Delay mode.

図８に１Ｄｅｌａｙモードにおける参照フィールド用画像メモリ１０２の遷移と各タイミングで表示される画像について示す。ｎｏ＝１のタイミングで１Ｔ（Ｔｏｐ）のフィールド画像がｓｏｕｒｃｅとして入力され、以降１Ｂ（Ｂｏｔｔｏｍ），２Ｔ，２Ｂ・・の順に入力される。ｎｏ＝１のｓｏｕｒｃｅである１Ｔは、ｎｏ＝２ではｐｒｅｖ、ｎｏ＝３ではｐｒｅｖ２、ｎｏ＝４ではｐｒｅｖ３のように順次過去画像が保存されている。１Ｄｅｌａｙモードでは、各タイミングにおいてｐｒｅｖに格納されている参照フィールド画像の補間フィールド画像が作成され、プログレッシブ画像として表示されることになる。 FIG. 8 shows transition of the reference field image memory 102 in the 1 Delay mode and images displayed at each timing. A 1T (Top) field image is input as a source at the timing of no = 1, and thereafter input in the order of 1B (Bottom), 2T, 2B,. For 1T, which is a source of no = 1, past images are sequentially stored as prev when no = 2, prev2 when no = 3, and prev3 when no = 4. In the 1 Delay mode, an interpolation field image of the reference field image stored in prev is created at each timing, and is displayed as a progressive image.

ここでは、ｓｏｕｒｃｅ、ｐｒｅｖ、ｐｒｅｖ２、ｐｒｅｖ３の４つの参照フィールド画像が揃ってからＩＰ変換処理を行うこととし、４つの参照フィールド画像が揃っていないｎｏ＝３までの期間は参照フィールド画像を垂直２倍拡大して表示することとする。図８では、ｎｏ＝３までの期間の処理方法については、４枚の参照フィールド画像が揃わない場合は垂直２倍拡大表示を行うこととする（表示方法の記号"Ｄ"）。なお、他にも様々な方法が存在するが、ここでは説明を省略する。ｎｏ＝４以降の各タイミングでは４枚の参照フィールド画像を入力し、補間フィールド画像を生成してＩＰ変換結果を表示する（表示方法の記号"ＩＰ"）。 Here, the IP conversion processing is performed after the four reference field images of source, prev, prev2, and prev3 are prepared. Magnified and displayed. In FIG. 8, regarding the processing method for the period up to no = 3, when four reference field images are not prepared, the display is vertically enlarged twice (symbol “D” for display method). There are various other methods, but the description is omitted here. At each timing after no = 4, four reference field images are input, an interpolation field image is generated, and the IP conversion result is displayed (display method symbol “IP”).

図９に従来技術の制御部１０６の制御フローを示す。本制御フローはデコーダ部１０１からの１枚のフィールド画像が参照フィールド用画像メモリ１０２のｓｏｕｒｃｅｆｉｅｌｄに格納される毎に実行される。 FIG. 9 shows a control flow of the control unit 106 of the prior art. This control flow is executed every time one field image from the decoder unit 101 is stored in the source field of the reference field image memory 102.

入力された参照フィールド画像がｓｏｕｒｃｅｆｉｅｌｄとして格納される。これに伴い、制御部１０６は、前回のｐｒｅｖ２ｆｉｅｌｄをｐｒｅｖ３ｆｉｅｌｄ、前回のｐｒｅｖｆｉｅｌｄをｐｒｅｖ２ｆｉｅｌｄ、前回のｓｏｕｒｃｅｆｉｅｌｄをｐｒｅｖｆｉｅｌｄと更新する（ステップ３０１）。ここでは、世代の異なる複数の参照フィールド画像がそれぞれ別のｆｉｅｌｄに格納されて管理されていればよい。従って、参照フィールド画像を記憶する領域を書き換えて更新してもよいし、参照フィールド画像と各ｆｉｅｌｄとの対応づけを変更することによって更新してもよい。４枚の参照フィールド画像が揃った場合（ステップ３０２のＹｅｓ）、制御部１０６は、ＩＰ変換処理部１０３へＩＰ変換処理を指示し、ＩＰ変換処理部１０３は、ＩＰ変換を実行して補間フィールド画像を生成する（ステップ３０３）。制御部１０６は、生成された補間フィールド画像と参照フィールド画像を表示処理部１０５へ設定する（ステップ３０４）。表示処理部１０５は、制御部１０６の設定に応じて、補間フィールド画像と参照フィールド画像とを読み出し表示する。４枚の参照フィールド画像が揃っていない場合（ステップ３０２のＮｏ）、制御部１０６は、ＩＰ変換の指示を実行せずに、参照フィールド画像を表示処理部１０５へ設定する。表示処理部１０５は、制御部１０６の設定に応じて、参照フィールド画像を読み出し、垂直２倍拡大表示する（ステップ３０５）。 The input reference field image is stored as a source field. Accordingly, the control unit 106 updates the previous prev2 field to prev3 field, the previous prev field to prev2 field, and the previous source field to prev field (step 301). Here, it is only necessary that a plurality of reference field images of different generations are stored and managed in different fields. Accordingly, the area for storing the reference field image may be rewritten and updated, or may be updated by changing the correspondence between the reference field image and each field. When four reference field images are prepared (Yes in Step 302), the control unit 106 instructs the IP conversion processing unit 103 to perform IP conversion processing, and the IP conversion processing unit 103 executes IP conversion and performs interpolation field processing. An image is generated (step 303). The control unit 106 sets the generated interpolation field image and reference field image in the display processing unit 105 (step 304). The display processing unit 105 reads out and displays the interpolation field image and the reference field image according to the setting of the control unit 106. When the four reference field images are not prepared (No in Step 302), the control unit 106 sets the reference field image to the display processing unit 105 without executing the IP conversion instruction. The display processing unit 105 reads the reference field image in accordance with the setting of the control unit 106, and displays the reference field image in the double vertical size (step 305).

特開２００４−３０４７８８号公報JP 2004-304788 A

上述した一般的な技術において、ＩＰ変換処理部１０３の前段（デコーダ部１０１）にて、以下のような要因によりリピートが発生し、同じフィールド画像が続けてＩＰ変換処理部１０３に入力される場合がある。
（１）ＡＶ（Audio/Video）同期によるリピート（オーディオとビデオの同期をとるために、フィールド単位のリピートを行うことがある）
（２）フレームレート変換（５０Ｈｚ→６０Ｈｚ変換など）によるリピート
（３）スロー再生やポーズなどトリック再生によるリピート
（４）スライドショー（同じ絵がリピート表示され、数秒毎に絵が切り替わる） In the general technique described above, a repeat occurs due to the following factors in the preceding stage (decoder unit 101) of the IP conversion processing unit 103, and the same field image is continuously input to the IP conversion processing unit 103. There is.
(1) Repeat by AV (Audio / Video) synchronization (repeating in units of fields may be performed to synchronize audio and video)
(2) Repeat by frame rate conversion (50 Hz → 60 Hz conversion, etc.) (3) Repeat by slow playback or trick playback such as pause (4) Slide show (the same picture is displayed repeatedly, and the picture changes every few seconds)

図１０に２フィールド期間リピートが発生した場合の参照フィールド用画像メモリ１０２の遷移と各タイミングで表示される画像について示す。ｎｏ＝６のタイミングまでは図８と同じように遷移しｎｏ＝７，８の２フィールド期間、３Ｂのフィールド画像がリピートされる場合を示している。この場合、同じ３Ｂのフィールド画像が入力されることにより、ｎｏ＝７からｎｏ＝１０の４フィールド期間、４つの参照フィールドメモリに３Ｂのフィールド画像が複数枚存在することとなる。 FIG. 10 shows the transition of the reference field image memory 102 and the image displayed at each timing when the two-field period repeat occurs. 8 shows a case where the transition is made in the same manner as in FIG. 8 until the timing of no = 6, and the field image of 3B is repeated in the two-field period of no = 7,8. In this case, when the same 3B field image is input, a plurality of 3B field images exist in four reference field memories in a four field period from no = 7 to no = 10.

ＩＰ変換処理は動画像の連続するフィールド画像が入力されることを期待しており、同じフィールド画像が入力された場合は、正しい動き検出ができなくなり、期待する補間フィールド画像を生成することができず画質が劣化してしまう可能性があった。また、同じフィールド画像が入力されることにより、本来Ｔｏｐフィールドが入力されるべきタイミングでＢｏｔｔｏｍフィールドが入力されることになる。 The IP conversion process expects continuous field images of moving images to be input. If the same field image is input, correct motion detection cannot be performed and an expected interpolation field image can be generated. There was a possibility that the image quality deteriorated. In addition, when the same field image is input, the Bottom field is input at the timing when the Top field should be input.

この場合、このＢｏｔｔｏｍフィールドをＴｏｐフィールドとしてＩＰ変換処理を行ってしまう。図１１に通常時とリピート発生時のＩＰ変換のイメージ図を示す。図１１において、Ｔｏｐフィールドは白色、Ｂｏｔｔｏｍフィールドは網かけで表示し、Ｔｏｐフィールドの補間フィールドは右下りの斜線、Ｂｏｔｔｏｍフィールドの補間フィールドは右上りの斜線で示している。 In this case, the IP conversion process is performed using the Bottom field as the Top field. FIG. 11 shows an image diagram of IP conversion during normal times and when repeats occur. In FIG. 11, the Top field is displayed in white, the Bottom field is shaded, the interpolation field in the Top field is indicated by a right-down diagonal line, and the interpolation field in the Bottom field is indicated by an upper-right diagonal line.

通常、（１）Ｔｏｐ、（２）Ｂｏｔｔｏｍ、（３）Ｔｏｐ、（４）Ｂｔｔｏｍの順に入力されるインタレース画像に対して、それぞれ、（１）Ｂｏｔｔｏｍ、（２）Ｔｏｐ、（３）Ｂｏｔｔｏｍ、（４）Ｔｏｐの補間フィールドを生成することで、プログレッシブ画像が構成される。しかし、例えばＢｏｔｔｏｍでリピートが発生した時は（１）Ｔｏｐ、（２）Ｂｏｔｔｏｍ、（３）Ｂｏｔｔｏｍ、（４）Ｂｏｔｔｏｍの順に入力されるインタレース画像に対して、（１）Ｂｏｔｔｏｍ、（２）Ｔｏｐ、（３）Ｂｏｔｔｏｍ、（４）Ｔｏｐの補間フィールドを生成してしまい、（３）の入力フィールドをＴｏｐフィールドとして、Ｂｏｔｔｏｍの補間フィールドを生成する。これによりフリッカが発生し、画質劣化を招く要因となっていた。 In general, (1) Bottom, (2) Top, (3) Bottom, respectively, for interlaced images input in the order of (1) Top, (2) Bottom, (3) Top, and (4) Btom. (4) A progressive image is formed by generating a top interpolation field. However, for example, when a repeat occurs in the bottom, for an interlaced image input in the order of (1) Top, (2) Bottom, (3) Bottom, (4) Bottom, (1) Bottom, (2) An interpolation field of Top, (3) Bottom, and (4) Top is generated, and an interpolation field of Bottom is generated using the input field of (3) as the Top field. As a result, flicker occurs, causing deterioration in image quality.

上述したように、ＩＰ変換処理は連続したフィールド画像が入力されることを前提としており、非連続なフィールド画像が入力された場合、理想的な補間フィールド画像は生成されない。そのため、ＩＰ変換処理の前段にて、リピートやトリック（スロー再生や、ポーズ）を行った場合、理想的な動き検出ができないことや、同じフィールド画像が連続で入力されることになり、フリッカが発生してしまう。 As described above, the IP conversion process is based on the premise that continuous field images are input. When non-continuous field images are input, an ideal interpolated field image is not generated. For this reason, if repeat or trick (slow playback or pause) is performed before the IP conversion process, ideal motion detection cannot be performed, and the same field image is continuously input, and flicker may occur. Will occur.

例えば、特許文献１に同一フィールドの映像信号を続けて入力するようなスロー再生の場合にも、動きを検出することができ、動き補償したＩＰ変換を行い、鮮明なノンインタレース信号を生成する映像信号処理装置が開示されている。 For example, even in the case of slow reproduction in which a video signal of the same field is continuously input to Patent Document 1, motion can be detected, and motion-compensated IP conversion is performed to generate a clear non-interlace signal. A video signal processing apparatus is disclosed.

しかしながら、特許文献１の技術では連続でリピートが発生した場合に、ＡＶ同期ズレが発生してしまうという問題があった。 However, the technique of Patent Document 1 has a problem in that an AV synchronization shift occurs when repeats occur continuously.

本発明に係る画像処理装置の一態様は、画像データを復号するデコーダ部と、複数の画像データ夫々を復号した複数の参照フィールド画像を格納する参照フィールド用画像メモリと、前記複数の参照フィールド画像を用いて補間フィールド画像を生成する補間フィールド生成部と、前記補間フィールド画像を格納する補間フィールド用画像メモリと、前記複数の参照フィールド画像の少なくとも一つと前記補間フィールド画像とを用いて、表示する画像を出力する表示処理部と、リピート状態をカウントするカウンタと、新たに受け付けた画像データが、前回と同じ画像データとなっているリピート状態を検出した場合、前記カウンタをカウントアップし、前記補間フィールド用画像メモリに格納した前記補間フィールド画像を変更しないで維持させ、リピート状態でない場合、前記カウンタをクリアし、新たに補間フィールド画像を生成させ、カウントアップまたはクリアされた後のカウンタの値に基づいて、前記表示処理部が用いる画像を前記参照フィールド画像と、前記維持させた補間フィールド画像から選択し、選択した画像を前記表示処理部に出力させる制御部と、を備える。制御部は、画像データの入力状況がリピート状態である場合、前回生成した補間フィールド画像、すわなち、リピート状態になる前に生成した補間フィールド画像を用いるように制御する。また、制御部はカウンタの値に基づいて、リピート状態が繰り返されていることを把握する。従って、リピート状態が繰り返されている状況に応じて、適切な補間フィールド画像を用いることが可能になり、リピート発生時の画質劣化を防ぐことができる。 An aspect of the image processing apparatus according to the present invention includes a decoder unit that decodes image data, a reference field image memory that stores a plurality of reference field images obtained by decoding a plurality of image data, and the plurality of reference field images. Display using an interpolation field generation unit for generating an interpolation field image using the image, an interpolation field image memory for storing the interpolation field image, at least one of the plurality of reference field images and the interpolation field image A display processing unit that outputs an image, a counter that counts the repeat state, and a newly received image data that detects the repeat state that is the same image data as the previous time, counts up the counter, and the interpolation Do not change the interpolated field image stored in the field image memory. If the counter field is not in the repeat state, the counter is cleared, an interpolation field image is newly generated, and the image used by the display processing unit is based on the counter value after being counted up or cleared. And a control unit that selects from the maintained interpolation field image and outputs the selected image to the display processing unit. When the input state of the image data is in the repeat state, the control unit controls to use the interpolation field image generated last time, that is, the interpolation field image generated before the repeat state is entered. Further, the control unit grasps that the repeat state is repeated based on the value of the counter. Therefore, it is possible to use an appropriate interpolated field image according to the situation where the repeat state is repeated, and it is possible to prevent image quality deterioration when repeat occurs.

また、本発明に係る画像処理方法の一態様は、画像データを復号して参照フィールド画像を生成し、複数の参照フィールド画像を用いて補間フィールド画像を生成し、前記複数の参照フィールド画像の少なくとも一つと前記補間フィールド画像とを用いた画像を出力する画像処理装置を制御する画像処理制御方法であって、新たに受け付けた画像データが前回と同じ画像データとなっているリピート状態であるか否かを検出し、リピート状態でない場合、カウンタをクリアし、新たに補間フィールド画像を生成させ、リピート状態である場合、カウンタをカウントアップし、前回生成させた補間フィールド画像を変更しないで維持させ、カウントアップまたはクリアされた後のカウンタの値に基づいて、前記参照フィールド画像と前記補間フィールド画像から表示する画像を選択し、選択した画像を出力させる。 In one aspect of the image processing method according to the present invention, image data is decoded to generate a reference field image, an interpolation field image is generated using a plurality of reference field images, and at least one of the plurality of reference field images An image processing control method for controlling an image processing apparatus that outputs an image using one and the interpolation field image, and whether or not the newly received image data is the same as the previous image data If it is not a repeat state, the counter is cleared and an interpolation field image is newly generated.If it is a repeat state, the counter is counted up and the interpolation field image generated last time is kept unchanged. Based on the value of the counter after being counted up or cleared, the reference field image and the interpolation frame are used. Select the image to be displayed from Rudo image, and outputs the selected image.

さらに、本発明に係る画像処理プログラムの一態様は、画像データを復号して参照フィールド画像を生成し、複数の参照フィールド画像を用いて補間フィールド画像を生成し、前記複数の参照フィールド画像の少なくとも一つと前記補間フィールド画像とを用いた画像を出力する画像処理装置を制御する画像処理制御プログラムであって、コンピュータに、新たに受け付けた画像データが前回と同じ画像データとなっているリピート状態であるか否かを検出する検出手順と、リピート状態でない場合、カウンタをクリアし、新たに補間フィールド画像を生成させ、リピート状態である場合、カウンタをカウントアップし、前回生成させた補間フィールド画像を変更しないで維持させる変換指示手順と、カウントアップまたはクリアされた後のカウンタの値に基づいて、前記参照フィールド画像と補間フィールド画像から表示する画像を選択し、選択した画像を出力させる表示指示手順と、を実行させる。 Furthermore, one aspect of the image processing program according to the present invention generates a reference field image by decoding image data, generates an interpolated field image using a plurality of reference field images, and includes at least one of the plurality of reference field images. An image processing control program for controlling an image processing apparatus that outputs an image using one and the interpolation field image, in a repeat state where the newly received image data is the same as the previous image data. Detection procedure for detecting whether or not there is a repeat state, if not in a repeat state, the counter is cleared and a new interpolation field image is generated, and if in a repeat state, the counter is counted up and the interpolation field image generated last time is Conversion instruction procedure to keep without change and after counting up or clearing Based on the value of the counter to select an image to be displayed from the reference field image and the interpolated field image, to execute a display instruction procedure for outputting the selected image.

本発明によれば、連続でリピートが発生した場合に、ｎ（ｎ＞０の整数）フィールド未満のリピート発生時の画質劣化を防止し、ｎフィールド以上のリピート発生時にもＡＶ同期を維持することができる。 According to the present invention, when continuous repeats occur, image quality deterioration is prevented when repeats of less than n (n> 0 integer) fields occur, and AV synchronization is maintained even when repeats of more than n fields occur. Can do.

ＩＰ変換を行う画像処理装置の一般的な構成図を示す図である。It is a figure which shows the general block diagram of the image processing apparatus which performs IP conversion. 実施形態１における２フィールド・リピート発生時の参照フィールド用画像メモリ遷移と表示画像を示す図である。FIG. 6 is a diagram illustrating transition of a reference field image memory and a display image when two-field repeat occurs in the first embodiment. 実施形態１における８フィールド・リピート発生時の参照フィールド用画像メモリ遷移と表示画像（１）を示す図である。FIG. 6 is a diagram showing reference field image memory transition and display image (1) when 8 field repeat occurs in the first embodiment. 実施形態１における８フィールド・リピート発生時の参照フィールド用画像メモリ遷移と表示画像（２）を示す図である。FIG. 6 is a diagram showing reference field image memory transition and a display image (2) when 8 field repeat occurs in the first embodiment. 実施形態１の画像処理装置の動作例を示すフローチャートである。3 is a flowchart illustrating an operation example of the image processing apparatus according to the first exemplary embodiment. 実施形態２の表示画像のイメージ図である。FIG. 6 is an image diagram of a display image according to the second embodiment. 実施形態３の画像処理装置の構成例を示すブロック図である。FIG. 10 is a block diagram illustrating a configuration example of an image processing apparatus according to a third embodiment. リピート発生なしの場合の参照フィールド用画像メモリ遷移と表示画像を示す図である。It is a figure which shows the image memory transition for reference fields, and a display image in the case of no occurrence of repeat. 従来技術の画像処理の動作を示すフローチャートである。It is a flowchart which shows the operation | movement of the image processing of a prior art. 従来技術における２フィールド・リピート発生時の参照フィールド用画像メモリ遷移と表示画像を示す図である。It is a figure which shows the image memory transition for reference fields at the time of 2-field repeat generation in a prior art, and a display image. 従来技術における画質劣化のイメージ図である。It is an image figure of image quality degradation in a prior art.

以下、本発明の実施形態について、図面を参照しながら説明する。説明の明確化のため、以下の記載及び図面は、適宜、省略、及び簡略化がなされている。各図面において同一の構成または機能を有する構成要素および相当部分には、同一の符号を付し、その説明は省略する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings. For clarity of explanation, the following description and drawings are omitted and simplified as appropriate. In the drawings, components having the same configuration or function and corresponding parts are denoted by the same reference numerals and description thereof is omitted.

本発明では、リピート発生時に前回と同じ参照フィールド画像を用いてＩＰ変換することにより生じる画質劣化を防ぐため、リピート発生時には前回のＩＰ変換結果をリピート表示する。また、単純に前回のＩＰ変換結果を表示する方法を適用すると、スライドショーなどの場合にＡＶ同期ずれが大きくなってしまうため、対処方法を変更する。ここで、前回のＩＰ変換結果とは、リピート発生前のＩＰ変換結果であり、具体的には、リピート発生やトリックプレー中などのように、連続した画像データが入力されなくなる前にＩＰ変換した結果をいう。より具体的には、制御部１０６がリピート状態やトリック状態を検出する前に生成された補間フィールド画像を用いる。従って、補間フィールド用画像メモリ１０４は、前回のＩＰ変換で生成した補間フィールド画像を維持することになる。
以下の説明では、図１に示した構成を用いて、本発明に係る画像処理装置及び方法を説明する。具体的には、画像処理装置は、デコーダ部１０１、参照フィールド用画像メモリ１０２、ＩＰ変換処理部（補間フィールド生成部）１０３、補間フィールド用画像メモリ１０４、表示処理部１０５、及び制御部１０６を備える。制御部１０６を除いた各構成要素は上述した説明と同様であるため省略する。制御部１０６の制御方法が従来の画像処理装置とは異なる。従って、以下の各実施形態では、制御部１０６の動作を中心に説明する。 In the present invention, in order to prevent image quality degradation caused by IP conversion using the same reference field image as the previous time when repeat occurs, the previous IP conversion result is displayed repeatedly when repeat occurs. Further, if the method of simply displaying the previous IP conversion result is applied, the AV synchronization shift becomes large in the case of a slide show or the like, so the coping method is changed. Here, the previous IP conversion result is the IP conversion result before the occurrence of repeat. Specifically, the IP conversion is performed before continuous image data is not input, such as during the occurrence of repeat or trick play. Say the result. More specifically, an interpolation field image generated before the control unit 106 detects a repeat state or trick state is used. Therefore, the interpolation field image memory 104 maintains the interpolation field image generated by the previous IP conversion.
In the following description, an image processing apparatus and method according to the present invention will be described using the configuration shown in FIG. Specifically, the image processing apparatus includes a decoder unit 101, a reference field image memory 102, an IP conversion processing unit (interpolation field generation unit) 103, an interpolation field image memory 104, a display processing unit 105, and a control unit 106. Prepare. Since the components other than the control unit 106 are the same as those described above, a description thereof will be omitted. The control method of the control unit 106 is different from the conventional image processing apparatus. Therefore, in the following embodiments, the operation of the control unit 106 will be mainly described.

（実施形態１）
まず、本実施形態の画像の遷移について説明する。
図２に本実施形態における２フィールド期間リピートが発生した場合の参照フィールド用画像メモリ１０２の遷移と各タイミングで表示される画像について示す。ｎｏ＝６のタイミングまでは図８と同じように遷移し、ｎｏ＝７，８の２フィールド期間、３Ｂのフィールド画像がリピートされる場合を示している。ｎｏ＝７，８のリピートされている期間はＩＰ変換を実行せずにｎｏ＝６で表示していた３Ｔの参照フィールド画像と補間フィールド画像をリピート表示する。ｎｏ＝６で表示されていた画像は正常にＩＰ変換されたものであるため、それをリピート表示しても画質は一切劣化しない。ｎｏ＝９のタイミングでリピートが終了し新しいフィールド画像４Ｔが入力され、ＩＰ変換を再開する。この場合、ｎｏ＝６の続きでＩＰ変換を実行し、以降の画質も劣化することはない。 (Embodiment 1)
First, image transition according to the present embodiment will be described.
FIG. 2 shows the transition of the reference field image memory 102 and the image displayed at each timing when a two-field period repeat occurs in this embodiment. 8 shows a case where the transition is made in the same manner as in FIG. 8 until the timing of no = 6, and a field image of 3B is repeated in a 2-field period of no = 7,8. During the period in which no = 7 and 8 are repeated, the 3T reference field image and the interpolated field image displayed with no = 6 are repeatedly displayed without performing IP conversion. Since the image displayed with no = 6 is normally IP-converted, the image quality does not deteriorate at all even if it is displayed repeatedly. The repeat ends at the timing of no = 9, a new field image 4T is input, and the IP conversion is restarted. In this case, IP conversion is executed after continuation of no = 6, and the subsequent image quality is not deteriorated.

図３および図４はｎｏ＝７からｎｏ＝１４にて８フィールド期間連続で、３Ｂのフィールド画像がリピートされ、さらにｎｏ＝１７からｎｏ＝２４の８フィールド期間連続で、４Ｂのフィールド画像がリピートされる場合を示している。
本ケースにおいて、リピート発生期間中は前回のＩＰ変換結果をリピートする方法を適用した場合を図３に示している。この場合、ｎｏ＝７からｎｏ＝１４およびｎｏ＝１７からｎｏ＝２４のリピートが発生している期間はＩＰ変換を行わずに前回のＩＰ変換結果を表示する。画質という意味ではこのように運用することで最適な画像を表示することが可能であるが、１Ｄｅｌａｙ、２Ｄｅｌａｙモードにおいては、本来表示されるタイミングよりかなり遅れて表示されてしまうことになる。 3 and 4, 3B field images are repeated for 8 field periods from no = 7 to no = 14, and 4B field images are repeated for 8 field periods from no = 17 to no = 24. Shows the case.
In this case, FIG. 3 shows a case where the method of repeating the previous IP conversion result is applied during the repeat occurrence period. In this case, the previous IP conversion result is displayed without performing IP conversion during a period in which repeats of no = 7 to no = 14 and no = 17 to no = 24 occur. In terms of image quality, it is possible to display an optimal image by operating in this way. However, in the 1 Delay and 2 Delay modes, the image is displayed considerably later than the originally displayed timing.

例えば１Ｄｅｌａｙモードの場合３Ｂの表示位置が４Ｔ入力時（ｎｏ＝１５のタイミング）となり、２Ｄｅｌａｙモードの場合４Ｔの表示開始位置が５Ｔ入力時（ｎｏ＝２５のタイミング）となる。１Ｄｅｌａｙモードは１フィールド期間の遅延、２Ｄｅｌａｙモードは２フィールド期間の遅延を期待するため、期待通りの動作にならない。また、スライドショーなどのように、数秒に１回しか入力フィールド画像が更新されない場合を考えると、ＡＶ同期ズレが発生することになってしまう。 For example, in the 1 Delay mode, the 3B display position is at the time of 4T input (no = 15 timing), and in the 2 Delay mode, the 4T display start position is at the time of 5T input (no = 25 timing). The 1 Delay mode expects a delay of 1 field period, and the 2 Delay mode expects a delay of 2 field periods, so the operation is not as expected. Also, considering the case where the input field image is updated only once every few seconds, such as a slide show, an AV synchronization shift occurs.

そこで、ｎ（ｎ＞０の整数）フィールド以上（本実施形態では３フィールド以上）連続でリピートが発生した場合には画質よりもＡＶ同期を優先し、参照フィールド画像を垂直２倍拡大表示する例を図４に示す。ｎｏ＝７およびｎｏ＝８のタイミングでは、図１０で説明した通り、ＩＰ変換を行わずにｎｏ＝６のＩＰ変換結果である３Ｔをリピート表示する。次のｎｏ＝９のタイミングにおいてさらに３Ｂがリピートされたため、参照用フィールド画像メモリの更新は再開するが、ＩＰ変換処理は行わずに、参照フィールド画像（１Ｄｅｌａｙのモードの場合、ｐｒｅｖ）を垂直２倍拡大表示する。ｎｏ＝１５のタイミングにおいて４Ｔが入力されるため、リピート状態は脱し、参照フィールド画像メモリの更新は再開されるが、４枚の参照フィールド画像が揃っていないため、ＩＰ変換処理は行わずに、参照フィールド画像を垂直２倍拡大表示する。 Therefore, when repeat occurs continuously over n (n> 0 integer) fields (in this embodiment, 3 fields or more), AV synchronization is prioritized over image quality, and the reference field image is enlarged twice vertically. Is shown in FIG. At the timing of no = 7 and no = 8, as described in FIG. 10, 3T, which is the IP conversion result of no = 6, is repeatedly displayed without performing IP conversion. Since 3B is further repeated at the next timing of no = 9, the update of the reference field image memory is resumed, but the reference field image (prev in the case of the 1 Delay mode) is set to the vertical 2 without performing the IP conversion process. Double magnification display. Since 4T is input at the timing of no = 15, the repeat state is canceled and the update of the reference field image memory is resumed. However, since the four reference field images are not prepared, the IP conversion process is not performed. The reference field image is enlarged and displayed twice in the vertical direction.

なお、本実施形態では、３フィールド以上リピートとしたが、表示遅延（ＡＶ同期ズレ）をどこまで許容するかによって、この閾値は変更しても良い。
このようにすることで、フレームレート変換などによる短い期間（ｎフィールド未満）のリピートが発生した場合は前回のＩＰ変換結果をリピート表示し、最適画質を保ち、ｎフィールド以上のリピートが発生した場合は参照フィールド画像を垂直２倍拡大表示することでＡＶ同期を保つことができる。 In the present embodiment, the repeat is performed for three or more fields, but this threshold value may be changed depending on how far the display delay (AV synchronization shift) is allowed.
By doing in this way, when repeat of a short period (less than n fields) occurs due to frame rate conversion etc., the previous IP conversion result is displayed repeatedly, maintaining the optimum image quality, and repeat of more than n fields occurred The AV synchronization can be maintained by displaying the reference field image in a vertically doubled display.

また、スロー再生やポーズなどオーディオ再生を伴わないトリックプレー再生の場合はＡＶ同期を考慮する必要がなくなるため、デコーダ部１０１からトリック情報を入手し、トリックプレー中の場合は、前回のＩＰ変換結果をリピート表示することで、最適画質を保つことが可能となる。 Also, in the case of trick play playback that does not involve audio playback such as slow playback or pause, it is not necessary to consider AV synchronization, so trick information is obtained from the decoder unit 101. If trick play is in progress, the previous IP conversion result is obtained. By repeating the display, the optimum image quality can be maintained.

図５に本実施形態の画像処理装置の動作例を表すフローチャートを示す。本実施形態において、制御部１０６は、ｒｅｐｅａｔ＿ｃｏｕｎｔを用いる。ｒｅｐｅａｔ＿ｃｏｕｎｔは、画像処理装置に同じ画像データが入力された場合に、その回数をカウントするカウンタであり、制御部１０６が使用するメモリ内に設置される。ｒｅｐｅａｔ＿ｃｏｕｎｔは、システム起動時に初期化される。 FIG. 5 is a flowchart showing an operation example of the image processing apparatus according to the present embodiment. In the present embodiment, the control unit 106 uses repeat_count. The repeat_count is a counter that counts the number of times when the same image data is input to the image processing apparatus, and is installed in the memory used by the control unit 106. The repeat_count is initialized when the system is started.

まず、制御部１０６は、前段のデコーダ部１０１からトリック情報、リピート情報を取得する（ステップ６０１）。トリック情報とはスロー再生やポーズなどトリックプレー中（トリック状態）かどうかを示す情報、リピート情報とは参照フィールド用画像メモリ１０２のｓｏｕｒｃｅｆｉｅｌｄに格納された画像が前回と同一のもの（リピートされたもの、リピート状態）かどうかを示す情報である。
リピートが発生していない場合（ステップ６０２のＹｅｓ）、制御部１０６は、ｒｅｐｅａｔ＿ｃｏｕｎｔをクリアする（ステップ６０３）。ステップ６０４からステップ６０８については図９のステップ３０１からステップ３０５と同一であるため、説明は省略する。
リピートが発生している場合（ステップ６０２のＮｏ）、制御部１０６は、ｒｅｐｅａｔ＿ｃｏｕｎｔをインクリメントする（ステップ６０９）。 First, the control unit 106 acquires trick information and repeat information from the preceding decoder unit 101 (step 601). The trick information is information indicating whether trick play such as slow play or pause is in progress (trick state), and the repeat information is the same as the previous image in which the image stored in the source field of the reference field image memory 102 (repeated) Information indicating whether it is in a repeat state).
If no repeat has occurred (Yes in step 602), the control unit 106 clears repeat_count (step 603). Steps 604 to 608 are the same as steps 301 to 305 in FIG.
If repeat has occurred (No in step 602), the control unit 106 increments repeat_count (step 609).

このｒｅｐｅａｔ＿ｃｏｕｎｔは連続でリピートが発生している場合にインクリメントされ、リピートではない画像が入力された場合はステップ６０３でクリアされる。
トリックプレー中、または３回未満のリピート（ｒｅｐｅａｔ＿ｃｏｕｎｔ＜３）の場合（ステップ６１０のＹｅｓ）、制御部１０６は、前回のＩＰ変換時に生成された補間フィールド画像と参照フィールド画像を表示処理部へ設定し、プログレッシブ画像として表示する。具体的には、制御部１０６は、表示処理部１０５へ表示する画像データを指示し、表示処理部１０５は、制御部１０６の指示に応じて補間フィールド画像と参照フィールド画像とを読み出し、表示する。
トリックプレー中ではなく、３回以上のリピート（ｒｅｐｅａｔ＿ｃｏｕｎｔ＞＝３）の場合（ステップ６１０のＮｏ）、制御部１０６は、参照フィールド用画像メモリ１０２の更新を行い（ステップ６１２）、参照フィールド画像を垂直２倍拡大して表示する（ステップ６１３）。具体的には、制御部１０６は、参照フィールド用画像メモリ１０２が既に記憶する画像データそれぞれをｐｒｅｖ／ｐｒｅｖ２／ｐｒｅｖ３のどのフィールドに該当するかを更新する。また、表示処理部１０５へ表示する画像データを指示し、表示処理部１０５は、制御部１０６の指示に応じて参照フィールド画像を読み出し、垂直２倍拡大して表示する。 This repeat_count is incremented when repeats are continuously generated, and is cleared at step 603 when an image that is not repeats is input.
During trick play, or when the repeat is less than 3 times (repeat_count <3) (Yes in step 610), the control unit 106 sets the interpolation field image and the reference field image generated at the previous IP conversion to the display processing unit. And displayed as a progressive image. Specifically, the control unit 106 instructs image data to be displayed to the display processing unit 105, and the display processing unit 105 reads and displays the interpolation field image and the reference field image in accordance with the instruction from the control unit 106. .
If the trick play is not being performed and repeats are repeated three times or more (repeat_count> = 3) (No in step 610), the control unit 106 updates the reference field image memory 102 (step 612), and updates the reference field image. The image is enlarged and displayed twice in the vertical direction (step 613). Specifically, the control unit 106 updates to which field of prev / prev2 / prev3 each image data already stored in the reference field image memory 102 corresponds. In addition, the display processing unit 105 is instructed on image data to be displayed, and the display processing unit 105 reads out the reference field image in accordance with an instruction from the control unit 106, and displays the reference field image in an enlarged manner twice.

図５のフローチャートに示したように、制御部１０６は、デコーダ部１０１からリピート情報、トリック情報を取得し、３回未満のリピート発生時、またはトリックプレー中は前回のＩＰ変換結果をリピート表示し、３回以上のリピート発生時、かつトリックプレー中でない場合は参照フィールド画像を垂直２倍拡大表示する。そのため、従来技術のように同じ参照フィールド画像がＩＰ変換処理部１０３に入力されることはなくなり、不適切な補間フィールドが表示されることを回避することができる。上記では、３フィールド以上のリピートが発生した場合の動作を示したが、ｎフィールド以上のリピートが発生した場合についても、同様に説明することができる。 As shown in the flowchart of FIG. 5, the control unit 106 obtains repeat information and trick information from the decoder unit 101, and repeats the previous IP conversion result when repeats occur less than three times or during trick play. When repeats occur three times or more, and when trick play is not being performed, the reference field image is enlarged and displayed twice in the vertical direction. Therefore, the same reference field image is not input to the IP conversion processing unit 103 as in the prior art, and an inappropriate interpolation field can be prevented from being displayed. In the above description, the operation in the case where repeats of three fields or more occur has been described, but the case where repeats of n fields or more occur can be similarly described.

このように、本実施形態によれば、画像処理装置において、リピート発生時にＩＰ変換を実行せずに前回のＩＰ変換結果をリピート表示する機能、トリックプレー中もＩＰ変換を実行せずに前回のＩＰ変換結果をリピート表示する機能を実現することができる。これらの機能により、リピート発生時のＩＰ変換画質劣化を防ぐことが可能になる。また、本実施形態によれば、ｎフィールド以上のリピート発生時は、前回のＩＰ変換結果をリピート表示する方法を適用しない機能、ｎフィールド以上のリピート発生時に、前回のＩＰ変換結果をリピート表示する方法を適用しない場合に、参照フィールド画像を垂直２倍拡大表示する機能を実現することができる。これらの機能により、スライドショーなどのように長時間リピートが発生するケースでもＡＶ同期を維持することができる。 As described above, according to the present embodiment, in the image processing apparatus, the function of repeatedly displaying the previous IP conversion result without executing IP conversion when repeat occurs, the previous time without executing IP conversion even during trick play. A function for displaying the IP conversion result repeatedly can be realized. With these functions, it is possible to prevent deterioration of image quality of IP conversion when repeat occurs. In addition, according to the present embodiment, when a repeat of n fields or more occurs, a function that does not apply the method of repeatedly displaying the previous IP conversion result, and when the repeat of n fields or more occurs, the previous IP conversion result is displayed repeatedly. In the case where the method is not applied, it is possible to realize a function of displaying the reference field image in the double vertical magnification. With these functions, AV synchronization can be maintained even when a long-time repeat occurs, such as in a slide show.

（実施形態２）
実施形態１ではｎフィールド以上のリピート発生、かつトリックプレー中ではない場合に、参照フィールド画像を垂直２倍拡大表示することとしたが、Ｔｏｐフィールド画像とＢｏｔｔｏｍフィールド画像の単純組み合わせによりプログレッシブ画像を構成して表示しても良い。
一般的にＩＰ変換は入力される複数のフィールド画像から動き検出を行い、動画、静止画判定を行う。 (Embodiment 2)
In the first embodiment, when the repeat of n fields or more is generated and the trick play is not being performed, the reference field image is displayed in the vertical double magnification. However, the progressive image is configured by a simple combination of the Top field image and the Bottom field image. May be displayed.
In general, in IP conversion, motion is detected from a plurality of input field images, and moving image and still image determination is performed.

静止画と判定された場合、表示対象の参照フィールド画像がＢｏｔｔｏｍフィールド画像の場合は、ひとつ手前のＴｏｐフィールド画像をそのまま補間フィールドとして適用する。
また、表示対象の参照フィールド画像がＴｏｐフィールド画像の場合は、ひとつ先のＢｏｔｔｏｍフィールド画像をそのまま補間フィールドとして適用する。 When it is determined that the image is a still image, if the reference field image to be displayed is a Bottom field image, the previous Top field image is applied as it is as an interpolation field.
When the reference field image to be displayed is a Top field image, the next Bottom field image is directly applied as an interpolation field.

例えば、３フィールド以上のリピートが発生した場合、それはスライドショーのような静止画である可能性が高い。このため、静止画と判断して、参照フィールド画像がＢｏｔｔｏｍフィールド画像の場合はＴｏｐフィールド画像を、参照フィールド画像がＴｏｐフィールド画像の場合はＢｏｔｔｏｍフィールド画像をそのまま補間フィールドとして適用してプログレッシブ画像を構成することで、最適な画質が得られる可能性が高い。 For example, when a repeat of three or more fields occurs, it is highly likely that the repeat image is a still image such as a slide show. Therefore, it is determined as a still image, and when the reference field image is a Bottom field image, a Top field image is applied, and when the reference field image is a Top field image, the Bottom field image is applied as an interpolation field to form a progressive image. By doing so, there is a high possibility that an optimum image quality will be obtained.

図６に本実施形態を使用した場合でＢｏｔｔｏｍフィールドが連続してリピートした場合のイメージ図を示す。図６の表示は図１１と同様のパターンを用いて各フィールド及び補間フィールドを示している。図６では、（３）以降（２）と同じＢｏｔｔｏｍフィールドがリピートして入力されている。（３）（４）では３フィールド未満のリピートであるため、前回のＩＰ変換結果をリピート表示する。３フィールド以上のリピートとなる（５）（６）では補間フィールドとして（１）のＴｏｐＦｉｅｌｄを使用して表示を行う。 FIG. 6 shows an image diagram when the Bottom field is continuously repeated when this embodiment is used. The display of FIG. 6 shows each field and interpolation field using the same pattern as in FIG. In FIG. 6, the same Bottom field as (3) and (2) is repeated and input. (3) In (4), since the repeat is less than 3 fields, the previous IP conversion result is displayed repeatedly. In (5) and (6), which repeats three or more fields, display is performed using the top field of (1) as the interpolation field.

この方法を適用した場合、３フィールド以上リピート発生した場合においても、それが静止画であれば最適な画質で表示されることとなる。なお、静止画でない場合は串状の絵が表示されることとなるため、誤った表示に至る可能性もある。このため、静止画であるか否かの判断を慎重に実施する工夫が施されることが好ましい。例えば、予め静止画の指定を受け付けた場合に本実施形態を適用するようにしてもよい。
また、３フィールド以上リピート発生した場合に、Ｔｏｐフィールド画像とＢｏｔｔｏｍフィールド画像を組み合わせて表示する方法として、制御部１０６が表示するＴｏｐ／Ｂｏｔｔｏｍフィールド画像を参照フィールド用画像メモリ１０２から選択して表示処理部１０５へ設定して表示させても良い。あるいは、制御部１０６がＩＰ変換処理部１０３に強制的に静止画判定をするように指示し、ＩＰ変換処理部１０３にて生成される補間フィールドが前後のＴｏｐまたはＢｏｔｔｏｍフィールド画像そのものになるようにしても良い。 When this method is applied, even when three or more fields are repeated, if it is a still image, it is displayed with an optimum image quality. If the image is not a still image, a skewered picture is displayed, which may lead to an erroneous display. For this reason, it is preferable to devise a method for carefully determining whether or not the image is a still image. For example, the present embodiment may be applied when designation of a still image is received in advance.
As a method of displaying a combination of the Top field image and the Bottom field image when three or more fields are repeated, the Top / Bottom field image displayed by the control unit 106 is selected from the reference field image memory 102 and displayed. It may be set and displayed in the unit 105. Alternatively, the control unit 106 instructs the IP conversion processing unit 103 to forcibly determine a still image so that the interpolation field generated by the IP conversion processing unit 103 becomes the preceding or following Top or Bottom field image itself. May be.

本実施形態によれば、ｎフィールド以上のリピート発生時に、前回のＩＰ変換結果をリピート表示する方法を適用しない場合に、静止画と判断してＴｏｐフィールド画像とＢｏｔｔｏｍフィールド画像の組み合わせによりプログレッシブ画像を構成し表示する機能を実現することができる。これにより、リピート発生時のＩＰ変換画質劣化を防ぐことが可能になる。特に、静止画が表示されている場合における画質劣化を防ぐことができる。 According to the present embodiment, when a method of repeatedly displaying the previous IP conversion result is not applied when a repeat of n fields or more is generated, the progressive image is determined by combining the Top field image and the Bottom field image by determining that the image is a still image. The function of configuring and displaying can be realized. As a result, it is possible to prevent IP conversion image quality degradation when repeat occurs. In particular, it is possible to prevent image quality deterioration when a still image is displayed.

（実施形態３）
実施形態３では、上記各実施形態の制御部が実現する制御機能を、構成例を用いて説明する。図７は、実施形態３の画像処理装置の構成例を示すブロック図である。図７において、デコーダ部１０１、参照フィールド用画像メモリ１０２、ＩＰ変換処理部１０３、補間フィールド用画像メモリ１０４、及び表示処理部１０５は図１と同様であるため説明を省略する。制御部２００は、検出部２１０と、変換指示部２２０と、表示指示部２３０と、を備える。 (Embodiment 3)
In the third embodiment, a control function realized by the control unit of each of the above embodiments will be described using a configuration example. FIG. 7 is a block diagram illustrating a configuration example of the image processing apparatus according to the third embodiment. 7, the decoder unit 101, the reference field image memory 102, the IP conversion processing unit 103, the interpolation field image memory 104, and the display processing unit 105 are the same as those in FIG. The control unit 200 includes a detection unit 210, a conversion instruction unit 220, and a display instruction unit 230.

検出部２１０は、デコーダ部１０１に画像データが入力されたことを検出し、入力された画像データの状態（例えば、リピート発生、トリックプレー中など）を検出する。具体的には、実施形態１では、デコーダ部１０１からリピート情報やトリック情報を取得し、デコーダ部１０１が新たに受け付けた画像データがリピート状態あるいはトリック状態であることを検出する。また、検出部２１０は、新たな画像データの受け付けられたときに、参照フィールド用画像メモリ１０２の各フィールド（ｐｒｅｖ／ｐｒｅｖ２／ｐｒｅｖ３）を更新する。
また、検出部２１０は、検出結果メモリ２１１を含む。検出結果メモリ２１１は、リピート情報、トリック情報、または、ｒｅｐｅａｔ＿ｃｏｕｎｔを設置する記憶領域である。検出部２１０は、デコーダ部１０１から取得したリピート情報またはトリック情報を検出結果メモリ２１１へ記憶する。また、検出部２１０は、リピート状態を検出したときにｒｅｐｅａｔ＿ｃｏｕｎｔをカウントアップし、リピート状態でなくなったときにｒｅｐｅａｔ＿ｃｏｕｎｔをクリアする。 The detection unit 210 detects that image data has been input to the decoder unit 101, and detects the state of the input image data (for example, occurrence of repeat, trick play, etc.). Specifically, in the first embodiment, repeat information and trick information are acquired from the decoder unit 101, and it is detected that the image data newly received by the decoder unit 101 is in a repeat state or a trick state. The detection unit 210 updates each field (prev / prev2 / prev3) of the reference field image memory 102 when new image data is received.
The detection unit 210 includes a detection result memory 211. The detection result memory 211 is a storage area in which repeat information, trick information, or repeat_count is installed. The detection unit 210 stores the repeat information or trick information acquired from the decoder unit 101 in the detection result memory 211. Further, the detection unit 210 counts up the repeat_count when detecting a repeat state, and clears the repeat_count when no repeat state is detected.

変換指示部２２０は、検出部２１０が検出した検出結果に基づいて、補間フィールドの生成をＩＰ変換処理部１０３へ指示する。具体的には、変換指示部２２０は、リピート状態及びトリック状態のいずれでもない場合、ＩＰ変換処理部１０３へＩＰ変換処理を実行させ、新たな参照フィールド画像に応じた補間フィールド画像を生成させ、補間フィールド用画像メモリ１０４が保存する補間フィールド画像を更新させる。これに対して、リピート状態あるいはトリック状態である場合、ＩＰ変換処理部１０３にＩＰ変換させず、前回生成した補間フィールド画像を補間フィールド用画像メモリ１０４へ維持させる。 The conversion instruction unit 220 instructs the IP conversion processing unit 103 to generate an interpolation field based on the detection result detected by the detection unit 210. Specifically, the conversion instruction unit 220 causes the IP conversion processing unit 103 to perform an IP conversion process when neither the repeat state nor the trick state is generated, and to generate an interpolation field image corresponding to a new reference field image, The interpolation field image stored in the interpolation field image memory 104 is updated. On the other hand, in the repeat state or the trick state, the IP conversion processing unit 103 does not perform IP conversion, and the interpolation field image memory 104 generated last time is maintained in the interpolation field image memory 104.

表示指示部２３０は、参照フィールド画像と補間フィールド画像とを用いて画像を表示処理部１０５へ表示させる。表示指示部２３０は、検出部２１０の検出結果に基づいて、参照フィールド画像と補間フィールド画像から用いる画像を選択し、表示処理部１０５へ設定する。表示指示部２３０が画像を選択する基準は、上記各実施形態で説明したとおりである。 The display instruction unit 230 causes the display processing unit 105 to display an image using the reference field image and the interpolation field image. The display instruction unit 230 selects an image to be used from the reference field image and the interpolation field image based on the detection result of the detection unit 210 and sets the image to the display processing unit 105. The criteria for selecting an image by the display instruction unit 230 are as described in the above embodiments.

なお、図７は制御部の構成例の一例を示したものであり、これ以外の構成によって上記各実施形態を実現するものであってもよい。また、図７に示した制御部２００の機能は、ソフトウェア、あるいはソフトウェアとハードウェアとの組み合わせによって実現することもできる。 FIG. 7 shows an example of a configuration example of the control unit, and the above embodiments may be realized by a configuration other than this. The function of the control unit 200 shown in FIG. 7 can also be realized by software or a combination of software and hardware.

次に、図７に示した制御部２００の機能はプログラムによって実現する場合について説明する。プログラムは、画像処理装置内のメモリにロードされ、ＣＰＵ（Central Processing Unit）の制御のもとでプログラムの各命令が実行される。例えば、プログラムは、少なくとも次に説明する検出手順、変換指示手順、及び表示指示手順を含む。
（１）検出手順は、新たにデコーダ部１０１によって受けつけられた画像データがリピート状態であるか否かを検出する。（２）変換指示手順は、新たに受けつけられた画像データがリピート状態でない場合、ｒｅｐｅａｔ＿ｃｏｕｎｔをクリアし、ＩＰ変換処理部１０３に新たに補間フィールド画像を生成させ、補間フィールド用画像メモリ１０４へ格納させる。これに対し、リピート状態である場合、ｒｅｐｅａｔ＿ｃｏｕｎｔをカウントアップし、前回生成させた補間フィールド画像を補間フィールド用画像メモリ１０４に維持させる（ＩＰ変換を実施させない）。（３）表示指示手順は、ｒｅｐｅａｔ＿ｃｏｕｎｔの値に基づいて、参照フィールド画像と、補間フィールド画像から表示する画像を選択し、選択した画像を表示処理部１０５に出力させる。 Next, the case where the function of the control unit 200 shown in FIG. 7 is realized by a program will be described. The program is loaded into a memory in the image processing apparatus, and each instruction of the program is executed under the control of a CPU (Central Processing Unit). For example, the program includes at least a detection procedure, a conversion instruction procedure, and a display instruction procedure described below.
(1) The detection procedure detects whether the image data newly received by the decoder unit 101 is in a repeat state. (2) In the conversion instruction procedure, when newly received image data is not in a repeat state, the repeat_count is cleared, the IP conversion processing unit 103 newly generates an interpolation field image, and stores it in the interpolation field image memory 104. . On the other hand, in the repeat state, repeat_count is counted up, and the interpolation field image generated last time is maintained in the interpolation field image memory 104 (IP conversion is not performed). (3) The display instruction procedure selects an image to be displayed from the reference field image and the interpolation field image based on the value of repeat_count, and causes the display processing unit 105 to output the selected image.

例えば、実施形態１で説明した制御方法を実現するために、プログラムは、次の手順をコンピュータに実行させる命令群を有してもよい。検出手順は、新たに受け付けた画像データがトリック状態であることを検出し、変換指示手順は、リピート状態とトリック状態とのいずれでもでない場合、新たに補間フィールド画像を生成させ、その他の場合、前回生成させた補間フィールド画像を維持させる。さらに、検出手順は、リピート状態を検出したときにカウントアップするカウンタの領域を確保し、リピート状態である場合、カウンタをカウントアップし、リピート状態でない場合、カウンタをクリアする。表示指示手順は、カウンタの値に基づいて、複数の参照フィールド画像及び補間フィールド画像から出力させる画像を選択する。表示指示手順は、カウンタの値が所定の閾値以上の場合、複数の参照フィールド画像から画像を選択する。 For example, in order to realize the control method described in the first embodiment, the program may include a group of instructions that cause a computer to execute the following procedure. The detection procedure detects that the newly received image data is in a trick state, and the conversion instruction procedure generates a new interpolation field image if neither the repeat state nor the trick state, otherwise, The interpolation field image generated last time is maintained. Further, the detection procedure secures a counter area to be counted up when a repeat state is detected. When the repeat state is detected, the counter is counted up, and when not in the repeat state, the counter is cleared. In the display instruction procedure, an image to be output is selected from a plurality of reference field images and interpolation field images based on the value of the counter. A display instruction | indication procedure selects an image from several reference field images, when the value of a counter is more than a predetermined threshold value.

（その他の実施形態）
上記各実施形態では、ＩＰ変換処理を用いて説明したが、これに限られることはない。入力される画像データ（参照フィールド画像）を表示する際に、補間フィールドを用いて表示画像を生成する画像処理装置及び方法に適用することが可能である。この場合、補間フィールド画像は、複数の参照フィールド画像に基づいて生成され、表示画像は、参照フィールド画像と補間フィールド画像とを組み合わせて生成される場合であればよい。 (Other embodiments)
In each of the above embodiments, the IP conversion process has been described, but the present invention is not limited to this. The present invention can be applied to an image processing apparatus and method for generating a display image using an interpolation field when displaying input image data (reference field image). In this case, the interpolation field image may be generated based on a plurality of reference field images, and the display image may be generated by combining the reference field image and the interpolation field image.

以上説明したように、本発明に係る実施形態の一態様では、リピート発生時に同じ参照フィールド画像をＩＰ変換に入力した場合、画質劣化を防ぐため、リピート発生時にはＩＰ変換にフィールド画像を入力せず、前回のＩＰ変換結果をリピート表示する。また、単純に前回のＩＰ変換結果を表示する方法を適用すると、スライドショーなどの場合にＡＶ同期ずれが大きくなってしまう。このため、規定回数以上のリピート発生時は、ＩＰ変換結果を表示せずに、入力フィールド画像を垂直２倍拡大表示する。ただし、スロー再生やポーズ時などのトリック再生時はリピートが規定回数以上発生しても、前回のＩＰ変換結果を垂直２倍拡大表示する。上記実施形態のいずれかを適用することにより、以下に説明する機能を実現する。 As described above, in one aspect of the embodiment of the present invention, when the same reference field image is input to the IP conversion at the occurrence of repeat, the field image is not input to the IP conversion at the occurrence of repeat in order to prevent image quality degradation. The previous IP conversion result is displayed repeatedly. Further, if the method of simply displaying the previous IP conversion result is applied, the AV synchronization shift becomes large in the case of a slide show or the like. For this reason, when repeats occur more than the specified number of times, the input field image is enlarged and displayed twice vertically without displaying the IP conversion result. However, during trick playback such as slow playback or pause, even if repeats occur more than the specified number of times, the previous IP conversion result is displayed in double vertical size. By applying any one of the above-described embodiments, the functions described below are realized.

通常再生（１倍速再生）、かつ、ｎフィールド未満のリピート発生時は、ＩＰ変換処理部１０３に画像を入力せずに前回のＩＰ変換結果をリピート表示する。
通常再生（１倍速再生）、かつ、ｎフィールド以上連続でリピート発生時は、ＩＰ変換処理部１０３に画像を入力せずに、入力元のインタレース画像を垂直２倍拡大して表示する。
ポーズまたはスロー再生、かつリピート発生時は、ＩＰ変換処理部に画像を入力せずに前回のＩＰ変換結果をリピート表示する。 When normal playback (single-speed playback) and repeat of less than n fields occur, the previous IP conversion result is displayed repeatedly without inputting an image to the IP conversion processing unit 103.
When normal playback (single-speed playback) and repeated occurrences of n fields or more are repeated, the input interlaced image is enlarged twice and displayed without inputting the image to the IP conversion processing unit 103.
When pause or slow playback and repeat occurs, the previous IP conversion result is displayed repeatedly without inputting an image to the IP conversion processing unit.

これらの機能により、ＩＰ変換処理において、連続したフィールド画像が入力されない場合、具体的にはリピート発生時のように同一のフィールド画像が入力された場合における画質劣化を防ぐことが可能となる。また、同一のフィールド画像が所定の回数（閾値）以上入力された場合に対処方法を変更することができる。これにより、画像の表示状況に対応させることが可能になる。特に、図３を用いて説明したように、スライドショーなどＡＶ同期のズレを防ぐことができる。このため、画質劣化を防ぐとともに、表示状況に応じて適切な画像を表示することができる。 With these functions, it is possible to prevent image quality degradation when a continuous field image is not input in the IP conversion process, specifically when the same field image is input as in the case of occurrence of repeat. In addition, when the same field image is input a predetermined number of times (threshold) or more, the coping method can be changed. Thereby, it becomes possible to cope with the display state of the image. In particular, as described with reference to FIG. 3, it is possible to prevent a deviation in AV synchronization such as a slide show. For this reason, it is possible to prevent image quality deterioration and display an appropriate image according to the display state.

なお、本発明は上記に示す実施形態に限定されるものではない。本発明の範囲において、上記実施形態の各要素を、当業者であれば容易に考えうる内容に変更、追加、変換することが可能である。 In addition, this invention is not limited to embodiment shown above. Within the scope of the present invention, it is possible to change, add, or convert each element of the above-described embodiment to a content that can be easily considered by those skilled in the art.

１０１デコーダ部
１０２参照フィールド用画像メモリ
１０３ＩＰ変換処理部
１０４補間フィールド用画像メモリ
１０５表示処理部
１０６、２００制御部
２１０検出部
２２０変換指示部
２３０表示指示部 101 Decoder unit 102 Reference field image memory 103 IP conversion processing unit 104 Interpolated field image memory 105 Display processing unit 106, 200 Control unit 210 Detection unit 220 Conversion instruction unit 230 Display instruction unit

Claims

画像データを復号するデコーダ部と、
複数の画像データ夫々を復号した複数の参照フィールド画像を格納する参照フィールド用画像メモリと、
前記複数の参照フィールド画像を用いて補間フィールド画像を生成する補間フィールド生成部と、
前記補間フィールド画像を格納する補間フィールド用画像メモリと、
前記複数の参照フィールド画像の少なくとも一つと前記補間フィールド画像とを用いて、表示する画像を出力する表示処理部と、
リピート状態をカウントするカウンタと、
新たに受け付けた画像データが、前回と同じ画像データとなっているリピート状態を検出した場合、前記カウンタをカウントアップし、前記補間フィールド用画像メモリに格納した前記補間フィールド画像を変更しないで維持させ、リピート状態でない場合、前記カウンタをクリアし、新たに補間フィールド画像を生成させ、カウントアップまたはクリアされた後のカウンタの値に基づいて、前記表示処理部が用いる画像を前記参照フィールド画像と、前記維持させた補間フィールド画像から選択し、選択した画像を前記表示処理部に出力させる制御部と、を備える画像処理装置。 A decoder unit for decoding image data;
A reference field image memory for storing a plurality of reference field images obtained by decoding a plurality of image data,
An interpolation field generation unit that generates an interpolation field image using the plurality of reference field images;
An interpolation field image memory for storing the interpolation field image;
A display processing unit that outputs an image to be displayed using at least one of the plurality of reference field images and the interpolation field image;
A counter that counts repeat states;
When the newly received image data detects a repeat state in which the same image data as the previous time is detected, the counter is incremented and the interpolation field image stored in the interpolation field image memory is maintained without being changed. When not in the repeat state, the counter is cleared, an interpolation field image is newly generated, and based on the value of the counter after being counted up or cleared, the image used by the display processing unit is the reference field image, An image processing apparatus comprising: a control unit that selects from the maintained interpolation field image and outputs the selected image to the display processing unit.

前記制御部は、前記新たに受け付けた画像データがトリックプレー中であるトリック状態を検出した場合、前記補間フィールド用画像メモリに格納した前記補間フィールド画像を変更しないで維持させ、前記表示処理部が用いる画像を、前記参照フィールド画像と、前記維持させた補間フィールド画像から選択することを特徴とする請求項１記載の画像処理装置。 The control unit, when detecting a trick state in which the newly received image data is in trick play, maintains the interpolation field image stored in the interpolation field image memory without being changed, and the display processing unit The image processing apparatus according to claim 1, wherein an image to be used is selected from the reference field image and the maintained interpolation field image.

前記制御部は、前記カウンタの値が所定の閾値以上の場合、前記表示処理部が用いる画像を、前記複数の参照フィールド画像から画像を選択することを特徴とする請求項１または２記載の画像処理装置。 3. The image according to claim 1, wherein the control unit selects an image to be used by the display processing unit from the plurality of reference field images when the value of the counter is equal to or greater than a predetermined threshold value. Processing equipment.

前記制御部は、前記カウンタの値が所定の閾値以上の場合、前記表示処理部が用いる画像として、前記参照フィールド画像を垂直二倍に拡大させた画像を選択することを特徴とする請求項３記載の画像処理装置。 4. The control unit according to claim 3, wherein when the value of the counter is equal to or greater than a predetermined threshold value, an image obtained by enlarging the reference field image twice vertically is used as an image used by the display processing unit. The image processing apparatus described.

前記制御部は、前記カウンタの値が所定の閾値以上の場合、前記表示処理部が用いる画像として、前記複数の参照フィールド画像のうち、トップフィールド画像とボトムフィールド画像とを組み合わせた画像を選択することを特徴とする請求項３記載の画像処理装置。 When the value of the counter is equal to or greater than a predetermined threshold, the control unit selects an image combining a top field image and a bottom field image from among the plurality of reference field images as an image used by the display processing unit. The image processing apparatus according to claim 3.

前記制御部は、リピート状態を検出した場合に、前記補間フィールド生成部に前記補間フィールド画像を生成させないことを特徴とする請求項１乃至５のいずれか一項に記載の画像処理装置。 The image processing apparatus according to claim 1, wherein the control unit does not cause the interpolation field generation unit to generate the interpolation field image when a repeat state is detected.

前記補間フィールド生成部は、インタレース画像をプログレッシブ画像に変換するための補間フィールド画像を生成し、
前記制御部は、リピート状態とトリック状態との少なくとも一方を検出した場合に、前記補間フィールド生成部に前記複数の参照フィールド画像を入力させないことを特徴とする請求項６記載の画像処理装置。 The interpolation field generation unit generates an interpolation field image for converting an interlaced image into a progressive image,
The image processing apparatus according to claim 6, wherein the control unit does not input the plurality of reference field images to the interpolation field generation unit when detecting at least one of a repeat state and a trick state.

前記制御部は、前記カウンタの値が所定の閾値以上の場合、前記補間フィールド生成部に前記参照フィールド画像のうち、トップフィールド画像とボトムフィールド画像との一方を、前記補間フィールド画像として選択することを特徴とする請求項５記載の画像処理装置。 When the value of the counter is equal to or greater than a predetermined threshold, the control unit selects one of the reference field image as a top field image and a bottom field image among the reference field images as the interpolation field image. The image processing apparatus according to claim 5.

前記制御部は、
前記デコーダ部が前記新たに受け付けた画像データがリピート状態であるか否かを検出する検出部と、
検出結果に基づいて、前記補間フィールド画像の生成を前記補間フィールド生成部へ指示し、前記補間フィールド用画像メモリに保存されている補間フィールド画像を更新させる変換指示部と、
前記選択した画像を前記表示処理部によって出力させる表示指示部と、を備えることを特徴とする請求項１記載の画像処理装置。 The controller is
A detection unit for detecting whether the image data newly received by the decoder unit is in a repeat state;
Based on the detection result, a conversion instruction unit that instructs the interpolation field generation unit to generate the interpolation field image and updates the interpolation field image stored in the interpolation field image memory;
The image processing apparatus according to claim 1, further comprising: a display instruction unit that causes the display processing unit to output the selected image.

画像データを復号して参照フィールド画像を生成し、複数の参照フィールド画像を用いて補間フィールド画像を生成し、前記複数の参照フィールド画像の少なくとも一つと前記補間フィールド画像とを用いた画像を出力する画像処理装置を制御する画像処理制御方法であって、
新たに受け付けた画像データが前回と同じ画像データとなっているリピート状態であるか否かを検出し、
リピート状態でない場合、カウンタをクリアし、新たに補間フィールド画像を生成させ、
リピート状態である場合、カウンタをカウントアップし、前回生成させた補間フィールド画像を変更しないで維持させ、
カウントアップまたはクリアされた後のカウンタの値に基づいて、前記参照フィールド画像と前記補間フィールド画像から表示する画像を選択し、選択した画像を出力させる画像処理制御方法。 A reference field image is generated by decoding image data, an interpolation field image is generated using a plurality of reference field images, and an image using at least one of the plurality of reference field images and the interpolation field image is output. An image processing control method for controlling an image processing apparatus,
Detect whether the newly received image data is a repeat state that is the same image data as the previous time,
If not repeat, clear the counter, generate a new interpolation field image,
If it is in a repeat state, the counter is counted up and the interpolation field image generated last time is kept unchanged,
An image processing control method for selecting an image to be displayed from the reference field image and the interpolation field image based on a counter value after being counted up or cleared, and outputting the selected image.

画像データを復号して参照フィールド画像を生成し、複数の参照フィールド画像を用いて補間フィールド画像を生成し、前記複数の参照フィールド画像の少なくとも一つと前記補間フィールド画像とを用いた画像を出力する画像処理装置を制御する画像処理制御プログラムであって、
コンピュータに、
新たに受け付けた画像データが前回と同じ画像データとなっているリピート状態であるか否かを検出する検出手順と、
リピート状態でない場合、カウンタをクリアし、新たに補間フィールド画像を生成させ、リピート状態である場合、カウンタをカウントアップし、前回生成させた補間フィールド画像を変更しないで維持させる変換指示手順と、
カウントアップまたはクリアされた後のカウンタの値に基づいて、前記参照フィールド画像と補間フィールド画像から表示する画像を選択し、選択した画像を出力させる表示指示手順と、を実行させる画像処理制御プログラム。 A reference field image is generated by decoding image data, an interpolation field image is generated using a plurality of reference field images, and an image using at least one of the plurality of reference field images and the interpolation field image is output. An image processing control program for controlling an image processing apparatus,
On the computer,
A detection procedure for detecting whether or not the newly received image data is a repeat state that is the same image data as the previous time,
When not in the repeat state, the counter is cleared and a new interpolation field image is generated, and when in the repeat state, the counter is counted up and the previously generated interpolation field image is maintained without being changed, and
An image processing control program that executes a display instruction procedure for selecting an image to be displayed from the reference field image and the interpolation field image based on a counter value after being counted up or cleared, and outputting the selected image.

前記検出手順は、前記新たに受け付けた画像データがトリックプレー中となっているトリック状態であることを検出し、
前記変換指示手順は、リピート状態とトリック状態とのいずれでもでない場合、新たに補間フィールド画像を生成させ、その他の場合、前回生成させた補間フィールド画像を変更しないで維持させることを特徴とする請求項１１記載の画像処理制御プログラム。 The detection procedure detects that the newly received image data is in a trick state in which trick play is being performed,
The conversion instruction procedure is to generate a new interpolation field image when neither the repeat state nor the trick state is generated, and to maintain the interpolation field image generated last time without being changed otherwise. Item 12. The image processing control program according to Item 11.

前記表示指示手順は、前記カウンタの値が所定の閾値以上の場合、前記複数の参照フィールド画像から画像を選択することを特徴とする請求項１１または１２記載の画像処理プログラム。 The image processing program according to claim 11 or 12, wherein the display instruction procedure selects an image from the plurality of reference field images when the value of the counter is equal to or greater than a predetermined threshold value.