JP2001292387A - Image processing, apparatus, its method and recording medium - Google Patents

Abstract

PROBLEM TO BE SOLVED: To suppress such a state that an image with converted aspect ratio becomes unnatural. SOLUTION: A motion detecting part 12 controls a switch 24 by detecting a motion of an image for interpolation, stores an interpolation signal in a memory 25 when the image for interpolation is a still image and stores no interpolation signal 25 when the image is a moving image. Multiplication means 27 and 26 multiply the interpolation signal by a coefficient (1-α) and a coefficient αto be determined by a motion detection result. An image synthesizing part 28 synthesizes the inputted signal. A switch 30 switches an output signal of the image synthesizing part 28 and output of a fixed pattern generating part 29 according to a control signal of a controller 13. A data operation part 31 adjusts multilevel characteristics, etc., of the interpolation signal and outputs the signal to an image synthesizing part 21.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【０００１】[0001]

【発明の属する技術分野】本発明は、画像処理装置およ
び方法、ならびに記録媒体に関し、特に、NTSC（Nation
al Television Standards Committee）、PAL（Phase Al
ternating Line）、もしくはSECAM（Sequential Color
And Memory）など、アスペクト比４：３の画像素材を受
信し、アスペクト比が異なるワイド画像素材（例えば、
アスペクト比１６：９のハイビジョン、もしくは４８０
ｉの画像素材など）へ変換することができる画像処理装
置、および、受信側の画像処理装置が簡単な回路構成で
アスペクト比を変換することができるような画像データ
を生成することができる画像処理装置および方法、なら
びに記録媒体に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image processing apparatus and method, and a recording medium, and more particularly, to NTSC (Nation).
al Television Standards Committee), PAL (Phase Al
ternating Line) or SECAM (Sequential Color)
And Memory) and other image materials with an aspect ratio of 4: 3, and receive wide image materials with different aspect ratios (for example,
16: 9 aspect ratio HDTV or 480
i), and image processing capable of generating image data that allows the receiving-side image processing device to convert the aspect ratio with a simple circuit configuration. The present invention relates to an apparatus and a method, and a recording medium.

【０００２】[0002]

【従来の技術】従来の、NTSC、PAL、あるいはSECAMなど
の放送方式では、いずれも、画面のアスペクト比が４：
３とされているが、ハイビジョン放送においては、画面
のアスペクト比が１６：９となされており、従来の放送
方式と比較して、横長のワイド画面となっている。こ
の、テレビ画面のワイド化は、今まで以上に迫力ある画
面を再現し、視聴者に、臨場感を感じさせる上で、必要
不可欠なものである。また、ハイビジョン放送の普及に
伴い、画面サイズが横長のワイド画面（例えば、アスペ
クト比１６：９）のテレビジョン受像機も普及してきて
いる。2. Description of the Related Art In conventional broadcasting systems such as NTSC, PAL, and SECAM, the screen aspect ratio is 4: 4.
However, in the high-definition broadcasting, the aspect ratio of the screen is 16: 9, which is a wide screen that is wider than the conventional broadcasting system. The widening of the television screen is indispensable for reproducing a more powerful screen than ever before and for giving the viewer a sense of realism. Also, with the spread of high-definition broadcasting, television receivers having a horizontally wide screen (for example, an aspect ratio of 16: 9) have become widespread.

【０００３】視聴者が、ワイド画面のテレビジョン受像
機を用いて、アスペクト比４：３の放送方式による放送
画像を受信した場合、アスペクト比４：３の画像をその
ままアスペクト比１６：９の表示画面に表示したので
は、水平方向の両端部（両袖）に、無画像部分が発生し
てしまう。When a viewer receives a broadcast image of a 4: 3 aspect ratio broadcast system using a wide-screen television receiver, an image having an aspect ratio of 4: 3 is directly displayed at an aspect ratio of 16: 9. If displayed on the screen, non-image portions will be generated at both ends (both sleeves) in the horizontal direction.

【０００４】この無画像部分に対しては、例えば、黒、
青、緑などで彩色した、無模様の画像を挿入するように
なされていたが、この画像の不自然さは否めない。そこ
で、両袖部分が不自然な表示画像にならないように、例
えば、アスペクト比４：３の画像信号の両端の画像信号
を用いて、両袖部分の画像を補間する技術がある。For the non-image portion, for example, black,
Although a non-patterned image colored with blue, green, or the like is inserted, the unnaturalness of this image cannot be denied. Therefore, there is a technique of interpolating the image of both sleeves using the image signals at both ends of the image signal having an aspect ratio of 4: 3, for example, so that the both sleeves do not become an unnatural display image.

【０００５】図１に、従来の放送信号を受信する受信装
置における、アスペクト比変換のための、補間信号の生
成および付加を行う部分の構成を示す。FIG. 1 shows a configuration of a portion for generating and adding an interpolation signal for aspect ratio conversion in a conventional receiver for receiving a broadcast signal.

【０００６】例えば、図示しないアンテナで受信され、
図示しないデコーダでデコードされた、NTSC、PAL、あ
るいはSECAMなどの方式によるアスペクト比４：３の画
像素材Ｐ1に対応する画像信号は、画像合成部１に入力
されるとともに、スイッチ２に入力される。For example, the signal is received by an antenna (not shown),
An image signal corresponding to an image material P1 having an aspect ratio of 4: 3 according to a system such as NTSC, PAL, or SECAM, which is decoded by a decoder (not shown), is input to the image synthesizing unit 1 and to the switch 2. .

【０００７】スイッチ２の端子が、画像合成部１の入力
側（すなわち、図中端子ｘ側）に切り替えられている場
合、画像取り込み部３には、画像合成部１の入力信号と
同一の画像信号が入力される。画像取り込み部３は、入
力された画像信号の両端近傍の画素を抽出して、補間信
号生成部４に出力する。すなわち、図２（Ａ）に示され
る、アスペクト比４：３の画像信号の両端から、所定の
画素数分の幅の画像信号（図中ａおよびｃで示される部
分）を切出し、補間信号生成部４に出力する。When the terminal of the switch 2 is switched to the input side of the image synthesizing unit 1 (that is, the terminal x side in the figure), the image capturing unit 3 outputs the same image as the input signal of the image synthesizing unit 1. A signal is input. The image capturing section 3 extracts pixels near both ends of the input image signal and outputs the extracted pixels to the interpolation signal generating section 4. That is, image signals (portions indicated by a and c in the figure) having a width corresponding to a predetermined number of pixels are cut out from both ends of the image signal having an aspect ratio of 4: 3 shown in FIG. Output to section 4.

【０００８】補間信号生成部４は、アスペクト比４：３
の画像素材Ｐ1から、アスペクト比１６：９の画像素材
Ｐ2に変換する場合に発生する、水平方向の両端部の無
画像部分に対する補間信号を、入力された両端の画像信
号ａおよびｃを用いて生成し、乗算部５に出力する。補
間信号生成部４が生成する補間信号は、アスペクト比１
６：９の画像信号の両端部分の信号、すなわち、図２
（Ｂ）において、ａ´およびｃ´で示される部分の補間
信号である。補間信号ａ´は、画像信号ａを用いて、補
間信号ｃ´は、画像信号ｃを用いてそれぞれ生成され
る。The interpolation signal generator 4 has an aspect ratio of 4: 3.
The interpolation signal for the non-image portion at both ends in the horizontal direction, which is generated when the image material P1 of the image data is converted into the image material P2 of the aspect ratio of 16: 9, using the input image signals a and c at both ends. It is generated and output to the multiplication unit 5. The interpolation signal generated by the interpolation signal generation unit 4 has an aspect ratio of 1
The signal at both ends of the 6: 9 image signal, that is, FIG.
In (B), it is an interpolation signal of a portion indicated by a 'and c'. The interpolation signal a 'is generated using the image signal a, and the interpolation signal c' is generated using the image signal c.

【０００９】乗算部５は、図示しない制御部などから入
力されるゲインコントロール信号に対応する係数を、入
力された信号に乗算し、画像合成部１に出力する。The multiplication unit 5 multiplies the input signal by a coefficient corresponding to a gain control signal input from a control unit (not shown) or the like, and outputs the result to the image synthesis unit 1.

【００１０】画像合成部１は、入力されたアスペクト比
４：３の画像素材Ｐ1に対応する画像信号と、乗算部５
から入力された補間信号ａ´およびｃ´を合成し、図２
（Ｂ）に示されるような、アスペクト比１６：９のワイ
ド画像素材Ｐ2に対応する画像信号を生成し、出力す
る。The image synthesizing unit 1 multiplies the input image signal corresponding to the image material P 1 having the aspect ratio of 4: 3 by the multiplying unit 5.
Are synthesized from the interpolation signals a 'and c' input from
An image signal corresponding to a wide image material P2 having an aspect ratio of 16: 9 as shown in FIG.

【００１１】また、スイッチ２の端子が、画像合成部１
の出力側（すなわち、図中端子ｙ側）に切り替えられて
いる場合、画像取り込み部３には、画像合成部１の出力
信号と同一の画像信号が入力される。画像取り込み部３
は、入力された、アスペクト比１６：９の画像信号か
ら、アスペクト比４：３の画像信号に対応する部分の両
端近傍の画素（図２（Ｂ）のａおよびｃで示される部
分）を抽出して、補間信号生成部４に出力する。そし
て、スイッチ２が端子ｘ側に切り替えられていた場合と
同様の処理がなされ、両袖が補間されたワイド画像素材
Ｐ2に対応する画像信号が生成され、出力される。The terminal of the switch 2 is connected to the image synthesizing section 1.
(That is, the terminal y side in the figure), the same image signal as the output signal of the image synthesizing unit 1 is input to the image capturing unit 3. Image capture unit 3
Extracts pixels (portions indicated by a and c in FIG. 2B) near both ends of a portion corresponding to an image signal having an aspect ratio of 4: 3 from an input image signal having an aspect ratio of 16: 9. Then, the signal is output to the interpolation signal generator 4. Then, the same processing as when the switch 2 is switched to the terminal x side is performed, and an image signal corresponding to the wide image material P2 with both sleeves interpolated is generated and output.

【００１２】[0012]

【発明が解決しようとする課題】しかしながら、図１を
用いて説明した受信装置では、入力された画像データの
両端部分（すなわち、補間信号を生成する基となる、図
２（Ａ）もしくは図２（Ｂ）において、ａおよびｃで示
されている部分）が、入力されるフレームごとに変化し
ている、すなわち動画像である場合、その部分の画像信
号を用いて生成される補間信号は、補間前の画像に対し
て不自然なものとなってしまう。However, in the receiving apparatus described with reference to FIG. 1, both end portions of the input image data (that is, FIG. 2A or FIG. In (B), the portions indicated by a and c) change for each input frame, that is, when the image is a moving image, the interpolation signal generated using the image signal of the portion is: The image before interpolation is unnatural.

【００１３】本発明はこのような状況に鑑みてなされた
ものであり、入力された画像信号の動き検出を行い、そ
の検出結果に基づいて、補間信号を生成することによ
り、不自然な画像になるのを抑制しつつ、アスペクト比
変換画像を生成することができるようにしたり、従来用
いられている他の目的のための動き検出機能を、補間信
号の生成に用いることができるようにしたり、あるい
は、送信される画像信号に、補間用の静止画像を予め挿
入することにより、受信装置が、簡単な構成で、不自然
な画像になるのを抑制しつつ、アスペクト比変換画像を
生成することができるようにするものである。The present invention has been made in view of such a situation, and performs motion detection of an input image signal, and generates an interpolation signal based on the detection result, thereby producing an unnatural image. While being able to generate an aspect ratio converted image while suppressing the occurrence of, or a motion detection function for other purposes conventionally used, such that it can be used to generate an interpolation signal, Alternatively, the receiving apparatus can generate an aspect ratio converted image by inserting a still image for interpolation in a transmitted image signal in advance with a simple configuration while suppressing an unnatural image. Is to be able to do.

【００１４】[0014]

【課題を解決するための手段】本発明の第１の画像処理
装置は、画像信号の所定の部分を用いて、補間用信号を
生成する第１の信号生成手段と、画像信号の所定の部分
の動きを検出する動き検出手段と、動き検出手段による
検出結果に対応して、第１の信号生成手段により生成さ
れた補間用信号を用いて、画像信号と合成するための合
成用信号を生成する第２の信号生成手段と、第２の信号
生成手段により生成された合成用信号と、画像信号とを
合成する合成手段とを備えることを特徴とする。According to a first aspect of the present invention, there is provided a first image processing apparatus comprising: first signal generating means for generating an interpolation signal using a predetermined portion of an image signal; and a predetermined portion of the image signal. Generating a synthesizing signal for synthesizing with the image signal using the interpolation signal generated by the first signal generating means in accordance with the detection result by the motion detecting means. And a synthesizing unit that synthesizes the image signal with the synthesizing signal generated by the second signal generating unit.

【００１５】前記動き検出手段により、前記画像信号の
所定の部分に動きがないと判断された場合、前記第１の
信号生成手段により生成された前記補間用信号を保存す
る保存手段を更に備えさせることができ、前記第２の信
号生成手段には、前記第１の信号生成手段により生成さ
れた前記補間用信号と、前記保存手段により保存された
前記補間用信号の少なくとも一方を用いて、前記合成用
信号を生成させることができる。When the motion detecting means determines that there is no motion in a predetermined portion of the image signal, the image processing apparatus further comprises storage means for storing the interpolation signal generated by the first signal generating means. The second signal generating means may include, using at least one of the interpolation signal generated by the first signal generating means and the interpolation signal stored by the storage means, A signal for synthesis can be generated.

【００１６】前記第２の信号生成手段には、動き検出手
段による検出結果に基づいて、第１の信号生成手段によ
り生成された補間用信号と、保存手段により保存された
補間用信号の割合を決定して、合成用信号を生成させる
ようにすることができる。The second signal generation means stores the ratio of the interpolation signal generated by the first signal generation means and the interpolation signal stored by the storage means based on the detection result by the motion detection means. After the determination, a signal for synthesis can be generated.

【００１７】また、画像信号の動きに対応して、インタ
レース画像信号を所定の変換方法でプログレッシブ画像
信号に変換する画像変換手段を更に備えさせることがで
き、前記画像変換手段には、動き検出手段による検出結
果に基づいて、変換方法を選択させることができる。[0017] Further, it is possible to further comprise image conversion means for converting the interlaced image signal into a progressive image signal by a predetermined conversion method in accordance with the movement of the image signal. The conversion method can be selected based on the detection result by the means.

【００１８】本発明の画像処理方法は、画像信号の所定
の部分を用いて、補間用信号を生成する第１の信号生成
ステップと、画像信号の所定の部分の動きを検出する動
き検出ステップと、動き検出ステップの処理による検出
結果に対応して、第１の信号生成ステップの処理により
生成された補間用信号を用いて、画像信号と合成するた
めの合成用信号を生成する第２の信号生成ステップと、
第２の信号生成ステップの処理により生成された合成用
信号と、画像信号とを合成する合成ステップとを含むこ
とを特徴とする。According to the image processing method of the present invention, a first signal generating step of generating a signal for interpolation using a predetermined portion of an image signal, and a motion detecting step of detecting a motion of a predetermined portion of the image signal. A second signal for generating a synthesizing signal for synthesizing with the image signal using the interpolation signal generated by the processing of the first signal generating step in accordance with the detection result by the processing of the motion detecting step Generating step;
It is characterized by including a synthesizing step of synthesizing the image signal with the synthesizing signal generated by the processing of the second signal generating step.

【００１９】本発明の記録媒体に記録に記録されている
プログラムは、画像信号の所定の部分を用いて、補間用
信号を生成する第１の信号生成ステップと、画像信号の
所定の部分の動きを検出する動き検出ステップと、動き
検出ステップの処理による検出結果に対応して、第１の
信号生成ステップの処理により生成された補間用信号を
用いて、画像信号と合成するための合成用信号を生成す
る第２の信号生成ステップと、第２の信号生成ステップ
の処理により生成された合成用信号と、画像信号とを合
成する合成ステップとを含むことを特徴とする。The program recorded on the recording medium according to the present invention includes a first signal generation step of generating an interpolation signal using a predetermined portion of the image signal, and a motion of the predetermined portion of the image signal. And a synthesizing signal for synthesizing with the image signal using the interpolation signal generated by the processing of the first signal generating step in accordance with the detection result of the processing of the motion detecting step. , And a synthesizing step of synthesizing the image signal with the synthesizing signal generated by the processing of the second signal generating step.

【００２０】本発明の第２の画像処理装置は、所定の大
きさの静止画像信号を生成する画像生成手段と、所定の
アスペクト比の第１の画像信号の水平方向の両端から、
所定の大きさを削除した第２の画像信号を抽出する抽出
手段と、第２の画像信号の水平方向の両端に、画像生成
手段により生成された静止画像信号を付加して第３の画
像信号を生成する付加手段と、付加手段により生成され
た第３の画像信号を、放送用信号として出力する出力手
段とを特徴とする。A second image processing apparatus according to the present invention comprises: an image generating means for generating a still image signal of a predetermined size;
Extracting means for extracting a second image signal from which a predetermined size has been deleted, and adding a still image signal generated by the image generating means to both ends of the second image signal in the horizontal direction to obtain a third image signal And an output unit for outputting the third image signal generated by the adding unit as a broadcast signal.

【００２１】本発明の第１の画像処理装置、画像処理方
法、および記録媒体に記録されているプログラムにおい
ては、画像信号の所定の部分を用いて、補間用信号が生
成され、画像信号の所定の部分の動きが検出され、生成
された補間用信号を用いて、画像信号と合成するための
合成用信号が生成され、生成された合成用信号と、画像
信号とが合成される。In the first image processing apparatus, the image processing method, and the program recorded on the recording medium of the present invention, an interpolation signal is generated by using a predetermined portion of the image signal, and a predetermined signal of the image signal is generated. Is detected, a synthesizing signal for synthesizing with the image signal is generated using the generated interpolation signal, and the generated synthesizing signal and the image signal are synthesized.

【００２２】本発明の第２の画像処理装置においては、
所定の大きさの静止画像信号が生成され、所定のアスペ
クト比の第１の画像信号の水平方向の両端から、所定の
大きさを削除した第２の画像信号が抽出され、第２の画
像信号の水平方向の両端に、生成された静止画像信号が
付加されて、第３の画像信号が生成され、生成された第
３の画像信号が放送用信号として出力される。In the second image processing apparatus of the present invention,
A still image signal having a predetermined size is generated, and a second image signal having a predetermined size removed from both ends in the horizontal direction of the first image signal having a predetermined aspect ratio is extracted. The generated still image signal is added to both ends in the horizontal direction, a third image signal is generated, and the generated third image signal is output as a broadcast signal.

【００２３】[0023]

【発明の実施の形態】以下、図を参照して、本発明の実
施の形態について説明する。Embodiments of the present invention will be described below with reference to the drawings.

【００２４】図３は、本発明を適応した受信装置の、ア
スペクト比変換のために補間信号の生成および付加を行
う部分の構成を示すブロック図である。FIG. 3 is a block diagram showing a configuration of a portion for generating and adding an interpolation signal for aspect ratio conversion in a receiving apparatus to which the present invention is applied.

【００２５】両袖補間部１１は、図示しないアンテナで
受信され、図示しないデコーダでデコードされた、例え
ば、NTSC、PAL、あるいはSECAMなどの方式によるアスペ
クト比４：３の画像素材Ｐ1の入力を受け、動き検出部
１２、およびコントローラ１３から入力される、ゲイン
コントロール信号、あるいは、制御信号に従って、アス
ペクト比１６：９のワイド画像素材Ｐ2を生成し、出力
する。ここでは、入力される画像素材Ｐ1は、NTSC方式
の信号により生成されているものとする。The two-sleeve interpolation section 11 receives an input of an image material P1 having an aspect ratio of 4: 3 by a system such as NTSC, PAL, or SECAM, which is received by an antenna (not shown) and decoded by a decoder (not shown). In accordance with a gain control signal or a control signal input from the motion detecting unit 12 and the controller 13, a wide image material P2 having an aspect ratio of 16: 9 is generated and output. Here, it is assumed that the input image material P1 is generated by an NTSC signal.

【００２６】図４に、アスペクト比４：３の画像素材Ｐ
1とアスペクト比１６：９のワイド画像素材Ｐ2との関係
を示す。アスペクト比４：３の画像素材Ｐ1からアスペ
クト比１６：９のワイド画像素材Ｐ2を生成する場合、
図中ＨLで示される左袖補間部分と、図中ＨRで示される
右袖補間部分の画像信号を補間する必要がある。図中Ｈ
Lで示されるワイド画像素材Ｐ2の左袖補間部分の補間に
は、図中ΔＳLで示される画像素材Ｐ1の部分の画像信号
が、また、図中ＨRで示されるワイド画像素材Ｐ2の右袖
補間部分の補間には、図中ΔＳRで示される画像素材Ｐ1
の部分の画像信号が、それぞれ用いられる。FIG. 4 shows an image material P having an aspect ratio of 4: 3.
1 shows the relationship between 1 and a wide image material P2 having an aspect ratio of 16: 9. When generating a wide image material P2 having an aspect ratio of 16: 9 from an image material P1 having an aspect ratio of 4: 3,
It is necessary to interpolate the image signals of the left sleeve interpolation part indicated by HL in the figure and the right sleeve interpolation part indicated by HR in the figure. H in the figure
In the interpolation of the left sleeve interpolation part of the wide image material P2 indicated by L, the image signal of the image material P1 part indicated by ΔSL in the figure is used, and the right sleeve interpolation of the wide image material P2 indicated by HR in the figure is performed. The image material P1 indicated by ΔSR in the figure is used for the interpolation of the part.
Are used, respectively.

【００２７】動き検出部１２は、両袖補間部１１に入力
された画像信号と同一の画像信号の入力を受け、図４を
用いて説明した、左袖補間部分ＨLの補間信号を生成す
る部分ΔＳL、および、右袖補間部分ＨRの補間信号を生
成する部分ΔＳRの画像信号を抽出し、その部分の画像
の動きを検出する。動き検出においては、例えば、最初
に入力されたフレームの抽出画像信号と、次のフレーム
の抽出画像信号を比較して、その差分が所定の閾値より
大きいか否かを判断して、対応する部分の画像信号の動
きを検出するようにしても良いし、例えば、マクロブロ
ック単位で動きベクトルを解析するなどの手法を用いる
ようにしても良い。The motion detecting section 12 receives the same image signal as the image signal inputted to the both-sleeve interpolating section 11 and generates the interpolation signal of the left-sleeve interpolation section HL described with reference to FIG. ΔSL and an image signal of a part ΔSR for generating an interpolation signal of the right sleeve interpolation part HR are extracted, and the motion of the image of the part is detected. In the motion detection, for example, the extracted image signal of the first input frame is compared with the extracted image signal of the next frame, and it is determined whether or not the difference is larger than a predetermined threshold. May be detected, or, for example, a method of analyzing a motion vector in macroblock units may be used.

【００２８】動き検出部１２は、抽出画像信号が動きの
ない静止画像（動きがあったとしても、所定の閾値以下
の動きの画像）である場合、両袖補間部１１の、後述す
るスイッチ２４をオンにするための制御信号を生成し、
スイッチ２４に出力する。また、動き検出部１２は、乗
算部２６に係数α（０≦α≦１）で示されるゲインコン
トロール信号（係数）を出力し、乗算部２７に１−αで
示されるゲインコントロール信号（係数）を出力する。
このαの値は、動き検出部１２が検出した抽出画像の動
きの大きさによって決まり、抽出画像の動きが大きい場
合、αの値は１に近くなり、抽出画像の動きが小さい場
合、αの値は０に近くなる。また、抽出画像が静止画像
である場合、αの値は、α＝０となる。When the extracted image signal is a still image having no motion (an image having a motion equal to or less than a predetermined threshold value even if there is motion), the motion detecting unit 12 performs a switch 24 (described later) of the both sleeve interpolation unit 11. Generate a control signal to turn on the
Output to the switch 24. Further, the motion detection unit 12 outputs a gain control signal (coefficient) represented by a coefficient α (0 ≦ α ≦ 1) to the multiplication unit 26, and a gain control signal (coefficient) represented by 1−α to the multiplication unit 27. Is output.
The value of α is determined by the magnitude of the motion of the extracted image detected by the motion detection unit 12. When the motion of the extracted image is large, the value of α is close to 1, and when the motion of the extracted image is small, the value of α is The value approaches zero. When the extracted image is a still image, the value of α is α = 0.

【００２９】コントローラ１３は、両袖補間部１１の、
後述するスイッチ３０の端子を、後述する固定パターン
発生部２９側の端子Ｕに切り替えるか、または、後述す
る画像合成部２８側の端子Ｌに切り替えるかを制御する
ための制御信号を生成し、スイッチ３０に供給するとと
もに、後述するデータ演算部３１が実行する補間信号に
対するデータ演算処理を制御するための制御信号を生成
し、データ演算部３１に出力する。The controller 13 controls the both sleeve interpolation unit 11
A control signal for controlling whether the terminal of the switch 30 described later is switched to the terminal U of the fixed pattern generation unit 29 described later or the terminal L of the image combining unit 28 described later is generated. The control signal is supplied to the data calculation unit 31 and a control signal for controlling a data calculation process on an interpolation signal executed by a data calculation unit 31 described later is generated and output to the data calculation unit 31.

【００３０】また、ドライブ１４は、動き検出部１２に
接続され、必要に応じて磁気ディスク１５、光ディスク
１６、光磁気ディスク１７、および半導体メモリ１８が
装着され、データの授受を行う。Further, the drive 14 is connected to the motion detecting unit 12, and is mounted with a magnetic disk 15, an optical disk 16, a magneto-optical disk 17, and a semiconductor memory 18 as necessary, and exchanges data.

【００３１】次に、両袖補間部１１の詳細な構成につい
て説明する。Next, the detailed configuration of the two-sleeve interpolation unit 11 will be described.

【００３２】画像合成部２１は、NTSC信号よりなる画像
素材Ｐ1に対応する画像信号の入力を受け、その入力信
号とデータ演算部３１から出力される補間信号を合成し
て、アスペクト比１６：９のワイド画像素材Ｐ2に対応
する画像信号を生成し、出力する（データ演算部３１か
ら出力される補間信号についての詳細は、後述する）。
画像取り込み部２２は、図１を用いて説明した画像取り
込み部３と同様の処理により、画像合成部２１が出力し
た画像信号から、アスペクト比４：３の画像信号に対応
する部分の両端近傍の画素（図４を用いて説明した部分
ΔＳLおよび部分ΔＳR）を抽出して、補間信号生成部２
３に出力する。The image synthesizing section 21 receives an input of an image signal corresponding to an image material P1 composed of an NTSC signal, synthesizes the input signal and an interpolation signal output from the data operation section 31, and has an aspect ratio of 16: 9. The image signal corresponding to the wide image material P2 is generated and output (the details of the interpolation signal output from the data calculation unit 31 will be described later).
The image capturing unit 22 performs processing similar to that of the image capturing unit 3 described with reference to FIG. 1 to convert the image signal output by the image combining unit 21 into the vicinity of both ends of a portion corresponding to an image signal having an aspect ratio of 4: 3. Pixels (parts .DELTA.SL and .DELTA.SR described with reference to FIG. 4) are extracted, and the
Output to 3.

【００３３】補間信号生成部２３は、図４を用いて説明
した左袖補間部分ＨLおよび右袖補間部分ＨRに対する補
間信号を、入力された部分ΔＳLおよび部分ΔＳRの画素
を用いて生成する。すなわち、補間信号生成部２３は、
左袖補間部分ＨLおよび右袖補間部分ＨRが全て補間でき
るように、図５に示される部分ΔＳL´および部分ΔＳR
´を、繰り返し発生させる。The interpolation signal generation unit 23 generates an interpolation signal for the left sleeve interpolation part HL and the right sleeve interpolation part HR described with reference to FIG. 4 by using the input pixels of the part ΔSL and the part ΔSR. That is, the interpolation signal generation unit 23
The parts .DELTA.SL 'and .DELTA.SR shown in FIG. 5 so that the left sleeve interpolation part HL and the right sleeve interpolation part HR can all be interpolated.
'Are repeatedly generated.

【００３４】例えば、図６において、図５を用いて説明
した部分ΔＳLが、Ｓ0,1，Ｓ0,2，Ｓ0,3・・・Ｓ0,mで
示される、１画素分の幅の画像信号である場合、左袖補
間部分ＨLに含まれる各画素は、以下の式（１）で表わ
される。 Ｓ0,1＝Ｓn,1＝Ｓn-1,1＝・・・＝Ｓ2,1＝Ｓ1,1 Ｓ0,2＝Ｓn,2＝Ｓn-1,2＝・・・＝Ｓ2,2＝Ｓ1,2 Ｓ0,3＝Ｓn,3＝Ｓn-1,3＝・・・＝Ｓ2,3＝Ｓ1,3 ・・・ Ｓ0,m-1＝Ｓn,m-1＝Ｓn-1,m-1＝・・・＝Ｓ2,m-1＝Ｓ1,m-1 Ｓ0,m＝Ｓn,m＝Ｓn-1,m＝・・・＝Ｓ2,m＝Ｓ1,m ・・・（１）For example, in FIG. 6, the portion ΔSL described with reference to FIG. 5 is an image signal having a width of one pixel, represented by S0,1, S0,2, S0,3... S0, m. In some cases, each pixel included in the left sleeve interpolation part HL is represented by the following equation (1). S0,1 = Sn, 1 = Sn-1,1 = ... = S2,1 = S1,1 S0,2 = Sn, 2 = Sn-1,2 = ... = S2,2 = S1,2 S0,3 = Sn, 3 = Sn-1,3 =... = S2,3 = S1,3... S0, m-1 = Sn, m-1 = Sn-1, m-1 =. = S2, m-1 = S1, m-1 S0, m = Sn, m = Sn-1, m = ... = S2, m = S1, m ... (1)

【００３５】すなわち、部分ΔＳL´は、Ｓ1,1，Ｓ1,
2，・・・，Ｓ1,mの画素列、Ｓ2,1，Ｓ2,2，・・・，Ｓ
2,mの画素列、・・・、Ｓn,1，Ｓn,2，・・・，Ｓn,mの
画素列で構成される。That is, the portion ΔSL ′ is represented by S1,1, S1,
2,..., S1, m pixel rows, S2, 1, S2, 2,.
, Sn, 1, Sn, 2,..., Sn, m pixel columns.

【００３６】また、図６において、図５を用いて説明し
た部分ΔＳLが、Ｓ0,1，Ｓ-1,1，Ｓ0,2，Ｓ-1,2・・・
Ｓ0,m，Ｓ-1,mで示される、２画素分の幅の画像信号で
ある場合、左袖補間部分ＨLに含まれる各画素は、以下
の式（２）で表わされる。 Ｓ0,1＝Ｓn,1＝Ｓn-2,1＝・・・＝Ｓ4,1＝Ｓ2,1 Ｓ-1,1＝Ｓn-1,1＝Ｓn-3,1＝・・・＝Ｓ3,1＝Ｓ1,1 Ｓ0,2＝Ｓn,2＝Ｓn-2,2＝・・・＝Ｓ4,2＝Ｓ2,2 Ｓ-1,2＝Ｓn-1,2＝Ｓn-3,2＝・・・＝Ｓ3、2＝Ｓ1,2 ・・・ Ｓ0,m＝Ｓn,m＝Ｓn-2,m＝・・・＝Ｓ4,m＝Ｓ2,m Ｓ-1,m＝Ｓn-1,m＝Ｓn-3,m＝・・・＝Ｓ3,m＝Ｓ1,m ・・・（２）In FIG. 6, the part ΔSL described with reference to FIG. 5 is represented by S0,1, S-1,1, S0,2, S-1,2.
In the case of an image signal having a width of two pixels represented by S0, m, S-1, m, each pixel included in the left sleeve interpolation part HL is represented by the following equation (2). S0,1 = Sn, 1 = Sn-2,1 = ... = S4,1 = S2,1 S-1,1 = Sn-1,1 = Sn-3,1 = ... = S3,1 = S1,1 S0,2 = Sn, 2 = Sn-2,2 = ... = S4,2 = S2,2 S-1,2 = Sn-1,2 = Sn-3,2 = ... = S3,2 = S1,2 S0, m = Sn, m = Sn-2, m = ... = S4, m = S2, m S-1, m = Sn-1, m = Sn- 3, m = ... = S3, m = S1, m (2)

【００３７】すなわち、このとき、部分ΔＳL´は、Ｓ
1,1，Ｓ2,1，Ｓ1,2，Ｓ2,2，・・・，Ｓ1,m，Ｓ2,mの画
素列などで構成される。That is, at this time, the portion ΔSL ′ is
1, 1, S2, 1, S1, 2, S2, 2,..., S1, m, S2, m, and the like.

【００３８】更に、図５を用いて説明した部分ΔＳL
が、例えば、３画素分の幅あるいはそれ以上の幅を有す
る画像信号である場合においても、式（１）および式
（２）と同様に、左袖補間部分ＨLおよび右袖補間部分
ＨRが全て補間できるように、部分ΔＳLおよび部分ΔＳ
Rが、繰り返して発生される。Further, the portion ΔSL described with reference to FIG.
Is, for example, an image signal having a width of three pixels or more, the left sleeve interpolation part HL and the right sleeve interpolation part HR are all similar to the equations (1) and (2). The parts ΔSL and ΔS
R is generated repeatedly.

【００３９】以上のようにして生成された、左袖補間部
分ＨLおよび右袖補間部分ＨRに対する補間信号が、補正
信号生成部２３から、スイッチ２４および乗算部２７に
出力される。補間信号生成部２３が出力する補間信号
は、アスペクト比１６：９の画像信号の両端部分の信
号、すなわち、図５における左袖補間部分ＨLおよび右
袖補間部分ＨRの補間信号であり、その中央の部分（す
なわち、両袖補間部１１に入力されたNTSC信号に対応す
るアスペクト比４：３の部分）は含まれていない。The interpolation signals for the left sleeve interpolation part HL and the right sleeve interpolation part HR generated as described above are output from the correction signal generation unit 23 to the switch 24 and the multiplication unit 27. The interpolation signal output by the interpolation signal generation unit 23 is a signal at both ends of an image signal having an aspect ratio of 16: 9, that is, an interpolation signal of the left sleeve interpolation part HL and the right sleeve interpolation part HR in FIG. (That is, a portion having an aspect ratio of 4: 3 corresponding to the NTSC signal input to the two-sleeve interpolation unit 11) is not included.

【００４０】動き検出部１２が、抽出画像信号が動きの
ない静止画像であることを検出した場合、動き検出部１
２は、上述したように、スイッチ２４をオンにするため
の制御信号を生成し、スイッチ２４に出力するので、補
間信号生成部２３から出力された補間信号は、メモリ２
５に入力され、保存される。メモリ２５は、新たに入力
された補間信号を保存し、その前に入力された補間信号
を消去する（古い補間信号の上に新しい補間信号を上書
きする）。また、動き検出部１２が、抽出画像信号が動
きのある画像であることを検出した場合、スイッチ２４
はオフになるため、補間信号生成部２３から出力された
補間信号は、メモリ２５に入力されない。When the motion detecting unit 12 detects that the extracted image signal is a still image having no motion, the motion detecting unit 1
2 generates a control signal for turning on the switch 24 and outputs the control signal to the switch 24, as described above, so that the interpolation signal output from the interpolation signal generation unit 23 is stored in the memory 2
5 is entered and saved. The memory 25 stores the newly input interpolation signal and deletes the previously input interpolation signal (overwrites the old interpolation signal with the new interpolation signal). When the motion detecting unit 12 detects that the extracted image signal is a moving image, the switch 24
Is turned off, the interpolation signal output from the interpolation signal generation unit 23 is not input to the memory 25.

【００４１】乗算部２７は、補間信号生成部２３から入
力される補間信号に、動き検出部１２から入力されるゲ
インコントロール信号としての係数１−α（０≦α≦
１）を乗算し、画像合成部２８に出力する。乗算部２６
は、メモリ２５に保存されている補間信号を読み出し、
動き検出部１２から入力されるゲインコントロール信号
としての係数αを乗算し、画像合成部２８に出力する。
上述したように、この係数αの値は、動き検出部１２に
より検出された動きの大きさによって決まる値である
（抽出画像の動きが大きい場合、係数αは１に近くな
り、抽出画像の動きが小さい場合、係数αは０に近くな
る）。The multiplication unit 27 adds a coefficient 1−α (0 ≦ α ≦ 0) as a gain control signal input from the motion detection unit 12 to the interpolation signal input from the interpolation signal generation unit 23.
1), and outputs the result to the image synthesis unit 28. Multiplication unit 26
Reads the interpolation signal stored in the memory 25,
The signal is multiplied by a coefficient α as a gain control signal input from the motion detection unit 12 and output to the image synthesis unit 28.
As described above, the value of the coefficient α is a value determined by the magnitude of the motion detected by the motion detection unit 12 (when the motion of the extracted image is large, the coefficient α approaches 1 and the motion of the extracted image Is small, the coefficient α approaches 0).

【００４２】すなわち、抽出画像の動きが大きい場合、
その画像信号を用いた補間信号を用いて、左袖補間部分
ＨLおよび右袖補間部分ＨRを補間すると、不自然な画像
が表示されてしまうため、メモリ２５に保存されてい
る、最新の過去の静止画像データによる補間信号の割合
が多くされる。逆に、抽出画像の動きが小さい場合、過
去の画像ではなく、現在の画像信号を用いて生成された
補間信号の割合が多くされる。そして、画像合成部２８
において、抽出画像の動きの大きさによって決められた
割合の、２つの補間信号が合成される。That is, when the motion of the extracted image is large,
When the left sleeve interpolation part HL and the right sleeve interpolation part HR are interpolated using the interpolation signal using the image signal, an unnatural image is displayed. The ratio of the interpolation signal based on the still image data is increased. Conversely, when the motion of the extracted image is small, the proportion of the interpolation signal generated using the current image signal instead of the past image is increased. Then, the image combining unit 28
In, the two interpolation signals are synthesized at a ratio determined by the magnitude of the motion of the extracted image.

【００４３】画像合成部２８で合成された補間信号は、
スイッチ３０の端子Ｌに供給される。固定パターン発生
部２９は、例えば、黒、青、緑などで彩色された無模様
の画像を、左袖補間部分ＨLおよび右袖補間部分ＨRに挿
入するための固定パターンの画像として、スイッチ３０
の端子Ｕに出力する。スイッチ３０は、コントローラ１
３から入力される制御信号に従って、画像合成部２８の
出力信号と、固定パターン発生部２９の出力信号のいず
れか一方の信号を選択し、データ演算部３１に出力す
る。The interpolation signal synthesized by the image synthesis unit 28 is
It is supplied to the terminal L of the switch 30. The fixed pattern generating unit 29 outputs a switch 30 as a fixed pattern image for inserting a non-pattern image colored in black, blue, green, or the like into the left sleeve interpolation part HL and the right sleeve interpolation part HR.
Is output to the terminal U. The switch 30 is connected to the controller 1
According to the control signal input from the control unit 3, one of the output signal of the image synthesizing unit 28 and the output signal of the fixed pattern generating unit 29 is selected and output to the data calculating unit 31.

【００４４】データ演算部３１は、コントローラ１３か
ら入力される制御信号に従って、入力された補間信号の
階調特性（例えば、輝度レベル、色相、γ特性など）
や、デフォーカスレベルを調整するための演算を行っ
て、最終的な補間信号を生成し、画像合成部２１に出力
する。ここで、デフォーカスレベルとは、画像のピント
のずれ量を意味する。The data operation section 31 performs a gradation characteristic (for example, luminance level, hue, γ characteristic, etc.) of the input interpolation signal in accordance with a control signal input from the controller 13.
In addition, a calculation for adjusting the defocus level is performed to generate a final interpolation signal, which is output to the image synthesis unit 21. Here, the defocus level means the amount of defocus of an image.

【００４５】例えば、コントローラ１３から、補間信号
の階調特性を調整することを指示する制御信号が入力さ
れた場合、データ演算部３１は、図７に示されるよう
に、部分ΔＳLの左端部、および部分ΔＳRの右端部の階
調特性を１として、ワイド画像素材Ｐ2の左側端部また
は右側端部に近づくにつれて、表示される画像の階調特
性が低くなるような処理を行う。階調特性として輝度を
用いた場合について、図８および図９を用いて説明す
る。For example, when a control signal for instructing to adjust the gradation characteristic of the interpolation signal is input from the controller 13, the data operation unit 31 outputs the left end of the portion ΔSL, as shown in FIG. Assuming that the gradation characteristic at the right end of the portion ΔSR is 1, processing is performed such that the gradation characteristic of the displayed image becomes lower as it approaches the left end or the right end of the wide image material P2. A case where luminance is used as the gradation characteristic will be described with reference to FIGS.

【００４６】図８に示すように、補間信号の生成の基と
なる画素が、部分ΔＳLの１画素の幅の画像信号である
場合、左袖補間部分ＨLに含まれる各画素は、図６を参
照して説明した式（１）によって表わされる。所定のラ
インの部分ΔＳLに位置する画素Ｓ0,Pを基に生成された
補間信号の同一ラインの各画素Ｓ1,p乃至Ｓn,pの輝度
は、例えば、図９に示されるように、画素Ｓ0,Pの輝度
を１として、ワイド画像Ｐ2の端部に近づくにつれて小
さくなるように調整される。図９において、画素Ｓ0,P
の輝度をＡ（Ｓ0,P）、画素Ｓn,pの輝度をＡ（Ｓn,p）
とすると、画素Ｓr,pの輝度Ａ（Ｓr,p）は、次の式
（３）により演算される。 Ａ（Ｓr,p）＝{Ａ（Ｓn,p）−Ａ（Ｓ0,P）}×Ｓr,p／（Ｓn,p−Ｓ0,P） ＋{Ａ（Ｓn,p）×Ｓn,p−Ａ（Ｓn,P）×Ｓ0,p}／（Ｓn,p−Ｓ0,P） ・・・（３）As shown in FIG. 8, when the pixel on which the generation of the interpolation signal is based is an image signal having a width of one pixel of the portion ΔSL, each pixel included in the left sleeve interpolation portion HL corresponds to FIG. This is represented by equation (1) described with reference to FIG. The brightness of each pixel S1, p to Sn, p on the same line of the interpolation signal generated based on the pixels S0, P located on the portion ΔSL of the predetermined line is, for example, as shown in FIG. , P is set to 1 and adjusted so as to become smaller as approaching the end of the wide image P2. In FIG. 9, pixels S0, P
Of the pixel Sn, p is A (Sn, p).
Then, the luminance A (Sr, p) of the pixel Sr, p is calculated by the following equation (3). A (Sr, p) = {A (Sn, p) -A (S0, P)} × Sr, p / (Sn, p−S0, P) + {A (Sn, p) × Sn, p−A (Sn, P) × S0, p} / (Sn, p−S0, P) (3)

【００４７】なお、階調特性を、色相や、γ特性をとし
た場合においても、上述した式（３）に、輝度ではな
く、色相、もしくはγ特性を代入することにより、同様
に、階調特性を調整することができる。Even when the hue and the γ characteristic are used as the gradation characteristic, the hue or the γ characteristic, instead of the luminance, is substituted into the above-described equation (3), thereby similarly obtaining the gradation. Characteristics can be adjusted.

【００４８】なお、図９においては、直線関数の変換テ
ーブルを用いて、ワイド画像素材Ｐ2の端部に近づくに
つれて、階調特性がリニアに小さくなるように調整した
が、例えば、ｓｉｎ関数の変換テーブルを用いて、サイ
ンカーブ状に階調特性が小さくなるように調整しても良
い。In FIG. 9, the gradation characteristic is adjusted so as to linearly decrease as it approaches the end of the wide image material P2 using a linear function conversion table. The adjustment may be performed using a table so that the gradation characteristic becomes small in a sine curve.

【００４９】また、コントローラ１３から、入力された
補間信号のデフォーカスを調整することを指示する制御
信号が入力された場合、データ演算部３１は、図１０に
示されるように、部分ΔＳLの左端部および部分ΔＳRの
右端部のデフォーカスレベルを０％として、ワイド画像
素材Ｐ2の両端に近づくにつれて、表示される画像のデ
フォーカスレベルが高くなるような処理を行う。次に、
図１１を用いて、デフォーカスレベルを調整するための
演算の例について説明する。When a control signal instructing to adjust the defocus of the input interpolation signal is input from the controller 13, the data calculation unit 31 sets the left end of the portion ΔSL as shown in FIG. Assuming that the defocus level at the right end of the portion and the portion ΔSR is 0%, a process is performed such that the defocus level of the displayed image becomes higher as approaching both ends of the wide image material P2. next,
An example of a calculation for adjusting the defocus level will be described with reference to FIG.

【００５０】図１１に示されるように、補間信号の生成
の基となる部分ΔＳLの画素が、２画素の幅の画像列で
ある場合、左袖補間部分ＨLに含まれる各画素は、図６
を用いて説明した式（２）によって表わされる。生成さ
れた補間信号の各画素は、部分ΔＳLに近い画素から、
例えば、画素グループ４１および画素グループ４２のよ
うに、２×２の４画素毎にグループ化される。同様のグ
ループ化が、最下部の画素Ｓ1,mおよびＳ2,mまで行なわ
れる。そして、その次に部分ΔＳLに近い画素から、例
えば、画素グループ４３のように、３×３の９画素毎に
グループ化が行われる。更に、その次に部分ΔＳLに近
い画素から、４×４の１６画素毎にグループ化が行われ
る。以下、同様のグループ化が、左袖補間部分ＨLの左
端部の画素であるＳn,1乃至Ｓn,mまで、画素グループの
大きさを順次大きくしながら行われる。As shown in FIG. 11, when the pixel of the portion ΔSL on which the interpolation signal is to be generated is an image sequence having a width of 2 pixels, each pixel included in the left sleeve interpolation portion HL is the same as that of FIG.
Is expressed by the equation (2) explained using Each pixel of the generated interpolation signal is calculated from a pixel close to the portion ΔSL,
For example, like the pixel group 41 and the pixel group 42, the pixels are grouped every 2 × 2 pixels. Similar grouping is performed up to the lowermost pixels S1, m and S2, m. Then, grouping is performed for every 3 × 3 9 pixels, for example, as a pixel group 43, starting from the pixel closest to the portion ΔSL. Further, grouping is performed for every 4 × 4 16 pixels starting from the pixel closest to the portion ΔSL. Hereinafter, the same grouping is performed while sequentially increasing the size of the pixel group from Sn, 1 to Sn, m, which are the pixels at the left end of the left sleeve interpolation part HL.

【００５１】そして、これらの画素グループ毎に、例え
ば、画素グループ４１に対しては、式（５）に示される
演算が、画素グループ４２に対しては、式（６）に示さ
れる演算が、そして、画素グループ４３に対しては、式
（７）に示される演算が行なわれる。以下、同様にし
て、全ての画素グループの各画素値の和を、グループの
画素数で除算することにより、部分ΔＳLのデフォーカ
スレベルを０％として、ワイド画像素材Ｐ2の端部に近
づくにつれて、そのデフォーカスレベルが高くなるよう
な画素値が演算される。各画素の値は、その演算結果
（グループの画素値の平均値）に置換され、出力され
る。 Ｓ1,1＝Ｓ2,1＝Ｓ1,2＝Ｓ2,2＝（Ｓ1,1＋Ｓ2,1＋Ｓ1,2＋Ｓ2,2）／４ ・・・（５） Ｓ1,3＝Ｓ2,3＝Ｓ1,4＝Ｓ2,4＝（Ｓ1,3＋Ｓ2,3＋Ｓ1,4＋Ｓ2,4）／４ ・・・（６） Ｓ3,1＝Ｓ4,1＝Ｓ5,1＝Ｓ3,2＝Ｓ4,2＝Ｓ5,2＝Ｓ3,3＝Ｓ4,3＝Ｓ5,3＝（Ｓ3 ,1+Ｓ4,1+Ｓ5,1+Ｓ3,2+Ｓ4,2+Ｓ5,2+Ｓ3,3+Ｓ4,3+Ｓ5,3）／９ ・・・（７）For each of these pixel groups, for example, the operation shown in Expression (5) is performed for the pixel group 41, and the operation shown in Expression (6) is performed for the pixel group 42. Then, the operation shown in Expression (7) is performed on the pixel group 43. Similarly, by dividing the sum of the pixel values of all the pixel groups by the number of pixels of the group, the defocus level of the portion ΔSL is set to 0%, and as the end portion of the wide image material P2 approaches, A pixel value is calculated such that the defocus level becomes high. The value of each pixel is replaced with the calculation result (the average value of the pixel values of the group) and output. S1,1 = S2,1 = S1,2 = S2,2 = (S1,1 + S2,1 + S1,2 + S2,2) / 4 (5) S1,3 = S2,3 = S1,4 = S2,4 = (S1,3 + S2,3 + S1,4 + S2,4) / 4 (6) S3,1 = S4,1 = S5,1 = S3,2 = S4,2 = S5,2 = S3,3 = S4, 3 = S5,3 = (S3,1 + S4,1 + S5,1 + S3,2 + S4,2 + S5,2 + S3,3 + S4,3 + S5,3) / 9 (7) )

【００５２】なお、図６、図８、図９および図１１にお
いては、左袖補間部分ＨLの各画素の演算および変換に
ついて説明したが、右袖補間部分ＨRの各画素において
も、左袖補間部分ＨLと同様の演算および変換が実施さ
れる。In FIG. 6, FIG. 8, FIG. 9 and FIG. 11, the calculation and conversion of each pixel of the left sleeve interpolation part HL have been described. The same operation and conversion as in the part HL are performed.

【００５３】次に、図１２を用いて、受信した画像信号
に対して、動き適応型インタレース／プログレッシブ変
換を行う機能を備えた受信装置について説明する。図３
を用いて説明した両袖補間部１１、動き検出部１２、お
よびコントローラ１３は、受信した画像信号に対して、
動き適応型インタレース／プログレッシブ変換を行う機
能を備えた受信装置において、図１２のようにして用い
ることが可能である。Next, a receiving apparatus having a function of performing motion adaptive interlace / progressive conversion on a received image signal will be described with reference to FIG. FIG.
The two-sided interpolation unit 11, the motion detection unit 12, and the controller 13 described with reference to
In a receiving device having a function of performing a motion adaptive interlace / progressive conversion, it can be used as shown in FIG.

【００５４】入力された画像信号は、インタレース／プ
ログレッシブ変換部６１および動き検出部１２に供給さ
れる。動き検出部１２は、図１３（Ａ）に示すように、
入力されたNTSC信号の全ての部分、すなわち、入力映像
エリアを、インタレース／プログレッシブ変換のための
動き検出エリアとして認識し、一方、図１３（Ｂ）に示
されるように、入力されたNTSC信号のうち、その両端の
部分ΔＳLおよび部分ΔＳRの両袖補間生成用の画像エリ
アを、両袖補間用動き検出エリアとして認識する。動き
検出部１２は、図１３（Ａ）に示される入力画像エリア
の動きを検出し、検出結果を、インタレース／プログレ
ッシブ変換部６１に供給する。The input image signal is supplied to an interlace / progressive conversion section 61 and a motion detection section 12. The motion detection unit 12, as shown in FIG.
All parts of the input NTSC signal, that is, the input video area, are recognized as a motion detection area for interlaced / progressive conversion. On the other hand, as shown in FIG. Among them, the image area for both sleeve interpolation generation of the part ΔSL and the part ΔSR at both ends thereof is recognized as a motion detection area for both sleeve interpolation. The motion detector 12 detects the motion of the input image area shown in FIG. 13A, and supplies the detection result to the interlace / progressive converter 61.

【００５５】インタレース／プログレッシブ変換部６１
は、動き検出部１２から入力された動き検出結果に従っ
て、入力されたインタレース方式のNTSC信号に対して、
動き適応型インタレース／プログレッシブ変換を行っ
て、プログレッシブ方式の画像をアスペクト比変換部６
２に出力する。すなわち、動きが速い画像信号において
は、インタレース方式の画像に対して、フィールド内補
間を行ってプログレッシブ画像に変換し、動きがない、
あるいは比較的動きの遅い画像信号においては、インタ
レース方式の画像に対して、フレーム間補間を行って、
プログレッシブ方式の画像に変換する。Interlace / progressive conversion section 61
According to the motion detection result input from the motion detection unit 12, the input interlaced NTSC signal is
A motion adaptive interlace / progressive conversion is performed to convert the progressive image into an aspect ratio conversion unit 6.
Output to 2. That is, in a fast-moving image signal, an interlaced image is converted to a progressive image by performing intra-field interpolation, and there is no motion.
Alternatively, in an image signal having relatively slow motion, inter-frame interpolation is performed on an interlaced image,
Convert to progressive image.

【００５６】アスペクト比変換部６２は、例えば、NTSC
／ハイビジョンアップコンバータなどで構成され、イン
タレース／プログレッシブ変換部６１から入力されるア
スペクト比が４：３のNTSC信号を、アスペクト比が１
６：９の信号に変換して、両袖補間部１１に出力する。The aspect ratio conversion unit 62 is, for example, an NTSC
, An NTSC signal having an aspect ratio of 4: 3 input from the interlace / progressive conversion unit 61 and an aspect ratio of 1
The signal is converted to a 6: 9 signal and output to the both-sleeve interpolator 11.

【００５７】そして、動き検出部１２は、図１３（Ｂ）
に示される両袖補間用動き検出エリアの画像の動きを検
出し、図３を用いて説明した場合と同様に、その検出結
果に基づいた制御信号、およびゲインコントロール信号
を、両袖補間部１１に出力する。また、コントローラ１
３も、図３を用いて説明した場合と同様に、制御信号を
生成して、両袖補間部１１に出力する。両袖補間部１１
は、図３を用いて説明した場合と同様に、補間信号を生
成し、入力された画像信号に付加して、出力する。Then, the motion detecting section 12 determines whether or not the motion is detected as shown in FIG.
, The motion of the image in the motion detection area for both sleeve interpolation is detected, and the control signal and the gain control signal based on the detection result are converted into the two sleeve interpolation unit 11 in the same manner as described with reference to FIG. Output to Controller 1
3 also generates a control signal and outputs it to the both-sleeve interpolating unit 11, as in the case described with reference to FIG. Both sleeve interpolator 11
Generates an interpolation signal, adds it to the input image signal, and outputs it, as in the case described with reference to FIG.

【００５８】図１２を用いて説明したような構成にする
ことにより、動き適応型インタレース／プログレッシブ
変換に必要な動き検出と、補間用画像生成のために必要
な動き検出を、１つの動き検出部１２を用いて実行する
ことができる。従って、動き検出部を２個設ける場合に
比べて、構成を簡略化することができる。With the configuration as described with reference to FIG. 12, the motion detection required for the motion adaptive interlace / progressive conversion and the motion detection required for generating the interpolation image are performed by one motion detection. This can be performed using the unit 12. Therefore, the configuration can be simplified as compared with the case where two motion detection units are provided.

【００５９】ところで、受信装置が、アスペクト比４：
３の画像信号のアスペクト比を変換し、例えば、アスペ
クト比１６：９のワイド画像信号を生成することが予め
想定される場合、画像信号を生成して送信（放送）する
送信装置において、補間信号を生成するために用いられ
る両端近傍の画素（図４を用いて説明した部分ΔＳLお
よび部分ΔＳR）に、所定の静止画像からなる補間信号
作成用の画像信号を、送信する画像信号に予め挿入する
ようにしてもよい。このことにより、受信装置において
は、以上説明したような動き検出を用いることなく、簡
単な処理で、補間信号を生成して付加することができる
ようになる。By the way, if the receiving apparatus has an aspect ratio of 4:
In the case where it is assumed in advance to convert the aspect ratio of the image signal of No. 3 and to generate a wide image signal having an aspect ratio of 16: 9, for example, a transmitting apparatus that generates and transmits (broadcasts) the image signal has an interpolation signal. The image signal for generating the interpolation signal composed of the predetermined still image is inserted in advance into the image signal to be transmitted to the pixels near both ends (the part ΔSL and the part ΔSR described with reference to FIG. 4) used for generating the image signal. You may do so. As a result, the receiving apparatus can generate and add an interpolation signal by simple processing without using the above-described motion detection.

【００６０】図１４に、本発明を適応した送信装置にお
いて、補間用信号の合成にかかわる部分のブロック図を
示す。FIG. 14 is a block diagram showing a portion related to synthesis of an interpolation signal in a transmission apparatus to which the present invention is applied.

【００６１】補間用パターン発生部７１は、所定の補間
用パターンの信号Ａを発生し、合成部７４に出力する。
この補間用パターンの信号Ａは、図１５（Ａ）に示され
るように、アスペクト比４：３であるNTSC信号の両端近
傍の、所定の幅ＬおよびＲ（例えば、図４などを用いて
説明した部分ΔＳLおよび部分ΔＳRに対応する）の静止
画像の信号であり、その中央部分の幅Ｗで示される部分
には、画像信号は存在しない。画像データ取得部７２
は、図１５（Ｂ）に示される、アスペクト比４：３であ
るNTSC信号の画像データBを取得し、抽出部７３に出力
する。The interpolation pattern generating section 71 generates a signal A of a predetermined interpolation pattern and outputs the signal A to the synthesizing section 74.
As shown in FIG. 15A, the signal A of the interpolation pattern has predetermined widths L and R near both ends of an NTSC signal having an aspect ratio of 4: 3 (for example, described with reference to FIG. 4 and the like). (Corresponding to the portions ΔSL and ΔSR described above), and no image signal exists in the portion indicated by the width W of the central portion. Image data acquisition unit 72
Obtains the image data B of the NTSC signal having the aspect ratio of 4: 3 shown in FIG.

【００６２】抽出部７３は、入力された、アスペクト比
４：３の画像データ（図１５（Ｂ））から、図１５
（Ａ）を用いて説明した画像中央部の幅Ｗに対応する部
分を抽出し、信号Ｃとして、合成部７４に出力する。す
なわち、この信号Ｃは、図１５（Ｃ）に示されるよう
に、横幅Ｗに対応するの部分のみの画像データである。
合成部７４は、補間用パターン発生部７１から入力され
た、図１５（Ａ）を用いて説明した補間用画像と、抽出
部７３から入力された、図１５（Ｃ）を用いて説明した
画像とを合成して、図１５（Ｄ）に示す、両端に補間用
の静止画像を有するアスペクト比４：３の画像データを
生成し、出力部７５に出力する。出力部７５は、例え
ば、図示しないコーディング部に画像データを出力して
所定の符号化処理を実行させ、図示しないアンテナなど
を介して送信させる。The extraction section 73 converts the input image data having an aspect ratio of 4: 3 (FIG. 15B)
A portion corresponding to the width W of the central portion of the image described with reference to (A) is extracted and output as a signal C to the combining unit 74. That is, as shown in FIG. 15C, the signal C is image data of only a portion corresponding to the width W.
The combining unit 74 includes the interpolation image input from the interpolation pattern generation unit 71 described with reference to FIG. 15A and the image input from the extraction unit 73 and described with reference to FIG. Are combined to generate image data having an aspect ratio of 4: 3 having a still image for interpolation at both ends, as shown in FIG. The output unit 75 outputs image data to, for example, a coding unit (not shown) to execute predetermined encoding processing, and transmits the image data via an antenna (not shown).

【００６３】そして、受信装置においては、図１５
（Ｄ）に示される画像データを受信するので、送信信号
に予め付加されている幅Ｌおよび幅Ｒの補間用パターン
を、左袖補間部分ＨLおよび右袖補間部分ＨRに、繰り返
して発生させることにより、動き検出を行うことなく、
図１５（Ｅ）に示されるような、アスペクト比１６：９
の画像データを得ることができる。Then, in the receiving apparatus, FIG.
Since the image data shown in (D) is received, the width L and width R interpolation patterns previously added to the transmission signal are repeatedly generated in the left sleeve interpolation part HL and the right sleeve interpolation part HR. With this, without performing motion detection,
The aspect ratio 16: 9 as shown in FIG.
Image data can be obtained.

【００６４】抽出部７３から入力された、図１５（Ｃ）
を用いて説明した画像が、例えば、絵画の画像である場
合、補間用パターンの信号Ａを、例えば、額縁のような
模様を有するものとすることにより、受信装置は、不自
然さを抑制した画像を表示することができる。FIG. 15C, which is input from the extraction unit 73.
For example, when the image described using is an image of a painting, the signal A of the interpolation pattern has, for example, a frame-like pattern, so that the receiving device suppresses unnaturalness. Images can be displayed.

【００６５】送信装置側で、図１４および図１５を用い
て説明した、補間用画像データの付加処理を行う場合、
図３を用いて説明した両袖補間部１１、動き検出部１
２、コントローラ１３においては、動き検出部１２を削
除することが可能となり、また、両袖補間部１１の、ス
イッチ２４、メモリ２５、乗算部２６、乗算部２７、お
よび画像合成部２８を削除することが可能となり、回路
の簡略化、およびコストダウンを実現することができ
る。When the transmitting apparatus performs the addition processing of the interpolation image data described with reference to FIGS. 14 and 15,
Both sleeve interpolation unit 11 and motion detection unit 1 described with reference to FIG.
2. In the controller 13, the motion detection unit 12 can be deleted, and the switch 24, the memory 25, the multiplication unit 26, the multiplication unit 27, and the image synthesis unit 28 of the both sleeve interpolation unit 11 are deleted. It is possible to simplify the circuit and reduce the cost.

【００６６】上述した一連の処理は、ソフトウェアによ
り実行することもできる。そのソフトウェアは、そのソ
フトウェアを構成するプログラムが、専用のハードウェ
アに組み込まれているコンピュータ、または、各種のプ
ログラムをインストールすることで、各種の機能を実行
することが可能な、例えば汎用のパーソナルコンピュー
タなどに、記録媒体からインストールされる。The series of processes described above can be executed by software. The software is a computer in which a program constituting the software is built in dedicated hardware, or a general-purpose personal computer that can execute various functions by installing various programs. For example, it is installed from a recording medium.

【００６７】この記録媒体は、図３に示すように、コン
ピュータとは別に、ユーザにプログラムを提供するため
に配布される、プログラムが記録されている磁気ディス
ク１５（フロッピー（登録商標）ディスクを含む）、光
ディスク１６（CD-ＲＯＭ（Compact Disk-Read Only Me
mory），DVD（Digital Versatile Disk）を含む）、光
磁気ディスク１７（ＭＤ(Mini-Disk)を含む）、もしく
は半導体メモリ１８などよりなるパッケージメディアな
どにより構成される。As shown in FIG. 3, the recording medium is a magnetic disk 15 (including a floppy (registered trademark) disk) on which the program is recorded, which is distributed separately from the computer to provide the program to the user. ), Optical disk 16 (CD-ROM (Compact Disk-Read Only Me)
mory), a DVD (including a Digital Versatile Disk), a magneto-optical disk 17 (including an MD (Mini-Disk)), or a package medium including a semiconductor memory 18.

【００６８】また、本明細書において、記録媒体に記録
されるプログラムを記述するステップは、記載された順
序に沿って時系列的に行われる処理はもちろん、必ずし
も時系列的に処理されなくとも、並列的あるいは個別に
実行される処理をも含むものである。In this specification, the step of describing a program recorded on a recording medium may be performed in a chronological order according to the described order, or may not necessarily be performed in a chronological order. This also includes processing executed in parallel or individually.

【００６９】[0069]

【発明の効果】本発明の第１の画像処理装置および方法
ならびに記録媒体に記録されているプログラムによれ
ば、画像信号の所定の部分を用いて補間用信号を生成
し、画像信号の所定の部分の動きに対応して、画像信号
と合成するための合成用信号を生成し、生成された合成
用信号と、画像信号とを合成するようにしたので、不自
然な画像になるのを抑制しつつ、アスペクト比変換画像
を生成することができる。According to the first image processing apparatus and method of the present invention, and a program recorded on a recording medium, an interpolation signal is generated by using a predetermined portion of an image signal, and a predetermined signal of the image signal is generated. Generates a compositing signal for compositing with the image signal in response to the movement of the part, and combines the generated compositing signal with the image signal to suppress unnatural images While generating an aspect ratio converted image.

【００７０】本発明の第２の画像処理装置によれば、第
２の画像信号の水平方向の両端に、静止画像信号を付加
して出力するようにしたので、受信装置が、簡単な構成
で、不自然な画像になるのを抑制しつつ、アスペクト比
変換画像を生成することができる。According to the second image processing apparatus of the present invention, the still image signal is added to both ends of the second image signal in the horizontal direction and output, so that the receiving apparatus has a simple configuration. Thus, an aspect ratio converted image can be generated while suppressing an unnatural image.

【図面の簡単な説明】[Brief description of the drawings]

【図１】従来の受信装置において、アスペクト比変換の
ための、補間信号の生成および付加を行う部分の構成を
示すブロック図である。FIG. 1 is a block diagram showing a configuration of a part for generating and adding an interpolation signal for aspect ratio conversion in a conventional receiving apparatus.

【図２】アスペクト比変換のための、補間信号の付加に
ついて説明するための図である。FIG. 2 is a diagram for explaining addition of an interpolation signal for aspect ratio conversion.

【図３】本発明を適応した受信装置において、アスペク
ト比変換のための補間信号の生成および付加を行う部分
の構成を示すブロック図である。FIG. 3 is a block diagram showing a configuration of a part for generating and adding an interpolation signal for aspect ratio conversion in a receiving apparatus to which the present invention is applied.

【図４】アスペクト比４：３の画像素材と、アスペクト
比１６：９の画像素材の関係を説明するための図であ
る。FIG. 4 is a diagram for explaining a relationship between an image material having an aspect ratio of 4: 3 and an image material having an aspect ratio of 16: 9.

【図５】左袖補間部分と右袖補間部分における補間を説
明するための図である。FIG. 5 is a diagram for explaining interpolation in a left sleeve interpolation part and a right sleeve interpolation part.

【図６】補間される画素について説明するための図であ
る。FIG. 6 is a diagram for describing pixels to be interpolated.

【図７】階調特性の調整について説明するための図であ
る。FIG. 7 is a diagram for describing adjustment of gradation characteristics.

【図８】階調特性として、輝度の調整を行う場合の画素
について説明するための図である。FIG. 8 is a diagram for describing a pixel in a case where luminance is adjusted as a gradation characteristic.

【図９】階調特性として、輝度の調整を行う場合の画素
について説明するための図である。FIG. 9 is a diagram for describing a pixel when adjusting luminance as a gradation characteristic.

【図１０】デフォーカスレベルの調整について説明する
ための図である。FIG. 10 is a diagram for describing adjustment of a defocus level.

【図１１】デフォーカスレベルを調整する場合の画素に
ついて説明するための図である。FIG. 11 is a diagram illustrating a pixel when a defocus level is adjusted.

【図１２】本発明を適応した、動き適応型インタレース
／プログレッシブ変換を行う機能を備えた受信装置の構
成を示すブロック図である。FIG. 12 is a block diagram illustrating a configuration of a receiving apparatus having a function of performing a motion adaptive interlace / progressive conversion to which the present invention is applied.

【図１３】インタレース／プログレッシブ変換用動き検
出エリアと、両袖補間用動き検出エリアについて説明す
るための図である。FIG. 13 is a diagram for describing a motion detection area for interlace / progressive conversion and a motion detection area for both sleeve interpolation.

【図１４】補間用信号付加機能を有した送信装置におい
て、補間用信号の合成にかかわる部分の構成を示すブロ
ック図である。FIG. 14 is a block diagram illustrating a configuration of a portion related to synthesis of an interpolation signal in a transmission device having an interpolation signal addition function.

【図１５】図１４の送信装置の処理を説明するための図
である。FIG. 15 is a diagram for explaining processing of the transmission device of FIG. 14;

【符号の説明】[Explanation of symbols]

１１ 両袖補間部， １２ 動き検出部， １３ コン
トローラ， ２１ 画像合成部， ２２ 画像取り込み
部， ２３ 補間信号生成部， ２４ スイッチ， ２
５ メモリ， ２６，２７ 乗算部， １８ 画像合成
部， ３１ データ演算部， ６１ インタレース／プ
ログレッシブ変換部， ７１ 補間用パターン発生部，
７３ 抽出部， ７４ 合成部11 both sleeve interpolation section, 12 motion detection section, 13 controller, 21 image synthesis section, 22 image capture section, 23 interpolation signal generation section, 24 switch, 2
5 memory, 26, 27 multiplication unit, 18 image synthesis unit, 31 data operation unit, 61 interlace / progressive conversion unit, 71 interpolation pattern generation unit,
73 extraction unit, 74 synthesis unit

───────────────────────────────────────────────────── フロントページの続き (72)発明者 永井 建太郎 神奈川県厚木市岡田一丁目３番33号 株式 会社山下電子設計内 (72)発明者 山下 歩 神奈川県厚木市岡田一丁目３番33号 株式 会社山下電子設計内 (72)発明者 中村 章 東京都渋谷区神南二丁目２番１号 日本放 送協会放送センター内 (72)発明者 岡田 俊一 東京都渋谷区神南二丁目２番１号 日本放 送協会放送センター内 (72)発明者 久保田 正志 東京都渋谷区神南二丁目２番１号 日本放 送協会放送センター内 (72)発明者 岡田 定晴 東京都渋谷区神南二丁目２番１号 日本放 送協会放送センター内 Ｆターム(参考） 5C025 AA21 BA02 BA18 BA27 BA28 CA07 5C063 AA02 AA03 AA07 BA04 BA08 BA12 BA14 CA07 CA38  ──────────────────────────────────────────────────続 き Continuing on the front page (72) Inventor Kentaro Nagai 1-33-33 Okada, Atsugi-shi, Kanagawa Prefecture Inside Yamashita Electronic Design Co., Ltd. (72) Ayumu Yamashita 1-3-33 Okada, Atsugi-shi, Kanagawa Prefecture (72) Inventor Akira Nakamura 2-2-1 Jinnan, Shibuya-ku, Tokyo Inside the Japan Broadcasting Corporation Broadcasting Center (72) Inventor Shunichi 2-1-1 Jinnan, Shibuya-ku, Tokyo Japan Inside the Broadcasting Corporation Broadcasting Center (72) Inventor Masashi Kubota 2-2-1 Jinnan, Shibuya-ku, Tokyo Inside the Japan Broadcasting Corporation Broadcasting Center (72) Inventor Sadaharu 2-2-1 Jinnan, Shibuya-ku, Tokyo Japan 5C025 AA21 BA02 BA18 BA27 BA28 CA07 5C063 AA02 AA03 AA07 BA04 BA08 BA12 BA14 CA07 CA38

Claims (7)

【特許請求の範囲】[Claims] 【請求項１】 入力された画像信号のアスペクト比を変
換する画像処理装置において、 前記画像信号の所定の部分を用いて、補間用信号を生成
する第１の信号生成手段と、 前記画像信号の所定の部分の動きを検出する動き検出手
段と、 前記動き検出手段による検出結果に対応して、前記第１
の信号生成手段により生成された前記補間用信号を用い
て、前記画像信号と合成するための合成用信号を生成す
る第２の信号生成手段と、 前記第２の信号生成手段により生成された前記合成用信
号と、前記画像信号とを合成する合成手段とを備えるこ
とを特徴とする画像処理装置。1. An image processing apparatus for converting an aspect ratio of an input image signal, comprising: a first signal generation unit for generating an interpolation signal using a predetermined portion of the image signal; A motion detection unit configured to detect a motion of a predetermined portion;
Using the interpolation signal generated by the signal generation means, a second signal generation means for generating a synthesis signal for synthesizing with the image signal, and the second signal generation means generated by the second signal generation means An image processing apparatus comprising: a synthesizing signal; and synthesizing means for synthesizing the image signal. 【請求項２】 前記動き検出手段により、前記画像信号
の所定の部分に動きがないと判断された場合、前記第１
の信号生成手段により生成された前記補間用信号を保存
する保存手段を更に備え、 前記第２の信号生成手段は、前記第１の信号生成手段に
より生成された前記補間用信号と、前記保存手段により
保存された前記補間用信号の少なくとも一方を用いて、
前記合成用信号を生成することを特徴とする請求項１に
記載の画像処理装置。2. The method according to claim 1, wherein the motion detecting unit determines that the predetermined portion of the image signal has no motion.
Further comprising storage means for storing the interpolation signal generated by the signal generation means, wherein the second signal generation means comprises: the interpolation signal generated by the first signal generation means; and the storage means. Using at least one of the interpolation signals saved by
The image processing apparatus according to claim 1, wherein the signal for synthesis is generated. 【請求項３】 前記第２の信号生成手段は、前記動き検
出手段による検出結果に基づいて、前記第１の信号生成
手段により生成された前記補間用信号と、前記保存手段
により保存された前記補間用信号の割合を決定して、前
記合成用信号を生成することを特徴とする請求項２に記
載の画像処理装置。3. The method according to claim 2, wherein the second signal generation unit is configured to determine the interpolation signal generated by the first signal generation unit based on a detection result obtained by the motion detection unit and the interpolation signal stored by the storage unit. The image processing apparatus according to claim 2, wherein the ratio of the interpolation signal is determined to generate the synthesis signal. 【請求項４】 前記画像信号の動きに対応して、インタ
レース画像信号を所定の変換方法でプログレッシブ画像
信号に変換する画像変換手段を更に備え、 前記画像変換手段は、前記動き検出手段による検出結果
に基づいて、前記変換方法を選択することを特徴とする
請求項１，２または３に記載の画像処理装置。4. An image conversion means for converting an interlaced image signal into a progressive image signal by a predetermined conversion method in accordance with the movement of the image signal, wherein the image conversion means detects the motion by the motion detection means. 4. The image processing apparatus according to claim 1, wherein the conversion method is selected based on a result. 【請求項５】 入力された画像信号のアスペクト比を変
換する画像処理装置の画像処理方法において、 前記画像信号の所定の部分を用いて、補間用信号を生成
する第１の信号生成ステップと、 前記画像信号の所定の部分の動きを検出する動き検出ス
テップと、 前記動き検出ステップの処理による検出結果に対応し
て、前記第１の信号生成ステップの処理により生成され
た前記補間用信号を用いて、前記画像信号と合成するた
めの合成用信号を生成する第２の信号生成ステップと、 前記第２の信号生成ステップの処理により生成された前
記合成用信号と、前記画像信号とを合成する合成ステッ
プとを含むことを特徴とする画像処理方法。5. An image processing method of an image processing device for converting an aspect ratio of an input image signal, wherein: a first signal generating step of generating an interpolation signal using a predetermined portion of the image signal; A motion detection step of detecting a motion of a predetermined portion of the image signal; and using the interpolation signal generated by the processing of the first signal generation step in accordance with a detection result obtained by the processing of the motion detection step. A second signal generating step of generating a synthesizing signal for synthesizing the image signal, and synthesizing the image signal with the synthesizing signal generated by the processing of the second signal generating step. An image processing method, comprising a synthesizing step. 【請求項６】 入力された画像信号のアスペクト比を変
換する画像処理装置用のプログラムであって、 前記画像信号の所定の部分を用いて、補間用信号を生成
する第１の信号生成ステップと、 前記画像信号の所定の部分の動きを検出する動き検出ス
テップと、 前記動き検出ステップの処理による検出結果に対応し
て、前記第１の信号生成ステップの処理により生成され
た前記補間用信号を用いて、前記画像信号と合成するた
めの合成用信号を生成する第２の信号生成ステップと、 前記第２の信号生成ステップの処理により生成された前
記合成用信号と、前記画像信号とを合成する合成ステッ
プとを含むことを特徴とするコンピュータが読み取り可
能なプログラムが記録されている記録媒体。6. A program for an image processing device for converting an aspect ratio of an input image signal, comprising: a first signal generation step of generating an interpolation signal using a predetermined portion of the image signal; A motion detecting step of detecting a motion of a predetermined portion of the image signal; and, corresponding to the detection result of the processing of the motion detecting step, the interpolation signal generated by the processing of the first signal generating step. A second signal generating step of generating a synthesizing signal for synthesizing the image signal with the image signal; and synthesizing the image signal with the synthesizing signal generated by the processing of the second signal generating step. A recording medium storing a computer-readable program. 【請求項７】 所定のアスペクト比の画像信号を生成し
て出力する画像処理装置において、 所定の大きさの静止画像信号を生成する画像生成手段
と、 所定のアスペクト比の第１の画像信号の水平方向の両端
から、所定の大きさを削除した第２の画像信号を抽出す
る抽出手段と、 前記第２の画像信号の水平方向の両端に、前記画像生成
手段により生成された前記静止画像信号を付加して第３
の画像信号を生成する付加手段と、 前記付加手段により生成された前記第３の画像信号を、
放送用信号として出力する出力手段とを備えることを特
徴とする画像処理装置。7. An image processing apparatus for generating and outputting an image signal having a predetermined aspect ratio, comprising: an image generating means for generating a still image signal having a predetermined size; Extracting means for extracting a second image signal having a predetermined size removed from both ends in the horizontal direction; and the still image signal generated by the image generating means at both horizontal ends of the second image signal. Add the third
Adding means for generating an image signal of the following, and the third image signal generated by the adding means,
An image processing apparatus comprising: an output unit that outputs a broadcast signal.