JP3309324B2 - Image data pre-processing filter device - Google Patents

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【０００１】 （目次） 産業上の利用分野 従来の技術（図９〜図１５） 発明が解決しようとする課題 課題を解決するための手段（図１） 作用（図１） 実施例 ・第１実施例の説明（図２〜図４） ・第２実施例の説明（図５，図６） ・第３実施例の説明（図７，図８） 発明の効果(Contents) Industrial Application Field Conventional Technology (FIGS. 9 to 15) Problems to be Solved by the Invention Means for Solving the Problems (FIG. 1) Function (FIG. 1) Embodiment First Embodiment Description of Examples (FIGS. 2 to 4)-Description of Second Embodiment (FIGS. 5 and 6)-Description of Third Embodiment (FIGS. 7 and 8)

【０００２】[0002]

【産業上の利用分野】本発明は、入力画像データについ
て所要の前処理を施す前処理フィルタ装置に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a pre-processing filter device for performing required pre-processing on input image data.

【０００３】[0003]

【従来の技術】図９は従来の多眼式立体映像システムを
示す図であるが、この図９において、１０２はカメラで
あり、このカメラ１０２は複数個設けられていて、各カ
メラ１０２は、被写体１０１を撮影するものであって、
縦と横で、各々のカメラ１０２の配置位置を少しずつず
らしている。2. Description of the Related Art FIG. 9 is a diagram showing a conventional multi-view stereoscopic video system. In FIG. 9, reference numeral 102 denotes a camera, and a plurality of cameras 102 are provided. For photographing the subject 101,
The arrangement positions of the cameras 102 are slightly shifted vertically and horizontally.

【０００４】カメラ１０２の位置を縦および横に、少し
ずつずらしているのは、１つのカメラからの出力を片方
の眼に対する入力として、両眼視差を形成して立体視が
得られるようにするためである。従って、このようにカ
メラ１０２を多数用いることにより、出力系でディスプ
レイ１０７を見る人間が、このディスプレイ１０７を見
る位置を変えても自然な立体視が得られるようになって
いる。The reason why the position of the camera 102 is slightly shifted vertically and horizontally is that an output from one camera is used as an input to one eye to form binocular parallax so that stereoscopic vision can be obtained. That's why. Therefore, by using a large number of cameras 102 in this way, a person viewing the display 107 in the output system can obtain a natural stereoscopic view even if the position at which the display 107 is viewed is changed.

【０００５】１０３は符号化器であり、この符号化器１
０３は各カメラ１０２から入力される画像データを符号
化するものである。１０４は多重化（マルチプレクス）
器であり、この多重化器１０４は、符号化器１０３で符
号化された画像データを伝送路にのせて伝送するため
に、符号化された画像データを多重化するものである。
１０５は分離（デマルチプレクス）器であり、この分離
器１０５は、伝送路を介して入力された多重画像データ
を分離するものである。そして、１０６は復号器であ
り、この復号器１０６は、分離器１０５で分離された画
像データを、ディスプレイ１０７に映し出すために復号
を行なうものである。[0005] Reference numeral 103 denotes an encoder.
03 encodes image data input from each camera 102. 104 is multiplexing (multiplex)
The multiplexer 104 multiplexes the encoded image data in order to transmit the image data encoded by the encoder 103 on a transmission path.
Reference numeral 105 denotes a demultiplexer. The demultiplexer 105 separates multiplexed image data input via a transmission path. Reference numeral 106 denotes a decoder, which decodes the image data separated by the separator 105 in order to display the image data on a display 107.

【０００６】なお、ディスプレイ１０７には、一例とし
てレンチキュラ・レンズ（横方向にのみ視差がある場
合）または、ハエの眼レンズ（縦・横方向に視差がある
場合）を使用する。このような構成により、上記の多眼
式立体映像システムは以下に示す動作を有する。As the display 107, a lenticular lens (when there is parallax only in the horizontal direction) or a fly's eye lens (when there is parallax in the vertical and horizontal directions) is used as an example. With such a configuration, the above-described multi-view stereoscopic video system has the following operation.

【０００７】まず、静止している、あるいは動いている
被写体１０１を、位置を縦および横に、少しずつずらし
た複数のカメラ１０２で撮影する。次に、複数のカメラ
１０２から得られた画像データを高能率符号化し、多重
化器１０４により多重化（マルチプレクス）する。その
後、伝送路などを介して伝送し、受信側では分離器１０
５により分離（デマルチプレクス）した後、復号器１０
６により復号を行ない、ディスプレイ１０７に映しだ
す。First, a still or moving subject 101 is photographed by a plurality of cameras 102 whose positions are slightly shifted vertically and horizontally. Next, the image data obtained from the plurality of cameras 102 is encoded with high efficiency and multiplexed (multiplexed) by the multiplexer 104. After that, the signal is transmitted through a transmission path or the like, and is separated on the receiving side by a demultiplexer 10.
5 after demultiplexing (demultiplexing) by the decoder 10
The decryption is performed by 6 and displayed on the display 107.

【０００８】このディスプレイ１０７に映し出された映
像の一例として、図１０にタコを被写体としたときの、
縦５眼、横５眼のそれぞれのカメラからの出力を示す。
この例では、上下方向にも視差があることがわかる。さ
らに、別の例として、図１１にホログラフィック・ステ
レオグラムを構成する場合のシステムの一例を示す。こ
の図１１において、復号器１０６によって復号を行なう
ところまでは図９で示した多眼式立体映像システムと同
様である。[0008] As an example of an image projected on the display 107, FIG.
The output from each of a camera with five eyes vertically and five eyes horizontally is shown.
In this example, it can be seen that there is also a parallax in the vertical direction. Further, as another example, FIG. 11 shows an example of a system for forming a holographic stereogram. In FIG. 11, up to the point where decoding is performed by the decoder 106, it is the same as the multi-view stereoscopic video system shown in FIG.

【０００９】１０８は画像サイズ変換部であり、この画
像サイズ変換部１０８は、位相計算部１０９によるホロ
グラム位相計算の前処理として、画像サイズを変換する
ものである。位相計算部１０９は、画像サイズ変換後に
ディスプレイ等のホログラフィック出力系１１０へ出力
するためのホログラム位相計算を行なうものである。こ
のような構成により、上記のホログラフィック・ステレ
オグラムは、復号器１０６による復号を行なうところま
では、図９で示した多眼式立体映像システムと同様であ
る。Reference numeral 108 denotes an image size conversion unit. The image size conversion unit 108 converts the image size as a pre-process of the hologram phase calculation by the phase calculation unit 109. The phase calculation unit 109 performs hologram phase calculation for outputting to the holographic output system 110 such as a display after image size conversion. With such a configuration, the holographic stereogram is the same as the multiview stereoscopic video system shown in FIG. 9 up to the point where decoding by the decoder 106 is performed.

【００１０】しかし、復号器１０６で復号を行なった後
は、位相計算部１０９によるホログラム位相計算を行な
うために、画像サイズ変換部１０８により画像サイズを
変換する。その後、位相計算部１０９で位相計算を行な
い、ホログラフィック出力系１１０によって画像を出力
する。ところで、上記の図８に示す多眼式立体立体映像
システムや、図１１に示すホログラフィック・ステレオ
グラムでは、図１２に示すような位置に、前処理フィル
タ１１１を設けている。つまり、カメラ１０２と符号化
器１０３との間に、符号化の前処理として、前処理フィ
ルタ１１１が介装されている。However, after decoding is performed by the decoder 106, the image size is converted by the image size conversion unit 108 in order to calculate the hologram phase by the phase calculation unit 109. After that, the phase calculation section 109 calculates the phase, and the holographic output system 110 outputs an image. Meanwhile, in the multi-view stereoscopic video system shown in FIG. 8 and the holographic stereogram shown in FIG. 11, the pre-processing filter 111 is provided at a position as shown in FIG. That is, a pre-processing filter 111 is interposed between the camera 102 and the encoder 103 as pre-processing for encoding.

【００１１】ここで、この前処理フィルタ１１１として
は、画像フォーマットを決定するための前置フィルタと
ノイズが原因で符号化における処理能力の低下を生じる
のを防ぐために用いるノイズリデューサの２種類が使用
される。前置フィルタは、カメラからの入力と異なるフ
ォーマット（画像の大きさの変換、ＲＧＢからＹ／Ｃ分
離等）で処理する必要がある場合に用いられるが、具体
的な前置フィルタとしては、例えば図１３に示すような
デシメーション・フィルタ１１２が用いられていた。Here, two types of pre-processing filters 111 are used: a pre-filter for determining an image format and a noise reducer used to prevent a reduction in processing performance in encoding due to noise. Is done. The pre-filter is used when it is necessary to perform processing in a format different from the input from the camera (conversion of image size, separation of RGB from Y / C, etc.). A decimation filter 112 as shown in FIG. 13 was used.

【００１２】このデシメーション・フィルタ１１２は、
ＣＣＩＲ ＲＥＣ．６０１の画像データからＭＰＥＧ１
画像入力フォーマット（ＳＩＦ）に変換するときのもの
であって、フィルタをかけたい方向の画素数を、フィル
タをかけて間引くことで半分にするもので、このため
に、タップ数に応じたディレイ要素，フィルタ係数設定
要素，加算要素，正規化要素，間引き要素を含んで構成
されている。This decimation filter 112
CCIR REC. MPEG1 from image data of 601
This is for converting to the image input format (SIF), in which the number of pixels in the direction to be filtered is halved by filtering and thinning out. For this reason, a delay element corresponding to the number of taps is used. , A filter coefficient setting element, an addition element, a normalization element, and a thinning element.

【００１３】図１４は、上記デシメーション・フィルタ
１１２の動作を説明するための図であるが、この図１４
の（ａ）における輝度信号は、ステップＳ１における７
２０×４８０画素の輝度信号を、ステップＳ２で偶フィ
ールドを取り除いて縦方向の画素数を半分にする。そし
て、ステップＳ３で、次に横方向の画素数をこのデシメ
ーションフィルタ１１２を用いて半分にする。FIG. 14 is a diagram for explaining the operation of the decimation filter 112.
The luminance signal in (a) of FIG.
In the luminance signal of 20 × 480 pixels, the even field is removed in step S2 to reduce the number of pixels in the vertical direction to half. Then, in step S3, the number of pixels in the horizontal direction is reduced to half by using the decimation filter 112.

【００１４】また、図１４の（ｂ）における色信号は、
ステップＳ４における３６０×４８０画素の輝度信号
を、ステップＳ５で偶フィールドを取り除いて縦方向の
画素数を半分にする。次にステップＳ６で横方向の画素
数を、このデシメーション・フィルタ１１２を用いて半
分にし、その後、ステップＳ７で縦方向の画素数につい
てもこのデシメーション・フィルタ１１２を用いて半分
にする。Further, the color signal in FIG.
The luminance signal of 360 × 480 pixels in step S4 is reduced to half the number of pixels in the vertical direction by removing even fields in step S5. Next, in step S6, the number of pixels in the horizontal direction is halved using the decimation filter 112, and then in step S7, the number of pixels in the vertical direction is also halved using the decimation filter 112.

【００１５】図１２で示した前処理フィルタ１１１とし
て用いる、もう一方の場合として挙げたノイズリデュー
サ１１３は、ノイズが原因で符号化における処理能力の
低下を生じるのを防ぐために用いるものであって、通常
前述の画像入力フォーマットに変換した後に用いる。こ
のノイズリデューサ１１３は、例えば図１５に示すよう
な、動画像の動きに適応して過去の画像の情報をも取り
入れる時間軸方向のローパスフィルタが用いられる。こ
のローパスフィルタでは、動き検出・パラメータ出力部
１１３−１によるブロックマッチング等によってフレー
ムメモリ１１３−２に蓄えられている時間的に過去の画
像と現在の画像の動きを検出し、それに応じてパラメー
タｋを計算・出力するようになっている。The noise reducer 113, which is used as the pre-processing filter 111 shown in FIG. 12 and is another example, is used to prevent a reduction in processing performance in encoding due to noise. Usually used after conversion to the above-mentioned image input format. As the noise reducer 113, for example, a low-pass filter in the time axis direction adapted to the motion of a moving image and taking in information of a past image as shown in FIG. 15 is used. In this low-pass filter, the motion of the temporally past image and the current image stored in the frame memory 113-2 are detected by block matching or the like by the motion detection / parameter output unit 113-1. Is calculated and output.

【００１６】上記の構成からもわかるように、従来用い
ていた前処理フィルタの掛け方は、画像のどの部分にお
いても一定に掛けたり、あるいは、フィルタの係数など
を、画像の性質に応じて切り換えたりするだけであっ
た。As can be seen from the above configuration, the method of applying the pre-processing filter, which has been conventionally used, is to apply a constant value to any part of the image, or to switch the coefficient of the filter according to the nature of the image. Or just

【００１７】[0017]

【発明が解決しようとする課題】しかしながら、アプリ
ケーションによっては、画像の特定したある部分だけ、
（鮮明な）高い解像度が必要（高周波成分を損なわない
ことが必要）で、その他の部分は解像度を低くして（ぼ
かして）、符号化をし易くし、効率を向上させる用いか
たも考えられる。However, depending on the application, only a specified part of the image may be used.
Considering how to use (clear) high resolution (necessary to keep high frequency components), and to lower (blurr) other parts to make encoding easier and improve efficiency Can be

【００１８】例えば、遠隔操作マニピュレーションにお
いては、作業を行なう際、オペレータは概ね画像の中心
部を作業場所に合わせて、作業を行なうため、画像の中
心部のみ情報量が集中していればよく、画像の端部にお
いては過多な情報量は必要ない。ところが、従来方法で
は自動的に画像の位置に応じてフィルタをかけることが
出来なかった。このため、符号化効率の低下や必要とな
る中心部の画像の解像度の劣化を招き、作業に支障をき
たしていた。For example, in the remote operation manipulation, when performing an operation, the operator generally performs the operation by adjusting the center of the image to the work place, so that the information amount only needs to be concentrated at the center of the image. No excessive amount of information is needed at the edges of the image. However, the conventional method has not been able to automatically apply a filter according to the position of an image. For this reason, the coding efficiency is reduced and the required resolution of the central image is deteriorated, which hinders the operation.

【００１９】本発明は、このような課題に鑑み創案され
たもので、画像の位置に応じて効率的にフィルタリング
することができる、画像データ前処理フィルタ装置を提
供することを目的とする。SUMMARY OF THE INVENTION The present invention has been made in view of the above problems, and has as its object to provide an image data pre-processing filter device which can efficiently perform filtering according to the position of an image.

【００２０】[0020]

【課題を解決するための手段】図１は本発明の原理ブロ
ック図で、この図１において、１は前処理フィルタであ
り、この前処理フィルタ１は、入力画像データについて
所要の前処理を施すものである。２は画素位置検出手段
であり、この画素位置検出手段２は、前処理フィルタ１
によってフィルタをかけようとしている画素の現位置を
検出するものである。３はパラメータ設定手段であり、
このパラメータ設定手段３は、高解像度を維持する画素
範囲に関するパラメータとして、該画素範囲の中心の画
素の位置座標（ａ，ｂ）および該画素範囲の中心から該
画素範囲の境界までの距離ｒを設定するものである。FIG. 1 is a block diagram showing the principle of the present invention. In FIG. 1, reference numeral 1 denotes a pre-processing filter, and the pre-processing filter 1 performs required pre-processing on input image data. Things. Reference numeral 2 denotes a pixel position detecting means.
To detect the current position of the pixel to be filtered. 3 is a parameter setting means,
The parameter setting unit 3, as parameters relating to pixel range to maintain high resolution, the position coordinates of the center pixel of the pixel range (a, b) and said from the center of the pixel range
The distance r to the boundary of the pixel range is set.

【００２１】４は制御手段であり、この制御手段４は、
画素位置検出手段２からの画素の現位置情報及びパラメ
ータ設定手段３からの画素範囲に関するパラメータを受
けて、上記の画素範囲の中心の画素の位置座標（ａ，
ｂ）と現在の画素の位置座標（ｘ，ｙ）との間で絶対値
和である（｜ｘ−ａ｜＋｜ｙ−ｂ｜）を上記２点間すな
わち上記の位置座標（ａ，ｂ）の点と位置座標（ｘ，
ｙ）の点との間の距離として簡略演算するとともに、上
記絶対値和と、該画素範囲に関するパラメータである該
画素範囲の中心から該画素範囲の境界までの距離ｒとを
比較することにより、現在の画素の位置と該パラメータ
で規定される画素範囲との関係を特定し、上記の現在の
画素が画素範囲内にあるか否かに応じて、前処理フィル
タ１による前処理の状態を変更するものである。Reference numeral 4 denotes control means.
Receiving the current position information of the pixel from the pixel position detecting means 2 and the parameter relating to the pixel range from the parameter setting means 3, the position coordinates (a,
absolute value between b) and the position coordinates (x, y) of the current pixel
The sum (| x−a | + | y−b |) is not defined between the above two points.
That is, the point of the position coordinates (a, b) and the position coordinates (x,
y) , by performing a simplified calculation as a distance to the point, and comparing the absolute value sum with a distance r from a center of the pixel range to a boundary of the pixel range, which is a parameter related to the pixel range , The relationship between the current pixel position and the pixel range defined by the parameter is specified, and the state of the pre-processing by the pre-processing filter 1 is changed according to whether the current pixel is within the pixel range. Is what you do.

【００２２】ところで、上記の前処理フィルタ１は、解
像度を変換する機能をもつデシメーションフィルタとし
て構成することができ、制御手段４は、画素位置検出手
段２で検出された画素の現位置がパラメータ設定手段３
で設定された画素範囲から離れるほど前処理フィルタの
解像度が低くなるようにして、前処理フィルタ１による
前処理の状態を変更するように構成することができる。 [0022] and in time, the pre-processing filter 1 described above may be configured as a decimation filter having a function of converting the resolution, the control means 4, is present the position of the pixels detected by the pixel position detecting means 2 Parameter setting means 3
In as resolution of about preprocessing filter away from the set pixel range is lower, Ru can be configured to change the state of the pretreatment with the pretreatment filter 1.

【００２３】また、この制御手段４は、画素位置検出手
段２で検出された画素の現位置がパラメータ設定手段３
で設定された画素範囲内である場合は、高解像度を維持
し、この画素範囲以外の他の画素範囲である場合は、上
記画素範囲から離れるに従って、段階的に解像度を下げ
ることにより、前処理フィルタ１による前処理の状態を
変更するように構成することも可能である。 The control means 4 determines whether the current position of the pixel detected by the pixel position detection means 2 is
If the pixel range is within the pixel range set in, the high resolution is maintained, and if the pixel range is other than this pixel range, the resolution is reduced stepwise as the distance from the pixel range is increased. Ru also der be configured to change the state of the pretreatment filter 1.

【００２４】さらに、前処理フィルタ１は、ローパスフ
ィルタの機能をもつノイズリデューサとして構成するこ
ともでき、この場合、制御手段４は、画素位置検出手段
２で検出された画素の現位置がパラメータ設定手段３で
設定された画素範囲から離れるほど、前処理フィルタ１
が強いローパスフィルタの機能を持つようにして、前処
理フィルタ１による前処理の状態を変更するように構成
される。 Further, the pre-processing filter 1 can be constituted as a noise reducer having a function of a low-pass filter. In this case, the control means 4 determines whether the current position of the pixel detected by the pixel position detection means 2 is a parameter setting. The further away from the pixel range set by the means 3, the more the pre-processing filter 1
So as to have a have a strong low-pass filter function, Ru is configured to change the state of the pretreatment with the pretreatment filter 1.

【００２５】また、上記制御手段４を、画素位置検出手
段２で検出された画素の現位置がパラメータ設定手段３
で設定された画素範囲内である場合は、高解像度を維持
するように構成し、この設定された画素範囲以外の他の
画素範囲である場合は、上記画素範囲から離れるに従っ
て、連続的にローパスフィルタの機能を強めてゆくこと
により、前処理フィルタによる前処理の状態を変更する
ように構成されることも可能である。 Further, the control means 4 determines that the current position of the pixel detected by the pixel position detection means 2 is the parameter setting means 3.
If it is within the pixel range set in, the configuration is such that high resolution is maintained, and if it is another pixel range other than this set pixel range, it is continuously low-passed as it moves away from the pixel range. by Yuku strengthen the function of the filter, Ru possible der be configured to change the state of the pretreatment with the pretreatment filter.

【００２６】また、前処理フィルタ１を、時間軸フィル
タとして構成した場合は、制御手段４は、画素位置検出
手段２で検出された画素の現位置がパラメータ設定手段
３で設定された画素範囲から離れるほど、前処理フィル
タが強いローパスフィルタの機能を持つような係数を算
出し、この係数を用いて前処理フィルタ１のフィルタ係
数を変更するように構成されることも可能である。 When the pre-processing filter 1 is configured as a time axis filter, the control means 4 determines the current position of the pixel detected by the pixel position detection means 2 from the pixel range set by the parameter setting means 3. away for preprocessing filter calculates coefficients capable of having the function of a strong low-pass filter, Ru possible der be configured to change the pre-processing filter coefficients of the filter 1 using this coefficient.

【００２７】[0027]

【作用】上述の本発明の画像データ前処理フィルタ装置
では、入力画像データの所要の前処理は、前処理フィル
タ１によって施されるが、この前処理の状態は、制御手
段４によって変更することができる。つまり、画素位置
検出手段２によって、前処理フィルタ１でフィルタをか
けようとしている画素の現位置を検出し、パラメータ設
定手段３によって高解像度を維持する画素範囲に関する
パラメータとして、画素範囲の中心の画素の位置座標
（ａ，ｂ）および該画素範囲の中心から該画素範囲の境
界までの距離ｒを設定する。In the above-described image data pre-processing filter device of the present invention, the required pre-processing of the input image data is performed by the pre-processing filter 1. The state of this pre-processing is changed by the control means 4. Can be. That is, the current position of the pixel to be filtered by the pre-processing filter 1 is detected by the pixel position detecting means 2, and the parameter at the center of the pixel range is determined by the parameter setting means 3 as a parameter relating to the pixel range for maintaining high resolution. Position coordinates (a, b) and the boundary of the pixel range from the center of the pixel range.
Set the distance r to the world .

【００２８】そして、制御手段４は、上記の画素位置検
出手段２で検出した画素の現位置と、パラメータ設定手
段３で設定した高解像度を維持する画素範囲に関するパ
ラメータとを受けて、上記の画素範囲の中心の画素の位
置座標（ａ，ｂ）と現在の画素の位置座標（ｘ，ｙ）と
の間で絶対値和である（｜ｘ−ａ｜＋｜ｙ−ｂ｜）を上
記の位置座標（ａ，ｂ）の点と位置座標（ｘ，ｙ）の点
との間の距離として簡略演算するとともに、上記絶対値
和と、該画素範囲に関するパラメータである該画素範囲
の中心から該画素範囲の境界までの距離ｒとを比較する
ことにより、現在の画素の位置と該パラメータで規定さ
れる画素範囲との関係を特定し、上記の現在の画素が画
素範囲内にあるか否かに応じて、前処理フィルタ１によ
る前処理の状態を変更する。The control means 4 receives the current position of the pixel detected by the pixel position detection means 2 and the parameter relating to the pixel range for maintaining the high resolution set by the parameter setting means 3, and Above the sum of absolute values (| x−a | + | y−b |) between the position coordinates (a, b) of the pixel at the center of the range and the position coordinates (x, y) of the current pixel
Point of the position coordinates (a, b) and point of the position coordinates (x, y)
Simplified calculation as the distance between
The sum, by comparing the distance r from the center of the pixel range is a parameter related to the pixel range to the boundary of the pixel range, the relationship between the position and the pixel range defined by the parameters of the current pixel Then, the state of the pre-processing by the pre-processing filter 1 is changed according to whether or not the current pixel is within the pixel range.

【００２９】また、上記前処理フィルタ１として解像度
を変換する機能を有するデシメーションフィルタを用い
た場合は、制御手段４による前処理の状態を変更する態
様としては、以下に示す場合が挙げられる。つまり、画
素位置検出手段２で検出された画素の現位置がパラメー
タ設定手段３で設定された画素範囲から離れるほどデシ
メーションフィルタの解像度が低くなるようにする。具
体的には、画素位置検出手段２で検出された画素の現位
置が、パラメータ設定手段３で設定された画素範囲内で
ある場合には、高解像度を維持し、この設定された画素
範囲以外の他の画素範囲である場合には、上記画素範囲
から離れるに従って段階的に解像度を下げるようにする
のである。 When a decimation filter having a function of converting the resolution is used as the pre-processing filter 1, examples of the mode for changing the state of the pre-processing by the control means 4 are as follows. In other words, the resolution of the decimation filter is set to decrease as the current position of the pixel detected by the pixel position detection unit 2 moves away from the pixel range set by the parameter setting unit 3. Specifically, when the current position of the pixel detected by the pixel position detecting means 2 is within the pixel range set by the parameter setting means 3, the high resolution is maintained and If it is another pixel range of, Ru Nodea to lower the stepwise resolution with distance from the pixel range.

【００３０】ところで、上記前処理フィルタ１としてロ
ーパスフィルタの機能を有するノイズリデューサを用い
た場合は、制御手段４による前処理の状態を変更する態
様としては、以下に示す場合が挙げられる。つまり、画
素位置検出手段２で検出された画素の現位置が、パラメ
ータ設定手段３で設定された画素範囲から離れるほど、
前処理フィルタ１が強いローパスフィルタの機能を持つ
ようにする。具体的には、画素位置検出手段２で検出さ
れた画素の現位置が、パラメータ設定手段３で設定され
た画素範囲内である場合は、高解像度を維持し、パラメ
ータ設定手段３で設定された画素範囲以外の他の画素範
囲である場合は、パラメータ設定手段３で設定された画
素範囲から離れるに従って、連続的にローパスフィルタ
の機能を強めてゆくようにするのである。 When a noise reducer having the function of a low-pass filter is used as the pre-processing filter 1, there are the following cases in which the state of the pre-processing by the control means 4 is changed. That is, the farther the current position of the pixel detected by the pixel position detecting means 2 is from the pixel range set by the parameter setting means 3,
The pre-processing filter 1 has a strong low-pass filter function. Specifically, when the current position of the pixel detected by the pixel position detecting means 2 is within the pixel range set by the parameter setting means 3, the high resolution is maintained and the setting is performed by the parameter setting means 3. If another pixel range other than the pixel range, the distance from the set pixel range by the parameter setting unit 3, Ru continuously Nodea to make Yuku strengthen the function of the low-pass filter.

【００３１】また、上記前処理フィルタ１として、時間
軸フィルタを用いた場合、制御手段４による前処理の状
態を変更する態様としては、画素位置検出手段２で検出
された画素の現位置が、パラメータ設定手段３で設定さ
れた画素範囲から離れるほど、前処理フィルタ１が強い
ローパスフィルタの機能を持つような係数を算出し、こ
の算出された係数を用いて、前処理フィルタのフィルタ
係数を変更する。 When a time axis filter is used as the pre-processing filter 1, the state of the pre-processing by the control means 4 is changed as follows. As the distance from the pixel range set by the parameter setting unit 3 increases, a coefficient is calculated such that the pre-processing filter 1 has a strong low-pass filter function, and the filter coefficient of the pre-processing filter is changed using the calculated coefficient. you.

【００３２】[0032]

【実施例】以下、図面を参照して本発明の実施例を説明
する。 （ａ）第１実施例の説明 図２は本発明の第１実施例を示すブロック図で、この図
２において、１１はデシメーションフィルタ（前処理フ
ィルタ）であり、このデシメーションフィルタ１１は、
第１〜第３デシメーションフィルタ１１−１〜１１−３
をそなえて構成されている。Embodiments of the present invention will be described below with reference to the drawings. (A) Description of First Embodiment FIG. 2 is a block diagram showing a first embodiment of the present invention. In FIG. 2, reference numeral 11 denotes a decimation filter (pre-processing filter).
First to third decimation filters 11-1 to 11-3
It is configured with.

【００３３】この第１〜第３デシメーションフィルタ１
１−１〜１１−３は、図３に示すような構成を有してい
る。つまり、入力した画像データに、タップ数に応じた
遅れ要素を考え、この遅れ（遅れ０を含む）を考慮した
出力について、Ｈ１〜Ｈ７までのフィルタ係数を掛けて
それぞれを加え合わせ〔図３の（ａ）参照〕、加え合わ
せたものを、フィルタ係数ＨＸで割って正規化した後
〔図３の（ｂ）参照〕、間引き要素を通して〔図３の
（ｃ）参照〕、出力するように構成されているのであ
る。The first to third decimation filters 1
Each of 1-1 to 11-3 has a configuration as shown in FIG. That is, a delay element corresponding to the number of taps is considered for the input image data, and an output in consideration of the delay (including the delay 0) is multiplied by filter coefficients H1 to H7 and added together [FIG. (A)], the sum is divided by a filter coefficient HX, normalized (see FIG. 3 (b)), and output through a thinning element (see FIG. 3 (c)). It is being done.

【００３４】ところで、図２における１２は画素位置出
力カウンタ（画素位置検出手段）であり、この画素位置
出力カウンタ１２は、画像に対して縦方向の画素位置を
出力するカウンタ１２−１と、画像に対して横方向の画
素位置を出力するカウンタ１２−２とをそなえて構成さ
れている。カウンタ１２−１には、入力信号として水平
同期信号が入力しており、カウンタ１２−２には、垂直
同期信号が入力している。また、それぞれのカウンタ１
２−１，１２−２に装置内同期を目的とした第１同期信
号，第２同期信号によって同期が取れるようになってい
る。Incidentally, reference numeral 12 in FIG. 2 denotes a pixel position output counter (pixel position detecting means). The pixel position output counter 12 includes a counter 12-1 for outputting a pixel position in the vertical direction with respect to the image, and an image output counter 12-1. And a counter 12-2 for outputting the pixel position in the horizontal direction. The counter 12-1 receives a horizontal synchronization signal as an input signal, and the counter 12-2 receives a vertical synchronization signal. In addition, each counter 1
Synchronization can be achieved with 2-1 and 12-2 by a first synchronization signal and a second synchronization signal for internal synchronization.

【００３５】１３はパラメータ設定装置（パラメータ設
定手段）であり、このパラメータ設定装置１３は、高解
像度を維持する画素範囲に関するパラメータを設定する
ものである。つまり、高解像度を保つべき位置の中心点
の座標（ａ，ｂ）と、画素範囲の中心（ａ，ｂ）から操
作者の指定する高解像度を維持する距離を表すパラメー
タｒと、画像の大きさＡ×Ｂとを指定するようになって
いる。Reference numeral 13 denotes a parameter setting device (parameter setting means) for setting parameters relating to a pixel range for maintaining a high resolution. That is , the operation is performed from the coordinates (a, b) of the center point of the position where the high resolution is to be maintained and the center (a, b) of the pixel range.
A parameter indicating the distance to maintain the high resolution specified by the author
And data r, is adapted to specify the size of A × B of images.

【００３６】１４は制御装置（制御手段）であり、この
制御装置１４は、デシメーションフィルタ１１による前
処理の状態を変更しうるものであり、絶対値のノルム計
算部１５−１と、比較部１６−１〜１６−３と、ＲＯＭ
１７と、第１，第２メモリ１８−１，１８−２と、比較
基準値設定部１５−２とをそなえて構成されている。こ
こで、絶対値のノルム計算部１５−１は、操作者から入
力された画像における中心に据えるべき位置の座標
（ａ，ｂ）と、画素位置出力カウンタ１２から送出され
た現在の画素位置の座標（ｘ，ｙ）との間で、絶対値の
ノルム（絶対値和）を計算するものである。そして、こ
の値を双方（座標間）の距離ｕとして比較部１６〜１６
−３に出力するようになっている。具体的には、絶対値
のノルム計算部１５−１は、減算器１５ａ，１５ｂ，絶
対値演算部１５ｃ，１５ｄおよび加算器１５ｅをそなえ
て構成されている。減算器１５ａは２つの座標[（ａ，
ｂ）および（ｘ，ｙ）]における一方の座標成分の差分
（ｘ−ａ）を演算するもので、減算器１５ｂは２つの座
標における他方の座標成分の差分（ｙ−ｂ）を演算する
もので、絶対値演算部１５ｃ，１５ｄはそれぞれ減算器
１５ａ，１５ｂからの減算結果について絶対値を演算す
るもので、加算器１５ｅは、２つの絶対値演算部１５
ｃ，１５ｄからの出力について加算して後段の３つの比
較部１６−１〜１６−３に出力するものである。これに
より、絶対値のノルム計算部１５−１においては、画素
範囲の中心の画素の位置座標（ａ，ｂ）と現在の画素の
位置座標（ｘ，ｙ）との間で絶対値のノルム（｜ｘ−ａ
｜＋｜ｙ−ｂ｜）を演算するようになっている。Reference numeral 14 denotes a control device (control means) which can change the state of the pre-processing by the decimation filter 11, and includes a norm calculation unit 15-1 for an absolute value and a comparison unit 16 -1 to 16-3 and ROM
17, first and second memories 18-1 and 18-2, and a comparison reference value setting unit 15-2. Here, the absolute value norm calculation unit 15-1 calculates the coordinates (a, b) of the position to be set at the center of the image input by the operator and the current pixel position sent from the pixel position output counter 12. The norm of the absolute value (sum of absolute values) is calculated with respect to the coordinates (x, y). Then, this value is set as the distance u between the two points (between the coordinates),
-3. More specifically, the absolute value norm calculation unit 15-1 includes subtractors 15a and 15b, absolute value calculation units 15c and 15d, and an adder 15e. The subtractor 15a calculates two coordinates [(a,
b) and (x, y)] to calculate the difference (x−a) of one coordinate component, and the subtractor 15b calculates the difference (y−b) of the other coordinate component in two coordinates. The absolute value calculators 15c and 15d calculate the absolute values of the subtraction results from the subtracters 15a and 15b, respectively. The adder 15e includes two absolute value calculators 15c and 15d.
The outputs from c and 15d are added and output to the subsequent three comparison units 16-1 to 16-3. As a result, the norm calculation unit 15-1 for the absolute value calculates the norm of the absolute value between the position coordinates (a, b) of the pixel at the center of the pixel range and the position coordinates (x, y) of the current pixel. | Xa
| + | Y−b |) is calculated.

【００３７】比較部１６−１〜１６−３は、絶対値のノ
ルムと比較基準値設定部１５−２からの基準値との比較
を行なうものである。即ち、比較部１６−１〜１６−３
は、絶対値のノルムと操作者の入力したパラメータｒと
の間、及び絶対値のノルムと画像の大きさ（Ａ，Ｂ）と
パラメータｒを用いた所望の計算結果との間の値の比較
により、フィルタをかける状況をかえるものである。つ
まり、画像の中心からの距離に従って、フィルタをかけ
る状況を変えることにより、解像度を変化させるように
なっている。The comparison sections 16-1 to 16-3 compare the norm of the absolute value with the reference value from the comparison reference value setting section 15-2. That is, the comparison units 16-1 to 16-3
Is to compare the value between the norm of the absolute value and the parameter r input by the operator, and the value between the norm of the absolute value and the image size (A, B) and the desired calculation result using the parameter r. Changes the state of filtering. That is, the resolution is changed by changing the state of applying the filter according to the distance from the center of the image.

【００３８】ＲＯＭ１７は、比較部１６−１〜１６−３
から出力される比較結果を受けて、この比較結果を元に
デコードした結果を、スイッチング信号ＳＷ１〜ＳＷ３
としてスイッチ１９に出力するもので、これにより、デ
シメーションフィルタ１１−１〜１１−３を切り替える
ことができるようになっている。第１メモリ１８−１，
第２メモリ１８−２には、フィルタ係数が記憶されてお
り、スイッチ１９によって、フィルタリングの要求され
たフィルタに、フィルタ係数が書き込まれるようになっ
ている。The ROM 17 stores comparison units 16-1 to 16-3.
And outputs the result of decoding based on the comparison result to the switching signals SW1 to SW3.
Is output to the switch 19, whereby the decimation filters 11-1 to 11-3 can be switched. The first memory 18-1,
A filter coefficient is stored in the second memory 18-2, and the switch 19 writes the filter coefficient to the filter for which filtering is requested.

【００３９】ここで、フィルタ係数とは、フィルタリン
グによる解像度の低下の度合いを示すものである。本実
施例では、フィルタ係数として７次のもの〔Ｈ＝（Ｈ
１，Ｈ２，…，Ｈ７，ＨＸ）〕を用いている。上述の構
成により、本発明の第１実施例としての画像データ前処
理フィルタ装置では、図４に示すようなフローチャート
に従って動作する。Here, the filter coefficient indicates the degree of resolution reduction caused by filtering. In the present embodiment, the seventh order filter coefficient [H = (H
, H2,..., H7, HX)]. With the above-described configuration, the image data preprocessing filter device as the first embodiment of the present invention operates according to the flowchart shown in FIG.

【００４０】まず、ステップＡ１で、画像の大きさ（Ａ
×Ｂ），操作者よりのパラメータ〔（ａ，ｂ），ｒ〕
，現在の位置（ｘ×ｙ）出力フィルタの係数Ｈ＝〔Ｈ
＝（Ｈ１，Ｈ２，…，Ｈ７，ＨＸ）〕を設定する。ここ
で、単眼〜多眼の２次元画像の場合において、画像の大
きさはＡ×Ｂ画素であり、入力画像はもともと高解像度
のものとする。また、操作者よりのパラメータは、高解
像度を保ちたい位置の中心点（ａ，ｂ）と、高解像度を
保つ中心点（ａ，ｂ）からどのくらいまでの大きさを高
解像度のままにするかをあらわすパラメータｒとする。
これらのパラメータ（ａ，ｂ），ｒは、操作者により図
２におけるパラメータ設定装置１３から入力され、制御
装置１４に出力される。First, in step A1, the size of the image (A
× B), parameters from the operator [(a, b), r]
, Current position (x × y) output filter coefficient H = [H
= (H1, H2, ..., H7, HX)]. Here, in the case of a monocular to multi-view two-dimensional image, the size of the image is A × B pixels, and the input image is originally of high resolution. The parameters from the operator include the center point (a, b) of the position where the high resolution is desired to be maintained and the size from the center point (a, b) at which the high resolution is to be maintained at the high resolution. Is defined as a parameter r.
These parameters (a, b) and r are input by the operator from the parameter setting device 13 in FIG.

【００４１】また、画素位置出力カウンタ１２により出
力された現在の位置を（ｘ，ｙ）とし、出力するフィル
タの係数を７次とし、Ｈ＝（Ｈ１，Ｈ２，・・・，Ｈ
７，ＨＸ）とする。なお、このフィルタ係数は、メモリ
１８−１，１８−２に格納されている。次に、ステップ
Ａ２で、現在位置と中心までの大まかな距離ｕを求め、
このｕを、比較部１６−１によって操作者からのパラメ
ータｒと比較する。ここで、本来距離は２乗誤差平均で
あるが、簡単のため絶対値和としている。The current position output from the pixel position output counter 12 is (x, y), the coefficient of the filter to be output is 7th order, and H = (H1, H2,..., H
7, HX). The filter coefficients are stored in the memories 18-1 and 18-2. Next, in step A2, a rough distance u between the current position and the center is obtained,
This u is compared with the parameter r from the operator by the comparing unit 16-1. Here, the distance is originally an average of the square error, but for simplicity, the sum is the absolute value sum.

【００４２】ｕがｒより小さければ、ステップＡ３で、
高解像度を維持するためフィルタをかけずにスルーとす
る。したがって、中心の係数Ｈ４，正規化係数ＨＸは
１、その他のＨｉは０となる。また、ステップＡ２でｕ
がｒ以上であることが判断されると、ステップＡ４で、
このｕと（Ａ＋Ｂ＋４×ｒ）／６との大小関係を、比較
部１６−２が調べる。ここで、ｕが（Ａ＋Ｂ＋４×ｒ）
／６より小さければ、ステップＡ５で、解像度を縦１／
２とする。If u is smaller than r, in step A3,
To maintain high resolution, pass through without filtering. Therefore, the center coefficient H4 and the normalization coefficient HX are 1, and the other Hi are 0. Also, in step A2, u
Is greater than or equal to r, at step A4,
The comparing unit 16-2 checks the magnitude relationship between u and (A + B + 4 × r) / 6. Here, u is (A + B + 4 × r)
If it is smaller than / 6, the resolution is set to 1 / vertical in step A5.
Let it be 2.

【００４３】つまり、ステップＡ６で、図１３で示した
公知のデシメーションフィルタを１回用いることによ
り、解像度を縦１／２にする。ここで、図１３で示した
デシメーションフィルタのフィルタ係数は、Ｈ＝（Ｈ１
〜Ｈ７，ＨＸ）の順でＨ＝（−２９，０，８８，１３
８，８８，０，−２９，２５６）である。この際、ＲＯ
Ｍ１７の出力を受けたスイッチ１９は、フィルタが１回
かかるようにスイッチングしている。That is, in step A6, the resolution is reduced to half the height by using the known decimation filter shown in FIG. 13 once. Here, the filter coefficient of the decimation filter shown in FIG. 13 is H = (H1
H = (− 29,0,88,13) in the order of H7, HX).
8, 88, 0, -29, 256). At this time, RO
The switch 19 receiving the output of M17 switches so that the filter is applied once.

【００４４】ここで、（Ａ＋Ｂ＋４×ｒ）／６の式の意
味は、ｕは０から（Ａ＋Ｂ）／２の値をとり、ｒから
（Ａ＋Ｂ）／２までを３等分（＝（Ａ＋Ｂ−２ｒ）／
２）してしきい値とし、解像度を１／２，１／４，１／
８と３段階に分けて処理しようというものである。従っ
て、ステップＡ４で、ｕが（Ａ＋Ｂ＋４×ｒ）／６より
大きい場合は、ステップＡ７で、同様にして（Ａ＋Ｂ＋
ｒ）／３との大小関係を、比較部１６−３によって調べ
る。ここで、（Ａ＋Ｂ＋４×ｒ）／６以上で、（Ａ＋Ｂ
＋ｒ）／３より小さいと判断されれば、ステップＡ８
で、解像度を縦横共に１／２，すなわち全体として解像
度を１／４とする。Here, the expression (A + B + 4 × r) / 6 means that u takes a value from 0 to (A + B) / 2 and divides r to (A + B) / 2 into three equal parts (= (A + B− 2r) /
2) to set a threshold, and set the resolution to 1/2, 1/4, 1 /
The processing is divided into eight and three stages. Therefore, if u is greater than (A + B + 4 × r) / 6 in step A4, similarly in step A7, (A + B +
The magnitude relationship with r) / 3 is examined by the comparison unit 16-3. Here, if (A + B + 4 × r) / 6 or more, (A + B
+ R) / 3, it is determined in step A8
In this case, the resolution is １ ／ in both the vertical and horizontal directions, that is, the resolution is １ ／ as a whole.

【００４５】つまり、ステップＡ９で、公知のデシメー
ションフィルタを２回用いる。ここで用いるデシメーシ
ョンフィルタについても図１３で示したものと同様のも
のであり、スイッチング動作についてもステップＡ６の
場合と同様である。ステップＡ７でｕが（Ａ＋Ｂ＋ｒ）
／３より大きいと判断されれば、ステップＡ１０で、縦
に２回、横に１回フィルタをかけて解像度を１／８にす
る。つまり、ステップＡ１１で、ステップＡ６，ステッ
プＡ９等で用いた公知のデシメーションフィルタを３回
かける。フィルタのかけかた自体は前述の場合のステッ
プＡ６，ステップＡ９の場合と同様である。That is, in step A9, a known decimation filter is used twice. The decimation filter used here is the same as that shown in FIG. 13, and the switching operation is also the same as that in step A6. U is (A + B + r) in step A7
If it is determined to be larger than / 3, the resolution is reduced to 1/8 by applying a filter twice vertically and once horizontally in step A10. That is, in step A11, the known decimation filter used in step A6, step A9, etc. is applied three times. The way of applying the filter itself is the same as that in steps A6 and A9 in the case described above.

【００４６】なお、本実施例では、デシメーションフィ
ルタ１１は３つを並べて構成したものであるが、解像度
を更に細かく分割するために、ｎ個（ｎは任意の自然
数）のフィルタを本実施例と同様に並べて構成すること
も可能である。また、本実施例では、単眼〜多眼の２次
元画像の場合であるが、次元数を拡張して３次元ボリュ
ームデータにも適用することができる。多眼式で両眼視
差により立体視を行なっているのではなく、３次元ボリ
ュームデータを用いて奥行き方向に情報を持つ場合でも
操作者からみれば、作業を行ないやすい空間的な位置が
大体決まっており、２次元から３次元への単なる拡張に
過ぎないからである。In this embodiment, the decimation filter 11 is constructed by arranging three filters. However, in order to further divide the resolution, n (n is an arbitrary natural number) filters are used in this embodiment. Similarly, they can be arranged side by side. Further, in the present embodiment, the case of a two-dimensional image from a single eye to a multi-eye is used, but the present invention can be applied to three-dimensional volume data by expanding the number of dimensions. Rather than performing stereoscopic vision with binocular parallax in a multi-view system, even if information is provided in the depth direction using three-dimensional volume data, from the viewpoint of the operator, a spatial position where work is easy to perform is roughly determined. Because it is merely an extension from two dimensions to three dimensions.

【００４７】ところで、３次元ボリュームデータは３次
元立体表示の１種であり、３次元空間内の各点が値を持
つものである。画像データの現れかたにより、被写体
の表面のみならず、中身のデータをも持つ場合，被写
体の表面のみのデータを持つ場合，被写体のある方向
から見た表面のデータだけを持つ場合の３つの場合に分
けられる。Incidentally, the three-dimensional volume data is a kind of three-dimensional display, and each point in the three-dimensional space has a value. Depending on the appearance of the image data, there are three types of cases: having not only the surface of the subject but also the data of the contents, having data of only the surface of the subject, and having only data of the surface viewed from a certain direction of the subject. Divided into cases.

【００４８】第１の場合における、被写体の表面のみな
らず、中身のデータをも持つ場合では、ＣＴスキャン等
で得られた３次元データは、被写体に中身まで透視する
ため、中身の情報を持つ。医療向けのデータとして扱わ
れることが多いものである。第２の場合における、被写
体の表面のみのデータを持つ場合では、被写体のデータ
を、違う確度からカメラ複数台を用いて取り込んで、奥
行きを推定した場合。このため、被写体の中身のデータ
は存在しないものである。In the first case, when not only the surface of the subject but also the data of the contents are contained, the three-dimensional data obtained by the CT scan or the like has the contents information in order to see through the contents to the subject. . It is often treated as medical data. In the second case, in the case where the data of only the surface of the subject is stored, the depth of the subject is estimated by capturing the data of the subject from a plurality of cameras with different degrees of accuracy. Therefore, there is no data of the contents of the subject.

【００４９】第３の場合における、被写体のある方向か
ら見た表面のデータだけを持つ場合では、被写体のデー
タを、ある角度からカメラ１台、あるいは複数台を用い
て取り込んで、奥行き推定する。このため、被写体のあ
る方向から見た表面のデータのみ存在する。もちろん、
中身のデータは存在しないものである。このように、デ
シメーションフィルタ１１と画素位置出力カウンタ１２
とパラメータ設定装置１３と制御装置１４が設けられる
ことにより、予め設定された画素範囲から離れるほど、
解像度が低くなるようにデシメーションフィルタ１１の
フィルタ係数を設定することができる。具体的には、パ
ラメータ設定装置１３で設定された画素範囲以外の他の
画素範囲である場合は、この設定された画素範囲から離
れるに従って段階的に解像度を下げることにより、必要
な中心部の解像度の劣化を防ぎ、その他の部分について
は解像度を落とし、符号化を容易にすることができる。In the third case, when only the data of the surface of the object viewed from a certain direction is included, the data of the object is fetched from a certain angle using one camera or a plurality of cameras, and the depth is estimated. For this reason, there is only data of the surface of the subject viewed from a certain direction. of course,
The contents data does not exist. Thus, the decimation filter 11 and the pixel position output counter 12
And the parameter setting device 13 and the control device 14, the further away from the preset pixel range,
The filter coefficient of the decimation filter 11 can be set so that the resolution becomes low. Specifically, when the pixel range is other than the pixel range set by the parameter setting device 13, the resolution is gradually reduced as the distance from the set pixel range is increased, so that the required resolution of the central portion is reduced. Can be prevented from deteriorating, the resolution of the other portions can be reduced, and encoding can be facilitated.

【００５０】さらに、パラメータ設定装置１３が、高解
像度を維持する画素範囲として、画素範囲の中心の画素
の位置と画素範囲の中心からの距離とをパラメータとし
て設定し、かつその距離を中心からのノルムを用いるこ
とにより、計算が簡略化し、システムの縮小化及び処理
速度の向上に貢献することができる。 （ｂ）第２実施例の説明 図５は、本発明の第２実施例を示すブロック図であり、
この図５において、２１はノイズリデューサ（前処理フ
ィルタ）であり、このノイズリデューサ２１は、ノイズ
が原因で符号化における処理能力の低下を生じるのを防
ぐために用いるものであって、ローパスフィルタの機能
を有している。また、このノイズリデューサ２１は、横
及び縦方向の画素方向において発生するノイズに対応し
２段の構成を有している。Further, the parameter setting device 13 sets the position of the pixel at the center of the pixel range and the distance from the center of the pixel range as parameters as a pixel range for maintaining high resolution, and sets the distance from the center as a parameter. The use of the norm simplifies the calculation and contributes to a reduction in the size of the system and an improvement in the processing speed. (B) Description of Second Embodiment FIG. 5 is a block diagram showing a second embodiment of the present invention.
In FIG. 5, reference numeral 21 denotes a noise reducer (pre-processing filter). The noise reducer 21 is used to prevent a reduction in processing performance in encoding due to noise, and functions as a low-pass filter. have. Further, the noise reducer 21 has a two-stage configuration corresponding to noise generated in the horizontal and vertical pixel directions.

【００５１】なお、このノイズリデューサ２１の各段の
構成は、前記デシメーションフィルタ１１の間引き要素
を除いた構成とほぼ同様のものとなっており、各段は、
数ラインディレイＤ３を介して結合されている。なお、
前段のディレイＤ１は、画素ディレイ，後段のディレイ
Ｄ３は、ラインディレイである。２２は画素位置出力カ
ウンタ（画素位置検出手段）であり、この画素位置出力
カウンタ２２は、画像に対して縦方向の画素位置を出力
するカウンタ２２−１と、画像に対して横方向の画素位
置を出力するカウンタ２２−２をそなえて構成されてい
る。The configuration of each stage of the noise reducer 21 is almost the same as the configuration except for the decimation element of the decimation filter 11.
They are connected via a several line delay D3. In addition,
The first-stage delay D1 is a pixel delay, and the second-stage delay D3 is a line delay. Reference numeral 22 denotes a pixel position output counter (pixel position detection means). The pixel position output counter 22 outputs a pixel position in the vertical direction with respect to the image, and a pixel position output counter 22-1 in the horizontal direction with respect to the image. Is output.

【００５２】カウンタ２２−１には、入力信号として水
平同期信号が入力しており、カウンタ２２−２には、垂
直同期信号が入力している。また、それぞれのカウンタ
２２−１，２２−２は装置内同期を目的とした第１同期
信号，第２同期信号によって同期が取られるようになっ
ている。従って、この画素位置出力カウンタ２２は、本
発明の第１実施例における画素位置出力カウンタ１２と
同様の機能を有するものである。The counter 22-1 receives a horizontal synchronization signal as an input signal, and the counter 22-2 receives a vertical synchronization signal. The counters 22-1 and 22-2 are synchronized by a first synchronization signal and a second synchronization signal for internal synchronization. Therefore, the pixel position output counter 22 has the same function as the pixel position output counter 12 in the first embodiment of the present invention.

【００５３】２３はパラメータ設定装置（パラメータ設
定手段）であり、このパラメータ設定装置２３は、高解
像度を維持する画素範囲に関するパラメータを設定して
制御装置２４に出力するものである。つまり、操作者の
設定する高解像度を維持する広さを表すパラメータｒと
高解像度を保つべき位置の中心点の座標（ａ，ｂ）と画
像の大きさＡ×Ｂとを制御装置２４に出力するようにな
っている。Reference numeral 23 denotes a parameter setting device (parameter setting means) for setting parameters relating to a pixel range for maintaining high resolution and outputting the parameters to the control device 24. That is, the parameter r representing the width set by the operator to maintain the high resolution, the coordinates (a, b) of the center point of the position to maintain the high resolution, and the image size A × B are output to the control device 24. It is supposed to.

【００５４】２４は制御装置（制御手段）であり、この
制御装置２４は、ノイズリデューサ２１による前処理の
状態を変更しうるものであり、第１演算部２５と第２演
算部２６とリミッタ２７とフィルタ係数決定部２８とを
そなえて構成されている。第１演算部２５は、操作者か
らパラメータ設定装置２３を介して入力された画像にお
ける中心に据えるべき位置の座標（ａ，ｂ）と、画素位
置出力カウンタ２２から送出された現在の画素位置の座
標（ｘ，ｙ）との間で、絶対値のノルムを計算するもの
である。そして、この値を距離ｕとして第２演算部２６
に出力するようになっている。Reference numeral 24 denotes a control device (control means) which can change the state of the pre-processing by the noise reducer 21, and includes a first operation unit 25, a second operation unit 26, and a limiter 27. And a filter coefficient determination unit 28. The first calculation unit 25 calculates the coordinates (a, b) of the position to be set at the center in the image input from the operator via the parameter setting device 23 and the current pixel position sent from the pixel position output counter 22. The norm of the absolute value is calculated with respect to the coordinates (x, y). Then, this value is set as the distance u,
Output.

【００５５】第２演算部２６は、絶対値のノルムｕと操
作者の入力したパラメータｒを用いた所望の演算結果ｋ
を算出するものであって、この演算結果により、フィル
タをかける状況を変えることができるようになってい
る。リミッタ２７は、演算結果が適正なものでなかった
場合に、限界値を設定するものである。例えば、現在の
画素位置が高解像度を維持すべき領域にあり、ｋが負と
なるような場合である。The second calculation unit 26 calculates a desired calculation result k using the norm u of the absolute value and the parameter r input by the operator.
Is calculated, and it is possible to change the situation of applying the filter based on the calculation result. The limiter 27 sets a limit value when the calculation result is not proper. For example, there is a case where the current pixel position is in an area where high resolution is to be maintained and k becomes negative.

【００５６】フィルタ係数決定部２８は、リミッタ２７
から出力されたｋについて所要の演算を行なって、それ
ぞれのフィルタ係数として出力するものである。ここ
で、それぞれのフィルタ係数に関する演算は、Ｈ３＝ｋ
⁰ ＝１，Ｈ２＝Ｈ４＝ｋ¹ ＝ｋ，Ｈ１＝Ｈ５＝ｋ² とす
る。上述の構成により、本発明の第２実施例としての画
像データ前処理フィルタ装置は、図６に示すようなフロ
ーチャートに従って動作する。The filter coefficient determination section 28 includes a limiter 27
The required operation is performed on k output from, and output as respective filter coefficients. Here, the calculation for each filter coefficient is H3 = k
⁰ = 1, and ^{H2 = H4 = k 1 = k} , H1 = H5 = k 2. With the above-described configuration, the image data preprocessing filter device according to the second embodiment of the present invention operates according to the flowchart shown in FIG.

【００５７】まず、ステップＢ１で、画素位置出力カウ
ンタ２２，パラメータ設定装置２３，及びパラメータ設
定装置２３を通じて操作者が設定する初期設定値を入力
する。つまり、画素位置出力カウンタ２２から画素の現
在位置（ｘ，ｙ）を入力する。そして、パラメータ設定
装置２３は、画像の大きさをＡ×Ｂ画素として制御装置
２４に入力する。また、操作者の設定するパラメータと
して高解像度を保つべき位置の中心点を（ａ，ｂ）及び
高解像度を維持する範囲を表すｒを、制御装置２４に入
力する。First, in step B1, an initial set value set by the operator is input through the pixel position output counter 22, the parameter setting device 23, and the parameter setting device 23. That is, the current pixel position (x, y) is input from the pixel position output counter 22. Then, the parameter setting device 23 inputs the size of the image to the control device 24 as A × B pixels. Also, as parameters set by the operator, (a, b) the center point of the position where the high resolution is to be maintained and r representing the range in which the high resolution is maintained are input to the control device 24.

【００５８】なお、入力画像はもともと高解像度のもの
とし、また出力するフィルタの係数は５次〔Ｈ＝（Ｈ
１，Ｈ２，・・・，Ｈ５，ＨＸ）〕とする。上述のよう
にステップＢ１で、初期設定が完了すると、ステップＳ
２で、制御装置２４における第１演算部２５によって、
パラメータ設定装置２３より入力された（ａ，ｂ）と、
画素位置出力カウンタ２２より入力された（ｘ，ｙ）を
用いて算出する位置（ａ，ｂ）と位置（ｘ，ｙ）の絶対
値のノルムｕを、２点間の距離として第２演算部２６に
出力する。本来距離は２乗誤差平均であるが、簡単のた
め絶対値和としている。It is to be noted that the input image is originally of a high resolution, and the coefficient of the filter to be output is the fifth order [H = (H
1, H2,..., H5, HX)]. When the initial setting is completed in step B1 as described above, step S
In 2, the first arithmetic unit 25 in the control device 24
(A, b) input from the parameter setting device 23,
The second computing unit sets the absolute value norm u of the position (a, b) and the position (x, y) calculated using (x, y) input from the pixel position output counter 22 as the distance between the two points. 26. The distance is originally a mean square error, but for simplicity, the sum is an absolute value.

【００５９】さらに、第２演算部２６では、第１演算部
２５より入力されたｕと、パラメータ設定装置２３より
入力されたｒ，Ａ，Ｂ，２を用いて、ｋ＝２×（ｕ−
ｒ）／（Ａ＋Ｂ−２ｒ）を算出する。この式の意味は次
のとおりである。まず、ｕ＜ｒの場合は高解像度を維持
するままなのでとりあえず考えにはいれないこととす
る。ｕのとりうる最大値は概ね（Ａ＋Ｂ）／２となるの
で、ｕの変動する範囲は、 ｒ＜ｕ＜（Ａ＋Ｂ）／２ （１） となるが、真ん中のｕの変動範囲を０から１までに正規
化した場合、 ０＜ｕ−ｒ＜（Ａ＋Ｂ）／２−ｒ （２） ０＜２×（ｕ−ｒ）／（Ａ＋Ｂ−２ｒ）＜１ （３） ２×（ｕ−ｒ）／（Ａ＋Ｂ−２ｒ）をｋにおきかえれ
ば、０＜ｋ＜１となる。すなわち、上記のようにｋを設
定すれば、ｋは０と１との間に入るのである。Further, the second operation unit 26 uses k input from the first operation unit 25 and r, A, B, and 2 input from the parameter setting unit 23 to obtain k = 2 × (u−
r) / (A + B-2r) is calculated. The meaning of this expression is as follows. First, in the case of u <r, high resolution is maintained, so that it is not considered for the time being. Since the maximum value that u can take is approximately (A + B) / 2, the range in which u fluctuates is r <u <(A + B) / 2 (1), but the range in which the middle u fluctuates is from 0 to 1. When normalized to 0 <ur- (A + B) / 2-r (2) 0 <2x (ur) / (A + B-2r) <1 (3) 2x (ur) If / (A + B-2r) is replaced by k, 0 <k <1. That is, if k is set as described above, k falls between 0 and 1.

【００６０】さて、ステップＢ３で、ｋ＜０となる場合
は、ｕ＜ｒとなる場合であるので、高解像度を維持する
必要があり、フィルタリングする必要がない。従って、
ステップＢ４で、リミッタ２７の動作によりｋ＝０とリ
ミッタをかける。それ以外は、ステップＢ５で、フィル
タ係数決定部２８により、フィルタ係数をＨ３＝ｋ⁰ ＝
１，Ｈ２＝Ｈ４＝ｋ¹ ＝ｋ，Ｈ１＝Ｈ５＝ｋ² と設定
し、ノイズリデューサ２１で画像データを縦及び横方向
にフィルタリングする。When k <0 in step B3, u <r, so that it is necessary to maintain a high resolution and no filtering is required. Therefore,
In step B4, a limiter is set to k = 0 by the operation of the limiter 27. Otherwise, in step B5, the filter coefficient determination unit 28 sets the filter coefficient to H3 = k ⁰ =
^{1, H2 = H4 = k 1} = k, H1 = H5 = k 2 and sets, to filter the image data in the vertical and horizontal directions by the noise reducer 21.

【００６１】つまり、このノイズリデューサ２１では、
入力した画像データに、横方向の画素のタイミングをデ
ィレイ（Ｄ１）により取って、Ｈ１〜Ｈ５までのフィル
タ係数を掛けてそれぞれを加え合わせ、加え合わせたも
のはフィルタ係数ＨＸで割る。次に画面端部における縦
方向の画素のタイミングを、ディレイ（Ｄ３）により取
る。そして縦方向の画素のタイミングをディレイ（Ｄ
２）により取る。加え合わせたものは、フィルタ係数Ｈ
Ｘで割り、出力させる。That is, in this noise reducer 21,
The input image data is obtained by taking the timing of the pixels in the horizontal direction by a delay (D1), multiplying the input image data by filter coefficients H1 to H5, and adding them, and dividing the added result by the filter coefficient HX. Next, the timing of pixels in the vertical direction at the edge of the screen is determined by a delay (D3). Then, the timing of pixels in the vertical direction is delayed (D
Take by 2). The sum is the filter coefficient H
Divide by X and output.

【００６２】なお、本実施例では、単眼〜多眼の２次元
画像の場合であるが、次元数を拡張して、既述の３次元
ボリュームデータにも適用することができる。多眼式で
両眼視差により立体視を行なっているのではなく、３次
元ボリュームデータを用いて奥行き方向に情報を持つ場
合でも操作者からみれば、作業を行ないやすい空間的な
位置が大体決まっており、２次元から３次元への単なる
拡張に過ぎないからである。このように、ノイズリデュ
ーサ２１と画素位置出力カウンタ２２とパラメータ設定
装置２３と制御装置２４が設けられることにより、予め
設定された画素範囲から離れるほど、解像度が低くなる
ようにノイズリデューサ２１が強いローパスフィルタの
機能を持つようにすることができる。具体的には、画素
位置出力カウンタ２２で出力された画素の現位置が、パ
ラメータ設定装置２３で設定された画素範囲である場合
は、高解像度を維持し、パラメータ設定装置２３で設定
された画素範囲以外の他の画素範囲である場合は、パラ
メータ設定装置で設定された画素範囲から離れるに従っ
て連続的にローパスフィルタの機能を強めてゆくことに
より、画像の特定したある部分だけ高解像度とし、その
他の部分を解像度を低くして符号化を容易にすることが
できる。In this embodiment, the case of a monocular to multi-view two-dimensional image is used. However, the present invention can be applied to the above-described three-dimensional volume data by extending the number of dimensions. Rather than performing stereoscopic vision with binocular parallax in a multi-view system, even if information is provided in the depth direction using three-dimensional volume data, from the viewpoint of the operator, a spatial position where work is easy to perform is roughly determined. Because it is merely an extension from two dimensions to three dimensions. As described above, the noise reducer 21, the pixel position output counter 22, the parameter setting device 23, and the control device 24 are provided, so that the noise reducer 21 has a strong low-pass so that the resolution decreases as the distance from the pixel range set in advance decreases. It can have the function of a filter. Specifically, when the current position of the pixel output by the pixel position output counter 22 is within the pixel range set by the parameter setting device 23, the high resolution is maintained and the pixel set by the parameter setting device 23 is set. In the case of a pixel range other than the range, the function of the low-pass filter is continuously strengthened as the distance from the pixel range set by the parameter setting device is increased, so that only a specified portion of the image is set to high resolution, and Can be easily lowered by lowering the resolution.

【００６３】さらに、パラメータ設定装置２３が、高解
像度を維持する画素範囲として、画素範囲の中心の画素
の位置と画素範囲の中心からの距離とをパラメータとし
て設定し、かつその距離を中心からのノルムを用いるこ
とにより、計算が簡略化し、システムの縮小化及び処理
速度の向上に貢献することができる。 （ｃ）第３実施例の説明 図７は、本発明の第３実施例を示すブロック図であり、
この図７において、３１は時間軸フィルタ（前処理フィ
ルタ）であり、この時間軸フィルタ３１は、フレームメ
モリ３１−１をそなえることにより、動画像の動きに適
応して過去の画像の情報をも取り入れる時間軸方向のロ
ーパスフィルタの働きを有するものである。Further, the parameter setting device 23 sets the position of the pixel at the center of the pixel range and the distance from the center of the pixel range as parameters as a pixel range for maintaining high resolution, and sets the distance from the center as a parameter. The use of the norm simplifies the calculation and contributes to a reduction in the size of the system and an improvement in the processing speed. (C) Description of Third Embodiment FIG. 7 is a block diagram showing a third embodiment of the present invention.
In FIG. 7, reference numeral 31 denotes a time axis filter (pre-processing filter). The time axis filter 31 includes a frame memory 31-1 to adapt to the motion of a moving image and store information of a past image. It has a function of a low-pass filter in the time axis direction to be taken in.

【００６４】３２は画素位置出力カウンタ（画素位置検
出手段）であり、この画素位置出力カウンタ３２は、画
像に対して縦方向の画素位置を出力するカウンタ３２−
１と、画像に対して横方向の画素位置を出力するカウン
タ３２−２をそなえて構成されており、前述の第２実施
例における画素位置出力カウンタ２２と同様の機能を有
するものである。Reference numeral 32 denotes a pixel position output counter (pixel position detection means). The pixel position output counter 32 outputs a vertical pixel position with respect to an image.
1 and a counter 32-2 for outputting the pixel position in the horizontal direction with respect to the image, and has the same function as the pixel position output counter 22 in the second embodiment described above.

【００６５】３３はパラメータ設定装置（パラメータ設
定手段）であり、このパラメータ設定装置３３は、高解
像度を維持する画素範囲に関するパラメータを設定して
制御装置３４に出力するものである。つまり、操作者の
設定する高解像度を維持する広さを表すパラメータｒと
高解像度を保つべき位置の中心点の座標（ａ，ｂ）と画
像の大きさＡ×Ｂとを制御装置３４に出力するようにな
っている。Reference numeral 33 denotes a parameter setting device (parameter setting means) for setting parameters relating to a pixel range for maintaining high resolution and outputting the parameters to the control device 34. That is, the parameter r representing the width set by the operator to maintain the high resolution, the coordinates (a, b) of the center point of the position where the high resolution is to be maintained, and the image size A × B are output to the control device 34. It is supposed to.

【００６６】制御装置３４（制御手段）は、時間軸フィ
ルタ３１による前処理の状態を変更しうるものであり、
第１演算部３５と第２演算部３６とリミッタ３７とフィ
ルタ係数決定部３８とをそなえて構成されている。ここ
で、図７では、制御装置３４は、第２実施例における制
御装置２４と、構成する各部ともほぼ同様の機能を有す
るものであるため、簡略化した形式で示した。The control device 34 (control means) can change the state of pre-processing by the time axis filter 31.
It comprises a first operation unit 35, a second operation unit 36, a limiter 37, and a filter coefficient determination unit 38. Here, in FIG. 7, the control device 34 is shown in a simplified form, since each component constituting the control device 24 has substantially the same function as the control device 24 in the second embodiment.

【００６７】つまり、第１演算部３５は、操作者からパ
ラメータ設定装置３３を介して入力された画像における
中心に据えるべき位置の座標（ａ，ｂ）と、画素位置出
力カウンタ３２から送出された現在の画素位置の座標
（ｘ，ｙ）との間で、絶対値のノルムを計算し、この値
を距離ｕとして第２演算部３６に出力するもので、前記
第２実施例における第１演算部２５と同様の機能をもつ
ものである。That is, the first computing unit 35 sends the coordinates (a, b) of the position to be set at the center of the image input from the operator via the parameter setting device 33 and the pixel position output counter 32. It calculates the norm of the absolute value between the coordinates (x, y) of the current pixel position and outputs this value as the distance u to the second calculation unit 36. The first calculation in the second embodiment is performed. It has the same function as the unit 25.

【００６８】第２演算部３６は、絶対値のノルムｕと操
作者の入力したパラメータｒとの間、及び絶対値のノル
ムと画像の大きさ（Ａ，Ｂ）とパラメータｒを用いた所
望の演算結果ｋを算出するものであって、この演算結果
により、フィルタをかける状況を変えることができるよ
うになっている。従って、この第２演算部３６は、前記
第２演算部２６と同様の機能をもつものである。The second arithmetic unit 36 calculates a desired value between the norm u of the absolute value and the parameter r input by the operator, and the norm of the absolute value, the image size (A, B) and the parameter r. The calculation result k is calculated, and the filtering condition can be changed according to the calculation result. Therefore, the second operation unit 36 has the same function as the second operation unit 26.

【００６９】リミッタ３７は、演算結果が適正なもので
なかった場合に、限界値を設定するものである。例え
ば、現在の画素位置が高解像度を維持すべき領域にあ
り、ｋが負となるような場合である。従って、このリミ
ッタ３７についても、前記第２実施例におけるリミッタ
２７と同様の機能を有するものである。フィルタ係数決
定部３８は、リミッタ３７から出力されたｋについて所
要の演算を行なって、それぞれのフィルタ係数として出
力するものである。ここで、それぞれのフィルタ係数に
関する演算は、Ｈ１＝１−ｋ，Ｈ２＝ｋとして行なわれ
ているものである。The limiter 37 sets a limit value when the operation result is not proper. For example, there is a case where the current pixel position is in an area where high resolution is to be maintained and k becomes negative. Accordingly, the limiter 37 has the same function as the limiter 27 in the second embodiment. The filter coefficient determination unit 38 performs a required operation on k output from the limiter 37 and outputs the result as filter coefficients. Here, the calculation regarding each filter coefficient is performed assuming that H1 = 1−k and H2 = k.

【００７０】上述の構成により、本発明の第３実施例と
しての画像データ前処理フィルタ装置は、図７に示すよ
うなフローチャートに従って動作する。まずステップＣ
１で、画素位置出力カウンタ３２，パラメータ設定装置
３３か入力する初期設定，及びパラメータ設定装置３３
を通じて操作者が設定する初期設定を入力する。つま
り、画素位置出力カウンタ３２から画素の現在位置
（ｘ，ｙ）を入力する。そして、パラメータ設定装置３
３は、画像の大きさをＡ×Ｂ画素として制御装置３４に
入力する。また、操作者の設定するパラメータとして高
解像度を保つべき位置の中心点を（ａ，ｂ）及び高解像
度を維持する範囲を表すｒを、制御装置３４に入力す
る。With the above configuration, the image data preprocessing filter device according to the third embodiment of the present invention operates according to the flowchart shown in FIG. First, step C
In step 1, an initial setting input from the pixel position output counter 32 and the parameter setting device 33, and a parameter setting device 33
Input the initial setting set by the operator through. That is, the current pixel position (x, y) is input from the pixel position output counter 32. And the parameter setting device 3
3 inputs the image size to the control device 34 as A × B pixels. Further, as parameters set by the operator, (a, b) the center point of the position where the high resolution is to be maintained and r representing the range in which the high resolution is maintained are input to the control device 34.

【００７１】なお、入力画像はもともと高解像度のもの
とし、また出力するフィルタの係数は２次〔Ｈ＝（Ｈ
１，Ｈ２，ＨＸ）〕とする。従って、ステップＣ１にお
ける初期設定で、第２実施例の動作を示す図６のステッ
プＢ１と異なるものは、設定するフィルタ係数を２次と
することのみである。ステップＣ１で初期設定が完了す
ると、ステップＣ２で、制御手段３４における第１演算
部３５によって、パラメータ設定装置３３より入力され
た（ａ，ｂ）と、画素位置出力カウンタ３２より入力さ
れた（ｘ，ｙ）を用いて算出する位置（ａ，ｂ）と位置
（ｘ，ｙ）の絶対値のノルムｕを、２点間の距離として
第２演算部３６に出力する。本来距離は２乗誤差平均で
あるが、簡単のため絶対値和として算出している。It should be noted that the input image is originally of a high resolution, and the output filter coefficient is quadratic [H = (H
1, H2, HX)]. Therefore, the only difference between the initial setting in step C1 and step B1 in FIG. 6 showing the operation of the second embodiment is that the filter coefficient to be set is quadratic. When the initial setting is completed in step C1, in step C2, the (a, b) input from the parameter setting device 33 and the (x, x) input from the pixel position output counter 32 are input by the first calculation unit 35 of the control means 34. , Y), the norm u of the absolute value of the position (a, b) and the position (x, y) is output to the second arithmetic unit 36 as the distance between the two points. The distance is originally a mean square error, but is calculated as a sum of absolute values for simplicity.

【００７２】さらに、第２演算部３６では、第１演算部
３５より入力されたｕと、パラメータ設定装置２３より
入力されたｒ，Ａ，Ｂ，２を用いて、ｋ＝２×（ｕ−
ｒ）／（Ａ＋Ｂ−２ｒ）を算出する。従って、ステップ
Ｃ２でのｕ及びｋの計算は、第２実施例における図６の
ステップＢ２とプロセスが共通している。この式の意味
も前述の第２実施例の計算と同様であり、ｋを０と１の
間に入れるようにするためである。Further, the second operation unit 36 uses k input from the first operation unit 35 and r, A, B, and 2 input from the parameter setting unit 23 to obtain k = 2 × (u−
r) / (A + B-2r) is calculated. Therefore, the calculation of u and k in step C2 has the same process as step B2 in FIG. 6 in the second embodiment. The meaning of this equation is the same as that in the calculation of the second embodiment, and is intended to make k be between 0 and 1.

【００７３】そして、ステップＣ３で、ｋ＜０となる場
合は、ｕ＜ｒとなる場合であるので、高解像度を維持す
る必要があり、フィルタリングする必要がない。従っ
て、ステップＣ４で、リミッタ２７の動作によりｋ＝０
とリミッタをかける。従って、ステップＣ３とステップ
Ｃ４での動作についても、第２実施例の動作を示す図６
におけるステップＢ３及びステップＢ４とプロセスは共
通している。In step C3, when k <0 and u <r, high resolution must be maintained and filtering is not necessary. Therefore, in step C4, k = 0 due to the operation of the limiter 27.
And limiter. Accordingly, FIG. 6 showing the operation of the second embodiment also shows the operation in step C3 and step C4.
The process is common to Step B3 and Step B4 in.

【００７４】それ以外は、ステップＣ５で、フィルタ係
数決定部３８により、フィルタ係数をＨ１＝１−ｋ，Ｈ
２＝ｋと設定し、時間軸フィルタ３１で画像データにつ
いてフィルタリングする。また、この時間軸フィルタ３
１では、入力した画像データに、Ｈ１とＨ２のフィルタ
係数を掛けて加え合わせ、過去の画像の情報をも現画像
に反映させて、出力する。Otherwise, in step C5, the filter coefficient determination unit 38 determines that the filter coefficient is H1 = 1-k, H
2 = k is set, and the time axis filter 31 filters the image data. Also, this time axis filter 3
In step 1, the input image data is multiplied by the filter coefficients H1 and H2 and added, and the information of the past image is reflected on the current image and output.

【００７５】なお、本実施例では、単眼〜多眼の２次元
画像の場合であるが、次元数を拡張して、既述の３次元
ボリュームデータにも適用することができる。多眼式で
両眼視差により立体視を行なっているのではなく、３次
元ボリュームデータを用いて奥行き方向に情報を持つ場
合でも操作者からみれば、作業を行ないやすい空間的な
位置が大体決まっており、２次元から３次元への単なる
拡張に過ぎないからである。In this embodiment, the case of a monocular to multi-view two-dimensional image is used. However, the present invention can be applied to the above-described three-dimensional volume data by extending the number of dimensions. Rather than performing stereoscopic vision with binocular parallax in a multi-view system, even if information is provided in the depth direction using three-dimensional volume data, from the viewpoint of the operator, a spatial position where work is easy to perform is roughly determined. Because it is merely an extension from two dimensions to three dimensions.

【００７６】このように、時間軸フィルタ３１と画素位
置出力カウンタ３２とパラメータ設定装置３３と制御装
置３４が設けられることにより、画素の現位置とパラメ
ータで設定される画素範囲との関係で、時間軸フィルタ
３１による前処理の状態を変更することができ、つま
り、予め設定された画素範囲から離れるほど、解像度が
低くなるように時間軸フィルタ３１が強いローパスフィ
ルタの機能を持つようにフィルタ係数を算出してフィル
タリングすることができ、画像の特定したある部分だけ
高解像度とし、その他の部分を解像度を低くして符号化
を容易にすることができる。As described above, the time axis filter 31, the pixel position output counter 32, the parameter setting device 33, and the control device 34 are provided, so that the time between the current position of the pixel and the pixel range set by the parameter is obtained. The state of the pre-processing by the axis filter 31 can be changed, that is, the filter coefficient is set so that the time axis filter 31 has a strong low-pass filter function so that the resolution decreases as the distance from the preset pixel range increases. It can be calculated and filtered so that only certain identified parts of the image are of high resolution and the other parts are of reduced resolution to facilitate encoding.

【００７７】さらに、パラメータ設定装置２３が、高解
像度を維持する画素範囲として、画素範囲の中心の画素
の位置と画素範囲の中心からの距離とをパラメータとし
て設定し、かつその距離を中心からのノルムを用いるこ
とにより、計算が簡略化し、システムの縮小化及び処理
速度の向上に貢献することができる。Further, the parameter setting device 23 sets the position of the pixel at the center of the pixel range and the distance from the center of the pixel range as parameters as a pixel range for maintaining high resolution, and sets the distance from the center as a parameter. The use of the norm simplifies the calculation and contributes to a reduction in the size of the system and an improvement in the processing speed.

【００７８】[0078]

【発明の効果】以上詳述したように、本発明の画像デー
タ前処理フィルタ装置によれば、制御手段により、画素
範囲の中心の画素の位置座標（ａ，ｂ）および現在の画
素の位置座標（ｘ，ｙ）の間で絶対値和である（｜ｘ−
ａ｜＋｜ｙ−ｂ｜）を上記２点間の距離として簡略演算
するとともに、上記絶対値和と、該画素範囲に関するパ
ラメータである該画素範囲の中心から該画素範囲の境界
までの距離ｒとを比較することにより、現在の画素の位
置とパラメータで規定される画素範囲との関係を特定
し、上記の現在の画素が画素範囲内にあるか否かに応じ
て、前処理フィルタによる前処理の状態を変更すること
ができるので、画像の特定したある部分だけ高解像度と
し、その他の部分を解像度を低くして符号化を容易にす
るとともに適正なフィルタリングを実現できるほか、特
に現在の画素位置とパラメータ設定手段で設定される画
素範囲内にあるか否かを、簡略化された計算[絶対値和
（｜ｘ−ａ｜＋｜ｙ−ｂ｜）の演算]に基づいて判断す
ることができ、システムの縮小化および処理速度の向上
に貢献することができる。As described above in detail, according to the image data pre-processing filter device of the present invention, the control means controls the position coordinates (a, b) of the pixel at the center of the pixel range and the position coordinates of the current pixel. The sum of absolute values between (x, y) (| x−
a | + | y−b |) is simply calculated as the distance between the two points, and the sum of the absolute values and the parameters related to the pixel range are calculated.
The boundary of the pixel range from the center of the pixel range which is a parameter
By comparing with the distance r to the current pixel, the relationship between the current pixel position and the pixel range defined by the parameters is specified, and the relationship between the current pixel and the previous pixel is determined based on whether the current pixel is within the pixel range. Since the state of the pre-processing by the processing filter can be changed, only a certain part of the image has a high resolution, and the other parts have a low resolution to facilitate encoding and realize appropriate filtering. In particular, whether or not the current pixel position is within the pixel range set by the parameter setting means is determined based on a simplified calculation [operation of sum of absolute values (| x−a | + | y−b |)]. This can contribute to downsizing of the system and improvement of the processing speed.

【００７９】[0079]

【００８０】また、前処理フィルタが、解像度を変換す
る機能をもつデシメーションフィルタとして構成される
とともに、画素位置検出手段で検出された画素の現位置
が、パラメータ設定手段で設定された画素範囲から離れ
るほど、前処理フィルタの解像度が低くなるようにし
て、前処理フィルタによる前処理の状態を変更するよう
に、制御手段が構成されていることにより、画像の特定
したある部分だけ高解像度とし、その他の部分を解像度
を低くして符号化を容易にすることができ、さらに画質
の向上を図れる利点がある。Further, the pre-processing filter is configured as a decimation filter having a function of converting the resolution, and the current position of the pixel detected by the pixel position detecting means is separated from the pixel range set by the parameter setting means. As the control means is configured to reduce the resolution of the pre-processing filter and change the state of the pre-processing by the pre-processing filter, only a specified part of the image is set to a high resolution, and Can be easily encoded by lowering the resolution of the portion, and there is an advantage that the image quality can be further improved.

【００８１】さらに、画素位置検出手段で検出された画
素の現位置が、パラメータ設定手段で設定された画素範
囲内である場合は、高解像度を維持し、パラメータ設定
手段で設定された画素範囲以外の他の画素範囲である場
合は、パラメータ設定手段で設定された画素範囲から離
れるに従って、段階的に解像度を下げることにより、前
処理フィルタによる前処理の状態を変更するように、制
御手段が構成されていることにより、同様に、画像の特
定したある部分だけ高解像度とし、その他の部分を解像
度を低くして符号化を容易にすることができ、さらに画
質の向上を図ることができる。Further, when the current position of the pixel detected by the pixel position detecting means is within the pixel range set by the parameter setting means, the high resolution is maintained, and the pixels other than the pixel range set by the parameter setting means are maintained. In the case of another pixel range, the control means is configured to change the state of the pre-processing by the pre-processing filter by gradually lowering the resolution as the distance from the pixel range set by the parameter setting means increases. By doing so, similarly, it is possible to increase the resolution of only a specified part of the image and lower the resolution of the other parts to facilitate encoding, and to further improve the image quality.

【００８２】また、前処理フィルタが、ローパスフィル
タの機能をもつノイズリデューサとして構成されるとと
もに、画素位置検出手段で検出された画素の現位置が、
パラメータ設定手段で設定された画素範囲から離れるほ
ど、前処理フィルタが強いローパスフィルタの機能を持
つようにして、前処理フィルタによる前処理の状態を変
更するように、制御手段が構成されていることにより、
画像の特定したある部分だけ高解像度とし、その他の部
分を解像度を低くして符号化を容易にすることができ、
さらに画質の向上を図れる利点がある。Further, the pre-processing filter is configured as a noise reducer having the function of a low-pass filter, and the current position of the pixel detected by the pixel position detecting means is
The control means is configured to change the state of the pre-processing by the pre-processing filter so that the pre-processing filter has a strong low-pass filter function as the distance from the pixel range set by the parameter setting means increases. By
Only certain parts of the image can be high resolution and the rest of the image can be reduced resolution to facilitate encoding,
Further, there is an advantage that the image quality can be improved.

【００８３】さらに、画素位置検出手段で検出された画
素の現位置が、パラメータ設定手段で設定された画素範
囲内である場合は、高解像度を維持し、パラメータ設定
手段で設定された画素範囲以外の他の画素範囲である場
合は、パラメータ設定手段で設定された画素範囲から離
れるに従って、連続的にローパスフィルタの機能を強め
てゆくことにより、前処理フィルタによる前処理の状態
を変更するように、制御手段が構成されていることによ
り、同様に、画像の特定した部分だけ高解像度とし、そ
の他の部分を解像度を低くして符号化を容易にすること
ができ、さらに画質の向上を図ることができる。Further, when the current position of the pixel detected by the pixel position detecting means is within the pixel range set by the parameter setting means, the high resolution is maintained, and the pixels other than the pixel range set by the parameter setting means are maintained. In the case of another pixel range, as the distance from the pixel range set by the parameter setting unit increases, the function of the low-pass filter is continuously strengthened to change the state of the pre-processing by the pre-processing filter. In the same manner, since the control means is configured, similarly, it is possible to increase the resolution of only the specified portion of the image and reduce the resolution of the other portions to facilitate encoding, and further improve the image quality. Can be.

【００８４】また、前処理フィルタが、時間軸フィルタ
として構成されるとともに、画素位置検出手段で検出さ
れた画素の現位置が、パラメータ設定手段で設定された
画素範囲から離れるほど、前処理フィルタが強いローパ
スフィルタの機能を持つような係数を算出し、係数を用
いて、前処理フィルタのフィルタ係数を変更するよう
に、制御手段が構成されていることにより、この場合
も、画像の特定した部分だけ高解像度とし、その他の部
分を解像度を低くして符号化を容易にすることができ、
画質の向上を図れる利点がある。Further, the pre-processing filter is configured as a time axis filter, and the further the current position of the pixel detected by the pixel position detecting means is away from the pixel range set by the parameter setting means, the more the pre-processing filter becomes. In this case as well, the control unit is configured to calculate a coefficient having a function of a strong low-pass filter and use the coefficient to change the filter coefficient of the pre-processing filter. Only high resolution, and the other parts can be reduced in resolution to facilitate encoding.
There is an advantage that the image quality can be improved.

【図面の簡単な説明】[Brief description of the drawings]

【図１】本発明の原理ブロック図である。FIG. 1 is a principle block diagram of the present invention.

【図２】本発明の第１実施例を示すブロック図である。FIG. 2 is a block diagram showing a first embodiment of the present invention.

【図３】本発明の第１実施例のデシメーションフィルタ
を示すブロック図である。FIG. 3 is a block diagram showing a decimation filter according to the first embodiment of the present invention.

【図４】本発明の第１実施例の動作を説明する図であ
る。FIG. 4 is a diagram illustrating the operation of the first embodiment of the present invention.

【図５】本発明の第２実施例を示すブロック図である。FIG. 5 is a block diagram showing a second embodiment of the present invention.

【図６】本発明の第２実施例の動作を説明する図であ
る。FIG. 6 is a diagram illustrating the operation of the second embodiment of the present invention.

【図７】本発明の第３実施例を示すブロック図である。FIG. 7 is a block diagram showing a third embodiment of the present invention.

【図８】本発明の第３実施例の動作を説明する図であ
る。FIG. 8 is a diagram for explaining the operation of the third embodiment of the present invention.

【図９】多眼式立体映像システムを示す図である。FIG. 9 is a diagram showing a multi-view stereoscopic video system.

【図１０】多眼式（５眼×５眼）のカメラの出力例を示
す図である。FIG. 10 is a diagram illustrating an output example of a multi-view (5 × 5) camera.

【図１１】ホログラフィック・ステレオグラムを示す図
である。FIG. 11 is a diagram showing a holographic stereogram.

【図１２】前処理フィルタの配置関係を示す図である。FIG. 12 is a diagram illustrating an arrangement relationship of preprocessing filters.

【図１３】デシメーションフィルタを示すブロック図で
ある。FIG. 13 is a block diagram showing a decimation filter.

【図１４】デシメーションフィルタの動作を説明する図
である。FIG. 14 is a diagram illustrating the operation of a decimation filter.

【図１５】時間軸フィルタを示すブロック図である。FIG. 15 is a block diagram showing a time axis filter.

【符号の説明】[Explanation of symbols]

１，１１１ 前処理フィルタ ２ 画素位置検出手段 ３ パラメータ設定手段 ４ 制御手段 １１ デシメーションフィルタ １１−１ 第１デシメーションフィルタ １１−２ 第２デシメーションフィルタ １１−３ 第３デシメーションフィルタ １２．２２，３２ 画素位置出力カウンタ １２−１，２２−１，３２−１ カウンタ １２−２，２２−２，３２−２ カウンタ １３，２３，３３ パラメータ設定装置 １４，２４，３４ 制御装置 １５−１ 絶対値のノルム計算部 １５−２ 比較基準値設定部 １６−１，１６−２，１６−３ 比較部 １７ ＲＯＭ １８−１ 第１メモリ １８−２ 第２メモリ １９ スイッチ ２１ ノイズリデューサ ２５，３５ 第１演算部 ２６，３６ 第２演算部 ２７，３７ リミッタ ２８，３８ フィルタ係数決定部 ３１ 時間軸フィルタ ３１−１ フレームメモリ １０１ 被写体 １０２ カメラ １０３ 符号化器 １０４ マルチプレクス器 １０５ デマルチプレクス器 １０６ 復号器 １０７ ディスプレイ １０８ 画像サイズ変換部 １０９ 位相計算部 １１０ ホログラフィック出力系 １１２ デシメーションフィルタ １１３ ノイズリデューサ １１３−１ 動き検出，パラメータ出力部 １１３−２ フレームメモリ 1,111 preprocessing filter 2 pixel position detecting means 3 parameter setting means 4 control means 11 decimation filter 11-1 first decimation filter 11-2 second decimation filter 11-3 third decimation filter 12.22,32 pixel position output Counter 12-1, 22-1, 32-1 Counter 12-2, 22-2, 32-2 Counter 13, 23, 33 Parameter setting device 14, 24, 34 Control device 15-1 Norm calculation unit for absolute value 15 -2 comparison reference value setting unit 16-1, 16-2, 16-3 comparison unit 17 ROM 18-1 first memory 18-2 second memory 19 switch 21 noise reducer 25, 35 first operation unit 26, 36th 2 operation unit 27, 37 limiter 28, 38 filter coefficient determination unit 31 time axis fill 31-1 Frame memory 101 Subject 102 Camera 103 Encoder 104 Multiplexer 105 Demultiplexer 106 Decoder 107 Display 108 Image size converter 109 Phase calculator 110 Holographic output system 112 Decimation filter 113 Noise reducer 113-1 Motion detection and parameter output unit 113-2 Frame memory

───────────────────────────────────────────────────── フロントページの続き (72)発明者 松田 喜一 神奈川県川崎市中原区上小田中1015番地 富士通株式会社内 (56)参考文献 特開 昭63−87090（ＪＰ，Ａ) 特開 平４−219089（ＪＰ，Ａ) 特開 平４−144489（ＪＰ，Ａ) 特開 平４−91585（ＪＰ，Ａ) 特開 平２−206293（ＪＰ，Ａ) 特開 平２−100488（ＪＰ，Ａ) (58)調査した分野(Int.Cl.⁷，ＤＢ名) H04N 13/00 ──────────────────────────────────────────────────続 き Continuation of the front page (72) Inventor Kiichi Matsuda 1015 Kamiodanaka, Nakahara-ku, Kawasaki-shi, Kanagawa Fujitsu Co., Ltd. (56) References JP-A-63-87090 (JP, A) JP-A-4-219089 (JP, A) JP-A-4-144489 (JP, A) JP-A-4-91585 (JP, A) JP-A-2-206293 (JP, A) JP-A-2-100488 (JP, A) ( 58) Fields surveyed (Int. Cl. ⁷ , DB name) H04N 13/00

Claims (6)

(57)【特許請求の範囲】(57) [Claims] 【請求項１】 入力画像データについて所要の前処理を
施す前処理フィルタをそなえ、 該前処理フィルタによってフィルタをかけようとしてい
る画素の現位置を検出する画素位置検出手段と、 高解像度を維持する画素範囲に関するパラメータとし
て、該画素範囲の中心の画素の位置座標（ａ，ｂ）およ
び該画素範囲の中心から該画素範囲の境界までの距離ｒ
を設定するパラメータ設定手段とが設けられるととも
に、 該画素位置検出手段からの画素の現位置情報と該パラメ
ータ設定手段からの画素範囲に関するパラメータとを受
けて、上記の画素範囲の中心の画素の位置座標（ａ，
ｂ）と現在の画素の位置座標（ｘ，ｙ）との間で絶対値
和である（｜ｘ−ａ｜＋｜ｙ−ｂ｜）を上記の位置座標
（ａ，ｂ）の点と位置座標（ｘ，ｙ）の点との間の距離
として簡略演算するとともに、上記絶対値和と、該画素
範囲に関するパラメータである該画素範囲の中心から該
画素範囲の境界までの距離ｒとを比較することにより、
現在の画素の位置と該パラメータで規定される画素範囲
との関係を特定し、上記の現在の画素が画素範囲内にあ
るか否かに応じて、該前処理フィルタによる前処理の状
態を変更する制御手段が設けられたことを特徴とする、
画像データ前処理フィルタ装置。1. A includes a pretreatment filter for performing predetermined preprocessing on the input image data, maintains a pixel position detecting means for detecting the current position of a pixel that is about to place a filter, a high resolution by pretreatment filter As parameters relating to the pixel range to be processed, the position coordinates (a, b) of the pixel at the center of the pixel range and the distance r from the center of the pixel range to the boundary of the pixel range
Parameter setting means for setting the position of a pixel at the center of the pixel range in response to the current position information of the pixel from the pixel position detection means and the parameter relating to the pixel range from the parameter setting means. Coordinates (a,
absolute value between b) and the position coordinates (x, y) of the current pixel
(| X−a | + | y−b |) is the sum of the above position coordinates
Distance between point (a, b) and point at position coordinates (x, y)
With ease calculated as, and the absolute value sum, pixel
The from the center of the pixel range is a parameter regarding the scope
By comparing with the distance r to the boundary of the pixel range ,
Specify the relationship between the current pixel position and the pixel range defined by the parameter, and change the state of preprocessing by the preprocessing filter according to whether the current pixel is within the pixel range. Control means for providing
Image data pre-processing filter device. 【請求項２】 該前処理フィルタが、解像度を変換する
機能をもつデシメーションフィルタとして構成されると
ともに、 該画素位置検出手段で検出された画素の現位置が、該パ
ラメータ設定手段で設定された画素範囲から離れるほ
ど、該前処理フィルタの解像度が低くなるようにして、
該前処理フィルタによる前処理の状態を変更するよう
に、該制御手段が構成されていることを特徴とする請求
項１記載の画像データ前処理フィルタ装置。Wherein the pretreatment filter, along with being constructed as a decimation filter having a function of converting the resolution, the current position of the pixel detected by the pixel position detecting hand stage set by the parameter setting hand stage increasing distance from the pixel range, as the resolution of the pretreatment filter becomes lower,
To change the state before processing by the pretreatment filter, the image data pre-processing filter apparatus of claim 1, wherein the control hand stage is configured. 【請求項３】 該画素位置検出手段で検出された画素の
現位置が、該パラメータ設定手段で設定された画素範囲
内である場合は、高解像度を維持し、該パラメータ設定
手段で設定された画素範囲以外の他の画素範囲である場
合は、該パラメータ設定手段で設定された画素範囲から
離れるに従って、段階的に解像度を下げることにより、
該前処理フィルタによる前処理の状態を変更するよう
に、該制御手段が構成されていることを特徴とする請求
項２記載の画像データ前処理フィルタ装置。3. A current position of the pixels detected by the pixel position detecting hand stage, if it is within the pixel range set by said parameter setting hand stage, maintaining a high resolution, the parameter setting <br / > If is another pixel range other than the pixel range set by hand stage, the distance from the set pixel range in the parameter setting hand stage, by lowering the stepwise resolution,
To change the state before processing by the pretreatment filter, the image data pre-processing filter apparatus according to claim 2, wherein the control hand stage is configured. 【請求項４】 該前処理フィルタが、ローパスフィルタ
の機能をもつノイズリデューサとして構成されるととも
に、 該画素位置検出手段で検出された画素の現位置が、該パ
ラメータ設定手段で設定された画素範囲から離れるほ
ど、該前処理フィルタが強いローパスフィルタの機能を
持つようにして、該前処理フィルタによる前処理の状態
を変更するように、該制御手段が構成されていることを
特徴とする請求項１記載の画像データ前処理フィルタ装
置。Wherein the pretreatment filter, while being constituted as a noise reducer having a low-pass filter function, the current position of the pixels detected by the pixel position detecting hand stage, set by the parameter setting hand stage increasing distance from the pixel range, so as to have the function of a strong low-pass filter pretreatment filter, so as to change the state of the pretreatment by the pretreatment filter, the control hand stage is configured 2. The image data pre-processing filter device according to claim 1, wherein: 【請求項５】 該画素位置検出手段で検出された画素の
現位置が、該パラメータ設定手段で設定された画素範囲
内である場合は、高解像度を維持し、該パラメータ設定
手段で設定された画素範囲以外の他の画素範囲である場
合は、該パラメータ設定手段で設定された画素範囲から
離れるに従って、連続的にローパスフィルタの機能を強
めてゆくことにより、該前処理フィルタによる前処理の
状態を変更するように、該制御手段が構成されているこ
とを特徴とする請求項４記載の画像データ前処理フィル
タ装置。5. The current position of the pixels detected by the pixel position detecting hand stage, if it is within the pixel range set by said parameter setting hand stage, maintaining a high resolution, the parameter setting <br / > If is another pixel range other than the pixel range set by hand stage, the distance from the set pixel range in the parameter setting hand stage, by Yuku strengthened continuously low pass filter function, the to change the state before processing by the pre-processing filter,該制image data pre-processing filter apparatus according to claim 4, wherein the control hand stage is characterized by being composed. 【請求項６】 該前処理フィルタが、時間軸フィルタと
して構成されるとともに、 該画素位置検出手段で検出された画素の現位置が、該パ
ラメータ設定手段で設定された画素範囲から離れるほ
ど、該前処理フィルタが強いローパスフィルタの機能を
持つような係数を算出し、該係数を用いて、該前処理フ
ィルタのフィルタ係数を変更するように、該制御手段が
構成されていることを特徴とする請求項１記載の画像デ
ータ前処理フィルタ装置。6. pretreatment filter, while being constituted as a time axis filter, the current position of the pixels detected by the pixel position detecting hand stage, the farther from the set pixel range in the parameter setting hand stage calculates a coefficient that is equal to a strong low pass filter pretreatment filter, using the coefficient, so as to change the filter coefficients of the pretreatment full <br/> Note1, control hand The image data pre-processing filter device according to claim 1, wherein a stage is configured.