JP2001177767A - Image data filtering device and method - Google Patents

Abstract

PROBLEM TO BE SOLVED: To suppress a false signal of an image expressed in image data obtained from a honeycomb type CCD without deteriorating the resolution. SOLUTION: An image of an object is picked up by using the honeycomb type CCD where many photoelectric converting elements are arranged in row and column directions, photoelectric converting elements are arranged on odd number rows of odd number columns and arranged on even number rows of even number columns. A low pass filter circuit having a filter characteristic in an oblique direction applies filtering processing to image data obtained by the CCD. A false signal in the oblique direction can be reduced even from an image expressed by the image data obtained from the honeycomb type CCD where the photoelectric conversion elements are arranged in the oblique direction.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【０００１】[0001]

【技術分野】この発明は，列方向および行方向に多数配
列されており，奇数列については奇数行または偶数行に
光電変換素子が配置され，かつ偶数列については偶数行
または奇数行に光電変換素子が配置されている固体電子
撮像装置を用いて被写体を撮像することにより得られた
画像データを，フィルタリングする装置および方法に関
する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an arrangement in which a large number of pixels are arranged in a column direction and a row direction, photoelectric conversion elements are arranged in odd rows or even rows for odd columns, and photoelectric conversion elements are arranged in even rows or odd rows for even columns. The present invention relates to a device and a method for filtering image data obtained by imaging a subject using a solid-state electronic imaging device in which elements are arranged.

【０００２】[0002]

【発明の背景】自然界においては，周波数空間でみると
水平方向および垂直方向にエネルギーが集中している。
また，人間の視覚では，空間周波数は水平方向から45度
の方向が最も低くなる。BACKGROUND OF THE INVENTION In the natural world, energy is concentrated in the horizontal and vertical directions when viewed in frequency space.
In human vision, the spatial frequency is lowest in the direction at 45 degrees from the horizontal direction.

【０００３】これらのことを考慮すると，同じ画素数で
あれば，列方向および行方向に整列して画素を並べるよ
りも奇数列については奇数行または偶数行に画素を配列
し，かつ偶数列については，偶数行または奇数行に画素
を配列（いわゆるハニカム配列）した方が解像度が高く
なる。Considering these facts, if the number of pixels is the same, pixels are arranged in odd or even rows for odd columns and pixels are arranged for even columns, rather than arranging pixels in columns and rows. The resolution is higher when pixels are arranged in an even or odd row (so-called honeycomb arrangement).

【０００４】ハニカム配列をもつＣＣＤ（ハニカム型Ｃ
ＣＤという）から得られた画像データによって表される
画像の水平方向または垂直方向の再現帯域を上げるため
には，フィルタリング処理において画像データの低域周
波数成分をカットするためのカットオフ周波数を上げる
必要がある。しかし，水平方向または垂直方向のカット
オフ周波数を上げると水平方向および垂直方向の解像度
は向上するが，斜め方向の解像度も向上することにな
り，斜め方向に発生する偽信号，偽色などが増加する。
斜め方向の偽信号，偽色を低減させるために低域周波数
成分をカットするフィルタリング処理を行うと水平方向
および垂直方向の解像度が必要以上に劣化してしまうこ
とがある。A CCD having a honeycomb arrangement (honeycomb type C)
In order to increase the horizontal or vertical reproduction band of the image represented by the image data obtained from the CD), it is necessary to increase the cutoff frequency for cutting the low frequency components of the image data in the filtering process. There is. However, when the horizontal or vertical cutoff frequency is increased, the resolution in the horizontal and vertical directions is improved, but the resolution in the diagonal direction is also improved, and false signals and false colors generated in the diagonal direction are increased. I do.
If filtering processing for cutting low frequency components is performed to reduce false signals and false colors in the oblique direction, the resolution in the horizontal and vertical directions may be unnecessarily deteriorated.

【０００５】[0005]

【発明の開示】この発明は，いわゆるハニカム型のＣＣ
Ｄから得られた画像データによって表される画像の偽信
号を抑えつつ，解像度を向上させることを目的とする。DISCLOSURE OF THE INVENTION The present invention relates to a so-called honeycomb type CC.
An object is to improve the resolution while suppressing a false signal of the image represented by the image data obtained from D.

【０００６】この発明による画像データ・フィルタリン
グ装置は，列方向および行方向に多数配列されており，
奇数列については奇数行または偶数行に光電変換素子が
配置され，かつ偶数列については偶数行または奇数行に
光電変換素子が配置されている固体電子撮像装置を含
み，被写体を撮像することにより被写体像を表す画像デ
ータを出力する撮像手段，上記撮像手段から出力された
画像データによって表される被写体像のうち行方向およ
び列方向に隣接する画素の間の画素を補間するように，
上記画像データを補間処理する補間手段，上記補間手段
によって補間された画像データのうち，複数行分の画像
データを同時化する同時化手段，ならびに斜め方向のフ
ィルタ特性を有するフィルタを用いて，上記同時化手段
によって同時化された画像データをフィルタリング処理
するフィルタリング手段を備えていることを特徴とす
る。The image data filtering devices according to the present invention are arranged in a large number in a column direction and a row direction.
A solid-state electronic imaging device in which photoelectric conversion elements are arranged in odd rows or even rows for odd columns and photoelectric conversion elements are arranged in even rows or odd rows for even columns is provided. Imaging means for outputting image data representing an image, and interpolating pixels between adjacent pixels in a row direction and a column direction in a subject image represented by the image data output from the imaging means.
Interpolating means for interpolating the image data, synchronizing means for synchronizing image data for a plurality of lines out of the image data interpolated by the interpolating means, and a filter having a filter characteristic in an oblique direction. The image processing apparatus further includes a filtering unit for filtering the image data synchronized by the synchronization unit.

【０００７】この発明は，上記装置に適した方法も提供
している。すなわち，この方法は，列方向および行方向
に多数配列されており，奇数列については奇数行または
偶数行に光電変換素子が配置され，かつ偶数列について
は偶数行または奇数行に光電変換素子が配置されている
固体電子撮像装置を含み，被写体を撮像することにより
被写体像を表す画像データを得，得られた画像データに
よって表される被写体像のうち行方向および列方向に隣
接する画素の間の画素を補間するように，上記画像デー
タを補間処理し，補間された画像データのうち，複数行
分の画像データを同時化し，斜め方向のフィルタ特性を
有するフィルタを用いて，上記同時化処理された画像デ
ータをフィルタリング処理するものである。[0007] The present invention also provides a method suitable for the above device. That is, in this method, a large number of cells are arranged in the column direction and the row direction, photoelectric conversion elements are arranged in odd or even rows for odd columns, and photoelectric conversion elements are arranged in even or odd rows for even columns. Including the solid-state electronic image pickup device arranged, image data representing a subject image is obtained by taking an image of the subject, and between the pixels adjacent in the row direction and the column direction in the subject image represented by the obtained image data. The image data is interpolated so as to interpolate the pixels of the image data, the image data of a plurality of rows of the interpolated image data is synchronized, and the synchronization processing is performed using a filter having a filter characteristic in an oblique direction. The filtering process is performed on the processed image data.

【０００８】この発明によると，列方向および行方向に
多数配列されており，奇数列については奇数行または偶
数行に光電変換素子が配置され，かつ偶数列については
偶数行または奇数行に光電変換素子が配置されている固
体電子撮像装置を用いて被写体が撮像される。すなわ
ち，たとえば奇数列については奇数行に光電変換素子が
配列され，偶数列については偶数行に光電変換素子が配
置されている固体電子撮像装置または奇数列については
偶数行に光電変換素子が配列され，偶数列については奇
数行に光電変換素子が配置されている固体電子撮像装置
が用いられる。撮像によって得られた画像データは，行
方向および列方向に隣接する画素を補間するように補間
処理が行われる。補間された画像データのうち，複数行
（たとえば３行）分の画像データが同時化される。同時
化された画像データが斜め方向のフィルタ特性を有する
フィルタを用いてフィルタリング処理が行われる。According to the present invention, a large number are arranged in the column direction and the row direction, photoelectric conversion elements are arranged in odd rows or even rows for odd columns, and photoelectric conversion elements are arranged in even rows or odd rows for even columns. A subject is imaged using a solid-state electronic imaging device in which the elements are arranged. That is, for example, in a solid-state electronic imaging device in which photoelectric conversion elements are arranged in odd rows for odd columns and in even rows, photoelectric conversion elements are arranged in even rows for odd columns. For the even columns, a solid-state electronic imaging device in which photoelectric conversion elements are arranged in odd rows is used. Interpolation processing is performed on image data obtained by imaging so as to interpolate pixels adjacent in the row and column directions. Of the interpolated image data, image data for a plurality of rows (for example, three rows) are synchronized. A filtering process is performed on the synchronized image data using a filter having a filter characteristic in an oblique direction.

【０００９】この発明によると，斜め方向のフィルタ特
性（たとえば，列方向または行方向に対して斜め方向に
存在する画素についてフィルタリングするための特性）
を有するフィルタ（ディジタル・フィルタ）を用いてフ
ィルタリング処理（画像データのレベルなどを調整する
処理）が行われるので，水平方向および垂直方向の解像
度を劣化させることなく，斜め方向の偽信号，偽色など
を低減させることができる。According to the present invention, filter characteristics in an oblique direction (for example, characteristics for filtering pixels existing in an oblique direction with respect to a column direction or a row direction).
Filtering (processing to adjust the level of image data, etc.) is performed using a filter (digital filter) having a diagonal false signal and a false color in the oblique direction without deteriorating the resolution in the horizontal and vertical directions. Etc. can be reduced.

【００１０】左斜め方向についてフィルタ特性を有する
フィルタを用いて，上記同時化手段によって同時化され
た画像データをフィルタリング処理する第１のフィルタ
リング手段，および右斜め方向についてフィルタリング
特性を有するフィルタを用いて，上記第１のフィルタリ
ング手段によってフィルタリング処理された画像データ
をフィルタリング処理する第２のフィルタリング手段を
用いて画像データをフィルタリング処理することもでき
る。The first filtering means for filtering the image data synchronized by the synchronizing means using a filter having a filter characteristic in the diagonal left direction, and the filter having a filtering characteristic in the diagonal right direction. The image data can be filtered using the second filtering means for filtering the image data filtered by the first filtering means.

【００１１】２つのフィルタリング手段を用いて２回に
わたってフィルタリング処理を行っているので，フィル
タリングの精度を向上させることができる。Since the filtering process is performed twice using the two filtering means, the accuracy of the filtering can be improved.

【００１２】上記フィルタリング手段は，左斜め方向に
ついてフィルタ特性を有するフィルタを用いて，上記同
時化手段によって同時化された画像データをフィルタリ
ングする第１のフィルタリング手段，および右斜め方向
についてフィルタ特性を有するフィルタを用いて，上記
同時化手段によって同時化された画像データをフィルタ
リングする第２のフィルタリングする第２のフィルタリ
ング手段を備えてもよい。The filtering means includes a first filtering means for filtering the image data synchronized by the synchronizing means using a filter having a filter characteristic in a diagonal left direction, and a filter characteristic in a diagonal right direction. The image processing apparatus may further include a second filtering unit that performs a second filtering by using the filter to filter the image data synchronized by the synchronization unit.

【００１３】この場合，上記補間手段によって補間され
た画像データにより表される被写体像中の画像のエッジ
部分が左斜め方向か，右斜め方向か，それらのいずれの
方向でもないかどうかを判定する。左斜め方向と判定し
たことにより，上記第１のフィルタリング手段によって
フィルタリングされた画像データを選択して出力し，右
斜め方向と判定したことにより，上記第２のフィルタリ
ング手段によってフィルタリングされた画像データを選
択して出力し，それらのいずれの方向でもないと判定さ
れたことにより，上記同時化手段から出力された画像デ
ータを選択して出力することが好ましい。In this case, it is determined whether or not the edge portion of the image in the subject image represented by the image data interpolated by the interpolation means is in a diagonally left direction, a diagonally right direction, or neither of these directions. . The image data filtered by the first filtering means is selected and output by judging that the image data is in the diagonal left direction, and the image data filtered by the second filtering means is selected by judging that the image data is in the diagonal right direction. It is preferable that the image data output from the synchronizing means be selected and output when it is determined that the image data is not in any of the directions.

【００１４】上記被写体像の中の画像のエッジの方向が
左斜め方向か右斜め方向かそれらのいずれかの方向でも
ないかを判定し，その判定結果に応じてフィルタリング
処理を変えている。偽信号，偽色が生じないように上記
被写体像の中の画像のエッジ方向に応じてフィルタ特性
の異なるフィルタリング処理を行うことができる。たと
えば，エッジが左斜め方向であれば，左斜め方向の特性
をもつフィルタを用いてフィルタリングが行われる。エ
ッジが右斜め方向であれば，右斜め方向の特性をもつフ
ィルタリングが行われる。エッジが左斜め方向および右
斜め方向のいずれでもなければ，フィルタリング処理は
行われない。It is determined whether the direction of the edge of the image in the subject image is diagonally left or diagonally right or any of these directions, and the filtering process is changed according to the result of the determination. Filtering processing with different filter characteristics can be performed in accordance with the edge direction of the image in the subject image so that a false signal and a false color do not occur. For example, if the edge is in the diagonally left direction, filtering is performed using a filter having characteristics in the diagonally left direction. If the edge is in the diagonal right direction, filtering having characteristics in the diagonal right direction is performed. If the edge is neither in the left diagonal direction nor in the right diagonal direction, no filtering processing is performed.

【００１５】上記被写体像の中の画像のエッジ方向に応
じた適切な方向にフィルタリング処理が行われる。The filtering process is performed in an appropriate direction according to the edge direction of the image in the subject image.

【００１６】[0016]

【実施例の説明】図１は，ディジタル・カメラの電気的
構成の一部を示すブロック図である。図２は，図１に示
すディジタル・カメラのＣＣＤの受光面の一部を模式的
に示している。DESCRIPTION OF THE PREFERRED EMBODIMENTS FIG. 1 is a block diagram showing a part of the electrical configuration of a digital camera. FIG. 2 schematically shows a part of the light receiving surface of the CCD of the digital camera shown in FIG.

【００１７】ＣＣＤ10は，いわゆるハニカム型のＣＣＤ
である。このハニカム型のＣＣＤは，行方向および列方
向に多数の光電変換素子１が配列されている。これらの
光電変換素子１は，奇数列については奇数行の位置に配
置され，偶数列については偶数行の位置に配置されてい
る。したがって，奇数列については偶数行の位置には光
電変換素子１は配置されていず，偶数列については奇数
行の位置に光電変換素子１は配置されていない。もちろ
ん，奇数列については偶数行の位置に光電変換数１を配
置し，偶数列については奇数行の位置に光電変換素子１
を配置してもよい。The CCD 10 is a so-called honeycomb type CCD.
It is. In this honeycomb type CCD, a large number of photoelectric conversion elements 1 are arranged in a row direction and a column direction. These photoelectric conversion elements 1 are arranged at odd-numbered rows for odd columns, and are arranged at even-numbered rows for even columns. Therefore, the photoelectric conversion elements 1 are not arranged at the positions of the even rows for the odd columns, and the photoelectric conversion elements 1 are not arranged at the positions of the odd rows for the even columns. Of course, for the odd columns, the photoelectric conversion element 1 is arranged at the position of the even row, and for the even columns, the photoelectric conversion element 1 is placed at the position of the odd row.
May be arranged.

【００１８】光電変換素子１から出力される信号が被写
体像を表す映像信号として，ＣＣＤ10から出力される。
ＣＣＤ10から出力された映像信号は，アナログ／ディジ
タル変換回路11に入力し，ディジタル画像データに変換
される。ＣＣＤ10の受光面上（光電変換素子１の受光面
上）には，ＲＧＢの色フィルタが配置されており，アナ
ログ／ディジタル変換回路11からは，ＲＧＢの画像デー
タがシリアルに出力されるのはいうまでもない。A signal output from the photoelectric conversion element 1 is output from the CCD 10 as a video signal representing a subject image.
The video signal output from the CCD 10 is input to an analog / digital conversion circuit 11 and is converted into digital image data. An RGB color filter is arranged on the light receiving surface of the CCD 10 (on the light receiving surface of the photoelectric conversion element 1), and the analog / digital conversion circuit 11 outputs RGB image data serially. Not even.

【００１９】アナログ／ディジタル変換回路11から出力
された画像データは，リニア・マトリクス回路12，オフ
セット回路13，ゲイン補正回路14を介してガンマ補正回
路15に入力する。ガンマ補正回路15においてガンマ補正
された画像データは，ＲＧＢ補間回路18および高輝度デ
ータ生成回路16に入力する。The image data output from the analog / digital conversion circuit 11 is input to a gamma correction circuit 15 via a linear matrix circuit 12, an offset circuit 13, and a gain correction circuit 14. The image data gamma-corrected by the gamma correction circuit 15 is input to an RGB interpolation circuit 18 and a high luminance data generation circuit 16.

【００２０】高輝度生成回路16において，入力したＲＧ
Ｂ画像データから高輝度データが生成される。生成され
た高輝度データは，補間回路17に入力する。補間回路17
において，図３に示すようにＣＣＤ10を構成する光電変
換素子１に対応する画素２を表す高輝度データを用い
て，画素２に垂直方向および水平方向に隣接する画素
（光電変換素子１が存在していない位置に対応する画
素）が補間される。具体的には，ＣＣＤ10の光電変換素
子１が存在しない奇数列における偶数行の画素および偶
数列における奇数行の画素が，隣接する画素２を示す高
輝度データを用いて生成される（図３においては，補間
により生成された画素が黒丸３によって表されてい
る）。補間処理は，たとえば，隣接する画素を表す高輝
度データを相加平均することにより行われる。もちろ
ん，そのほかの補間方法を用いることができるのはいう
までもない。In the high luminance generation circuit 16, the input RG
High brightness data is generated from the B image data. The generated high luminance data is input to the interpolation circuit 17. Interpolator 17
In FIG. 3, as shown in FIG. 3, a pixel adjacent to the pixel 2 in the vertical and horizontal directions (the photoelectric conversion element 1 exists) using the high luminance data representing the pixel 2 corresponding to the photoelectric conversion element 1 forming the CCD 10. (Pixels corresponding to non-existing positions) are interpolated. Specifically, the pixels in the even-numbered rows in the odd-numbered columns and the pixels in the odd-numbered rows in the even-numbered columns in which the photoelectric conversion element 1 of the CCD 10 does not exist are generated using the high luminance data indicating the adjacent pixels 2 (see FIG. Indicates that a pixel generated by interpolation is represented by a black circle 3). The interpolation process is performed, for example, by arithmetically averaging high luminance data representing adjacent pixels. Of course, other interpolation methods can be used.

【００２１】補間処理回路17において補間処理された高
輝度データは，ＲＧＢ補間回路18に入力する。The high-luminance data interpolated by the interpolation processing circuit 17 is input to an RGB interpolation circuit 18.

【００２２】ＲＧＢ補間回路18において，補間回路17に
おいて生成された高輝度データとガンマ補正回路15から
出力されたＲＧＢ画像データとを用いて，ＲＧＢ画像デ
ータについての補間画素３を表すＲＧＢ画像データが生
成される。これにより，ＲＧＢ変換回路18から出力され
る画像データによって表される画像の画素数は，ＣＣＤ
10から出力される映像信号によって表される画像の画素
数のほぼ２倍となる。The RGB interpolation circuit 18 uses the high luminance data generated by the interpolation circuit 17 and the RGB image data output from the gamma correction circuit 15 to convert the RGB image data representing the interpolation pixel 3 for the RGB image data. Generated. Thereby, the number of pixels of the image represented by the image data output from the RGB conversion circuit 18 is equal to the number of pixels of the CCD.
The number of pixels of the image represented by the video signal output from 10 is almost twice as large.

【００２３】ＲＧＢ補間回路18から出力されたＲＧＢ画
像データは，ＹＣ変換回路19に入力し，輝度データＹお
よび色差データＣ（Ｒ−ＹおよびＢ−Ｙ）が生成され
る。ＹＣ変換回路19において生成された輝度データＹ
は，輝度フィルタリング回路20に入力する。輝度フィル
タリング回路20において，入力した輝度データについて
フィルタリング処理が施される。このフィルタリング処
理について詳しくは，後述する。The RGB image data output from the RGB interpolation circuit 18 is input to a YC conversion circuit 19, where luminance data Y and color difference data C (RY and BY) are generated. The luminance data Y generated in the YC conversion circuit 19
Is input to the luminance filtering circuit 20. In the luminance filtering circuit 20, filtering processing is performed on the input luminance data. Details of this filtering process will be described later.

【００２４】輝度フィルタリング回路20から出力された
輝度データは，輪郭補正回路21に入力する。輪郭補正回
路21において，入力した輝度データについて輪郭補正処
理（たとえば，エッジ強調）が行われる。輪郭補正され
た輝度データが出力される。The luminance data output from the luminance filtering circuit 20 is input to the contour correction circuit 21. The contour correction circuit 21 performs a contour correction process (eg, edge enhancement) on the input luminance data. The contour-corrected luminance data is output.

【００２５】ＹＣ変換回路19において生成された色差デ
ータＣは，色差フィルタリング回路22に入力する。この
色差フィルタリング回路22において，輝度フィルタリン
グ回路20における処理と同様に，色差データについてフ
ィルタリング処理が施される。色差フィルタリング回路
20においてフィルタリング処理が施された色差データ
は，色相補正回路23に入力する。この色相補正回路23に
おいて，色差データＣについて色相補正が施され，出力
される。The color difference data C generated in the YC conversion circuit 19 is input to a color difference filtering circuit 22. In the color difference filtering circuit 22, a filtering process is performed on the color difference data in the same manner as the process in the luminance filtering circuit 20. Color difference filtering circuit
The color difference data subjected to the filtering processing in 20 is input to the hue correction circuit 23. In the hue correction circuit 23, hue correction is performed on the color difference data C, and the color difference data C is output.

【００２６】輪郭補正回路21から出力された輝度データ
および色相補正回路23から出力された色差データがデー
タ圧縮されて，メモリ・カードなどに記録される。The luminance data output from the contour correction circuit 21 and the color difference data output from the hue correction circuit 23 are data-compressed and recorded on a memory card or the like.

【００２７】図４は，色差フィルタリング回路20の構成
を示している。FIG. 4 shows the configuration of the color difference filtering circuit 20.

【００２８】ＹＣ変換回路19から出力された色差データ
は，同時化回路31に入力する。同時化回路31には，３つ
のライン・メモリ（図示略）が内蔵されている。これら
の３つのライン・メモリにより，３行分の色差データが
同時化される。同時化された輝度データがロウ・パス・
フィルタ32に入力する。The color difference data output from the YC conversion circuit 19 is input to a synchronization circuit 31. The synchronization circuit 31 has three line memories (not shown). With these three line memories, three lines of color difference data are synchronized. The synchronized luminance data is
Input to the filter 32.

【００２９】ロウ・パス・フィルタ32は，図５に示すよ
うなフィルタ特性をもつものである。このフィルタ特性
は，斜め方向の画素について帯域制限処理を施すもので
ある。同時化回路31から出力された色差データがロウ・
パス・フィルタ32に入力することにより，ロウ・パス・
フィルタ32により斜め方向の画素に生じる偽信号を低減
させることができる。ロウ・パス・フィルタ32から出力
された色差データは，上述したように色相補正回路23に
入力する。The low pass filter 32 has a filter characteristic as shown in FIG. This filter characteristic is for performing band limiting processing on pixels in oblique directions. The color difference data output from the synchronization circuit 31 is low.
By inputting to the path filter 32, the low pass
The filter 32 can reduce false signals generated in pixels in oblique directions. The color difference data output from the low pass filter 32 is input to the hue correction circuit 23 as described above.

【００３０】輝度フィルタリング回路20については，輝
度データについてのフィルタ特性のカットオフ周波数よ
りも高いカットオフ周波数を持つロウ・パス・フィルタ
を用いて同じように構成することができる。解像度の高
い輝度画像が得られる。The luminance filtering circuit 20 can be similarly configured using a low-pass filter having a cutoff frequency higher than the cutoff frequency of the filter characteristic for luminance data. A high-resolution luminance image can be obtained.

【００３１】図６は，色差フィルタリング回路22の他の
回路構成を示すブロック図である。FIG. 6 is a block diagram showing another circuit configuration of the color difference filtering circuit 22.

【００３２】図６においては，第１のロウ・パス・フィ
ルタ34と第２のロウ・パス・フィルタ36とが含まれてい
る。第１のロウ・パス・フィルタ34は，図７（Ａ）に示
すように左斜め方向のフィルタ特性を有するもので，左
斜め方向に存在する画素について偽信号の低減処理を行
うものである。第２のロウ・パス・フィルタ36は，図７
（Ｂ）に示すように右斜め方向フィルタ特性を有するも
ので，右斜め方向に存在する画素について偽信号の低減
処理を行うものである。In FIG. 6, a first low-pass filter 34 and a second low-pass filter 36 are included. The first low pass filter 34 has a filter characteristic in the diagonally left direction as shown in FIG. 7A, and performs a process of reducing a false signal for pixels existing in the diagonally left direction. The second low pass filter 36 is shown in FIG.
As shown in (B), it has a filter characteristic in the diagonal right direction, and performs a false signal reduction process on pixels existing in the diagonal right direction.

【００３３】また，同時化回路33および35は，図４に示
した同時化回路31と同じもので，３つのライン・メモリ
が内蔵されている。The synchronizing circuits 33 and 35 are the same as the synchronizing circuit 31 shown in FIG. 4, and include three line memories.

【００３４】ＹＣ変換回路19から出力された色差データ
は，同時化回路33に入力する。同時化回路33において，
色差データの同時化処理が行われる。同時化された３行
分の色差データは，第１のロウ・パス・フィルタ34に入
力し，左斜め方向の画素について偽信号の低減処理が施
される。第１のロウ・パス・フィルタ１から出力された
色差データは，同時化回路35を介して第２のロウ・パス
・フィルタ36に入力する。第２のロウ・パス・フィルタ
36において，右斜め方向の画素について偽信号の低減処
理が施される。The color difference data output from the YC conversion circuit 19 is input to the synchronization circuit 33. In the synchronization circuit 33,
The color difference data synchronization processing is performed. The synchronized three-line color difference data is input to the first low-pass filter 34, and a false signal reduction process is performed on pixels in the diagonally left direction. The color difference data output from the first low pass filter 1 is input to a second low pass filter 36 via a synchronization circuit 35. Second low pass filter
At 36, a false signal reduction process is performed on the pixels in the diagonally right direction.

【００３５】第２のロウ・パス・フィルタ36から出力さ
れた色差データが色差フィルタリング回路22の出力輝度
データとなり，上述のように色相補正回路23に入力す
る。The color difference data output from the second low pass filter 36 becomes output luminance data of the color difference filtering circuit 22 and is input to the hue correction circuit 23 as described above.

【００３６】図６に示す回路では，左斜め方向の画素に
ついての偽信号の低減処理と右斜め方向の画素について
の偽信号の低減処理とを別々のロウ・パス・フィルタを
用いて行っているので，比較的精度の高い偽信号の低減
処理を実現することができる。In the circuit shown in FIG. 6, the false signal reduction processing for the pixels in the diagonal left direction and the false signal reduction processing for the pixels in the diagonal right direction are performed using different low-pass filters. Therefore, a relatively accurate false signal reduction process can be realized.

【００３７】図８は，色差フィルタリング回路20のさら
に他の構成を示すブロック図である。FIG. 8 is a block diagram showing still another configuration of the color difference filtering circuit 20.

【００３８】この回路においては，入力する画像データ
によって表される画像の中に左斜め方向のエッジがある
か，右斜め方向のエッジがあるか，左斜め方向および右
斜め方向のいずれの方向のエッジもないかどうかを検出
する。左斜め方向のエッジがある場合には，左斜め方向
の画素の偽信号を低減する処理を行い，右斜め方向のエ
ッジがある場合には，右斜め方向の画素の偽信号を低減
する処理を行い，左斜め方向および右斜め方向のいずれ
の方向にもエッジがない場合には，いずれの方向にも偽
信号を低減する処理を行わない。In this circuit, an image represented by input image data has an edge in a diagonal left direction, an edge in a diagonal right direction, and a diagonal left or diagonal direction. Detect if there is no edge. If there is an edge in the diagonal left direction, processing to reduce false signals of pixels in the diagonal left direction is performed. If there is an edge in the diagonal right direction, processing to reduce false signals in pixels in the diagonal right direction is performed. If no edge is found in any of the left and right diagonal directions, the process for reducing the false signal is not performed in either direction.

【００３９】同時化回路41において，ＹＣ変換回路19か
ら出力された色差データのうち，３行分の色差データが
同時化される。同時化された色差データは，第１のロウ
・パス・フィルタ42，第２のロウ・パス・フィルタ43，
斜め方向検出回路44およびセレクタ45に入力する。In the synchronizing circuit 41, of the color difference data output from the YC conversion circuit 19, three lines of color difference data are synchronized. The synchronized color difference data is supplied to a first low-pass filter 42, a second low-pass filter 43,
Input to the oblique direction detection circuit 44 and selector 45.

【００４０】第１のロウ・パス・フィルタ42は，図７
（Ａ）に示す左斜め方向の特性を有するもので，左斜め
方向の画素について偽信号を低減する処理を施して出力
する。第１のロウ・パス・フィルタ42から出力した輝度
データは，セレクタ45に入力する。第２のロウ・パス・
フィルタ43は，図７（Ｂ）に示す右斜め方向の特性を有
するもので，右斜め方向の画素について偽信号を低減す
る処理を施して出力する。第２のロウ・パス・フィルタ
43から出力した色差データは，セレクタ45に入力する。
斜め方向検出回路44は，入力した色差データによって表
される画像に含まれるエッジ方向が左斜め方向か，右斜
め方向か左斜め方向および右斜め方向のいずれでもない
かを検出するものである。検出結果を示す信号は，セレ
クタ45に入力する。The first low-pass filter 42 has the configuration shown in FIG.
It has characteristics in the diagonally left direction shown in FIG. 2A, and performs processing for reducing false signals for pixels in the diagonally left direction and outputs the processed pixels. The luminance data output from the first low pass filter 42 is input to a selector 45. The second row pass
The filter 43 has the characteristics in the diagonal right direction shown in FIG. 7B, and performs processing for reducing false signals for pixels in the diagonal right direction and outputs the processed pixels. Second low pass filter
The color difference data output from 43 is input to the selector 45.
The oblique direction detection circuit 44 detects whether the edge direction included in the image represented by the input color difference data is the left oblique direction, the right oblique direction, or any of the left oblique direction and the right oblique direction. A signal indicating the detection result is input to the selector 45.

【００４１】斜め方向検出回路44からセレクタ45に与え
られる信号が左斜めの方向を示す信号であれば，第１の
ロウ・パス・フィルタ42から出力された色差データがセ
レクタ45から出力され，色差フィルタリング回路22の出
力となる。斜め方向検出回路44からセレクタ45に与えら
れる信号が右斜め方向を示す信号であれば，第２のロウ
・パス・フィルタ43から出力された色差データがセレク
タ45から出力され，色差フィルタリング回路22の出力と
なる。斜め方向検出回路44からセレクタ45に与えられる
信号が左斜め方向および右斜め方向のいずれも示す信号
でなければ，同時化回路41の出力がセレクタ45から出力
される。If the signal supplied from the oblique direction detection circuit 44 to the selector 45 is a signal indicating the left oblique direction, the color difference data output from the first low pass filter 42 is output from the selector 45, Output from the filtering circuit 22. If the signal supplied from the diagonal direction detection circuit 44 to the selector 45 is a signal indicating the right diagonal direction, the color difference data output from the second low pass filter 43 is output from the selector 45 and the color difference filtering circuit 22 Output. If the signal supplied from the oblique direction detection circuit 44 to the selector 45 is not a signal indicating either the left oblique direction or the right oblique direction, the output of the synchronization circuit 41 is output from the selector 45.

【００４２】画像データによって表される画像内のエッ
ジの方向を検出し，その検出した方向に応じて偽信号の
発生を低減するようにフィルタリング処理をしているの
で，比較的適切なフィルタリング処理を施すことができ
る。Since the direction of the edge in the image represented by the image data is detected and the filtering process is performed so as to reduce the generation of the false signal according to the detected direction, a relatively appropriate filtering process is performed. Can be applied.

【００４３】図９から図12は，斜め方向検出回路44にお
ける画像中のエッジ方向を検出する手順を説明するため
のものである。図９および図11は，画像の一部を構成す
る画素を示すものである。図10および図12は，フィルタ
の特性を示している。FIGS. 9 to 12 are diagrams for explaining the procedure for detecting the edge direction in an image in the oblique direction detection circuit 44. FIG. FIG. 9 and FIG. 11 show pixels constituting a part of an image. FIG. 10 and FIG. 12 show the characteristics of the filter.

【００４４】図９および図11において，行方向（５行）
の画素および列方向（５列）の画素Ｐ１からＰ25は，画
像の同一部分を示している。9 and 11, in the row direction (5 rows)
And the pixels P1 to P25 in the column direction (five columns) indicate the same part of the image.

【００４５】まず，図10に示すようなフィルタ特性をも
つフィルタＦ１，Ｆ２およびＦ３をを用意する。フィル
タＦ１，Ｆ２およびＦ３は同じフィルタ特性を有してい
るが，この実施例では，異なる符号を用いる。フィルタ
Ｆ１を用いて，画素Ｐ１からＰ25のうち，左上の３行×
３列の画素Ｐ１，Ｐ２，Ｐ３，Ｐ６，Ｐ７，Ｐ８，Ｐ1
1，Ｐ12およびＰ13にフィルタリング処理をする。この
フィルタリング処理の出力値をｆ１とする。同様に，中
央部分の３行×３列の画素Ｐ７，Ｐ８，Ｐ９，Ｐ12，Ｐ
13，Ｐ14，Ｐ17，Ｐ18およびＰ19にフィルタＦ２を用い
てフィルタリング処理をする。このフィルタリング処理
の出力値をｆ２とする。さらに，右下の３行×３列の画
素Ｐ13，Ｐ14，Ｐ15，Ｐ18，Ｐ19，Ｐ20，Ｐ23，Ｐ24お
よびＰ25にフィルタＦ３を用いてフィルタリング処理を
する。このフィルタリング処理の出力値をｆ３とする。First, filters F1, F2 and F3 having filter characteristics as shown in FIG. 10 are prepared. Although the filters F1, F2 and F3 have the same filter characteristics, different symbols are used in this embodiment. Using the filter F1, of the pixels P1 to P25, the upper left three rows x
Pixels P1, P2, P3, P6, P7, P8, P1 in three columns
1, filtering is performed on P12 and P13. The output value of this filtering processing is defined as f1. Similarly, pixels P7, P8, P9, P12, and P3 of 3 rows × 3 columns at the center portion
A filtering process is performed on 13, P14, P17, P18 and P19 using the filter F2. The output value of this filtering process is f2. Further, a filtering process is performed on the pixels P13, P14, P15, P18, P19, P20, P23, P24 and P25 in the lower right 3 rows × 3 columns using the filter F3. The output value of this filtering process is defined as f3.

【００４６】さらに，図12に示すようなフィルタ特性を
もつフィルタＦ４，Ｆ５およびＦ６をを用意する。フィ
ルタＦ４，Ｆ５およびＦ６は同じフィルタ特性を有して
いるが，この実施例では，異なる符号を用いる。フィル
タＦ４を用いて，画素Ｐ１からＰ25のうち，右上の３行
×３列の画素Ｐ３，Ｐ４，Ｐ５，Ｐ８，Ｐ９，Ｐ10，Ｐ
13，Ｐ1４およびＰ1５にフィルタリング処理をする。こ
のフィルタリング処理の出力値をｆ４とする。同様に，
中央部分の３行×３列の画素Ｐ７，Ｐ８，Ｐ９，Ｐ12，
Ｐ13，Ｐ14，Ｐ17，Ｐ18およびＰ19にフィルタＦ５を用
いてフィルタリング処理をする。このフィルタリング処
理の出力値をｆ５とする。さらに，左下の３行×３列の
画素Ｐ11，Ｐ12，Ｐ13，Ｐ16，Ｐ17，Ｐ18，Ｐ21，Ｐ22
およびＰ23にフィルタＦ５を用いてフィルタリング処理
をする。このフィルタリング処理の出力値をｆ５とす
る。Further, filters F4, F5 and F6 having filter characteristics as shown in FIG. 12 are prepared. Although the filters F4, F5 and F6 have the same filter characteristics, different symbols are used in this embodiment. Using the filter F4, pixels P3, P4, P5, P8, P9, P10, P in the upper right 3 rows × 3 columns among the pixels P1 to P25.
13, filtering is performed on P14 and P15. The output value of this filtering process is defined as f4. Similarly,
Pixels P7, P8, P9, P12 of 3 rows × 3 columns at the center part
A filtering process is performed on P13, P14, P17, P18 and P19 using the filter F5. The output value of this filtering process is defined as f5. Further, pixels P11, P12, P13, P16, P17, P18, P21, P22 in the lower left 3 rows × 3 columns
And P23 are subjected to a filtering process using the filter F5. The output value of this filtering process is defined as f5.

【００４７】これらのフィルタリング処理において，得
られた出力値ｆ１，ｆ２，ｆ３，ｆ４，ｆ５およびｆ６
を用いて式１を満足すれば図９に示すように，画素Ｐ１
からＰ25によって構成される画像のうち，左斜め方向の
エッジが存在することとなる。また，式２を満足すれば
図11に示すように，画素Ｐ１からＰ25によって構成され
る画像のうち，右斜め方向のエッジが存在することとな
る。式１または式２のいずれの式も満足しなければ，左
斜め方向および右斜め方向のいずれの方向のエッジも検
出しないこととなる。In these filtering processes, the obtained output values f1, f2, f3, f4, f5 and f6
If Equation 1 is satisfied by using the pixel P1 as shown in FIG.
To P25, there is an edge in the diagonal left direction. If Expression 2 is satisfied, as shown in FIG. 11, the image formed by the pixels P1 to P25 has an edge in the diagonally right direction. If neither expression 1 or expression 2 is satisfied, no edge is detected in any of the left and right diagonal directions.

【００４８】 if（not（（｜ｆ４＞しきい値）and （｜ｆ５｜＞しきい値）and（｜ｆ６｜＞ しきい値））and（（｜ｆ１｜＞しきい値）and（｜ｆ２｜＞しきい値）and（｜ ｆ３｜＞しきい値） …式１If (not ((| f4> threshold) and (| f5 |> threshold) and (| f6 |> threshold)) and ((| f1 |> threshold) and (| f2 |> threshold) and (| f3 |> threshold) ... Equation 1

【００４９】式１はｆ４，ｆ５およびｆ６の絶対値がす
べて所定のしきい値より大きくなく，かつｆ１，ｆ２お
よびｆ３の絶対値がすべて所定のしきい値より大きいこ
とを示している。Equation 1 shows that the absolute values of f4, f5 and f6 are not all greater than a predetermined threshold, and that the absolute values of f1, f2 and f3 are all greater than a predetermined threshold.

【００５０】 if（（（｜ｆ４＞しきい値）and （｜ｆ５｜＞しきい値）and（｜ｆ６｜＞し きい値））and not（（｜ｆ１｜＞しきい値）and（｜ｆ２｜＞しきい値）and（ ｜ｆ３｜＞しきい値） …式２If (((| f4> threshold) and (| f5 |> threshold) and (| f6 |> threshold)) and not ((| f1 |> threshold) and (| f2 |> threshold) and (| f3 |> threshold) ... Equation 2

【００５１】式２はｆ４，ｆ５およびｆ６の絶対値がす
べてしきい値より大きく，かつｆ１，ｆ２およびｆ３の
絶対値がすべて所定のしきい値より大きくないことを示
している。Equation 2 indicates that the absolute values of f4, f5 and f6 are all larger than the threshold value, and that the absolute values of f1, f2 and f3 are not all larger than the predetermined threshold value.

【００５２】以上のエッジ検出処理において，左斜め方
向のエッジが検出されると上述したように，左斜め方向
のフィルタ特性（図７（Ａ）参照）を有するフィルタを
用いて左斜め方向のフィルタ特性を有するフィルタの出
力画像データがセレクタ45から出力される。右斜め方向
のエッジが検出されると右斜め方向のフィルタ特性（図
７（Ｂ）参照）を有するフィルタの出力画像データがセ
レクタ45から出力される。いずれの方向のエッジも検出
されなければ，同時化回路41から出力され，フィルタリ
ング処理が行われない画像データがセレクタから出力さ
れる。In the above edge detection processing, when an edge in the diagonal left direction is detected, as described above, the filter having the filter characteristic in the diagonal left direction (see FIG. 7A) is used to filter the diagonal left direction. Output image data of a filter having characteristics is output from the selector 45. When the edge in the diagonal right direction is detected, the output image data of the filter having the filter characteristic in the diagonal right direction (see FIG. 7B) is output from the selector 45. If no edge in any direction is detected, the selector outputs the image data which is output from the synchronization circuit 41 and is not subjected to the filtering process.

【００５３】上述した実施例においては，ロウ・パス・
フィルタを用いたフィルタリング処理について説明した
が，ロウ・パス・フィルタを用いたフィルタリング処理
に限らないのはいうまでもない。フィルタを用いた他の
処理，例えば，輪郭補正処理，平滑化処理などにも利用
することができる。さらに，上述した実施例において
は，３行×３列のフィルタを用いてフィルタリング処理
を施しているが，その他のフィルタを用いることもでき
るのはいうまでもない。In the embodiment described above, the low pass
Although the filtering process using the filter has been described, it goes without saying that the filtering process is not limited to the low pass filter. It can also be used for other processing using a filter, for example, contour correction processing, smoothing processing, and the like. Further, in the above-described embodiment, the filtering process is performed using the filter of 3 rows × 3 columns, but it goes without saying that other filters can be used.

【図面の簡単な説明】[Brief description of the drawings]

【図１】ディジタル・カメラの電気的構成を示すブロッ
ク図である。FIG. 1 is a block diagram showing an electrical configuration of a digital camera.

【図２】ハニカム型ＣＣＤを構成する光電変換素子の一
部を示す。FIG. 2 shows a part of a photoelectric conversion element constituting a honeycomb CCD.

【図３】画素が補間された様子を示す。FIG. 3 shows a state where pixels are interpolated.

【図４】輝度フィルタリング回路の電気的構成を示すブ
ロック図である。FIG. 4 is a block diagram illustrating an electrical configuration of a luminance filtering circuit.

【図５】フィルタ特性の一例を示している。FIG. 5 shows an example of a filter characteristic.

【図６】輝度フィルタリング回路の他の電気的構成を示
すブロック図である。FIG. 6 is a block diagram illustrating another electrical configuration of the luminance filtering circuit.

【図７】（Ａ）および（Ｂ）は，フィルタ特性の他の一
例を示している。FIGS. 7A and 7B show another example of filter characteristics.

【図８】輝度フィルタリング回路の他の電気的構成を示
すブロック図である。FIG. 8 is a block diagram showing another electrical configuration of the luminance filtering circuit.

【図９】画像を構成する画素の一例を示している。FIG. 9 illustrates an example of a pixel forming an image.

【図１０】フィルタ特性の一例を示している。FIG. 10 shows an example of a filter characteristic.

【図１１】画像を構成する画素の一例を示している。FIG. 11 shows an example of a pixel constituting an image.

【図１２】フィルタ特性の一例を示している。FIG. 12 shows an example of a filter characteristic.

【符号の説明】[Explanation of symbols]

１ 光電変換素子 ２，51 画素 ３ 補間された画素 10 ＣＣＤ 17 補間回路 18 ＲＧＢ補間回路 20 輝度フィルタリング回路 22 色差フィルタリング回路 31，33，35，41 同時化回路 32，34，36，41 ロウ・パス・フィルタ 44 斜め方向検出回路 45 セレクタ DESCRIPTION OF SYMBOLS 1 Photoelectric conversion element 2,51 pixel 3 Interpolated pixel 10 CCD 17 Interpolation circuit 18 RGB interpolation circuit 20 Luminance filtering circuit 22 Color difference filtering circuit 31,33,35,41 Synchronization circuit 32,34,36,41 Low pass・ Filter 44 Oblique direction detection circuit 45 Selector

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁷ 識別記号 ＦＩ テーマコート゛(参考） Ｈ０４Ｎ 9/07 Ｈ０４Ｎ 1/40 １０１Ｄ Ｆターム(参考） 4M118 AA05 AA10 AB01 BA10 CA02 FA06 GC08 GC14 5C024 AA01 CA06 CA11 DA01 DA07 FA01 FA12 GA11 HA02 HA08 HA14 5C051 AA01 BA03 DA06 DB01 DC02 DE13 DE19 EA01 FA01 FA02 FA04 5C065 BB13 CC01 CC09 DD02 GG05 GG13 GG18 5C077 LL02 MM03 MM22 MP07 MP08 PP01 PP32 PP33 PP34 PP47 PP59 PQ08 RR19 TT06 ──────────────────────────────────────────────────続 き Continued on the front page (51) Int.Cl. ⁷ Identification symbol FI Theme coat ゛ (Reference) H04N 9/07 H04N 1/40 101D F-term (Reference) 4M118 AA05 AA10 AB01 BA10 CA02 FA06 GC08 GC14 5C024 AA01 CA06 CA11 DA01 DA07 FA01 FA12 GA11 HA02 HA08 HA14 5C051 AA01 BA03 DA06 DB01 DC02 DE13 DE19 EA01 FA01 FA02 FA04 5C065 BB13 CC01 CC09 DD02 GG05 GG13 GG18 5C077 LL02 MM03 MM22 MP07 MP08 PP01 PP32 PP33 PP08 PP47 PP59 P06

Claims (4)

【特許請求の範囲】[Claims] 【請求項１】 列方向および行方向に多数配列されてお
り，奇数列については奇数行または偶数行に光電変換素
子が配置され，かつ偶数列については偶数行または奇数
行に光電変換素子が配置されている固体電子撮像装置を
含み，被写体を撮像することにより被写体像を表す画像
データを出力する撮像手段，上記撮像手段から出力され
た画像データによって表される被写体像のうち行方向お
よび列方向に隣接する画素の間の画素を補間するよう
に，上記画像データを補間処理する補間手段，上記補間
手段によって補間された画像データのうち，複数行分の
画像データを同時化する同時化手段，ならびに斜め方向
のフィルタ特性を有するフィルタを用いて，上記同時化
手段によって同時化された画像データをフィルタリング
処理するフィルタリング手段，を備えた画像データ・フ
ィルタリング装置。1. A large number of photoelectric conversion elements are arranged in a column direction and a row direction, photoelectric conversion elements are arranged in odd rows or even rows for odd columns, and photoelectric conversion elements are arranged in even rows or odd rows for even columns. Means for outputting image data representing a subject image by taking an image of the subject, and a row direction and a column direction of the subject image represented by the image data output from the imaging means. Interpolating means for interpolating the image data so as to interpolate pixels between pixels adjacent to the image data; synchronizing means for synchronizing image data for a plurality of rows of the image data interpolated by the interpolating means; And a filter for filtering the image data synchronized by the synchronization means using a filter having a filter characteristic in an oblique direction. Image data filtering device comprising: 【請求項２】 上記フィルタリング手段が，左斜め方向
にフィルタ特性を有するフィルタを用いて，上記同時化
手段によって同時化された画像データをフィルタリング
処理する第１のフィルタリング手段，および右斜め方向
に配置されている画素についてフィルタリング特性を有
するフィルタを用いて，上記第１のフィルタリング手段
によってフィルタリング処理された画像データをフィル
タリング処理する第２のフィルタリング手段，を備えて
いる請求項１に記載の画像データ・フィルタリング装
置。2. The image processing apparatus according to claim 1, wherein the filtering means uses a filter having a filter characteristic in a diagonal left direction to filter the image data synchronized by the synchronizing means, and is arranged in a diagonal right direction. 2. The image data processing apparatus according to claim 1, further comprising: a second filtering unit configured to perform a filtering process on the image data that has been subjected to the filtering process by the first filtering unit using a filter having a filtering characteristic with respect to the selected pixel. Filtering device. 【請求項３】 上記フィルタリング手段が，左斜め方向
にフィルタ特性を有するフィルタを用いて，上記同時化
手段によって同時化された画像データをフィルタリング
する第１のフィルタリング手段，および右斜め方向にフ
ィルタ特性を有するフィルタを用いて，上記同時化手段
によって同時化された画像データをフィルタリングする
第２のフィルタリングする第２のフィルタリング手段を
備え，上記補間手段によって補間された画像データによ
り表される被写体像中の画像のエッジ部分が左斜め方向
か，右斜め方向か，それらのいずれの方向でもないかど
うかを判定する判定手段，および上記判定手段が，左斜
め方向と判定したことにより，上記第１のフィルタリン
グ手段によってフィルタリングされた画像データを選択
して出力し，右斜め方向と判定したことにより，上記第
２のフィルタリング手段によってフィルタリングされた
画像データを選択して出力し，それらのいずれの方向で
もないと判定されたことにより，上記同時化手段から出
力された画像データを選択して出力するセレクタ，をさ
らに備えた請求項１に記載の画像データ・フィルタリン
グ装置。3. The filtering means according to claim 1, wherein said filtering means uses a filter having a filter characteristic in a diagonal left direction to filter the image data synchronized by said synchronizing means, and a filter characteristic in a diagonal right direction. A second filtering means for filtering the image data synchronized by the synchronizing means using a filter having: Determining means for determining whether the edge portion of the image is in the left diagonal direction, the right diagonal direction, or any of these directions; and the first determining means determines that the image is in the left diagonal direction. Select and output the image data filtered by the filtering means, The image data filtered by the second filtering means is selected and output by judging the direction, and the image data output from the synchronizing means is selected by judging that it is not in any of those directions. 2. The image data filtering device according to claim 1, further comprising a selector for selecting and outputting the selected data. 【請求項４】 列方向および行方向に多数配列されてお
り，奇数列については奇数行または偶数行に光電変換素
子が配置され，かつ偶数列については偶数行または奇数
行に光電変換素子が配置されている固体電子撮像装置を
含み，被写体を撮像することにより被写体像を表す画像
データを得，得られた画像データによって表される被写
体像のうち行方向および列方向に隣接する画素の間の画
素を補間するように，上記画像データを補間処理し，補
間された画像データのうち，複数行分の画像データを同
時化し，斜め方向のフィルタ特性を有するフィルタを用
いて，上記同時化処理された画像データをフィルタリン
グ処理する，画像データ・フィルタリング方法。4. A plurality of photoelectric conversion elements are arranged in a column direction and a row direction, photoelectric conversion elements are arranged in odd rows or even rows for odd columns, and photoelectric conversion elements are arranged in even rows or odd rows for even columns. Image data representing a subject image by capturing the subject, and obtaining the image data representing the subject image between the adjacent pixels in the row direction and the column direction in the subject image represented by the obtained image data. Interpolating the image data so as to interpolate the pixels, synchronizing the image data for a plurality of lines out of the interpolated image data, and performing the synchronizing process using a filter having a filter characteristic in an oblique direction. Image data filtering method for filtering filtered image data.