DE69206830T2 - Circuit for eliminating picture element defects for solid-state image sensors - Google Patents

Circuit for eliminating picture element defects for solid-state image sensors

Info

Publication number
DE69206830T2
DE69206830T2 DE1992606830 DE69206830T DE69206830T2 DE 69206830 T2 DE69206830 T2 DE 69206830T2 DE 1992606830 DE1992606830 DE 1992606830 DE 69206830 T DE69206830 T DE 69206830T DE 69206830 T2 DE69206830 T2 DE 69206830T2
Authority
DE
Germany
Prior art keywords
pixel
pixel value
value
detection
group
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
DE1992606830
Other languages
German (de)
Other versions
DE69206830D1 (en
Inventor
Norio Suzuki
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP3007175A external-priority patent/JPH04239886A/en
Priority claimed from JP3068255A external-priority patent/JP2924250B2/en
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Application granted granted Critical
Publication of DE69206830D1 publication Critical patent/DE69206830D1/en
Publication of DE69206830T2 publication Critical patent/DE69206830T2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Picture Signal Circuits (AREA)

Description

Die vorliegende Erfindung bezieht sich auf eine Schaltung bzw. einen Schaltkreis zur Beseitigung von Impulsrauschkomponenten, die einem Videosignal überlagert sind, das von einem Festkörper-Bildaufnehmer zugeführt wird, der einen Pixel- bzw. Bildelementdefekt besitzt.The present invention relates to a circuit for eliminating impulse noise components superimposed on a video signal supplied from a solid-state image sensor having a pixel defect.

In Abbildungsaufnahmevorrichtungen, wie beispielsweise eine Videokamera, werden derzeit Festkörper-Bildaufnehmer oftmals in der optoelektronischen Wandlereinheit verwendet. Wenn das Ausgangssignal des Festkörper-Bildaufnehmers durch eine Monitorvorrichtung angezeigt wird und das Videosignal beobachtet wird, werden Pixeldefekte, die als weiße Punkte oder schwarze Punkte bekannt sind, manchmal in dem Bild beobachtet. Solche Pixeldefekte sind sehr deutlich, gerade obwohl sie von kleiner Größe sind, und der Bildaufnehmer mit Pixeldefekten kann nicht als kommerzielles Produkt verwendet werden, so daß die Ausbeute herabgesetzt wird. Darüberhinaus können Pixeldefekte gerade nach einer Versendung der Produkte auftreten. Diese Probleme sind Festkörper-Bildaufnehmern eigen und sind ernsthafte Hindernisse zur Verwendung der Festkörper-Bildaufnehmer.In image pickup devices such as a video camera, solid-state image sensors are currently often used in the optoelectronic conversion unit. When the output of the solid-state image sensor is displayed by a monitor device and the video signal is observed, pixel defects known as white spots or black spots are sometimes observed in the image. Such pixel defects are very obvious even though they are small in size, and the image sensor with pixel defects cannot be used as a commercial product, so that the yield is lowered. Moreover, pixel defects may occur even after the products are shipped. These problems are inherent in solid-state image sensors and are serious obstacles to the use of the solid-state image sensors.

Bisher werden als eine Maßnahme zur Lösung der vorstehenden Probleme in einem ersten Beispiel, wie dies in der DE-A-36 29 009 dargestellt ist, angefallene Positionen von Pixeldefekten in einem PROM oder dergleichen gespeichert und die Pixeldefekte werden unter Verwendung der vorhergehenden und nachfolgenden Pixel auf der Abtastzeile unter der Zeitabstimmung korrigiert, wenn der Ausgang des Festkörper-Bildaufnehmers der gespeicherten Position in dem PROM entspricht.Hitherto, as a measure for solving the above problems, in a first example as shown in DE-A-36 29 009, accrued positions of pixel defects are stored in a PROM or the like, and the pixel defects are corrected using the previous and subsequent pixels on the scanning line under the timing when the output of the solid-state image sensor corresponds to the stored position in the PROM.

In diesem ersten Stand der Technik ist der PROM als die Einrichtung zum Speichern der Position der Pixeldefekte erforderlich, allerdings ist es, da die Position des Pixeldefekts, der in dem Festkörper-Bildaufnehmer auftritt, von Vorrichtung zu Vorrichtung variiert, notwendig, die Pixeldefekt-Position in jeder Vorrichtung zu ermitteln und einen entsprechenden PROM zu präparieren, was zu viel Arbeit erfordert. Weiterhin ist dieses Verfahren nutzlos für Pixeldefekte, die nach dem Versenden der Produkte auftreten.In this first prior art, the PROM is required as the means for storing the position of the pixel defects, however, since the position of the pixel defect occurring in the solid-state image sensor varies from device to device, it is necessary to detect the pixel defect position in each device and prepare a corresponding PROM, which requires too much labor. Furthermore, This procedure is useless for pixel defects that occur after the products have been shipped.

Als ein zweites Beispiel, wie dies in der japanischen, offengelegten Patentanmeldung Sho. JP-A-61261974 offenbart ist, werden Pixeldefekte durch Vergleich mit den benachbarten Pixeln ermittelt, die in der Abtastzeilenrichtung oder in der Richtung vertikal zu der Abtastzeilenrichtung hinsichtlich des Pixels, das festgestellt ist, ermittelt werden, und der Signaiwert wird durch den Wert eines Pixels vor oder durch den Mittelwert der vorhergehenden und darauffolgenden Pixel ersetzt, so daß der ermittelte Pixeldefekt korrigiert wird.As a second example, as disclosed in Japanese Laid-Open Patent Application Sho. JP-A-61261974, pixel defects are detected by comparing with the neighboring pixels detected in the scanning line direction or in the direction vertical to the scanning line direction with respect to the pixel that is detected, and the signal value is replaced by the value of a pixel before or by the average value of the preceding and succeeding pixels, so that the detected pixel defect is corrected.

Bei dem zweiten Stand der Technik wird, wenn Pixeldefekte ermittelt werden, die Aufmerksamkeit nur der Abtastzeilenrichtung oder der Richtung vertikal zu der Abtastzeilenrichtung geschenkt, allerdings nicht soweit, daß sie mit den Pixeln in den schrägen Richtungen verglichen werden, wobei feine Liniensegmente in den schrägen Richtungen zu der Abtastzeile als Pixeldefekte ermittelt werden und alle Liniensegmente in den schrägen Richtungen entfernt werden. Wenn Pixeldefekte korrigiert werden, wird der Wert durch ein Pixel davor oder den Mittelwert der vorhergehenden und darauffolgenden Pixel ersetzt, allerdings kann, falls dort ein Pixeldefekt auf einem feinen Liniensegment vorhanden ist, das sich in der vertikalen Richtung zu der Abtastzeilenrichtung erstreckt, das Liniensegment als ein Ergebnis einer Korrektur abgeschnitten werden.In the second prior art, when pixel defects are detected, attention is paid only to the scanning line direction or the direction vertical to the scanning line direction, but not to the extent of comparing them with the pixels in the oblique directions, whereby fine line segments in the oblique directions to the scanning line are detected as pixel defects and all line segments in the oblique directions are removed. When pixel defects are corrected, the value is replaced by a pixel before or the average value of the preceding and succeeding pixels, however, if there is a pixel defect on a fine line segment extending in the vertical direction to the scanning line direction, the line segment may be cut off as a result of correction.

Es ist deshalb eine primäre Aufgabe der Erfindung, eine Vorrichtung zum geeigneten Entfernen von impulsiven Pixeldefekten zu schaffen, die nur an einem Pixel bestehen, ohne die feinen Liniensegmente in schrägen Richtungen zu der Abtastzeilenrichtung zu entfernen und ohne die feinen Liniensegmente, die sich in der vertikalen Richtung zu der Abtastzeilenrichtung erstrecken, zu opfern, was bei Pixeldefekten effektiv wird, die nach dem Versenden von Produkten auftreten, und ohne das Erfordernis einer Herstellung eines PROM entsprechend zu jeder Vorrichtung.It is therefore a primary object of the invention to provide an apparatus for appropriately removing impulsive pixel defects existing only at one pixel without removing the fine line segments in oblique directions to the scanning line direction and without sacrificing the fine line segments extending in the vertical direction to the scanning line direction, which becomes effective for pixel defects occurring after shipment of products and without requiring manufacture of a PROM corresponding to each apparatus.

Um die vorstehende Aufgabe zu lösen, liefert die Erfindung einen Pixeldefekt-Beseitigungsschaltkreis, der eine Pixelwertgruppen-Abtasteinrichtung zum Empfangen eines Videosignals und zum Zuführen eines Pixelwerts einer Feststellung, die zu einer bestimmten Zeit t festgestellt ist, und einer nächstgelegenen Pixelwertgruppe, die aus Pixelwerten einer Gruppe nächstgelegener Pixel benachbart zweidimensional um das Pixel der Feststellung bestehen, eine Kandidatenpixelwertgruppen-Abtasteinrichtung zum Zuführen einer Gruppe mehrerer Kandidatenpixelwerte als Kandidaten von Pixelwerten, um abschließend von dem Schaltkreis aus der Gruppe der nächstgelegenen Pixelwerte zugeführt werden, einen Rauschdetektor zur Durchführung einer Operation zwischen dem Pixelwert des Pixels der Feststellung und dem Kandidatenpixelwerten, um zu entscheiden, ob ein Impulsrauschen in dem Pixel der Feststellung enthalten ist oder nicht, und Zuführung eines Pixelauswahlsignals, um zu instruieren, welcher Pixelwert aus den Pixelwerten der Pixel der Feststellung und der Kandidatenpixelwerte auf der Basis des Ergebnisses einer Entscheidung abgegeben werden sollte, und eine Pixelwert-Auswahleinrichtung zum Auswählen und Zuführen irgendeines Pixelwerts aus dem Pixelwert des Pixels der Feststellung und der Kandidatenpixelwerte auf der Basis des Pixelauswahlsignals, aufweist.To achieve the above object, the invention provides a pixel defect removing circuit comprising pixel value group sampling means for receiving a video signal and supplying a pixel value of a detection detected at a certain time t and a nearest pixel value group consisting of pixel values of a group of nearest pixels adjacent two-dimensionally around the pixel of detection, candidate pixel value group sampling means for supplying a group of plural candidate pixel values as candidates of pixel values to be finally supplied by the circuit from the group of nearest pixel values, noise detector for performing an operation between the pixel value of the pixel of detection and the candidate pixel values to decide whether or not impulse noise is contained in the pixel of detection, and supplying a pixel selection signal for instructing which pixel value to select from the pixel values of the pixels of detection and the candidate pixel values based on the result. a decision should be made, and a pixel value selection means for selecting and supplying any one pixel value from the pixel value of the pixel of the determination and the candidate pixel values on the basis of the pixel selection signal.

Bei diesem Aufbau kann die Pixelwertgruppen-Abtasteinrichtung vorzugsweise Pixelwerte von 3 x 3 Pixeln aus drei fortlaufenden Abtastzeilen herausnehmen und ein zentrales Pixel als das Pixel der Feststellung und die verbleibenden Pixel als die nächstgelegenen bzw. proximalen Pixel definieren. Daneben kann die Kandidatenpixelwertgruppen-Abtasteinrichtung, als die Kandidatenpixelwerte zwei Pixelwerte, die einen maximalen Pixelwert und einen minimalen Pixelwert besitzen, jeweils in den nächstgelegenen Pixeln vorzugsweise zuführen. Zwischenzeitlich kann die Kandidatenpixelwertgruppen-Abtasteinrichtung vorzugsweise, als die Kandidatenpixelwerte, zwei Pixelwerte zuführen, die einen maximalen Wert zwischen Po und einem kleineren von Pr und Pl, das bedeutet, max (min (Pr, Pl), Po), und einen minimalen Wert zwischen Po und einem größeren von Pr und Pl, das bedeutet min (max (Pr, Pl), Po) unter den nächstliegenden Pixeln besitzen, wobei angenommen wird, daß ein Pixelwert eines Pixels an der dichtesten Position in einer Pixelgruppe besteht, die in der rechten Richtung auf einer Abtastzeile besteht, die das Pixel der Feststellung enthält, Pr ist, ein Pixelwert eines Pixels, das an der nächsten Position in einer Pixelgruppe, die in der linken Richtung auf der Abtastzeile besteht, Pl ist, und Pixelwerte der Pixel, ausschließlich Pr und Pl, von den nächstgelegenen bzw. proximalen Pixeln Po sind.In this structure, the pixel value group sampling means may preferably take out pixel values of 3 x 3 pixels from three continuous scanning lines and define a central pixel as the pixel of detection and the remaining pixels as the proximal pixels. Besides, the candidate pixel value group sampling means may preferably supply, as the candidate pixel values, two pixel values having a maximum pixel value and a minimum pixel value in the proximal pixels, respectively. Meanwhile, the candidate pixel value group sampling means may preferably supply, as the candidate pixel values, two pixel values having a maximum value between Po and a smaller one of Pr and Pl, that is, max (min (Pr, Pl), Po), and a minimum value between Po and a larger one of Pr and Pl, that is, min (max (Pr, Pl), Po) among the proximal pixels, assuming that a pixel value of a pixel at the closest position in a pixel group consisting in the right direction on a scan line containing the pixel of detection is Pr, a pixel value of a pixel consisting in the next position in a pixel group consisting in the left direction on the scan line is Pl, and pixel values of the pixels excluding Pr and Pl from the nearest or proximal pixels are Po.

Diese Konstitution, die nicht erfordert, einen PROM entsprechend jeder Vorrichtung vorzusehen, ist bei Pixeldefekten wirksam, die nach dem Versenden der Produkte auftreten, und gestaltet es möglich, impulsive Pixeldefekte, die auf nur einem Pixel bestehen, ohne Entfernen der feinen Liniensegmente in der schrägen Richtung zu der Abtastzeile und ohne Opfern der feinen Liniensegmente, die in der vertikalen Richtung zu der Abtastzeile bestehen, in günstiger Weise zu entfernen.This constitution, which does not require providing a PROM corresponding to each device, is effective for pixel defects occurring after shipment of the products, and makes it possible to favorably remove impulsive pixel defects existing on only one pixel without removing the fine line segments in the oblique direction to the scanning line and without sacrificing the fine line segments existing in the vertical direction to the scanning line.

Fig. 1 zeigt eine gesamte Konfiguration einer Ausführungsform der Erfindung.Fig. 1 shows an entire configuration of an embodiment of the invention.

Fig. 2 zeigt eine Konfiguration einer Pixelwertgruppen-Abtasteinrichtung gemäß einer Ausführungsform der Erfindung.Fig. 2 shows a configuration of a pixel value group sampling device according to an embodiment of the invention.

Fig. 3 zeigt eine Konfiguration einer Kandidatenpixelwertgruppen-Abtasteinrichtung gemäß einer ersten Ausführungsform der Erfindung.Fig. 3 shows a configuration of a candidate pixel value group sampling device according to a first embodiment of the invention.

Fig. 4 zeigt eine Konfiguration eines Rauschdetektors gemäß einer Ausführungsform der Erfindung.Fig. 4 shows a configuration of a noise detector according to an embodiment of the invention.

Fig. 5 zeigt eine Konfiguration eines Pixelwertdetektors gemäß einer Ausführungsform der Erfindung.Fig. 5 shows a configuration of a pixel value detector according to an embodiment of the invention.

Fig. 6 zeigt eine Konfiguration einer Kandidatenpixelwertgruppen-Abtasteinrichtung gemäß einer zweiten Ausführungsform der Erfindung.Fig. 6 shows a configuration of a candidate pixel value group sampling device according to a second embodiment of the invention.

Fig. 7 zeigt ein Layoutdiagramm eines Pixels einer Feststellung und einer nächstgelegenen Pixelgruppe gemäß einer Ausführungsform der Erfindung.Figure 7 shows a layout diagram of a detection pixel and a closest pixel group according to an embodiment of the invention.

Fig. 8 zeigt ein Betriebserläuterungsdiagramm für die erste Ausführungsform der Erfindung.Fig. 8 shows an operation explanatory diagram for the first embodiment of the invention.

Fig. 9 zeigt ein Betriebserläuterungsdiagramm der zweiten Ausführungsform der Erfindung.Fig. 9 shows an operation explanatory diagram of the second embodiment of the invention.

Unter Bezugnahme nun auf die Zeichnungen wird eine der Ausführungsformen der Erfindung im Detail nachfolgend beschrieben.Referring now to the drawings, one of the embodiments of the invention is described in detail below.

In Fig. 1 empfängt eine Pixelwertgruppen-Abtasteinrichtung 2 ein Videosignal, das über einen Eingangsanschluß 1 eingegeben wird, und führt einen Pixelwert b des Pixels der Feststellung und eine nächstliegende Pixelwertgruppe c zu, die aus Pixelwerten von NXM-1 Pixeln, ausschließlich des Pixels der Feststellung von der Pixelgruppe benachbart zweidimensional für N-Pixel in der Abtastzeilenrichtung um das Pixel der Feststellung und M-Zeilen in der Richtung orthogonal zu der Abtastzeile bestehen.In Fig. 1, a pixel value group sampling device 2 receives a video signal input via an input terminal 1 and supplies a pixel value b of the pixel of detection and a nearest pixel value group c consisting of pixel values of NXM-1 pixels excluding the pixel of detection from the pixel group adjacent two-dimensionally for N pixels in the scanning line direction around the pixel of detection and M lines in the direction orthogonal to the scanning line.

Fig. 2 zeigt ein spezifisches Konfigurationsdiagramm der Pixelwertgruppen-Abtasteinrichtung 2. In Fig. 2 ist ein Beispiel einer Zusammensetzung von M=N=3 zur Erläuterung des Betriebs der Pixelwertgruppen-Abtasteinrichtung 2 dargestellt, die aus zwei vertikalen Verzögerungseinheiten und sechs horizontalen Verzögerungseinheiten zusammengesetzt ist. Die horizontale Verzögerungseinheit ist dazu vorgesehen, ein Signal durch Verzögerung des Eingangssignals um die Abtastzeit für den Bereich, von beispielsweise einem Pixel zuzuführen, während die vertikale Verzögerungseinheit dazu vorgesehen ist, ein Signal durch Verzögerung des Eingangssignais über eine horizontale Abtastzeit zuzuführen. Weiterhin stellt Fig. 7 ein Beispiel eines Layouts des Pixels der Feststellung auf der Abtastzeilen- und nächstgelegenen Pixelgruppe dar, in der Pixel, die von 1 bis 8 durchnumeriert sind, die nächstgelegene Pixelgruppe c zusammensetzen und das Pixel der Feststellung b in der Mitte der nächstgelegenen Pixelgruppe angeordnet ist.Fig. 2 shows a specific configuration diagram of the pixel value group sampling device 2. In Fig. 2, an example of a composition of M=N=3 is shown for explaining the operation of the pixel value group sampling device 2, which is composed of two vertical delay units and six horizontal delay units. The horizontal delay unit is provided to supply a signal by delaying the input signal by the sampling time for the area of, for example, one pixel, while the vertical delay unit is provided to supply a signal by delaying the input signal by a horizontal sampling time. Furthermore, Fig. 7 shows an example of a layout of the pixel of detection on the scanning line and nearest pixel group, in which pixels numbered from 1 to 8 compose the nearest pixel group c and the pixel of detection b is located in the center of the nearest pixel group.

In Fig. 2 ist ein Videosignal a mit einer horizontalen Verzögerungseinheit 11 verbunden und der Ausgang der horizontalen Verzögerungseinheit 11 ist mit einer horizontalen Verzögerungseinheit 12 verbunden. Wenn Signale von drei Positionen herausgenommen werden, das bedeutet das Eingangsende der horizontalen Verzögerungseinheit 11, das Ausgangsende der horizontalen Verzögerungseinheit 11 und das Ausgangsende der horizontalen Verzögerungseinheit 12, werden Pixelwerte c3, c2, c1 an Positionen entsprechend den nächstgelegenen Pixeln 3, 2, 1 in Fig. 6 jeweils erhalten. Das Videosignal a wird auch mit einer vertikalen Verzögerungseinheit 17 verbunden, und wenn die horizontalen Verzögerungseinheiten 13, 14 in Reihe mit dem Ausgangsende der vertikalen Verzögerungseinheit 17 verbunden werden, werden ähnlich Pixelwerte c5, b, c4 an Positionen entsprechend dem nächstgelegenen Pixel 5, dem Pixel der Feststellung, und dem nächstgelegenen Pixel 4 in Fig. 6 erhalten. Weiterhin wird an dem Ausgangsende der vertikalen Verzögerungseinheit 17 in Fig. 2 eine vertikale Verzögerungseinheit 18 verbunden, und wenn horizontale Verzögerungseinheiten 15, 16 in Reihe mit dem Ausgangsende der vertikalen Verzögerungseinheit 18 verbunden werden, werden ähnlich Pixelwerte c8, c7, c6 an Positionen entsprechend den nächstgelegenen bzw. proximalen Pixeln 8, 7, 6 in Fig. 6 erhalten. Wenn die Pixelwertgrupppen-Abtasteinrichtung in dieser Weise zusammengesetzt ist, können der Pixelwert b des Pixels der Feststellung und die nächstgelegene Pixelwertgruppe c gleichzeitig von einer Mehrzahl Ausgangsanschlüssen zugeführt werden.In Fig. 2, a video signal a is connected to a horizontal delay unit 11, and the output of the horizontal delay unit 11 is connected to a horizontal delay unit 12. When signals are taken out from three positions, that is, the input end of the horizontal delay unit 11, the output end of the horizontal delay unit 11, and the output end of the horizontal delay unit 12, pixel values c3, c2, c1 are obtained at positions corresponding to the nearest pixels 3, 2, 1 in Fig. 6, respectively. The video signal a is also connected to a vertical delay unit 17, and when the horizontal delay units 13, 14 are connected in series to the output end of the vertical delay unit 17, similarly pixel values c5, b, c4 are obtained at positions corresponding to the proximal pixel 5, the pixel of detection, and the proximal pixel 4 in Fig. 6. Furthermore, to the output end of the vertical delay unit 17 in Fig. 2, a vertical delay unit 18 is connected, and when horizontal delay units 15, 16 are connected in series to the output end of the vertical delay unit 18, similarly pixel values c8, c7, c6 are obtained at positions corresponding to the proximal pixels 8, 7, 6 in Fig. 6. When the pixel value group sampling device is composed in this manner, the pixel value b of the pixel of detection and the nearest pixel value group c can be simultaneously supplied from a plurality of output terminals.

In Fig. 1 führt die Kandidatenpixelwertgruppen-Abtasteinrichtung 3 eine Kandidatenpixelwertgruppe von der nächstgelegenen Pixelwertgruppe c zu, die gleichzeitig von der Pixelwertgruppen-Abtasteinrichtung 2 zugeführt wird. Die Kandidatenpixelwertgruppe ist aus zwei Pixelwerten, Ymax und Ymin, zusammengesetzt, die den maximalen Pixelwert in der proximalen Pixelwertgruppe c so annehmen, daß er Ymax ist und der minimale Pixelwert Ymin ist.In Fig. 1, the candidate pixel value group sampler 3 supplies a candidate pixel value group from the proximal pixel value group c, which is simultaneously supplied from the pixel value group sampler 2. The candidate pixel value group is composed of two pixel values, Ymax and Ymin, which assume the maximum pixel value in the proximal pixel value group c to be Ymax and the minimum pixel value to be Ymin.

Fig. 3 zeigt eine spezifische Konfiguration der Kandidatenpixelwertgruppen-Abtasteinrichtung 3. Fig. 3, in Verbindung mit der Erläuterung der Pixelwertgruppen-Abtasteinrichtung 2, stellt ein Beispiel einer Zusammensetzung einer Kandidatenpixelwertgruppen-Abtasteinrichtung 3 dar, bei der die nächstgelegene Pixelgruppe aus 8 Pixeln zusammengesetzt ist, die einen Maximalwertschaltkreis 22, der acht Eingangsanschlußgruppen besitzt, und einen Minimalwertschaltkreis 23, der acht Eingangsanschlußgruppen besitzt, aufweist. Der Maximalwertschaltkreis 22 tastet den maximalen Pixelwert (Ymax) von der nächstgelegenen Eingangspixelwertgruppe c ab und führt ihn zu. Der Minimalwertschaltkreis 23 tastet den minimalen Pixelwert (Ymin) von der nächstgelegene Eingangspixelwertgruppe c ab und führt ihn zu.Fig. 3 shows a specific configuration of the candidate pixel value group sampling device 3. Fig. 3, in connection with the explanation of the Pixel value group sampling means 2 illustrates an example of a composition of a candidate pixel value group sampling means 3 in which the nearest pixel group is composed of 8 pixels, comprising a maximum value circuit 22 having eight input terminal groups and a minimum value circuit 23 having eight input terminal groups. The maximum value circuit 22 samples the maximum pixel value (Ymax) from the nearest input pixel value group c and supplies it. The minimum value circuit 23 samples the minimum pixel value (Ymin) from the nearest input pixel value group c and supplies it.

In Fig. 1 entscheidet der Rauschdetektor 4, ob ein Rauschen in dem Pixel der Feststellung enthalten ist oder nicht, und zwar aus dem Pixelwert b des Pixels der Feststellung, das von der Pixelwertgruppen-Abtasteinrichtung 2 zugeführt wird, und Ymax und Ymin, die von der Kandidatenpixelwertgruppen-Abtasteinrichtung 3 zugeführt werden, und führt das Ergebnis der Entscheidung als Steuersignal zu. Das Steuersignal ist aus SELmax, bei dem es sich um ein Signal zur Auswahl von Ymax handelt, und aus SELmin, bei dem es sich um ein Signal zur Auswahl von Ymin handelt, zusammengesetzt.In Fig. 1, the noise detector 4 decides whether or not noise is contained in the pixel of detection from the pixel value b of the pixel of detection supplied from the pixel value group sampling means 2 and Ymax and Ymin supplied from the candidate pixel value group sampling means 3, and supplies the result of the decision as a control signal. The control signal is composed of SELmax which is a signal for selecting Ymax and SELmin which is a signal for selecting Ymin.

Fig. 4 zeigt eine spezifische Konfiguration des Rauschdetektors 4, der aus zwei Subtrahiergliedern, zwei Komparatoren und zwei Schwellwerteinstellgliedern zusammengesetzt ist. Ein Subtrahierglied 33 subtrahiert Ymax von dem Pixelwert des Pixels der Feststellung und erzeugt die Differenz (nachfolgend als DIFmax bezeichnet). Ein Komparator 34 vergleicht DIFmax mit dem Schwellwert, der von einem Schwellwertgenerator 35 (nachfolgend als THmax bezeichnet) zugeführt wird, und macht das Signal SELmax zur Auswahl von Ymax, falls DIFmax > THmax, als Bedingung 1 aktiv, und macht SEL inaktiv, falls die Bedingung 1 nicht eingerichtet ist. Ein Subtrahierglied 36 subtrahiert den Pixelwert des Pixels der Feststellung von Ymin und erzeugt die Differenz (DIFmin). Ein Komparator 37 vergleicht DIFmin mit dem Schwellwert, der von einem Schwellwertgenerator 38 (THmin) zugeführt wird, und macht das Signal SELmin zur Auswahl von Ymin aktiv, falls DIFmin > THmin als Bedingung 2 ist, und macht SELmin inaktiv, falls die Bedingung 2 nicht auftritt.Fig. 4 shows a specific configuration of the noise detector 4, which is composed of two subtractors, two comparators and two threshold setting means. A subtractor 33 subtracts Ymax from the pixel value of the pixel of detection and generates the difference (hereinafter referred to as DIFmax). A comparator 34 compares DIFmax with the threshold value supplied from a threshold value generator 35 (hereinafter referred to as THmax) and makes the signal SELmax active for selecting Ymax if DIFmax > THmax as condition 1, and makes SEL inactive if condition 1 is not established. A subtractor 36 subtracts the pixel value of the pixel of detection from Ymin and generates the difference (DIFmin). A comparator 37 compares DIFmin with the threshold value supplied by a threshold generator 38 (THmin) and makes the signal SELmin active for selecting Ymin, if DIFmin > THmin as condition 2, and makes SELmin inactive if condition 2 does not occur.

Allgemein ist, aufgrund des räumlichen Tiefpaßfiltereffekts durch Linsen oder dergleichen, die Amplitude der Hochfrequenzkomponente (Detail) des Videosignals als der Ausgang des optoelektronischen Wandlerelements klein, und falls ein Impulsrauschen in dem Pixel der Feststellung nicht enthalten ist, wird der differentielle Bereich der nächstgelegenen Pixelgruppe hinsichtlich des Pixels der Feststellung klein. Deshalb kann, falls THmax und THmin extrem klein für den maximalen Wert des Pixelwerts gesetzt werden, die Detailkomponente des Videosignals verlorengehen, oder falls sie extrem groß gesetzt werden, kann der Defekt selbst nicht ermittelt werden, und demzufolge ist es erforderlich, eine richtige Einstellung vorzunehmen.Generally, due to the spatial low-pass filter effect by lenses or the like, the amplitude of the high frequency component (detail) of the video signal as the output of the optoelectronic conversion element is small, and if impulse noise is not contained in the pixel of detection, the differential range of the nearest pixel group with respect to the pixel of detection becomes small. Therefore, if THmax and THmin are set extremely small for the maximum value of the pixel value, the detail component of the video signal may be lost, or if they are set extremely large, the defect itself cannot be detected, and hence it is necessary to make a proper setting.

In Fig. 1 empfängt die Pixelwert-Auswahleinrichtung 5 das Pixel der Feststellung, das von der Pixelwertgruppen-Abtasteinrichtung 2 zugeführt wird, Ymax und Ymin, das von der Kandidatenpixelwertgruppen-Abtasteinrichtung 3 zugeführt wird, und SELmax, SELmin, das von dem Rauschdetektor 4 zugeführt wird, und führt irgendeinen des Pixelwerts des Pixels der Feststellung, Ymax und Ymin, zu dem Ausgangsanschluß 1 auf der Basis von SELmax, SELmin zu.In Fig. 1, the pixel value selector 5 receives the pixel of the detection supplied from the pixel value group sampling means 2, Ymax and Ymin supplied from the candidate pixel value group sampling means 3, and SELmax, SELmin supplied from the noise detector 4, and supplies any one of the pixel value of the pixel of the detection, Ymax and Ymin, to the output terminal 1 on the basis of SELmax, SELmin.

Fig.5 zeigt eine spezifische Konfiguration der Pixelwert-Auswahleinrichtung 5, die aus einem Multiplexer 47 zusammengesetzt ist. Der Multiplexer 47 empfängt den Pixelwert des Pixels der Feststellung, Ymax und Ymin, und wenn sowohl SELmax als auch SELmin beide inaktiv sind, wird der Pixelwert b des Pixels der Feststellung zu dem Ausgangsanschluß 6 zugeführt, und wenn SELmax aktiv ist und SELmin inaktiv ist, wird Ymax zu dem Ausgangsanschluß 6 zugeführt, und wenn SELmax inaktiv ist und SELmin aktiv ist, wird Ymin zu dem Ausgangsanschluß 6 zugeführt. Wie aus der Erläuterung des Rauschdetektors 4 verstanden wird, ist es unmöglich, daß sowohl SELmax als auch SELmin aktiv sind, und zwar aufgrund des Zustands des Ausgangs von SELmax und SELmin.Fig.5 shows a specific configuration of the pixel value selector 5, which is composed of a multiplexer 47. The multiplexer 47 receives the pixel value of the pixel of detection, Ymax and Ymin, and when both SELmax and SELmin are both inactive, the pixel value b of the pixel of detection is supplied to the output terminal 6, and when SELmax is active and SELmin is inactive, Ymax is supplied to the output terminal 6, and when SELmax is inactive and SELmin is active, Ymin is supplied to the output terminal 6. As will be understood from the explanation of the noise detector 4, it is impossible that both SELmax and SELmin are active due to the state of the output of SELmax and SELmin.

Unter Bezugnahme nun auf Fig. 8 wird die Betriebsweise der Erfindung nachfolgend beschrieben. In Fig. 8a sind zum Beispiel alle Pixelwerte von P01, P11, P21, P14 100, der Pixelwert von P16 ist 0, der Pixelwert von P18 ist 70 und die Pixelwerte aller anderen Pixel sind 50, und THmax und THmin sind 30.Referring now to Fig. 8, the operation of the invention is described below. For example, in Fig. 8a, all pixel values of P01, P11, P21, P14 are 100, the pixel value of P16 is 0, the pixel value of P18 is 70, and the pixel values of all other pixels are 50, and THmax and THmin are 30.

Unter der Annahme, daß das Pixel der Feststellung P11 ist, Ymax, das von der Kandidatenpixelwertgruppen-Abtasteinrichtung 3 zugeführt wird, 100 ist, und Ymin 50 ist und durch den Rauschdetektor 4 DIFmax 0 ist und DImin -50 ist, werden die Bedingungen 1, 2 nicht erreicht und sowohl SELmax als auch SELmin sind inaktiv und der Pixelwert des Pixels der Feststellung P11 wird durch die Pixelwert-Auswahleinrichtung 5 zugeführt. Wenn das Pixel der Feststellung P01, P21 ähnlich ist, wird der Pixelwert von P01 oder P21 zugeführt und das Zeilensegment in der vertikalen Richtung der Abtastzeile, die aus P01, P11, P21 zusammengesetzt ist, wird beibehalten werden. Dasselbe trifft auch in dem Zeilensegment in der schrägen Richtung der Abtastzeile zu.Assuming that the pixel of the determination is P11, Ymax supplied from the candidate pixel value group sampling means 3 is 100, and Ymin is 50 and DIFmax is 0 and DImin is -50 by the noise detector 4, the conditions 1, 2 are not met and both SELmax and SELmin are inactive and the pixel value of the pixel of the determination P11 is supplied by the pixel value selecting means 5. If the pixel of the determination is similar to P01, P21, the pixel value of P01 or P21 is supplied and the line segment in the vertical direction of the scanning line composed of P01, P11, P21 will be maintained. The same is also true in the line segment in the oblique direction of the scanning line.

Wenn nun das Pixel der Feststellung P14 ist, sind sowohl Ymax als auch Ymin 50, und DIFmax ist 50 und DIFmin ist -50, und nur die Bedingung 1 wird eingerichtet, und wenn SELmax aktiv ist und SELmin inaktiv ist, führt die Pixelwert-Auswahleinrichtung 50 den Wert 50 als Pixelwert zu, und P14 wird dahingehend ersetzt, daß es hinsichtlich des Pixelwerts der umgebenden Pixel gleich wird. Falls das Pixel der Feststellung P16 ist, wird, im Gegensatz zu der Betriebsweise, wenn P14 das Pixel der Feststellung war, nur die Bedingung 2 eingerichtet, und SELmax ist inaktiv und SELmin ist aktiv, und die Pixelwert-Auswahleinrichtung 5 liefert 50 als Pixelwert zu, und P17 wird auch so ersetzt, daß es hinsichtlich des Pixelwerts der umgebenden Pixel gleich ist.Now, if the pixel of detection is P14, both Ymax and Ymin are 50, and DIFmax is 50 and DIFmin is -50, and only the condition 1 is established, and if SELmax is active and SELmin is inactive, the pixel value selector 50 supplies the value 50 as the pixel value, and P14 is replaced to become equal to the pixel value of the surrounding pixels. If the pixel of detection is P16, in contrast to the operation when P14 was the pixel of detection, only the condition 2 is established, and SELmax is inactive and SELmin is active, and the pixel value selector 50 supplies 50 as the pixel value, and P17 is also replaced to become equal to the pixel value of the surrounding pixels.

Oder wenn das Pixel der Feststellung P18 ist, ist DIFmax 20 und DIFmin ist -20, und es wird weder Bedingung 1 noch Bedingung 2 eingerichtet, und die Pixelwert-Auswahleinrichtung 5 liefert direkt den Pixelwert von P18, wie er ist, zu, und der Detailbereich, der in dem Originalvideosignal enthalten ist, wird bewahrt.Or, when the pixel of the determination is P18, DIFmax is 20 and DIFmin is -20, and neither Condition 1 nor Condition 2 is established, and the pixel value selector 5 directly supplies the pixel value of P18 as it is, and the detail range contained in the original video signal is preserved.

Schließlich wird der Ausgang, wie dies in Fig. 8b dargestellt ist, erhalten, und nur der Pixeldefekt kann ohne die Schädigung der nutzbaren Videoinformationen eliminiert werden.Finally, the output as shown in Fig. 8b is obtained, and only the pixel defect can be eliminated without damaging the usable video information.

Nebenbei gesagt wird bei der Erläuterung der Pixelwertgruppen-Abtasteinrichtung 2 die horizontale Verzögerungseinheit so angenommen, um für die Abtastzeit nur eines Pixelbereichs zu verzögern, allerdings können in einem Einzelplatten-Farbabbildungssystem Farbfilter in Streifen in der Längsrichtung angeordnet sein. In einem solchen Fall können unter Verwendung horizontaler Verzögerungseinheiten zur Verzögerung des Bereichs der Periode der Farbfilter derselben Farbe, die auf Streifen angeordnet sind, Pixeldefekte von dem Ausgang des Festkörper-Bildaufnehmers, der eine gestreifte Konfiguration der Farbfilter besitzt, entfernt werden.Incidentally, in the explanation of the pixel value group sampling device 2, the horizontal delay unit is assumed to delay for the scanning time of only one pixel area, however, in a single-panel color imaging system, color filters may be arranged in stripes in the longitudinal direction. In such a case, by using horizontal delay units to delay the area of the period of the color filters of the same color arranged in stripes, pixel defects can be removed from the output of the solid-state image sensor having a striped configuration of the color filters.

Als eine zweite Ausführungsform wird als nächstes ein Beispiel einer Entfernung von Pixeldefekten erläutert, die in dem Signal enthalten sind, das von dem Festkörper-Bildaufnehmer zugeführt wird, der eine Farbfilteranordnung auf der Basis eines Einzelchip-CCD-Farbdifferenzverfahrens besitzt.Next, as a second embodiment, an example of removing pixel defects included in the signal supplied from the solid-state image sensor having a color filter array based on a single-chip CCD color difference method will be explained.

In der vorstehenden ersten Ausführungsform wird, da der Pixeldefekt durch Vergleich zwischen dem Pixel der Feststellung und der nächstgelegenen Pixelgruppe entfernt werden kann, basierend auf der ersten Bedingung, daß das Pixel der Feststellung und seine nächstliegende Pixelgruppe von einem ähnlichen Signaltyp sind (zum Beispiel Vergleich zwischen Helligkeitssignalen), und basierend auf der zweiten Bedingung, daß der Pixeldefekt unabhängig auftritt, und niedrig in Korrelation zwischen einem defekten Pixel und einem nächstgelegenen Pixel ist, realisiert. Allerdings ist nichts hinsichtlich der Farbfilteranordnung auf der Basis des Einzel- chip-CCD-Farbdifferenzverfahrens berücksichtigt worden. In dem Einzel- chip-CCD-Farbdifferenzverfahren ist, falls der Ausgang des Festkörper-Bildaufnehmers in die Vorrichtung der ersten Ausführungsform direkt eingegeben wird, ein anderer Typ einer Farbdifferenzinformation unter den nächstgelegenen Pixeln enthalten und die erste Bedingung wird nicht eingerichtet, und deshalb ist es notwendig, zuerst das Helligkeitssignal oder das Farbdifferenzsignal von dem Ausgang des Festkörper-Bildaufnehmers abzutasten. Um das Helligkeitssignal oder das Farbdifferenzsignal zu erhalten, ist es nötig, eine Filterverarbeitung auszuführen, allerdings breitet sich, durch Hindurchführen durch den Filter, die Rauschkomponente des defekten Pixels in benachbarte Pixel aus und die zweite Bedingung wird nicht eingerichtet, und demzufolge war es schwierig, das Rauschen bei der ersten Ausführungsform zu entfernen.In the above first embodiment, since the pixel defect can be removed by comparison between the pixel of detection and the nearest pixel group, based on the first condition that the pixel of detection and its nearest pixel group are of a similar signal type (for example, comparison between brightness signals) and based on the second condition that the pixel defect occurs independently and is low in correlation between a defective pixel and a nearest pixel, nothing has been considered regarding the color filter arrangement based on the single-chip CCD color difference method. In the single-chip CCD color difference method, if the output of the solid-state image pickup device is directly input to the device of the first embodiment, another type of color difference information is included among the nearest pixels and the first condition is not established, and therefore, it is necessary to first sample the luminance signal or the color difference signal from the output of the solid-state image sensor. In order to obtain the luminance signal or the color difference signal, it is necessary to perform filter processing, however, by passing through the filter, the noise component of the defective pixel spreads to neighboring pixels and the second condition is not established, and hence it was difficult to remove the noise in the first embodiment.

Um ein Helligkeitssignal aus dem Ausgang des Festkörper-Bildaufnehmers zu erzeugen, der eine Farbfilterfeldanordnung auf der Basis eines vollständigen, farbigen, differentiellen, linearen, sequentiellen Einzel- chip-CCD-Farbsystems besitzt, wird es allgemein unter Verwendung eines digitalen Filters erzeugt, der die Charakteristik von (1 + Z&supmin;¹) erzeugt, und das Farbdifferenzsignal wird unter Verwendung eines digitalen Filters erzeugt, der die Charakteristik von (1 - Z&supmin;¹) besitzt, und deshalb wird die defekte Komponente in der Abtastzeilenrichtung ausgebreitet. Da der Bereich der Pixel, die durch den Filter ausgebreitet bzw. diffundiert werden, innerhalb eines Pixels benachbart der Abtastzeilenrichtung ist, ist es notwendig, auf der Basis der nächstgelegenen Pixelgruppe, ausschließlich des benachbarten Pixels, einschließlich eines Defekts in den Pixeln vor und nach dem Pixel der Feststellung, eine Entscheidung vorzunehmen. Um den in dem benachbarten Pixel enthaltenden Defekt zu entfernen, falls das Pixel der Feststellung eine weiße Stelle besitzt, wird das Größere des vorhergehenden und darauffolgenden Pixels entfernt, und falls das Pixel der Feststellung eine schwarze Stelle besitzt, wird das Kleinere des vorhergehenden und darauffolgenden Pixels entfernt. Anders ausgedrückt wird in der nächstgelegenen Pixelwertgruppe der Pixelwert des Pixels, der an der dichtesten Position in der Pixelgruppe existiert, die in der rechten Richtung auf derselben Abtastzeile wie das Pixel der Feststellung existiert, so angenommen, daß es Pr ist, der Pixelwert des Pixels, das an der dichtesten Position in der Pixelgruppe existiert, die in der linken Richtung auf derselben Abtastzeile besteht, Pl ist, und die Pixelwertgruppe, die Pr, Pl von der nächstgelegenen Pixelwertgruppe ausschließt, Po ist, die weiße Stelle durch Vergleich des Pixels der Feststellung mit dem maximalen Wert zwischen dem kleineren von Pr, Pl und Po entschieden, so daß max (min (Pr, Pl), Po) ist. In ähnlicher Weise wird die schwarze Stelle durch Vergleich des Pixels der Feststellung mit dem minimalen Wert zwischen dem Größeren von Pr, Pl und Po, das bedeutet min (max (Pr, Pl), Po), entschieden.In order to generate a brightness signal from the output of the solid-state imager having a color filter array based on a single-chip full color differential linear sequential CCD system, it is generally generated using a digital filter having the characteristic of (1 + Z-1), and the color difference signal is generated using a digital filter having the characteristic of (1 - Z-1), and therefore the defective component is diffused in the scanning line direction. Since the range of pixels diffused by the filter is within a pixel adjacent to the scanning line direction, it is necessary to make a decision based on the nearest pixel group excluding the adjacent pixel including a defect in the pixels before and after the pixel of detection. In order to remove the defect contained in the neighboring pixel, if the pixel of detection has a white spot, the larger of the preceding and succeeding pixels is removed, and if the pixel of detection has a black spot, the smaller of the preceding and succeeding pixels is removed. In other words, in the nearest pixel value group, the pixel value of the pixel existing at the closest position in the pixel group existing in the right direction on the same scanning line as the pixel of detection is assumed to be Pr, the pixel value of the pixel existing at the closest position in the pixel group existing in the left direction on the same scanning line is Pl, and the pixel value group containing Pr, Pl from the nearest pixel value group is Po, the white spot is decided by comparing the pixel of the determination with the maximum value between the smaller of Pr, Pl and Po, that is, max(min(Pr, Pl), Po). Similarly, the black spot is decided by comparing the pixel of the determination with the minimum value between the larger of Pr, Pl and Po, that is, min(max(Pr, Pl), Po).

Fig. 1 zeigt schematisch ein Blockdiagramm gemäß einer ersten Ausführungsform der Erfindung und der Aufbau ist auch ähnlich zu der zweiten Ausführungsform und die nachfolgende Erläuterung wird unter Bezugnahme auf Fig. 1 vorgenommen. In Fig. 1 wird, gemäß der zweiten Ausführungsform, der Eingangsanschluß 1 mit einem Helligkeitssignal oder Farbdifferenzsignal versorgt, der durch ein ausführendes bzw. aktives, digitales Filter an dem Ausgang des Festkörper-Bildaufnehmers erhalten wird, der eine Farbfilterfeldanordnung auf der Basis des vollständigen, farbigen, differentiellen, zeilensequentiellen Einzel-Chip-CCD-Farbsystems besitzt.Fig. 1 schematically shows a block diagram according to a first embodiment of the invention and the structure is also similar to the second embodiment and the following explanation will be made with reference to Fig. 1. In Fig. 1, according to the second embodiment, the input terminal 1 is supplied with a luminance signal or color difference signal obtained through an active digital filter at the output of the solid-state image sensor having a color filter array based on the single-chip full color differential line sequential CCD color system.

In Fig. 1 führt die Kandidatenpixelwertgruppen-Abtasteinrichtung 3 Ymax zu, der der maximale Pixelwert zwischen dem kleineren Pixelwert von c4 und c5 und der verbleibenden, nächstgelegenen Pixelwertgruppe ist, und Ymin, der der minimale Pixelwert zwischen dem größeren Pixelwert von c4 und c5 und dem verbleibenden, nächstgelegenen Pixelwert ist, von der Pixelwertgruppe c der nächstgelegenen Gruppen, die gleichzeitig von der Pixelwertgruppen-Abtasteinrichtung 2 zugeführt werden, zu. Dieses Ymax und Ymin sind Kandidatenpixelwertgruppen.In Fig. 1, the candidate pixel value group sampler 3 supplies Ymax which is the maximum pixel value between the smaller pixel value of c4 and c5 and the remaining closest pixel value group, and Ymin which is the minimum pixel value between the larger pixel value of c4 and c5 and the remaining closest pixel value, from the pixel value group c of the closest groups simultaneously supplied from the pixel value group sampler 2. These Ymax and Ymin are candidate pixel value groups.

Fig. 6 zeigt ein spezifisches, anlagenmäßiges Beispiel der Kandidatenpixelwertgruppen-Abtasteinrichtung 3. In Fig. 6 wird, in Verbindung mit der Erläuterung der Pixelwertgruppen-Abtasteinrichtung 2, ein Beispiel eines Aufbaus der Kandidatenpixelwertgruppen-Abtasteinrichtung 3, in der die nächstliegende Pixelgruppe aus 8 Pixeln zusammengesetzt ist, die aus einem Maximalwertschaltkreis 51 und einem Minimalwertschaltkreis 50, die zwei Eingangsanschlußgruppen besitzen, und einem Maximalwertschaltkreis 53 und einem Minimalwertschaltkreis 52, die sieben Eingangsanschlußgruppen besitzen, zusammengesetzt ist, dargestellt. Der Minimalwertschaltkreis 50 liefert den kleineren der Pixelwerte von c4 und c5, die auf einem Bild vor und nach dem Pixel der Feststellung aus der nächstgelegenen Pixelwertgruppe c, die eingegeben werden, positioniert sind, und der Maximalwertschaltkreis 52 tastet den maximalen Pixelwert (Ymax) aus dem Ausgang des Minimalwertschaltkreises 50 und der verbleibenden, nächstgelegenen Pixelwertgruppen c1, c2, c3, c6, c7, c8 ab und führt ihn zu. Der Maximalwertschaltkreis 51 führt den größten der Pixelwerte von der c4 und c5 -Position eines Pixels vor und nach dem Pixel der Feststellung unter der nächstgelegenen Pixelwertgruppe c, die eingegeben wird, zu, und der Minimalwertschaltkreis 53 tastet den minimalen Pixelwert (Ymin) aus dem Ausgang des Maximalwertschaltkreises 51 und der verbleibenden Pixelwertgruppen c1, c2, c3, c6, c7, c8 ab und führt ihn zu. In Fig. 1 sind die anlagenmäßigen Elemente, die nicht die Kandidatenpixelwertgruppen-Abtasteinrichtung 3 sind, dieselben wie in der ersten Ausführungsform und die Erläuterung wird weggelassen.Fig. 6 shows a specific, plant example of the candidate pixel value group sampling device 3. In Fig. 6, in connection with the explanation of the pixel value group sampling device 2, an example of a structure of the candidate pixel value group sampling device 3 in which the nearest pixel group is composed of 8 pixels, which are composed of a maximum value circuit 51 and a minimum value circuit 50 having two input terminal groups, and a maximum value circuit 53 and a minimum value circuit 52 having seven input terminal groups The minimum value circuit 50 supplies the smaller of the pixel values of c4 and c5 positioned on an image before and after the pixel of detection from the closest pixel value group c that are input, and the maximum value circuit 52 samples and supplies the maximum pixel value (Ymax) from the output of the minimum value circuit 50 and the remaining closest pixel value groups c1, c2, c3, c6, c7, c8. The maximum value circuit 51 supplies the largest of the pixel values from the c4 and c5 position of a pixel before and after the pixel of detection among the closest pixel value group c that are input, and the minimum value circuit 53 samples and supplies the minimum pixel value (Ymin) from the output of the maximum value circuit 51 and the remaining pixel value groups c1, c2, c3, c6, c7, c8. In Fig. 1, the plant elements other than the candidate pixel value group sampling means 3 are the same as in the first embodiment, and the explanation is omitted.

Unter Bezugnahme nun auf die Fig. 9 wird die Betriebsweise der zweiten Ausführungsform der Erfindung nachfolgend erläutert. Fig. 9 zeigt eine Teilausschnittsansicht des Videosignals in einem Feld, in dem die Achsen der Abtastzeile und der Komponenten vertikal zu der Abtastzeile in der horizontalen Richtung und der Tiefenrichtung jeweils aufgetragen sind, und die Pixelwerte sind in der vertikalen Richtung gezeigt. Fig. 9a zeigt ein Beispiel eines Signals, das von einem Festkörper-Bildaufnehmer zugeführt ist, der eine Farbfilterfeldanordnung auf der Basis des vollständigen, farbigen, differentiellen, linearen, sequentiellen Einzelplattenfarbsystems besitzt. Zur Vereinfachung der Erläuterung ist ein monochromatisches Bild dargestellt. Fig. 9b stellt ein Signal nach der Durchführung durch ein digitales Filter dar, das die Charakteristik von (1 + Z&supmin;¹) auf das Signal in Fig. 9a besitzt, und dieses Signal wird zu dem Eingangsanschluß 1 in Fig. 1 zugeführt. Fig. 9c stellt ein Signal dar, das von dem Ausgangsanschluß 1 in Fig. 1 nach Eingabe des vorstehenden Signals zugeführt wird.Referring now to Fig. 9, the operation of the second embodiment of the invention will be explained below. Fig. 9 shows a partial view of the video signal in a field in which the axes of the scanning line and the components vertical to the scanning line are plotted in the horizontal direction and the depth direction, respectively, and the pixel values are shown in the vertical direction. Fig. 9a shows an example of a signal supplied from a solid-state imager having a color filter array based on the full color differential linear sequential single-plate color system. For convenience of explanation, a monochromatic image is shown. Fig. 9b shows a signal after passing through a digital filter having the characteristic of (1 + Z-1) on the signal in Fig. 9a, and this signal is supplied to the input terminal 1 in Fig. 1. Fig. 9c shows a signal supplied from the output terminal 1 in Fig. 1 after input of the above signal.

In den Fig. 9a geben S01, S11, S21 scharfe Liniensegmente an, die in der vertikalen Richtung zu der Abtastzeile bestehen, und S14 bezeichnet eine weiße Stelle und S16 eine schwarze Stelle, und S18 gibt ein feines Detail an, das in dem Originalbild enthalten ist. Hier sind zum Beispiel alle Pixelwerte S01, S11, S21, S14 200, der Pixelwert von S16 ist 0, der Pixelwert von S18 ist 140 und alle Pixelwerte der verbleibenden Pixel sind 100, z.B. sind in Fig. 9b durch das digitale Filter alle Pixelwerte von P01, P02, P11, P12, P21, P22, P14, P15 150, die Pixelwerte von P16, P17 sind 50, die Pixelwerte von P18, P19 sind 70 und alle Pixelwerte der verbleibenden Pixel sind 100.In Fig. 9a, S01, S11, S21 indicate sharp line segments existing in the vertical direction to the scanning line, and S14 indicates a white spot and S16 a black spot, and S18 indicates a fine detail contained in the original image. For example, here all the pixel values of S01, S11, S21, S14 are 200, the pixel value of S16 is 0, the pixel value of S18 is 140 and all the pixel values of the remaining pixels are 100, e.g. in Fig. 9b, through the digital filter, all the pixel values of P01, P02, P11, P12, P21, P22, P14, P15 are 150, the pixel values of P16, P17 are 50, the pixel values of P18, P19 are 70 and all the pixel values of the remaining pixels are 100.

Es wird angenommen, daß THmax und THmin beide 30 sind.It is assumed that THmax and THmin are both 30.

Unter der Annahme, daß das Pixel der Feststellung P11 ist, sind Ymax, das von dem Kandidatenpixelwertgruppen-Detektor 3 zugeführt wird, 150, und Ymin ist 100, und an dem Rauschdetektor 4 ist DIFmax 0 und DIFmin ist -50, und weder die Bedingung 1 noch 2 werden eingerichtet, und sowohl SELmax als auch SELmin sind inaktiv und der Pixelwert des Pixels der Feststellung P11 wird durch die Pixelwert-Auswahleinrichtung 5 zugeführt. Wenn das Pixel der Feststellung P01, P02, P12, P21, P22 ist, wird ähnlich der Pixelwert des Pixels der Feststellung zugeführt, und das Zeilensegment in der vertikalen Richtung zu der Abtastzeile, die aus P01, P02, P11, P12, P21, P22 zusammengesetzt ist, wird konserviert. Dieselben Beibehaltungen liegen auch in den Zeilensegmenten in der schrägen Richtung und der horizontalen Richtung zu der Abtastzeile vor.Assuming that the pixel of detection is P11, Ymax supplied from the candidate pixel value group detector 3 is 150 and Ymin is 100, and at the noise detector 4, DIFmax is 0 and DIFmin is -50, and neither condition 1 nor 2 are established, and both SELmax and SELmin are inactive and the pixel value of the pixel of detection P11 is supplied by the pixel value selector 5. Similarly, when the pixel of detection is P01, P02, P12, P21, P22, the pixel value of the pixel of detection is supplied and the line segment in the vertical direction to the scanning line composed of P01, P02, P11, P12, P21, P22 is preserved. The same retentions also exist in the line segments in the oblique direction and the horizontal direction to the scan line.

Oder falls das Pixel der Feststellung P14 oder P15 ist, sind sowohl Ymax als auch Ymin 100 und DIFmax ist 50, während DIFmin -50 ist, und nur die Bedingung 1 ist eingerichtet, und SELmax ist aktiv und SELmin ist inaktiv, und die Pixelwert-Auswahleinrichtung 5 führt 100 als den Pixelwert zu, so daß P14 und P15 so ersetzt werden, daß sie zu Pixelwerten der umgebenden Pixel gleich sind. Wenn das Pixel der Feststellung P16 oder P17 ist, wird im Gegensatz zu dem Fall, bei dem P14 oder P15 das Pixel der Feststellung ist, nur die Bedingung 2 eingerichtet, und SELmax ist inaktiv und SELmin ist aktiv, und die Pixelwert-Auswahleinrichtung 5 führt 100 als den Pixelwert zu, und deshalb werden P16 und P17 so ersetzt, daß sie zu dem Pixelwert der umgebenden Pixel gleich sind.Or, if the pixel of detection is P14 or P15, both Ymax and Ymin are 100 and DIFmax is 50 while DIFmin is -50, and only the condition 1 is established and SELmax is active and SELmin is inactive, and the pixel value selector 5 supplies 100 as the pixel value so that P14 and P15 are replaced to be equal to pixel values of the surrounding pixels. If the pixel of detection is P16 or P17, unlike the case where P14 or P15 is the pixel of detection, only the condition 2 is established and SELmax is inactive and SELmin is active, and the pixel value selector 5 supplies 100 as the pixel value, and therefore P16 and P17 are replaced so as to be equal to the pixel value of the surrounding pixels.

Wenn das Pixel der Feststellung P18 ist, ist DIFmax 20 und DIFmin ist -20, und weder Bedingung 1 noch 2 werden eingerichtet, und die Pixelwert-Auswahleinrichtung 5 führt den Pixelwert von P18 direkt zu, und die Detailkomponente, die in dem Originalvideosignal enthalten ist, wird konserviert.When the pixel of the detection is P18, DIFmax is 20 and DIFmin is -20, and neither condition 1 nor 2 is established, and the pixel value selector 5 directly supplies the pixel value of P18, and the detail component included in the original video signal is preserved.

Schließlich wird der Ausgang, wie dies in Fig. 9c dargestellt ist, erhalten.Finally, the output as shown in Fig. 9c is obtained.

Oder in einem anderen Verfahren als das Einzelplatten-Farbdifferential-Farbverfahren kann, falls sich der Pixeldefekt in der horizontalen Richtung ausbreitet, der Pixeldefekt in einem solchen Zustand wie in der zweiten Ausführungsform eliminiert werden.Or in a method other than the single-panel color differential color method, if the pixel defect spreads in the horizontal direction, the pixel defect can be eliminated in such a state as in the second embodiment.

Claims (10)

1. Schaltung zur Beseitigung von Pixeldefekten, die aufweist:1. Circuit for eliminating pixel defects, comprising: eine Pixelwertgruppen-Abtasteinrichtung zum Empfangen eines Videosignals und zum Zuführen eines Pixelwerts eines Pixels einer Feststellung, die zu einer bestimmten Zeit t festgestellt ist, und einer nächstgelegenen Pixelwertgruppe, die aus Pixelwerten einer Gruppe nächstgelegener Pixel benachbart zweidimensional um das Pixel der Feststellung um das Pixel der Feststellung bestehen;a pixel value group sampling device for receiving a video signal and supplying a pixel value of a pixel of a detection detected at a certain time t and a nearest pixel value group consisting of pixel values of a group of nearest pixels adjacent two-dimensionally around the pixel of the detection around the pixel of the detection; eine Kandidatenpixelwertgruppen-Abtasteinrichtung zum Zuführen einer Gruppe mehrerer Kandidatenpixelwerte als Kandidaten von Pixelwerten, um abschließend von dem Schaltkreis aus den nächstgelegenen Pixelwerten zugeführt zu werden;candidate pixel value group sampling means for supplying a group of a plurality of candidate pixel values as candidates of pixel values to be finally supplied from the circuit to the nearest pixel values; einen Rauschdetektor zur Durchführung einer Operation zwischen dem Pixelwert des Pixels der Feststellung und den Kandidatenpixelwerten, um zu entscheiden, ob ein Impulsrauschen in dem Pixel der Feststellung enthalten ist oder nicht, und Zuführung eines Pixelauswahlsignals, um zu instruieren, welcher Pixelwert aus dem Pixelwert des Pixels der Feststellung und der Kandidatenpixelwerte auf der Basis des Ergebnisses der Entscheidung zugeführt werden sollte; unda noise detector for performing an operation between the pixel value of the pixel of detection and the candidate pixel values to decide whether or not an impulse noise is contained in the pixel of detection, and supplying a pixel selection signal for instructing which pixel value from the pixel value of the pixel of detection and the candidate pixel values should be supplied based on the result of the decision; and eine Pixelwert-Auswahleinrichtung zum Auswählen und Zuführen irgendeines Pixelwerts aus dem Pixelwert des Pixels der Feststellung und den Kandidatenpixelwerten auf der Basis des Pixelauswahlsignals.a pixel value selector for selecting and supplying any pixel value from the pixel value of the pixel of detection and the candidate pixel values based on the pixel selection signal. 2. Schaltung zur Beseitigung von Pixeldefekten nach Anspruch 1, wobei die Pixelwertgruppen-Abtasteinrichtung ein Eingangssignal durch einen mehrstufigen, vertikalen Verzögerungsschaltkreis hindurchführt, der aus einer Kaskadenverbindung von m Abtastzeilen-Verzögerungseinheiten zur Verzögerung einer Zeit entsprechend einer Abtastzeilenperiode aufgebaut ist und jeweilige Signale von einem Eingang und einem Ausgang des mehrstufigen, vertikalen Verzögerungsschaltkreises aufnimmt und Signale unter den Abtastzeilenverzögerungseinheiten verdrahtet, um dadurch m+1 Videosignale zu bilden, die in jeder Abtastzeilenperiode verzögert sind, und jedes der erzeugten m+1 Videosignale wird in einen mehrstufigen, horizontalen Verzögerungsschaltkreis geführt, der aus einer Kaskadenverbindung von n Pixelverzögerungseinheiten zur Verzögerung für eine Zeit entsprechend einer Zeitperiode von x Pixeln aufgebaut ist, und jedes Signal wird aus dem Eingang und Ausgang der n+1 mehrstufigen, horizontalen Verzögerungsschaltkreise herausgenommen, und ein Signal in den Pixelverzögerungseinheiten verdrahtet sich so, um eine Gruppe von (n+1)+(m+1) Pixelwerten benachbart zweidimensional zu erhalten, und der Pixelwert einer spezifischen Position unter der Pixelwertgruppe wird als der Wert des Pixels der Feststellung ausgewählt, während die verbleibenden Pixelwerte als die nächstgelegene Pixelwertgruppe zugeführt werden, wobei x, m, n ganze Zahlen von 1 oder mehr sind.2. A pixel defect removal circuit according to claim 1, wherein said pixel value group sampling means passes an input signal through a multi-stage vertical delay circuit comprising composed of a cascade connection of m scanning line delay units for delaying a time corresponding to a scanning line period, and takes in respective signals from an input and an output of the multi-stage vertical delay circuit and wires signals among the scanning line delay units to thereby form m+1 video signals delayed in each scanning line period, and each of the generated m+1 video signals is fed into a multi-stage horizontal delay circuit composed of a cascade connection of n pixel delay units for delaying for a time corresponding to a time period of x pixels, and each signal is taken out from the input and output of the n+1 multi-stage horizontal delay circuits, and a signal in the pixel delay units wires so as to obtain a group of (n+1)+(m+1) pixel values adjacent two-dimensionally, and the pixel value of a specific position among the pixel value group is selected as the value of the pixel of detection while the remaining pixel values are selected as the nearest pixel value group, where x, m, n are integers of 1 or more. 3. Schaltung zur Beseitigung von Pixeldefekten nach Anspruch 2, wobei die Pixelwertgruppenabtastung m = n = 2 ist.3. A pixel defect removal circuit according to claim 2, wherein the pixel value group sample is m = n = 2. 4. Schaltung zur Beseitigung von Pixeldefekten nach Anspruch 2, wobei sowohl m als auch n gerade Zahlen für eine Pixelwertgruppen-Abtasteinrichtung sind und die Position des Pixels der Feststellung eine Position in der zweidimensionalen Mitte von (n+1)+(m+1) Pixeln ist.4. A pixel defect removal circuit according to claim 2, wherein both m and n are even numbers for a pixel value group sampling means and the position of the pixel of detection is a position in the two-dimensional center of (n+1)+(m+1) pixels. 5. Schaltung zur Beseitigung von Pixeldefekten nach Anspruch 1, wobei die Kandidatenpixelwertgruppen-Abtasteinrichtung mindestens zwei Pixelwerte als die Kandidatenpixelwerte zuführt, wobei einer einen maximalen Pixelwert besitzt und einer einen minimalen Pixelwert aus der nächstgelegenen Pixelwertgruppe besitzt, die von der Pixelwertgruppen-Abtasteinrichtung zugeführt wird.5. A pixel defect removal circuit according to claim 1, wherein the candidate pixel value group sampling means supplies at least two pixel values as the candidate pixel values, one having a maximum pixel value and one having a minimum pixel value from the nearest pixel value group supplied from the pixel value group sampling means. 6. Schaltung zur Beseitigung von Pixeldefekten nach Anspruch 1, wobei die Kandidatenpixelwertgruppen-Abtasteinrichtung, unter der Annahme eines Pixelwerts eines Pixels, das an der nächsten Position zu dem Pixel der Feststellung in der Pixelgruppe in der rechten Richtung auf einer Abtastzeile, die das Pixel der Feststellung enthält, besteht, Pr ist, ein Pixelwert eines Pixels, das an der dichtesten Position zu dem Pixel der Feststellung in der Pixelgruppe in der linken Richtung der Abtastzeile besteht, Pl ist, und die Pixelwertgruppe, die Pr ausschließt, Pr von der nächstgelegenen Pixelwertgruppe zu Po wird, mit mindestens zwei Pixelwerten, als die Kandidatenpixelwerte, das bedeutet ein maximaler Wert zwischen einem kleineren von Pr, Pl und Po, oder max (min (Pr, Pl), Po), und ein minimaler Wert zwischen einem größeren von Pr, Pl und Po, oder min (max (Pr, Pl), Po).6. A pixel defect removing circuit according to claim 1, wherein the candidate pixel value group sampling means, assuming a pixel value of a pixel existing at the closest position to the pixel of detection in the pixel group in the right direction on a scanning line including the pixel of detection is Pr, a pixel value of a pixel existing at the closest position to the pixel of detection in the pixel group in the left direction of the scanning line is Pl, and the pixel value group excluding Pr, Pr of the closest pixel value group becomes Po, with at least two pixel values, as the candidate pixel values, that is, a maximum value between a smaller one of Pr, Pl and Po, or max (min (Pr, Pl), Po), and a minimum value between a larger one of Pr, Pl and Po, or min (max (Pr, Pl), Po). 7. Schaltung zur Beseitigung von Pixeldefekten nach Anspruch 1, wobei der Rauschdetektor entscheidet, daß ein Impuisrauschen in dem Pixel der Feststellung enthalten ist, wenn die Differenz zwischen dem Wert des Pixels der Feststellung und Pmax einen größeren Wert als ein spezifischer Schwellwert besitzt, unter der Annahme, daß ein größerer Wert in der Kandidatenpixelwertgruppe Pmax ist, und er führt ein Pixelauswahlsignal zu, um dahingehend zu instruieren, Pmax unter der Kandidatenpixelwertgruppe auszuwählen.7. A pixel defect removing circuit according to claim 1, wherein the noise detector decides that a pulse noise is contained in the pixel of detection when the difference between the value of the pixel of detection and Pmax has a larger value than a specific threshold value, assuming that a larger value in the candidate pixel value group is Pmax, and supplies a pixel selection signal to instruct to select Pmax among the candidate pixel value group. 8. Schaltung zur Beseitigung von Pixeldefekten nach Anspruch 7, wobei die Pixelwert-Auswahleinrichtung Pmax zuführt, wenn das Pixelauswahlsignal, um zu instruieren, Pmax unter der Kandidatenpixelwertgruppe auszuwählen, eingegeben wird, und führt ansonsten das Pixel der Feststellung, wie es ist, zu.8. A pixel defect removing circuit according to claim 7, wherein the pixel value selecting means supplies Pmax when the pixel selection signal for instructing to select Pmax among the candidate pixel value group is input, and otherwise supplies the pixel to the determination as it is. 9. Schaltung zur Beseitigung von Pixeldefekten nach Anspruch 1, wobei der Rauschdetektor entscheidet, daß ein Impulsrauschen in dem Pixel der Feststellung enthalten ist, wenn die Differenz zwischen dem Pixelwert des Pixels der Feststellung und Pmin einen kleineren Wert als ein spezifizierter Schwellwert besitzt unter der Annahme eines kleinsten Werts in der Kandidatenpixelwertgruppe, der Pmin ist, und führt das Pixelauswahlsignal zum Instruieren zu, um Pmin unter der Kandidatenpixelwertgruppe auszuwählen.9. A pixel defect removal circuit according to claim 1, wherein the noise detector decides that an impulse noise is contained in the pixel of detection when the difference between the pixel value of the pixel of detection and Pmin has a smaller value than a specified threshold value, assuming a smallest value in the candidate pixel value group, which is Pmin, and supplies the pixel selection signal for instructing to select Pmin among the candidate pixel value group. 10. Schaltung zur Beseitigung von Pixeldefekten nach Anspruch 9, wobei die Pixelwert-Auswahleinrichtung Pmin zuführt, wenn das Pixelauswahlsignal instruiert, Pmin unter der Kandidatenpixelwertgruppe auszuwählen, und führt ansonsten das Pixel der Feststellung, wie es ist, zu.10. A pixel defect removal circuit according to claim 9, wherein the pixel value selecting means supplies Pmin when the pixel selection signal instructs to select Pmin among the candidate pixel value group, and otherwise supplies the pixel to the determination as it is.
DE1992606830 1991-01-24 1992-01-21 Circuit for eliminating picture element defects for solid-state image sensors Expired - Fee Related DE69206830T2 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP3007175A JPH04239886A (en) 1991-01-24 1991-01-24 Picture noise removing device
JP3068255A JP2924250B2 (en) 1991-04-01 1991-04-01 Image noise removal device

Publications (2)

Publication Number Publication Date
DE69206830D1 DE69206830D1 (en) 1996-02-01
DE69206830T2 true DE69206830T2 (en) 1996-07-11

Family

ID=26341432

Family Applications (1)

Application Number Title Priority Date Filing Date
DE1992606830 Expired - Fee Related DE69206830T2 (en) 1991-01-24 1992-01-21 Circuit for eliminating picture element defects for solid-state image sensors

Country Status (1)

Country Link
DE (1) DE69206830T2 (en)

Also Published As

Publication number Publication date
DE69206830D1 (en) 1996-02-01

Similar Documents

Publication Publication Date Title
US5327246A (en) Pixel defect removing circuit for solid-state image pickup device
DE3789291T2 (en) Video signal generation circuit.
DE69113375T2 (en) High speed video camera.
DE69010411T2 (en) SCENE-RELATED COMPENSATION OF INHOMOGENOUSLY DISTRIBUTED DETECTOR SENSITIVITY OF AN IMAGE DETECTOR MATRIX.
DE69116905T2 (en) Shading effects corrector
DE69124777T2 (en) Device for the detection of the motion vector
DE60314692T2 (en) Digital image method and apparatus for assembling removal of the mosaic effect and correction of bad pixels
DE602005005553T2 (en) Imaging device and imaging method
DE69026434T2 (en) INDIVIDUAL PROCESSING METHOD FOR GENERATING A UNIFORM PROCESSING OF HORIZONTAL AND VERTICAL INDIVIDUAL COMPONENTS
DE68922957T2 (en) Monitoring method and arrangement.
DE69127795T2 (en) Device for image detection
DE3687850T2 (en) SOLID BODY IMAGE ARRANGEMENT.
DE3783767T2 (en) DEVICE FOR COLOR DETECTION.
DE3604990C2 (en)
DE3910035A1 (en) COLOR IMAGE SENSOR
EP1237357A2 (en) Digital camera with improved dynamic using CMOS image sensor and method for driving the CMOS image sensor
DE3855846T2 (en) Image recording device with a picture element compensation circuit
DE3807751A1 (en) NOISE REDUCTION CIRCUIT FOR VIDEO SIGNAL WITH HALF IMAGE MEMORY
DE102005017642A1 (en) Method and device for inspecting a wafer
DE3304817A1 (en) METHOD AND DEVICE FOR AUTOMATICALLY DETECTING FAULTS IN TISSUES AND SIMILAR TEXTILES
DE2740795A1 (en) DEVICE FOR ELIMINATING SCANNING ERRORS IN SOLID-STATE TV CAMERAS
DE102010026348B4 (en) Image processor for a robot system and having this robot system
DE69928576T2 (en) Luminance and chrominance isolation circuit
DE112015006176T5 (en) endoscopic device
DE69827540T2 (en) Signal processing system

Legal Events

Date Code Title Description
8364 No opposition during term of opposition
8327 Change in the person/name/address of the patent owner

Owner name: PANASONIC CORP., KADOMA, OSAKA, JP

8339 Ceased/non-payment of the annual fee