JP2004172973A

JP2004172973A - Correction data storage method for solid state imaging device and imaging apparatus

Info

Publication number: JP2004172973A
Application number: JP2002336729A
Authority: JP
Inventors: Terutake Kadohara; 輝岳門原
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2002-11-20
Filing date: 2002-11-20
Publication date: 2004-06-17

Abstract

<P>PROBLEM TO BE SOLVED: To reduce a latency time i.e. a memory readout time and to efficiently use a memory. <P>SOLUTION: This correction data storage method has a memory for storing information obtained by selecting an image subjected to flaw correction in the order of a pixel having structural defect, a level of a dark current for the pixel, and an address of the pixel as a priority for storing the information of the image subjected to the flaw correction at a solid state imaging device; and a signal processing unit for correcting the signal from the solid state imaging device based on the information in the memory. <P>COPYRIGHT: (C)2004,JPO

Description

【０００１】
【発明の属する技術分野】
本発明は、キズ補正がされる画素の情報を記憶した撮像装置及びキズ補正がされる画素の情報を記憶する補正データ記憶方法に関する。
【０００２】
【従来の技術】
従来のデジタルスチルカメラの構成例を、図３を参照して説明する。
【０００３】
同図において、撮影者がカメラ操作スイッチ２０１（カメラのメインスイッチ、レリーズスイッチ等で構成）を操作すると、カメラ操作スイッチ２０１の状態変化を全体制御ＣＰＵ２００が検出し、その他の各回路ブロックへの電源供給を開始する。
【０００４】
撮影画面範囲内の被写体像は、主撮影光学系２０２及び２０３を通して撮像素子２０４上に結像し、アナログ電気信号に変換される。撮像素子２０４からのアナログ電気信号は、ＣＤＳ／ＡＧＣ回路２０５によりアナログ的に処理されて、所定の信号レベルに変換され、更に各画素順々に、Ａ／Ｄ変換部２０６でデジタル信号に変換される。
【０００５】
なお、全体の駆動タイミングを決定するタイミングジェネレータ２０８からの信号に基いて、ドライバ回路２０７が撮像素子２０４の水平駆動並びに垂直駆動を所定制御することにより、撮像素子２０４は画像信号を出力する。
【０００６】
同様に、ＣＤＳ／ＡＧＣ回路２０５、並びにＡ／Ｄ変換部２０６も上記タイミングジェネレータ２０８からのタイミングに基づいて動作する。
【０００７】
２０９は全体制御ＣＰＵ２００からの信号に基づいて信号の選択を行うセレクタであり、Ａ／Ｄ変換部２０６からの出力は、セレクタ２０９を介してメモリコントローラ２１５へ入力し、フレームメモリ２１６へ全ての信号出力が転送される。従って、この場合各撮影フレームの画素データを、全てフレームメモリ２１６内に一旦記憶する為、連写撮影等の場合は、撮影された画像の画素データを全てフレームメモリ２１６へ書き込むことになる。
【０００８】
フレームメモリ２１６への書き込み動作終了後は、メモリコントローラ２１５の制御により、画素データを記憶しているフレームメモリ２１６の内容を、セレクタ２０９を介してカメラデジタル信号処理部（ＤＳＰ）２１０へ転送する。このカメラＤＳＰ２１０では、フレームメモリ２１６に記憶されている各画像の各画素データを基にＲＧＢの各色信号を生成する。
【０００９】
通常撮影前の状態では、この生成されたＲＧＢの各色信号をビデオメモリ２１１に定期的（フレーム毎）に転送する事で、モニタ表示部２１２によりファインダー表示等を行っている。
【００１０】
一方、カメラ操作スイッチ２０１の操作により、撮影者が撮影（すなわち、画像の記録）を指示した場合には、全体制御ＣＰＵ２００からの制御信号によって、１フレーム分の各画素データをフレームメモリ２１６から読み出し、カメラＤＳＰ２１０で画像処理を行ってから一旦ワークメモリ２１３に記憶する。
【００１１】
続いて、ワークメモリ２１３のデータを圧縮・伸張部２１４で所定の圧縮フォーマットに基いてデータ圧縮し、圧縮したデータを外部不揮発性メモリ２１７（通常フラッシュメモリ等の不揮発性メモリを使用）に記憶する。
【００１２】
また、逆に撮影済みの画像データを観察する場合には、上記外部メモリ２１７に圧縮記憶されたデータを、圧縮・伸張部２１４を通して通常の画素毎のデータに伸張し、伸長した画素毎のデータをビデオメモリ２１１へ転送する事で、モニタ表示部２１２を通して撮影済み画像を観察する事ができる。
【００１３】
この様に、通常のデジタルカメラでは、撮像素子２０４からの出力を、ほぼリアルタイムで信号処理回路を通して実際の画像データに変換し、その結果をメモリないしはモニタ回路へ出力する構成となっている。
【００１４】
一方、上記の様なデジタルカメラシステムに於いて、撮像素子は高価な部品である。従って、出来るだけ歩留まりを高めて使用できるようなシステム構成が望まれるところである。
【００１５】
特に最近は高画素数化が進んだため、点キズと呼ばれる不良画素信号の数が問題となる。これは画素部自身の構造的欠陥によるリークや暗電流特性の不良によるもので、前者は撮影秒時や感度設定に関わらず、後者はそれらの条件次第で補正の必要が出てくるものである。
【００１６】
図４は点キズ画素（ｘ）対する補正方法の一般的例を説明したものである。図中□は点キズ画素を、○は正常画素を現している。また、図中の画素は全て同色のオンチップカラーフィルタの画素のみとしている。
【００１７】
図４（Ａ）は点キズ画素（ｘ）の上下左右の隣接画素全てが正常画素の場合である。このとき，点キズ画素（ｘ）の画素出力信号を（▲１▼＋▲２▼＋▲３▼＋▲４▼）÷４と等価の信号レベルに置き換えることで点キズ画素（ｘ）の補正を行う。
【００１８】
同様に、同図（Ｂ）では（▲１▼＋▲２▼＋▲３▼）÷３と等価に、同図（Ｃ）では（▲１▼＋▲２▼）÷２と等価に、同図（Ｄ）では（▲４▼）と等価の信号レベルに置き換えることとなる。
【００１９】
更に特開２０００−２０９５０６では、通常の撮影露光時間と同じ時間シャッターを閉じた暗中状態での撮像データを黒レベル基準データとし、全画素について差分補正を行い、黒レベル基準データが所定レベルを超える画素を白キズ画素としてその位置を記憶、補正する方法が開示されている。これにより、黒レベルと白キズ画素の質の高い補正が可能としている。
【００２０】
システム上、出来る限りの画素数に対しは補正を行うべきと考えるが、補正のためのデータ領域も大量に準備できるものではない。また、撮影時の時間的ストレスを考えると，補正可能な画素数にも限りがある。
【００２１】
従って，システム的にも時間的にも限りあるデータ数で効果的な補正を行う必要がある。
【００２２】
【発明が解決しようとする課題】
システム上決められた領域で補正対象となるデータがすべて記憶できる場合は問題ないが，意に反して足りない場合，なんとかデータ数を丸めなければならない。
【００２３】
上述したように，数こそ少ないが、基本的に画素構造欠陥によるリーク等は常に補正対象である。一方、暗電流特性の不良画素は、撮影秒時や感度設定等により補正対象画素を切り換えるのが一般的である。
【００２４】
この場合，暗電流特性の優劣は暗時の出力レベルそのもので順序付けられる。つまり、キズの種類、キズの程度を現す情報という順で補正データとしての優先度の判定を行うこととなる。
【００２５】
しかしながら、同じキズレベルの画素同志については考慮されていない。同じレベルの画素がすべて補正データ領域に記憶されるなら何ら問題はない。しかし、その一部しか記憶できない場合、何らかの手段で優先度を付けなくてはならなくなる。同じレベルということで、無作為に抽出するという方法もあるが、以下のような問題が存在する。
【００２６】
いわゆる電子シャッター機能を持たない撮像素子、例えば多くのＣＭＯＳ（相補型金属酸化膜半導体）タイプの場合，撮影秒時＝露光時間ではあるが蓄積動作時間と全く等価というわけではない。つまり、受光部から蓄積電荷量に比例した信号を読み出すのは順序だてて行われるが、自身が読み出されるまでの時間は受光画素の動作としては蓄積状態となり、暗電流成分の増加が生じてしまうこととなる。結果，同じ蓄積時間の場合は、後から読み出される画素ほど蓄積動作時間が待ち時間だけ長くなってしまう。
【００２７】
従って，待ち時間、つまり読み出し時間が素子全体で短ければそれだけ影響も少ないが，昨今の高画素数化ではそれもままならない。よって、撮影画面内での読み出し順も考慮して補正データの優先度を設定する必要がある。
【００２８】
【課題を解決するための手段】
固体撮像素子のキズ補正がされる画素の情報を記憶する優先順位として、構造欠陥のある画素、画素の暗電流の程度、画素のアドレスの順でキズ補正がされる画素を選択することを特徴とする補正データ記憶方法を提供する。
【００２９】
また、固体撮像素子のキズ補正がされる画素の情報を記憶する優先順位として、キズの種類、キズの程度、画素のアドレスの順でキズ補正がされる画素を選択することを特徴とする補正データ記憶方法を提供する。
【００３０】
また、固体撮像素子と、
前記固体撮像素子のキズ補正がされる画素の情報を記憶する優先順位として、構造欠陥のある画素、画素の暗電流の程度、画素のアドレスの順でキズ補正がされる画素を選択することにより得られる情報を記憶したメモリと、前記メモリの情報に基づいて、固体撮像素子からの信号を補正する信号処理部と、を有することを特徴とする撮像装置を提供する。
【００３１】
また、固体撮像素子と、前記固体撮像素子のキズ補正がされる画素の情報を記憶する優先順位として、キズの種類、キズの程度、画素のアドレスの順でキズ補正がされる画素を選択することにより得られる情報を記憶したメモリと、前記メモリの情報に基づいて、固体撮像素子からの信号を補正する信号処理部と、を有することを特徴とする撮像装置を提供する。
【００３２】
【発明の実施の形態】
図１は本発明の実施の形態における撮像装置（ディジタルスチルカメラ）のブロック図である。
【００３３】
基本的には、図３に点キズ補正用データを格納するための不揮発性メモリ７を追加したものである。
【００３４】
図１に於いて、１は撮像素子を示し、ドライバ２によって駆動されて所定の周波数で動作する。また、タイミングジェネレータ３は垂直同期信号ＶＤ及び水平同期信号ＨＤを出力するタイミング発生回路で、同時に各回路ブロックへタイミング信号を供給している。
【００３５】
撮像素子１からの画素信号は、ＣＤＳ／ＡＧＣ回路４へ入力し、ここで既知の相関２重サンプリング等の処理を行う事で、ＣＣＤ等の出力に含まれるリセットノイズ等を除去すると共に、所定の信号レベル迄出力を増幅する。増幅された画素信号をＡ／Ｄ変換部５でデジタル信号に変換して、デジタル化された画素信号を得る。
【００３６】
デジタル化された画素信号はセレクタ６を介してメモリコントローラ９へ入力し、フレームメモリ１０へ全ての信号出力が転送される。従って、この場合各撮影フレームの画素データを、全てフレームメモリ１０内に一旦記憶する為、連写撮影等の場合は、撮影された画像の画素データを全てフレームメモリ１０へ書き込むことになる。
【００３７】
フレームメモリ１０への書き込み動作終了後は、メモリコントローラ９の制御により、画素データを記憶しているフレームメモリ１０の内容を、セレクタ６を介してカメラデジタル信号処理部（ＤＳＰ）８へ転送する。このカメラＤＳＰ８では、フレームメモリ１０に記憶された各画像の各画素データと不揮発性メモリ７に記憶された点キズ用補正データを基に点キズ補正を行った後，ＲＧＢの各色信号を生成する。
【００３８】
カメラ操作スイッチ１６の操作により、撮影者が撮影（すなわち、画像の記録）を指示した場合には、全体制御ＣＰＵ１７からの制御信号によって、１フレーム分の各画素データをフレームメモリ１０から読み出し、カメラＤＳＰ８で画像処理を行ってから一旦ワークメモリ１２に記憶する。
【００３９】
続いて、ワークメモリ１２のデータを圧縮・伸張部１４で所定の圧縮フォーマットに基いてデータ圧縮し、圧縮したデータを外部不揮発性メモリ１５（通常フラッシュメモリ等の不揮発性メモリを使用）に記憶する。
【００４０】
また、撮影済みの画像データを観察する場合には、上記外部メモリ１５に圧縮記憶されたデータを、圧縮・伸張部１４を通して通常の画素毎のデータに伸張し、伸長した画素毎のデータをビデオメモリ１１へ転送する事で、モニタ表示部１３を通して撮影済み画像を観察する事ができる。
【００４１】
なお、図１の構成では点キズ補正用不揮発性メモリを明記したが、ＤＳＰ８のフラッシュメモリ領域に点キズ補正用データを格納してもよい。
【００４２】
続いて、点キズ用補正データについて説明する。
【００４３】
前述したように、キズの種類、キズの程度を現す情報、アドレス情報の順で全データの優先度を決定する。更に，アドレス情報は読み出しが遅い位置を優先するものである。
【００４４】
本発明に用いた撮像素子では、素子上の位置をｘ、ｙアドレスを用いて現すものとし，ｙアドレスが小さく、更にｘアドレスが小さい位置ほど先に読み出されるものとする。
【００４５】
従って，点キズ補正対象の画素を
▲１▼画素構造欠陥によるリーク
▲２▼暗電流特性不良
に分類し、▲１▼に関しては全数補正データとして記憶する。
【００４６】
また、▲２▼に関しては、キズの程度を現す情報として、
▲３▼暗中での出力レベル
で順位付けを行い，更に位置（アドレス）情報により順位付けを行う。
【００４７】
そして，位置（アドレス）情報により順位付けを
▲４▼ｙアドレス
▲５▼ｘアドレス
の順で順位付けの優先項目として設定する。
【００４８】
図２は上述した暗電流特性不良画素における同一レベルでの位置（アドレス）情報による優先度設定を説明する図である。
【００４９】
同図は撮像素子の有効撮像領域全面を表しており、左端上が（ｘ、ｙ）＝（０，０）、右端下が（ｘ、ｙ）＝（Ｘ−１，Ｙ−１）という有効全画素数がＸ×Ｙ画素という撮像素子である。
【００５０】
この撮像素子は同図（Ａ）のように左端上から右へ、更に下というように読み出される。一方，優先度設定は同図（Ｂ）のように右端下から左へ，更に上へというように読み出し順とは逆の順に設定されることを示している。
【００５１】
以上説明した本実施の形態によれば、固体撮像素子を用いた撮像装置における撮像素子のキズ補正において、キズ補正に用いる画素情報及び位置情報を記憶する手段での補正対象画素の優先順位判断項目の優先度を，キズの種類、キズの程度を現す情報、アドレス情報の順とし、位置情報での優先度を、画素の読み出しが遅くなる位置ほど優先的とすることで、限られた領域である補正用データ領域を有効に活用することが可能になる。
【００５２】
これにより、システム上決められた領域で補正対象となるデータがすべて記憶できない場合でも，可能な限りの有効性を維持しつつ、合理的にデータ数を丸めることが可能となる。
【００５３】
【発明の効果】
本発明によれば、効率的にメモリを用いることが可能となる。
【図面の簡単な説明】
【図１】本発明の実施の形態のデジタルスチルカメラの構成説明図である。
【図２】本発明の実施の形態での位置情報による優先度設定の説明図である。
【図３】従来のデジタルスチルカメラの構成説明図である。
【図４】キズ補正方法の説明図である。
【符号の説明】
１撮像素子
２ドライバ
３ＴＧ／ＳＳＧ
４ＣＤＳ／ＡＧＣ回路
５Ａ／Ｄ変換回路
６メモリセレクタ
７キズ補正用不揮発性メモリ
８カメラＤＳＰ
９メモリコントローラ
１０フレームメモリ
１１ビデオメモリ
１２ワークメモリ
１３モニタ表示部
１４圧縮・伸張部
１５不揮発性メモリ
１６カメラ操作スイッチ
１７全体制御ＣＰＵ
１８カメラ・レンズマウント
１９撮影レンズ[0001]
TECHNICAL FIELD OF THE INVENTION
1. Field of the Invention The present invention relates to an imaging device that stores information on a pixel to be subjected to flaw correction, and a correction data storage method that stores information about a pixel to be flaw corrected.
[0002]
[Prior art]
A configuration example of a conventional digital still camera will be described with reference to FIG.
[0003]
In the figure, when a photographer operates a camera operation switch 201 (configured with a main switch and a release switch of the camera), the overall control CPU 200 detects a change in the state of the camera operation switch 201 and supplies power to other circuit blocks. Start feeding.
[0004]
The subject image in the photographing screen range is formed on the image sensor 204 through the main photographing optical systems 202 and 203, and is converted into an analog electric signal. The analog electric signal from the image sensor 204 is processed analogously by the CDS / AGC circuit 205, converted to a predetermined signal level, and further converted to a digital signal by the A / D converter 206 for each pixel. You.
[0005]
The image pickup device 204 outputs an image signal by the driver circuit 207 performing predetermined control of horizontal drive and vertical drive of the image pickup device 204 based on a signal from a timing generator 208 that determines the overall drive timing.
[0006]
Similarly, the CDS / AGC circuit 205 and the A / D converter 206 also operate based on the timing from the timing generator 208.
[0007]
A selector 209 selects a signal based on a signal from the overall control CPU 200. An output from the A / D converter 206 is input to the memory controller 215 via the selector 209, and all signals are transmitted to the frame memory 216. Output is forwarded. Accordingly, in this case, all the pixel data of each photographed frame is temporarily stored in the frame memory 216. Therefore, in the case of continuous photographing or the like, all the pixel data of the photographed image is written into the frame memory 216.
[0008]
After the writing operation to the frame memory 216 is completed, the contents of the frame memory 216 storing the pixel data are transferred to the camera digital signal processing unit (DSP) 210 via the selector 209 under the control of the memory controller 215. The camera DSP 210 generates each color signal of RGB based on each pixel data of each image stored in the frame memory 216.
[0009]
In a state before normal photographing, the monitor display unit 212 performs a finder display or the like by periodically transferring the generated RGB color signals to the video memory 211 (for each frame).
[0010]
On the other hand, when the photographer instructs shooting (that is, image recording) by operating the camera operation switch 201, each pixel data of one frame is read from the frame memory 216 by a control signal from the overall control CPU 200. After the image processing is performed by the camera DSP 210, the image data is temporarily stored in the work memory 213.
[0011]
Subsequently, the data in the work memory 213 is compressed by the compression / expansion unit 214 based on a predetermined compression format, and the compressed data is stored in the external nonvolatile memory 217 (usually using a nonvolatile memory such as a flash memory). .
[0012]
Conversely, when observing captured image data, the data compressed and stored in the external memory 217 is expanded to normal data for each pixel through the compression / expansion unit 214, and the expanded data for each pixel is obtained. Is transferred to the video memory 211 so that the photographed image can be observed through the monitor display unit 212.
[0013]
As described above, in a normal digital camera, the output from the image sensor 204 is converted into actual image data through a signal processing circuit almost in real time, and the result is output to a memory or a monitor circuit.
[0014]
On the other hand, in the above digital camera system, the image sensor is an expensive component. Therefore, there is a need for a system configuration that can be used with as high a yield as possible.
[0015]
Particularly, since the number of pixels has been increased recently, the number of defective pixel signals called point flaws becomes a problem. This is due to a leak due to a structural defect of the pixel portion itself or a defect in dark current characteristics.The former requires correction depending on those conditions regardless of the shooting time or sensitivity setting. .
[0016]
FIG. 4 illustrates a general example of a correction method for a point defect pixel (x). In the figure, □ indicates a point defect pixel, and ○ indicates a normal pixel. Further, all the pixels in the figure are only pixels of an on-chip color filter of the same color.
[0017]
FIG. 4A shows a case in which all of the adjacent pixels on the upper, lower, left and right sides of the point defect pixel (x) are normal pixels. At this time, the pixel defect signal (x) is corrected by replacing the pixel output signal of the point defect pixel (x) with a signal level equivalent to ((1) + (2) + (3) + (4)) ▼ 4. I do.
[0018]
Similarly, in FIG. 3B, (1) + 2 + 3) is equivalent to (3), and in FIG. 2C, (1) +2) ÷ 2 is equivalent. In FIG. 4D, the signal level is replaced with a signal level equivalent to (4).
[0019]
Further, in Japanese Patent Application Laid-Open No. 2000-209506, image data in a dark state in which a shutter is closed for the same time as a normal photographing exposure time is used as black level reference data, difference correction is performed for all pixels, and black level reference data exceeds a predetermined level. A method of storing and correcting the position of a pixel as a white defect pixel is disclosed. This enables high-quality correction of the black level and the white defect pixel.
[0020]
The system considers that correction should be performed for as many pixels as possible, but a large data area for correction cannot be prepared. Also, considering the temporal stress at the time of shooting, the number of pixels that can be corrected is limited.
[0021]
Therefore, it is necessary to perform effective correction with a limited number of data in terms of both system and time.
[0022]
[Problems to be solved by the invention]
There is no problem if all data to be corrected can be stored in an area determined by the system, but if it is not enough, the number of data must be rounded off.
[0023]
As described above, although the number is small, basically, a leak due to a pixel structure defect is always a correction target. On the other hand, for a defective pixel having dark current characteristics, the pixel to be corrected is generally switched according to the shooting time, sensitivity setting, and the like.
[0024]
In this case, the order of the dark current characteristic is determined by the output level itself in the dark. That is, the priority of the correction data is determined in the order of information indicating the type of flaw and the degree of flaw.
[0025]
However, no consideration is given to pixels having the same flaw level. There is no problem if all pixels of the same level are stored in the correction data area. However, if only a part of the information can be stored, the priority must be set by some means. At the same level, there is a method of extracting at random, but the following problems exist.
[0026]
In the case of an image sensor having no so-called electronic shutter function, for example, many CMOS (complementary metal oxide semiconductor) types, although the photographing time is equal to the exposure time, it is not completely equivalent to the accumulation operation time. In other words, the reading of the signal proportional to the accumulated charge amount from the light receiving portion is performed in a sequential order, but the operation of the light receiving pixel is in an accumulation state until the pixel itself is read, and the dark current component increases. Will be lost. As a result, in the case of the same accumulation time, the accumulation operation time becomes longer by the waiting time as the pixel is read later.
[0027]
Accordingly, the shorter the waiting time, that is, the shorter the reading time of the entire device, the less the effect is, but the recent increase in the number of pixels does not remain that effect. Therefore, it is necessary to set the priority of the correction data in consideration of the reading order in the shooting screen.
[0028]
[Means for Solving the Problems]
As a priority order for storing information of the pixel to be subjected to the defect correction of the solid-state imaging device, a pixel having a structural defect, a degree of dark current of the pixel, and a pixel to be subjected to the defect correction in the order of the pixel address are selected. Is provided.
[0029]
Further, as a priority order for storing information of the pixel to be subjected to the defect correction of the solid-state imaging device, the pixel to be subjected to the defect correction is selected in the order of the type of the defect, the degree of the defect, and the address of the pixel. A data storage method is provided.
[0030]
Also, a solid-state imaging device,
As a priority order for storing information of the pixel to be subjected to the defect correction of the solid-state imaging device, a pixel having a structural defect, a degree of dark current of the pixel, and a pixel to be subjected to the defect correction in the order of the pixel address are selected. An image pickup apparatus comprising: a memory that stores obtained information; and a signal processing unit that corrects a signal from a solid-state image sensor based on the information in the memory.
[0031]
Further, as the priority order for storing the information of the solid-state imaging device and the pixel of the solid-state imaging device to be subjected to the defect correction, the pixel to be subjected to the defect correction is selected in the order of the type of the defect, the degree of the defect, and the address of the pixel. And a signal processing unit for correcting a signal from the solid-state imaging device based on the information in the memory.
[0032]
BEST MODE FOR CARRYING OUT THE INVENTION
FIG. 1 is a block diagram of an imaging device (digital still camera) according to an embodiment of the present invention.
[0033]
Basically, a non-volatile memory 7 for storing point defect correction data is added to FIG.
[0034]
In FIG. 1, reference numeral 1 denotes an image sensor, which is driven by a driver 2 and operates at a predetermined frequency. The timing generator 3 is a timing generating circuit that outputs a vertical synchronizing signal VD and a horizontal synchronizing signal HD, and simultaneously supplies a timing signal to each circuit block.
[0035]
The pixel signal from the image pickup device 1 is input to the CDS / AGC circuit 4, where known processing such as correlated double sampling is performed to remove reset noise and the like included in the output of the CCD and the like, and to perform a predetermined process. The output is amplified up to the signal level of. The A / D converter 5 converts the amplified pixel signal into a digital signal to obtain a digitized pixel signal.
[0036]
The digitized pixel signals are input to the memory controller 9 via the selector 6, and all signal outputs are transferred to the frame memory 10. Therefore, in this case, all the pixel data of each photographed frame is temporarily stored in the frame memory 10. Therefore, in the case of continuous photographing or the like, all the pixel data of the photographed image is written into the frame memory 10.
[0037]
After the writing operation to the frame memory 10 is completed, the contents of the frame memory 10 storing the pixel data are transferred to the camera digital signal processing unit (DSP) 8 via the selector 6 under the control of the memory controller 9. The camera DSP 8 performs point flaw correction based on the pixel data of each image stored in the frame memory 10 and the point flaw correction data stored in the non-volatile memory 7, and then generates RGB color signals. .
[0038]
When the photographer instructs shooting (that is, image recording) by operating the camera operation switch 16, each pixel data of one frame is read out from the frame memory 10 by a control signal from the overall control CPU 17, and After image processing is performed by the DSP 8, the image processing is temporarily stored in the work memory 12.
[0039]
Subsequently, the data in the work memory 12 is compressed by the compression / expansion unit 14 based on a predetermined compression format, and the compressed data is stored in the external nonvolatile memory 15 (usually using a nonvolatile memory such as a flash memory). .
[0040]
When observing captured image data, the data compressed and stored in the external memory 15 is expanded to normal data for each pixel through the compression / expansion unit 14, and the expanded data for each pixel is converted to video data. By transferring the image to the memory 11, the photographed image can be observed through the monitor display unit 13.
[0041]
In the configuration of FIG. 1, the non-volatile memory for point flaw correction is specified, but data for point flaw correction may be stored in the flash memory area of the DSP 8.
[0042]
Next, the correction data for point flaws will be described.
[0043]
As described above, the priority of all the data is determined in the order of the type of the flaw, the information indicating the degree of the flaw, and the address information. Further, the address information has priority on a position where reading is slow.
[0044]
In the imaging device used in the present invention, the position on the device is represented by using the x and y addresses, and the smaller the y address and the smaller the x address, the earlier the data is read.
[0045]
Therefore, the pixel to be subjected to point flaw correction is classified into (1) leak due to a pixel structure defect, (2) dark current characteristic failure, and (1) is stored as 100% correction data.
[0046]
Regarding (2), as information indicating the degree of scratches,
{Circle around (3)} The ranking is performed based on the output level in the dark, and further the ranking is performed based on the position (address) information.
[0047]
Then, the priority order is set based on the position (address) information in the order of (4) y address (5) x address.
[0048]
FIG. 2 is a view for explaining the priority setting based on the position (address) information at the same level in the dark current characteristic defective pixels.
[0049]
The figure shows the entire effective imaging area of the image sensor, and the upper left end is (x, y) = (0, 0), and the lower right end is (x, y) = (X-1, Y-1). The image pickup device has a total number of pixels of X × Y pixels.
[0050]
This image sensor is read from the upper left end to the right as shown in FIG. On the other hand, the priority setting is set in the reverse order of the reading order, such as from the lower right end to the left as shown in FIG.
[0051]
According to the above-described embodiment, in the image sensor using the solid-state image sensor, the priority order of the pixel to be corrected is determined by the unit that stores the pixel information and the position information used for the defect correction. Is set in the order of the type of scratch, the information indicating the degree of the scratch, and the address information, and the priority in the position information is set higher in the position where the pixel reading is delayed, so that the priority is higher in a limited area. It is possible to effectively utilize a certain correction data area.
[0052]
As a result, even if all data to be corrected cannot be stored in a region determined by the system, the number of data can be rationally rounded while maintaining the validity as much as possible.
[0053]
【The invention's effect】
According to the present invention, a memory can be used efficiently.
[Brief description of the drawings]
FIG. 1 is an explanatory diagram illustrating a configuration of a digital still camera according to an embodiment of the present invention.
FIG. 2 is an explanatory diagram of priority setting based on position information according to the embodiment of the present invention.
FIG. 3 is a diagram illustrating the configuration of a conventional digital still camera.
FIG. 4 is an explanatory diagram of a flaw correction method.
[Explanation of symbols]
1 image sensor 2 driver 3 TG / SSG
4 CDS / AGC circuit 5 A / D conversion circuit 6 Memory selector 7 Non-volatile memory for flaw correction 8 Camera DSP
9 Memory controller 10 Frame memory 11 Video memory 12 Work memory 13 Monitor display unit 14 Compression / expansion unit 15 Non-volatile memory 16 Camera operation switch 17 Overall control CPU
18 Camera lens mount 19 Photo lens

Claims

固体撮像素子のキズ補正がされる画素の情報を記憶する優先順位として、構造欠陥のある画素、画素の暗電流の程度、画素のアドレスの順でキズ補正がされる画素を選択することを特徴とする補正データ記憶方法。As a priority order for storing information of the pixel to be subjected to the defect correction of the solid-state imaging device, a pixel having a structural defect, a degree of dark current of the pixel, and a pixel to be subjected to the defect correction in the order of the pixel address are selected. Correction data storage method.

請求項１において、前記画素のアドレスの優先順位として、読み出されるタイミングが後である画素ほど優先的に記憶されることを特徴とする補正データ記憶方法。2. The correction data storage method according to claim 1, wherein, as a priority of the address of the pixel, a pixel having a later read timing is stored with higher priority.

固体撮像素子のキズ補正がされる画素の情報を記憶する優先順位として、キズの種類、キズの程度、画素のアドレスの順でキズ補正がされる画素を選択することを特徴とする補正データ記憶方法。Correction data storage characterized by selecting a pixel to be flaw-corrected in the order of a flaw type, a flaw degree, and a pixel address as a priority for storing information of a pixel to be flaw-corrected of the solid-state imaging device. Method.

請求項３において、前記画素のアドレスの優先順位として、読み出されるタイミングが後である画素ほど優先的に記憶されることを特徴とする補正データ記憶方法。4. The correction data storage method according to claim 3, wherein, as a priority of the address of the pixel, a pixel whose readout timing is later is preferentially stored.

固体撮像素子と、
前記固体撮像素子のキズ補正がされる画素の情報を記憶する優先順位として、構造欠陥のある画素、画素の暗電流の程度、画素のアドレスの順でキズ補正がされる画素を選択することにより得られる情報を記憶したメモリと、
前記メモリの情報に基づいて、固体撮像素子からの信号を補正する信号処理部と、
を有することを特徴とする撮像装置。A solid-state image sensor;
As a priority order for storing information of the pixel to be subjected to the defect correction of the solid-state imaging device, a pixel having a structural defect, a degree of dark current of the pixel, and a pixel to be subjected to the defect correction in the order of the pixel address are selected. A memory for storing the obtained information;
A signal processing unit that corrects a signal from the solid-state imaging device based on the information in the memory,
An imaging device comprising:

請求項５において、前記メモリは、前記画素のアドレスの優先順位として、読み出されるタイミングが後である画素ほど優先的に記憶されていることを特徴とする撮像装置。6. The imaging apparatus according to claim 5, wherein the memory stores, as a priority of the address of the pixel, a pixel having a later read timing with a higher priority.

固体撮像素子と、
前記固体撮像素子のキズ補正がされる画素の情報を記憶する優先順位として、キズの種類、キズの程度、画素のアドレスの順でキズ補正がされる画素を選択することにより得られる情報を記憶したメモリと、
前記メモリの情報に基づいて、固体撮像素子からの信号を補正する信号処理部と、
を有することを特徴とする撮像装置。A solid-state image sensor;
As the priority order for storing the information of the pixel to be subjected to the defect correction of the solid-state imaging device, information obtained by selecting the pixel to be subjected to the defect correction in the order of the type of the defect, the degree of the defect, and the address of the pixel is stored. Memory and
A signal processing unit that corrects a signal from the solid-state imaging device based on the information in the memory,
An imaging device comprising:

請求項７において、前記メモリは、前記画素のアドレスの優先順位として、読み出されるタイミングが後である画素ほど優先的に記憶されることを特徴とする撮像装置。8. The imaging apparatus according to claim 7, wherein the memory stores, as a priority of the address of the pixel, a pixel having a later read timing with a higher priority.