JP6004656B2 - Imaging device, control method thereof, and control program - Google Patents
Imaging device, control method thereof, and control program Download PDFInfo
- Publication number
- JP6004656B2 JP6004656B2 JP2012018340A JP2012018340A JP6004656B2 JP 6004656 B2 JP6004656 B2 JP 6004656B2 JP 2012018340 A JP2012018340 A JP 2012018340A JP 2012018340 A JP2012018340 A JP 2012018340A JP 6004656 B2 JP6004656 B2 JP 6004656B2
- Authority
- JP
- Japan
- Prior art keywords
- read
- signal
- mode
- pixels
- transfer gate
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Transforming Light Signals Into Electric Signals (AREA)
Description
本発明は、デジタルカメラなどの撮像装置、その制御方法、および制御プログラムに関する。 The present invention relates to an imaging apparatus such as a digital camera, a control method thereof, and a control program.
近年、デジタルカメラなどの撮像装置では、光学像（光）をアナログ信号（電気信号）に変換するための撮像素子（イメージセンサ）として、従来のＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）センサに代わって、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）センサが用いられるようになってきている。 In recent years, in an imaging apparatus such as a digital camera, a CMOS (Charge Coupled Device) sensor is used instead of a conventional CCD (Charge Coupled Device) sensor as an imaging element (image sensor) for converting an optical image (light) into an analog signal (electrical signal). Complementary Metal Oxide Semiconductor) sensors are increasingly being used.
ＣＭＯＳセンサでは、２次元マトリックス状に配列された複数の画素を駆動する制御回路および増幅回路が、行方向および列方向で共有化されている。一方、共有化構成のイメージセンサでは、信号読み出しの際に発生するノイズおよびセンサ毎の各回路のばらつきなどによって、所謂横スジノイズおよび縦スジノイズなどが発生する。 In the CMOS sensor, a control circuit and an amplifier circuit for driving a plurality of pixels arranged in a two-dimensional matrix are shared in the row direction and the column direction. On the other hand, in a shared configuration image sensor, so-called horizontal streak noise, vertical streak noise, and the like are generated due to noise generated when signals are read and variations in each circuit for each sensor.
横スジノイズおよび縦スジノイズを補正するため、例えば、イメージセンサから撮像信号（アナログ信号）を水平信号線に読み出す第１の読み出しモードと、ノイズを抑圧するための補正データを取得する第２の読み出しモードとを備える撮像装置が知られている（特許文献１参照）。 In order to correct horizontal stripe noise and vertical stripe noise, for example, a first readout mode for reading an imaging signal (analog signal) from an image sensor to a horizontal signal line and a second readout mode for obtaining correction data for suppressing noise. Is known (see Patent Document 1).
図１０は、従来の撮像装置で用いられる撮像素子における画素の構成を示す図である。 FIG. 10 is a diagram illustrating a configuration of a pixel in an imaging element used in a conventional imaging apparatus.
図１０において、フォトダイオード（ＰＤ）１００１は光を電荷に変換する。ソースフォロワ（ＳＦ）１００２はＰＤ１００１から出力された電荷を電荷量に応じた電圧に変換する。転送トランジスタ１００３はＰＤ１００１で変換された電荷をＳＦ１００２に転送する。リセットトランジスタ１００４はＰＤ１００１およびＳＦ１００２を初期化する。
In FIG. 10, a photodiode (PD) 1001 converts light into electric charge. A source follower (SF) 1002 converts the charge output from the
第１の読み出しモードでは、転送トランジスタ１００３のオンによってＰＤ１００１からＳＦ１００２に電荷が転送される。一方、第２の読み出しモードでは、転送トランジスタ１００３がオフとされて、ＰＤ１００１からＳＦ１００２への電荷の転送を停止する。そして、ＰＤ１００１からＳＦ１００２への電荷の転送を停止することによって、被写体に依存せず、ＳＦ１００２以降の回路で発生するノイズ成分のみを検出することができる。
In the first reading mode, charges are transferred from the
ところが、従来の撮像装置では、上述のような補正データの取得動作を撮像信号（つまり、画像）の取得直前に行う必要がある。その結果、１枚の画像を取得するためには、２回分の撮影時間が必要となってしまう。このため、連続して撮影する場合には、つまり、動画撮影などの際には、連写速度が半分に低下してしまうことになる。 However, in the conventional imaging apparatus, it is necessary to perform the correction data acquisition operation as described above immediately before the acquisition of the imaging signal (that is, the image). As a result, in order to acquire one image, it takes two shooting times. Therefore, when shooting continuously, that is, when shooting a moving image, the continuous shooting speed is reduced to half.
加えて、時間的に変化量の大きいノイズに対しては追従性が悪く、特に、動画撮影の際には、フレームレートと画素数とが規定されるので、従来の撮像装置ではノイズを低減することが難しい。 In addition, followability is poor for noise with a large amount of change over time, and the frame rate and the number of pixels are specified particularly when shooting moving images. It is difficult.
本発明の目的は、連写速度、つまり、フレームレートを低下させることなく、効果的にノイズを低減することのできる撮像装置、その制御方法、および制御プログラムを提供することにある。 An object of the present invention is to provide an imaging apparatus, a control method thereof, and a control program capable of effectively reducing noise without reducing the continuous shooting speed, that is, the frame rate.
上記の目的を達成するため、本発明による撮像装置は、複数の画素が２次元マトリックス状に配列された撮像素子を有する撮像装置であって、前記画素の各々は、光を電荷に変換する光電変換素子と、前記電荷をフローティングノードに転送するための転送ゲートとを有し、第Ｎ行目（Ｎは１以上の整数）の画素について、前記転送ゲートをオフとして基準信号を読み出し、且つ前記転送ゲートをオンとした状態で前記フローティングノードから第１の出力信号を読み出す第１の読み出しモードと、前記第Ｎ行目の画素について、前記転送ゲートをオフとして基準信号を読み出し、且つ前記転送ゲートをオフとした状態で前記フローティングノードから第２の出力信号を読み出す第２の読み出しモードとを行う読み出し制御手段と、前記第２の出力信号を補正用信号として用いて前記第１の出力信号を補正して画像信号を得る画像信号生成手段とを有し、前記読み出し制御手段は、前記画像信号の一部を間引いて得る場合に、前記第１の読み出しモードおよび前記第２の読み出しモードを用いることを特徴とする。 In order to achieve the above object, an imaging apparatus according to the present invention is an imaging apparatus having an imaging element in which a plurality of pixels are arranged in a two-dimensional matrix, and each of the pixels is a photoelectric element that converts light into electric charge. A conversion element; and a transfer gate for transferring the charge to a floating node. For a pixel in the Nth row (N is an integer of 1 or more) , the transfer gate is turned off to read a reference signal, and A first read mode in which a first output signal is read from the floating node in a state where the transfer gate is turned on; a reference signal is read with the transfer gate turned off for the pixels in the Nth row ; and the transfer gate Read control means for performing a second read mode for reading a second output signal from the floating node in a state in which the second output signal is turned off, and the second Possess an image signal generating means for obtaining an image signal an output signal by correcting the first output signal is used as the correction signal, the read control unit, when get thinned portion of the image signal The first read mode and the second read mode are used .
本発明による制御方法は、複数の画素が２次元マトリックス状に配列された撮像素子を有し、前記画素の各々が光を電荷に変換する光電変換素子と、前記電荷をフローティングノードに転送するための転送ゲートとを有する撮像装置の制御方法であって、第Ｎ行目（Ｎは１以上の整数）の画素について、前記転送ゲートをオフとして基準信号を読み出し、且つ前記転送ゲートをオンとした状態で前記フローティングノードから第１の出力信号を読み出す第１の読み出しモードと、前記第Ｎ行目の画素について、前記転送ゲートをオフとして基準信号を読み出し、且つ前記転送ゲートをオフとした状態で前記フローティングノードから第２の出力信号を読み出す第２の読み出しモードとを行う読み出し制御ステップと、前記第２の出力信号を補正用信号として用いて前記第１の出力信号を補正して画像信号を得る画像信号生成ステップとを有し、前記読み出し制御ステップでは、前記画像信号の一部を間引いて得る場合に、前記第１の読み出しモードおよび前記第２の読み出しモードを用いることを特徴とする。 The control method according to the present invention includes an imaging device in which a plurality of pixels are arranged in a two-dimensional matrix, each of the pixels converting a light into a charge, and transferring the charge to a floating node. For a pixel in the Nth row (N is an integer equal to or greater than 1), the reference signal is read with the transfer gate turned off, and the transfer gate is turned on. In the first reading mode in which the first output signal is read from the floating node in the state, the reference signal is read with the transfer gate turned off , and the transfer gate is turned off for the pixels in the Nth row. A read control step for performing a second read mode for reading a second output signal from the floating node; and supplementing the second output signal. By correcting the first output signal by using a use signal have a image signal generating step of obtaining the image signal, in the read control step, when obtained by thinning out a part of the image signal, the first Read mode and the second read mode are used .
本発明による制御プログラムは、複数の画素が２次元マトリックス状に配列された撮像素子を有し、前記画素の各々が光を電荷に変換する光電変換素子と、前記電荷をフローティングノードに転送するための転送ゲートとを有する撮像装置で用いられる制御プログラムであって、前記撮像装置が備えるコンピュータに、第Ｎ行目（Ｎは１以上の整数）の画素について、前記転送ゲートをオフとして基準信号を読み出し、且つ前記転送ゲートをオンとした状態で前記フローティングノードから第１の出力信号を読み出す第１の読み出しモードと、前記第Ｎ行目の画素について、前記転送ゲートをオフとして基準信号を読み出し、且つ前記転送ゲートをオフとした状態で前記フローティングノードから第２の出力信号を読み出す第２の読み出しモードとを行う読み出し制御ステップと、前記第２の出力信号を補正用信号として用いて前記第１の出力信号を補正して画像信号を得る画像信号生成ステップとを実行させ、前記読み出し制御ステップでは、前記画像信号の一部を間引いて得る場合に、前記第１の読み出しモードおよび前記第２の読み出しモードを用いることを特徴とする。 A control program according to the present invention includes an imaging device in which a plurality of pixels are arranged in a two-dimensional matrix, and each of the pixels converts a light into a charge, and transfers the charge to a floating node. A control program for use in an imaging apparatus having a transfer gate of the image processing apparatus , wherein a reference signal is output to a computer provided in the imaging apparatus by turning off the transfer gate for pixels in an Nth row (N is an integer of 1 or more). A first readout mode in which readout is performed and the first output signal is read out from the floating node with the transfer gate turned on; and a reference signal is read out with respect to the pixels in the Nth row , with the transfer gate turned off, and said second reading mode for reading the second output signal from the floating node transfer gates kept off A reading control step of performing a de, the second output signal to execute an image signal generating step of obtaining an image signal by correcting the first output signal is used as the correction signal, in the read control step The first readout mode and the second readout mode are used when a part of the image signal is thinned out .
本発明によれば、連写速度を低下させることなく、しかも効果的にノイズを低減することができる。 According to the present invention, it is possible to effectively reduce noise without reducing the continuous shooting speed.
以下、本発明の実施の形態による撮像装置の一例について図面を参照して説明する。 Hereinafter, an example of an imaging apparatus according to an embodiment of the present invention will be described with reference to the drawings.
［第１の実施形態］
図１は、本発明の第１の実施形態による撮像装置の一例についてその構成を示すブロック図である。
[First Embodiment]
FIG. 1 is a block diagram showing the configuration of an example of an imaging apparatus according to the first embodiment of the present invention.
図１において、図示の撮像装置１００は、例えば、デジタルカメラである。集光レンズ１０１によって被写体像（光学像）が撮像素子（例えば、ＣＭＯＳセンサ）１０２に結像する。撮像素子１０２は光学像を電気信号（アナログ画像信号）に変換する。このアナログ画像信号（以下アナログ信号とも呼ぶ）はＡＤ変換部１０３でデジタル信号に変換される。なお、ＡＤ変換部１０３には、ＡＤ変換処理を行う際、アナログ信号を予め定められた基準値に応じてデジタル信号に変換するＯＢ（Ｏｐｔｉｃａｌ Ｂｌａｃｋ）クランプ回路が備えられている。
In FIG. 1, the illustrated
信号処理部１０４は、ＡＤ変換部１０３から与えられる画像信号に対して画像信号補正処理を行う。タイミング生成部（ＴＧ）１０５は、全体制御・演算部１０６の制御下で、撮像素子１０２、ＡＤ変換部１０３、および信号処理部１０４における処理を同期させるためのタイミング信号を生成する。全体制御・演算部１０６は撮像装置１００全体の制御を行う。
The
記憶部１０７には、撮影の結果得られた撮影データ、調整データ、画像データ、および信号処理用データなどが記憶される。また、記録部１０８には、信号処理部１０４で処理された画像信号に応じて全体制御・演算部１０６で生成された画像データが記録される。操作部１０９は、釦やダイヤルなどを有するヒューマンＩＦ（インタフェース）であり、撮像装置１００に対する動作命令が入力される。
The
表示部１１０には、全体制御・演算部１０６で生成された画像データが表示画像として表示される。さらに、表示部１１０には、操作部１０９から入力された操作に対応するアイコンなどが表示される。
The
図２は、図１に示す撮像素子１０２の構成についてその一例を示す図である。
FIG. 2 is a diagram illustrating an example of the configuration of the
撮像素子１０２は、画素部を備えており、この画素部には２次元マトリックス状に複数の画素が配列されている。画素部は、有効画素部（受光画素部ともいう）２０１および遮光画素（ＯＢ画素）部２０２を備えている。受光画素部２０１は、集光レンズ１０１からの光学像を受光する。一方、遮光画素部２０２は、その表面が遮光されており、画像処理において画像の黒の基準を決定するために用いられる。
The
垂直走査回路２０３は、シフトレジスタ（図示せず）を備えており、行毎に信号線の電圧を切り替えて、撮像素子１０２における画素部からの読み出し行を選択する。垂直出力線２０４は、画素部からの信号（画素信号）を後段に出力するためのものである。列アンプ部２０５は、垂直走査回路２０３で選択された読み出し行の画素から垂直出力線２０４に出力された画素信号を増幅する。水平走査回路２０６は、シフトレジスタおよび電圧信号を一時的に保存する保存回路を有しており、列アンプ部２０５の出力を一時的に保存して、所定の順序で列アンプ出力を選択して、外部に出力する。
The
なお、図示の例では、Ａ／Ｄ変換部１０３は水平走査回路２０６の後段に配置されているが、水平走査回路２０６の前段にＡ／Ｄ変換部１０３を配置するようにしてもよい。
In the illustrated example, the A /
図３は、図２に示す撮像素子において画素の構成を詳細に示す図である。なお、図３に示す例では、説明の便宜上、一行に４画素が配列された撮像素子が示されており、列方向の他の画素は省略されている。 FIG. 3 is a diagram showing in detail the configuration of the pixels in the image sensor shown in FIG. In the example illustrated in FIG. 3, for convenience of explanation, an imaging element in which four pixels are arranged in one row is illustrated, and other pixels in the column direction are omitted.
画素３０８は、リセットトランジスタ（リセットＴｒ）３０１ａ、転送トランジスタ（転送Ｔｒ：転送ゲート）３０２ａ、フォトダイオード（ＰＤ：光電変換素子）３０３ａ、フローティングディフュージョン（ＦＤ：フローティングノード）３０４ａ、選択トランジスタ（選択Ｔｒ）３０５ａ、およびソースフォロワ（ＳＦ）３０６ａを有している。
The
同様に、他の画素もそれぞれリセットＴｒ３０１ｂ〜３０１ｄ、転送Ｔｒ３０２ｂ〜３０２ｄ、ＰＤ３０３ｂ〜３０３ｄ、ＦＤ３０４ｂ〜３０４ｄ、選択Ｔｒ３０５ｂ〜３０５ｄ、およびＳＦ３０６ｂ〜３０６ｄを有している。
Similarly, the other pixels also have reset
図示のように、ＳＦ３０６ａ〜３０６ｄには、それぞれ垂直出力線２０４ａ〜２０４ｄが接続されている。そして、垂直出力線２０４ａ〜２０４ｄは、それぞれ列アンプ２０５ａ〜２０５ｄに接続されている。さらに、列アンプ２０５ａ〜２０５ｂには、基準電圧Ｖｒｅｆ（３０７）が印加される。これら列アンプ２０５ａ〜２０５ｄの出力は、水平走査回路２０６に接続される。
As illustrated, the
図示のように、選択Ｔｒ３０５ａ〜３０５ｄには、行選択線（ＰＳＥＬ）３１１が接続され、リセットＴｒ３０１ａ〜３０１ｄには、リセット信号線（ＰＲＥＳ）３１２が接続される。転送Ｔｒ３０２ｂおよび３０２ｄには、第１の信号転送線（ＰＴＸ１）３１３ａが接続され、転送Ｔｒ３０２ａおよび３０２ｃには、第２の信号転送線（ＰＴＸ２）３１３ｂが接続される。
As illustrated, a row selection line (PSEL) 311 is connected to the
行選択線３１１、リセット信号線３１２、第１の信号転送線３１３ａ、および第２の信号転送線３１３ｂは、それぞれ垂直走査回路２０３（図２）に接続される。以下の説明では、行選択線３１１、リセット信号線３１２、第１の信号転送線３１３ａ、および第２の信号転送線３１３ｂに出力される行選択信号、リセット信号、第１の転送信号、および第２の転送信号もそれぞれＰＳＥＬ、ＰＲＥＳ、ＰＴＸ１、ＰＴＸ２で示す。
The
なお、図３に示す例では、画素（単位画素）の各々が４つのトランジスタを有する例について説明したが、２種類以上のリセット電圧を用いて、ＳＦを不活性化・活性化させる手法を用いれば、選択Ｔｒ３０５ａ〜３０５ｄを削除することができる。
In the example illustrated in FIG. 3, the example in which each pixel (unit pixel) includes four transistors has been described. However, a method of inactivating and activating SF using two or more types of reset voltages can be used. For example, the
図４は、図３に示す撮像素子における動作を説明するためのタイミングチャートである。そして、図４（ａ）は、全画素から信号を読み出す第１の駆動モードを示す図であり、図４（ｂ）は、水平方向（行方向）において１画素おきに間引きを行う第２の駆動モードを示す図である。 FIG. 4 is a timing chart for explaining the operation of the image sensor shown in FIG. FIG. 4A is a diagram illustrating a first drive mode in which signals are read from all pixels, and FIG. 4B is a second diagram in which thinning is performed every other pixel in the horizontal direction (row direction). It is a figure which shows a drive mode.
図４（ａ）において、第１の駆動モードは、高精細が求められる静止画の撮影の際に用いられる。ユーザの操作により撮影動作が開始されて、ＰＤ３０３ａ〜３０３ｄに光が入射すると、ＰＤ３０３ａ〜３０３ｄにおいて入射光に応じた電荷が発生し、電荷の蓄積が開始される。そして、ＰＳＥＬがハイ（Ｈ）レベルとなって、選択Ｔｒ３０５ａ〜３０５ｄがオンされる。また、ＰＲＥＳがＨレベルとなって、リセットＴｒ３０１ａ〜３０１ｄがオンされ、ＦＤ３０４ａ〜３０４ｄの不要な蓄積電荷がリセットされる。
In FIG. 4A, the first drive mode is used when shooting a still image that requires high definition. When a photographing operation is started by a user operation and light enters the PDs 303a to 303d, charges corresponding to the incident light are generated in the PDs 303a to 303d, and charge accumulation is started. Then, PSEL becomes a high (H) level, and the
次に、ＰＲＥＳがロー（Ｌ）レベルとなり、その後の期間Ｔ１において、リセットノイズを含むリセットレベル電圧がＳＦ３０６ａ〜３０６ｄを介して垂直出力線２０４ａ〜２０４ｄに読み出される。そして、垂直出力線２０４ａ〜２０４ｄに読み出されたリセットレベル電圧と基準電圧Ｖｒｅｆとの差分がそれぞれ列アンプ２０５ａ〜２０５ｄで増幅されて、画素基準信号として出力される。
Next, PRES becomes a low (L) level, and in a subsequent period T1, reset level voltages including reset noise are read out to the
その後、ＰＴＸ１およびＰＴＸ２がＨレベルとなって、転送Ｔｒ３０２ａ〜３０２ｄがオンされ、ＰＤ３０３ａ〜３０３ｄで発生した電荷がＦＤ３０４ａ〜３０４ｄに読み出される。そして、期間Ｔ２において、ＳＦ３０６ａ〜３０６ｄによりＦＤ３０４ａ〜３０４ｄに読み出された電荷の電荷量に応じた電圧に変換され、垂直出力線２０４ａ〜２０４ｄ、および列アンプ２０５ａ〜２０５ｄを介してそれぞれ電荷信号として出力される。
Thereafter, PTX1 and PTX2 become H level, the
ここで、電荷信号は、画素基準信号に入射光に応じてＰＤ３０３ａ〜３０３ｄで発生した電荷が加わったものである。よって、電荷信号と画素基準信号との差分を求めれば、各画素のリセットノイズおよび固定パターンの低減された高品質な画像信号を得ることが可能となる。 Here, the charge signal is obtained by adding charges generated in the PDs 303a to 303d in response to incident light to the pixel reference signal. Therefore, if the difference between the charge signal and the pixel reference signal is obtained, it is possible to obtain a high-quality image signal with reduced reset noise and fixed pattern of each pixel.
図４（ｂ）において、第２の駆動モードは、フレームレートと画素数とが定められた動画などの撮影の際に用いられる。ユーザの操作により撮影動作が開始されて、ＰＤ３０３ａ〜３０３ｄに光が入射すると、ＰＤ３０３ａ〜３０３ｄにおいて入射光に応じた電荷が発生し、電荷の蓄積が開始される。そして、ＰＳＥＬがＨレベルとなって、選択Ｔｒ３０５ａ〜３０５ｄがオンされる。また、ＰＲＥＳがＨレベルとなって、リセットＴｒ３０１ａ〜３０１ｄがオンされ、ＦＤ３０４ａ〜３０４ｄの不要な蓄積電荷がリセットされる。
In FIG. 4B, the second drive mode is used when shooting a moving image or the like in which the frame rate and the number of pixels are determined. When a photographing operation is started by a user operation and light enters the PDs 303a to 303d, charges corresponding to the incident light are generated in the PDs 303a to 303d, and charge accumulation is started. Then, PSEL becomes H level and
次に、ＰＲＥＳがロー（Ｌ）レベルとなり、その後の期間Ｔ３において、リセットノイズを含むリセットレベル電圧がＳＦ３０６ａ〜３０６ｄを介して垂直出力線２０４ａ〜２０４ｄに読み出される。そして、垂直出力線２０４ａ〜２０４ｄに読み出されたリセットレベル電圧と基準電圧Ｖｒｅｆとの差分がそれぞれ列アンプ２０５ａ〜２０５ｄで増幅されて、画素基準信号として出力される。
Next, PRES becomes a low (L) level, and in a subsequent period T3, a reset level voltage including reset noise is read to the
その後、ＰＴＸ１のみがＨレベルとなって、転送Ｔｒ３０２ｂおよび３０２ｄがオンされる。これによって、ＰＤ３０３ｂおよび３０３ｄで発生し電荷がＦＤ３０４ｂおよび３０４ｄに読み出される。そして、期間Ｔ４において、ＳＦ３０６ｂおよび３０６ｄによりＦＤ３０４ｂおよび３０４ｄに読み出された電荷の電荷量に応じた電圧に変換され、垂直出力線２０４ｂおよび２０４ｄ、および列アンプ２０５ｂおよび２０５ｄを介してそれぞれ電荷信号（第１の出力信号ともいう）として出力される（第１の読み出しモード）。
Thereafter, only PTX1 becomes H level, and the
図４（ｂ）に示す例では、ＰＤ３０３ｂおよび３０３ｄを含む画素が第１の読み出しモードにおける所定の画素である。 In the example shown in FIG. 4B, the pixels including the PDs 303b and 303d are predetermined pixels in the first readout mode.
ここで、電荷信号は、画素基準信号に入射光に応じてＰＤ３０３ｂおよび３０３ｄで発生した電荷が加わったものである。よって、電荷信号と画素基準信号との差分を求めれば、画像信号が得られる。 Here, the charge signal is obtained by adding charges generated in the PDs 303b and 303d in response to incident light to the pixel reference signal. Therefore, an image signal can be obtained by obtaining a difference between the charge signal and the pixel reference signal.
一方、間引きされるＰＤ３０３ａ及びＰＤ３０３ｃを含む画素からは、リセットレベル電圧の読み出しが行われる（この際、転送Ｔｒ３０２ａおよび３０２ｃはオフ状態である）。そして、直前に読み出された画素基準信号とリセットレベル電圧との差分を求めれば、遮光された場合と同等の信号値（第２の出力信号ともいう）を得ることができる（第２の読み出しモード）。
On the other hand, the reset level voltage is read from the pixels including the thinned
図４（ｂ）に示す例では、ＰＤ３０３ａおよび３０３ｃを含む画素が第２の読み出しモードにおける所定の画素以外の画素である。 In the example shown in FIG. 4B, the pixels including the PDs 303a and 303c are pixels other than the predetermined pixels in the second readout mode.
当該信号値には、信号読み出し中に発生するノイズ、各回路のばらつきなどに起因するノイズなどが含まれているので、この信号値を補正用信号として用いることができる。この結果、画像信号（第１の出力信号）と補正用信号（第２の出力信号）との差分を求めれば、ノイズを低減した高品位の画像信号を得ることができる。 Since the signal value includes noise generated during signal readout, noise due to variations in each circuit, and the like, this signal value can be used as a correction signal. As a result, if the difference between the image signal (first output signal) and the correction signal (second output signal) is obtained, a high-quality image signal with reduced noise can be obtained.
このように、図４（ｂ）に示す例では、第１の読み出しモードと第２の読み出しモードとが並行して行われることになる。 Thus, in the example shown in FIG. 4B, the first read mode and the second read mode are performed in parallel.
図４（ｂ）に示す例では、行方向において１画素おきに信号電荷の転送を停止する場合について説明したが、転送を行う画素と転送を停止する画素については任意に選択することができる。例えば、行方向において２画素以上おきに信号電荷の転送を停止するようにしてもよい。さらには、数画素連続で信号電荷の転送を停止するようにしてもよい。 In the example shown in FIG. 4B, the case where the transfer of the signal charge is stopped every other pixel in the row direction has been described. However, the pixel that performs the transfer and the pixel that stops the transfer can be arbitrarily selected. For example, signal charge transfer may be stopped every two or more pixels in the row direction. Furthermore, the transfer of signal charges may be stopped for several pixels continuously.
また、垂直走査回路２０３がＰＴＸ１およびＰＴＸ２を出力する例で説明したが、ＰＴＸ１およびＰＴＸ２の少なくとも一方を水平走査回路２０６から出力するようにしてもよい。
Further, although the example in which the
図５は、図１に示す撮像装置による撮影処理の一例を説明するためのフローチャートである。ここでは、前述したように、画像信号におけるノイズ成分を検出して、撮影画像に対する影響を軽減する例について説明する。なお、図５においては、画像の横方向に発生するノイズ成分に関して説明する。 FIG. 5 is a flowchart for explaining an example of photographing processing by the imaging apparatus shown in FIG. Here, as described above, an example in which a noise component in an image signal is detected to reduce the influence on a captured image will be described. In FIG. 5, a description will be given of noise components generated in the horizontal direction of the image.
いま、撮像装置１００において撮影が開始されると、露光調整が行われた後、図４（ｂ）で説明したようにして、撮像素子１０２において行毎に画像信号および補正用信号が出力される（ステップＳ１０２）。ここでは、まずＮ（Ｎは１以上の整数）行目（第Ｎ行目）の画像信号および補正用信号を取得するものとする。画像信号および補正用信号は、Ａ／Ｄ変換部１０３によってデジタル信号に変換された後、信号処理部１０４に与えられる。信号処理部１０４は、Ｎ行目の補正用信号の平均化を行って平均値（平均レベル）ＨＯＢ（Ｎ）を求める（ステップＳ１０３）。
Now, when shooting is started in the
続いて、信号処理部１０４は、（Ｎ−１）行目までの少なくとも１つの行の平均値ＨＯＢ（Ｎ−１）を積算して、積算値（積算レベル）ΣＯＢ（Ｎ−１）を求める。全体制御演算部１０６は、ＨＯＢ（Ｎ）およびΣＯＢ（Ｎ−１）の差分の絶対値と所定の補正用閾値Ｔｈとを比較する。そして、全体制御演算部１０６は、当該絶対値が補正用閾値Ｔｈ以下であるか否かを判定する（ステップＳ１０４）。なお、ＨＯＢ（Ｎ）とΣＯＢ（Ｎ−１）との差分は注目行における信号値の変動量を示しており、当該変動量を補正用閾値と比較すれば、画像信号の変動を検出することができる。
Subsequently, the
上記の絶対値が補正用閾値Ｔｈよりも大きいと（ステップＳ１０４において、ＹＥＳ）、全体制御演算部１０６は、画像において横方向のノイズが発生した判定する。そして、全体制御演算部１０６は、信号処理部１０４に対して画像信号の補正を指示する（ステップＳ１０５）。
When the absolute value is larger than correction threshold Th (YES in step S104), overall
ステップＳ１０５では、ＨＯＢ（Ｎ）とΣＯＢ（Ｎ−１）の差を用いて、次の式（１）（α、β：定数）で示される補正値を、注目行の画像信号に加算する処理が行われる。この加算処理によって画像信号の変動が軽減される。 In step S105, using the difference between HOB (N) and ΣOB (N−1), a correction value represented by the following expression (1) (α, β: constant) is added to the image signal of the target row. Is done. This addition process reduces the fluctuation of the image signal.
補正値＝α×｛ＨＯＢ（Ｎ）−ΣＯＢ（Ｎ−１）｝＋β （１）
一方、上記の絶対値が補正用閾値Ｔｈ以下であると（ステップＳ１０４において、ＮＯ）、全体制御演算部１０６は、ノイズが発生していないと判定する。そして、信号処理部１０４は、全体制御演算部１０６の制御下で、ＨＯＢ（Ｎ）およびΣＯＢ（Ｎ−１）から、次の行の画像信号の変動検出に用いるΣＯＢ（Ｎ）を算出する（ステップＳ１０６）。
Correction value = α × {HOB (N) −ΣOB (N−1)} + β (1)
On the other hand, if the absolute value is equal to or smaller than correction threshold Th (NO in step S104), overall
ステップＳ１０５又はＳ１０６の処理に続いて、ステップＳ１０７の処理が行われる。ステップＳ１０６においては、信号処理部１０４は、上述のようにして得られた画像信号（ここでは、デジタル信号）を画像データとして出力する。
Subsequent to step S105 or S106, step S107 is performed. In step S106, the
続いて、全体制御演算部１０６は、撮像素子１０２の全ての行について処理が終了したか否かを判定する。つまり、全体制御演算部１０６は、最終行の処理が終了したか否かを判定する（ステップＳ１０８）。最終行の処理が終了すると（ステップＳ１０８において、ＹＥＳ）、全体制御演算部１０６は、撮影を終了する。
Subsequently, the overall
最終行でないと（ステップＳ１０８において、ＮＯ）、全体制御演算部１０６は、行番号をインクリメントして、つまり、Ｎ＝Ｎ＋１として（ステップＳ１０９）、ステップＳ１０２の処理に戻る。
If it is not the last line (NO in step S108), overall
上記の例では、各行における補正用信号の平均値と積算値とに応じて得られる補正値を用いて、画像信号を補正するようにしたが、例えば、補正用画素の信号値から水平方向の傾きを考慮した補正値を得て、画像信号の補正を行うようにしてもよい。 In the above example, the image signal is corrected using the correction value obtained according to the average value and the integrated value of the correction signal in each row. For example, the horizontal direction is calculated from the signal value of the correction pixel. It is also possible to obtain a correction value in consideration of the inclination and correct the image signal.
以上のように、本発明の第１の実施形態では、第２の駆動モードにおいて、間引かれた画素の信号値を補正用信号として読み出して、画像信号を補正するようにしたので、フレームレートの低下を防止して、しかも高画質の画像を得ることができる。 As described above, in the first embodiment of the present invention, in the second drive mode, the signal value of the thinned pixel is read out as a correction signal and the image signal is corrected. Can be prevented, and a high-quality image can be obtained.
［第２の実施形態］
続いて、本発明の第２の実施形態による撮像装置の一例について説明する。なお、第２の実施形態による撮像装置の構成は図１に示す撮像装置と同様であるが、撮像素子１０２の構成が図３に示す撮像素子と異なる。
[Second Embodiment]
Subsequently, an example of an imaging apparatus according to the second embodiment of the present invention will be described. The configuration of the imaging device according to the second embodiment is the same as that of the imaging device shown in FIG. 1, but the configuration of the
図６は、本発明の第２の実施形態による撮像装置で用いられる撮像素子においてその画素構成の一例を示す図である。なお、図６において、図３に示す画素構成と同一の構成要素については同一の参照番号を付し、説明を省略する。 FIG. 6 is a diagram illustrating an example of the pixel configuration of the image sensor used in the imaging apparatus according to the second embodiment of the present invention. In FIG. 6, the same components as those of the pixel configuration shown in FIG. 3 are denoted by the same reference numerals, and the description thereof is omitted.
前述のように、第１の実施形態においては、撮像素子１０２は、第１の信号転送線（ＰＴＸ１）３１３ａおよび第２の信号転送線（ＰＴＸ２）３１３ｂを有している。一方、撮像素子としてＣＭＯＳセンサを用いた場合には、その構造を簡略化するため信号線を増やすことができない場合がある。このため、図６に示す例では、撮像素子１０２は、信号転送線（ＰＴＸ）３１３のみを有している。そして、信号転送線３１３には転送Ｔｒ３０２ａ〜３０２ｄが接続され、行選択信号ＰＳＥＬ、リセット信号ＰＲＥＳ、および転送信号ＰＴＸは、垂直走査回路２０２から出力される。
As described above, in the first embodiment, the
図７は、図６に示す撮像素子における動作を説明するためのタイミングチャートである。そして、図７（ａ）は、第１の駆動モードを示す図であり、図７（ｂ）は、第２の駆動モードを示す図である。 FIG. 7 is a timing chart for explaining the operation of the image sensor shown in FIG. FIG. 7A is a diagram illustrating the first drive mode, and FIG. 7B is a diagram illustrating the second drive mode.
図７（ａ）において、第１の駆動モードでは全画素から信号が読み出される。ユーザの操作により撮影動作が開始されて、ＰＤ３０３ａ〜３０３ｄに光が入射すると、ＰＤ３０３ａ〜３０３ｄにおいて入射光に応じた電荷が発生し、電荷の蓄積が開始される。そして、ＰＳＥＬがＨレベルとなって、選択Ｔｒ３０５ａ〜３０５ｄがオンされる。また、ＰＲＥＳがＨレベルとなって、リセットＴｒ３０１ａ〜３０１ｄがオンされ、ＦＤ３０４ａ〜３０４ｄの不要な蓄積電荷がリセットされる。
In FIG. 7A, signals are read from all pixels in the first drive mode. When a photographing operation is started by a user operation and light enters the PDs 303a to 303d, charges corresponding to the incident light are generated in the PDs 303a to 303d, and charge accumulation is started. Then, PSEL becomes H level and
次に、ＰＲＥＳがロー（Ｌ）レベルとなり、その後の期間Ｔ５において、リセットノイズを含むリセットレベル電圧がＳＦ３０６ａ〜３０６ｄを介して垂直出力線２０４ａ〜２０４ｄに読み出される。そして、垂直出力線２０４ａ〜２０４ｄに読み出されたリセットレベル電圧と基準電圧Ｖｒｅｆとの差分がそれぞれ列アンプ２０５ａ〜２０５ｄで増幅されて、画素基準信号として出力される。
Next, PRES becomes a low (L) level, and in a subsequent period T5, a reset level voltage including reset noise is read to the
その後、ＰＴＸがＨレベルとなって、転送Ｔｒ３０２ａ〜３０２ｄがオンされ、ＰＤ３０３ａ〜３０３ｄで発生した電荷がＦＤ３０４ａ〜３０４ｄに読み出される。そして、期間Ｔ６において、ＳＦ３０６ａ〜３０６ｄによりＦＤ３０４ａ〜３０４ｄに読み出された電荷の電荷量に応じた電圧に変換され、垂直出力線２０４ａ〜２０４ｄ、および列アンプ２０５ａ〜２０５ｄを介してそれぞれ電荷信号として出力される。
Thereafter, PTX becomes H level, the
図７（ｂ）において、第２の駆動モードでは補正用信号が読み出される。ユーザの操作により撮影動作が開始されて、ＰＤ３０３ａ〜３０３ｄに光が入射すると、ＰＤ３０３ａ〜３０３ｄにおいて入射光に応じた電荷が発生し、電荷の蓄積が開始される。そして、ＰＳＥＬがＨレベルとなって、選択Ｔｒ３０５ａ〜３０５ｄがオンされる。また、ＰＲＥＳがＨレベルとなって、リセットＴｒ３０１ａ〜３０１ｄがオンされ、ＦＤ３０４ａ〜３０４ｄの不要な蓄積電荷がリセットされる。
In FIG. 7B, the correction signal is read in the second drive mode. When a photographing operation is started by a user operation and light enters the PDs 303a to 303d, charges corresponding to the incident light are generated in the PDs 303a to 303d, and charge accumulation is started. Then, PSEL becomes H level and
次に、ＰＲＥＳがロー（Ｌ）レベルとなり、その後の期間Ｔ７において、リセットノイズを含むリセットレベル電圧がＳＦ３０６ａ〜３０６ｄを介して垂直出力線２０４ａ〜２０４ｄに読み出される。そして、垂直出力線２０４ａ〜２０４ｄに読み出されたリセットレベル電圧と基準電圧Ｖｒｅｆとの差分がそれぞれ列アンプ２０５ａ〜２０５ｄで増幅されて、画素基準信号として出力される。
Next, PRES becomes a low (L) level, and in a subsequent period T7, a reset level voltage including reset noise is read to the
その後、ＰＴＸがロー（Ｌ）レベルの状態で、期間Ｔ８において再度読み出し処理が行われる。これによって、ＰＤ３０３ａ〜３０３ｄが遮光された状態とほぼ同じ状態での信号値を得ることができる。当該信号値には、信号読み出し中に発生するノイズ、各回路のばらつきなどに起因するノイズなどが含まれているので、この信号値を補正用信号として用いることができる。そして、この補正用信号は一旦水平走査回路２０６の保存領域に保存される。
After that, the reading process is performed again in the period T8 while the PTX is in the low (L) level. As a result, it is possible to obtain signal values in substantially the same state as the state in which the PDs 303a to 303d are shielded from light. Since the signal value includes noise generated during signal readout, noise due to variations in each circuit, and the like, this signal value can be used as a correction signal. The correction signal is temporarily stored in the storage area of the
続いて、ＰＴＸがＨレベルとなって、転送Ｔｒ３０２ａ〜３０２ｄがオンされ、ＰＤ３０３ａ〜３０３ｄで発生した電荷がＦＤ３０４ａ〜３０４ｄに読み出される。そして、期間Ｔ９において、ＳＦ３０６ａ〜３０６ｄによりＦＤ３０４ａ〜３０４ｄに読み出された電荷の電荷量に応じた電圧に変換され、垂直出力線２０４ａ〜２０４ｄ、および列アンプ２０５ａ〜２０５ｄを介してそれぞれ電荷信号として出力される。この電荷信号と画素基準信号との差分を求めると、画像信号が得られる。水平走査回路２０６では、画像信号と補正用信号とを、所定の順番に並び替えた後、１水平期間内で外部に出力する。この結果、画像信号と補正用信号との差分を求めれば、ノイズを低減した高品位の画像信号を得ることができる。
Subsequently, PTX becomes H level, the
上述の例では、画像信号を得る際に用いる画素基準信号として、補正用信号を得る際に読み出される画素基準信号を用いたが、電荷信号を読み出す前に再度画素基準信号を読み出すようにしてもよい。 In the above example, the pixel reference signal read when obtaining the correction signal is used as the pixel reference signal used when obtaining the image signal. However, the pixel reference signal may be read again before the charge signal is read. Good.
さらに、上述の例では、補正用信号の読み出しを画像信号の読み出しの直前に行うようにしたが、画像信号の読み出しを行った後、補正用信号の読み出しを行うようにしてもよい。そして、期間Ｔ９よりも前に読み出した補正用信号を水平走査回路の保存領域に保存することなく、期間Ｔ９より前に外部に出力するようにしてもよい。 Furthermore, in the above example, the correction signal is read out immediately before the image signal is read out. However, the correction signal may be read out after the image signal is read out. The correction signal read before the period T9 may be output to the outside before the period T9 without being stored in the storage area of the horizontal scanning circuit.
なお、補正用信号の読み出しに用いる画素は、画像として記録される領域の外周部又は領域外の画素を用いることが望ましい。 Note that as the pixels used for reading the correction signal, it is desirable to use pixels at the outer periphery of the area recorded as an image or outside the area.
このように、本発明の第２の実施形態では、第２の駆動モードにおいて、画素基準信号を読み出した後、ＰＴＸがＬレベルの状態で再度読み出し処理を行って、当該再読み出しで得られた信号値を補正用信号として用いて、画像信号を補正するようにしたので、撮像素子の構造を簡略化して、フレームレートの低下を防止して、しかも高画質の画像を得ることができる。 As described above, in the second embodiment of the present invention, in the second driving mode, after the pixel reference signal is read out, the reading process is performed again in a state where the PTX is at the L level, and the re-reading is performed. Since the image signal is corrected by using the signal value as the correction signal, the structure of the image sensor can be simplified, the frame rate can be prevented from being lowered, and a high-quality image can be obtained.
［第３の実施形態］
次に、本発明の第３の実施形態による撮像装置の一例について説明する。なお、第３の実施形態による撮像装置の構成は図１に示す撮像装置と同様であるが、撮像素子１０２の構成が図６に示す撮像素子と異なる。
[Third Embodiment]
Next, an example of an imaging apparatus according to the third embodiment of the present invention will be described. The configuration of the imaging device according to the third embodiment is the same as that of the imaging device shown in FIG. 1, but the configuration of the
図８は、本発明の第３の実施形態による撮像装置で用いられる撮像素子においてその画素構成の一例を示す図である。なお、図８において、図６に示す画素構成と同一の構成要素については同一の参照番号を付し、説明を省略する。また、図８においては、行方向に配列された画素のうち１つの画素３０８のみを示し、さらに、列方向において画素３０８に隣接する画素８０８が示されている。また、ここでは、画素３０８および画素８０８は同一の行に属するものとして説明する。
FIG. 8 is a diagram illustrating an example of a pixel configuration of an image sensor used in the image pickup apparatus according to the third embodiment of the present invention. In FIG. 8, the same components as those in the pixel configuration shown in FIG. 6 are denoted by the same reference numerals, and the description thereof is omitted. Further, FIG. 8 shows only one
ＣＭＯＳセンサなどの撮像素子では、その素子数を減らすため、複数の画素でリセットＴｒ、ＦＤ、選択Ｔｒ、およびＳＦを共有することがある。図８に示す例では、リセットＴｒ３０１ａ、ＦＤ３０４ａ、選択Ｔｒ３０５ａ、およびＳＦ３０６ａが画素３０８および８０８で共有されている。そして、画素８０８は、ＰＤ８０３ａおよび転送Ｔｒ８０２ａのみを有している。
In an image sensor such as a CMOS sensor, reset Tr, FD, selection Tr, and SF may be shared by a plurality of pixels in order to reduce the number of elements. In the example shown in FIG. 8, the
なお、図示のように、転送Ｔｒ８０２ａには、信号転送線（ＰＴＸ）３１３とは別の信号転送線（ＰＴＸ３）８１３が接続され、この信号転送線８１３は、垂直走査回路（図８には示さず）に接続されている。
As shown in the figure, a signal transfer line (PTX3) 813 different from the signal transfer line (PTX) 313 is connected to the
図９は、図８に示す撮像素子における動作を説明するためのタイミングチャートである。ここでは、補正用信号を読み出す第２の駆動モードについて説明する。 FIG. 9 is a timing chart for explaining the operation of the image sensor shown in FIG. Here, the second drive mode for reading the correction signal will be described.
図９において、ユーザの操作により撮影動作が開始されて、ＰＤ３０３ａおよび８０３ａに光が入射すると、ＰＤ３０３ａおよび８０３ａにおいて入射光に応じた電荷が発生し、電荷の蓄積が開始される。そして、ＰＳＥＬがＨレベルとなって、選択Ｔｒ３０５ａがオンされる。また、ＰＲＥＳがＨレベルとなって、リセットＴｒ３０１ａがオンされ、ＦＤ３０４ａの不要な蓄積電荷がリセットされる。
In FIG. 9, when a photographing operation is started by a user operation and light is incident on the PDs 303a and 803a, charges corresponding to the incident light are generated in the PDs 303a and 803a, and charge accumulation is started. Then, PSEL becomes H level and the
次に、ＰＲＥＳがロー（Ｌ）レベルとなり、その後の期間Ｔ１０において、リセットノイズを含むリセットレベル電圧がＳＦ３０６ａを介して垂直出力線２０４ａに読み出される。そして、垂直出力線２０４ａに読み出されたリセットレベル電圧と基準電圧Ｖｒｅｆとの差分が列アンプで増幅されて、画素基準信号として出力される。
Next, PRES becomes a low (L) level, and in a subsequent period T10, a reset level voltage including reset noise is read out to the
その後、ＰＴＸがロー（Ｌ）レベルの状態で、期間Ｔ１１において再度読み出し処理が行われる。そして、期間Ｔ１０で読み出した信号値と期間Ｔ１１で読み出した信号値との差分を求めれば、ＰＤ３０３ａが遮光された状態とほぼ同じ状態での信号値を得ることができる。当該信号値には、信号読み出し中に発生するノイズ、各回路のばらつきなどに起因するノイズなどが含まれているので、この信号値を補正用信号として用いることができる。
After that, the reading process is performed again in the period T11 while the PTX is in the low (L) level. Then, by obtaining a difference between the signal value read in the period T10 and the signal value read in the period T11, a signal value in a state almost the same as the state in which the
上述のようにして、補正用信号を得た後、画素８０８の読み出しが行われる。ここでは、ＰＳＥＬがＨレベルとなって、選択Ｔｒ３０５ａがオンされる。また、ＰＲＥＳがＨレベルとなって、リセットＴｒ３０１ａがオンされ、ＦＤ３０４ａがリセットされる。そして、ＰＲＥＳがＬレベルとなり、その後の期間Ｔ１２において、リセットノイズを含むリセットレベル電圧がＳＦ３０６ａを介して垂直出力線２０４ａに読み出される。この際、垂直出力線２０４ａに読み出されたリセットレベル電圧と基準電圧Ｖｒｅｆとの差分が列アンプで増幅されて、画素基準信号として出力される。
As described above, after obtaining the correction signal, the
続いて、ＰＴＸ３がＨレベルとなって、転送Ｔｒ８０２ａがオンされ、ＰＤ８０３ａで発生した電荷がＦＤ３０４ａに読み出される。そして、期間Ｔ１３において、ＳＦ３０６ａによりＦＤ３０４ａに読み出された電荷の電荷量に応じた電圧に変換され、垂直出力線２０４ａおよび列アンプを介してそれぞれ電荷信号として出力される。この電荷信号と画素基準信号との差分を求めると、画像信号が得られる。そして、例えば、信号処理部１０４で画像信号と補正用信号との差分を求めれば、ノイズを低減した高品位の画像信号を得ることができる。
Subsequently, PTX3 becomes H level, the
上述の例では、信号処理部１０４で画像信号と補正用信号との差分を求めるようにしたが、当該処理を水平走査回路で行うようにしてもよい。また、リセットＴｒ、ＦＤ、選択Ｔｒ、およびＳＦを列方向の画素で共有し、当該画素において補正を行う例について説明したが、複数の補正用信号の平均値を用いて画像信号の補正を行うようにしてもよい。
In the above example, the
さらに、ここでは、列方向の画素においてリセットＴｒ、ＦＤ、選択Ｔｒ、およびＳＦを共有する例について説明したが、行方向の画素においてリセットＴｒ、ＦＤ、選択Ｔｒ、およびＳＦ共有する場合においても、これら画素から補正用信号を得れば、ばらつきに起因する影響を低減することができる。 Furthermore, here, an example in which reset Tr, FD, selection Tr, and SF are shared in pixels in the column direction has been described, but even in the case where reset Tr, FD, selection Tr, and SF are shared in pixels in the row direction, If correction signals are obtained from these pixels, the influence due to variations can be reduced.
加えて、３つ以上の画素において、リセットＴｒ、ＦＤ、選択Ｔｒ、およびＳＦを共有化する場合においても、同様にして第３の実施形態を適用することができる。 In addition, the third embodiment can be applied in the same manner even when three or more pixels share the reset Tr, FD, selection Tr, and SF.
このように、本発明の第３の実施形態では、複数の画素において回路素子を共有している際においても、フレームレートの低下を防止して、しかも高画質の画像を得ることができる。 As described above, in the third embodiment of the present invention, even when circuit elements are shared by a plurality of pixels, it is possible to prevent a decrease in frame rate and obtain a high-quality image.
上述の説明から明らかなように、図１〜図３に示す例では、垂直走査回路２０３、列アンプ部２０５、水平走査回路２０６、信号処理部１０４、および全体制御演算部１０６などが読み出し制御手段と機能する。また、信号処理部１０４および全体制御演算部１０６は画像信号生成手段として機能する。そして、信号処理部１０４および全体制御演算部１０６は平均化手段、積算手段、および補正手段として機能する。
As is apparent from the above description, in the example shown in FIGS. 1 to 3, the
以上、本発明について実施の形態に基づいて説明したが、本発明は、これらの実施の形態に限定されるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。 As mentioned above, although this invention was demonstrated based on embodiment, this invention is not limited to these embodiment, Various forms of the range which does not deviate from the summary of this invention are also contained in this invention. .
例えば、上記の実施の形態の機能を制御方法として、この制御方法を撮像装置に実行させるようにすればよい。また、上述の実施の形態の機能を有するプログラムを制御プログラムとして、この制御プログラムを撮像装置が備えるコンピュータに実行させるようにしてもよい。なお、制御プログラムは、例えば、コンピュータに読み取り可能な記録媒体に記録される。 For example, the function of the above embodiment may be used as a control method, and this control method may be executed by the imaging apparatus. Further, a program having the functions of the above-described embodiments may be used as a control program, and the control program may be executed by a computer included in the imaging apparatus. The control program is recorded on a computer-readable recording medium, for example.
この際、制御方法および制御プログラムの各々は、少なくとも読み出し制御ステップおよび画像信号生成ステップを有することになる。 At this time, each of the control method and the control program has at least a read control step and an image signal generation step.
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記録媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。 The present invention can also be realized by executing the following processing. That is, software (program) for realizing the functions of the above-described embodiments is supplied to a system or apparatus via a network or various recording media, and a computer (or CPU, MPU, etc.) of the system or apparatus reads the program. It is a process to be executed.
２０４ａ〜２０４ｄ 垂直出力線
２０５ａ〜２０５ｄ 列アンプ
２０６ 水平走査回路
３０１ａ〜３０１ｄ リセットトランジスタ
３０２ａ〜３０２ｄ 転送トランジスタ
３０３ａ〜３０３ｄ フォトダイオード
３０４ａ〜３０４ｄ フローティングディフュージョン
３０５ａ〜３０５ｄ 選択トランジスタ
３０６ａ〜３０６ｄ ソースフォロワ
204a to 204d
Claims (11)
前記画素の各々は、光を電荷に変換する光電変換素子と、前記電荷をフローティングノードに転送するための転送ゲートとを有し、
第Ｎ行目（Ｎは１以上の整数）の画素について、前記転送ゲートをオフとして基準信号を読み出し、且つ前記転送ゲートをオンとした状態で前記フローティングノードから第１の出力信号を読み出す第１の読み出しモードと、前記第Ｎ行目の画素について、前記転送ゲートをオフとして基準信号を読み出し、且つ前記転送ゲートをオフとした状態で前記フローティングノードから第２の出力信号を読み出す第２の読み出しモードとを行う読み出し制御手段と、
前記第２の出力信号を補正用信号として用いて前記第１の出力信号を補正して画像信号を得る画像信号生成手段とを有し、
前記読み出し制御手段は、前記画像信号の一部を間引いて得る場合に、前記第１の読み出しモードおよび前記第２の読み出しモードを用いることを特徴とする撮像装置。 An imaging apparatus having an imaging device in which a plurality of pixels are arranged in a two-dimensional matrix,
Each of the pixels includes a photoelectric conversion element that converts light into an electric charge, and a transfer gate for transferring the electric charge to a floating node,
For a pixel in the Nth row (N is an integer equal to or greater than 1), a reference signal is read with the transfer gate turned off, and a first output signal is read from the floating node with the transfer gate turned on. Read mode, and for the pixels in the Nth row, a second read signal is read from the floating node while the transfer gate is turned off and a reference signal is read and the transfer gate is turned off. Read control means for performing a mode;
It possesses an image signal generating means for obtaining an image signal by correcting the first output signal by using the second output signal as a correction signal,
The imaging apparatus according to claim 1, wherein the readout control unit uses the first readout mode and the second readout mode when a part of the image signal is thinned out .
前記読み出し制御手段は、前記フローティングノードを有する画素について前記第２の読み出しモードを行って前記第２の出力信号を読み出した後、他の画素について前記第１の読み出しモードを行って前記第１の出力信号を読み出すことを特徴とする請求項１乃至６のいずれか１項に記載の撮像装置。 The floating node is shared by a plurality of pixels, and one of the plurality of pixels has the floating node,
The read control means performs the second read mode for the pixel having the floating node to read the second output signal, and then performs the first read mode for the other pixels to perform the first read mode. the imaging apparatus according to any one of claims 1 to 6, wherein reading the output signal.
前記平均レベルを複数の行に亘って積算して積算レベルを得る積算手段と、
前記平均レベルと前記積算レベルとの差分の絶対値が所定の閾値を超えると、前記平均レベルと前記積算レベルに応じて得られた補正値に基づいて前記第１の出力信号を補正する補正手段とを有することを特徴とする請求項１乃至８のいずれか１項に記載の撮像装置。 The image signal generation means includes an averaging means for obtaining an average level from the level of the correction signal in the Nth row,
Integrating means for integrating the average level over a plurality of rows to obtain an integrated level;
Correction means for correcting the first output signal based on a correction value obtained according to the average level and the integrated level when the absolute value of the difference between the average level and the integrated level exceeds a predetermined threshold value DOO imaging apparatus according to any one of claims 1 to 8, characterized in that it has a.
第Ｎ行目（Ｎは１以上の整数）の画素について、前記転送ゲートをオフとして基準信号を読み出し、且つ前記転送ゲートをオンとした状態で前記フローティングノードから第１の出力信号を読み出す第１の読み出しモードと、前記第Ｎ行目の画素について、前記転送ゲートをオフとして基準信号を読み出し、且つ前記転送ゲートをオフとした状態で前記フローティングノードから第２の出力信号を読み出す第２の読み出しモードとを行う読み出し制御ステップと、
前記第２の出力信号を補正用信号として用いて前記第１の出力信号を補正して画像信号を得る画像信号生成ステップとを有し、
前記読み出し制御ステップでは、前記画像信号の一部を間引いて得る場合に、前記第１の読み出しモードおよび前記第２の読み出しモードを用いることを特徴とする制御方法。 An imaging device having an imaging device in which a plurality of pixels are arranged in a two-dimensional matrix, each of the pixels having a photoelectric conversion device that converts light into electric charge, and a transfer gate for transferring the electric charge to a floating node An apparatus control method comprising:
For a pixel in the Nth row (N is an integer equal to or greater than 1), a reference signal is read with the transfer gate turned off, and a first output signal is read from the floating node with the transfer gate turned on. Read mode, and for the pixels in the Nth row, a second read signal is read from the floating node while the transfer gate is turned off and a reference signal is read and the transfer gate is turned off. A read control step for performing a mode;
Possess an image signal generating step of obtaining an image signal by correcting the first output signal by using the second output signal as a correction signal,
In the reading control step, the first reading mode and the second reading mode are used when a part of the image signal is obtained by thinning .
前記撮像装置が備えるコンピュータに、
第Ｎ行目（Ｎは１以上の整数）の画素について、前記転送ゲートをオフとして基準信号を読み出し、且つ前記転送ゲートをオンとした状態で前記フローティングノードから第１の出力信号を読み出す第１の読み出しモードと、前記第Ｎ行目の画素について、前記転送ゲートをオフとして基準信号を読み出し、且つ前記転送ゲートをオフとした状態で前記フローティングノードから第２の出力信号を読み出す第２の読み出しモードとを行う読み出し制御ステップと、
前記第２の出力信号を補正用信号として用いて前記第１の出力信号を補正して画像信号を得る画像信号生成ステップとを実行させ、
前記読み出し制御ステップでは、前記画像信号の一部を間引いて得る場合に、前記第１の読み出しモードおよび前記第２の読み出しモードを用いることを特徴とする制御プログラム。 An imaging device having an imaging device in which a plurality of pixels are arranged in a two-dimensional matrix, each of the pixels having a photoelectric conversion device that converts light into electric charge, and a transfer gate for transferring the electric charge to a floating node A control program used in the apparatus,
In the computer provided in the imaging device,
For a pixel in the Nth row (N is an integer equal to or greater than 1), a reference signal is read with the transfer gate turned off, and a first output signal is read from the floating node with the transfer gate turned on. Read mode, and for the pixels in the Nth row, a second read signal is read from the floating node while the transfer gate is turned off and a reference signal is read and the transfer gate is turned off. A read control step for performing a mode;
An image signal generation step of obtaining an image signal by correcting the first output signal using the second output signal as a correction signal ;
In the read control step, when the image signal is partially thinned out, the first read mode and the second read mode are used .
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012018340A JP6004656B2 (en) | 2012-01-31 | 2012-01-31 | Imaging device, control method thereof, and control program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012018340A JP6004656B2 (en) | 2012-01-31 | 2012-01-31 | Imaging device, control method thereof, and control program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2013157881A JP2013157881A (en) | 2013-08-15 |
| JP6004656B2 true JP6004656B2 (en) | 2016-10-12 |
Family
ID=49052656
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2012018340A Expired - Fee Related JP6004656B2 (en) | 2012-01-31 | 2012-01-31 | Imaging device, control method thereof, and control program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6004656B2 (en) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102382183B1 (en) | 2015-05-20 | 2022-04-01 | 삼성전자주식회사 | Image Sensor For Improving Signal-to-Noise Ratio and Random Noise, and Image Processing System Including The Same |
| KR102677080B1 (en) | 2016-12-29 | 2024-06-24 | 삼성전자주식회사 | Image sensor, and electronic apparatus comprising the image sensor |
| JP7271131B2 (en) | 2018-10-24 | 2023-05-11 | キヤノン株式会社 | IMAGING DEVICE AND METHOD OF CONTROLLING IMAGING DEVICE |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2011024096A (en) * | 2009-07-17 | 2011-02-03 | Canon Inc | Imaging device, method of controlling the same, and program |
-
2012
- 2012-01-31 JP JP2012018340A patent/JP6004656B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2013157881A (en) | 2013-08-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10021321B2 (en) | Imaging device and imaging system | |
| JP5852324B2 (en) | Imaging apparatus, control method therefor, and program | |
| JP5128889B2 (en) | Solid-state imaging device and solid-state imaging system using the same | |
| JP4290066B2 (en) | Solid-state imaging device and imaging system | |
| EP2832090B1 (en) | Cmos image sensors implementing full frame digital correlated double sampling with global shutter | |
| KR101435964B1 (en) | Imaging device and driving method for solid-state image sensor | |
| KR101934695B1 (en) | Image sensor and image capturing apparatus | |
| JP5455798B2 (en) | Image processing device | |
| JP5871496B2 (en) | Imaging apparatus and driving method thereof | |
| US9544512B2 (en) | Image capturing apparatus and method of reading out pixel signals from an image sensor | |
| JP5959834B2 (en) | Imaging device | |
| KR20180113506A (en) | Solid-state imaging device, method of driving solid-state imaging device, and electronic device | |
| US10313588B2 (en) | Image capturing system and control method of image capturing system | |
| JP5780025B2 (en) | Solid-state imaging device, driving method of solid-state imaging device, and electronic apparatus | |
| JP6734649B2 (en) | IMAGING DEVICE, IMAGING SYSTEM, AND METHOD OF CONTROLLING IMAGING DEVICE | |
| JP4154268B2 (en) | Imaging device | |
| JP2011124917A (en) | Imaging apparatus | |
| JP6004656B2 (en) | Imaging device, control method thereof, and control program | |
| JP5489739B2 (en) | Signal processing apparatus, imaging apparatus, and signal processing method | |
| JP2016058877A (en) | Imaging apparatus and control method thereof | |
| JP2008017100A (en) | Solid-state imaging device | |
| JP6574653B2 (en) | Imaging apparatus and imaging system | |
| US8067720B2 (en) | Image sensing device and imaging system | |
| JP2014107739A (en) | Imaging device and control method therefor | |
| JP2014175778A (en) | Imaging apparatus and imaging method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150116 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20151218 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160105 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160304 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160809 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160906 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 6004656 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| LAPS | Cancellation because of no payment of annual fees |