JP7499695B2 - 固体撮像装置、固体撮像装置の信号処理方法、および電子機器 - Google Patents
固体撮像装置、固体撮像装置の信号処理方法、および電子機器 Download PDFInfo
- Publication number
- JP7499695B2 JP7499695B2 JP2020215183A JP2020215183A JP7499695B2 JP 7499695 B2 JP7499695 B2 JP 7499695B2 JP 2020215183 A JP2020215183 A JP 2020215183A JP 2020215183 A JP2020215183 A JP 2020215183A JP 7499695 B2 JP7499695 B2 JP 7499695B2
- Authority
- JP
- Japan
- Prior art keywords
- pixel
- correction
- pixel unit
- sensitivity
- corrected
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003384 imaging method Methods 0.000 title claims description 58
- 238000003672 processing method Methods 0.000 title claims description 8
- 238000012937 correction Methods 0.000 claims description 405
- 230000035945 sensitivity Effects 0.000 claims description 257
- 238000006243 chemical reaction Methods 0.000 claims description 20
- 230000003287 optical effect Effects 0.000 claims description 5
- 238000000034 method Methods 0.000 description 81
- 230000008569 process Effects 0.000 description 65
- 230000000875 corresponding effect Effects 0.000 description 44
- 238000010586 diagram Methods 0.000 description 41
- 230000006870 function Effects 0.000 description 34
- 238000009792 diffusion process Methods 0.000 description 24
- 238000012546 transfer Methods 0.000 description 20
- 238000012545 processing Methods 0.000 description 17
- 239000011159 matrix material Substances 0.000 description 5
- 108090001145 Nuclear Receptor Coactivator 3 Proteins 0.000 description 4
- 102100022883 Nuclear receptor coactivator 3 Human genes 0.000 description 4
- 230000007547 defect Effects 0.000 description 4
- 238000005070 sampling Methods 0.000 description 4
- 230000002093 peripheral effect Effects 0.000 description 3
- 238000000634 powder X-ray diffraction Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 101150055492 sel-11 gene Proteins 0.000 description 2
- 239000000758 substrate Substances 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 101001056180 Homo sapiens Induced myeloid leukemia cell differentiation protein Mcl-1 Proteins 0.000 description 1
- 102100026539 Induced myeloid leukemia cell differentiation protein Mcl-1 Human genes 0.000 description 1
- 101100402560 Mus musculus Msl3 gene Proteins 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- OBRMIIBKUGYRAY-ZVTBYLAHSA-N mcl-111 Chemical compound C([C@H]1[C@H]2CC=3C4=CC=C(C=3)O)CCCC41CCN2CC1=CC=CC=C1 OBRMIIBKUGYRAY-ZVTBYLAHSA-N 0.000 description 1
- SISVKKMIVGWPLL-PAMZHZACSA-N mcl-113 Chemical compound C([C@H]12)CCCC31C1=CC=C(O)C=C1C[C@H]2N(CC=C)CC3 SISVKKMIVGWPLL-PAMZHZACSA-N 0.000 description 1
- KQYOUOIJGNIBFU-RCCQNZRSSA-N mcl-114 Chemical compound C([C@H]1[C@H]2CC=3C4=CC=C(C=3)O)CCCC41CCN2CCC(=O)C1=CC=CS1 KQYOUOIJGNIBFU-RCCQNZRSSA-N 0.000 description 1
- 101150035574 mcl2 gene Proteins 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/67—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response
- H04N25/671—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response for non-uniformity detection or correction
- H04N25/672—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response for non-uniformity detection or correction between adjacent sensors or output registers for reading a single image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/50—Control of the SSIS exposure
- H04N25/57—Control of the dynamic range
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/50—Control of the SSIS exposure
- H04N25/57—Control of the dynamic range
- H04N25/58—Control of the dynamic range involving two or more exposures
- H04N25/581—Control of the dynamic range involving two or more exposures acquired simultaneously
- H04N25/585—Control of the dynamic range involving two or more exposures acquired simultaneously with pixels having different sensitivities within the sensor, e.g. fast or slow pixels or pixels having different sizes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/67—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response
- H04N25/671—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response for non-uniformity detection or correction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/131—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements including elements passing infrared wavelengths
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/135—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on four or more different wavelength filter elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/703—SSIS architectures incorporating pixels for producing signals other than image signals
- H04N25/704—Pixels specially adapted for focusing, e.g. phase difference pixel sets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Solid State Image Pick-Up Elements (AREA)
- Color Television Image Signal Generators (AREA)
- Exposure Control For Cameras (AREA)
Description
各カラーフィルタを含む画素ユニットが正方配列されて1つの画素群が形成され、複数の画素群が2次元状に配列されて画素部(画素アレイ)が形成される。
このカラーフィルタ配列としては、ベイヤ配列が広く知られている。また、たとえば各画素に対してマイクロレンズが形成されている。
また、高感度化や高ダイナミックレンジ化を図るために、ベイヤ配列の各画素ユニットを複数の同色画素により形成したCMOSイメージセンサも提案されている(たとえば特許文献1、2参照)。
多画素化による高解像度化を維持し、かつ、画素ピッチ縮小による感度やダイナミックレンジの低下を抑制するため、隣接した複数の同色画素をたとえば4画素ずつ配置し、解像度を追求する際には個別の画素信号を読み出し、高感度やダイナミックレンジ性能を必要とする局面では同色の画素の信号を加算して読み出す手法が一般的に採用されている。
そして、このCMOSイメージセンサは、たとえば画素ユニットに隣接する複数の同色画素で一つのマイクロレンズを共有する。
一方、このCMOSイメージセンサにおいては、画素アレイに、PDAF(位相検出オートフォーカス)画素が同色で形成されていることから、通常の撮影モードでは、これらのPDAF画素の感度等を補正する必要がある。
以下に、特許文献3および4に記載されている隣接する同色画素の平均値との差を利用した補正方法についてさらに考察する。
画素ユニットPU1は、隣接する複数、たとえば2×2の同色(Gr)の4画素PXGrA、PXGrB,PXGrC,PXGrDが配置されている。画素ユニットPU1において、4画素PXGrA、PXGrB,PXGrC,PXGrDに対して1つのマイクロレンズMCL1が配置されている。
画素ユニットPU2は、隣接する複数、たとえば2×2の同色(R)の4画素PXRA、PXRB,PXRC,PXRDが配置されている。画素ユニットPU2において、4画素PXRA、PXRB,PXRC,PXRDに対して1つのマイクロレンズMCL2が配置されている。
画素ユニットPU3は、隣接する複数、たとえば2×2の同色(B)の4画素PXBA、PXBB,PXBC,PXRDが配置されている。画素ユニットPU4において、4画素PXBA、PXBB,PXBC,PXBDに対して1つのマイクロレンズMCL3が配置されている。
画素ユニットPU4は、隣接する複数、たとえば2×2の同色(Gb)の4画素PXGbA、PXGbB,PXGbC,PXGbRDが配置されている。画素ユニットPU4において、4画素PXbA、PXGbB,PXGbC,PXGbDに対して1つのマイクロレンズMCL4が配置されている。
Sa=Pa/((Pa+Pb+Pc+Pd)/4) 式(1)
たとえば、局所的な感度バラつきと、もっと広範囲に及ぶ別要因の感度バラつき等の複合要因で感度バラつきが発生していた場合、たとえば図1において隣接するGb画素PXGbA、PXGbB,PXGbC,PXGbDの感度値Pe~Phを補正の参考にすることができない。
このため従来の補正方法では感度補正が不十分なケースが発生する場合がある。たとえば、感度を補正するには画素ユニットの画素の感度のみを参照することから、複数の画素ユニットや画素群にわたる欠陥、たとえば縞等を修正することが困難である。
この要求に応えるために、搭載するイメージセンサの画角周辺部に入射する光線の角度が大きくなる傾向にある。
画角周辺部における斜め入射光を効率よく光電変換領域(フォトダイオード)に導くことができない場合には、画角周辺部と画角中央部で感度差が大きくでてしまい、シェーディングと呼ばれる画素特性の劣化が発生する可能性がある。
しかし、従来の補正方法では、レンズ端部に向かって発生する単調なシェーディングに起因する感度低下と個別の画素のバラつきを別個に補正できないため、正確な感度補正が困難である。
本発明は、広い領域における複数の要因で発生する感度むらを補正することが可能で、より精度の高い画質を実現することが可能であり、しかも局所的な領域の感度むらを高い精度で補正することが可能な固体撮像装置、固体撮像装置の信号処理方法、および電子機器を提供することにある。
また、本発明によれば、広い領域における複数の要因で発生する感度むらを補正することが可能で、より精度の高い画質を実現することが可能となり、しかも局所的な領域の感度むらを高い精度で補正することが可能となる。
図2は、本発明の第1の実施形態に係る固体撮像装置の構成例を示すブロック図である。
本実施形態において、固体撮像装置10は、たとえばCMOSイメージセンサにより構成される。
本第1の実施形態においては、補正回路710は、補正対象の画素ユニット(PU)における補正で参照する各画素の画素信号に応じた感度値、および、補正対象の画素ユニットに隣接する少なくとも一つの同色の画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値を、重み付け係数Wiにより重み付けし、重み付けした感度値の総和を、補正で参照する画素の総数で除して、補正係数μを取得(算出)する。
図3は、本発明の第1の実施形態に係る画素部における画素アレイの形成例を示す図である。
図4は、本発明の第1の実施形態に係る画素アレイを形成する画素群の一例を抽出して示す図である。
ただし、本第1の実施形態では、図4に示すように、画素ユニットの4つの同色画素で1つのフローティングディフュージョンFD(Floating Diffusion;浮遊拡散層)を共有する4画素共有構成が採用されている。具体的には、後で詳述するように、4つの色画素フローティングディフュージョンFD11、リセットトランジスタRST11-Tr、ソースフォロワトランジスタSF11-Tr、および選択トランジスタSEL11-Trが共有されている。
また、共有されるフローティングディフュージョンFDは、たとえば任意の画素の感度値の補正の際に、補正で参照する同じ画素ユニットPUの複数の画素から読み出す画素信号の加算部として機能する。
図3の例では、図面の簡単化のため、9つの画素群PXG11,PXG12,PXG13,PXG21,PXG22,PXG23、PXG31,PXG32,PXG33が3×3のマトリクス状に配置された画素アレイ200が示されている。
図3および図4の画素群PXG11は、Gr画素の画素ユニットPU111、R画素の画素ユニットPU112、B画素の画素ユニットPU113、およびGb画素の画素ユニットPU114がベイヤ配列されている。
画素群PXG12は、Gr画素の画素ユニットPU121、R画素の画素ユニットPU122、B画素の画素ユニットPU123、およびGb画素の画素ユニットPU124がベイヤ配列されている。
画素群PXG13は、Gr画素の画素ユニットPU131、R画素の画素ユニットPU132、B画素の画素ユニットPU133、およびGb画素の画素ユニットPU134がベイヤ配列されている。
画素群PXG22は、Gr画素の画素ユニットPU221、R画素の画素ユニットPU222、B画素の画素ユニットPU223、およびGb画素の画素ユニットPU224がベイヤ配列されている。
画素群PXG23は、Gr画素の画素ユニットPU231、R画素の画素ユニットPU232、B画素の画素ユニットPU233、およびGb画素の画素ユニットPU234がベイヤ配列されている。
画素群PXG32は、Gr画素の画素ユニットPU321、R画素の画素ユニットPU322、B画素の画素ユニットPU323、およびGb画素の画素ユニットPU324がベイヤ配列されている。
画素群PXG33は、Gr画素の画素ユニットPU331、R画素の画素ユニットPU332、B画素の画素ユニットPU333、およびGb画素の画素ユニットPU334がベイヤ配列されている。
画素群を構成する画素ユニットも画素群共通の構成を有する。したがって、ここでは、代表例として、画素群PXG11の形成する画素ユニットPU111,PU112,PU113,PU114について説明する。
後で詳述するように、補正係数μは、重み付けされた各感度値を参照する画素の総和で除して(割って)得られる。
ここで、図3の画素アレイに関連付けて、補正対象のGrまたはGb画素の画素ユニット(PU)に隣接する少なくとも一つの同色(GrまたはGb)の画素ユニット(PU)の複数例について説明する。
補正には、基本的に、補正対象の画素を含む画素ユニットPU114の各画素PXの読み出し値(画素信号に応じた感度値)に加えて、画素ユニットPU111、PU121、PU211、PU221のうちの少なくとも一つの画素ユニットの各画素の読み出し値(画素信号に応じた感度値)が参照される。
補正には、基本的に、補正対象の画素を含む画素ユニットPU214の各画素PXの読み出し値(画素信号に応じた感度値)に加えて、画素ユニットPU121、PU131、PU221、PU231のうちの少なくとも一つの画素ユニットの各画素の読み出し値(画素信号に応じた感度値)が参照される。
補正には、基本的に、補正対象の画素を含む画素ユニットPU221の各画素PXの読み出し値(画素信号に応じた感度値)に加えて、画素ユニットPU114、PU124、PU214、PU224のうちの少なくとも一つの画素ユニットの各画素の読み出し値(画素信号に応じた感度値)が参照される。
補正には、基本的に、補正対象の画素を含む画素ユニットPU221の各画素PXの読み出し値(画素信号に応じた感度値)に加えて、画素ユニットPU124、PU134、PU224、PU234のうちの少なくとも一つの画素ユニットの各画素の読み出し値(画素信号に応じた感度値)が参照される。
補正には、基本的に、補正対象の画素を含む画素ユニットPU214の各画素PXの読み出し値(画素信号に応じた感度値)に加えて、画素ユニットPU2111、PU221、PU311、PU321のうちの少なくとも一つの画素ユニットの各画素の読み出し値(画素信号に応じた感度値)が参照される。
補正には、基本的に、補正対象の画素を含む画素ユニットPU224の各画素PXの読み出し値(画素信号に応じた感度値)に加えて、画素ユニットPU221、PU231、PU321、PU331のうちの少なくとも一つの画素ユニットの各画素の読み出し値(画素信号に応じた感度値)が参照される。
補正には、基本的に、補正対象の画素を含む画素ユニットPU321の各画素PXの読み出し値(画素信号に応じた感度値)に加えて、画素ユニットPU214、PU224、PU314、PU324のうちの少なくとも一つの画素ユニットの各画素の読み出し値(画素信号に応じた感度値)が参照される。
補正には、基本的に、補正対象の画素を含む画素ユニットPU321の各画素PXの読み出し値(画素信号に応じた感度値)に加えて、画素ユニットPU324、PU234、PU324、PU334のうちの少なくとも一つの画素ユニットの各画素の読み出し値(画素信号に応じた感度値)が参照される。
ここで、画素ユニットの4つの同色画素で1つのフローティングディフュージョンFDを共有する4画素共有の一構成例について説明する。
図5は、本発明の第1の実施形態に係る固体撮像装置の画素群の4つの画素で1つのフローティングディフュージョンを共有する画素ユニットの一例を示す回路図である。
たとえば、第1色画素PX11のフォトダイオードPD11が第1の緑色(G)光電変換部として機能し、第2色画素PX12のフォトダイオードPD12が第2の緑色(G)光電変換部として機能し、第3色画素PX21のフォトダイオードPD21が第3の緑色(G)光電変換部として機能し、第4色画素PX22のフォトダイオードPD22が第4の緑色(G)光電変換部として機能する。
フォトダイオードPD11,PD12,PD21,P22を形成する基板表面にはダングリングボンドなどの欠陥による表面準位が存在するため、熱エネルギーによって多くの電荷(暗電流)が発生し、正しい信号が読み出せなくなってしまう。
埋め込みフォトダイオード(PPD)では、フォトダイオードPDの電荷蓄積部を基板内に埋め込むことで、暗電流の信号への混入を低減することが可能となる。
以下、信号電荷は電子であり、各トランジスタがn型トランジスタである場合について説明するが、信号電荷がホールであったり、各トランジスタがp型トランジスタであっても構わない。
転送トランジスタTG11-Trは、読み出し制御系の制御の下、制御信号TG11が所定レベルのハイレベル(H)の期間に選択されて導通状態となり、フォトダイオードPD11で光電変換され蓄積された電荷(電子)をフローティングディフュージョンFD11に転送する。
転送トランジスタTG12-Trは、読み出し制御系の制御の下、制御信号TG12が所定レベルのハイレベル(H)の期間に選択されて導通状態となり、フォトダイオードPD12で光電変換され蓄積された電荷(電子)をフローティングディフュージョンFD11に転送する。
転送トランジスタTG21-Trは、読み出し制御系の制御の下、制御信号TG21が所定レベルのハイレベル(H)の期間に選択されて導通状態となり、フォトダイオードPD21で光電変換され蓄積された電荷(電子)をフローティングディフュージョンFD11に転送する。
転送トランジスタTG22-Trは、読み出し制御系の制御の下、制御信号TG22が所定レベルのハイレベル(H)の期間に選択されて導通状態となり、フォトダイオードPD22で光電変換され蓄積された電荷(電子)をフローティングディフュージョンFD11に転送する。
リセットトランジスタRST11-Trは、読み出し制御系の制御の下、たとえば読み出しスキャン時に、制御信号RST11がHレベルの期間に選択されて導通状態となり、フローティングディフュージョンFD11を電源線VDD(またはVRst)の電位にリセットする。
ソースフォロワトランジスタSF11-TrのゲートにはフローティングディフュージョンFD11が接続され、選択トランジスタSEL11-Trは制御信号)SEL11により導通状態が制御される。
選択トランジスタSEL11-Trは、制御信号SEL11がHレベルの期間に選択されて導通状態となる。これにより、ソースフォロワトランジスタSF11-TrはフローティングディフュージョンFD11の電荷を電荷量(電位)に応じた利得をもって電圧信号に変換した列出力の読み出し電圧(信号)VSL(PIXOUT)を垂直信号線LSGNに出力する。
この撮像モードを、本実施形態では、画素独立モードという。
この場合、画素ユニットPU内の複数、すなわち、2,3、または4画素の画素信号を加算した加算信号が垂直信号線LSGNに送出され、カラム読み出し回路40に入力される。
この撮像モードを、本実施形態では、画素加算モードという。
また、垂直走査回路30は、アドレス信号に従い、信号の読み出しを行うリード行と、フォトダイオードPDに蓄積された電荷をリセットするシャッター行の行アドレスの行選択信号を出力する。
信号処理回路70は、補正回路710とメモリ720とを少なくとも有し、たとえば各画素の感度差を補正する感度差補正処理を実行し、処理後の画素信号を後段のISP(Image Signal Processor)などに出力する。
なお、補正回路710は、CMOSイメージセンサチップ内部に配置されていてもよいし、外部に配置されていてもよい。
補正回路710は、感度差補正処理を実行する際に必要となる補正係数μを取得(算出)してメモリ12に記憶させる補正係数取得処理を実行する。
本第1の実施形態において、補正回路710は、補正対象となる画素ユニットPUの画素の感度を、次式(2)により取得(算出)した補正係数μに関連付けて補正する。
すなわち、補正回路710は、補正対象の画素ユニットPUにおける補正で参照する各画素の画素信号に応じた感度値Pn、および、補正対象の画素ユニットPUに隣接する少なくとも一つの同色の画素ユニットPUにおける補正で参照する各画素の画素信号に応じた感度値Pnを、重み付け係数Wiにより重み付けし、重み付けした感度値の総和を、補正で参照する画素の総数nで除して、補正係数μを算出する。
なお、第1の実施形態においては、後述するように、補正回路710が、場合によって、加重平均を重み付けした感度値Pnの総和を、補正で参照する画素の総数nではなく補正対象画素ユニットの画素数で除して、補正係数μを算出することも可能に構成されてもよい。
また、補正対象画素ユニットCTPUの4画素の読み出し値である感度値はP1,P2,P3,P4で示され、隣接画素ユニットAJPU1の4画素の感度値はP5,P6,P7,P8で示され、隣接画素ユニットAJPU2の4画素の感度値はP9,P10,P11,P12で示され、隣接画素ユニットAJPU3の4画素の感度値はP13,P14,P15,P16で示され、隣接画素ユニットAJPU4の4画素の感度値はP17,P18,P19,P20で示されている。
そして、図6に示す3×3の9つの画素ユニットにより補正関連領域CRAが画定される。
図7は、本第1の実施形態に係る補正係数取得処理の第1の具体例を説明するための図である。
また、式(2-1)は、上記式2の重み付け係数として、第1の重み付け係数CTW1および第2の重み付け係数AJW1を具体的な数値を代入した例を示している。
また、第1の重み付け係数CTW1としての「0.15」は補正対象画素ユニットCTPUの4画素の感度値P1~P4に対して設定され、第2の重み付け係数AJW1としての「0.025」は隣接画素ユニットAJPU1~AJPU4の16画素に対して設定される。
したがって、重み付け係数Wの総和は、(0.15×4+0.025×16)=1となり、式2の条件を満たしている。
また、本例では、補正で参照する画素の総数nは「20」となる。
これと並行して、補正対象画素ユニットCTPUの斜め上方に隣接する隣接画素ユニットAJPU1~AJPU4に配置されている16個のG画素の感度値P5~P20の各々に第2の重み付け係数AJW1(0.025)を掛け合わせて重み付けした感度値の第2の総和を取得する。
そして、重み付けした感度値の第1の総和と第2の総和を加算して重み付け総感度値を取得し、この重み付け総感度値を、補正で参照する画素の総数n(=20)で除して、所望の補正係数μを取得する。
その結果、補正で参照される隣接画素ユニットの数(参照画素の数)の影響を受けることが少なく、サンプリング領域等にかかわりなく、安定してバラツキの少ない精度の高い補正係数μを得ることが可能となる。
図8は、本第1の実施形態に係る補正係数取得処理の第2の具体例を説明するための図である。
また、式(2-2)は、上記式2の重み付け係数として、第1の重み付け係数CTW1および第2の重み付け係数AJW1を具体的な数値を代入した例を示している。
なお、これは一例であり、補正対象画素ユニットCTPUに対して、斜め左上方の画素ユニットPU111、斜め右上方の画素ユニットPU121、斜め左下方の画素ユニットPU211、および斜め右下方の画素ユニットPU221の4つのうちから1,2、または3つの画素ユニットを任意に選択して隣接画素ユニットとして採用することが可能である。
また、第1の重み付け係数CTW1としての「0.15」は補正対象画素ユニットCTPUの4画素の感度値P1~P4に対して設定され、第2の重み付け係数AJW1としての「0.1」は隣接画素ユニットAJPU1の4画素に対して設定される。
したがって、重み付け係数Wの総和は、(0.15×4+0.1×4)=1となり、式2の条件を満たしている。
また、本例では、補正で参照する画素の総数nは「8」となる
これと並行して、補正対象画素ユニットCTPUの斜め上方に隣接する隣接画素ユニットAJPU1に配置されている4個のG画素の感度値P5~P8の各々に第2の重み付け係数AJW1(0.1)を掛け合わせて重み付けした感度値の第2の総和を取得する。
そして、重み付けした感度値の第1の総和と第2の総和を加算して重み付け総感度値を取得し、この重み付け総感度値を、補正で参照する画素の総数n(=8)で除して、所望の補正係数μを取得する。
図9は、本第1の実施形態に係る補正係数取得処理の第3の具体例を説明するための図である。
本例では、画素の配置領域として第1の配置領域AR1と第2の配置領域AR2を採用している。
第1の配置領域AR1は、画素部20の中央部側の領域ACTRを含み、第2の配置領域AR2は、画素部20の縁部側領域AEDGを含む。
補正回路710は、第2の配置領域AR2では、採用する隣接画素ユニットAJPUを多くして精度を高めた方がよく、これに伴い上記式(2-1)に従って重み付けした感度値の総和を、補正で参照する画素の第1の総数(図9の例では20)で除して、補正係数μを算出する。
たとえば、図9において、イメージセンサの画素部20の中央部領域ACTRでは式(2-2)の補正式で感度値補正用の補正係数μを取得する。
また、たとえば、斜め光の入射が多くシェーディングの影響が大きいチップ周辺部領域AEDGでは式(2-1)を使い、より広範な範囲の隣接画素を使っての補正も可能となる。
したがって、本第1の実施形態によれば、広い領域における複数の要因で発生する感度むらをそれぞれ最適な補正方法で個別に補正することが可能で、より精度の高い画質を実現することが可能であり、しかも局所的な領域の感度むらを高い精度で補正することが可能となる。
図10は、本発明の第2の実施形態に係る補正係数取得処理を説明するための図である。
また、式(2-3)は、上記式2の重み付け係数として、第1の重み付け係数CTW1および第2の重み付け係数AJW1,AJW2を具体的な数値を代入した例を示している。
第1の実施形態においては、各画素ユニットPUは2×2の4つの同色画素(G)により構成されて、各画素ユニットPUのすべての4画素に対して1つのマイクロレンズMCLが配置されている。
そして、補正対象画素ユニットCTPUの残りの画素G5~G9、隣接画素ユニットAJPU1~AJPU4の画素G10~G45、補正対象画素ユニットCTPUに対して上下左右に隣接するB画素およびR画素の画素ユニットの画素のすべてに対して1つのマイクロレンズMCL12が配置されている。
また、第1の重み付け係数CTW1としての「0.111」は補正対象画素ユニットCTPUの第1の領域AR11の4画素G1~G4の感度値P1~P4に対して設定され、第2の重み付け係数AJW2としての「0.056」は補正対象画素ユニットCTPU1の5画素G5~G9に対して設定される。第2の重み付け係数AJW1としての「0.0531」は隣接画素ユニットAJPU1の9画素G10~G18に対して設定される。
したがって、重み付け係数Wの総和は、(0.111×4+0.056×5+0.0531×9)=1となり、式2の条件を満たしている。
また、本例では、補正で参照する画素の総数nは「18」となる。
換言すると、本実施形態において、重み付け係数は、補正対象の画素が配置される対象領域に対する第1の重み付け係数CTWを最大値とし、他の画素配置領域に対する第2の重み付け係数AJWは対象領域に対する配置条件に応じた値に設定される。
次の式3は、本発明の第3の実施形態に係る補正係数取得処理に適用される補正係数を取得するための演算式を示す。
図11は、本第3の実施形態に係る補正係数取得処理の第1の具体例を説明するための図である。
また、式(3-1)は、上記式3の重み付け係数として、第1の重み付け係数CTW1および第2の重み付け係数AJW1を具体的な数値を代入した例を示している。
また、第1の重み付け係数CTW1としての「5」は補正対象画素ユニットCTPUの4画素の感度値P1~P4に対して設定され、第2の重み付け係数AJW1としての「3」は隣接画素ユニットAJPU1~AJPU4の16画素に対して設定される。
また、本例では、補正で参照する画素ユニットの重み付け係数値の総和は「68」となる。
これと並行して、補正対象画素ユニットCTPUの斜め上方に隣接する隣接画素ユニットAJPU1~AJPU4に配置されている16個のG画素の感度値P5~P20の各々に第2の重み付け係数AJW1(3)を掛け合わせて重み付けした感度値の第2の総和を取得する。
そして、重み付けした感度値の第1の総和と第2の総和を加算して重み付け総感度値を取得し、この重み付け総感度値を、補正で参照する画素ユニットの重み付け係数値の総和n(=68)で除して、所望の補正係数μを取得する。
図12は、本第3の実施形態に係る補正係数取得処理の第2の具体例を説明するための図である。
また、式(3-2)は、上記式2の重み付け係数として、第1の重み付け係数CTW1および第2の重み付け係数AJW1を具体的な数値を代入した例を示している。
なお、これは一例であり、補正対象画素ユニットCTPUに対して、斜め左上方の画素ユニットPU111、斜め右上方の画素ユニットPU121、斜め左下方の画素ユニットPU211、および斜め右下方の画素ユニットPU221の4つのうちから1,2、または3つの画素ユニットを任意に選択して隣接画素ユニットとして採用することが可能である。
また、第1の重み付け係数CTW1としての「3」は補正対象画素ユニットCTPUの4画素の感度値P1~P4に対して設定され、第2の重み付け係数AJW1としての「2」は隣接画素ユニットAJPU1の4画素に対して設定される。
また、本例では、補正で参照する画素ユニットの重み付け係数値の総和nは「20」となる
これと並行して、補正対象画素ユニットCTPUの斜め上方に隣接する隣接画素ユニットAJPU1に配置されている4個のG画素の感度値P5~P8の各々に第2の重み付け係数AJW1(2)を掛け合わせて重み付けした感度値の第2の総和を取得する。
そして、重み付けした感度値の第1の総和と第2の総和を加算して重み付け総感度値を取得し、この重み付け総感度値を、補正で参照する画素ユニットの重み付け係数値の総和n(=20)で除して、所望の補正係数μを取得する。
図13は、本第3の実施形態に係る補正係数取得処理の第3の具体例を説明するための図である。
本例では、画素の配置領域として第1の配置領域AR21と第2の配置領域AR22を採用している。
第1の配置領域AR21は、画素部20の中央部側の領域ACTRを含み、第2の配置領域AR22は、画素部20の縁部側領域AEDGを含む。
補正回路710は、第2の配置領域AR2では、採用する隣接画素ユニットAJPUを多くして精度を高めた方がよく、これに伴い上記式(3-1)に従って重み付けした感度値の総和を、補正で参照する画素の第1の総数(図13の例では68)で除して、補正係数μを算出する。
たとえば、図13において、イメージセンサの画素部20の中央部領域ACTRでは式(3-2)の補正式で感度値補正用の補正係数μを取得する。
また、たとえば、斜め光の入射が多くシェーディングの影響が大きいチップ周辺部領域AEDGでは式(3-1)を使い、より広範な範囲の隣接画素を使っての補正も可能となる。
したがって、本第3の実施形態によれば、広い領域における複数の要因で発生する感度むらをそれぞれ最適な補正方法で個別に補正することが可能で、より精度の高い画質を実現することが可能であり、しかも局所的な領域の感度むらを高い精度で補正することが可能となる。
次の式4は、本発明の第4の実施形態に係る補正係数取得処理に適用される補正係数を取得するための演算式を示す。
本第4の実施形態において、関数f(i)はマイクロレンズシェーディングによる理論値を示す関数を含む。
図14(A)~(C)は、本発明の第4の実施形態に係る補正係数取得処理を説明するための図である。
図14(A)は画素群の画素ユニット配列を示し、図14(B)は図14(A)のx-x線における補正対象画素ユニットCTPUの輝度値分布を示し、図14(C)は関数f(i)に関連付けてシェーディングを補正する様子を模式的に示している。
本例では、隣接画素ユニットAJPU1~AJPU4の感度値を使って補正対象画素からの距離、すなわち影響度に応じた係数も加算されている。
また、本例では、補正で参照する画素の総数nは「16」となる。
このように、本第4の実施形態によれば、関数を待機関数として用いることにより、より多様な感度むらを補正することができる。
次の式5は、本発明の第5の実施形態に係る補正係数取得処理に適用される補正係数を取得するための演算式を示す。
すなわち、本第5の実施形態において、画素の配置条件に応じた理論値を示す関数とは、上記したマイクロレンズMCL21のシェーディングによる理論値を示す関数f(i)に相当し、この関数f(i)と補正対象画素からの距離で決まる補正係数を掛け合わせてマイクロレンズMCL21によるシェーディングを補正する。
図15(A)~(C)は、本発明の第5の実施形態に係る補正係数取得処理を説明するための図である。
図15(A)は画素群の画素ユニット配列を示し、図15(B)は図15(A)のx-x線における補正対象画素ユニットCTPUの輝度値分布を示し、図15(C)は関数f(i)に関連付けてシェーディングを補正する様子を模式的に示している。
各画素の感度バラつきを補正する際同じ4×4の画素ユニット内にある16画素の感度値の平均をただとるのではなく、レンズによるシェーディングを補正した上で加重平均をとる方がより正確に1つ1つの画素の感度バラつきの補正が可能である。
本例では、隣接画素ユニットAJPU1~AJPU4の感度値を使って補正対象画素からの距離、すなわち影響度に応じた係数も加算されている。
また、本例では、補正で参照する画素の総数nは「80」となる。
このように、本第5の実施形態によれば、関数を待機関数として用いることにより、より多様な感度むらを補正することができる。
図16(A)および(B)は、本発明の第6の実施形態に係る補正係数取得処理を説明するための図である。
第1の実施形態においては、各画素ユニットPUは2×2の4つの同色画素(G)により構成されて、各画素ユニットPUのすべての4画素に対して1つのマイクロレンズMCLが配置されている。
あるいは、図16(B)に示すように、各画素ユニットPUは3×3の9つの同色画素(G)により構成され、補正対象画素ユニットCTPUの2画素G4,G5に対してのみ、たとえばPDAF機能を持つように金属シールドMSL31が配置されている。
図17(A)および(B)は、本発明の第7の実施形態に係る補正係数取得処理を説明するための図である。
第1の実施形態においては、各画素ユニットPUは2×2の4つの同色画素(G)により構成されて、各画素ユニットPUのすべての4画素に対して1つのマイクロレンズMCLが配置されている。
次の式6は、本発明の第8の実施形態に係る補正係数取得処理に適用される補正係数を取得するための演算式を示す。
本第8の実施形態においては、画素の感度を、加重平均の代わりに、同一画素ユニットまたは他の隣接画素ユニットの中央値を補正係数として取得する補正係数取得処理を行う。
次の式7は、本発明の第9の実施形態に係る補正係数取得処理に適用される補正係数を取得するための演算式を示す。
本第9の実施形態においては、画素の感度を、加重平均の代わりに、同一画素ユニットまたは他の隣接画素ユニットのモード値により補正する。
さらに、電子機器800は、このCMOSイメージセンサ810の画素領域に入射光を導く(被写体像を結像する)光学系(レンズ等)820を有する。
電子機器800は、CMOSイメージセンサ810の出力信号を処理する信号処理回路(PRC)830を有する。
信号処理回路830で処理された画像信号は、液晶ディスプレイ等からなるモニタに動画として映し出し、あるいはプリンタに出力することも可能であり、またメモリカード等の記録媒体に直接記録する等、種々の態様が可能である。
そして、カメラの設置の要件に実装サイズ、接続可能ケーブル本数、ケーブル長さ、設置高さなどの制約がある用途に使われる、たとえば、監視用カメラ、医療用内視鏡用カメラなどの電子機器を実現することができる。
Claims (19)
- 光電変換を行う複数の同色画素を含む画素ユニットが複数配置された画素部と、
補正対象となる前記画素ユニットの画素の感度を、取得した補正係数に関連付けて補正する補正回路と、を有し、
前記補正回路は、
前記画素部における画素の配置領域に応じて異なる数の隣接画素ユニットを採用可能であり、かつ、
前記補正回路は、
前記補正対象の画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値、および、前記補正対象の画素ユニットに隣接する少なくとも一つの画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値を、重み付け係数により重み付けした重み付け感度値の加重平均により前記補正係数を取得可能であって、
前記補正回路は、
前記補正対象の画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値、および、前記補正対象の画素ユニットに隣接する少なくとも一つの同色の画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値を、重み付け係数により重み付けし、重み付けした感度値の総和を、補正で参照する画素の総数で除して、前記補正係数を算出する
固体撮像装置。 - 前記補正回路は、
採用する隣接画素ユニットが少ない第1の配置領域では、前記重み付けした感度値の総和を、補正で参照する画素の第1の総数で除して、前記補正係数を算出し、
採用する隣接画素ユニットが多い第2の配置領域では、重み付けした感度値の総和を、補正で参照する画素の第2の総数で除して、前記補正係数を算出する
請求項1記載の固体撮像装置。 - 前記補正対象の画素ユニットは、補正対象画素を含む領域を含む複数の領域に区分けされ、
前記補正回路は、
前記区分けされた複数の領域に対して設定される重み付け係数で当該各領域における重み付け感度値の総和を取得し、隣接画素ユニットの重み付けした感度値の総和を含めた重み付け感度値を、補正で参照する画素の総数で除して補正係数を取得する。
請求項1または2記載の固体撮像装置。 - 光電変換を行う複数の同色画素を含む画素ユニットが複数配置された画素部と、
補正対象となる前記画素ユニットの画素の感度を、取得した補正係数に関連付けて補正する補正回路と、を有し、
前記補正回路は、
前記補正対象の画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値、および、前記補正対象の画素ユニットに隣接する少なくとも一つの画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値を、重み付け係数により重み付けした重み付け感度値の加重平均により前記補正係数を取得可能であって、
前記補正回路は、
前記補正対象の画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値、および、前記補正対象の画素ユニットに隣接する少なくとも一つの同色の画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値を、重み付け係数により重み付けし、重み付けした感度値の総和を、補正で参照する画素ユニットの重み付け係数値の総和で除して、前記補正係数を算出する
固体撮像装置。 - 前記補正回路は、
前記画素部における画素の配置領域に応じて異なる数の隣接画素ユニットを採用可能である
請求項4記載の固体撮像装置。 - 前記補正回路は、
採用する隣接画素ユニットが少ない第1の配置領域では、前記重み付けした感度値の総和を、補正で参照する画素ユニットの重み付け係数値の第1の総和で除して、前記補正係数を算出し、
採用する隣接画素ユニットが多い第2の配置領域では、重み付けした感度値の総和を、補正で参照する画素ユニットの重み付け係数値の第2の総和で除して、前記補正係数を算出する
請求項5記載の固体撮像装置。 - 前記第1の配置領域は、前記画素部の中央部側の領域を含み、
前記第2の配置領域は、前記画素部の縁部側領域を含む
請求項2記載の固体撮像装置。 - 前記重み付け係数は定数である
請求項1から7のいずれか一に記載の固体撮像装置。 - 前記重み付け係数は、画素の配置条件に応じた関数である
請求項1から7のいずれか一に記載の固体撮像装置。 - 前記補正回路は、
前記重み付け係数により重み付けして重み付け感度値を求める際に、画素の配置条件に応じた状態の理論値を示す関数に関連付けて補正し、加重平均により前記補正係数を取得する
請求項8または9のいずれか一に記載の固体撮像装置。 - 前記画素ユニットの複数の画素に対して一つのマイクロレンズが形成されており、
前記関数は、レンズシェーディングによる理論値を示す関数である
請求項9または10記載の固体撮像装置。 - 前記重み付け係数は、前記補正対象の画素ユニットの画素に対して設定される第1の重み付け係数が、他の画素ユニットの画素に対して設定される第2の重み付け係数より大きい
請求項1から11のいずれか一に記載の固体撮像装置。 - 前記重み付け係数は、前記補正対象の画素が配置される対象領域に対する第1の重み付け係数を最大値とし、他の画素配置領域に対する第2の重み付け係数は当該対象領域に対する配置条件に応じた値に設定される
請求項1から12のいずれか一に記載の固体撮像装置。 - 補正回路は、
前記画素の感度値または色差信号を、加重平均に代えて、同一の前記画素ユニットまたは隣接する前記画素ユニットの中央値を前記補正係数として取得する
請求項1から13のいずれか一に記載の固体撮像装置。 - 補正回路は、
前記画素の感度値または色差信号を、加重平均に代えて、同一の前記画素ユニットまたは隣接する前記画素ユニットのモード値を前記補正係数として取得する
請求項1から13のいずれか一に記載の固体撮像装置。 - 光電変換を行う複数の同色画素を含む画素ユニットが複数配置された画素部と、
補正対象となる前記画素ユニットの画素の感度を、取得した補正係数に関連付けて補正する補正回路と、を有する固体撮像装置の信号処理方法であって、
前記補正回路が、
前記画素部における画素の配置領域に応じて異なる数の隣接画素ユニットを採用し、かつ、
前記補正回路が、
前記補正対象の画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値、および、前記補正対象の画素ユニットに隣接する少なくとも一つの画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値を、重み付け係数により重み付けした重み付け感度値の加重平均により前記補正係数を取得可能であって、
前記補正回路が、
前記補正対象の画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値、および、前記補正対象の画素ユニットに隣接する少なくとも一つの同色の画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値を、重み付け係数により重み付けし、
重み付けした感度値の総和を、補正で参照する画素の総数で除して、前記補正係数を算出する
固体撮像装置の信号処理方法。 - 光電変換を行う複数の同色画素を含む画素ユニットが複数配置された画素部と、
補正対象となる前記画素ユニットの画素の感度を、取得した補正係数に関連付けて補正する補正回路と、を有する固体撮像装置の信号処理方法であって、
前記補正回路が、
前記補正対象の画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値、および、前記補正対象の画素ユニットに隣接する少なくとも一つの画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値を、重み付け係数により重み付けした重み付け感度値の加重平均により前記補正係数を取得可能であって、
前記補正回路が、
前記補正対象の画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値、および、前記補正対象の画素ユニットに隣接する少なくとも一つの同色の画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値を、重み付け係数により重み付けし、
重み付けした感度値の総和を、補正で参照する画素ユニットの重み付け係数値の総和で除して、前記補正係数を算出する
固体撮像装置の信号処理方法。 - 固体撮像装置と、
前記固体撮像装置に被写体像を結像する光学系と、を有し、
前記固体撮像装置は、
光電変換を行う複数の同色画素を含む画素ユニットが複数配置された画素部と、
補正対象となる前記画素ユニットの画素の感度を、取得した補正係数に関連付けて補正する補正回路と、を有し、
前記補正回路は、
前記画素部における画素の配置領域に応じて異なる数の隣接画素ユニットを採用可能であり、かつ、
前記補正回路は、
前記補正対象の画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値、および、前記補正対象の画素ユニットに隣接する少なくとも一つの画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値を、重み付け係数により重み付けした重み付け感度値の加重平均により前記補正係数を取得可能であって、
前記補正回路は、
前記補正対象の画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値、および、前記補正対象の画素ユニットに隣接する少なくとも一つの同色の画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値を、重み付け係数により重み付けし、重み付けした感度値の総和を、補正で参照する画素の総数で除して、前記補正係数を算出する
電子機器。 - 固体撮像装置と、
前記固体撮像装置に被写体像を結像する光学系と、を有し、
前記固体撮像装置は、
光電変換を行う複数の同色画素を含む画素ユニットが複数配置された画素部と、
補正対象となる前記画素ユニットの画素の感度を、取得した補正係数に関連付けて補正する補正回路と、を有し、
前記補正回路は、
前記補正対象の画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値、および、前記補正対象の画素ユニットに隣接する少なくとも一つの画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値を、重み付け係数により重み付けした重み付け感度値の加重平均により前記補正係数を取得可能であって、
前記補正回路は、
前記補正対象の画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値、および、前記補正対象の画素ユニットに隣接する少なくとも一つの同色の画素ユニットにおける補正で参照する各画素の画素信号に応じた感度値を、重み付け係数により重み付けし、重み付けした感度値の総和を、補正で参照する画素ユニットの重み付け係数値の総和で除して、前記補正係数を算出する
電子機器。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020215183A JP7499695B2 (ja) | 2020-12-24 | 2020-12-24 | 固体撮像装置、固体撮像装置の信号処理方法、および電子機器 |
TW110119848A TWI795796B (zh) | 2020-12-24 | 2021-06-01 | 固體攝像裝置、固體攝像裝置的信號處理方法、以及電子機器 |
CN202110709169.4A CN114679551B (zh) | 2020-12-24 | 2021-06-25 | 固体摄像装置、固体摄像装置的信号处理方法以及电子机器 |
US17/560,835 US11647305B2 (en) | 2020-12-24 | 2021-12-23 | Solid-state imaging apparatus, signal processing method of solid-state imaging apparatus and electronic device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020215183A JP7499695B2 (ja) | 2020-12-24 | 2020-12-24 | 固体撮像装置、固体撮像装置の信号処理方法、および電子機器 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022100908A JP2022100908A (ja) | 2022-07-06 |
JP7499695B2 true JP7499695B2 (ja) | 2024-06-14 |
Family
ID=82071113
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020215183A Active JP7499695B2 (ja) | 2020-12-24 | 2020-12-24 | 固体撮像装置、固体撮像装置の信号処理方法、および電子機器 |
Country Status (4)
Country | Link |
---|---|
US (1) | US11647305B2 (ja) |
JP (1) | JP7499695B2 (ja) |
CN (1) | CN114679551B (ja) |
TW (1) | TWI795796B (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7496406B1 (ja) | 2022-12-21 | 2024-06-06 | ゼタテクノロジーズ株式会社 | 固体撮像装置、固体撮像装置の製造方法、および電子機器 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000059689A (ja) | 1998-08-06 | 2000-02-25 | Sharp Corp | 固体撮像素子の欠陥画素検出・補正装置 |
JP2003116060A (ja) | 2001-10-03 | 2003-04-18 | Olympus Optical Co Ltd | 欠陥画素補正装置 |
US20050276510A1 (en) | 2004-06-08 | 2005-12-15 | Stmicroelectronics S.R.I. | Filtering of noisy images |
JP2007124056A (ja) | 2005-10-25 | 2007-05-17 | Canon Inc | 画像処理装置、制御方法、及びプログラム |
JP2007251698A (ja) | 2006-03-16 | 2007-09-27 | Sharp Corp | 欠陥画素補正方法、及び欠陥画素補正回路 |
JP2011114473A (ja) | 2009-11-25 | 2011-06-09 | Hitachi Kokusai Electric Inc | 画素欠陥補正装置 |
JP2018019355A (ja) | 2016-07-29 | 2018-02-01 | キヤノン株式会社 | 撮像装置、撮像方法およびプログラム |
JP2018101896A (ja) | 2016-12-20 | 2018-06-28 | キヤノン株式会社 | 撮像装置とその制御方法及びプログラム |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3795715B2 (ja) | 1999-10-20 | 2006-07-12 | 自動車電機工業株式会社 | ワイパー装置およびその取付方法 |
JP4364728B2 (ja) * | 2004-06-18 | 2009-11-18 | 富士通株式会社 | 赤外線検出器の感度補正機能を有する赤外線撮像装置 |
JP2006042267A (ja) * | 2004-07-30 | 2006-02-09 | Canon Inc | 画像処理方法、画像処理装置、およびプログラム |
JP4919723B2 (ja) * | 2006-07-18 | 2012-04-18 | ウインボンド エレクトロニクス コーポレイション | 画像信号のノイズ削減方法及び装置 |
JP4635076B2 (ja) * | 2008-07-07 | 2011-02-16 | 富士フイルム株式会社 | 固体撮像装置 |
JP5471117B2 (ja) * | 2009-07-24 | 2014-04-16 | ソニー株式会社 | 固体撮像装置とその製造方法並びにカメラ |
JP2013021660A (ja) * | 2011-07-14 | 2013-01-31 | Sony Corp | 画像処理装置、撮像装置、および画像処理方法、並びにプログラム |
WO2013168493A1 (ja) * | 2012-05-10 | 2013-11-14 | 富士フイルム株式会社 | 信号処理装置、撮像装置、信号補正方法 |
JP6087674B2 (ja) * | 2013-02-27 | 2017-03-01 | キヤノン株式会社 | 撮像装置 |
JP6033454B2 (ja) * | 2013-09-27 | 2016-11-30 | 富士フイルム株式会社 | 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム |
JP6180882B2 (ja) * | 2013-10-31 | 2017-08-16 | ソニーセミコンダクタソリューションズ株式会社 | 固体撮像装置、信号処理装置、および電子機器 |
TWI549511B (zh) * | 2014-03-19 | 2016-09-11 | 智原科技股份有限公司 | 影像感測裝置及色彩校正矩陣修正方法與查找表建立方法 |
JP6369233B2 (ja) * | 2014-09-01 | 2018-08-08 | ソニー株式会社 | 固体撮像素子及びその信号処理方法、並びに電子機器 |
TWI684363B (zh) * | 2015-02-13 | 2020-02-01 | 日商新力股份有限公司 | 圖像感測器、讀出控制方法、及電子機器 |
US10298888B2 (en) * | 2015-08-25 | 2019-05-21 | Kabushiki Kaisha Toshiba | Adaptive analyzer of sensitivity difference of same color pixels and adaptive corrector of sensitivity difference of same color pixels |
WO2018105475A1 (ja) * | 2016-12-08 | 2018-06-14 | パナソニックIpマネジメント株式会社 | 固体撮像装置、及びそれを用いる撮像装置 |
US11153514B2 (en) * | 2017-11-30 | 2021-10-19 | Brillnics Singapore Pte. Ltd. | Solid-state imaging device, method for driving solid-state imaging device, and electronic apparatus |
JP2020043435A (ja) * | 2018-09-07 | 2020-03-19 | ソニーセミコンダクタソリューションズ株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
-
2020
- 2020-12-24 JP JP2020215183A patent/JP7499695B2/ja active Active
-
2021
- 2021-06-01 TW TW110119848A patent/TWI795796B/zh active
- 2021-06-25 CN CN202110709169.4A patent/CN114679551B/zh active Active
- 2021-12-23 US US17/560,835 patent/US11647305B2/en active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000059689A (ja) | 1998-08-06 | 2000-02-25 | Sharp Corp | 固体撮像素子の欠陥画素検出・補正装置 |
JP2003116060A (ja) | 2001-10-03 | 2003-04-18 | Olympus Optical Co Ltd | 欠陥画素補正装置 |
US20050276510A1 (en) | 2004-06-08 | 2005-12-15 | Stmicroelectronics S.R.I. | Filtering of noisy images |
JP2007124056A (ja) | 2005-10-25 | 2007-05-17 | Canon Inc | 画像処理装置、制御方法、及びプログラム |
JP2007251698A (ja) | 2006-03-16 | 2007-09-27 | Sharp Corp | 欠陥画素補正方法、及び欠陥画素補正回路 |
JP2011114473A (ja) | 2009-11-25 | 2011-06-09 | Hitachi Kokusai Electric Inc | 画素欠陥補正装置 |
JP2018019355A (ja) | 2016-07-29 | 2018-02-01 | キヤノン株式会社 | 撮像装置、撮像方法およびプログラム |
JP2018101896A (ja) | 2016-12-20 | 2018-06-28 | キヤノン株式会社 | 撮像装置とその制御方法及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
CN114679551B (zh) | 2024-01-02 |
JP2022100908A (ja) | 2022-07-06 |
US11647305B2 (en) | 2023-05-09 |
TWI795796B (zh) | 2023-03-11 |
US20220210354A1 (en) | 2022-06-30 |
CN114679551A (zh) | 2022-06-28 |
TW202226824A (zh) | 2022-07-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111757006B (zh) | 图像获取方法、摄像头组件及移动终端 | |
US20130135500A1 (en) | Method for Correcting Image Data From an Image Sensor Having Image Pixels and Non-Image Pixels, and Image Sensor Implementing Same | |
US11637975B2 (en) | Solid state image sensor and electronic equipment | |
US20100309340A1 (en) | Image sensor having global and rolling shutter processes for respective sets of pixels of a pixel array | |
EP3493261A2 (en) | Solid-state imaging device, method for driving solid-state imaging device, and electric apparatus | |
US8890986B2 (en) | Method and apparatus for capturing high dynamic range images using multi-frame interlaced exposure images | |
CN210143059U (zh) | 图像传感器集成电路、图像传感器以及成像*** | |
JP2019103129A (ja) | 固体撮像装置、固体撮像装置の駆動方法、および電子機器 | |
US20060202932A1 (en) | Single plate system color solid-state image pick-up device of microlens loading type and image input device | |
JP7499695B2 (ja) | 固体撮像装置、固体撮像装置の信号処理方法、および電子機器 | |
US20220150450A1 (en) | Image capturing method, camera assembly, and mobile terminal | |
WO2022088310A1 (zh) | 图像处理方法、摄像头组件及移动终端 | |
JP2009177436A (ja) | 固体撮像装置、信号処理装置、および電子情報機器 | |
JP6970595B2 (ja) | 固体撮像装置、固体撮像装置の製造方法、および電子機器 | |
JP7487151B2 (ja) | 固体撮像装置、固体撮像装置の製造方法、および電子機器 | |
JP7404447B1 (ja) | 固体撮像装置、固体撮像装置の製造方法、および電子機器 | |
JP7496406B1 (ja) | 固体撮像装置、固体撮像装置の製造方法、および電子機器 | |
WO2024135056A1 (ja) | 固体撮像装置、固体撮像装置の製造方法、および電子機器 | |
WO2024135058A1 (ja) | 固体撮像装置、固体撮像装置の製造方法、および電子機器 | |
WO2024135057A1 (ja) | 固体撮像装置、固体撮像装置の製造方法、および電子機器 | |
JP7455945B1 (ja) | 固体撮像装置、固体撮像装置の製造方法、および電子機器 | |
US20220279108A1 (en) | Image sensor and mobile terminal | |
WO2021046690A1 (zh) | 图像传感器、摄像头模组、移动终端及图像采集方法 | |
JP2011114474A (ja) | 撮像装置及び固体撮像素子の駆動方法 | |
JP2011199426A (ja) | 固体撮像素子、撮像装置、及びスミア補正方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221219 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221219 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230929 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231011 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240109 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240214 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240422 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240529 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240604 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7499695 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |