JP6706850B2 - Imaging device, camera, and imaging method - Google Patents
Imaging device, camera, and imaging method Download PDFInfo
- Publication number
- JP6706850B2 JP6706850B2 JP2018559505A JP2018559505A JP6706850B2 JP 6706850 B2 JP6706850 B2 JP 6706850B2 JP 2018559505 A JP2018559505 A JP 2018559505A JP 2018559505 A JP2018559505 A JP 2018559505A JP 6706850 B2 JP6706850 B2 JP 6706850B2
- Authority
- JP
- Japan
- Prior art keywords
- photoelectric conversion
- pixel
- circuit
- conversion member
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003384 imaging method Methods 0.000 title claims description 164
- 238000006243 chemical reaction Methods 0.000 claims description 221
- 230000009467 reduction Effects 0.000 claims description 65
- 230000000694 effects Effects 0.000 claims description 26
- 238000012937 correction Methods 0.000 claims description 19
- 238000009826 distribution Methods 0.000 claims description 19
- 230000008859 change Effects 0.000 claims description 16
- 238000000034 method Methods 0.000 claims description 16
- 230000008569 process Effects 0.000 claims description 9
- 239000010409 thin film Substances 0.000 claims description 9
- 230000015572 biosynthetic process Effects 0.000 claims 1
- 238000003786 synthesis reaction Methods 0.000 claims 1
- 230000006870 function Effects 0.000 description 67
- 238000010586 diagram Methods 0.000 description 56
- 238000009825 accumulation Methods 0.000 description 19
- 230000006866 deterioration Effects 0.000 description 12
- 230000003287 optical effect Effects 0.000 description 11
- 230000003321 amplification Effects 0.000 description 10
- 238000003199 nucleic acid amplification method Methods 0.000 description 10
- 238000012545 processing Methods 0.000 description 10
- 230000007423 decrease Effects 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 6
- 238000003860 storage Methods 0.000 description 6
- 230000001934 delay Effects 0.000 description 5
- 239000000470 constituent Substances 0.000 description 4
- 230000010354 integration Effects 0.000 description 4
- 230000003111 delayed effect Effects 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 238000007792 addition Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000002194 synthesizing effect Effects 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 239000012535 impurity Substances 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/63—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to dark current
-
- H—ELECTRICITY
- H01—ELECTRIC ELEMENTS
- H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
- H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
- H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
- H01L27/144—Devices controlled by radiation
- H01L27/146—Imager structures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
- H04N25/78—Readout circuits for addressed sensors, e.g. output amplifiers or A/D converters
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Power Engineering (AREA)
- Electromagnetism (AREA)
- Condensed Matter Physics & Semiconductors (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Microelectronics & Electronic Packaging (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Solid State Image Pick-Up Elements (AREA)
Description
画像を撮像する撮像装置、カメラ、及び撮像方法に関する。 The present invention relates to an image capturing device, a camera, and an image capturing method for capturing an image.
従来、イメージセンサを用いて画像を撮像する撮像装置が知られている(例えば、特許文献1参照)。 2. Description of the Related Art Conventionally, an image pickup device that picks up an image using an image sensor is known (for example, see Patent Document 1).
撮像装置には、撮像する画像における画質の向上が望まれる。 The image pickup apparatus is required to improve the image quality of an image to be picked up.
そこで、本開示は、撮像する画像における画質を、従来の撮像装置によって撮像される画像における画質に対して向上し得る撮像装置、カメラ、及び撮像方法を提供することを目的とする。 Therefore, it is an object of the present disclosure to provide an imaging device, a camera, and an imaging method that can improve the image quality of an image to be captured with respect to the image quality of an image captured by a conventional imaging device.
本開示の一態様に係る撮像装置は、第1所定範囲の電圧が印加された露光状態において受光することで内部光電効果による電荷を生成する光電変換部材と、前記光電変換部材によって生成された電荷を画素単位で蓄積する複数の画素回路と、前記複数の画素回路のそれぞれに蓄積されている電荷量を読み出す読み出し回路と、前記読み出し回路によって読み出された電荷量のそれぞれに基づく画素値からなる出力画像を出力する出力回路とを含む撮像素子と、第2所定範囲の電圧が印加された遮光状態の前記光電変換部材によって生成される電荷による、前記出力画像への影響を低減する低減部とを備え、前記読み出し回路は、前記読み出しを、前記光電変換部材が前記遮光状態である期間において、1以上の画素回路からなる画素回路ブロック単位で、第1画素回路ブロックから第N(Nは2以上の整数)画素回路ブロックへと順に行うことで行い、さらに、前記光電変換部材が前記遮光状態である期間において、前記画素回路ブロック単位で、前記第N画素回路ブロックから前記第1画素回路ブロックへと順に、前記複数の画素回路のそれぞれに蓄積されている電荷量を読み出す逆方向読み出し回路と、前記逆方向読み出し回路によって読み出された電荷量それぞれに基づく画素値からなる逆方向出力画像を出力する逆方向出力回路とを備え、前記低減部は、前記低減を、前記出力画像に前記逆方向出力画像を合成することで行う。 An imaging device according to an aspect of the present disclosure includes a photoelectric conversion member that generates a charge due to an internal photoelectric effect by receiving light in an exposure state where a voltage in a first predetermined range is applied, and a charge generated by the photoelectric conversion member. Of a plurality of pixel circuits for accumulating in each pixel, a readout circuit for reading out the amount of charge accumulated in each of the plurality of pixel circuits, and a pixel value based on each of the amounts of charge read by the readout circuit. An image sensor including an output circuit that outputs an output image, and a reduction unit that reduces the influence on the output image due to charges generated by the photoelectric conversion member in the light-shielded state to which a voltage in a second predetermined range is applied. The read-out circuit performs the read-out from the first pixel circuit block to the N-th (N is 2) in units of pixel circuit blocks including one or more pixel circuits in the period in which the photoelectric conversion member is in the light-shielding state. The above integer) pixel circuit blocks are sequentially performed, and further, in the period in which the photoelectric conversion member is in the light-shielded state, the Nth pixel circuit block to the first pixel circuit block in the pixel circuit block unit. To a reverse direction read circuit that reads out the amount of charge accumulated in each of the plurality of pixel circuits, and a reverse direction output image that includes pixel values based on the respective charge amounts read by the reverse direction read circuit. A reverse output circuit for outputting is provided, and the reduction unit performs the reduction by synthesizing the reverse output image with the output image .
本開示の一態様に係る撮像装置は、第1所定範囲の電圧が印加された露光状態において受光することで内部光電効果による電荷を生成する光電変換部材であって、印加される前記第1所定範囲の電圧に応じて、電圧がより高い程、より光電変換効率が高くなるように前記電荷の生成を行う光電変換部材と、前記光電変換部材によって生成された電荷を画素単位で蓄積する複数の画素回路と、前記複数の画素回路のそれぞれに蓄積されている電荷量を読み出す読み出し回路と、前記読み出し回路によって読み出された電荷量のそれぞれに基づく画素値からなる出力画像を出力する出力回路とを含む撮像素子と、前記光電変換部材に印加される電圧を制御する電圧制御部とを備え、さらに、前記光電変換部材に外部の光を集光するレンズと、前記レンズによって集光される光の量を調整する絞りとを備え、前記電圧制御部は、前記制御を、前記光電変換部材が前記露光状態である場合において、前記絞りの絞り量が変化するときには、当該変化に応じて、前記光電変換部材に印加される電圧が変化するように行う。 An imaging device according to an aspect of the present disclosure is a photoelectric conversion member that generates charges due to an internal photoelectric effect by receiving light in an exposure state in which a voltage in a first predetermined range is applied, and the first predetermined voltage to be applied. Depending on the voltage of the range, the higher the voltage is, the higher the voltage is, and the photoelectric conversion member that generates the electric charge so that the photoelectric conversion efficiency is higher, and the plurality of electric charges that are generated by the photoelectric conversion member and are accumulated in pixel units A pixel circuit, a read circuit that reads out the amount of charge accumulated in each of the plurality of pixel circuits, and an output circuit that outputs an output image composed of pixel values based on each of the charge amounts read out by the read circuit. An image pickup device including: a voltage control unit that controls a voltage applied to the photoelectric conversion member; and a lens that collects external light on the photoelectric conversion member; and light collected by the lens. And a diaphragm for adjusting the amount of the diaphragm, the voltage control unit, when the photoelectric conversion member is in the exposure state, the voltage control unit, when the diaphragm amount of the diaphragm changes, depending on the change, The voltage applied to the photoelectric conversion member is changed .
本開示の一態様に係るカメラは、上記撮像装置と、前記撮像素子に外部の光を集光するレンズとを備える。 A camera according to an aspect of the present disclosure includes the above-described image pickup device and a lens that collects external light on the image pickup element.
本開示の一態様に係る撮像方法は、撮像素子と低減部とを備える撮像装置が行う撮像方法であって、前記撮像素子は、第1所定範囲の電圧が印加された露光状態において受光することで内部光電効果による電荷を生成する光電変換部材と、前記光電変換部材によって生成された電荷を画素単位で蓄積する複数の画素回路と、前記複数の画素回路のそれぞれに蓄積されている電荷量を読み出す読み出し回路と、前記読み出し回路によって読み出された電荷量のそれぞれに基づく画素値からなる出力画像を出力する出力回路とを含み、前記出力回路が、出力画像を出力する出力ステップと、前記低減部が、第2所定範囲の電圧が印加された遮光状態の前記光電変換部材によって生成される電荷による、前記出力画像への影響を低減する低減ステップとを含み、前記読み出し回路は、前記読み出しを、前記光電変換部材が前記遮光状態である期間において、1以上の画素回路からなる画素回路ブロック単位で、第1画素回路ブロックから第N(Nは2以上の整数)画素回路ブロックへと順に行うことで行い、前記撮像装置は、さらに、前記光電変換部材が前記遮光状態である期間において、前記画素回路ブロック単位で、前記第N画素回路ブロックから前記第1画素回路ブロックへと順に、前記複数の画素回路のそれぞれに蓄積されている電荷量を読み出す逆方向読み出し回路と、前記逆方向読み出し回路によって読み出された電荷量それぞれに基づく画素値からなる逆方向出力画像を出力する逆方向出力回路とを備え、前記低減ステップでは、前記低減を、前記出力画像に前記逆方向出力画像を合成することで行う。 An imaging method according to an aspect of the present disclosure is an imaging method performed by an imaging device including an imaging element and a reduction unit, wherein the imaging element receives light in an exposure state in which a voltage in a first predetermined range is applied. A photoelectric conversion member that generates electric charges by the internal photoelectric effect, a plurality of pixel circuits that accumulate the electric charges generated by the photoelectric conversion member in pixel units, and an amount of electric charges that are accumulated in each of the plurality of pixel circuits. A read-out circuit for reading out; and an output circuit for outputting an output image composed of pixel values based on the respective charge amounts read out by the read-out circuit, the output circuit outputting the output image, and the reduction step. parts is due to charge generated by the photoelectric conversion element of the light-shielding state in which a voltage of the second predetermined range is applied, seen including a reduction step of reducing the influence on the output image, the read circuit, said read During the period in which the photoelectric conversion member is in the light-shielding state, in order from the first pixel circuit block to the N-th (N is an integer of 2 or more) pixel circuit block in units of pixel circuit blocks including one or more pixel circuits. The imaging device further performs, in the period in which the photoelectric conversion member is in the light-shielding state, in units of the pixel circuit block from the Nth pixel circuit block to the first pixel circuit block in order. A reverse direction reading circuit for reading the amount of electric charge accumulated in each of a plurality of pixel circuits, and a reverse direction output image for outputting a reverse direction output image composed of pixel values based on the respective charge amounts read by the reverse direction reading circuit. A circuit, and in the reducing step, the reducing is performed by synthesizing the reverse output image with the output image .
本開示の一態様に係る撮像方法は、撮像素子と電圧制御部とを備える撮像装置が行う撮像方法であって、前記撮像素子は、第1所定範囲の電圧が印加された露光状態において受光することで内部光電効果による電荷を生成する光電変換部材であって、印加される前記第1所定範囲の電圧に応じて、電圧がより高い程、より光電変換効率が高くなるように前記電荷の生成を行う光電変換部材と、前記光電変換部材によって生成された電荷を画素単位で蓄積する複数の画素回路と、前記複数の画素回路のそれぞれに蓄積されている電荷量を読み出す読み出し回路と、前記読み出し回路によって読み出された電荷量のそれぞれに基づく画素値からなる出力画像を出力する出力回路とを含み、前記電圧制御部が、前記光電変換部材に印加される電圧を制御する電圧制御ステップと、前記出力回路が、前記出力画像を出力する出力ステップとを含み、前記撮像装置は、さらに、前記光電変換部材に外部の光を集光するレンズと、前記レンズによって集光される光の量を調整する絞りとを備え、前記電圧制御ステップでは、前記電圧制御部は、前記制御を、前記光電変換部材が前記露光状態である場合において、前記絞りの絞り量が変化するときには、当該変化に応じて、前記光電変換部材に印加される電圧が変化するように行う。 An imaging method according to an aspect of the present disclosure is an imaging method performed by an imaging device including an imaging device and a voltage control unit, the imaging device receiving light in an exposure state in which a voltage in a first predetermined range is applied. A photoelectric conversion member that generates an electric charge by the internal photoelectric effect, and the electric charge is generated so that the higher the voltage, the higher the photoelectric conversion efficiency in accordance with the applied voltage in the first predetermined range. A photoelectric conversion member for carrying out the above, a plurality of pixel circuits for accumulating charges generated by the photoelectric conversion member on a pixel-by-pixel basis, a readout circuit for reading out the amount of charge accumulated in each of the plurality of pixel circuits, and the readout An output circuit that outputs an output image composed of pixel values based on each of the charge amounts read by the circuit, the voltage control unit, a voltage control step of controlling the voltage applied to the photoelectric conversion member, said output circuit, see contains an output step of outputting the output image, the imaging apparatus may further include an amount of the photoelectric conversion element to the outside of the lens for collecting light, light condensed by the lens And a diaphragm for adjusting, in the voltage control step, the voltage control unit, when the photoelectric conversion member is in the exposure state, the voltage control unit, when the diaphragm amount of the diaphragm changes, to the change. Accordingly, the voltage applied to the photoelectric conversion member is changed .
上記本開示に係る撮像装置、カメラ、及び撮像方法によると、撮像する画像における画質を、従来の撮像装置によって撮像される画像における画質に対して向上し得る。 According to the imaging device, the camera, and the imaging method according to the present disclosure described above, the image quality of an image to be captured can be improved with respect to the image quality of an image captured by a conventional imaging device.
以下、実施の形態について詳細に説明する。なお、以下で説明する実施の形態は、いずれも本開示の好ましい一具体例を示すものである。以下の実施の形態で示される数値、形状、材料、構成要素、構成要素の配置位置及び接続形態、ステップ、ステップの順序などは、一例であり、本開示を限定する主旨ではない。本開示は、請求の範囲だけによって限定される。よって、以下の実施の形態における構成要素のうち、本開示の独立請求項に記載されていない構成要素については、本開示の課題を達成するのに必ずしも必要ではないが、より好ましい形態を構成するものとして説明される。 Hereinafter, embodiments will be described in detail. It should be noted that each of the embodiments described below shows a preferred specific example of the present disclosure. Numerical values, shapes, materials, components, arrangement positions and connection forms of components, steps, order of steps, and the like shown in the following embodiments are examples, and are not intended to limit the present disclosure. The present disclosure is limited only by the claims. Therefore, among the constituent elements in the following embodiments, constituent elements not described in the independent claims of the present disclosure are not necessarily required to achieve the object of the present disclosure, but constitute a more preferable embodiment. Described as a thing.
(実施の形態1)
ここでは、画像を撮像する撮像装置1について、図面を参照しながら説明する。(Embodiment 1)
Here, the imaging device 1 that captures an image will be described with reference to the drawings.
[1−1.構成]
図1は、実施の形態1に係るカメラ200の構成を示すブロック図である。[1-1. Constitution]
FIG. 1 is a block diagram showing the configuration of the
カメラ200は、レンズ鏡筒230と、撮像装置1とを備えている。そして、レンズ鏡筒230は、光学系210と、レンズ駆動部220とを備えている。
The
光学系210は、撮像装置1の撮像素子10に外部の光を集光する1以上のレンズから構成されている。具体的には、光学系210は、ズームレンズ211、手振れ補正レンズ212、フォーカスレンズ213、絞り214により構成される。ズームレンズ211を光軸210Aに沿って移動させることにより、被写体像の拡大、縮小をすることができる。また、フォーカスレンズ213を光軸210Aに沿って移動させることにより被写体像のフォーカスを調整することができる。また、手振れ補正レンズ212は、光学系210の光軸210Aに垂直な面内で移動可能である。カメラ200のブレを打ち消す方向に手振れ補正レンズ212を移動することで、カメラ200のブレが撮像画像に与える影響を低減できる。また、絞り214は光軸210A上に位置する開口部214Aを有し、使用者の設定に応じて若しくは自動で開口部214Aの大きさを調整し、透過する光の量を調整する。
The
レンズ駆動部220は、ズームレンズ211を駆動するズームアクチュエータや、手振れ補正レンズ212を駆動する手ブレ補正アクチュエータや、フォーカスレンズ213を駆動するフォーカスアクチュエータや、絞り214を駆動する絞りアクチュエータを含む。そして、レンズ駆動部220は、上記のズームアクチュエータや、フォーカスアクチュエータや、手ブレ補正アクチュエータや、絞りアクチュエータを制御する。
The
撮像装置1は、撮像素子10と、制御部20と、低減部40と、画像処理部260と、メモリ270と、カードスロット290と、内部メモリ340と、操作部材310と、表示モニタ320とを含んで構成される。
The image pickup apparatus 1 includes an
撮像素子10は、画像を撮像して出力する。
The
低減部40は、撮像素子10から出力された画像を補正する。低減部40は、一例として、メモリ(図示されず。)に記憶されるプログラムをプロセッサ(図示されず。)が実行することによって実現される。
The
画像処理部260は、撮像素子10で生成された画像データ(ここでは、低減部40によって補正された画像)に対して各種処理を施し、表示モニタ320に表示するための画像データを生成したり、メモリカード300に格納するための画像データを生成したりする。例えば、画像処理部260は、撮像素子10で生成された画像データに対して、ガンマ補正、ホワイトバランス補正などの各種処理を行う。また、画像処理部260は、撮像素子10で生成された画像データを、H.264規格やMPEG2規格に準拠した圧縮形式等により圧縮する。画像処理部260は、一例として、メモリ(図示されず。)に記憶されるプログラムをプロセッサ(図示されず。)が実行することによって実現される。
The
制御部20は、撮像素子10の動作を制御する。また、制御部20は、カメラ200全体を制御する。制御部20は、一例として、内部メモリ340に記録されたプログラムを、一時的な記憶を行うメモリ270に展開し、制御部20内のプロセッサ(図示されず。)が実行することによって実現される。
The control unit 20 controls the operation of the
メモリ270は、画像処理部360及び制御部20のワークメモリとしても機能する。メモリ270は、例えば、DRAM、SRAMなどで実現できる。
The
カードスロット390はメモリカード300を着脱可能に保持する。カードスロット290は機械的及び電気的にメモリカード300と接続可能である。メモリカード300は不揮発性フラッシュメモリや強誘電体メモリなどを内部に含み、画像処理部260で生成された画像ファイル等のデータを格納できる。
The card slot 390 holds the
内部メモリ340は、不揮発性フラッシュメモリや強誘電体メモリなどで構成される。内部メモリ340は、カメラ200全体を制御するための制御プログラム等を記憶する。
The
操作部材310は使用者からの操作を受け付けるユーザーインターフェースの総称である。操作部材310は、例えば、使用者からの操作を受け付ける十字キーや決定釦等を含む。
The
表示モニタ320は、撮像素子10で生成された画像データが示す画像や、メモリカード300から読み出された画像データが示す画像を表示できる画面320Aを有する。また、表示モニタ320は、カメラ200の各種設定を行うための各種メニュー画面等も画面320Aに表示できる。表示モニタ320の画面320A上にはタッチパネル320Bが配置されている。タッチパネル320Bはユーザによりタッチされて各種タッチ操作を受け付けることができる。タッチパネル320Bに対するタッチ操作が示す指示は制御部20に通知され各種処理が行われる。
The display monitor 320 has a
以下、これら撮像装置1の構成要素のうち、撮像素子10と、制御部20と、低減部40とについて、さらに詳細に説明する。
Of the constituent elements of the image pickup apparatus 1, the
図2は、撮像素子10の構成を示すブロック図である。
FIG. 2 is a block diagram showing the configuration of the
同図に示されるように、撮像素子10は、光電変換素子110と、画素回路アレイ120と、読み出し回路130と、出力回路140と、行走査回路150と、タイミング制御回路160と、電圧印加回路170とを含んで構成される。
As shown in the figure, the
図3Aは、光電変換素子110の平面図であり、図3Bは、光電変換素子110の側面図である。
3A is a plan view of the
図3A、図3Bに示されるように、光電変換素子110は、薄膜状の光電変換部材111と、光電変換部材111の上面に密着する上部透明電極112と、光電変換部材111の下面に密着する、N行M列(N、Mは、1以上の整数。)の二次元アレイ状に配置されたN×M枚の下部画素電極113とを含んで構成される。
As shown in FIGS. 3A and 3B, the
光電変換部材111は、0Vを含まない第1所定範囲の電圧が印加された状態(以下、この状態のことを「露光状態」と呼ぶ。)において受光することで内部光電効果による電荷を生成する。また、光電変換部材111は、印加される上記第1所定範囲の電圧に応じて、電圧がより高い程、より光電変換効率が高くなるように上記電荷の生成を行う。
The
ここでは、光電変換部材111が、上記特性を有する有機薄膜であるとして説明する。すなわち、この実施の形態1においては、撮像素子10が、有機薄膜を光電変換部材とする有機CMOSイメージセンサである場合の例となっている。
Here, the
この光電変換部材111は、理想的には、第1所定範囲以下の範囲である、0Vを含む第2所定範囲の電圧が印加された状態(以下、この状態のことを「遮光状態」と呼ぶ。)において受光しても、内部光電効果による電荷を生成しないことが望まれる。
Ideally, the
しかしながら、光電変換部材111の製造過程において、製造材料に混入する不純物濃度の管理精度、製造工程の管理精度等に起因して、実際に製造される光電変換部材111では、遮光状態において受光することで内部光電効果による電荷が若干量生成されてしまう。以下、遮光状態において受光することで内部光電効果による電荷が若干量生成されてしまう現象のことを「遮光漏れ」と呼ぶ。
However, in the manufacturing process of the
上部透明電極112は、光電変換部材111の上面の全体に、下面に対して0を含む電位差を生じさせる電圧を印加する、透明な電極である。
The upper
下部画素電極113は、光電変換部材111の下面の全体を覆うように、N行M列の二次元アレイ状に配置された電極である。
The
下部画素電極113は、光電変換部材111で生成される電荷のうち、自身の近傍において生成される電荷を集電する。
The
再び、図2に戻って、撮像素子10の説明を続ける。
Returning to FIG. 2 again, the description of the
画素回路アレイ120は、N×M個の画素回路21が、N行M列の二次元アレイ状に配置されてなる半導体デバイスであって、光電変換素子110の下面側に、光電変換素子110に重ね合わされて配置される。
The
画素回路アレイ120において、各画素回路21は、撮像素子10を平面視した場合において、画素回路21それぞれの位置が、下部画素電極113それぞれの位置と、一対一に対応付けられて重なるように配置されている。
In the
図4は、画素回路21の構成を示すブロック図である。
FIG. 4 is a block diagram showing the configuration of the
同図に示されるように、画素回路21は、リセットトランジスタ22と、増幅トランジスタ23と、選択トランジスタ24と、電荷蓄積ノード25とを含んで構成される。
As shown in the figure, the
電荷蓄積ノード25は、自身の属する画素回路21に対応する下部画素電極113と、リセットトランジスタ22のソースと、増幅トランジスタ23のゲートとに接続され、接続される下部画素電極113によって集電された電荷を蓄積する。
The
リセットトランジスタ22は、ゲートにリセット信号線51が接続され、ドレインにリセット電圧VRSTが供給され、ソースに電荷蓄積ノード25が接続される。
The
リセットトランジスタ22は、行走査回路150(後述)からリセット信号線51を介して配送されるリセット信号によってオンにされることで、電荷蓄積ノード25に蓄積された電荷の量をリセット(初期化)する。
The
増幅トランジスタ23は、ゲートに電荷蓄積ノード25が接続され、ドレインに電源電圧VDDが供給され、ソースに選択トランジスタ24のドレインが接続される。
In the
増幅トランジスタ23のゲートには、電荷蓄積ノード25に蓄積される電荷に応じた電圧が印加される。
A voltage according to the charges accumulated in the
このため、増幅トランジスタ23は、選択トランジスタ24がオン状態の場合に、電荷蓄積ノード25に蓄積された電荷に応じた電流を流す電流源として機能する。
Therefore, the
選択トランジスタ24は、ゲートに選択信号線52が接続され、ドレインに増幅トランジスタ23のソースが接続され、ソースに垂直信号線32が接続される。
The
選択トランジスタ24は、行走査回路150(後述)から選択信号線52を介して配送される選択信号によってオンにされることで、増幅トランジスタ23に流れる電流を垂直信号線32に出力する。
The
後述するように、垂直信号線32に出力される電流の電流量が、列読み出し回路31(後述)によって検知されることで、選択信号によってオンされた選択トランジスタ24を含む画素回路21の電荷蓄積ノード25に蓄積された電荷の量が読み出される。
As will be described later, the amount of current output to the
画素回路21は、上記構成により、光電変換部材111によって生成された電荷を画素単位で集電する。そして、画素回路21は、電荷蓄積ノード25に蓄積された電荷の量が非破壊で読み出される。
With the above configuration, the
再び、図2に戻って、撮像素子10の説明を続ける。
Returning to FIG. 2 again, the description of the
行走査回路150は、下記蓄積電荷量リセット機能と下記読み出し画素回路選択機能とを有する。
The
蓄積電荷量リセット機能は、画素回路アレイ120を構成する画素回路21それぞれにおける電荷蓄積ノード25に蓄積された電荷をリセットするためのリセット信号を画素回路21それぞれに接続されるリセット信号線51を介して配送する機能である。
The function of resetting the accumulated charge amount is such that a reset signal for resetting the charges accumulated in the
これにより、画素回路アレイ120に含まれる全ての画素回路21の電荷蓄積ノード25に蓄積された電荷のリセットは略同一タイミングで実行される。
As a result, the charges accumulated in the
読み出し画素回路選択機能とは、画素回路アレイ120において、読み出し回路130に最も遠い側の行(第1行)から、読み出し回路130に最も近い側の行(第N行)へと1行ずつ順に、所定時間Δt間隔で、該当行に属する画素回路21それぞれにおける選択トランジスタ24をオンにするための選択信号を、該当行に属する画素回路21それぞれに接続される選択信号線52を介して配送する機能である。
The read pixel circuit selection function means, in the
これにより、画素回路アレイ120に含まれる全ての画素回路21の電荷蓄積ノード25に蓄積された電荷量の読み出しは、読み出し回路130(後述)によって、第1行から第N行まで行単位で順に実行され、第1行に属する画素回路21についての読み出しが開始されてから、第N行に属する画素回路21についての読み出しが完了するまで、N×Δtの期間を要する。
As a result, the readout of the charge amount accumulated in the
読み出し回路130は、画素回路アレイ120を構成する画素回路21のそれぞれに蓄積されている電荷の量を読み出す。
The
読み出し回路130は、画素回路アレイ120のM個の列それぞれに対応するM個の列読み出し回路31を含んで構成される。
The
列読み出し回路31は、対応する列に属する画素回路21それぞれに接続される垂直信号線32を介して、選択信号によってオンとなっている選択トランジスタ24を含む画素回路21(この画素回路21のことを、「読み出し対象の画素回路21」とも呼ぶ。)の増幅トランジスタ23に流れる電流量を検知することで、読み出し対象の画素回路21の電荷蓄積ノード25に蓄積されている電荷の量を読み出して、読み出した電荷の量を示すKビット(Kは、正の整数、例えば8)のデジタル信号を、読み出し対象の画素回路21の画素値として出力する。
The
出力回路140は、読み出し回路130から出力された画素値からなる出力画像を出力する。すなわち、出力回路140は、読み出し回路130によって読み出された電荷量のそれぞれに基づく画素値からなる出力画像を出力する。
The
電圧印加回路170は、光電変換部材111に電圧を印加する。より具体的には、電圧印加回路170は、上部透明電極112の電圧を制御することで、光電変換部材111の上面と下面との間に電圧を印加する。
The
タイミング制御回路160は、行走査回路150の動作タイミングと、読み出し回路130の動作タイミングと、電圧印加回路170の動作タイミングとを制御する。すなわち、タイミング制御回路160は、行走査回路150による、蓄積電荷量リセット機能を実行するタイミングと、読み出し画素回路選択機能を実行するタイミングとを制御し、読み出し回路130による、選択信号によって選択された画素回路21の電荷蓄積ノード25に蓄積されている電荷の量を読み出すタイミングを制御し、電圧印加回路170による、光電変換素子110を露光状態とするタイミングと、光電変換素子110を遮光状態とするタイミングとを制御する。
The
再び、図1に戻って、撮像装置1の説明を続ける。 Returning to FIG. 1 again, the description of the image pickup apparatus 1 will be continued.
制御部20は、下記撮像制御機能を有する。 The control unit 20 has the following imaging control function.
撮像制御機能とは、撮像素子10に画像を撮像させて、出力画像を出力させる機能である。より具体的には、撮像素子10に対して、撮像を開始させるタイミングで撮像開始信号を出力し、撮像開始信号を出力してから、所定の露光期間T1経過したタイミングで、撮像終了信号を出力することで、撮像素子10に上記画像の撮像を実行させる機能である。
The image capturing control function is a function of causing the
図5Aは、制御部20によって出力される撮像開始信号と撮像終了信号とのタイミング図である。 FIG. 5A is a timing diagram of the imaging start signal and the imaging end signal output by the control unit 20.
図5Aに示されるように、制御部20は、撮像素子10に対して、撮像開始信号と撮像終了信号とを、撮像開始信号の出力よりも撮像終了信号の出力の方が露光期間T1だけ遅延するように出力する。
As illustrated in FIG. 5A, the control unit 20 delays the image pickup start signal and the image pickup end signal to the
撮像素子10は、制御部20から出力された撮像開始信号を受け取ると、タイミング制御回路160が、(1)電圧印加回路170の動作タイミングを制御して、撮像開始信号を受け取るタイミングで、光電変換部材111に印加する電圧を、第1所定範囲内の第1電圧とし、(2)行走査回路150の動作タイミングを制御して、撮像開始信号を受け取るタイミングで、行走査回路150に蓄積電荷量リセット機能を実行させる。
When the
そして、撮像素子10は、制御部20から出力された撮像終了信号を受け取ると、タイミング制御回路160が、(1)電圧印加回路170の動作タイミングを制御して、撮像開始信号を受け取るタイミングで、光電変換部材111に印加する電圧を、第2範囲内の第2電圧とし、(2)行走査回路150の動作タイミングと、読み出し回路130の動作タイミングとを制御して、撮像終了信号を受け取るタイミングで、画素回路アレイ120を構成する全画素回路21に対する、電荷蓄積ノード25に蓄積されている電荷量の読み出しを開始する。
When the
図5Bは、撮像素子10の状態を示すタイミング図である。
FIG. 5B is a timing diagram showing the state of the
図5Bに示されるように、撮像素子10は、制御部20から出力された撮像開始信号を受け取ると、その受け取ったタイミングで画素回路アレイ120に含まれる画素回路21に蓄積されている電荷量をリセット(初期化)する。また、撮像素子10は、撮像開始信号を受け取ってから、撮像終了信号を受け取るまでの期間、光電変換素子110を露光状態とし、撮像終了信号を受け取った後の期間、光電変換素子110を遮光状態とする。そして、撮像素子10は、撮像終了信号を受け取ると、第1行から第N行まで行単位で順にΔtずつ遅れるタイミングで、画素回路アレイ120に含まれる画素回路21に蓄積されている電荷量の読み出しを行う。
As shown in FIG. 5B, when the
図5Bからも理解されるように、各画素回路21の属する行の位置によって、その画素回路21の電荷量がリセットされてから、その画素回路21の電荷量が読み出されるまでの期間(以下、この期間のことを「電荷蓄積期間」と呼ぶ。)が互いに異なっている。
As can be understood from FIG. 5B, the period from when the charge amount of the
すなわち、第K(Kは1以上N以下の整数)行に位置する画素回路21において、電荷蓄積期間は、T1+(K−1)×Δtとなる。
That is, in the
このため、第K(Kは1以上N以下の整数)行に位置する画素回路21では、電荷量がリセットされてから電荷量が読み出されるまでの期間に、その画素回路21に蓄積される電荷量が、(1)露光状態の光電変換素子110において、露光期間T1の期間に生成された、内部光電効果による電荷の電荷量と、(2)遮光状態の光電変換素子110において、(K−1)×Δtの期間生成された、遮光漏れによる電荷の電荷量との和となる。
Therefore, in the
従って第K行に位置する画素回路21については、第1行に位置する画素回路21と比べて、遮光状態の光電変換素子110において、(K−1)×Δtの期間に生成された、露光漏れによる電荷の電荷量分だけ余分に蓄積された電荷量が読み出されることとなる。
Therefore, for the
このため、撮像素子10から出力される撮像画像は、アレイ形状における各行の、読み出しが開始される時刻の時間差に起因する画質の劣化(以下この画質の劣化のことを「読み出し時刻の差に起因する輝度ムラ」と呼ぶ。)が生じた画像となる。
Therefore, the captured image output from the
再び図1に戻って、撮像装置1の説明を続ける。 Returning to FIG. 1 again, the description of the image pickup apparatus 1 will be continued.
低減部40は、遮光状態の光電変換部材111によって生成される電荷による、出力画像への影響を低減する。より具体的には、低減部40は、上記低減を、画素回路アレイ120における各行を対象として、第1行の画素回路21との、読み出し回路130による読み出しが実行される時刻の時間差に応じて、対象とする行に対応する、出力画像の画素値を補正することで行う。
The
すなわち、低減部40は、画素回路アレイ120の第K行に位置する画素回路21における電荷蓄積期間の露光量が、第1行に位置する画素回路21における電荷蓄積期間の露光量で正規化されるように、撮像素子10から出力される出力画像の画素値に対して、時間差がより大きい程より小さくなる1以下の補正係数を、各行毎に乗算する。
That is, in the
これにより、この低減部40は、撮像素子10から、読み出し時刻の差に起因する輝度ムラが生じた出力画像が出力されると、その出力画像に対して、その輝度ムラが低減されるように補正する。
As a result, when the
ここで、例えば、行毎の補正係数は、撮像装置1を設計する設計者が、予め、撮像素子10に、各行毎の補正係数を算出するための画像を撮像させる実験を行っておいて、その撮像画像を解析しておくことで、適切な値に決定することができる。
Here, for example, with respect to the correction coefficient for each row, a designer who designs the imaging apparatus 1 has previously performed an experiment in which the
[1−2.効果等]
上述したように、本開示に係る撮像装置1は、読み出し時刻の差に起因する輝度ムラを低減することができる。[1-2. Effect, etc.]
As described above, the imaging device 1 according to the present disclosure can reduce the brightness unevenness due to the difference in read times.
従って、本開示に係る撮像装置1によると、読み出し時刻の差に起因する輝度ムラを低減しない従来の撮像装置よりも、撮像する画像における画質を向上させることが可能となる。 Therefore, according to the image pickup apparatus 1 according to the present disclosure, it is possible to improve the image quality of an image to be picked up, as compared with the conventional image pickup apparatus that does not reduce the uneven brightness due to the difference in read time.
なお、本実施の形態1において、撮像素子10は、画素回路21に蓄積されている電荷量の読み出しを、行単位で行うとして説明した。しかしながら、電荷量の読み出しは、1以上の画素回路21からなる画素回路ブロック単位で行われれば、必ずしも行単位で行われる例に限定されない。
In the first embodiment, the
(実施の形態2)
ここでは、実施の形態1に係る撮像装置1から、その一部の機能が変更された実施の形態2に係る撮像装置について、図面を参照しながら説明する。(Embodiment 2)
Here, an image pickup apparatus according to the second embodiment in which some functions are changed from the image pickup apparatus 1 according to the first embodiment will be described with reference to the drawings.
実施の形態1に係る撮像装置1は、撮像素子10から出力される出力画像に対して、各行毎に、画素値に対して補正係数を乗算する補正を行うことで、出力画像における、読み出し時刻の差に起因する輝度ムラを低減する構成の例であった。
The image pickup apparatus 1 according to the first embodiment performs a correction of multiplying a pixel value by a correction coefficient for each row with respect to an output image output from the
これに対して、実施の形態2に係る撮像装置2は、各画素回路に蓄積された電荷量を、画素回路アレイにおける第1行から第N行へと1行ずつ順に読み出す読み出しと、その逆向きに、第N行から第1行へと1行ずつ順に読み出す読み出しとを同時に行って、それぞれの読み出しに基づく出力画像を合成することで、出力画像における、読み出し時刻の差に起因する輝度ムラを低減する構成の例となっている。 On the other hand, the image pickup apparatus 2 according to the second embodiment sequentially reads out the amount of charge accumulated in each pixel circuit row by row from the first row to the Nth row in the pixel circuit array, and vice versa. In this manner, the reading is sequentially performed one by one from the N-th row to the first row in the same direction, and the output images based on the respective readings are combined, so that the luminance unevenness in the output image due to the difference in the reading time is caused. Is an example of a configuration for reducing
以下、実施の形態2に係る撮像装置について、実施の形態1に係る撮像装置1からの変更点を中心に、図面を参照しながら説明する。 Hereinafter, the imaging device according to the second embodiment will be described with reference to the drawings, focusing on the changes from the imaging device 1 according to the first embodiment.
[2−1.構成]
図6は、実施の形態2に係るカメラ600の構成を示すブロック図である。[2-1. Constitution]
FIG. 6 is a block diagram showing the configuration of the
同図に示されるように、カメラ600は、実施の形態1に係るカメラ200から、撮像装置1が撮像装置2に変更されるように変形されている。そして、撮像装置2は、実施の形態1に係る撮像装置1から、撮像素子10が撮像素子610に変更され、制御部20が制御部620に変更され、低減部40が低減部640に変更されるように変形されている。
As shown in the figure, the
ここでは、これら撮像素子610、制御部620、低減部640の詳細について、順に説明する。
Here, the details of the
撮像素子610は、実施の形態1に係る撮像素子10から、その機能の一部が変更されている。
A part of the function of the
実施の形態1に係る撮像素子10は、各画素回路21に蓄積された電荷量を、画素回路アレイ120における第1行から第N行へと1行ずつ順に読み出す読み出しを行って、読み出された電荷量のそれぞれに基づく画素値からなる出力画像を出力する構成の例であった。
The
これに対して、実施の形態2に係る撮像素子610は、各画素回路21に蓄積された電荷量を、画素アレイにおける第1行から第N行へと1行ずつ順に読み出す順方向の読み出しと、その逆向きに、第N行から第1行へと1行ずつ順に読み出す逆方向の読み出しとを同時に行って、順方向に読み出された電荷量のそれぞれに基づく画素値からなる出力画像と、逆方向に読み出された電荷量のそれぞれに基づく画素値からなる逆方向出力画像をと出力する構成の例となっている。
On the other hand, the
図7は、撮像素子610の構成を示すブロック図である。
FIG. 7 is a block diagram showing the configuration of the
同図に示されるように、撮像素子610は、実施の形態1に係る撮像素子10に対して、逆方向読み出し回路130Bと、逆方向出力回路140Bとが追加されている。そして、画素回路21が画素回路21Bに変更され、行走査回路150が行走査回路150Bに変更され、タイミング制御回路160がタイミング制御回路160Bに変更されている。また、画素回路21が画素回路21Bに変更されたことに伴って、画素回路アレイ120が、画素回路アレイ120Bに変更されている。
As shown in the figure, in the
図8は、画素回路21Bの構成を示すブロック図である。
FIG. 8 is a block diagram showing the configuration of the
同図に示されるように、画素回路21Bは、実施の形態1に係る画素回路21に対して、選択トランジスタ24Bが追加されている。
As shown in the figure, in the
選択トランジスタ24Bは、ゲートに選択信号線52Bが接続され、ドレインに増幅トランジスタ23のソースが接続され、ソースに垂直信号線32Bが接続される。
The
選択トランジスタ24Bは、行走査回路150B(後述)から選択信号線52Bを介して配送される選択信号によってオンにされることで、増幅トランジスタ23に流れる電流を垂直信号線32Bに出力する。
The
垂直信号線32の場合と同様に、垂直信号線32Bに出力される電流の電流量が、逆方向読み出し回路130B(後述)に含まれる列読み出し回路31によって検知されることで、選択信号によってオンされた選択トランジスタ24Bを含む画素回路21Bの電荷蓄積ノード25に蓄積された電荷の量が読み出される。
As in the case of the
再び、図7に戻って、撮像素子610の説明を続ける。
Returning to FIG. 7 again, the description of the
行走査回路150Bは、実施の形態1に係る行走査回路150から、その機能の一部が変更されている。
A part of the function of the
行走査回路150Bは、実施の形態1に係る行走査回路150が有する、蓄積電荷量リセット機能と読み出し画素回路選択機能とに加えて、さらに、下記逆方向読み出し画素回路選択機能を有するように変更されている。
The
逆方向読み出し画素回路選択機能とは、画素回路アレイ120Bにおいて、第N行から第1行へと1行ずつ順に、所定時間Δt間隔で、該当行に属する画素回路21Bそれぞれにおける選択トランジスタ24Bをオンにするための選択信号を、該当行に属する画素回路21Bそれぞれに接続される選択信号線52Bを介して配送する機能である。
In the pixel circuit array 120B, the backward read pixel circuit selection function is to turn on the
これにより、画素回路アレイ120Bに含まれる全ての画素回路21Bの電荷蓄積ノード25に蓄積された電荷量の読み出しは、逆方向読み出し回路130B(後述)によって、第N行から第1行まで行単位で順に実行され、第N行に属する画素回路21についての読み出しが開始されてから、第1行に属する画素回路21Bについての読み出しが完了するまで、N×Δtの期間を要する。
As a result, the amount of charge accumulated in the
逆方向読み出し回路130Bは、読み出し回路130と同様の構成である。しかしながら、読み出し回路130では、含まれる各列読み出し回路31が、対応する列に属する画素回路21Bそれぞれに接続される垂直信号線32に接続されているのに対して、逆方向読み出し回路130Bでは、含まれる各列読み出し回路31が、対応する列に属する画素回路21Bそれぞれに接続される垂直信号線32Bに接続されている点において相違している。
The reverse
逆方向出力回路140Bは、出力回路140と同様の構成である。しかしながら、出力回路140では、読み出し回路130によって読み出された電荷量のそれぞれに基づく画素値からなる出力画像を出力するのに対して、逆方向出力回路140Bでは、逆方向読み出し回路130Bによって読み出された電荷量のそれぞれに基づく画素値からなる逆方向出力画像を出力する点において相違している。
The
タイミング制御回路160Bは、実施の形態1に係るタイミング制御回路160に対して、その機能の一部が変更されている。
A part of the function of the
タイミング制御回路160Bは、行走査回路150Bの動作タイミングと、読み出し回路130の動作タイミングと、逆方向読み出し回路130Bの動作タイミングと、電圧印加回路170の動作タイミングとを制御する。すなわち、タイミング制御回路160は、行走査回路150Bによる、蓄積電荷量リセット機能を実行するタイミングと、読み出し画素回路選択機能を実行するタイミングと、逆方向読み出し画素回路選択機能を実行するタイミングとを制御し、読み出し回路130による、選択信号によって選択された画素回路21の電荷蓄積ノード25に蓄積されている電荷の量を読み出すタイミングを制御し、逆方向読み出し回路130Bによる、選択信号によって選択された画素回路21の電荷蓄積ノード25に蓄積されている電荷の量を読み出すタイミングを制御し、電圧印加回路170による、光電変換素子110を露光状態とするタイミングと、光電変換素子110を遮光状態とするタイミングとを制御する。
The
再び、図6に戻って、撮像装置1の説明を続ける。 Returning to FIG. 6 again, the description of the image pickup apparatus 1 will be continued.
制御部620は、実施の形態1に係る制御部20から、その機能の一部が変更されている。 A part of the function of the control unit 620 is changed from that of the control unit 20 according to the first embodiment.
実施の形態1に係る制御部20は、撮像制御機能を有する構成の例であった。 The control unit 20 according to the first embodiment is an example of a configuration having an imaging control function.
これに対して、制御部620は、撮像制御機能Bを有する構成の例となっている。 On the other hand, the control unit 620 is an example of a configuration having the imaging control function B.
撮像制御機能Bとは、撮像素子610に画像を撮像させて、出力画像と逆方向出力画像とを出力させる機能である。より具体的には、撮像素子610に対して、撮像を開始させるタイミングで撮像開始信号を出力し、撮像開始信号を出力してから、所定の露光期間T1経過したタイミングで、撮像終了信号を出力することで、撮像素子610に上記画像の撮像を実行させる機能である。
The image capturing control function B is a function of causing the
図9Aは、制御部620によって出力される撮像開始信号と撮像終了信号とのタイミング図である。 FIG. 9A is a timing diagram of the image capturing start signal and the image capturing end signal output by the control unit 620.
図9Aに示されるように、制御部620は、撮像素子610に対して、撮像開始信号と撮像終了信号とを、撮像開始信号の出力よりも撮像終了信号の出力の方が露光期間T1だけ遅延するように出力する。
As shown in FIG. 9A, the control unit 620 delays the image pickup start signal and the image pickup end signal with respect to the
撮像素子610は、制御部620から出力された撮像開始信号を受け取ると、タイミング制御回路160Bが、(1)電圧印加回路170の動作タイミングを制御して、撮像開始信号を受け取るタイミングで、光電変換部材111に印加する電圧を、第1所定範囲内の第1電圧とし、(2)行走査回路150Bの動作タイミングを制御して、撮像開始信号を受け取るタイミングで、行走査回路150Bに蓄積電荷量リセット機能を実行させる。
When the
そして、撮像素子610は、制御部620から出力された撮像終了信号を受け取ると、タイミング制御回路160Bが、(1)電圧印加回路170の動作タイミングを制御して、撮像開始信号を受け取るタイミングで、光電変換部材111に印加する電圧を、第2範囲内の第2電圧とし、(2)行走査回路150Bの動作タイミングと、読み出し回路130の動作タイミングと、逆方向読み出し回路130Bの動作タイミングとを制御して、撮像終了信号を受け取るタイミングで、画素回路アレイ120Bを構成する全画素回路21Bに対する、電荷蓄積ノード25に蓄積されている電荷量の、(A)第1行から第N行まで行単位で順にΔtずつ遅れるタイミングで読み出す順方向読み出しと、(B)第N行から第1行まで順位Δtずつ遅れるタイミングで読み出す逆方向読み出しとを開始する。
When the
図9Bは、撮像素子610の状態を示すタイミング図である。
FIG. 9B is a timing diagram showing the state of the
図9Bに示されるように、撮像素子610は、制御部620から出力された撮像開始信号を受け取ると、その受け取ったタイミングで画素回路アレイ120Bに含まれる画素回路21Bに蓄積されている電荷量をリセット(初期化)する。また、撮像素子610は、撮像開始信号を受け取ってから、撮像終了信号を受け取るまでの期間、光電変換素子110を露光状態とし、撮像終了信号を受け取った後の期間、光電変換素子110を遮光状態とする。そして、撮像素子610は、撮像終了信号を受け取ると、第1行から第N行まで行単位で順にΔtずつ遅れるタイミングで、画素回路アレイ120Bに含まれる画素回路21Bに蓄積されている電荷量を読み出す順方向読み出しと、第N行から第1行まで行単位で順にΔtずつ遅れるタイミングで、画素回路アレイ120Bに含まれる画素回路21Bに蓄積されている電荷量を読み出す逆方向読み出しとを行う。
As shown in FIG. 9B, when the
図9Bからも理解されるように、順方向読み出しでは、実施の形態1の場合と同様に、第K行に位置する画素回路21Bについて、第1行、すなわち最初に読み出される行の画素回路21Bと比べて、遮光状態の光電変換素子110において(K−1)×Δtの期間に生成された、遮光漏れによる電荷の電荷量だけ余分に蓄積された電荷量が読み出される。
As can be understood from FIG. 9B, in the forward reading, as in the case of the first embodiment, with respect to the
一方で、逆方向読み出しでは、第K行に位置する画素回路21Bについて、第N行、すなわち最初に読み出される行の画素回路21Bと比べて、遮光状態の光電変換素子110において(N−K)×Δtの期間に生成された、遮光漏れによる電荷の電荷量だけ余分に蓄積された電荷量が読み出される。
On the other hand, in the reverse reading, the
このため、撮像素子610から出力される、出力画像と逆方向出力画像との双方とも、読み出し時刻の差に起因する輝度ムラが生じた画像となる。
Therefore, both the output image and the reverse direction output image output from the
図10は、順方向読み出しにおける、最初に読み出される行を基準としたときの、各行における余分な遮光漏れの期間と、逆方向読み出しにおける、最初に読み出される行を基準としたときの、各行における余分な遮光漏れの期間との関係を示す図である。 FIG. 10 shows an extra period of light-shielding leakage in each row when the first read row is used as a reference in the forward reading and each row when the first read row is used as the reference in the reverse reading. It is a figure which shows the relationship with the period of extra light shielding leakage.
同図に示されるように、各行における、順方向読み出しにおける余分な遮光漏れの期間と、逆方向読み出しにおける余分な遮光漏れの期間とを加算することで、各行における、順方向読み出しにおける余分な遮光漏れの期間の差と、逆方向読み出しにおける余分な遮光漏れの期間の差とを相殺することができる。すなわち、各行における、順方向読み出しにおける余分な遮光漏れの期間と、逆方向読み出しにおける余分な遮光漏れの期間とを加算することで、これら期間の和を、いずれの行においても(N−1)×Δtとすることができる。 As shown in the figure, by adding the period of extra light leakage in forward reading and the period of extra light leakage in backward reading in each row, extra light shielding in forward reading in each row is added. It is possible to cancel the difference in the leak period and the difference in the extra light-shielding leak period in the backward reading. That is, the sum of these periods is (N-1) in any row by adding the period of extra light leakage in forward reading and the period of extra light leakage in backward reading in each row. It can be set to xΔt.
再び、図6に戻って、撮像装置2の説明を続ける。 Returning to FIG. 6 again, the description of the imaging device 2 will be continued.
低減部640は、実施の形態1に係る低減部40から、その機能の一部が変更されている。
A part of the function of the
低減部640は、遮光状態の光電変換部材111によって生成される電荷による、出力画像への影響を低減する。より具体的には、低減部640は、上記低減を、出力画像に、逆方向出力画像を合成することで行う。
The
すなわち、低減部640は、出力画像の各画素値に対して、対応する逆方向出力画像の画素値との加算平均を行って、新たな出力画像(以下、「輝度ムラ低減画像」と呼ぶ。)を生成する。
That is, the
図10からわかるように、この輝度ムラ低減画像では、いずれの行の画素についても、対応する画素回路21Bから読み出される電荷量における、余分な露光漏れの期間の差がない。
As can be seen from FIG. 10, in this luminance unevenness reduced image, there is no difference in the period of extra exposure leakage in the charge amount read from the corresponding
このため、この輝度ムラ低減画像は、出力画像に比べて、読み出し時刻の差に起因する輝度ムラが低減された画像となる。 Therefore, the brightness unevenness reduced image is an image in which the brightness unevenness due to the difference in the read time is reduced as compared with the output image.
このように、低減部640は、撮像素子610から、読み出し時刻の差に起因する輝度ムラが生じた出力画像が出力されると、その出力画像に対して、その輝度ムラが低減された輝度ムラ低減画像を出力する。
As described above, when the
[2−2.効果等]
上述したように、本開示に係る撮像装置2は、読み出し時刻の差に起因する輝度ムラを低減することができる。[2-2. Effect, etc.]
As described above, the imaging device 2 according to the present disclosure can reduce the brightness unevenness caused by the difference in read times.
従って、本開示に係る撮像装置2によると、読み出し時刻の差に起因する輝度ムラを低減しない従来の撮像装置よりも、撮像する画像における画質を向上させることが可能となる。 Therefore, according to the imaging device 2 according to the present disclosure, it is possible to improve the image quality of an image to be captured, as compared with the conventional imaging device that does not reduce the uneven brightness due to the difference in the read time.
なお、本実施の形態2において、撮像素子610は、画素回路21Bに蓄積されている電荷量の読み出しを、行単位で行うとして説明した。しかしながら、電荷量の読み出しは、1以上の画素回路21Bからなる画素回路ブロック単位で行われれば、必ずしも行単位で行われる例に限定されない。
In the second embodiment, the
(実施の形態3)
ここでは、実施の形態1に係る撮像装置1から、その一部の機能が変更された実施の形態3に係る撮像装置について、図面を参照しながら説明する。(Embodiment 3)
Here, the image pickup apparatus according to the third embodiment in which some functions are changed from the image pickup apparatus 1 according to the first embodiment will be described with reference to the drawings.
実施の形態1に係る撮像装置1は、撮像素子10から出力画像が出力された後において、その出力画像に対して演算処理を行うことで、その出力画像における、読み出し時刻の差に起因する輝度ムラを低減する構成の例であった。
The image pickup apparatus 1 according to the first embodiment performs the arithmetic processing on the output image after the output image is output from the
これに対して、実施の形態3に係る撮像装置は、撮像素子において、各画素回路に蓄積された電荷量の読み出しが行われている期間に、その撮像素子に集光される光の量を調整する絞りを絞ることで、これから出力しようとしている撮像画像における、読み出し時刻の差に起因する輝度ムラの発生を低減する構成の例となっている。 On the other hand, in the image pickup device according to the third embodiment, in the image pickup device, the amount of light condensed on the image pickup device during the period in which the amount of charge accumulated in each pixel circuit is read out. This is an example of a configuration in which, by narrowing the diaphragm to be adjusted, the occurrence of luminance unevenness due to the difference in read times in the captured image that is about to be output is reduced.
以下、実施の形態3に係る撮像装置について、実施の形態1に係る撮像装置1からの変更点を中心に、図面を参照しながら説明する。 Hereinafter, the imaging device according to the third embodiment will be described with reference to the drawings, focusing on the changes from the imaging device 1 according to the first embodiment.
[3−1.構成]
図11は、実施の形態3に係るカメラ1100の構成を示すブロック図である。[3-1. Constitution]
FIG. 11 is a block diagram showing the configuration of the
同図に示されるように、カメラ1100は、実施の形態1に係るカメラ200から、撮像装置1が撮像装置3に変更されるように変形されている。そして、撮像装置3は、実施の形態1に係る撮像装置1に対して、制御部20が制御部1120に変更され、低減部40が低減部1140に変更されている。
As shown in the figure, the
ここでは、これら制御部1120、低減部1140の詳細について、順に説明する。
Here, details of the control unit 1120 and the
制御部1120は、実施の形態1に係る制御部20から、その機能の一部が変更されている。 A part of the function of the control unit 1120 is changed from that of the control unit 20 according to the first embodiment.
実施の形態1に係る制御部20は、撮像制御機能を有する構成の例であった。 The control unit 20 according to the first embodiment is an example of a configuration having an imaging control function.
これに対して、制御部1120は、撮像制御機能Cを有する構成の例となっている。 On the other hand, the control unit 1120 is an example of a configuration having the imaging control function C.
撮像制御機能Cとは、撮像素子10に画像を撮像させて、出力画像を出力させると同時に、光電変換部材111が露光状態である期間、絞り214の絞り量を、撮像装置3を利用するユーザの所望する絞り量にする機能である。より具体的には、(1)撮像素子10に対して、撮像を開始させるタイミングで撮像開始信号を出力し、撮像開始信号を出力してから、所定の露光期間T1経過したタイミングで、撮像終了信号を出力することで、撮像素子10に上記画像の撮像を実行させると共に、(2)レンズ駆動部220に対して、撮像開始信号を出力するタイミングで、ユーザの所望する絞り量を示す絞り量指定信号を出力することで、絞り214の絞り量を上記ユーザの所望する絞り量にさせる機能である。
The image pickup control function C means that the
低減部1140は、実施の形態1に係る低減部40から、その機能の一部が変更されている。
A part of the function of the
低減部1140は、制御部1120から撮像終了信号が出力されると、絞り214の絞り量を、最大の絞り量とする。より具体的には、制御部1120から撮像終了信号が出力されると、レンズ駆動部220に対して、絞り量を最大の絞り量とする旨の最大絞り量信号を出力することで、絞り214の絞り量を最大の絞り量とする。
When the imaging end signal is output from the control unit 1120, the
図12Aは、制御部620によって出力される撮像開始信号と撮像終了信号とのタイミング図であり、図12Bは、制御部620によって出力される絞り量指定信号のタイミング図であり、図12Cは、低減部1140によって出力される最大絞り量信号のタイミング図である。
FIG. 12A is a timing diagram of the image pickup start signal and the image pickup end signal output by the control unit 620, FIG. 12B is a timing diagram of the aperture amount designation signal output by the control unit 620, and FIG. FIG. 9 is a timing chart of the maximum aperture amount signal output by the
図12Aに示されるように、制御部620は、撮像素子10に対して、撮像開始信号と撮像終了信号とを、撮像開始信号の出力よりも撮像終了信号の出力の方が露光期間T1だけ遅延するように出力する。また、図12Bに示されるように、制御部620は、レンズ駆動部220に対して、撮像開始信号を出力するタイミングで絞り量指定信号を出力する。そして、図12Cに示されるように、低減部1140は、制御部620から撮像終了信号が出力されると、レンズ駆動部220に対して、最大絞り量信号を出力する。
As shown in FIG. 12A, the control unit 620 delays the image pickup start signal and the image pickup end signal with respect to the
図12Dは、絞り214の状態を示すタイミング図である。
FIG. 12D is a timing chart showing the state of the
図12Dに示されるように、絞り214は、レンズ駆動部220が絞り量指定信号を受け取ってから、レンズ駆動部220が最大絞り量信号を受け取るまでの期間、絞り量を、絞り量指定信号で示される絞り量とし、最大絞り量信号を受け取った後の期間、絞り量を、最大の絞り量とする。
As shown in FIG. 12D, the
図12Eは、撮像素子10の状態を示すタイミング図である。
FIG. 12E is a timing chart showing the state of the
図12Eに示されるように、撮像素子10は、実施の形態1に係る図5Bで説明した場合と同様に、撮像素子10は、撮像開始信号を受け取ってから、撮像終了信号を受け取るまでの期間、光電変換素子110を露光状態とし、撮像終了信号を受け取った後の期間、光電変換素子110を遮光状態とする。そして、撮像素子10は、撮像終了信号を受け取ると、第1行から第N行まで行単位で順にΔtずつ遅れるタイミングで、画素回路アレイ120に含まれる画素回路21に蓄積されている電荷量の読み出しを行う。
As illustrated in FIG. 12E, in the same manner as in the case described with reference to FIG. 5B according to the first embodiment, the
図12D、図12Eに示されるように、撮像素子10が、電荷量の読み出しを行っている期間、絞り214は、その絞り量を最大の絞り量とする。
As shown in FIGS. 12D and 12E, the
これにより、撮像素子10では、電荷量の読み出しを行っている期間、光電変換部材111に集光される外部の光の量が最小限に抑えられる、
このため、撮像装置3は、電荷量の読み出しを行っている期間、絞りの絞り量を、最大の絞り量としない従来の撮像装置に比べて、読み出し時刻の差に起因する輝度ムラが低減された画像を出力することができる。As a result, in the
For this reason, the image pickup apparatus 3 reduces the luminance unevenness due to the difference in the read time as compared with the conventional image pickup apparatus in which the diaphragm amount of the diaphragm is not set to the maximum diaphragm amount while the charge amount is being read. The output image can be output.
[3−2.効果等]
上述したように、本開示に係る撮像装置3は、読み出し時刻の差に起因する輝度ムラを低減することができる。[3-2. Effect, etc.]
As described above, the imaging device 3 according to the present disclosure can reduce the brightness unevenness due to the difference in read times.
従って、本開示に係る撮像装置3によると、読み出し時刻の差に起因する輝度ムラを低減しない従来の撮像装置よりも、撮像する画像における画質を向上させることが可能となる。 Therefore, according to the image pickup apparatus 3 according to the present disclosure, it is possible to improve the image quality of an image to be picked up, as compared with the conventional image pickup apparatus that does not reduce the uneven brightness due to the difference in read times.
なお、本実施の形態3において、低減部1140は、制御部1120から撮像終了信号が出力されると、絞り214の絞り量を、最大の絞り量とするとして説明した。しかしながら上記絞り量は、絞り量指定信号で示される絞り量よりも大きな絞り量であれば、必ずしも最大の絞り量である例に限定されない。
In addition, in the third embodiment, the
(実施の形態4)
ここでは、実施の形態3に係る撮像装置3から、その一部の機能が変更された実施の形態4に係る撮像装置について、図面を参照しながら説明する。(Embodiment 4)
Here, an image pickup apparatus according to the fourth embodiment in which some functions are changed from the image pickup apparatus 3 according to the third embodiment will be described with reference to the drawings.
実施の形態4に係る撮像装置は、露光期間中に、絞りの絞り量を増加させていくことで、アポタイゼーション効果を奏するアポタイゼーション撮像を行う。そして、実施の形態4に係る撮像装置は、アポタイゼーション撮像において、絞り量を増加させていく期間、その絞り量の増加による光量の減少が補われるように、光電変換部材における光電変換効率を増加させていく。 The imaging apparatus according to the fourth embodiment performs apodization imaging that produces an apodization effect by increasing the aperture amount of the diaphragm during the exposure period. Then, in the imaging device according to the fourth embodiment, the photoelectric conversion efficiency in the photoelectric conversion member is increased so that the decrease in the light amount due to the increase in the aperture amount is compensated during the period in which the aperture amount is increased in the apodization imaging. To increase.
以下、実施の形態4に係る撮像装置について、実施の形態3に係る撮像装置3からの変更点を中心に、図面を参照しながら説明する。 Hereinafter, the imaging device according to the fourth embodiment will be described with reference to the drawings, focusing on the changes from the imaging device 3 according to the third embodiment.
[4−1.構成]
図13は、実施の形態4に係るカメラ1300の構成を示すブロック図である。[4-1. Constitution]
FIG. 13 is a block diagram showing the configuration of the
同図に示されるように、カメラ1300は、実施の形態3に係るカメラ1100から、撮像装置3が撮像装置4に変更されるように変形されている。そして、撮像装置4は、実施の形態3に係る撮像装置3から、低減部1140が削除され、電圧制御部1340が追加され、撮像素子10が撮像素子1310に変更され、制御部1120が制御部1320に変更されている。
As shown in the figure, the
ここでは、これら撮像素子1310、制御部1320、電圧制御部1340の詳細について、順に説明する。
Here, details of the
撮像素子1310は、実施の形態3に係る撮像素子10から、その機能の一部が変更されている。
A part of the function of the
図14は、撮像素子1310の構成を示すブロック図である。
FIG. 14 is a block diagram showing the configuration of the
同図に示されるように、撮像素子1310は、実施の形態3に係る撮像素子10に対して、タイミング制御回路160がタイミング制御回路160Cに変更されている。
As shown in the figure, in the
タイミング制御回路160Cは、実施の形態3に係るタイミング制御回路160から、その機能の一部が変更されている。
A part of the function of the
タイミング制御回路160Cは、実施の形態3に係るタイミング制御回路160の有する機能に加えて、以下の任意電圧印加機能を有する。
The
任意電圧印加機能とは、電圧印加回路170を制御して、電圧印加回路170に、光電変換部材111に対して、第1所定範囲内における任意の電圧を動的に印加させる機能である。
The arbitrary voltage application function is a function of controlling the
再び図13に戻って、撮像装置4の説明を続ける。 Returning to FIG. 13 again, the description of the imaging device 4 will be continued.
制御部1320は、実施の形態3に係る制御部1120から、その機能の一部が変更されている。
The
実施の形態3に係る制御部1120は、撮像制御機能Cを有する構成の例であった。 The control unit 1120 according to the third embodiment is an example of the configuration having the imaging control function C.
これに対して、制御部1320は、アポタイゼーション撮像制御機能を有する構成の例となっている。
On the other hand, the
アポタイゼーション撮像制御機能とは、撮像素子1310に画像を撮像させて、出力画像を出力させると同時に、光電変換部材111が露光状態である期間、撮像装置3を利用するユーザの所望する、絞り214の絞り量から、光電変換部材111に集光される外部の光の光量が所定割合A(Aは0より大きい1未満の数。ここでは、例えば1/2)倍になるまで、所定の露光期間T1かけてリニアに減少するように、絞り214の絞り量を増加させる機能である。より具体的には、(1)撮像素子1310に対して、撮像を開始させるタイミングで撮像開始信号を出力し、撮像開始信号を出力してから、所定の露光期間T1経過したタイミングで、撮像終了信号を出力することで、撮像素子10に上記画像の撮像を実行させると共に、(2)レンズ駆動部220に対して、撮像開始信号を出力するタイミングで、ユーザの所望する絞り量を示す絞り量指定信号Bを出力することで、絞り214に、上記絞り量の増加を実行させる機能である。
The apodization image pickup control function means that the
電圧制御部1340は、光電変換部材111に印加される電圧を制御する。
The
ここでは、電圧制御部1340は、光電変換部材111が露光状態である場合において、絞り214の絞り量が増加するように変化するときには、その変化に応じて、光電変換部材111に印加する電圧が増加されるように、上記制御を行う。より具体的には、電圧制御部1340は、制御部1320から絞り量指定信号Bが出力されると、撮像素子1310に対して、光電変換部材111における光電変換効率が、第1電圧が印加される光電変換効率から、その所定割合1/A倍となるまで、所定の露光期間T1かけてリニアに増加するように、光電変換部材111に印加される電圧を増加させる旨の印加電圧変更信号を出力することで、上記制御を行う。電圧制御部1340は、一例として、メモリ(図示されず。)に記憶されるプログラムをプロセッサ(図示されず。)が実行することによって実現される。
Here, when the
図15Aは、制御部1320によって出力される撮像開始信号と撮像終了信号とのタイミング図であり、図15Bは、制御部1320によって出力される絞り量指定信号Bのタイミング図であり、図15Cは、電圧制御部1340によって出力される印加電圧変更信号のタイミング図である。
FIG. 15A is a timing diagram of the image pickup start signal and the image pickup end signal output by the
図15Aに示されるように、制御部1320は、撮像素子1310に対して、撮像開始信号と撮像終了信号とを、撮像開始信号の出力よりも撮像終了信号の出力の方が露光期間T1だけ遅延するように出力する。また、図15Bに示されるように、制御部1320は、レンズ駆動部220に対して、撮像開始信号を出力するタイミングで絞り量指定信号Bを出力する。そして、図15Cに示されるように、電圧制御部1340は、撮像素子1310に対して、絞り量指定信号Bが出力されるタイミングで印加電圧変更信号を出力する。
As shown in FIG. 15A, the
絞り214は、制御部1320から絞り量指定信号Bが出力されると、その絞り量が、絞り量指定信号Bによって示される絞り量から、所定の露光期間T1かけて、光電変換部材111に集光される外部の光の光量が所定割合A倍になるまでリニアに減少するように、絞り量を変化させる。
When the diaphragm amount designating signal B is output from the
図15Dは、光電変換部材111に集光される外部の光の光量のタイミング図である。
FIG. 15D is a timing chart of the amount of external light focused on the
図15Dに示されるように、絞り214が上記絞り量の変化を実行した結果、光電変換部材111に集光される外部の光の光量は、露光期間T1の開始時点から露光期間T1の終了時点にかけて、ユーザの所望する絞り量における光量から、その所定割合A倍となるまでリニアに減少する。
As shown in FIG. 15D, as a result of the
撮像素子1310は、電圧制御部1340から出力された印加電圧変更信号を受け取ると、タイミング制御回路160Cが、電圧印加回路170の動作タイミングを制御することで、印加電圧変更信号を受け取るタイミングで、光電変換部材111に印加する電圧を、第1所定範囲内の第1電圧とする。そして、その後、露光期間T1かけて、光電変換部材111における光電変換効率が所定割合1/A倍までリニアに増加するように、光電変換部材111に印加させる電圧を第1所定範囲内において増加させる。
When the
図15Eは、光電変換部材111へ印加される電圧のタイミング図であり、図15Fは、光電変換部材111における光電変換効率のタイミング図である。
15E is a timing diagram of the voltage applied to the
図15Fに示されるように、電圧印加回路170が光電変換部材111に印加する電圧を変化させた結果、光電変換部材111における光電変換効率は、露光期間T1の開始時点から露光期間の終了時点にかけて、第1電圧が印加される光電変換効率から、その所定割合1/A倍となるまでリニアに増加する。
As shown in FIG. 15F, as a result of the
このように、撮像装置4は、アポタイゼーション撮像を行う場合には、図15Dに示されるように、露光期間中における光量が、ユーザ所望の絞り量における光量から、そのA倍(ここでは、例えば1/2倍)の光量にまで減少する。 As described above, in the case of performing the apodization imaging, the imaging device 4 determines that the light amount during the exposure period is A times the light amount at the aperture amount desired by the user (here, as shown in FIG. 15D). The amount of light is reduced to, for example, 1/2 times.
その一方で、撮像装置4は、アポタイゼーション撮像を行う場合には、図15Fに示されるように、光電変換部材111における光電変換効率が、第1電圧が印加される光電変換効率から、その所定割合1/A倍となるまでリニアに増加する。
On the other hand, when the imaging device 4 performs apodization imaging, as shown in FIG. 15F, the photoelectric conversion efficiency of the
これにより、この撮像装置4は、アポタイゼーション撮像における光量の減少を、光電変換部材111における光電変換効率の増加で補うことができる。
As a result, the imaging device 4 can compensate for the decrease in the amount of light in the apodization imaging by increasing the photoelectric conversion efficiency in the
このため、撮像装置4は、アポタイゼーション撮像において、光電変換部材の光電効率を増加させない従来の撮像装置に比べて、アポタイゼーション撮像における、光量不足による撮像画像の画質の劣化を低減することができる。 Therefore, the imaging device 4 can reduce deterioration in image quality of the captured image due to insufficient light amount in the apodization imaging, as compared with a conventional imaging device that does not increase the photoelectric efficiency of the photoelectric conversion member in the apodization imaging. You can
[4−2.効果等]
上述したように、本開示に係る撮像装置4は、アポタイゼーション撮像における、光量不足による撮像画像の劣化を低減することができる。[4-2. Effect, etc.]
As described above, the imaging device 4 according to the present disclosure can reduce the deterioration of the captured image due to the insufficient light amount in the apodization imaging.
従って、本開示に係る撮像装置4によると、アポタイゼーション撮像における、光量不足による撮像画像の劣化を低減しない従来の撮像装置よりも、撮像する画像における画質を向上させることが可能となる。 Therefore, according to the imaging device 4 according to the present disclosure, it is possible to improve the image quality of an image to be captured, as compared with the conventional imaging device that does not reduce the deterioration of the captured image due to the insufficient light amount in the apodization imaging.
(実施の形態5)
ここでは、実施の形態1に係る撮像装置1から、その一部の機能が変更された実施の形態5に係る撮像装置について、図面を参照しながら説明する。(Embodiment 5)
Here, an image pickup apparatus according to the fifth embodiment in which some functions are changed from the image pickup apparatus 1 according to the first embodiment will be described with reference to the drawings.
実施の形態5に係る撮像装置は、実施の形態1に係る撮像装置1と同様に、画素回路に蓄積された電荷量の読み出しを、画素回路アレイにおける行単位で順に行う。その一方で、実施の形態5に係る撮像装置は、その読み出しの期間中に、積極的に光電変換部材を露光状態とすることで、出力画像における輝度の差を行単位で調整する。 The image pickup apparatus according to the fifth embodiment sequentially reads the amount of charge accumulated in the pixel circuits in units of rows in the pixel circuit array, similarly to the image pickup apparatus 1 according to the first embodiment. On the other hand, the image pickup apparatus according to the fifth embodiment adjusts the difference in luminance in the output image row by row by positively exposing the photoelectric conversion member during the reading period.
以下、実施の形態5に係る撮像装置について、実施の形態1に係る撮像装置1からの変更点を中心に、図面を参照しながら説明する。 Hereinafter, the imaging device according to the fifth embodiment will be described with reference to the drawings, focusing on the changes from the imaging device 1 according to the first embodiment.
[5−1.構成]
図16は、実施の形態5に係るカメラ1600の構成を示すブロック図である。[5-1. Constitution]
FIG. 16 is a block diagram showing the configuration of the
同図に示されるように、カメラ1600は、実施の形態1に係るカメラ200から、撮像装置1が撮像装置5に変更されるように変形されている。そして、撮像装置5は、実施の形態1に係る撮像装置1から、低減部40が削除され、撮像素子10が撮像素子1310に変更され、制御部20が制御部1620に変更され、電圧制御部1640と取得部1650とが追加されている。
As shown in the figure, the
撮像素子1310については、既に実施の形態4において説明済である。このため、ここでは、制御部1620、取得部1650、電圧制御部1640の詳細について順に説明する。
The
制御部1620は、実施の形態1に係る制御部20から、その機能の一部が変更されている。 The control unit 1620 has a part of its function changed from the control unit 20 according to the first embodiment.
制御部1620は、実施の形態1に係る制御部20の有する撮像制御機能に加えて、以下のライブビュー撮像機能を有する。 The control unit 1620 has the following live view imaging function in addition to the imaging control function of the control unit 20 according to the first embodiment.
ライブビュー撮像機能とは、所定周期(例えば、1秒)で、撮像素子10に画像を撮像させて、出力画像を出力させる機能である。より具体的には、制御部1620は、所定周期で撮像制御機能を実行することで、このライブビュー撮像機能を実現する。
The live view image capturing function is a function of causing the
取得部1650は、読み出し回路130が読み出しを開始する時点における、複数の画素回路21のそれぞれに蓄積されていると推定される電荷の量を示す推定電荷量の、画素回路アレイ120のアレイ形状における第1分布に係る情報を取得する。
In the array shape of the
ここでは、取得部1650は、上記情報として、制御部1620が上記ライブビュー撮像機能を実行している期間において、撮像素子1310から出力される出力画像(以下、「ライブビュー画像」と呼ぶ。)を取得する。取得部1650は、一例として、メモリ(図示されず。)に記憶されるプログラムをプロセッサ(図示されず。)が実行することによって実現される。
Here, the
電圧制御部1640は、光電変換部材111に印加される電圧を制御する。
The
ここでは、電圧制御部1640は、読み出し回路130による読み出しの開始時点から終了時点までの少なくとも一部の期間(以下、「追加露光期間」と呼ぶ。)に、光電変換部材111に第1所定範囲の電圧が印加されるように、光電変換部材111に印加される電圧を制御する。
Here, the
これにより、追加露光期間において未だ読み出しが完了していない行の画素回路21では、読み出しが完了する迄に、追加露光期間において光電変換部材111で生成される、内部光電効果による電荷が、さらに蓄積されることとなる。
As a result, in the
ここでは、電圧制御部1640は、取得部1650によって取得されたライブビュー画像に基づいて、そのライブビュー画像における輝度の分布(第1分布)よりも、読み出し回路130によって読み出される電荷量の、画素回路アレイ120のアレイ形状における分布の方が、より平坦な分布となるように、光電変換部材111に印加される電圧を制御する。
Here, the
より具体的には、電圧制御部1640は、(1)取得部1650によって取得されたライブビュー画像のうち、最後に取得されたライブビュー画像(以下、「参照ライブビュー画像」と呼ぶ。)における各行毎の画素値の和を算出し、(2)各行毎の画素値の和のばらつきが低減されるように、光電変換部材111に印加される電圧を制御する。電圧制御部1640は、一例として、メモリ(図示されず。)に記憶されるプログラムをプロセッサ(図示されず。)が実行することによって実現される。
More specifically, the voltage control unit 1640 (1) in the live view image acquired last (hereinafter, referred to as “reference live view image”) among the live view images acquired by the
以下、電圧制御部1640の行う動作について、具体例を用いて、図面を参照しながら説明する。
Hereinafter, the operation performed by the
図17は、参照ライブビュー画像の一具体例である。ここでは、参照ライブビュー画像が、画像上方に太陽が映り、画像下方に木陰が映っている画像であるとして説明する。 FIG. 17 is a specific example of the reference live view image. Here, it is assumed that the reference live view image is an image in which the sun appears above the image and a tree shade appears below the image.
電圧制御部1640は、ライブビュー画像における各行毎の画素値の和を算出する。この例の場合では、太陽が映っている上方l行の部分の画素値の和が、各行毎の画素値の和の平均よりも有意に大きく(すなわち、輝度大)、木陰が映っている下方m行の部分の画素値の和が、各行毎の画素値の和の平均よりも有意に小さく(すなわち、輝度小)なっている。
The
このため、この例の場合では、撮像素子1310が新たな画像を撮像する場合において、その新たな画像における輝度の分布が、より平坦な分布となるように、例えば、電圧制御部1640は、輝度小となる下位m行の部分に位置する画素回路21に限って、その読み出しまでの期間に追加露光期間が含まれるように、光電変換部材111に印加される電圧を制御する。
Therefore, in the case of this example, when the
図18Aは、本一具体例において、撮像素子1310が新たな画像を撮像する場合における、撮像素子1310の状態を示すタイミング図であり、図18Bは、本一具体例において、撮像素子1310が新たな画像を撮像する場合における、光電変換部材111に印加される電圧のタイミング図である。
FIG. 18A is a timing diagram showing the state of the
図18A、図18Bに示されるように、電圧制御部1640は、下位m−1行目の読み出しが終了した時点から、最下位の行の読み出しが終了するまでの期間、光電変換部材111に第1所定範囲の第3電圧が印加されるように、光電変換部材111に印加される電圧を制御する。
As shown in FIGS. 18A and 18B, the
再び図16に戻って、撮像装置5の説明を続ける。
Returning to FIG. 16 again, the description of the
電圧制御部1640は、光電変換部材111に印加される電圧の制御を、撮像素子1310に対して、光電変換部材111に印加されるべき電圧の値を示す印加電圧値信号を出力することで行う。
The
図19Aは、制御部1620によって出力される撮像開始信号と撮像終了信号とのタイミング図であり、図19Bは、電圧制御部1640によって出力される印加電圧値信号のタイミング図である。
FIG. 19A is a timing diagram of the imaging start signal and the imaging end signal output by the control unit 1620, and FIG. 19B is a timing diagram of the applied voltage value signal output by the
図19Aに示されるように、制御部1620は、撮像素子1310に対して、撮像開始信号と撮像終了信号とを、撮像開始信号の出力よりも撮像終了信号の出力の方が露光期間T1だけ遅延するように出力する。
As shown in FIG. 19A, the control unit 1620 delays the image pickup start signal and the image pickup end signal with respect to the
一方で、電圧制御部1640は、参照ライブビュー画像に基づいて、その参照ライブビュー画像における輝度の分布よりも、読み出し回路130によって読み出される電荷量の、画素回路アレイ120のアレイ形状における分布の方が、より平坦な分布となるように、追加露光期間T2の開始時刻及び終了時刻と、その追加露光期間T2において、光電変換部材111に印加されるべき、第1所定範囲の第3電圧とを算出する。
On the other hand, based on the reference live view image, the
そして、電圧制御部1640は、図19Bに示されるように、算出した追加露光期間T2の開始時刻から、算出した追加露光期間T2の終了時刻まで、算出した第3電圧を示す印加電圧値信号を出力する。
Then, as illustrated in FIG. 19B, the
図19Cは、撮像素子1310の状態を示すタイミング図であり、図19Dは、光電変換部材111に印加される電圧のタイミング図である。
FIG. 19C is a timing diagram showing the state of the
図19C、図19Dに示されるように、撮像素子1310は、制御部1620から出力された撮像開始信号を受け取ると、その受け取ったタイミングで画素回路アレイ120に含まれる画素回路21に蓄積されている電荷量をリセット(初期化)する。また、撮像素子1310は、撮像開始信号を受け取ってから、撮像終了信号を受け取るまでの期間、光電変換部材111に第1電圧を印加することで、光電変換素子110を露光状態とする。そして、撮像素子1310は、撮像終了信号を受け取ると、第1行から第N行まで行単位で順にΔtずつ遅れるタイミングで、画素回路アレイ120に含まれる画素回路21に蓄積されている電荷量の読み出しを行う。一方で、撮像素子1310は、印加電圧値信号を受け取ると、その印加電圧値信号を受け取っている期間、光電変換部材111に、その印加電圧氏信号が示す第3電圧を印加することで、光電変換部材111を露光状態とする。
As shown in FIGS. 19C and 19D, when the
このように、撮像装置5は、画素回路21に蓄積されている電荷量の読み出しを、画素回路アレイ120における行単位で順に行う一方で、その読み出しの期間中に、出力画像における輝度の分布が、より平坦な分布となるように、積極的に光電変換部材111を露光状態とする。
As described above, the
これにより、この撮像装置5は、出力画像における輝度の差が低減されるように、行単位でその輝度の差を調整することができる。
As a result, the
なお、図19Dにおいて、あたかも第3電圧が第1電圧よりも低いように記載されているが、第3電圧は、第1所定範囲の電圧であれば、必ずしも第1電圧よりも低い電圧である場合に限られない。例えば、第3電圧は、第1電圧よりも高くても良いし、同じでも良い。さらには、例えば、第3電圧は、第1所定範囲において、動的に変動するとしてもよい。 19D, it is described as if the third voltage is lower than the first voltage, but the third voltage is necessarily lower than the first voltage as long as it is within the first predetermined range. Not limited to cases. For example, the third voltage may be higher than or equal to the first voltage. Furthermore, for example, the third voltage may dynamically change in the first predetermined range.
また、図19Dにおいて、あたかも追加露光期間T2が、読み出し期間の後半に位置するように記載されているが、追加露光期間T2は、読み出し期間内であれば、必ずしも読み出し期間の後半に位置する場合に限られない。例えば、追加露光期間T2は、読み出し期間の前半に位置していても良いし、読み出し期間の全体に位置していても構わない。さらには、例えば、追加露光期間T2は、互いに連続しない複数の期間に分かれていても構わない。 Further, in FIG. 19D, although it is described that the additional exposure period T2 is located in the latter half of the reading period, the additional exposure period T2 is necessarily located in the latter half of the reading period as long as it is within the reading period. Not limited to For example, the additional exposure period T2 may be located in the first half of the reading period, or may be located in the entire reading period. Furthermore, for example, the additional exposure period T2 may be divided into a plurality of periods that are not continuous with each other.
[5−2.効果等]
上述したように、本開示に係る撮像装置5は、出力画像における輝度の差が低減されるように、行単位でその輝度の差を調整することができる。[5-2. Effect, etc.]
As described above, the
従って、本開示に係る撮像装置5によると、出力画像における輝度の差が低減されるように、行単位でその輝度の差を調整することができない従来の撮像装置よりも、撮像する画像における画質を向上させることが可能となる。
Therefore, according to the
なお、本実施の形態5において、撮像素子1310は、画素回路21に蓄積されている電荷量の読み出しを、行単位で行うとして説明した。しかしながら、電荷量の読み出しは、1以上の画素回路21からなる画素回路ブロック単位で行われれば、必ずしも行単位で行われる例に限定されない。
Note that, in the fifth embodiment, the
(補足)
以上のように、本出願において開示する技術の例示として、実施の形態1〜実施の形態5について説明した。しかしながら、本開示における技術は、これらに限定されず、適宜、変更、置き換え、付加、省略等を行った実施の形態にも適用可能である。(Supplement)
As described above, the first to fifth embodiments have been described as examples of the technology disclosed in the present application. However, the technology in the present disclosure is not limited to these, and can be applied to the embodiment in which changes, replacements, additions, omissions, etc. are appropriately made.
(1)実施の形態1において、撮像装置1は、光電変換部材111が、第1所定範囲の電圧が印加された状態において受光することで内部光電効果による電荷を生成し、第2所定範囲の電圧が印加された状態において受光しても内部光電効果による電荷を生成しない機能を有する有機薄膜であるとして説明した。
(1) In the first embodiment, in the image pickup apparatus 1, when the
しかしながら、光電変換部材111は、内部光電効果による電荷の生成の有無を、印加電圧によって制御することができる部材であれば、必ずしも上記有機薄膜に限定される必要はない。一例として、撮像装置1は、光電変換部材111が、PN接合面を有するダイオードである例等が考えられる。
However, the
(2)実施の形態1において、所定の露光期間T1は、予め定められた所定の期間であるとして説明した。 (2) In the first embodiment, the predetermined exposure period T1 has been described as a predetermined period.
これに対して、露光期間T1は、予め定められた所定の期間ではなく、例えば、撮像装置1を利用するユーザによって設定可能であるとしても構わない。 On the other hand, the exposure period T1 is not limited to a predetermined period, and may be settable by, for example, a user who uses the imaging device 1.
また、実施の形態4において、所定割合Aは、予め定められた所定の割合であるとして説明した。 Further, in the fourth embodiment, the predetermined ratio A has been described as a predetermined ratio.
これに対して、割合Aは、予め定められた所定の割合ではなく、例えば、撮像装置4を利用するユーザによって設定可能であるとしても構わない。 On the other hand, the ratio A may not be a predetermined ratio and may be settable by a user who uses the imaging device 4, for example.
(3)実施の形態4において、所定割合Aは、Aが1未満の数であるとして説明した。しかしながら、必ずしも、Aが1未満の数である場合に限られる必要はなく、Aが1より大きな数である場合の例も考えらえる。 (3) In the fourth embodiment, the predetermined ratio A has been described as A being a number less than 1. However, it is not necessarily limited to the case where A is a number less than 1, and an example where A is a number larger than 1 can be considered.
この場合には、光電変換部材111に集光される外部の光の光量が、露光時間T1かけて、A倍までリニアに増加するように、絞り214の絞り量を増加させて、光電変換部材111における光電変換効率が、露光期間T1かけて、1/A倍までリニアに減少するように、光電変換部材111に印加する電圧を第1所定範囲内において減少させることとなる。
In this case, the aperture amount of the
(4)本開示には、実施の形態1〜実施の形態5における撮像装置1〜撮像装置5が内蔵された電子機器も含まれるのは言うまでもない。
(4) It goes without saying that the present disclosure also includes electronic devices that incorporate the imaging device 1 to the
このような電子機器は、例えば、図20Aに示されるデジタルスチルカメラや、図20Bに示されるビデオカメラとして実現される。 Such an electronic device is realized as, for example, the digital still camera shown in FIG. 20A or the video camera shown in FIG. 20B.
(5)実施の形態において、図1に示されるように、撮像装置1は、光学系210とは別体となる構成であるとして説明した。しかしながら、撮像装置1は、必ずしも光学系210と別体となる構成に限定されない。例えば、撮像装置1は、光学系210とレンズ駆動部220とを含む、レンズ付きカメラであっても構わない。
(5) In the embodiment, as described in FIG. 1, the image pickup apparatus 1 has been described as a configuration separate from the
(6)撮像装置1〜撮像装置5における各構成要素(機能ブロック)は、IC(Integrated Circuit)、LSI(Large Scale Integration)等の半導体装置により個別に1チップ化されてもよいし、一部又は全部を含むように1チップ化されてもよい。また、集積回路化の手法はLSIに限るものではなく、専用回路又は汎用プロセッサで実現してもよい。LSI製造後に、プログラムすることが可能なFPGA(Field Programmable Gate Array)や、LSI内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサを利用してもよい。更には、半導体技術の進歩又は派生する別技術によりLSIに置き換わる集積回路化の技術が登場すれば、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適用等が可能性としてあり得る。
(6) Each component (functional block) in the imaging device 1 to the
また、上記各種処理の全部又は一部は、電子回路等のハードウェアにより実現されても、ソフトウェアを用いて実現されてもよい。なお、ソフトウェアによる処理は、撮像装置1に含まれるプロセッサがメモリに記憶されたプログラムを実行することにより実現されるものである。また、そのプログラムを記録媒体に記録して頒布や流通させてもよい。例えば、頒布されたプログラムを、他のプロセッサを有する装置にインストールして、そのプログラムをそのプロセッサに実行させることで、その装置に、上記各処理を行わせることが可能となる。 In addition, all or part of the various processes described above may be realized by hardware such as an electronic circuit or software. Note that the processing by software is realized by the processor included in the imaging device 1 executing the program stored in the memory. The program may be recorded in a recording medium and distributed or distributed. For example, by installing the distributed program in a device having another processor and causing the processor to execute the program, the device can be made to perform each of the above processes.
また、上述した実施の形態で示した構成要素及び機能を任意に組み合わせることで実現される形態も本開示の範囲に含まれる。 Further, a form realized by arbitrarily combining the constituent elements and functions shown in the above-described embodiment is also included in the scope of the present disclosure.
(7)本開示の一態様に係る撮像装置1は、第1所定範囲の電圧が印加された露光状態において受光することで内部光電効果による電荷を生成する光電変換部材111と、光電変換部材111によって生成された電荷を画素単位で蓄積する複数の画素回路21と、複数の画素回路21のそれぞれに蓄積されている電荷量を読み出す読み出し回路130と、読み出し回路130によって読み出された電荷量のそれぞれに基づく画素値からなる出力画像を出力する出力回路140とを含む撮像素子10と、第2所定範囲の電圧が印加された遮光状態の光電変換部材111によって生成される電荷による、前記出力画像への影響を低減する低減部40とを備える。
(7) The imaging device 1 according to an aspect of the present disclosure includes a
この撮像装置1は、遮光状態の光電変換部材111によって生成される電荷による、出力画像への影響を低減する。このため、この撮像装置1によると、撮像する画像における画質を、従来の撮像装置によって撮像される画像における画質に対して向上し得る。
The imaging device 1 reduces the influence on the output image due to the electric charge generated by the
また、例えば、読み出し回路130は、前記読み出しを、光電変換部材111が前記遮光状態である期間において、1以上の画素回路21からなる画素回路ブロック単位で、第1画素回路ブロックから第N(Nは2以上の整数)画素回路ブロックへと順に行うことで行い、低減部40は、前記低減を、各画素回路ブロックを対象として、前記第1画素回路ブロックの画素回路21との、読み出し回路130による前記読み出しが実行される時刻の時間差に応じて、当該対象とする画素回路ブロックに対応する、前記出力画像の画素値を補正することで行うとしてもよい。
In addition, for example, the
これにより、この撮像装置1は、各画素回路ブロックの、読み出しが実行される時刻の時間差に起因する画質の劣化を低減し得る。 As a result, the image pickup apparatus 1 can reduce the deterioration of the image quality of each pixel circuit block due to the time difference between the times when the reading is executed.
また、例えば、低減部40は、前記補正を、各画素回路ブロックを対象として、当該対象とする画素回路ブロックに対応する、前記出力画像の画素値に対して、前記時間差がより大きい程より小さくなる1以下の補正係数を乗算することで行うとしてもよい。
In addition, for example, the
これにより、この撮像装置1は、各画素回路ブロックの、読み出しが実行される時刻の時間差に起因する画質の劣化の低減を、比較的平易な演算により実現することが可能となる。 As a result, the image pickup apparatus 1 can realize the reduction of the deterioration of the image quality of each pixel circuit block due to the time difference between the times when the reading is executed, by a relatively simple calculation.
また、例えば、読み出し回路130は、前記読み出しを、光電変換部材111が前記遮光状態である期間において、1以上の画素回路21からなる画素回路ブロック単位で、第1画素回路ブロックから第N(Nは2以上の整数)画素回路ブロックへと順に行うことで行い、さらに、光電変換部材111が前記遮光状態である期間において、前記画素回路ブロック単位で、前記第N画素回路ブロックから前記第1画素回路ブロックへと順に、複数の画素回路21のそれぞれに蓄積されている電荷量を読み出す逆方向読み出し回路130Bと、逆方向読み出し回路130Bによって読み出された電荷量それぞれに基づく画素値からなる逆方向出力画像を出力する逆方向出力回路140Bとを備え、低減部40は、前記低減を、前記出力画像に前記逆方向出力画像を合成することで行うとしてもよい。
In addition, for example, the
これにより、この撮像装置1は、各画素回路ブロックの、読み出しが実行される時刻の時間差に起因する画質の劣化を低減し得る。 As a result, the image pickup apparatus 1 can reduce the deterioration of the image quality of each pixel circuit block due to the time difference between the times when the reading is executed.
また、例えば、低減部40は、前記合成を、前記出力画像の各画素値に、当該画素値に対応する位置の、前記逆方向出力画像の画素値を加算する処理を含む処理を実行することで行うとしてもよい。
Further, for example, the
これにより、この撮像装置1は、各画素回路ブロックの、読み出しが実行される時刻の時間差に起因する画質の劣化の低減を、比較的平易な演算により実現することが可能となる。 As a result, the image pickup apparatus 1 can realize the reduction of the deterioration of the image quality of each pixel circuit block due to the time difference between the times when the reading is executed, by a relatively simple calculation.
また、例えば、さらに、光電変換部材111に外部の光を集光するレンズと、前記レンズによって集光される光の量を調整する絞り214とを備え、低減部40は、前記低減を、光電変換部材111が前記遮光状態である期間のうちの少なくとも一部の期間、絞り214を絞ることで行うとしてもよい。
In addition, for example, the
これにより、この撮像装置1は、遮光状態の光電変換部材111に集光される光に起因する画質の劣化を低減し得る。
Thereby, the image pickup apparatus 1 can reduce the deterioration of the image quality due to the light condensed on the
また、例えば、前記一部の期間には、光電変換部材111の状態が前記露光状態から前記遮光状態へと変更された時点から、当該時点以降において、最初に、読み出し回路130による前記読み出しが完了する時点までの期間が含まれるとしてもよい。
Further, for example, during the part of the period, the reading by the
これにより、この撮像装置1は、上記期間において、遮光状態の光電変換部材111に集光される光に起因する画質の劣化を低減し得る。
As a result, the image pickup apparatus 1 can reduce the deterioration of the image quality due to the light condensed on the
本開示の一態様に係る撮像装置1は、第1所定範囲の電圧が印加された露光状態において受光することで内部光電効果による電荷を生成する光電変換部材111であって、印加される前記第1所定範囲の電圧に応じて、電圧がより高い程、より光電変換効率が高くなるように前記電荷の生成を行う光電変換部材111と、光電変換部材111によって生成された電荷を画素単位で蓄積する複数の画素回路21と、複数の画素回路21のそれぞれに蓄積されている電荷量を読み出す読み出し回路130と、読み出し回路130によって読み出された電荷量のそれぞれに基づく画素値からなる出力画像を出力する出力回路140とを含む撮像素子10と、光電変換部材111に印加される電圧を制御する電圧制御部1340とを備える。
An image pickup apparatus 1 according to an aspect of the present disclosure is a
この撮像装置1は、光電変換部材111における光電変換効率を制御することが可能である。このため、この撮像装置1によると、撮像する画像における画質を、従来の撮像装置によって撮像される画像における画質に対して向上し得る。
The imaging device 1 can control the photoelectric conversion efficiency of the
また、例えば、さらに、光電変換部材111に外部の光を集光するレンズと、前記レンズによって集光される光の量を調整する絞り214とを備え、電圧制御部1340は、前記制御を、光電変換部材111が前記露光状態である場合において、絞り214の絞り量が変化するときには、当該変化に応じて、光電変換部材111に印加される電圧が変化するように行うとしてもよい。
Further, for example, the
これにより、この撮像装置1は、撮像中に絞り量が変化することに起因する画質の劣化を低減することができるようになる。 As a result, the image pickup apparatus 1 can reduce the deterioration of the image quality due to the change of the diaphragm amount during the image pickup.
また、例えば、電圧制御部1340は、前記制御を、光電変換部材111が前記露光状態である場合において、絞り214の絞り量が増加するように変化するときには、当該変化に応じて、光電変換部材111に印加する電圧が増加されるように行うとしてもよい。
Further, for example, when the
これにより、この撮像装置1は、撮像中に絞り量が増加することに起因する画質の劣化を低減することができるようになる。 As a result, the image pickup apparatus 1 can reduce the deterioration of the image quality due to the increase of the diaphragm amount during the image pickup.
また、例えば、読み出し回路130は、前記読み出しを、1以上の画素回路21からなる画素回路ブロック単位で、第1画素回路ブロックから第N(Nは2以上の整数)画素回路ブロックへと順に行い、電圧制御部1340は、前記制御を、読み出し回路130による前記読み出しの開始時点から終了時点までの少なくとも一部の期間に、光電変換部材111に前記第1所定範囲の電圧が印加されるように行うとしてもよい。
Further, for example, the
これにより、この撮像装置1は、画素回路ブロック単位で、露光期間の調整を実現することが可能となる。 As a result, the image pickup apparatus 1 can realize the adjustment of the exposure period for each pixel circuit block.
また、例えば、さらに、読み出し回路130が前記読み出しを開始する時点における、複数の画素回路21のそれぞれに蓄積されていると推定される電荷の量を示す推定電荷量の、複数の画素回路21における第1分布に係る情報を取得する取得部1650を備え、電圧制御部1340は、前記制御を、取得部1650によって取得された情報に基づいて、前記第1分布よりも、読み出し回路130によって読み出される電荷量の、複数の画素回路21における分布の方が、より平坦な分布となるように行うとしてもよい。
Further, for example, in the plurality of
これにより、この撮像装置1は、出力画像における輝度の分布を平坦化することが可能となる。 As a result, the image pickup apparatus 1 can flatten the luminance distribution in the output image.
また、例えば、撮像素子10は、有機薄膜を光電変換部材111とする有機CMOSイメージセンサであるとしてもよい。
Further, for example, the
これにより、撮像素子10の高集積化を実現することが可能となる。
As a result, high integration of the
本開示の一態様に係るカメラは、撮像装置1と、撮像素子10に外部の光を集光するレンズとを備える。
A camera according to an aspect of the present disclosure includes an imaging device 1 and a lens that focuses external light on an
このカメラは、遮光状態の光電変換部材111によって生成される電荷による、出力画像への影響を低減、又は、光電変換部材111における光電変換効率を制御する。このため、このカメラによると、撮像する画像における画質を、従来のカメラによって撮像される画像における画質に対して向上し得る。
This camera reduces the influence on the output image due to the charges generated by the
また、例えば、撮像素子10は、有機薄膜を前記光電変換部材とする有機CMOSイメージセンサであるとしてもよい。
Further, for example, the
これにより、撮像素子10の高集積化を実現することが可能となる。
As a result, high integration of the
本開示の一態様に係る撮像方法は、撮像素子10と低減部40とを備える撮像装置1が行う撮像方法であって、撮像素子10は、第1所定範囲の電圧が印加された露光状態において受光することで内部光電効果による電荷を生成する光電変換部材111と、光電変換部材111によって生成された電荷を画素単位で蓄積する複数の画素回路21と、複数の画素回路21のそれぞれに蓄積されている電荷量を読み出す読み出し回路130と、読み出し回路130によって読み出された電荷量のそれぞれに基づく画素値からなる出力画像を出力する出力回路140とを含み、出力回路140が、出力画像を出力する出力ステップと、低減部40が、第2所定範囲の電圧が印加された遮光状態の光電変換部材111によって生成される電荷による、前記出力画像への影響を低減する低減ステップとを含む。
An imaging method according to an aspect of the present disclosure is an imaging method performed by an imaging device 1 including an
この撮像方法は、遮光状態の光電変換部材111によって生成される電荷による、出力画像への影響を低減する。このため、この撮像方法によると、撮像する画像における画質を、従来の撮像方法によって撮像される画像における画質に対して向上し得る。
This imaging method reduces the influence on the output image by the electric charge generated by the
本開示の一態様に係る撮像方法は、撮像素子10と電圧制御部1340とを備える撮像装置1が行う撮像方法であって、撮像素子10は、第1所定範囲の電圧が印加された露光状態において受光することで内部光電効果による電荷を生成する光電変換部材111であって、印加される前記第1所定範囲の電圧に応じて、電圧がより高い程、より光電変換効率が高くなるように前記電荷の生成を行う光電変換部材111と、光電変換部材111によって生成された電荷を画素単位で蓄積する複数の画素回路21と、複数の画素回路21のそれぞれに蓄積されている電荷量を読み出す読み出し回路130と、読み出し回路130によって読み出された電荷量のそれぞれに基づく画素値からなる出力画像を出力する出力回路140とを含み、電圧制御部1340が、光電変換部材111に印加される電圧を制御する電圧制御ステップと、出力回路140が、前記出力画像を出力する出力ステップとを含む。
An imaging method according to an aspect of the present disclosure is an imaging method performed by an imaging device 1 including an
この撮像方法は、光電変換部材111における光電変換効率を制御することが可能である。このため、この撮像方法によると、撮像する画像における画質を、従来の撮像方法によって撮像される画像における画質に対して向上し得る。
This imaging method can control the photoelectric conversion efficiency of the
本開示は、画像を撮像する撮像装置に広く利用可能である。 The present disclosure can be widely used for an imaging device that captures an image.
1、2、3、4、5 撮像装置
10、610、1310 撮像素子
20、620、1120、1320、1620 制御部
21 画素回路
40、640、1140 低減部
110 光電変換素子
111 光電変換部材
112 上部透明電極
113 下部画素電極
120 画素回路アレイ
130 読み出し回路
130B 逆方向読み出し回路
140 出力回路
140B 逆方向出力回路
150 行走査回路(初期化回路)
160、160B、160C タイミング制御回路
170 電圧印加回路
200、600、1100、1300、1600 カメラ
211 ズームレンズ
212 手振れ補正レンズ
213 フォーカスレンズ
214 絞り
1340、1640 電圧制御部
1650 取得部1, 2, 3, 4, 5
160, 160B, 160C
Claims (15)
第2所定範囲の電圧が印加された遮光状態の前記光電変換部材によって生成される電荷による、前記出力画像への影響を低減する低減部とを備え、
前記読み出し回路は、前記読み出しを、前記光電変換部材が前記遮光状態である期間において、1以上の画素回路からなる画素回路ブロック単位で、第1画素回路ブロックから第N(Nは2以上の整数)画素回路ブロックへと順に行うことで行い、
さらに、前記光電変換部材が前記遮光状態である期間において、前記画素回路ブロック単位で、前記第N画素回路ブロックから前記第1画素回路ブロックへと順に、前記複数の画素回路のそれぞれに蓄積されている電荷量を読み出す逆方向読み出し回路と、
前記逆方向読み出し回路によって読み出された電荷量それぞれに基づく画素値からなる逆方向出力画像を出力する逆方向出力回路とを備え、
前記低減部は、前記低減を、前記出力画像に前記逆方向出力画像を合成することで行う
撮像装置。 A photoelectric conversion member that generates charges due to an internal photoelectric effect by receiving light in an exposure state in which a voltage in a first predetermined range is applied, and a plurality of pixel circuits that accumulate the charges generated by the photoelectric conversion member in pixel units. An imaging circuit that includes a read circuit that reads the amount of charge accumulated in each of the plurality of pixel circuits, and an output circuit that outputs an output image composed of pixel values based on each of the charge amounts read by the read circuit Element,
A reducing unit configured to reduce an influence on the output image by an electric charge generated by the photoelectric conversion member in a light-shielded state to which a voltage in a second predetermined range is applied ,
The readout circuit performs the readout from the first pixel circuit block to the Nth pixel unit (N is an integer of 2 or more) in units of pixel circuit blocks including one or more pixel circuits during the period in which the photoelectric conversion member is in the light shielding state. ) Do it by going to the pixel circuit block in order,
Further, in the period in which the photoelectric conversion member is in the light shielding state, the pixel circuit blocks are accumulated in each of the plurality of pixel circuits in order from the Nth pixel circuit block to the first pixel circuit block. A reverse direction reading circuit for reading the amount of electric charge
A reverse direction output circuit for outputting a reverse direction output image composed of pixel values based on respective charge amounts read by the reverse direction reading circuit,
The said reduction part is an imaging device which performs the said reduction by synthesize|combining the said reverse direction output image with the said output image .
前記低減部は、前記低減を、各画素回路ブロックを対象として、前記第1画素回路ブロックの画素回路との、前記読み出し回路による前記読み出しが実行される時刻の時間差に応じて、当該対象とする画素回路ブロックに対応する、前記出力画像の画素値を補正することで行う
請求項1に記載の撮像装置。 The readout circuit performs the readout from the first pixel circuit block to the Nth pixel unit (N is an integer of 2 or more) in units of pixel circuit blocks including one or more pixel circuits during the period in which the photoelectric conversion member is in the light shielding state. ) Do it by going to the pixel circuit block in order,
The reduction unit targets the reduction in each pixel circuit block according to a time difference between the pixel circuit of the first pixel circuit block and the time at which the readout circuit performs the readout. The image pickup apparatus according to claim 1, wherein the image pickup apparatus is performed by correcting a pixel value of the output image corresponding to a pixel circuit block.
請求項2に記載の撮像装置。 The reduction unit performs the correction on each pixel circuit block as a target, and with respect to the pixel value of the output image corresponding to the target pixel circuit block, becomes smaller as the time difference becomes 1 or less. The image pickup apparatus according to claim 2, which is performed by multiplying by a correction coefficient.
請求項1に記載の撮像装置。 The reduction unit performs the synthesis by performing a process including a process of adding a pixel value of the backward output image at a position corresponding to the pixel value to each pixel value of the output image. The imaging device according to 1.
前記光電変換部材に外部の光を集光するレンズと、
前記レンズによって集光される光の量を調整する絞りとを備え、
前記低減部は、前記低減を、前記光電変換部材が前記遮光状態である期間のうちの少なくとも一部の期間、前記絞りを絞ることで行う
請求項1に記載の撮像装置。 further,
A lens that collects external light on the photoelectric conversion member,
A diaphragm for adjusting the amount of light collected by the lens,
The image pickup apparatus according to claim 1, wherein the reduction unit performs the reduction by narrowing the diaphragm for at least a part of a period in which the photoelectric conversion member is in the light shielding state.
請求項5に記載の撮像装置。 In the part of the period, from the time when the state of the photoelectric conversion member is changed from the exposure state to the light shielding state, to the time point after which the reading by the reading circuit is first completed after the time point. The imaging device according to claim 5 , which includes a period.
前記光電変換部材に印加される電圧を制御する電圧制御部とを備え、
さらに、
前記光電変換部材に外部の光を集光するレンズと、
前記レンズによって集光される光の量を調整する絞りとを備え、
前記電圧制御部は、前記制御を、前記光電変換部材が前記露光状態である場合において、前記絞りの絞り量が変化するときには、当該変化に応じて、前記光電変換部材に印加される電圧が変化するように行う
撮像装置。 A photoelectric conversion member that generates charges due to an internal photoelectric effect by receiving light in an exposure state in which a voltage in a first predetermined range is applied, and the voltage is higher depending on the voltage in the first predetermined range applied. A photoelectric conversion member that generates the electric charges so that the photoelectric conversion efficiency is higher, a plurality of pixel circuits that accumulate the electric charges generated by the photoelectric conversion members in pixel units, and each of the plurality of pixel circuits. An image sensor including a read circuit for reading the amount of electric charge accumulated in the output circuit, and an output circuit for outputting an output image composed of pixel values based on the respective electric charge amounts read by the read circuit;
A voltage control unit for controlling the voltage applied to the photoelectric conversion member ,
further,
A lens that collects external light on the photoelectric conversion member,
A diaphragm for adjusting the amount of light collected by the lens,
When the photoelectric conversion member is in the exposure state, when the diaphragm amount of the diaphragm changes, the voltage control unit changes the voltage applied to the photoelectric conversion member according to the change. An imaging device that is configured to perform .
請求項7に記載の撮像装置。 When the photoelectric conversion member is in the exposure state, the voltage control unit applies the control to the photoelectric conversion member according to the change when the diaphragm amount of the diaphragm changes so as to increase. The imaging device according to claim 7 , wherein the imaging device is operated so that the voltage is increased.
前記電圧制御部は、前記制御を、前記読み出し回路による前記読み出しの開始時点から終了時点までの少なくとも一部の期間に、前記光電変換部材に前記第1所定範囲の電圧が印加されるように行う
請求項7に記載の撮像装置。 The readout circuit sequentially performs the readout for each pixel circuit block including one or more pixel circuits, from the first pixel circuit block to the Nth (N is an integer of 2 or more) pixel circuit block,
The voltage control unit performs the control so that the voltage within the first predetermined range is applied to the photoelectric conversion member during at least a part of the period from the start time to the end time of the reading by the reading circuit. The imaging device according to claim 7 .
前記読み出し回路が前記読み出しを開始する時点における、前記複数の画素回路のそれぞれに蓄積されていると推定される電荷の量を示す推定電荷量の、前記複数の画素回路における第1分布に係る情報を取得する取得部を備え、
前記電圧制御部は、前記制御を、前記取得部によって取得された情報に基づいて、前記第1分布よりも、前記読み出し回路によって読み出される電荷量の、前記複数の画素回路における分布の方が、より平坦な分布となるように行う
請求項9に記載の撮像装置。 further,
Information related to the first distribution in the plurality of pixel circuits of the estimated charge amount indicating the amount of charges estimated to be accumulated in each of the plurality of pixel circuits at the time when the readout circuit starts the reading An acquisition unit for acquiring
The voltage control unit performs the control based on the information acquired by the acquisition unit, in the distribution of the charge amount read by the readout circuit in the plurality of pixel circuits, rather than in the first distribution. The image pickup apparatus according to claim 9 , wherein the image pickup apparatus has a flatter distribution.
請求項1〜10のいずれか1項に記載の撮像装置。 The imaging device, the imaging device according to any one of claims 1 to 10 which is an organic CMOS image sensor to the organic thin film and the photoelectric conversion member.
前記撮像素子に外部の光を集光するレンズとを備える
カメラ。 An imaging device according to any one of claims 1-4,
A camera comprising a lens that collects external light on the image sensor.
請求項12に記載のカメラ。 The camera according to claim 12 , wherein the image sensor is an organic CMOS image sensor having an organic thin film as the photoelectric conversion member.
前記撮像素子は、第1所定範囲の電圧が印加された露光状態において受光することで内部光電効果による電荷を生成する光電変換部材と、前記光電変換部材によって生成された電荷を画素単位で蓄積する複数の画素回路と、前記複数の画素回路のそれぞれに蓄積されている電荷量を読み出す読み出し回路と、前記読み出し回路によって読み出された電荷量のそれぞれに基づく画素値からなる出力画像を出力する出力回路とを含み、
前記出力回路が、出力画像を出力する出力ステップと、
前記低減部が、第2所定範囲の電圧が印加された遮光状態の前記光電変換部材によって生成される電荷による、前記出力画像への影響を低減する低減ステップとを含み、
前記読み出し回路は、前記読み出しを、前記光電変換部材が前記遮光状態である期間において、1以上の画素回路からなる画素回路ブロック単位で、第1画素回路ブロックから第N(Nは2以上の整数)画素回路ブロックへと順に行うことで行い、
前記撮像装置は、さらに、前記光電変換部材が前記遮光状態である期間において、前記画素回路ブロック単位で、前記第N画素回路ブロックから前記第1画素回路ブロックへと順に、前記複数の画素回路のそれぞれに蓄積されている電荷量を読み出す逆方向読み出し回路と、前記逆方向読み出し回路によって読み出された電荷量それぞれに基づく画素値からなる逆方向出力画像を出力する逆方向出力回路とを備え、
前記低減ステップでは、前記低減を、前記出力画像に前記逆方向出力画像を合成することで行う
撮像方法。 An imaging method performed by an imaging device including an imaging element and a reduction unit,
The image pickup element accumulates, in pixel units, a photoelectric conversion member that generates charges due to an internal photoelectric effect by receiving light in an exposure state where a voltage in a first predetermined range is applied, and a charge generated by the photoelectric conversion member. An output that outputs an output image including a plurality of pixel circuits, a readout circuit that reads out the amount of charge accumulated in each of the plurality of pixel circuits, and a pixel value based on each of the amounts of charge that are read out by the readout circuit Circuit and
An output step in which the output circuit outputs an output image,
The reduction unit, due to charge generated by the photoelectric conversion element of the light-shielding state in which a voltage of the second predetermined range is applied, seen including a reduction step of reducing the influence on the output image,
The readout circuit performs the readout from the first pixel circuit block to the Nth pixel unit (N is an integer of 2 or more) in units of pixel circuit blocks including one or more pixel circuits during the period in which the photoelectric conversion member is in the light shielding state. ) Do it by going to the pixel circuit block in order,
In the image pickup device, in the period in which the photoelectric conversion member is in the light-shielded state, the image pickup device further includes, in units of the pixel circuit block, from the Nth pixel circuit block to the first pixel circuit block in order. A reverse direction reading circuit for reading the amount of charge accumulated in each, and a reverse direction output circuit for outputting a reverse direction output image composed of pixel values based on the respective charge amounts read by the reverse direction reading circuit,
In the reduction step, the reduction method is performed by combining the output image with the backward output image .
前記撮像素子は、第1所定範囲の電圧が印加された露光状態において受光することで内部光電効果による電荷を生成する光電変換部材であって、印加される前記第1所定範囲の電圧に応じて、電圧がより高い程、より光電変換効率が高くなるように前記電荷の生成を行う光電変換部材と、前記光電変換部材によって生成された電荷を画素単位で蓄積する複数の画素回路と、前記複数の画素回路のそれぞれに蓄積されている電荷量を読み出す読み出し回路と、前記読み出し回路によって読み出された電荷量のそれぞれに基づく画素値からなる出力画像を出力する出力回路とを含み、
前記電圧制御部が、前記光電変換部材に印加される電圧を制御する電圧制御ステップと、
前記出力回路が、前記出力画像を出力する出力ステップとを含み、
前記撮像装置は、さらに、前記光電変換部材に外部の光を集光するレンズと、前記レンズによって集光される光の量を調整する絞りとを備え、
前記電圧制御ステップでは、前記電圧制御部は、前記制御を、前記光電変換部材が前記露光状態である場合において、前記絞りの絞り量が変化するときには、当該変化に応じて、前記光電変換部材に印加される電圧が変化するように行う
撮像方法。 An imaging method performed by an imaging device including an imaging element and a voltage control unit,
The image pickup device is a photoelectric conversion member that generates electric charges due to an internal photoelectric effect by receiving light in an exposure state in which a voltage in a first predetermined range is applied, and the image pickup device is responsive to the applied voltage in the first predetermined range. A photoelectric conversion member that generates the electric charge so that the higher the voltage is, the higher the photoelectric conversion efficiency is; a plurality of pixel circuits that accumulate the electric charge generated by the photoelectric conversion member in a pixel unit; A read circuit for reading the amount of charge accumulated in each of the pixel circuits, and an output circuit for outputting an output image composed of pixel values based on each of the charge amounts read by the read circuit,
The voltage control unit, a voltage control step of controlling the voltage applied to the photoelectric conversion member,
Said output circuit, see contains an output step of outputting the output image,
The image pickup device further includes a lens that collects external light on the photoelectric conversion member, and a diaphragm that adjusts the amount of light collected by the lens.
In the voltage control step, the voltage control unit controls the photoelectric conversion member according to the change when the diaphragm amount of the diaphragm changes when the photoelectric conversion member is in the exposure state. An imaging method in which the applied voltage is changed .
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016254502 | 2016-12-27 | ||
JP2016254502 | 2016-12-27 | ||
PCT/JP2017/046590 WO2018124046A1 (en) | 2016-12-27 | 2017-12-26 | Image-capture device, camera, and image-capture method |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2018124046A1 JPWO2018124046A1 (en) | 2019-07-11 |
JP6706850B2 true JP6706850B2 (en) | 2020-06-10 |
Family
ID=62709447
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018559505A Active JP6706850B2 (en) | 2016-12-27 | 2017-12-26 | Imaging device, camera, and imaging method |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6706850B2 (en) |
WO (1) | WO2018124046A1 (en) |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6233718B2 (en) * | 2012-12-27 | 2017-11-22 | パナソニックIpマネジメント株式会社 | Imaging apparatus and driving method thereof |
JP2013243781A (en) * | 2013-08-27 | 2013-12-05 | Sony Corp | Image sensor and control method thereof and camera |
JP2016039392A (en) * | 2014-08-05 | 2016-03-22 | ソニー株式会社 | Imaging apparatus and pixel signal reading method |
JP6572524B2 (en) * | 2014-09-05 | 2019-09-11 | リコーイメージング株式会社 | Imaging apparatus and imaging method |
JP2016134654A (en) * | 2015-01-15 | 2016-07-25 | キヤノン株式会社 | Imaging device and control method therefor |
-
2017
- 2017-12-26 WO PCT/JP2017/046590 patent/WO2018124046A1/en active Application Filing
- 2017-12-26 JP JP2018559505A patent/JP6706850B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JPWO2018124046A1 (en) | 2019-07-11 |
WO2018124046A1 (en) | 2018-07-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6731626B2 (en) | Imaging device, camera, and imaging method | |
JP6278713B2 (en) | Imaging apparatus and imaging method | |
KR101321778B1 (en) | Image pickup apparatus and image sensor | |
JP2017183563A (en) | Imaging apparatus, driving method, and electronic apparatus | |
JP4745735B2 (en) | Image input apparatus and control method thereof | |
JP5222068B2 (en) | Imaging device | |
JP6706850B2 (en) | Imaging device, camera, and imaging method | |
KR20170077784A (en) | Solid-state image pickup element and image pickup apparatus | |
US10623642B2 (en) | Image capturing apparatus and control method thereof with change, in exposure period for generating frame, of conversion efficiency | |
WO2018124052A1 (en) | Imaging device and camera | |
JP2013118474A (en) | Imaging apparatus and method for controlling imaging apparatus | |
JP5720213B2 (en) | Imaging device | |
JP6664121B2 (en) | Imaging device and camera | |
WO2018124054A1 (en) | Imaging device and method for controlling same | |
JP6706783B2 (en) | Imaging device, imaging device, camera, and imaging method | |
WO2018124048A1 (en) | Imaging device, camera, and imaging method | |
JP2014027520A (en) | Imaging apparatus and image processing method | |
JP7020463B2 (en) | Imaging device | |
JP6590055B2 (en) | Imaging device | |
JP6664066B2 (en) | Imaging device and control method thereof | |
JP2018093301A (en) | Image pick-up device and control method of the same | |
JP2017112501A (en) | Imaging apparatus, control method and program therefor | |
JP2006325066A (en) | Imaging apparatus | |
JP2004336565A (en) | Photoelectric conversion device and digital camera | |
JP2013211780A (en) | Solid state imaging device and imaging apparatus |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190219 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190219 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200407 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200430 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6706850 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |