JP2018148271A

JP2018148271A - Imaging apparatus and control method thereof, and program

Info

Publication number: JP2018148271A
Application number: JP2017038433A
Authority: JP
Inventors: 和樹原口; Kazuki Haraguchi
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2017-03-01
Filing date: 2017-03-01
Publication date: 2018-09-20

Abstract

PROBLEM TO BE SOLVED: To provide an imaging apparatus, a control method thereof, and a program capable of switching readout operations without giving a sense of incompatibility to a user.SOLUTION: When an instruction to switch to second reading operation to read mixed signals of consecutive rows is performed during first reading operation to thin and read out pixels in a unit of row, a ratio (filter ratio) of an H level period in selection signals PSELn to PSELn+2 is set to 1: 8: 1 at the time t602. Next, at the time t603, the filter ratio is set to 1: 4: 1, and at the time t604, the filter ratio is set to 1: 2: 1. Next, the second reading operation is performed at time t605. As a result, after gradually changing the ratio in each selection period of pixels arranged consecutively in a pixel column, switching to the second reading operation is performed.SELECTED DRAWING: Figure 6

Description

本発明は、撮像装置及びその制御方法、並びにプログラムに関する。 The present invention relates to an imaging apparatus, a control method thereof, and a program.

ＣＭＯＳセンサを備える撮像装置としてのデジタルカメラが知られている。ＣＭＯＳセンサには入射した光をアナログ信号に変換する複数の画素が２次元状に所定の間隔で配列されている。ＣＭＯＳセンサは、当初静止画撮影に多く使用されていたが、近年では、動画撮影や、撮影した動画をデジタルカメラの液晶画面にリアルタイムで表示するライブビュー等にも使用されている。 There is known a digital camera as an image pickup apparatus including a CMOS sensor. In the CMOS sensor, a plurality of pixels that convert incident light into an analog signal are two-dimensionally arranged at predetermined intervals. The CMOS sensor is often used for still image shooting at first, but in recent years, it is also used for moving image shooting, live view for displaying the shot moving image on a liquid crystal screen of a digital camera in real time, and the like.

デジタルカメラでは、動画撮影やライブビューを行う際に動画フォーマットの解像度や液晶画面の解像度に応じた数の画素が読み出され、各画素から出力されたアナログ信号に基づいて動画像が生成される。デジタルカメラでは、画素の読み出し動作として、例えば、配列された複数の画素を行単位で選択する際に間引いて、例えば、１行おきに画素の読み出し動作を行う間引き動作が行われている。間引き動作では、比較的鮮明な解像感の良い動画像が生成される一方、色や明るさの急峻な変化（以下、「エッジ」という。）を多く含む高周波な被写体を撮影した際に縞模様のモアレが発生してしまう。 With a digital camera, when performing moving image shooting or live view, the number of pixels corresponding to the resolution of the moving image format or the resolution of the liquid crystal screen is read, and a moving image is generated based on the analog signal output from each pixel. . In the digital camera, as a pixel reading operation, for example, when a plurality of arranged pixels are selected in units of rows, a thinning operation for performing pixel reading operations every other row is performed. In the thinning operation, a moving image with a relatively clear resolution is generated, while stripes are generated when a high-frequency subject including many sharp changes in color and brightness (hereinafter referred to as “edge”) is photographed. Pattern moire occurs.

また、デジタルカメラでは、画素の読み出し動作として、画素が配列された各列において、連続して配列された複数の画素から出力された各アナログ信号の混合信号を読み出す画素混合動作が行われている（例えば、特許文献１参照）。画素混合動作では、モアレの発生が低減された動画像が生成される一方、エッジがぼやけた解像感が悪い動画像が生成される。このように、間引き動作及び画素混合動作には、それぞれ解像感の良さ及びモアレの出にくさのトレードオフが存在し、近年では、撮影シーンに応じて間引き動作及び画素混合動作を適切に切り替え可能なデジタルカメラが強く要求されている。 Further, in the digital camera, as a pixel reading operation, a pixel mixing operation for reading a mixed signal of analog signals output from a plurality of pixels arranged in succession in each column in which pixels are arranged is performed. (For example, refer to Patent Document 1). In the pixel mixing operation, a moving image in which the occurrence of moire is reduced is generated, while a moving image with a blurred edge and a poor resolution is generated. As described above, there is a trade-off between the thinning operation and the pixel mixing operation in terms of good resolution and difficulty in producing moire, and in recent years, the thinning operation and the pixel mixing operation are appropriately switched according to the shooting scene. There is a strong demand for possible digital cameras.

特開２０１０−２５９０２７号公報JP 2010-259027 A

しかしながら、間引き動作及び画素混合動作の各々で生成される動画像において、解像感やモアレの発生具合等といった画質が大きく異なるので、間引き動作及び画素混合動作を切り替えた際に動画像の画質が大きく変化してしまう。その結果、ユーザに違和感を与えてしまうという問題が生じる。 However, in moving images generated by the thinning operation and the pixel mixing operation, the image quality such as a sense of resolution and moiré is greatly different. Therefore, when the thinning operation and the pixel mixing operation are switched, the image quality of the moving image is different. It will change greatly. As a result, there arises a problem that the user feels uncomfortable.

本発明の目的は、ユーザに違和感を与えることなく読み出し動作を切り替えることができる撮像装置及びその制御方法、並びにプログラムを提供することにある。 An object of the present invention is to provide an imaging apparatus capable of switching a readout operation without causing a user to feel uncomfortable, a control method therefor, and a program.

上記目的を達成するために、本発明の撮像装置は、複数の画素が２次元状に配列された撮像素子を備える撮像装置であって、前記撮像素子において行単位で選択された各画素の信号を列毎に読み出す制御を行う読み出し制御手段を備え、前記読み出し制御手段は、各前記列において、選択された一の画素の信号を読み出す第１の読み出し動作と、前記一の画素及び前記一の画素と連続して配列された他の画素の各信号の混合信号を読み出す第２の読み出し動作との切り替えを制御し、前記読み出し制御手段は、前記一の画素及び前記他の画素の各選択期間の割合を徐々に変化させた後に前記第１の読み出し動作及び前記第２の読み出し動作の切り替えを行うことを特徴とする。 In order to achieve the above object, an image pickup apparatus according to the present invention is an image pickup apparatus including an image pickup element in which a plurality of pixels are arranged in a two-dimensional manner, and a signal of each pixel selected in a row unit in the image pickup element. Read control means for performing a read control for each column, and the read control means performs a first read operation for reading a signal of one selected pixel in each of the columns, the one pixel and the one pixel. The switching control unit controls switching to a second readout operation for reading a mixed signal of each signal of other pixels arranged continuously with the pixel, and the readout control unit selects each of the selection periods of the one pixel and the other pixels. In this case, the first read operation and the second read operation are switched after the ratio is gradually changed.

また、上記目的を達成するために、本発明の撮像装置は、複数の画素が２次元状に配列された撮像素子を備える撮像装置であって、前記撮像素子において行単位で選択された各画素の信号を列毎に読み出す制御を行う読み出し制御手段を備え、前記読み出し制御手段は、各前記列において、選択された一の画素及び前記一の画素と連続して配列された他の画素の各信号の混合信号を読み出す読み出し動作を制御し、前記読み出し動作の切り替えを指示された場合、前記読み出し制御手段は、前記一の画素及び前記他の画素の各選択期間の割合を徐々に変化させることを特徴とする。 In order to achieve the above object, an image pickup apparatus according to the present invention is an image pickup apparatus including an image pickup element in which a plurality of pixels are two-dimensionally arranged, and each pixel selected in a row unit in the image pickup element. Read control means for performing control to read out the signal for each column, the read control means in each of the columns, each of the selected one pixel and the other pixels arranged continuously with the one pixel When the readout operation for reading the mixed signal of signals is controlled and switching of the readout operation is instructed, the readout control means gradually changes the ratio of each selection period of the one pixel and the other pixels. It is characterized by.

本発明によれば、ユーザに違和感を与えることなく読み出し動作を切り替えることができる。 According to the present invention, it is possible to switch the reading operation without causing the user to feel uncomfortable.

本発明の実施の形態に係る撮像装置としてのデジタルカメラに設けられる撮像素子の構成を概略的に示すブロック図である。1 is a block diagram schematically showing a configuration of an image sensor provided in a digital camera as an image pickup apparatus according to an embodiment of the present invention. 図１の撮像素子における第１の読み出し動作を説明するためのタイミングチャートである。3 is a timing chart for explaining a first readout operation in the image sensor of FIG. 1. 図１の撮像素子における第２の読み出し動作を説明するためのタイミングチャートである。6 is a timing chart for explaining a second readout operation in the image sensor of FIG. 1. 図１の撮像素子における第３の読み出し動作を説明するためのタイミングチャートである。6 is a timing chart for explaining a third readout operation in the image sensor of FIG. 1. 図４の第３の読み出し動作における各画素の選択期間を説明するための図である。FIG. 5 is a diagram for explaining a selection period of each pixel in the third readout operation of FIG. 4. 図１の撮像素子における読み出し動作の切り替え制御を説明するためのタイミングチャートである。3 is a timing chart for explaining switching control of a reading operation in the image sensor of FIG. 1. 図１のデジタルカメラによって実行される切り替え処理の手順を示すフローチャートである。It is a flowchart which shows the procedure of the switching process performed by the digital camera of FIG. 図６における読み出し動作の切り替え制御の変形例を説明するためのタイミングチャートである。FIG. 7 is a timing chart for explaining a modification of the read operation switching control in FIG. 6. FIG.

以下、本発明の実施の形態を図面を参照しながら詳述する。 Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

図１は、本発明の実施の形態に係る撮像装置としてのデジタルカメラ１００に設けられる撮像素子１０１の構成を概略的に示すブロック図である。 FIG. 1 is a block diagram schematically showing a configuration of an image sensor 101 provided in a digital camera 100 as an image pickup apparatus according to an embodiment of the present invention.

図１において、デジタルカメラ１００は少なくとも撮像素子１０１を備える。撮像素子１０１は、画素部１０２、垂直走査回路１１５、及び水平走査回路１１６を備える。 In FIG. 1, the digital camera 100 includes at least an image sensor 101. The image sensor 101 includes a pixel unit 102, a vertical scanning circuit 115, and a horizontal scanning circuit 116.

デジタルカメラ１００は、静止画撮影及び動画撮影を行い、また、撮影した動画をデジタルカメラ１００の図示しない液晶画面にリアルタイムで表示するライブビューを行う。撮像素子１０１はＣＭＯＳイメージセンサであり、撮像素子１０１に入射した光をアナログ信号に変換し、変換されたアナログ信号（以下、「光電変換信号」という。）に基づいて画像を生成する。画素部１０２は複数の画素１０３、複数のデータ保持部１１０、及び複数の列回路１１４を備える。各画素１０３は２次元状に所定の間隔で配列されている。以下では、図１の行方向の画素の並びを画素行とし、図１の列方向の画素の並びを画素列とする。画素部１０２において、画素列毎に垂直出力線１１７、データ保持部１１０、及び列回路１１４が設けられ、各画素列において、配列された各画素１０３及びデータ保持部１１０が垂直出力線１１７を介して互いに接続されている。また、データ保持部１１０は対応する列回路１１４と接続されている。 The digital camera 100 performs still image shooting and moving image shooting, and also performs live view in which the shot moving image is displayed in real time on a liquid crystal screen (not shown) of the digital camera 100. The image sensor 101 is a CMOS image sensor, converts light incident on the image sensor 101 into an analog signal, and generates an image based on the converted analog signal (hereinafter referred to as “photoelectric conversion signal”). The pixel unit 102 includes a plurality of pixels 103, a plurality of data holding units 110, and a plurality of column circuits 114. Each pixel 103 is two-dimensionally arranged at a predetermined interval. In the following, the arrangement of pixels in the row direction in FIG. 1 is defined as a pixel row, and the arrangement of pixels in the column direction in FIG. 1 is defined as a pixel column. In the pixel unit 102, a vertical output line 117, a data holding unit 110, and a column circuit 114 are provided for each pixel column. In each pixel column, the arranged pixels 103 and the data holding unit 110 are connected via the vertical output line 117. Are connected to each other. The data holding unit 110 is connected to the corresponding column circuit 114.

画素１０３はフォトダイオード（以下、「ＰＤ」という。）１０４、スイッチ１０５、フローティングディフュージョン（以下、「ＦＤ」という。）１０６、リセットスイッチ１０７、増幅トランジスタ１０８、及び選択トランジスタ１０９を備える。ＰＤ１０４は入射した光量に応じて電荷を発生させる。スイッチ１０５はＰＤ１０４に発生した電荷をＦＤ１０６に転送するためのスイッチであり、制御信号ＰＴＸによって制御される。ＦＤ１０６はＰＤ１０４から転送された電荷を蓄積する。リセットスイッチ１０７はＦＤ１０６をリセットするためのスイッチであり、リセット制御信号ＰＲＥＳによって制御される。増幅トランジスタ１０８はＦＤ１０６に蓄積された電荷に基づいて出力信号を増幅する。選択トランジスタ１０９は増幅トランジスタ１０８の出力ノードを垂直出力線１１７に接続するためのスイッチであり、選択信号ＰＳＥＬによって制御される。 The pixel 103 includes a photodiode (hereinafter referred to as “PD”) 104, a switch 105, a floating diffusion (hereinafter referred to as “FD”) 106, a reset switch 107, an amplification transistor 108, and a selection transistor 109. The PD 104 generates an electric charge according to the amount of incident light. The switch 105 is a switch for transferring the charge generated in the PD 104 to the FD 106, and is controlled by a control signal PTX. The FD 106 accumulates the charges transferred from the PD 104. The reset switch 107 is a switch for resetting the FD 106 and is controlled by a reset control signal PRES. The amplification transistor 108 amplifies the output signal based on the electric charge accumulated in the FD 106. The selection transistor 109 is a switch for connecting the output node of the amplification transistor 108 to the vertical output line 117, and is controlled by a selection signal PSEL.

データ保持部１１０は、列アンプ１１１、スイッチ１１２，１１３、保持容量ＣＴＮ，ＣＴＳを備える。列アンプ１１１は画素１０３から垂直出力線１１７に出力された信号を増幅する。スイッチ１１２は画素１０３から出力されたリセット信号を保持するためのスイッチであり、制御信号ＰＴＮによって制御される。スイッチ１１３は画素１０３から出力された光電変換信号を保持するためのスイッチであり、制御信号ＰＴＳによって制御される。保持容量ＣＴＮは画素１０３から出力されたリセット信号を保持し、保持容量ＣＴＳは画素１０３から出力された光電変換信号を保持する。列回路１１４は保持容量ＣＴＮ及び信号保持容量ＣＴＳに保持された各信号を水平信号線１１８を介して撮像素子１０１の外部へ出力する。 The data holding unit 110 includes a column amplifier 111, switches 112 and 113, and holding capacitors CTN and CTS. The column amplifier 111 amplifies the signal output from the pixel 103 to the vertical output line 117. The switch 112 is a switch for holding a reset signal output from the pixel 103, and is controlled by a control signal PTN. The switch 113 is a switch for holding a photoelectric conversion signal output from the pixel 103, and is controlled by a control signal PTS. The storage capacitor CTN stores a reset signal output from the pixel 103, and the storage capacitor CTS stores a photoelectric conversion signal output from the pixel 103. The column circuit 114 outputs each signal held in the holding capacitor CTN and the signal holding capacitor CTS to the outside of the image sensor 101 via the horizontal signal line 118.

垂直走査回路１１５は、画素部１０２の中から一の画素行を選択し、選択した一の画素行の各画素１０３に対して画素制御信号を送信する。画素制御信号は、例えば、制御信号ＰＴＸ、リセット制御信号ＰＲＥＳ、及び選択信号ＰＳＥＬである。水平走査回路１１６は複数の列回路１１４から一の列回路１１４を選択し、選択した一の列回路１１４が保持する信号を該一の列回路１１４から撮像素子１０１の外部へ出力させる。 The vertical scanning circuit 115 selects one pixel row from the pixel portion 102 and transmits a pixel control signal to each pixel 103 in the selected one pixel row. The pixel control signal is, for example, a control signal PTX, a reset control signal PRES, and a selection signal PSEL. The horizontal scanning circuit 116 selects one column circuit 114 from the plurality of column circuits 114 and outputs a signal held by the selected one column circuit 114 to the outside of the image sensor 101 from the one column circuit 114.

次に、撮像素子１０１における画素１０３の読み出し動作について説明する。デジタルカメラ１００は、第１の読み出し動作、第２の読み出し動作、及び第３の読み出し動作を行う。第１の読み出し動作では、デジタルカメラ１００は配列された複数の画素１０３を行単位で選択する際に間引いて、例えば、１行おきに選択し、選択した行に配列された各画素１０３の信号を画素列毎に読み出す。すなわち、第１の読み出し動作では、各画素列において、１つの画素１０３が選択される。第２の読み出し動作では、デジタルカメラ１００は画素部１０２の各画素列において、連続して配列される複数の画素１０３から出力される各信号の混合信号を読み出す。すなわち、第２の読み出し動作では、各画素列において複数の画素１０３が選択される。 Next, the reading operation of the pixel 103 in the image sensor 101 will be described. The digital camera 100 performs a first reading operation, a second reading operation, and a third reading operation. In the first readout operation, the digital camera 100 thins out a plurality of arranged pixels 103 in units of rows, for example, selects every other row, and the signal of each pixel 103 arranged in the selected row. Are read out for each pixel column. That is, in the first readout operation, one pixel 103 is selected in each pixel column. In the second readout operation, the digital camera 100 reads out a mixed signal of each signal output from the plurality of pixels 103 arranged in succession in each pixel column of the pixel unit 102. That is, in the second readout operation, a plurality of pixels 103 are selected in each pixel column.

なお、以下では、連続して配列される画素の一例として、或る画素列のｎ行目〜ｎ＋２行目の画素１０３ｎ〜画素１０３ｎ＋２における読み出し動作について説明する。画素１０３ｎ〜画素１０３ｎ＋２における各構成要素及び各制御信号には対応する行数を示す符号ｎ〜ｎ＋２を付す。 Hereinafter, as an example of pixels that are continuously arranged, a reading operation in the pixels 103n to 103n + 2 in the nth to n + 2th rows of a certain pixel column will be described. Reference numerals n to n + 2 indicating the corresponding number of rows are attached to the respective components and the control signals in the pixels 103n to 103n + 2.

図２は、図１の撮像素子１０１における第１の読み出し動作を説明するためのタイミングチャートである。 FIG. 2 is a timing chart for explaining the first reading operation in the image sensor 101 of FIG.

図２において、まず、リセット制御信号ＰＲＥＳｎ〜リセット制御信号ＰＲＥＳｎ＋２がＨレベルである期間（例えば、期間Ｔ２０１）、撮像素子１０１は、ＦＤ１０６ｎ〜ＦＤ１０６ｎ＋２をそれぞれリセットする。次いで、選択信号ＰＳＥＬｎ＋１がＨレベルである期間（例えば、期間Ｔ２０２）、撮像素子１０１は画素１０３ｎ＋１を垂直出力線１１７に接続する。これにより、画素１０３ｎ＋１が、リセットされたＦＤ１０６ｎ＋１の電位レベルのリセット信号を垂直出力線１１７を介してデータ保持部１１０に出力する。 In FIG. 2, first, during a period in which the reset control signal PRESn to the reset control signal PRESn + 2 is at the H level (for example, the period T201), the image sensor 101 resets the FDs 106n to FD106n + 2, respectively. Next, in a period in which the selection signal PSELn + 1 is at the H level (for example, a period T202), the imaging element 101 connects the pixel 103n + 1 to the vertical output line 117. Thereby, the pixel 103n + 1 outputs a reset signal having the reset potential level of the FD 106n + 1 to the data holding unit 110 via the vertical output line 117.

次いで、期間Ｔ２０３において制御信号ＰＴＮがＬレベルからＨレベルに遷移すると、撮像素子１０１は画素１０３ｎ＋１から出力されたリセット信号を保持容量ＣＴＮに転送する。また、期間Ｔ２０３において制御信号ＰＴＮがＨレベルからＬレベルに遷移すると、撮像素子１０１は保持容量ＣＴＮへのリセット信号の転送を中止する。これにより、保持容量ＣＴＮでは画素１０３ｎ＋１から出力されたリセット信号が保持される。 Next, when the control signal PTN transitions from the L level to the H level in the period T203, the imaging element 101 transfers the reset signal output from the pixel 103n + 1 to the storage capacitor CTN. Further, when the control signal PTN transits from the H level to the L level in the period T203, the imaging element 101 stops transferring the reset signal to the storage capacitor CTN. Accordingly, the reset signal output from the pixel 103n + 1 is held in the holding capacitor CTN.

次いで、制御信号ＰＴＸｎ＋１がＨレベルである期間（例えば、期間Ｔ２０４）、撮像素子１０１はスイッチ１０５ｎ＋１をオンし、ＰＤ１０４ｎ＋１で発生した電荷をＦＤ１０６ｎ＋１に転送する。これにより、垂直出力線１１７に接続された画素１０３ｎ＋１からデータ保持部１１０へ光電変換信号が出力される。なお、図２では、期間Ｔ２０４において、垂直出力線１１７に接続されない画素１０３ｎ，画素１０３ｎ＋２に対しても、画素１０３ｎ＋１に対して出力された制御信号ＰＴＸｎ＋１と同様の制御信号ＰＴＸｎ，ＰＴＸｎ＋２がそれぞれ出力された場合が示されているが、期間Ｔ２０４において、垂直出力線１１７に接続されない画素１０３ｎ，画素１０３ｎ＋２に対し、スイッチ１０５ｎ，スイッチ１０５ｎ＋２をオフするＬレベルの制御信号ＰＴＸｎ，ＰＴＸｎ＋２がそれぞれ出力されても良い。 Next, during a period in which the control signal PTXn + 1 is at the H level (for example, period T204), the imaging element 101 turns on the switch 105n + 1 and transfers the charge generated in the PD 104n + 1 to the FD 106n + 1. As a result, a photoelectric conversion signal is output from the pixel 103 n + 1 connected to the vertical output line 117 to the data holding unit 110. In FIG. 2, control signals PTXn and PTXn + 2 similar to the control signal PTXn + 1 output to the pixel 103n + 1 are also output to the pixels 103n and 103n + 2 that are not connected to the vertical output line 117 in the period T204. In the period T204, the L level control signals PTXn and PTXn + 2 for turning off the switch 105n and the switch 105n + 2 are output to the pixels 103n and 103n + 2 that are not connected to the vertical output line 117, respectively. good.

次いで、期間Ｔ２０５において制御信号ＰＴＳがＬレベルからＨレベルに遷移すると、撮像素子１０１は画素１０３ｎ＋１から出力された光電変換信号を保持容量ＣＴＳに転送する。また、期間Ｔ２０５において制御信号ＰＴＳがＨレベルからＬレベルに遷移すると、撮像素子１０１は保持容量ＣＴＳへの光電変換信号の転送を中止する。これにより、保持容量ＣＴＳでは画素１０３ｎ＋１から出力された光電変換信号が保持される。次いで、保持容量ＣＴＳ及び保持容量ＣＴＮが接続された列回路１１４が水平走査回路１１６によって選択されると、該列回路１１４は保持容量ＣＴＳ及び保持容量ＣＴＮからそれぞれ信号を取得する。列回路１１４は取得した各信号に基づいて補正した信号を撮像素子１０１の外部へ出力する。上述した内容と同様の読み出し動作が画素部１０２における各画素列で行われる。第１の読み出し動作は、画素部１０２において読み出す画素１０３が限定されるので、動画撮影等においてフレームレートの向上を実現可能である。また、第１の読み出し動作は比較的鮮明な解像感の良い動画像を生成可能である。一方、第１の読み出し動作は、エッジを多く含む高周波な被写体を撮影した際に縞模様のモアレが発生してしまう。 Next, when the control signal PTS transitions from the L level to the H level in the period T205, the imaging element 101 transfers the photoelectric conversion signal output from the pixel 103n + 1 to the storage capacitor CTS. In addition, when the control signal PTS transitions from the H level to the L level in the period T205, the imaging element 101 stops the transfer of the photoelectric conversion signal to the storage capacitor CTS. Thus, the photoelectric conversion signal output from the pixel 103n + 1 is held in the holding capacitor CTS. Next, when the column circuit 114 connected to the storage capacitor CTS and the storage capacitor CTN is selected by the horizontal scanning circuit 116, the column circuit 114 acquires signals from the storage capacitor CTS and the storage capacitor CTN, respectively. The column circuit 114 outputs a signal corrected based on each acquired signal to the outside of the image sensor 101. A readout operation similar to that described above is performed in each pixel column in the pixel portion 102. In the first readout operation, the pixels 103 to be read out by the pixel unit 102 are limited, so that the frame rate can be improved in moving image shooting or the like. Further, the first read operation can generate a relatively clear moving image with a good resolution. On the other hand, in the first reading operation, a striped moire pattern is generated when a high-frequency subject including many edges is photographed.

図３は、図１の撮像素子１０１における第２の読み出し動作を説明するためのタイミングチャートである。 FIG. 3 is a timing chart for explaining the second reading operation in the image sensor 101 of FIG.

図３において、まず、リセット制御信号ＰＲＥＳｎ〜リセット制御信号ＰＲＥＳｎ＋２がＨレベルである期間（例えば、期間Ｔ３０１）、撮像素子１０１は、ＦＤ１０６ｎ〜ＦＤ１０６ｎ＋２をそれぞれリセットする。次いで、選択信号ＰＳＥＬｎ〜選択信号ＰＳＥＬｎ＋２がＨレベルである期間（例えば、期間Ｔ３０２）、撮像素子１０１は画素１０３ｎ〜画素ｎ＋２を垂直出力線１１７に接続する。これにより、画素１０３ｎ〜画素ｎ＋２が、それぞれリセットされたＦＤ１０６ｎ〜ＦＤ１０６ｎ＋２の電位レベルのリセット信号を垂直出力線１１７に出力する。垂直出力線１１７では、画素１０３ｎ〜画素ｎ＋２から出力された各リセット信号が加算平均され、加算平均された電位レベルの混合リセット信号（混合信号）がデータ保持部１１０に出力される。 In FIG. 3, first, during a period in which the reset control signal PRESn to the reset control signal PRESn + 2 are at the H level (for example, the period T301), the image sensor 101 resets the FDs 106n to FD106n + 2, respectively. Next, in a period during which the selection signal PSELn to the selection signal PSELn + 2 are at the H level (for example, the period T302), the imaging element 101 connects the pixels 103n to n + 2 to the vertical output line 117. Accordingly, the pixels 103n to n + 2 output reset signals having the reset potential levels of the FDs 106n to FD106n + 2 to the vertical output line 117, respectively. In the vertical output line 117, the reset signals output from the pixels 103 n to n + 2 are added and averaged, and a mixed reset signal (mixed signal) having the added and averaged potential level is output to the data holding unit 110.

次いで、期間Ｔ３０３では、撮像素子１０１は、制御信号ＰＴＮに基づいて混合リセット信号を保持容量ＣＴＮへ転送し、混合リセット信号を保持容量ＣＴＮに保持する。次いで、制御信号ＰＴＸｎ〜制御信号ＰＴＸｎ＋２がＨレベルである期間（例えば、期間Ｔ３０４）、撮像素子１０１はＰＤ１０４ｎ〜ＰＤ１０４ｎ＋２で発生した電荷をそれぞれＦＤ１０６ｎ〜ＦＤ１０６ｎ＋２に転送する。これにより、画素１０３ｎ〜画素１０３ｎ＋２がそれぞれ光電変換信号を垂直出力線１１７に出力する。垂直出力線１１７では、画素１０３ｎ〜画素ｎ＋２から出力された各光電変換信号が加算平均され、加算平均された電位レベルの混合光電変換信号（混合信号）がデータ保持部１１０に出力される。混合光電変換信号は混合信号に相当する。 Next, in the period T303, the imaging element 101 transfers the mixed reset signal to the holding capacitor CTN based on the control signal PTN, and holds the mixed reset signal in the holding capacitor CTN. Next, during a period in which the control signal PTXn to the control signal PTXn + 2 are at the H level (for example, the period T304), the imaging element 101 transfers the charges generated in the PDs 104n to PD104n + 2 to the FDs 106n to FD106n + 2, respectively. Thereby, each of the pixels 103n to 103n + 2 outputs a photoelectric conversion signal to the vertical output line 117. In the vertical output line 117, the photoelectric conversion signals output from the pixels 103 n to n + 2 are added and averaged, and a mixed photoelectric conversion signal (mixed signal) of the added and averaged potential level is output to the data holding unit 110. The mixed photoelectric conversion signal corresponds to a mixed signal.

次いで、期間Ｔ３０５では、撮像素子１０１は混合光電変換信号を保持容量ＣＴＳに転送し、該混合光電変換信号を保持容量ＣＴＳに保持する。次いで、保持容量ＣＴＳ及び保持容量ＣＴＮが接続された列回路１１４が水平走査回路１１６によって選択されると、該列回路１１４は保持容量ＣＴＳ及び保持容量ＣＴＮからそれぞれ信号を取得する。列回路１１４は取得した各信号に基づいて補正した信号を撮像素子１０１の外部へ出力する。上述した内容と同様の読み出し動作が画素部１０２における各画素列で行われる。第２の読み出し動作は、モアレの発生が低減された動画像が生成される一方、エッジがぼやけた解像感が悪い動画像が生成される。 Next, in the period T305, the imaging element 101 transfers the mixed photoelectric conversion signal to the holding capacitor CTS, and holds the mixed photoelectric conversion signal in the holding capacitor CTS. Next, when the column circuit 114 connected to the storage capacitor CTS and the storage capacitor CTN is selected by the horizontal scanning circuit 116, the column circuit 114 acquires signals from the storage capacitor CTS and the storage capacitor CTN, respectively. The column circuit 114 outputs a signal corrected based on each acquired signal to the outside of the image sensor 101. A readout operation similar to that described above is performed in each pixel column in the pixel portion 102. In the second readout operation, a moving image with reduced moire generation is generated, while a moving image with a blurred edge and a poor resolution is generated.

ここで、第１の読み出し動作及び第２の読み出し動作にはそれぞれ解像感の良さ及びモアレの出にくさのトレードオフが存在する。近年では、撮影シーンに応じて第１の読み出し動作及び第２の読み出し動作を適切に切り替え可能なデジタルカメラが強く要求されている。ところが、第１の読み出し動作及び第２の読み出し動作の各々で生成される動画像において、解像感やモアレの発生具合等といった画質が大きく異なるので、第１の読み出し動作及び第２の読み出し動作を切り替えた際に動画像の画質が大きく変化してしまう。その結果、ユーザに違和感を与えてしまうという問題が生じる。 Here, the first read operation and the second read operation have a trade-off between good resolution and difficulty in producing moire, respectively. In recent years, there has been a strong demand for a digital camera that can appropriately switch between the first readout operation and the second readout operation according to the shooting scene. However, the moving image generated in each of the first readout operation and the second readout operation has greatly different image quality, such as a sense of resolution and the occurrence of moire, so the first readout operation and the second readout operation. When switching between, the image quality of the moving image changes greatly. As a result, there arises a problem that the user feels uncomfortable.

これに対応して、本実施の形態では、第３の読み出し動作を行った後に第１の読み出し動作及び第２の読み出し動作の切り替えを行う。第３の読み出し動作では、デジタルカメラ１００は画素部１０２の各画素列において、連続して配列される複数の画素１０３の各選択期間を異なる割合で時分割し、選択された各画素１０３から出力された各信号の混合信号を読み出す。 Corresponding to this, in the present embodiment, the first read operation and the second read operation are switched after the third read operation is performed. In the third readout operation, the digital camera 100 time-divides each selection period of the plurality of pixels 103 arranged in succession at different ratios in each pixel column of the pixel unit 102 and outputs from each selected pixel 103. The mixed signal of each signal is read out.

図４は、図１の撮像素子１０１における第３の読み出し動作を説明するためのタイミングチャートである。 FIG. 4 is a timing chart for explaining a third readout operation in the image sensor 101 of FIG.

図４において、まず、リセット制御信号ＰＲＥＳｎ〜リセット制御信号ＰＲＥＳｎ＋２がＨレベルである期間（例えば、期間Ｔ４０１）、撮像素子１０１はＦＤ１０６ｎ〜ＦＤ１０６ｎ＋２をそれぞれリセットする。次いで、撮像素子１０１は、期間Ｔ４０２に示すように、高速で切り替わる選択信号ＰＳＥＬｎ〜選択信号ＰＳＥＬｎ＋２をそれぞれ画素１０３ｎ〜画素１０３ｎ＋２に出力する。期間Ｔ４０２では、画素１０３ｎ〜画素１０３ｎ＋２は、それぞれ受信した選択信号ＰＳＥＬｎ〜選択信号ＰＳＥＬｎ＋２がＨレベルである期間、つまり、各画素１０３ｎ〜画素１０３ｎ＋２の選択期間にリセット信号を垂直出力線１１７に出力する。これにより、垂直出力線１１７の電位レベルは、選択信号ＰＳＥＬｎ〜選択信号ＰＳＥＬｎ＋２の出力の切り替えに応じて変動するが、垂直出力線１１７の寄生抵抗及び寄生容量によって平滑化される。その結果、垂直出力線１１７では、画素１０３ｎ〜画素１０３ｎ＋２から出力された各リセット信号が加算平均された電位レベルの混合リセット信号が得られる。 In FIG. 4, first, during a period in which the reset control signal PRESn to the reset control signal PRESn + 2 are at the H level (for example, the period T401), the image sensor 101 resets the FDs 106n to FD106n + 2, respectively. Next, as illustrated in a period T402, the imaging element 101 outputs selection signals PSELn to PSELn + 2 that are switched at high speed to the pixels 103n to 103n + 2, respectively. In the period T402, the pixels 103n to 103n + 2 output reset signals to the vertical output lines 117 during the period in which the received selection signals PSELn to PSELn + 2 are at the H level, that is, the selection periods of the pixels 103n to 103n + 2. . Accordingly, the potential level of the vertical output line 117 varies according to the switching of the output of the selection signal PSELn to the selection signal PSELn + 2, but is smoothed by the parasitic resistance and parasitic capacitance of the vertical output line 117. As a result, in the vertical output line 117, a mixed reset signal having a potential level obtained by averaging the reset signals output from the pixels 103n to 103n + 2 is obtained.

この混合リセット信号は、画素１０３ｎ〜画素１０３ｎ＋２のうち選択期間の割合が最も多い画素から出力されたリセット信号に近い特性を示す。例えば、図５に示すように、選択信号ＰＳＥＬｎ〜選択信号ＰＳＥＬｎ＋２におけるＨレベルの期間ａ，ｂ，ｃの割合の比率が１：２：１である場合、画素１０３ｎ〜画素１０３ｎ＋２の選択期間の割合の比率（以下、「フィルタ比率」という。）も１：２：１である。この場合、上記混合リセット信号は、選択期間の割合が最も大きい画素１０３ｎ＋１から出力されたリセット信号に近い特性を示す。なお、本実施の形態では、期間Ｔ４０２において、選択信号ＰＳＥＬｎ〜選択信号ＰＳＥＬｎ＋２のＨレベルの期間が若干重なっても良い。また、期間Ｔ４０２において、選択信号ＰＳＥＬｎ〜選択信号ＰＳＥＬｎ＋２の全てがＬレベルである期間が存在しても良い。 This mixed reset signal exhibits a characteristic close to a reset signal output from a pixel having the largest selection period ratio among the pixels 103n to 103n + 2. For example, as shown in FIG. 5, when the ratio of the ratios of the H level periods a, b, c in the selection signal PSELn to the selection signal PSELn + 2 is 1: 2: 1, the ratio of the selection period of the pixels 103n to 103n + 2. The ratio (hereinafter referred to as “filter ratio”) is 1: 2: 1. In this case, the mixed reset signal exhibits characteristics close to those of the reset signal output from the pixel 103n + 1 having the largest selection period ratio. Note that in this embodiment, the high-level periods of the selection signal PSELn to the selection signal PSELn + 2 may slightly overlap in the period T402. In addition, in the period T402, there may be a period in which all of the selection signal PSELn to the selection signal PSELn + 2 are at the L level.

次いで、期間Ｔ４０３では、撮像素子１０１は、制御信号ＰＴＮに基づいて混合リセット信号を保持容量ＣＴＮへ転送し、混合リセット信号を保持容量ＣＴＮに保持する。次いで、制御信号ＰＴＸｎ〜制御信号ＰＴＸｎ＋２がＨレベルである期間（例えば、期間Ｔ４０４）、撮像素子１０１はＰＤ１０４ｎ〜ＰＤ１０４ｎ＋２で発生した電荷をそれぞれＦＤ１０６ｎ〜ＦＤ１０６ｎ＋２に転送する。期間Ｔ４０４では、各画素１０３ｎ〜画素１０３ｎ＋２は、受信した各選択信号ＰＳＥＬｎ〜選択信号ＰＳＥＬｎ＋２がＨレベルである期間に、それぞれ光電変換信号を垂直出力線１１７に出力する。これにより、画素１０３ｎ〜画素１０３ｎ＋２から、期間ａ〜期間ｃの割合で出力された各光電変換信号が加算平均された電位レベルの混合光電変換信号が垂直出力線１１７を介してデータ保持部１１０に出力される。 Next, in the period T403, the imaging element 101 transfers the mixed reset signal to the holding capacitor CTN based on the control signal PTN, and holds the mixed reset signal in the holding capacitor CTN. Next, during a period in which the control signal PTXn to the control signal PTXn + 2 are at the H level (for example, the period T404), the imaging element 101 transfers the charges generated in the PDs 104n to PD104n + 2 to the FDs 106n to FD106n + 2, respectively. In the period T404, each of the pixels 103n to 103n + 2 outputs a photoelectric conversion signal to the vertical output line 117 in a period in which each of the received selection signals PSELn to PSELn + 2 is at the H level. Accordingly, a mixed photoelectric conversion signal having a potential level obtained by adding and averaging the photoelectric conversion signals output from the pixels 103n to 103n + 2 in the ratio of the periods a to c is supplied to the data holding unit 110 through the vertical output line 117. Is output.

次いで、期間Ｔ４０５では、撮像素子１０１は混合光電変換信号を保持容量ＣＴＳに転送し、該合成光電変換信号を保持容量ＣＴＳに保持する。次いで、保持容量ＣＴＳ及び保持容量ＣＴＮが接続された列回路１１４が水平走査回路１１６によって選択されると、該列回路１１４は保持容量ＣＴＳ及び保持容量ＣＴＮからそれぞれ信号を取得する。列回路１１４は取得した各信号に基づいて補正した信号を撮像素子１０１の外部へ出力する。上述した内容と同様の読み出し動作が画素部１０２における各画素列で行われる。 Next, in the period T405, the image sensor 101 transfers the mixed photoelectric conversion signal to the storage capacitor CTS, and stores the combined photoelectric conversion signal in the storage capacitor CTS. Next, when the column circuit 114 connected to the storage capacitor CTS and the storage capacitor CTN is selected by the horizontal scanning circuit 116, the column circuit 114 acquires signals from the storage capacitor CTS and the storage capacitor CTN, respectively. The column circuit 114 outputs a signal corrected based on each acquired signal to the outside of the image sensor 101. A readout operation similar to that described above is performed in each pixel column in the pixel portion 102.

上述した本実施の形態では、動画撮影時等において、所定のフレーム毎、例えば、１フレーム毎に、画素１０３ｎ〜画素１０３ｎ＋２の各選択期間の割合を徐々に変化させるのが好ましい。 In the present embodiment described above, it is preferable to gradually change the ratio of each selection period of the pixels 103n to 103n + 2 for each predetermined frame, for example, for each frame, during moving image shooting or the like.

図６は、図１の撮像素子１０１における読み出し動作の切り替え制御を説明するためのタイミングチャートである。 FIG. 6 is a timing chart for explaining the read operation switching control in the image sensor 101 of FIG.

図６では、一例として、第１の読み出し動作中に第２の読み出し動作に切り替える指示がユーザによって行われた場合を前提とする。なお、図６において、制御信号ＨＤは行の切り替わり目にＬレベルに一時的に遷移する信号である。また、図６において、制御信号ＶＤはフレームの切り替わり目にＬレベルに一時的に遷移する信号であり、制御信号ＣＧは読み出し動作の切り替えが指示されたタイミングでＬレベルに一時的に遷移する信号である。 In FIG. 6, as an example, it is assumed that the user gives an instruction to switch to the second read operation during the first read operation. In FIG. 6, the control signal HD is a signal that transits temporarily to the L level at the line switching. In FIG. 6, the control signal VD is a signal that temporarily transits to the L level at the frame switching, and the control signal CG is a signal that transits temporarily to the L level at the timing when the switching of the reading operation is instructed. It is.

図６において、時刻ｔ６０１に示すように、読み出し動作の切り替えが指示され、時刻ｔ６０２に示すように、制御信号ＶＤに基づいてフレームの切り替わり目を検知すると、撮像素子１０１は第３の読み出し動作を開始する。具体的に、撮像素子１０１は画素１０３ｎ〜画素１０３ｎ＋２のフィルタ比率を１：８：１に設定した第３の読み出し動作を開始する。この第３の読み出し動作は時刻ｔ６０２から次のフレームの切り替わり目が検知されるまで行われる。この第３の読み出し動作では、選択期間の割合が最も大きい画素１０３ｎ＋１から出力された信号に極めて近い特性の混合信号が得られる。この混合信号に基づいて、第１の読み出し動作によって生成される画像に極めて近い画質の画像が生成される。 In FIG. 6, when switching of the reading operation is instructed as shown at time t <b> 601, and the switching of the frame is detected based on the control signal VD as shown at time t <b> 602, the image sensor 101 performs the third reading operation. Start. Specifically, the image sensor 101 starts a third readout operation in which the filter ratio of the pixels 103n to 103n + 2 is set to 1: 8: 1. This third read operation is performed from time t602 until the next frame change is detected. In the third readout operation, a mixed signal having characteristics very close to the signal output from the pixel 103n + 1 having the largest selection period ratio is obtained. Based on this mixed signal, an image having an image quality very close to the image generated by the first readout operation is generated.

次いで、時刻ｔ６０３に示すように、次のフレームの切り替わり目を検知すると、撮像素子１０１は画素１０３ｎ〜画素１０３ｎ＋２のフィルタ比率を１：４：１に設定した第３の読み出し動作を開始する。この第３の読み出し動作は時刻ｔ６０３から次のフレームの切り替わり目が検知されるまで行われる。この第３の読み出し動作では、フィルタ比率を１：８：１に設定した第３の読み出し動作で生成される混合信号より画素１０３ｎ＋１から出力された信号成分が少ない混合信号が得られる。この混合信号に基づいて、第１の読み出し動作によって生成される画像及び第２の読み出し動作によって生成される画像の中間の画質の画像が生成される。 Next, as shown at time t603, when the next frame change is detected, the image sensor 101 starts a third readout operation in which the filter ratio of the pixels 103n to 103n + 2 is set to 1: 4: 1. This third read operation is performed from time t603 until the next frame change is detected. In the third readout operation, a mixed signal having a smaller signal component output from the pixel 103n + 1 than the mixed signal generated in the third readout operation in which the filter ratio is set to 1: 8: 1 is obtained. Based on this mixed signal, an image having an intermediate image quality between the image generated by the first read operation and the image generated by the second read operation is generated.

次いで、時刻ｔ６０４に示すように、次のフレームの切り替わり目を検知すると、撮像素子１０１は画素１０３ｎ〜画素１０３ｎ＋２のフィルタ比率を１：２：１に設定した第３の読み出し動作を開始する。この第３の読み出し動作は時刻ｔ６０４から次のフレームの切り替わり目が検知されるまで行われる。この第３の読み出し動作では、同じ選択期間で出力された画素１０３ｎ〜画素１０３ｎ＋２の各信号を加算平均した信号に近い特性の混合信号が得られる。この混合信号に基づいて第２の読み出し動作によって生成される画像に極めて近い画質の画像が生成される。次いで、時刻ｔ６０５に示すように、次のフレームの切り替わり目を検知すると、撮像素子１０１は第２の読み出し動作を行う。 Next, as shown at time t604, when the next frame change is detected, the image sensor 101 starts a third readout operation in which the filter ratio of the pixels 103n to 103n + 2 is set to 1: 2: 1. This third read operation is performed from time t604 until the next frame change is detected. In the third readout operation, a mixed signal having characteristics close to a signal obtained by averaging the signals of the pixels 103n to 103n + 2 output in the same selection period is obtained. Based on this mixed signal, an image having an image quality very close to the image generated by the second readout operation is generated. Next, as shown at time t605, when the next frame change is detected, the image sensor 101 performs a second readout operation.

なお、本実施の形態では、一例として、第１の読み出し動作中に第２の読み出し動作に切り替える指示が行われた場合について説明したが、これに限られない。例えば、第２の読み出し動作中に第１の読み出し動作に切り替える指示が行われた場合についても同様に画素１０３ｎ〜画素１０３ｎ＋２の各選択期間の割合を徐々に変化させる。具体的に、読み出し動作の切り替えが指示されると、フレームの切り替わり目を検知する毎に、撮像素子１０１は画素１０３ｎ〜画素１０３ｎ＋２のフィルタ比率を１：２：１、１：４：１、１：８：１にこの順で変化させた後第１の読み出し動作に切り替える。 Note that in this embodiment, as an example, a case where an instruction to switch to the second read operation is performed during the first read operation is described, but the present invention is not limited to this. For example, in the case where an instruction to switch to the first reading operation is given during the second reading operation, the ratio of each selection period of the pixels 103n to 103n + 2 is gradually changed in the same manner. Specifically, when switching of the reading operation is instructed, the image sensor 101 changes the filter ratio of the pixels 103n to 103n + 2 to 1: 2: 1, 1: 4: 1, 1 every time a frame switching eye is detected. : After changing to 8: 1 in this order, the first read operation is switched.

上述した本実施の形態によれば、画素１０３ｎ〜画素１０３ｎ＋２の各選択期間の割合を徐々に変化させた後に第１の読み出し動作及び第２の読み出し動作の切り替えを行う。これにより、異なる解像感の動画像を生成する第１の読み出し動作及び第２の読み出し動作を切り替える際に動画像における解像感の変化を滑らかにすることができ、もって、ユーザに違和感を与えることなく読み出し動作の切り替えを行うことができる。 According to the present embodiment described above, the first readout operation and the second readout operation are switched after the ratio of each selection period of the pixels 103n to 103n + 2 is gradually changed. This makes it possible to smooth the change in resolution in the moving image when switching between the first readout operation and the second readout operation that generate moving images having different resolutions, and thus makes the user feel uncomfortable. The read operation can be switched without giving.

また、上述した本実施の形態では、第１の読み出し動作から第２の読み出し動作に切り替える場合、画素１０３ｎ＋１の選択期間の割合が画素１０３ｎ，画素１０３ｎ＋２の選択期間の割合より大きい状態から、画素１０３ｎ，画素１０３ｎ＋２の割合と同じになるように画素１０３ｎ＋１の選択期間の割合を徐々に減少させた後に第２の読み出し動作に切り替える。また、第２の読み出し動作から第１の読み出し動作に切り替える場合、画素１０３ｎ＋１の選択期間の割合が画素１０３ｎ，画素１０３ｎ＋２の選択期間の割合より大きくなるように画素１０３ｎ＋１の選択期間の割合を徐々に増加させた後に第１の読み出し動作に切り替える。これにより、第１の読み出し動作から第２の読み出し動作に切り替える場合、及び第２の読み出し動作から第１の読み出し動作に切り替える場合のいずれの場合においても、動画像における解像感の変化を確実に滑らかにすることができる。 In the above-described embodiment, when switching from the first reading operation to the second reading operation, the pixel 103n is selected from a state in which the ratio of the selection period of the pixel 103n + 1 is larger than the ratio of the selection period of the pixel 103n and the pixel 103n + 2. , The ratio of the selection period of the pixel 103n + 1 is gradually decreased so as to be the same as the ratio of the pixel 103n + 2, and then the second readout operation is switched. Further, when switching from the second reading operation to the first reading operation, the ratio of the selection period of the pixel 103n + 1 is gradually increased so that the ratio of the selection period of the pixel 103n + 1 is larger than the ratio of the selection period of the pixel 103n and the pixel 103n + 2. After the increase, the first read operation is switched. Accordingly, in any case of switching from the first reading operation to the second reading operation and switching from the second reading operation to the first reading operation, the change in the resolution feeling in the moving image is surely ensured. Can be smoothed.

さらに、上述した本実施の形態では、画素１０３ｎ〜画素１０３ｎ＋２の各選択期間の割合を動画撮影における所定のフレーム毎に変化させる。これにより、切り替えによる段差が気付きにくい動画像を生成することができる。 Further, in the present embodiment described above, the ratio of each selection period of the pixels 103n to 103n + 2 is changed for each predetermined frame in moving image shooting. Accordingly, it is possible to generate a moving image in which a step due to switching is hardly noticed.

上述した本実施の形態では、画素１０３ｎ〜画素１０３ｎ＋２の各選択期間の割合を指数関数的に変化させる。これにより、視覚的に段差の少ない自然な動画像を生成することができる。 In the present embodiment described above, the ratio of each selection period of the pixels 103n to 103n + 2 is changed exponentially. As a result, it is possible to generate a natural moving image with a visually low level difference.

また、上述した本実施の形態では、ユーザの設定に応じて第１の読み出し動作及び第２の読み出し動作の切り替え制御が行われる。これにより、ユーザから読み出し動作の切り替えの指示を受け付けた際に、ユーザに違和感を与えることのない適切な切り替え制御を行うことができる。 Further, in the present embodiment described above, switching control between the first read operation and the second read operation is performed according to the user setting. As a result, it is possible to perform appropriate switching control that does not give the user a sense of incongruity when receiving an instruction to switch the reading operation from the user.

以上、本発明について、上述した実施の形態を用いて説明したが、本発明は上述した実施の形態に限定されるものではない。例えば、モアレの発生を低減する手段として、画素１０３ｎ，画素１０３ｎ＋１，画素１０３ｎ＋２から垂直出力線１１７に出力された各信号を加算平均する場合について説明したが、モアレの発生を低減する手段はこれに限られない。例えば、ＦＤ１０６ｎ，ＦＤ１０６ｎ＋１，ＦＤ１０６ｎ＋２を接続するスイッチを設け、ＦＤ１０６ｎ，ＦＤ１０６ｎ＋１，ＦＤ１０６ｎ＋２の各電荷を加算平均しても良い。 As described above, the present invention has been described using the above-described embodiment, but the present invention is not limited to the above-described embodiment. For example, as a means for reducing the occurrence of moire, the case where the signals output from the pixel 103n, the pixel 103n + 1, and the pixel 103n + 2 to the vertical output line 117 are added and averaged has been described. Not limited. For example, a switch for connecting the FD 106n, FD 106n + 1, and FD 106n + 2 may be provided, and the charges of the FD 106n, FD 106n + 1, and FD 106n + 2 may be averaged.

上述した本実施の形態では、選択信号ＰＳＥＬｎ〜選択信号ＰＳＥＬｎ＋２のうち、例えば、選択信号ＰＳＥＬｎ＋１を選択信号ＰＳＥＬｎ，ＰＳＥＬｎ＋２より高い周波数にして、選択信号ＰＳＥＬｎ＋１のＨレベルの割合が実質的に多くなるように制御しても良い。 In the present embodiment described above, of the selection signals PSELn to PSELn + 2, for example, the selection signal PSELn + 1 is set to a frequency higher than the selection signals PSELn and PSELn + 2, so that the H level ratio of the selection signal PSELn + 1 is substantially increased. You may control to.

また、上述した本実施の形態では、１フレーム毎に画素１０３ｎ〜画素１０３ｎ＋２の各選択期間の割合を変える場合について説明したが、所定のフレーム毎、例えば、３フレーム毎に各選択期間の割合を変えても良い。 In the above-described embodiment, the case where the ratio of each selection period of the pixel 103n to the pixel 103n + 2 is changed for each frame has been described. However, the ratio of each selection period is changed every predetermined frame, for example, every three frames. You can change it.

さらに、上述した本実施の形態では、各選択期間の割合によって上記所定のフレームの数を異なるように設定しても良い。 Further, in the present embodiment described above, the number of the predetermined frames may be set differently depending on the ratio of each selection period.

上述した本実施の形態では、デジタルカメラ１００による被写体認識の結果に応じて第１の読み出し動作及び第２の読み出し動作を切り替えても良い。 In the present embodiment described above, the first reading operation and the second reading operation may be switched according to the result of subject recognition by the digital camera 100.

上述した本実施の形態では、デジタルカメラ１００の設定感度に応じて第１の読み出し動作及び第２の読み出し動作を切り替えても良い。 In the present embodiment described above, the first readout operation and the second readout operation may be switched according to the setting sensitivity of the digital camera 100.

図７は、図１のデジタルカメラ１００によって実行される切り替え処理の手順を示すフローチャートである。 FIG. 7 is a flowchart showing a procedure of switching processing executed by the digital camera 100 of FIG.

図７の処理では、一例として、動画撮影中であることを前提とする。 In the process of FIG. 7, as an example, it is assumed that moving image shooting is in progress.

図７において、まず、デジタルカメラ１００は感度を設定する（ステップＳ７０１）。感度の設定は、ユーザによる感度設定、又はデジタルカメラ１００に設けられる図示しない測光センサの出力結果に基づいて行われる。次いで、デジタルカメラ１００はステップＳ７０１で設定した感度（以下、「設定感度」という。）、及び予め設定された感度閾値Ｇｔｈを比較し、設定感度が感度閾値Ｇｔｈを超えるか否かを判別する（ステップＳ７０２）。ここで、デジタルカメラ１００において、設定感度が高い場合、ノイズの影響を受けやすく、モアレが発生しやすい。この場合、モアレの発生を低減可能な第２の読み出し動作が行われるのが好ましい。一方、設定感度が低い場合、ノイズの影響を受けにくく、モアレが発生しにくい。この場合、モアレの発生を低減する第２の読み出し動作より、むしろ、解像感の良い動画像を生成可能な第１の読み出し動作が行われるのが好ましい。これに対し、本実施の形態では、感度閾値Ｇｔｈを予め設定し、デジタルカメラ１００の設定感度及び感度閾値Ｇｔｈを比較する。デジタルカメラ１００の設定感度が感度閾値Ｇｔｈを超える場合、デジタルカメラ１００は設定感度が高いと判別し、デジタルカメラ１００の設定感度が感度閾値Ｇｔｈを超えない場合、デジタルカメラ１００の設定感度が低いと判別する。 In FIG. 7, first, the digital camera 100 sets sensitivity (step S701). The sensitivity is set based on the sensitivity setting by the user or the output result of a photometric sensor (not shown) provided in the digital camera 100. Next, the digital camera 100 compares the sensitivity set in step S701 (hereinafter referred to as “set sensitivity”) and a preset sensitivity threshold Gth to determine whether the set sensitivity exceeds the sensitivity threshold Gth ( Step S702). Here, in the digital camera 100, when the setting sensitivity is high, the digital camera 100 is easily affected by noise and moiré is likely to occur. In this case, it is preferable to perform the second read operation that can reduce the occurrence of moire. On the other hand, when the setting sensitivity is low, it is less susceptible to noise and moire is less likely to occur. In this case, it is preferable to perform the first reading operation capable of generating a moving image with a good resolution rather than the second reading operation that reduces the occurrence of moire. On the other hand, in the present embodiment, the sensitivity threshold Gth is set in advance, and the set sensitivity of the digital camera 100 and the sensitivity threshold Gth are compared. When the setting sensitivity of the digital camera 100 exceeds the sensitivity threshold Gth, the digital camera 100 determines that the setting sensitivity is high. When the setting sensitivity of the digital camera 100 does not exceed the sensitivity threshold Gth, the setting sensitivity of the digital camera 100 is low. Determine.

ステップＳ７０２の判別の結果、設定感度が感度閾値Ｇｔｈを超えるとき、デジタルカメラ１００は第２の読み出し動作を開始し（ステップＳ７０３）、動画撮影を継続するか否かを判別する（ステップＳ７０４）。 As a result of the determination in step S702, when the set sensitivity exceeds the sensitivity threshold Gth, the digital camera 100 starts the second reading operation (step S703) and determines whether or not to continue moving image shooting (step S704).

ステップＳ７０４の判別の結果、動画撮影を継続するとき、デジタルカメラ１００は設定感度の変更を行うか否かを判別する（ステップＳ７０５）。 As a result of the determination in step S704, when the moving image shooting is continued, the digital camera 100 determines whether or not to change the setting sensitivity (step S705).

ステップＳ７０５の判別の結果、設定感度の変更を行うとき、デジタルカメラ１００は新たに設定された感度（以下、「新たな設定感度」という。）及び感度閾値Ｇｔｈを比較し、新たな設定感度が感度閾値Ｇｔｈを超えるか否かを判別する（ステップＳ７０６）。 As a result of the determination in step S705, when the set sensitivity is changed, the digital camera 100 compares the newly set sensitivity (hereinafter referred to as “new set sensitivity”) and the sensitivity threshold Gth, and the new set sensitivity is determined. It is determined whether or not the sensitivity threshold value Gth is exceeded (step S706).

ステップＳ７０６の判別の結果、新たな設定感度が感度閾値Ｇｔｈを超えないとき、デジタルカメラ１００は後述するステップＳ７１２以降の処理を行う。一方、ステップＳ７０６の判別の結果、新たな設定感度が感度閾値Ｇｔｈを超えるとき、又はステップＳ７０５の判別の結果、設定感度の変更を行わないとき、デジタルカメラ１００は第２の読み出し動作を開始する（ステップＳ７０７）。その後、デジタルカメラ１００はステップＳ７０４の処理に戻る。 As a result of the determination in step S706, when the new set sensitivity does not exceed the sensitivity threshold value Gth, the digital camera 100 performs processing in step S712 and later described later. On the other hand, when the new setting sensitivity exceeds the sensitivity threshold Gth as a result of the determination in step S706, or when the setting sensitivity is not changed as a result of the determination in step S705, the digital camera 100 starts the second reading operation. (Step S707). Thereafter, the digital camera 100 returns to the process of step S704.

ステップＳ７０２の判別の結果、設定感度が感度閾値Ｇｔｈを超えないとき、デジタルカメラ１００は第１の読み出し動作を開始し（ステップＳ７０８）、動画撮影を継続するか否かを判別する（ステップＳ７０９）。 As a result of the determination in step S702, when the set sensitivity does not exceed the sensitivity threshold Gth, the digital camera 100 starts the first reading operation (step S708), and determines whether or not to continue moving image shooting (step S709). .

ステップＳ７０９の判別の結果、動画撮影を継続するとき、デジタルカメラ１００は設定感度の変更を行うか否かを判別する（ステップＳ７１０）。 As a result of the determination in step S709, when the moving image shooting is continued, the digital camera 100 determines whether or not to change the setting sensitivity (step S710).

ステップＳ７１０の判別の結果、設定感度の変更を行うとき、デジタルカメラ１００は新たな設定感度及び感度閾値Ｇｔｈを比較し、新たな設定感度が感度閾値Ｇｔｈを超えるか否かを判別する（ステップＳ７１１）。 As a result of the determination in step S710, when changing the setting sensitivity, the digital camera 100 compares the new setting sensitivity and the sensitivity threshold value Gth to determine whether or not the new setting sensitivity exceeds the sensitivity threshold value Gth (step S711). ).

ステップＳ７１１の判別の結果、新たな設定感度が感度閾値Ｇｔｈを超えるとき、デジタルカメラ１００はステップＳ７０７以降の処理を行う。一方、ステップＳ７１１の判別の結果、新たな設定感度が感度閾値Ｇｔｈを超えないとき、又はステップＳ７１０の判別の結果、設定感度の変更を行わないとき、デジタルカメラ１００は第１の読み出し動作を開始する（ステップＳ７１２）。その後、デジタルカメラ１００はステップＳ７０９の処理に戻る。 As a result of the determination in step S711, when the new set sensitivity exceeds the sensitivity threshold Gth, the digital camera 100 performs the processing from step S707. On the other hand, when the new set sensitivity does not exceed the sensitivity threshold Gth as a result of the determination in step S711, or when the set sensitivity is not changed as a result of the determination in step S710, the digital camera 100 starts the first reading operation. (Step S712). Thereafter, the digital camera 100 returns to the process of step S709.

ステップＳ７０４の判別の結果又はステップＳ７０９の判別の結果、動画撮影を継続しないとき、デジタルカメラ１００は動画撮影を終了し（ステップＳ７１３）、本処理を終了する。 As a result of the determination in step S704 or the determination in step S709, when the moving image shooting is not continued, the digital camera 100 ends the moving image shooting (step S713) and ends the present process.

上述した図７の処理では、設定された感度に応じて第１の読み出し動作及び第２の読み出し動作の切り替え制御が行われる。これにより、デジタルカメラ１００の設定感度に応じて、解像感の良い動画像を生成可能な第１の読み出し動作及びモアレの発生を低減可能な第２の読み出し動作のいずれかに適切に切り替えることができる。 In the process of FIG. 7 described above, switching control between the first readout operation and the second readout operation is performed according to the set sensitivity. Thereby, according to the setting sensitivity of the digital camera 100, the first readout operation capable of generating a moving image with good resolution and the second readout operation capable of reducing the occurrence of moire are appropriately switched. Can do.

また、本実施の形態では、解像感の良い動画像を生成する手段として、第１の読み出し動作を行う場合について説明したが、解像感の良い動画像を生成する手段は第１の読み出し動作に限られず、例えば、第３の読み出し動作であっても良い。この場合、デジタルカメラ１００は、例えば、図８に示すように、画素１０３ｎ〜画素１０３ｎ＋２のフィルタ比率を１：１６：１に設定した第３の読み出し動作を行う。これにより、第１の読み出し動作による動画像に相当する解像感の良い動画像が生成される。その後、この割合による動画撮影中に、制御信号ＣＧがＬに遷移し（時刻ｔ８０１）、且つ次のフレームの切り替わり目を検知すると（時刻ｔ８０２）、デジタルカメラ１００はフィルタ比率を１：８：１に変更する。これにより、フィルタ比率を１：１６：１に設定した第３の読み出し動作による動画像より解像感が低いがモアレの発生が若干低減された画像が生成される。次いで、次のフレームの切り替わり目を検知すると（時刻ｔ８０３）、デジタルカメラ１００はフィルタ比率を１：４：１に変更する。これにより、第１の読み出し動作による動画像及び第２の読み出し動作による動画像の中間の画質の画像が生成される。次いで、次のフレームの切り替わり目を検知すると（時刻ｔ８０４）、デジタルカメラ１００はフィルタ比率を１：２：１に変更する。これにより、フィルタ比率を１：４：１に設定した第３の読み出し動作による画像よりモアレの発生が低減された画像が生成される。次いで、次のフレームの切り替わり目を検知すると（時刻ｔ８０５）、デジタルカメラ１００はフィルタ比率を１：１：１に変更する。これにより、第２の読み出し動作による動画像に相当するモアレの発生が低減された動画像が生成される。 In this embodiment, the case where the first readout operation is performed as the means for generating a moving image with a good resolution is described. However, the means for generating a moving image with a good resolution is the first readout. For example, a third reading operation may be performed. In this case, for example, as illustrated in FIG. 8, the digital camera 100 performs a third readout operation in which the filter ratio of the pixels 103n to 103n + 2 is set to 1: 16: 1. As a result, a moving image with good resolution corresponding to the moving image by the first reading operation is generated. After that, during moving image shooting at this ratio, when the control signal CG transitions to L (time t801) and the next frame change is detected (time t802), the digital camera 100 sets the filter ratio to 1: 8: 1. Change to As a result, an image is generated that has a lower resolution than the moving image by the third readout operation in which the filter ratio is set to 1: 16: 1 but slightly reduces the occurrence of moire. Next, when the next frame change is detected (time t803), the digital camera 100 changes the filter ratio to 1: 4: 1. Thereby, an intermediate quality image is generated between the moving image by the first reading operation and the moving image by the second reading operation. Next, when the next frame change is detected (time t804), the digital camera 100 changes the filter ratio to 1: 2: 1. As a result, an image in which the occurrence of moire is reduced is generated from the image obtained by the third readout operation in which the filter ratio is set to 1: 4: 1. Next, when the next frame change is detected (time t805), the digital camera 100 changes the filter ratio to 1: 1: 1. As a result, a moving image in which the occurrence of moire corresponding to the moving image by the second readout operation is reduced is generated.

上述した図８の処理は、第３の読み出し動作において、フィルタ比率を１：１６：１、１：８：１、１：４：１、１：２：１、１：１：１にこの順に変化させて解像感の良い動画像を生成可能な読み出し動作からモアレの発生を低減可能な読み出し動作に切り替えた場合について説明したが、これに限られない。例えば、フィルタ比率を１：１：１、１：２：１、１：４：１、１：８：１、１：１６：１にこの順に変化させてモアレの発生を低減可能な読み出し動作から解像感の良い動画像を生成可能な読み出し動作に切り替え可能である。上述した図８の処理においても、上述した本実施の形態と同様の効果を奏することができる。 8 described above, in the third read operation, the filter ratios are 1: 16: 1, 1: 8: 1, 1: 4: 1, 1: 2: 1, 1: 1: 1 in this order. Although the description has been given of the case where the read operation that can generate a moving image with a good resolution is changed to the read operation that can reduce the occurrence of moire, the present invention is not limited to this. For example, from the read operation that can reduce the occurrence of moire by changing the filter ratio to 1: 1: 1, 1: 2: 1, 1: 4: 1, 1: 8: 1, 1: 16: 1 in this order. It is possible to switch to a read operation capable of generating a moving image with a good resolution. In the process of FIG. 8 described above, the same effects as those of the present embodiment described above can be obtained.

本発明は、上述の実施の形態の１以上の機能を実現するプログラムをネットワーク又は記憶媒体を介してシステム又は装置に供給し、該システム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読み出して実行する処理でも実現可能である。また、本発明は、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。 The present invention supplies a program that realizes one or more functions of the above-described embodiments to a system or apparatus via a network or a storage medium, and one or more processors in a computer of the system or apparatus read the program. It can also be realized by processing to be executed. The present invention can also be realized by a circuit (for example, ASIC) that realizes one or more functions.

１００デジタルカメラ
１０１撮像素子
１０３，１０３ｎ〜１０３ｎ＋２画素 100 Digital Camera 101 Image Sensor 103, 103n to 103n + 2 Pixel

Claims

複数の画素が２次元状に配列された撮像素子を備える撮像装置であって、
前記撮像素子において行単位で選択された各画素の信号を列毎に読み出す制御を行う読み出し制御手段を備え、
前記読み出し制御手段は、各前記列において、選択された一の画素の信号を読み出す第１の読み出し動作と、前記一の画素及び前記一の画素と連続して配列された他の画素の各信号の混合信号を読み出す第２の読み出し動作との切り替えを制御し、
前記読み出し制御手段は、前記一の画素及び前記他の画素の各選択期間の割合を徐々に変化させた後に前記第１の読み出し動作及び前記第２の読み出し動作の切り替えを行うことを特徴とする撮像装置。 An imaging device including an imaging device in which a plurality of pixels are arranged in a two-dimensional manner,
Read control means for performing control to read out the signal of each pixel selected in units of rows in the image sensor for each column;
The readout control means includes a first readout operation for reading out a signal of a selected pixel in each of the columns, and signals of the one pixel and other pixels arranged in succession with the one pixel. Controlling the switching to the second reading operation for reading the mixed signal of
The read control unit performs switching between the first read operation and the second read operation after gradually changing the ratio of each selection period of the one pixel and the other pixels. Imaging device.

前記第１の読み出し動作から前記第２の読み出し動作に切り替える場合、前記読み出し制御手段は、前記一の画素の選択期間の割合が前記他の画素の選択期間の割合より大きい状態から、前記他の画素の選択期間の割合と同じになるように前記一の画素の選択期間の割合を徐々に減少させた後に前記第２の読み出し動作に切り替えることを特徴とする請求項１記載の撮像装置。 When switching from the first readout operation to the second readout operation, the readout control unit may change the other pixel from a state where the ratio of the selection period of the one pixel is larger than the ratio of the selection period of the other pixel. The imaging apparatus according to claim 1, wherein the second readout operation is switched after the ratio of the selection period of the one pixel is gradually decreased so as to be the same as the ratio of the selection period of the pixel.

前記第２の読み出し動作から前記第１の読み出し動作に切り替える場合、前記読み出し制御手段は、前記一の画素の選択期間の割合が前記他の画素の選択期間の割合より大きくなるように前記一の画素の選択期間の割合を徐々に増加させた後に前記第１の読み出し動作に切り替えることを特徴とする請求項１又は２記載の撮像装置。 When switching from the second readout operation to the first readout operation, the readout control unit is configured to enable the one pixel selection period to be greater than the other pixel selection period ratio. The imaging apparatus according to claim 1, wherein the first readout operation is switched after the ratio of the pixel selection period is gradually increased.

動画撮影を行い、
前記読み出し制御手段は、前記一の画素及び前記他の画素の各選択期間の割合を前記動画撮影における所定のフレーム毎に変化させることを特徴とする請求項１乃至３のいずれか１項に記載の撮像装置。 Take a video,
4. The read control unit according to claim 1, wherein the readout control unit changes a ratio of each selection period of the one pixel and the other pixel for each predetermined frame in the moving image shooting. Imaging device.

前記読み出し制御手段は、前記一の画素及び前記他の画素の各選択期間の割合を指数関数的に変化させることを特徴とする請求項１乃至４のいずれか１項に記載の撮像装置。 5. The imaging apparatus according to claim 1, wherein the readout control unit changes a ratio of each selection period of the one pixel and the other pixel exponentially.

前記読み出し制御手段は、ユーザの設定に応じて前記第１の読み出し動作及び前記第２の読み出し動作の切り替えを行うことを特徴とする請求項１乃至５のいずれか１項に記載の撮像装置。 The imaging apparatus according to claim 1, wherein the readout control unit performs switching between the first readout operation and the second readout operation according to a user setting.

前記読み出し制御手段は、設定された感度に応じて前記第１の読み出し動作及び前記第２の読み出し動作の切り替えを行うことを特徴とする請求項１乃至５のいずれか１項に記載の撮像装置。 The imaging apparatus according to claim 1, wherein the readout control unit switches between the first readout operation and the second readout operation in accordance with a set sensitivity. .

複数の画素が２次元状に配列された撮像素子を備える撮像装置であって、
前記撮像素子において行単位で選択された各画素の信号を列毎に読み出す制御を行う読み出し制御手段を備え、
前記読み出し制御手段は、各前記列において、選択された一の画素及び前記一の画素と連続して配列された他の画素の各信号の混合信号を読み出す読み出し動作を制御し、
前記読み出し動作の切り替えを指示された場合、前記読み出し制御手段は、前記一の画素及び前記他の画素の各選択期間の割合を徐々に変化させることを特徴とする撮像装置。 An imaging device including an imaging device in which a plurality of pixels are arranged in a two-dimensional manner,
Read control means for performing control to read out the signal of each pixel selected in units of rows in the image sensor for each column;
The readout control unit controls a readout operation of reading out a mixed signal of each signal of the selected one pixel and the other pixels arranged continuously with the one pixel in each column.
The imaging apparatus, wherein when the switching of the readout operation is instructed, the readout control unit gradually changes a ratio of each selection period of the one pixel and the other pixel.

複数の画素が２次元状に配列された撮像素子を備える撮像装置の制御方法であって、
前記撮像素子において行単位で選択された各画素の信号を列毎に読み出す制御を行う読み出し制御ステップを有し、
前記読み出し制御ステップは、各前記列において、選択された一の画素の信号を読み出す第１の読み出し動作と、前記一の画素及び前記一の画素と連続して配列された他の画素の各信号の混合信号を読み出す第２の読み出し動作との切り替えを制御し、
前記読み出し制御ステップは、前記一の画素及び前記他の画素の各選択期間の割合を徐々に変化させた後に前記第１の読み出し動作及び前記第２の読み出し動作の切り替えを行うことを特徴とする撮像装置の制御方法。 A method for controlling an imaging apparatus including an imaging device in which a plurality of pixels are arranged two-dimensionally,
A read control step for performing control to read out the signal of each pixel selected in units of rows in the image sensor for each column;
The read control step includes a first read operation for reading a signal of a selected pixel in each column, and each signal of the one pixel and another pixel arranged in succession with the one pixel. Controlling the switching to the second reading operation for reading the mixed signal of
In the read control step, the first read operation and the second read operation are switched after gradually changing the ratio of each selection period of the one pixel and the other pixel. Control method of imaging apparatus.

複数の画素が２次元状に配列された撮像素子を備える撮像装置の制御方法であって、
前記撮像素子において行単位で選択された各画素の信号を列毎に読み出す制御を行う読み出し制御ステップを有し、
前記読み出し制御ステップは、各前記列において、選択された一の画素及び前記一の画素と連続して配列された他の画素の各信号の混合信号を読み出す読み出し動作を制御し、
前記読み出し動作の切り替えを指示された場合、前記読み出し制御ステップは、前記一の画素及び前記他の画素の各選択期間の割合を徐々に変化させることを特徴とする撮像装置の制御方法。 A method for controlling an imaging apparatus including an imaging device in which a plurality of pixels are arranged two-dimensionally,
A read control step for performing control to read out the signal of each pixel selected in units of rows in the image sensor for each column;
The readout control step controls a readout operation of reading out a mixed signal of each signal of the selected one pixel and the other pixels arranged continuously with the one pixel in each column.
When the switching of the reading operation is instructed, the reading control step gradually changes the ratio of each selection period of the one pixel and the other pixel.

複数の画素が２次元状に配列された撮像素子を備える撮像装置の制御方法をコンピュータに実行させるプログラムであって、
前記撮像装置の制御方法は、
前記撮像素子において行単位で選択された各画素の信号を列毎に読み出す制御を行う読み出し制御ステップを有し、
前記読み出し制御ステップは、各前記列において、選択された一の画素の信号を読み出す第１の読み出し動作と、前記一の画素及び前記一の画素と連続して配列された他の画素の各信号の混合信号を読み出す第２の読み出し動作との切り替えを制御し、
前記読み出し制御ステップは、前記一の画素及び前記他の画素の各選択期間の割合を徐々に変化させた後に前記第１の読み出し動作及び前記第２の読み出し動作の切り替えを行うことを特徴とするプログラム。 A program for causing a computer to execute a control method of an imaging apparatus including an imaging element in which a plurality of pixels are arranged in a two-dimensional manner,
The control method of the imaging device is:
A read control step for performing control to read out the signal of each pixel selected in units of rows in the image sensor for each column;
The read control step includes a first read operation for reading a signal of a selected pixel in each column, and each signal of the one pixel and another pixel arranged in succession with the one pixel. Controlling the switching to the second reading operation for reading the mixed signal of
In the read control step, the first read operation and the second read operation are switched after gradually changing the ratio of each selection period of the one pixel and the other pixel. program.

複数の画素が２次元状に配列された撮像素子を備える撮像装置の制御方法をコンピュータに実行させるプログラムであって、
前記撮像装置の制御方法は、
前記撮像素子において行単位で選択された各画素の信号を列毎に読み出す制御を行う読み出し制御ステップを有し、
前記読み出し制御ステップは、各前記列において、選択された一の画素及び前記一の画素と連続して配列された他の画素の各信号の混合信号を読み出す読み出し動作を制御し、
前記読み出し動作の切り替えを指示された場合、前記読み出し制御ステップは、前記一の画素及び前記他の画素の各選択期間の割合を徐々に変化させることを特徴とするプログラム。 A program for causing a computer to execute a control method of an imaging apparatus including an imaging element in which a plurality of pixels are arranged in a two-dimensional manner,
The control method of the imaging device is:
A read control step for performing control to read out the signal of each pixel selected in units of rows in the image sensor for each column;
The readout control step controls a readout operation of reading out a mixed signal of each signal of the selected one pixel and the other pixels arranged continuously with the one pixel in each column.
When instructed to switch the readout operation, the readout control step gradually changes a ratio of each selection period of the one pixel and the other pixels.