JP2015128256A

JP2015128256A - Image processing system, image processing method, imaging apparatus and imaging device

Info

Publication number: JP2015128256A
Application number: JP2013273410A
Authority: JP
Inventors: 琢士小山; Takushi Koyama
Original assignee: Samsung Electronics Co Ltd
Current assignee: Samsung Electronics Co Ltd
Priority date: 2013-12-27
Filing date: 2013-12-27
Publication date: 2015-07-09

Abstract

PROBLEM TO BE SOLVED: To provide technology for reducing stress given to a user when a still image is photographed.SOLUTION: An image processing system 20 includes: a moving image generation section 21 for generating first moving image data in response to a first image signal outputted from a first region in an imaging device 10; and a still image generation section 22 for generating still image data in response to a synthesis signal of the first image signal and a second image signal outputted from a second region in the imaging device.

Description

本発明は、画像処理装置、画像処理方法、撮像装置および撮像素子に関する。 The present invention relates to an image processing device, an image processing method, an imaging device, and an imaging element.

近年、ミラーレスなどのコンパクトカメラがカメラ市場において活性化されている。ミラーレスカメラはカメラ内部にＯｐｔｉｃａｌＶｉｅｗＦｉｎｄｅｒのためのミラーを備えていないため、コンパクト化が実現されている。ＯｐｔｉｃａｌＶｉｅｗＦｉｎｄｅｒの代わりに、ミラーレスカメラは、イメージセンサ（ＩｍａｇｅＳｅｎｓｏｒ）からの動画出力を用いるＥｌｅｃｔｒｉｃＶｉｅｗＦｉｎｄｅｒを備えるのが一般的である。 In recent years, compact cameras such as mirrorless have been activated in the camera market. Since the mirrorless camera does not include a mirror for the optical view finder inside the camera, downsizing is realized. Instead of an optical viewfinder, a mirrorless camera generally includes an electric viewfinder that uses moving image output from an image sensor.

かかる一般的なミラーレスカメラにおいては、例えば、静止画を撮影するための操作がなされると、動画データを生成するモード（以下、単に「ＬｉｖｅＶｉｅｗＭｏｄｅ」とも言う。）から静止画データを生成するモード（以下、単に「静止画生成モード」とも言う。）に動作モードが切り替えられる。動画データと静止画データとを生成する技術には様々な技術が開示されている（例えば、特許文献１参照。）。 In such a general mirrorless camera, for example, when an operation for photographing a still image is performed, still image data is generated from a mode for generating moving image data (hereinafter also simply referred to as “Live View Mode”). The operation mode is switched to a mode to perform (hereinafter, also simply referred to as “still image generation mode”). Various techniques for generating moving image data and still picture data have been disclosed (see, for example, Patent Document 1).

特開２０１２−９９１６号公報JP 2012-9916 A

しかしながら、動作モードの切り替え時においては、静止画データのもとになる電気信号を得るための露出時間が必要となる。そのため、少なくともこれらの露出時間には動画データが生成されなくなり、ＥｌｅｃｔｒｉｃＶｉｅｗＦｉｎｄｅｒに動画データが表示されない現象（以下、「ＤｉｓｐｌａｙＢｌａｃｋｏｕｔ」とも言う。）が生じ得る。以下、ＥｌｅｃｔｒｉｃＶｉｅｗＦｉｎｄｅｒに動画データが表示されない時間をブランク時間とも言う。 However, at the time of switching the operation mode, an exposure time is required to obtain an electrical signal that is the basis of still image data. For this reason, moving image data is not generated at least during these exposure times, and a phenomenon in which moving image data is not displayed on the Electric View Finder (hereinafter also referred to as “Display Black out”) may occur. Hereinafter, the time during which moving image data is not displayed on the electric viewfinder is also referred to as a blank time.

このようなブランク時間は、静止画データを撮影するための操作を行うユーザに対して大きなストレスを与えてしまう可能性がある。さらに、ＬｉｖｅＶｉｅｗＭｏｄｅにおいて生成される動画データよりも静止画生成モードにおいて生成される静止画データのほうが大きなデータ量であるのが一般的である。そのため、静止画データのデータ量が大きくなるほどブランク時間は長くなりやすくなり、静止画を撮影するための操作を行うユーザに対してさらに大きなストレスを与えてしまう可能性がある。 Such a blank time may give a great stress to a user who performs an operation for photographing still image data. Further, the still image data generated in the still image generation mode generally has a larger data amount than the moving image data generated in the Live View Mode. For this reason, as the amount of still image data increases, the blank time tends to become longer, and there is a possibility that a greater stress is applied to a user who performs an operation for taking a still image.

そこで、本発明は、静止画の撮影時にユーザに対して与えるストレスを低減することが可能な技術を提供する。 Therefore, the present invention provides a technique capable of reducing the stress applied to the user when taking a still image.

本発明のある実施形態によれば、撮像素子における第１の領域から出力された第１の画像信号に基づいて第１の動画データを生成する動画生成部と、前記第１の画像信号と前記撮像素子における第２の領域から出力された第２の画像信号との合成信号に基づいて静止画データを生成する静止画生成部と、を備える、画像処理装置が提供される。 According to an embodiment of the present invention, a moving image generation unit that generates first moving image data based on a first image signal output from a first region in an image sensor, the first image signal, An image processing apparatus is provided that includes a still image generation unit that generates still image data based on a composite signal with a second image signal output from a second region in the image sensor.

かかる構成によれば、静止画生成モードにおいては、第１の領域から電気信号の読み出しがなされればよいため、ライブビューモードの最中に第２の領域に対して静止画データのもとになる電気信号を得るための露出を行うことが可能となる。したがって、少なくとも静止画のもとになる電気信号を得るための露出時間待たされることがなくなり、静止画データの撮影時にユーザに対して与えるストレスを低減することが可能となる。 According to such a configuration, in the still image generation mode, it is only necessary to read out an electric signal from the first area. Therefore, during the live view mode, the second area is used as a basis for still image data. It is possible to perform exposure to obtain an electrical signal. Therefore, at least the exposure time for obtaining the electrical signal that is the basis of the still image is not waited, and it is possible to reduce the stress applied to the user when shooting the still image data.

前記動画生成部は、前記第２の画像信号に基づいて第２の動画データを生成してよい。かかる構成によれば、静止画生成モードにおいても生成された第２の動画データをリアルタイムに表示するライブビュー表示を行うことが可能となる。 The moving image generation unit may generate second moving image data based on the second image signal. According to such a configuration, it is possible to perform live view display in which the second moving image data generated in the still image generation mode is displayed in real time.

例えば、前記動画生成部は、前記第２の画像信号から加算平均により前記第１の領域に対応する画像信号を生成信号として生成し、前記生成信号に基づいて前記第２の動画データを生成してよい。かかる構成によれば、簡易に第２の動画データを生成することが可能である。 For example, the moving image generation unit generates an image signal corresponding to the first region from the second image signal by addition averaging, and generates the second moving image data based on the generation signal. It's okay. According to such a configuration, it is possible to easily generate the second moving image data.

また、前記動画生成部は、前記第１の画像信号と前記生成信号とに基づいて補間信号を生成し、前記補間信号に基づいて前記第２の動画データを生成してよい。かかる構成によれば、補間信号に基づいた第２の動画データが生成されるため、より高精度な第２の動画データが生成され得る。 The moving image generation unit may generate an interpolation signal based on the first image signal and the generation signal, and generate the second moving image data based on the interpolation signal. According to such a configuration, since the second moving image data based on the interpolation signal is generated, the second moving image data with higher accuracy can be generated.

前記静止画生成部は、前記補間信号と前記第２の画像信号とに基づいて、前記静止画データを生成してよい。かかる構成によれば、より高精度な静止画データが生成され得る。 The still image generation unit may generate the still image data based on the interpolation signal and the second image signal. According to this configuration, still image data with higher accuracy can be generated.

前記画像処理装置は、前記第１の動画データと前記第２の動画データとを表示させる表示制御部を備えてよい。かかる構成によれば、前記第１の動画データと前記第２の動画データとをユーザに閲覧させることが可能となる。 The image processing apparatus may include a display control unit that displays the first moving image data and the second moving image data. According to such a configuration, it becomes possible for the user to browse the first moving image data and the second moving image data.

本発明の別の実施形態によれば、撮像素子における第１の領域から出力された第１の画像信号に基づいて第１の動画データを生成するステップと、前記第１の画像信号と前記撮像素子における第２の領域から出力された第２の画像信号との合成信号に基づいて静止画データを生成するステップと、を含む、画像処理方法が提供される。 According to another embodiment of the present invention, the step of generating the first moving image data based on the first image signal output from the first region in the image sensor, the first image signal, and the imaging Generating still image data based on a combined signal with the second image signal output from the second region in the element.

かかる方法によれば、静止画生成モードにおいては、第１の領域から電気信号の読み出しがなされればよいため、ライブビューモードの最中に第２の領域に対して静止画データのもとになる電気信号を得るための露出を行うことが可能となる。したがって、少なくとも静止画のもとになる電気信号を得るための露出時間待たされることがなくなり、静止画データの撮影時にユーザに対して与えるストレスを低減することが可能となる。 According to this method, in the still image generation mode, it is only necessary to read out an electrical signal from the first area. Therefore, during the live view mode, the second area is used as a basis for still image data. It is possible to perform exposure to obtain an electrical signal. Therefore, at least the exposure time for obtaining the electrical signal that is the basis of the still image is not waited, and it is possible to reduce the stress applied to the user when shooting the still image data.

本発明の別の実施形態によれば、第１の画像信号を出力する第１の領域および第２の画像信号を出力する第２の領域を備える、撮像素子と、前記第１の画像信号に基づいて第１の動画データを生成する動画生成部と、前記第１の画像信号と前記第２の画像信号との合成信号に基づいて静止画データを生成する静止画生成部と、を備える、画像処理装置と、を有する、撮像装置が提供される。 According to another embodiment of the present invention, an image sensor comprising a first region for outputting a first image signal and a second region for outputting a second image signal, and the first image signal A moving image generating unit that generates first moving image data based on the image data, and a still image generating unit that generates still image data based on a composite signal of the first image signal and the second image signal. And an image processing apparatus.

本発明の別の実施形態によれば、各々が複数の光電変換素子を含んで構成される第１の領域および第２の領域を有する撮像素子であって、前記第１の領域は、第１の画像信号を出力し、前記第２の領域は、第２の画像信号を出力し、前記第１の画像信号に基づいて第１の動画データが生成され、前記第１の画像信号と前記第２の画像信号との合成信号に基づいて静止画データが生成される、撮像素子が提供される。 According to another embodiment of the present invention, there is provided an imaging device having a first region and a second region each including a plurality of photoelectric conversion elements, wherein the first region is a first region. The second area outputs the second image signal, and the first moving image data is generated based on the first image signal, and the first image signal and the first image signal are output. An imaging device is provided in which still image data is generated based on a composite signal with two image signals.

以上説明したように、本発明によれば、静止画の撮影時にユーザに対して与えるストレスを低減することが可能である。 As described above, according to the present invention, it is possible to reduce the stress applied to the user when taking a still image.

（ａ）は一般的な技術における静止画生成モードの読み出し対象素子群の例を示し、（ｂ）は一般的な技術におけるＬｉｖｅＶｉｅｗＭｏｄｅの読み出し対象素子群の例を示す図である。(A) shows the example of the read target element group of the still image generation mode in a general technique, (b) is a figure which shows the example of the read target element group of the Live View Mode in a general technique. 一般的な技術における動作モード切り替え時の動作を説明するための図である。It is a figure for demonstrating the operation | movement at the time of the operation mode switching in a general technique. 一般的な技術における動作シーケンスの例を示す図である。It is a figure which shows the example of the operation | movement sequence in a general technique. 本発明の実施形態に係る撮像装置の構成例を示す図である。It is a figure which shows the structural example of the imaging device which concerns on embodiment of this invention. 同実施形態に係る撮像素子の構成例を示す図である。It is a figure showing an example of composition of an image sensor concerning the embodiment. （ａ）は同実施形態における静止画生成モードの読み出し対象素子群の例を示し、（ｂ）は同実施形態におけるＬｉｖｅＶｉｅｗＭｏｄｅの読み出し対象素子群の例を示す図である。(A) shows an example of a read target element group in the still image generation mode in the embodiment, and (b) shows an example of a read target element group in the Live View Mode in the same embodiment. 同実施形態における動作モード切り替え時の露光動作を説明するための図である。It is a figure for demonstrating the exposure operation | movement at the time of the operation mode switch in the embodiment. 同実施形態における動作モード切り替え時の合成動作を説明するための図である。It is a figure for demonstrating the synthetic | combination operation | movement at the time of the operation mode switch in the embodiment. 同実施形態における動作シーケンスの例を示す図である。It is a figure which shows the example of the operation | movement sequence in the same embodiment. 同実施形態における静止画連続撮影時の動作モード切り替え時の合成動作を説明するための図である。It is a figure for demonstrating the synthetic | combination operation | movement at the time of the operation mode switch at the time of the still image continuous imaging | photography in the embodiment. 同実施形態における静止画生成モードの動画生成動作の例を説明するための図である。It is a figure for demonstrating the example of the moving image production | generation operation | movement of the still image production | generation mode in the embodiment. 同実施形態における静止画生成モードの動画生成動作の変形例を説明するための図である。It is a figure for demonstrating the modification of the moving image generation operation | movement of the still image generation mode in the embodiment.

以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書および図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付すことにより重複説明を省略する。 Exemplary embodiments of the present invention will be described below in detail with reference to the accompanying drawings. In the present specification and drawings, components having substantially the same functional configuration are denoted by the same reference numerals, and redundant description is omitted.

また、本明細書および図面において、実質的に同一の機能構成を有する複数の構成要素を、同一の符号の後に異なるアルファベットまたは数字を付して区別する場合もある。ただし、実質的に同一の機能構成を有する複数の構成要素の各々を特に区別する必要がない場合、同一符号のみを付する。 In the present specification and drawings, a plurality of constituent elements having substantially the same functional configuration may be distinguished by attaching different alphabets or numbers after the same reference numeral. However, when it is not necessary to particularly distinguish each of a plurality of constituent elements having substantially the same functional configuration, only the same reference numerals are given.

（一般的な技術）
まず、一般的な技術について説明する。一般的な撮像素子は、複数の光電変換素子を含んだイメージセンサを備えている。イメージセンサは、外部からの光を結像させ、結像された光を電荷量に光電変換し、当該電荷量を電気信号に変換する。イメージセンサから読み出された電気信号は、静止画生成モードにおいては静止画データの生成に用いられ、ＬｉｖｅＶｉｅｗＭｏｄｅにおいては動画データの生成に用いられる。 (General technology)
First, general techniques will be described. A general image sensor includes an image sensor including a plurality of photoelectric conversion elements. The image sensor forms an image of light from the outside, photoelectrically converts the imaged light into a charge amount, and converts the charge amount into an electric signal. The electrical signal read from the image sensor is used to generate still image data in the still image generation mode, and is used to generate moving image data in the Live View Mode.

ＬｉｖｅＶｉｅｗＭｏｄｅと静止画生成モードとの切り替えのタイミングは特に限定されないが、例えば、ＬｉｖｅＶｉｅｗＭｏｄｅから静止画生成モードへの動作モードの切り替えは、静止画データを撮影するための操作がユーザによってなされた場合に行われ得る。また、静止画データのもとになる電気信号の読み出しが終わると、静止画生成モードからＬｉｖｅＶｉｅｗＭｏｄｅへの動作モードの切り替えが行われ得る。 The timing of switching between the Live View Mode and the still image generation mode is not particularly limited. For example, when the operation mode is switched from the Live View Mode to the still image generation mode, an operation for capturing still image data is performed by the user. Can be done. In addition, when the readout of the electrical signal that is the basis of the still image data is completed, the operation mode can be switched from the still image generation mode to the Live View Mode.

図１（ａ）は、一般的な技術における静止画生成モードの読み出し対象素子群の例を示し、図１（ｂ）は、一般的な技術におけるＬｉｖｅＶｉｅｗＭｏｄｅの読み出し対象素子群の例を示す図である。図１（ａ）および図１（ｂ）には、静止画生成モードおよびＬｉｖｅＶｉｅｗＭｏｄｅそれぞれにおける読み出し対象素子群の例がＲＧＢ要素によって示されている。 FIG. 1A shows an example of a read target element group in a still image generation mode in a general technique, and FIG. 1B shows an example of a read target element group in a live view mode in a general technique. FIG. In FIG. 1A and FIG. 1B, examples of read target element groups in the still image generation mode and the live view mode are shown by RGB elements.

一般的な技術においては、図１（ａ）に示すように、静止画生成モードでは、イメージセンサのすべての光電変換素子から電気信号の読み出しがなされる。このようにして読み出された電気信号は静止画データの生成に用いられる。一方、図１（ｂ）に示すように、ＬｉｖｅＶｉｅｗＭｏｄｅでは、イメージセンサの一部（第０行、第３行、第６行、・・・）の光電変換素子から電気信号の読み出しがなされる。このようにして読み出された電気信号は動画データの生成に用いられる。 In a general technique, as shown in FIG. 1A, in the still image generation mode, electrical signals are read from all the photoelectric conversion elements of the image sensor. The electrical signal read out in this way is used to generate still image data. On the other hand, as shown in FIG. 1B, in the live view mode, electrical signals are read out from photoelectric conversion elements in a part of the image sensor (0th row, 3rd row, 6th row,...). The The electrical signal read out in this way is used to generate moving image data.

図２は、一般的な技術における動作モード切り替え時の動作を説明するための図である。図２には、「ＬｉｖｅＶｉｅｗ」および「Ｓｔｉｌｌ」が示されている。本明細書において、「ＬｉｖｅＶｉｅｗ」は、ＬｉｖｅＶｉｅｗＭｏｄｅを示し、「Ｓｔｉｌｌ」は、静止画生成モードを示している。図２に示すように、静止画生成モードにおいては、イメージセンサのすべての光電変換素子から電気信号の読み出しがなされるため、ＬｉｖｅＶｉｅｗＭｏｄｅの後に静止画データのもとになる電気信号を得るための露出時間が必要となる。 FIG. 2 is a diagram for explaining the operation at the time of operation mode switching in a general technique. FIG. 2 shows “Live View” and “Still”. In this specification, “Live View” indicates the Live View Mode, and “Still” indicates the still image generation mode. As shown in FIG. 2, in the still image generation mode, electric signals are read from all the photoelectric conversion elements of the image sensor, so that an electric signal that is the basis of the still image data is obtained after the Live View Mode. Exposure time is required.

図３は、一般的な技術における動作シーケンスの例を示す図である。静止画生成モードにおいては、イメージセンサのすべての光電変換素子から電気信号の読み出しがなされるため、ＬｉｖｅＶｉｅｗＭｏｄｅの後に静止画データのもとになる電気信号を得るための露出時間が必要となる。また、静止画生成モードにおいては、イメージセンサのすべての光電変換素子から電気信号の読み出しがなされるため、静止画データのもとになる電気信号が読み出された後に動画データのもとになる電気信号を得るための露出時間が必要となる。 FIG. 3 is a diagram illustrating an example of an operation sequence in a general technique. In the still image generation mode, since an electrical signal is read from all the photoelectric conversion elements of the image sensor, an exposure time is required to obtain an electrical signal that is the basis of still image data after the Live View Mode. . In the still image generation mode, since the electrical signal is read from all the photoelectric conversion elements of the image sensor, the electrical signal that is the basis of the still image data is read and then the moving image data is generated. An exposure time is required to obtain an electrical signal.

したがって、図３に示すように、静止画データのもとになる電気信号を得るための露出時間、静止画データのもとになる電気信号を読み出すための読み出し時間および動画データのもとになる電気信号を得るための露出時間は、動画データが生成されないブランク時間となり得る。そして、これらの時間には、図３に示すように、ＥｌｅｃｔｒｉｃＶｉｅｗＦｉｎｄｅｒに動画データが表示されない「ＤｉｓｐｌａｙＢｌａｃｋｏｕｔ」が生じ得る。このようなブランク時間は、静止画を撮影するための操作を行うユーザに対して大きなストレスを与えてしまう可能性がある。 Therefore, as shown in FIG. 3, the exposure time for obtaining the electrical signal that is the basis of the still image data, the readout time for reading the electrical signal that is the basis of the still image data, and the source of the moving image data. The exposure time for obtaining the electrical signal can be a blank time during which no moving image data is generated. At these times, as shown in FIG. 3, “Display Black out” in which moving image data is not displayed on the Electric View Finder may occur. Such a blank time may give a great stress to a user who performs an operation for photographing a still image.

さらに、ＬｉｖｅＶｉｅｗＭｏｄｅにおいて生成される動画データよりも静止画生成モードにおいて生成される静止画データのほうが大きなデータ量であるのが一般的である。そのため、静止画データのデータ量が大きくなるほどブランク時間は長くなりやすくなり、静止画を撮影するための操作を行うユーザに対してさらに大きなストレスを与えてしまう可能性がある。そこで、本明細書においては、静止画の撮影時にユーザに対して与えるストレスを低減することが可能な技術を提案する。 Further, the still image data generated in the still image generation mode generally has a larger data amount than the moving image data generated in the Live View Mode. For this reason, as the amount of still image data increases, the blank time tends to become longer, and there is a possibility that a greater stress is applied to a user who performs an operation for taking a still image. Therefore, the present specification proposes a technique that can reduce the stress applied to the user when taking a still image.

（本発明の実施形態に係る撮像装置）
続いて、本発明の実施形態について説明する。図４は、本発明の実施形態に係る撮像装置１の構成例を示す図である。図４に示すように、本発明の実施形態に係る撮像装置１は、レンズＬと、撮像素子１０と、制御部２０と、操作部３０と、表示部４０と、記憶部５０とを備える。制御部２０は、画像処理装置として機能し得る。以下、撮像装置１が有するこれらの構成について詳細に説明する。 (Image pickup device according to an embodiment of the present invention)
Subsequently, an embodiment of the present invention will be described. FIG. 4 is a diagram illustrating a configuration example of the imaging apparatus 1 according to the embodiment of the present invention. As shown in FIG. 4, the imaging apparatus 1 according to the embodiment of the present invention includes a lens L, an imaging element 10, a control unit 20, an operation unit 30, a display unit 40, and a storage unit 50. The control unit 20 can function as an image processing apparatus. Hereinafter, these configurations of the imaging apparatus 1 will be described in detail.

撮像素子１０は、複数の光電変換素子を含んだイメージセンサを備えている。イメージセンサは、レンズＬを通して入力された光を結像させ、結像された光を電荷量に光電変換し、当該電荷量を電気信号に変換する。イメージセンサから読み出された電気信号は、静止画生成モードにおいては静止画データの生成に用いられ、ＬｉｖｅＶｉｅｗＭｏｄｅにおいては動画データの生成に用いられる。撮像素子１０は、走査ラインごとに順次シャッタを切る方式（ローリングシャッタ方式）により駆動されてよい。 The image sensor 10 includes an image sensor including a plurality of photoelectric conversion elements. The image sensor forms an image of light input through the lens L, photoelectrically converts the imaged light into a charge amount, and converts the charge amount into an electrical signal. The electrical signal read from the image sensor is used to generate still image data in the still image generation mode, and is used to generate moving image data in the Live View Mode. The image sensor 10 may be driven by a method of sequentially releasing the shutter for each scanning line (rolling shutter method).

制御部２０は、ＣＰＵ（ＣｅｎｔｒａｌＰｒｏｃｅｓｓｉｎｇＵｎｉｔ）、ＲＯＭ（ＲｅａｄＯｎｌｙＭｅｍｏｒｙ）およびＲＡＭ（ＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ）などを有し、制御プログラムに基づいて、撮像装置１の各構成要素を制御したり、各種のデータ処理を実行したりする演算回路である。制御プログラムは、記憶部５０に格納されていてよい。制御部２０は、撮像素子１０から入力された電気信号（画像信号）をデジタル画像信号に変換し、そのデジタル画像信号に対して種々の画像処理を施して画像データを生成する。 The control unit 20 includes a CPU (Central Processing Unit), a ROM (Read Only Memory), a RAM (Random Access Memory), and the like, and controls each component of the image pickup apparatus 1 based on a control program. An arithmetic circuit that executes data processing. The control program may be stored in the storage unit 50. The control unit 20 converts an electrical signal (image signal) input from the image sensor 10 into a digital image signal, and performs various image processing on the digital image signal to generate image data.

ここで、制御部２０は、動画生成部２１、静止画生成部２２および表示制御部２３を備える。動画生成部２１は、ＬｉｖｅＶｉｅｗＭｏｄｅにおいて動画データを生成する。また、静止画生成部２２は、静止画生成モードにおいて静止画データを生成して記憶部５０に記録する。表示制御部２３は、動画生成部２１によって生成された動画データをリアルタイムに表示するライブビュー表示を行う。また、表示制御部２３は、ユーザによって静止画データを表示させるための操作がなされた場合に、記憶部５０に記録された静止画データを表示することが可能である。これらの機能部については後に詳細に説明する。 Here, the control unit 20 includes a moving image generation unit 21, a still image generation unit 22, and a display control unit 23. The moving image generation unit 21 generates moving image data in Live View Mode. The still image generation unit 22 generates still image data in the still image generation mode and records it in the storage unit 50. The display control unit 23 performs live view display that displays the moving image data generated by the moving image generation unit 21 in real time. Further, the display control unit 23 can display still image data recorded in the storage unit 50 when an operation for displaying still image data is performed by the user. These functional units will be described in detail later.

操作部３０は、ユーザによる操作を受け付ける機能を有する。ユーザによる操作には、静止画を撮影するための操作が含まれてもよいし、静止画を連続撮影するための操作が含まれてもよい。操作部３０は、ボタンなどといった種々の操作部材を含んでもよいし、タッチパネルを含んでもよい。表示部４０は、表示制御部２３による制御に従って各種の画像データを表示することが可能である。記憶部５０は、制御部２０の制御に従って画像データを記憶したり、記憶している画像データを制御部２０の制御に従って出力したりする。記憶部５０は、不揮発性の記録媒体であってよい。 The operation unit 30 has a function of accepting an operation by a user. The operation by the user may include an operation for capturing a still image, and may include an operation for continuously capturing still images. The operation unit 30 may include various operation members such as buttons and may include a touch panel. The display unit 40 can display various image data according to the control by the display control unit 23. The storage unit 50 stores image data according to the control of the control unit 20, and outputs the stored image data according to the control of the control unit 20. The storage unit 50 may be a non-volatile recording medium.

続いて、本発明に実施形態に係る撮像素子１０の詳細について説明する。図５は、本発明の実施形態に係る撮像素子１０の構成例を示す図である。図５に示すように、本発明の実施形態に係る撮像素子１０は、制御信号生成部１１と、イメージセンサ１２と、ＣｏｌｕｍｎＤｒｉｖｅｒ１３と、ＲｏｗＤｒｉｖｅｒ１４と、ＤａｔａＢｕｓ１５と、ＬｉｖｅＶｉｅｗＢｕｆｆｅｒ１６と、ＳｔｉｌｌＢｕｆｆｅｒ１７と、合成部１８とを備える。以下、撮像素子１０が有するこれらの構成について説明する。 Next, details of the image sensor 10 according to the embodiment of the present invention will be described. FIG. 5 is a diagram illustrating a configuration example of the image sensor 10 according to the embodiment of the present invention. As shown in FIG. 5, the image sensor 10 according to the embodiment of the present invention includes a control signal generation unit 11, an image sensor 12, a column driver 13, a row driver 14, a data bus 15, and a live view buffer 16. And Still Buffer 17 and synthesis unit 18. Hereinafter, these configurations of the image sensor 10 will be described.

制御信号生成部１１は、電気信号の読み出し対象の光電変換素子を指定するための制御信号を生成する。ＣｏｌｕｍｎＤｒｉｖｅｒ１３は、制御信号生成部１１によって生成された制御信号に従って、電気信号を読み出す光電変換素子の垂直方向の位置を選択する。また、ＲｏｗＤｒｉｖｅｒ１４は、制御信号生成部１１によって生成された制御信号に従って、電気信号を読み出す光電変換素子の水平方向の位置を選択する。 The control signal generator 11 generates a control signal for designating a photoelectric conversion element from which an electric signal is read. The column driver 13 selects the vertical position of the photoelectric conversion element that reads the electric signal in accordance with the control signal generated by the control signal generation unit 11. In addition, the row driver 14 selects the horizontal position of the photoelectric conversion element that reads the electric signal in accordance with the control signal generated by the control signal generation unit 11.

イメージセンサ１２は、複数の光電変換素子を含んでおり、外部からの光を結像させ、結像された光を電荷量に光電変換し、当該電荷量を電気信号に変換する。ＣｏｌｕｍｎＤｒｉｖｅｒ１３によって垂直方向の位置が選択され、ＲｏｗＤｒｉｖｅｒ１４によって水平方向の位置が選択された光電変換素子は、ＤａｔａＢｕｓ１５に対して電気信号を出力する。ＤａｔａＢｕｓ１５は、イメージセンサ１２から出力された電気信号を一時的に記憶する。 The image sensor 12 includes a plurality of photoelectric conversion elements, images external light, photoelectrically converts the imaged light into a charge amount, and converts the charge amount into an electric signal. The photoelectric conversion element in which the vertical position is selected by the column driver 13 and the horizontal position is selected by the row driver 14 outputs an electrical signal to the data bus 15. The Data Bus 15 temporarily stores the electrical signal output from the image sensor 12.

ここで、制御信号生成部１１は、動作モードがＬｉｖｅＶｉｅｗＭｏｄｅである場合と静止画生成モードである場合とにおいて異なる光電変換素子群を指定するための制御信号を生成する。図６（ａ）は、本発明の実施形態における静止画生成モードの読み出し対象素子群の例を示している。また、図６（ｂ）は、本発明の実施形態におけるＬｉｖｅＶｉｅｗＭｏｄｅの読み出し対象素子群の例を示す図である。 Here, the control signal generation unit 11 generates a control signal for designating different photoelectric conversion element groups when the operation mode is Live View Mode and when the operation mode is the still image generation mode. FIG. 6A shows an example of a read target element group in the still image generation mode in the embodiment of the present invention. FIG. 6B is a diagram showing an example of a read target element group in the Live View Mode in the embodiment of the present invention.

図６（ａ）に示すように、動作モードが静止画生成モードである場合、イメージセンサ１２に含まれる第１の領域（第０行、第２行、第３行、第５行、第６行、・・・）を構成する光電変換素子群は第２の画像信号（以下、「静止画像信号」とも言う。）を出力する。ここで、第１の領域は、図６（ａ）に示したように水平方向のライン群であってもよいし、垂直方向のライン群であってもよいし、その他の領域であってもよい。 As shown in FIG. 6A, when the operation mode is the still image generation mode, the first region (0th row, 2nd row, 3rd row, 5th row, 6th row) included in the image sensor 12 is used. The photoelectric conversion element group constituting the row,... Outputs a second image signal (hereinafter also referred to as “still image signal”). Here, the first area may be a horizontal line group as shown in FIG. 6A, a vertical line group, or another area. Good.

一方、図６（ｂ）に示すように、動作モードがＬｉｖｅＶｉｅｗＭｏｄｅである場合、イメージセンサ１２に含まれる第２の領域（第１行、第４行、第７行、・・・）を構成する光電変換素子群は第１の画像信号（以下、「ライブビュー画像信号」とも言う。）を出力する。ここで、第２の領域は、図６（ｂ）に示したように、イメージセンサ１２に含まれる複数の光電変換素子のうち、第１の領域（第０行、第２行、第３行、第５行、第６行、・・・）以外の領域であってよい。 On the other hand, as shown in FIG. 6B, when the operation mode is Live View Mode, the second area (first row, fourth row, seventh row,...) Included in the image sensor 12 is displayed. The photoelectric conversion element group to be configured outputs a first image signal (hereinafter also referred to as “live view image signal”). Here, as shown in FIG. 6B, the second area is the first area (the 0th row, the second row, the third row) among the plurality of photoelectric conversion elements included in the image sensor 12. , 5th row, 6th row, ...).

図５に戻って説明を続ける。ＬｉｖｅＶｉｅｗＢｕｆｆｅｒ１６は、ＤａｔａＢｕｓ１５から出力されたライブビュー画像信号を一時的に記憶する。また、ＳｔｉｌｌＢｕｆｆｅｒ１７は、ＤａｔａＢｕｓ１５から出力された静止画像信号を一時的に記憶する。合成部１８は、ライブビュー画像信号と静止画像信号とを合成して、静止画データのもとになる合成信号を生成する。なお、ライブビュー画像信号と静止画像信号との間においては時間差が生じ得るが、ライブビュー画像信号の時間変化に基づいて時間差による被写体のずれを画像処理によって補正することが可能である。 Returning to FIG. The Live View Buffer 16 temporarily stores the live view image signal output from the Data Bus 15. Still Buffer 17 temporarily stores the still image signal output from Data Bus 15. The synthesizer 18 synthesizes the live view image signal and the still image signal to generate a synthesized signal that is the basis of the still image data. Note that although a time difference may occur between the live view image signal and the still image signal, the subject shift due to the time difference can be corrected by image processing based on the time change of the live view image signal.

動画生成部２１は、動作モードがＬｉｖｅＶｉｅｗＭｏｄｅである場合、ライブビュー画像信号に基づいて第１の動画データを生成する。具体的には、動画生成部２１は、撮像素子１０から入力されたライブビュー画像信号をデジタル画像信号に変換し、そのデジタル画像信号に対して種々の画像処理を施して第１の動画データを生成する。種々の画像処理は特に限定されない。表示制御部２３は、このようにして生成された第１の動画データを表示部４０に表示させる。 When the operation mode is Live View Mode, the moving image generation unit 21 generates first moving image data based on the live view image signal. Specifically, the moving image generation unit 21 converts the live view image signal input from the image sensor 10 into a digital image signal, performs various image processing on the digital image signal, and generates the first moving image data. Generate. Various image processing is not particularly limited. The display control unit 23 causes the display unit 40 to display the first moving image data generated in this way.

静止画生成部２２は、動作モードが静止画生成モードである場合、ライブビュー画像信号と静止画像信号との合成信号に基づいて静止画データを生成する。具体的には、静止画生成部２２は、撮像素子１０から入力された静止画像信号をデジタル画像信号に変換し、そのデジタル画像信号に対して種々の画像処理を施して静止画データを生成する。種々の画像処理は特に限定されない。静止画生成部２２は、このようにして生成された静止画データを記憶部５０に記憶させる。 When the operation mode is the still image generation mode, the still image generation unit 22 generates still image data based on a synthesized signal of the live view image signal and the still image signal. Specifically, the still image generation unit 22 converts a still image signal input from the image sensor 10 into a digital image signal, performs various image processing on the digital image signal, and generates still image data. . Various image processing is not particularly limited. The still image generation unit 22 stores the still image data generated in this way in the storage unit 50.

図７は、本発明の実施形態における動作モード切り替え時の露光動作を説明するための図である。図７に示すように、静止画生成モードにおいては、イメージセンサ１２の第１の領域（第０行、第２行、第３行、第５行、第６行、・・・）から電気信号の読み出しがなされればよいため、ＬｉｖｅＶｉｅｗＭｏｄｅの最中に第２の領域（第１行、第４行、第７行、・・・）に対して静止画データのもとになる電気信号を得るための露出を行うことが可能となる。したがって、少なくとも静止画のもとになる電気信号を得るための露出時間待たされることがなくなり、静止画データの撮影時にユーザに対して与えるストレスを低減することが可能となる。 FIG. 7 is a view for explaining an exposure operation at the time of operation mode switching in the embodiment of the present invention. As shown in FIG. 7, in the still image generation mode, an electrical signal is output from the first area (0th row, 2nd row, 3rd row, 5th row, 6th row,...) Of the image sensor 12. Therefore, it is only necessary to read out, so that an electric signal that is a source of still image data for the second area (first row, fourth row, seventh row,...) During Live View Mode. It is possible to perform exposure for obtaining the above. Therefore, at least the exposure time for obtaining the electrical signal that is the basis of the still image is not waited, and it is possible to reduce the stress applied to the user when shooting the still image data.

また、静止画生成モードにおいてイメージセンサ１２の一部から電気信号の読み出しがなされればよいため、イメージセンサ１２の全領域から電気信号の読み出しがなされる場合よりも、静止画生成モードにおける電気信号の読み出しに要する時間を低減することが可能となる。したがって、静止画データの撮影時にユーザに対して与えるストレスをさらに低減することが可能となる。 In addition, since it is only necessary to read out an electric signal from a part of the image sensor 12 in the still image generation mode, the electric signal in the still image generation mode is more than when the electric signal is read out from the entire area of the image sensor 12. It is possible to reduce the time required for reading. Therefore, it is possible to further reduce the stress applied to the user when taking still image data.

図８は、本発明の実施形態における動作モード切り替え時の合成動作を説明するための図である。図８に示すように、静止画生成モードにおいて、合成部１８は、第２の領域（第１行、第４行、第７行、・・・）から出力されたライブビュー画像信号と第１の領域（第０行、第２行、第３行、第５行、第６行、・・・）から出力された静止画像信号とを合成して、静止画データのもとになる合成信号を生成することが可能である。 FIG. 8 is a diagram for explaining a combining operation at the time of operation mode switching in the embodiment of the present invention. As shown in FIG. 8, in the still image generation mode, the synthesizer 18 outputs the live view image signal output from the second area (first row, fourth row, seventh row,...) And the first. Are combined with the still image signal output from the region (the 0th row, the 2nd row, the 3rd row, the 5th row, the 6th row,. Can be generated.

図９は、本発明の実施形態における動作シーケンスの例を示す図である。図９を参照しても把握されるように、第２の領域（第１行、第４行、第７行、・・・）から電気信号の読み出しを行っている最中に第１の領域（第０行、第２行、第３行、第５行、第６行、・・・）に対して動画データのもとになる電気信号を得るための露出を行うことが可能となる。したがって、少なくとも動画データのもとになる電気信号を得るための露出時間待たされることがなくなり、ユーザに対して与えるストレスをさらに低減することが可能となる。 FIG. 9 is a diagram showing an example of an operation sequence in the embodiment of the present invention. As can be understood by referring to FIG. 9, the first area is being read out from the second area (first row, fourth row, seventh row,...). It is possible to perform exposure to obtain an electric signal that is a source of moving image data for (0th row, 2nd row, 3rd row, 5th row, 6th row,...). Therefore, at least the exposure time for obtaining the electric signal that is the source of the moving image data is not waited, and the stress applied to the user can be further reduced.

図１０は、本発明の実施形態における静止画連続撮影時の動作モード切り替え時の合成動作を説明するための図である。図１０に示すように、静止画連続撮影時においても、複数の静止画生成モードの間にＬｉｖｅＶｉｅｗＭｏｄｅがあれば、合成部１８は、そのＬｉｖｅＶｉｅｗＭｏｄｅにおいて第２の領域（第１行、第４行、第７行、・・・）から出力されたライブビュー画像信号と第１の領域（第０行、第２行、第３行、第５行、第６行、・・・）から出力された静止画像信号とを合成して、静止画データのもとになる合成信号を生成することが可能である。 FIG. 10 is a diagram for explaining a composition operation at the time of operation mode switching during still image continuous photographing in the embodiment of the present invention. As shown in FIG. 10, even during continuous image capturing, if there is a Live View Mode between a plurality of still image generation modes, the compositing unit 18 uses the second region (first row, first row, The live view image signal output from the fourth row, the seventh row,... And the first area (the zeroth row, the second row, the third row, the fifth row, the sixth row,...). It is possible to generate a synthesized signal that is the basis of still image data by synthesizing with the still image signal output from.

また、表示制御部２３は、静止画生成モードにおいても動画データが生成された場合には、生成された動画データをリアルタイムに表示するライブビュー表示を行ってよい。そうすれば、静止画生成モードにおいてもライブビュー表示を行うことが可能である。例えば、動画生成部２１は、第１の領域（第０行、第２行、第３行、第５行、第６行、・・・）から出力された静止画像信号に基づいて第２の動画データを生成してよい。第２の動画データの生成はどのようにしてなされてもよいが、以下においてその一例について説明する。 Further, when moving image data is generated even in the still image generation mode, the display control unit 23 may perform live view display that displays the generated moving image data in real time. Then, live view display can be performed even in the still image generation mode. For example, the moving image generation unit 21 performs the second operation based on the still image signal output from the first area (the 0th row, the 2nd row, the 3rd row, the 5th row, the 6th row,...). Video data may be generated. The second moving image data may be generated in any way, and an example thereof will be described below.

図１１は、本発明の実施形態における静止画生成モードの動画生成動作の例を説明するための図である。図１１に示すように、動画生成部２１は、第１の領域（第０行、第２行、第３行、第５行、第６行、・・・）から出力された静止画像信号から加算平均により第２の領域（第１行、第４行、第７行、・・・）に対応する画像信号を生成信号として生成し、生成信号に基づいて第２の動画データを生成してよい。これにより、簡易に第２の動画データを生成することができる。図１１に示した例では、動画生成部２１は、２つの画素の加算平均によりその中間画素を算出している。 FIG. 11 is a diagram for explaining an example of the moving image generation operation in the still image generation mode according to the embodiment of the present invention. As shown in FIG. 11, the moving image generation unit 21 uses a still image signal output from the first region (0th row, 2nd row, 3rd row, 5th row, 6th row,...). An image signal corresponding to the second region (first row, fourth row, seventh row,...) Is generated as a generation signal by addition averaging, and second moving image data is generated based on the generation signal. Good. Thereby, the second moving image data can be easily generated. In the example illustrated in FIG. 11, the moving image generation unit 21 calculates the intermediate pixel by the addition average of two pixels.

なお、このようにして生成された生成信号は、本来のライブビュー画像信号と時間差がないものの、画素の色が本来のライブビュー画像信号の色と異なってしまっている。そこで、動画生成部２１は、ライブビュー画像信号と生成信号とに基づいて補間信号を生成し、補間信号に基づいて第２の動画データを生成してもよい。以下においてその一例について説明する。 The generated signal generated in this manner has no time difference from the original live view image signal, but the pixel color is different from the original live view image signal color. Therefore, the moving image generation unit 21 may generate an interpolation signal based on the live view image signal and the generation signal, and generate second moving image data based on the interpolation signal. An example will be described below.

図１２は、本発明の実施形態における静止画生成モードの動画生成動作の変形例を説明するための図である。図１２には、画像データＩｍ１は、ライブビュー画像信号に基づく画像データを示しており、画像データＩｍ２は、生成信号に基づく画像データを示している。画像データＩｍ１の色は、本来のライブビュー画像信号の色に適用し得る。また、画像データＩｍ２の位置は、本来のライブビュー画像信号の位置に適用し得る。 FIG. 12 is a diagram for explaining a modification of the moving image generation operation in the still image generation mode in the embodiment of the present invention. In FIG. 12, the image data Im1 indicates image data based on the live view image signal, and the image data Im2 indicates image data based on the generation signal. The color of the image data Im1 can be applied to the color of the original live view image signal. Further, the position of the image data Im2 can be applied to the position of the original live view image signal.

そこで、動画生成部２１は、ライブビュー画像信号による色補間と生成信号によるフレーム補間とによって補間信号を生成し、補間信号に基づいて第２の動画データを生成してもよい。そうすれば、より高精度な第２の動画データが生成され得る。画像データＩｍ１０は、補間信号に基づく第２の動画データを示している。なお、静止画生成部２２は、このようにして生成された補間信号と静止画像信号とに基づいて、静止画データを生成してもよい。そうすれば、より高精度な静止画データが生成され得る。具体的には、静止画生成部２２は、補間信号と静止画像信号とを合成して静止画データを生成してもよい。 Therefore, the moving image generation unit 21 may generate an interpolation signal by color interpolation using a live view image signal and frame interpolation using a generation signal, and generate second moving image data based on the interpolation signal. Then, the second moving image data with higher accuracy can be generated. The image data Im10 indicates second moving image data based on the interpolation signal. Note that the still image generation unit 22 may generate still image data based on the interpolation signal and the still image signal thus generated. Then, still image data with higher accuracy can be generated. Specifically, the still image generation unit 22 may generate still image data by combining the interpolation signal and the still image signal.

以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。 The preferred embodiments of the present invention have been described in detail above with reference to the accompanying drawings, but the present invention is not limited to such examples. It is obvious that a person having ordinary knowledge in the technical field to which the present invention pertains can come up with various changes or modifications within the scope of the technical idea described in the claims. Of course, it is understood that these also belong to the technical scope of the present invention.

コンピュータに内蔵されるＣＰＵ（ＣｅｎｔｒａｌＰｒｏｃｅｓｓｉｎｇＵｎｉｔ）、ＲＯＭ（ＲｅａｄＯｎｌｙＭｅｍｏｒｙ）およびＲＡＭ（ＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ）などのハードウェアを、上記した制御部２０（画像処理装置）が有する機能と同等の機能を発揮させるためのプログラムも提供され得る。また、かかるプログラムが記録された、コンピュータに読み取り可能な記録媒体も提供され得る。 Hardware such as CPU (Central Processing Unit), ROM (Read Only Memory), and RAM (Random Access Memory) built in the computer exhibits functions equivalent to the functions of the control unit 20 (image processing apparatus) described above. A program may be provided. A computer-readable recording medium in which such a program is recorded can also be provided.

１撮像装置
１０撮像素子
１１制御信号生成部
１２イメージセンサ
１８合成部
２０制御部（画像処理装置）
２１動画生成部
２２静止画生成部
２３表示制御部
３０操作部
４０表示部
５０記憶部

DESCRIPTION OF SYMBOLS 1 Imaging device 10 Imaging element 11 Control signal production | generation part 12 Image sensor 18 Synthesis | combination part 20 Control part (image processing apparatus)
21 moving image generating unit 22 still image generating unit 23 display control unit 30 operation unit 40 display unit 50 storage unit

Claims

撮像素子における第１の領域から出力された第１の画像信号に基づいて第１の動画データを生成する動画生成部と、
前記第１の画像信号と前記撮像素子における第２の領域から出力された第２の画像信号との合成信号に基づいて静止画データを生成する静止画生成部と、
を備える、画像処理装置。 A moving image generating unit that generates first moving image data based on the first image signal output from the first region of the image sensor;
A still image generating unit that generates still image data based on a composite signal of the first image signal and the second image signal output from the second region of the imaging device;
An image processing apparatus comprising:

前記動画生成部は、前記第２の画像信号に基づいて第２の動画データを生成する、
請求項１に記載の画像処理装置。 The moving image generating unit generates second moving image data based on the second image signal;
The image processing apparatus according to claim 1.

前記動画生成部は、前記第２の画像信号から加算平均により前記第１の領域に対応する画像信号を生成信号として生成し、前記生成信号に基づいて前記第２の動画データを生成する、
請求項２に記載の画像処理装置。 The moving image generation unit generates an image signal corresponding to the first region as a generation signal by addition averaging from the second image signal, and generates the second moving image data based on the generation signal.
The image processing apparatus according to claim 2.

前記動画生成部は、前記第１の画像信号と前記生成信号とに基づいて補間信号を生成し、前記補間信号に基づいて前記第２の動画データを生成する、
請求項３に記載の画像処理装置。 The moving image generation unit generates an interpolation signal based on the first image signal and the generation signal, and generates the second moving image data based on the interpolation signal.
The image processing apparatus according to claim 3.

前記静止画生成部は、前記補間信号と前記第２の画像信号とに基づいて、前記静止画データを生成する、
請求項４に記載の画像処理装置。 The still image generation unit generates the still image data based on the interpolation signal and the second image signal;
The image processing apparatus according to claim 4.

前記画像処理装置は、前記第１の動画データと前記第２の動画データとを表示させる表示制御部を備える、
請求項２に記載の画像処理装置。 The image processing apparatus includes a display control unit that displays the first moving image data and the second moving image data.
The image processing apparatus according to claim 2.

撮像素子における第１の領域から出力された第１の画像信号に基づいて第１の動画データを生成するステップと、
前記第１の画像信号と前記撮像素子における第２の領域から出力された第２の画像信号との合成信号に基づいて静止画データを生成するステップと、
を含む、画像処理方法。 Generating first moving image data based on the first image signal output from the first region of the image sensor;
Generating still image data based on a composite signal of the first image signal and the second image signal output from the second region of the image sensor;
Including an image processing method.

第１の画像信号を出力する第１の領域および第２の画像信号を出力する第２の領域を備える、撮像素子と、
前記第１の画像信号に基づいて第１の動画データを生成する動画生成部と、
前記第１の画像信号と前記第２の画像信号との合成信号に基づいて静止画データを生成する静止画生成部と、を備える、画像処理装置と、
を有する、撮像装置。 An imaging device comprising a first region for outputting a first image signal and a second region for outputting a second image signal;
A moving image generating unit that generates first moving image data based on the first image signal;
An image processing apparatus comprising: a still image generation unit configured to generate still image data based on a composite signal of the first image signal and the second image signal;
An imaging device.

各々が複数の光電変換素子を含んで構成される第１の領域および第２の領域を有する撮像素子であって、
前記第１の領域は、第１の画像信号を出力し、
前記第２の領域は、第２の画像信号を出力し、
前記第１の画像信号に基づいて第１の動画データが生成され、前記第１の画像信号と前記第２の画像信号との合成信号に基づいて静止画データが生成される、
撮像素子。
An imaging device having a first region and a second region, each including a plurality of photoelectric conversion elements,
The first region outputs a first image signal,
The second region outputs a second image signal,
First moving image data is generated based on the first image signal, and still image data is generated based on a combined signal of the first image signal and the second image signal.
Image sensor.