JP2012023497A - Imaging device, imaging control method, and program - Google Patents
Imaging device, imaging control method, and program Download PDFInfo
- Publication number
- JP2012023497A JP2012023497A JP2010158919A JP2010158919A JP2012023497A JP 2012023497 A JP2012023497 A JP 2012023497A JP 2010158919 A JP2010158919 A JP 2010158919A JP 2010158919 A JP2010158919 A JP 2010158919A JP 2012023497 A JP2012023497 A JP 2012023497A
- Authority
- JP
- Japan
- Prior art keywords
- continuous shooting
- sequence
- readout
- speed
- moving image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Exposure Control For Cameras (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Studio Devices (AREA)
Abstract
Description
本発明は、撮像装置、撮像制御方法、およびプログラムに関する。 The present invention relates to an imaging apparatus, an imaging control method, and a program.
近年、デジタルカメラ、デジタルビデオカメラ、内視鏡などの静止画像の撮影機能を有する撮像装置（電子カメラ）においては、例えば、撮像素子から連続的に得られた画像信号を連続的に電子ファインダやモニタなどの表示装置に表示させる、いわゆるライブビュー表示の機能が多く利用されている。しかし、近年の電子カメラでは、撮像素子の高画素化も進んでおり、これに伴って撮像素子から画像信号を読み出すために要する時間が長くなってきている。 In recent years, in an imaging apparatus (electronic camera) having a still image capturing function such as a digital camera, a digital video camera, and an endoscope, for example, an image signal obtained continuously from an imaging element is A so-called live view display function for displaying on a display device such as a monitor is often used. However, in recent electronic cameras, the number of pixels of the image sensor is also increasing, and accordingly, the time required for reading an image signal from the image sensor is increasing.
そこで、上記の課題を解決するための方法として、動画（ライブビュー）表示のときには、撮像素子からの画像信号を間引いて読み出し、１回の動画用の画像信号の読み出し期間を短くすることによって、コマ（フレーム）落ちしない動画表示をさせる技術がある（特許文献１参照）。特許文献１に開示された技術では、レリーズ操作を受けて静止画像を記録するとき、動画の表示を固定（フリーズ）させた状態にして、全ての画素からの静止画像用の画像信号の読み出しを行う。そして、静止画像用の画像信号の読み出しが終了した後に、動画表示を再開するようにしている。さらに、特許文献１に開示された技術では、静止画像の連続撮影（連写）のとき、最初に記録される静止画像と、次に記録される静止画像との間に、動画の表示をさせるようにしている。
Therefore, as a method for solving the above-described problem, when displaying a moving image (live view), the image signal from the image sensor is thinned and read, and the reading period of the image signal for one moving image is shortened. There is a technique for displaying a moving image that does not drop frames (see Patent Document 1). In the technique disclosed in
しかしながら、特許文献１に開示されている技術では、静止画像用の画像信号を取得している期間、表示装置の動画の表示が黒表示の状態（ブラックアウト）や、同じ画面が続けて表示される状態（フリーズ）となっている。このような状態のときに、例えば、撮影状況が被写体の移動速度が大きいシーンに変化した場合、表示されている動画の画像を確認しながら被写体の動きに追従することができず、動画表示の画像と実際に撮影される静止画像とが全く異なってしまうという問題がある。その結果、動画の表示画面を視認して撮影を行っている撮像装置のユーザー（撮影者）は、非常に大きな不快感を覚えることとなる。
However, in the technique disclosed in
また、特許文献１に開示されている技術では、連続撮影する静止画像と静止画像との間に動画表示を行っている。この連続撮影中の動画表示のフレームレート（動画表示の更新周期）が低い（動画表示が遅い）場合、表示装置に表示される動画の画像の動きがカクカクするなど、断続的な動きとなってしまう。このような状態の動画表示では、ユーザーは快適に被写体の動きを視認することができない。
In the technique disclosed in
このような状態を解決するため、動画用の画像信号を撮像素子から読み出す際の間引きの割合を多くすることが考えられる。この方法では、１回の動画用の画像信号の読み出しに要する時間をさらに短くすることができるため、動画表示のフレームレートが高く（動画表示を速く）なり、連続撮影中の動画表示を滑らかにすることができる。 In order to solve such a state, it is conceivable to increase the thinning-out ratio when the moving image signal is read from the image sensor. This method can further reduce the time required to read out the image signal for one moving image, so that the frame rate of the moving image display becomes high (moving image display becomes faster), and the moving image display during continuous shooting becomes smoother. can do.
しかしながら、撮像素子から読み出す動画用の画像信号の間引きの割合を多くすると、動画の画像の解像度が下がってしまう。特に、被写体の明るさが暗いシーンでは、表示する動画の画像の解像度が低下したことに起因して、被写体の視認性の低下が顕著になってしまうという問題がある。そのため、被写体の明るさや被写体の移動速度が変化した場合においても、撮像装置のシステム全体として快適な視認性と撮影性能を確保できることが望まれている。 However, when the rate of thinning out the moving image signal read from the image sensor is increased, the resolution of the moving image is lowered. In particular, in a scene where the brightness of the subject is dark, there is a problem that the visibility of the subject is significantly reduced due to the reduced resolution of the moving image to be displayed. Therefore, even when the brightness of the subject and the moving speed of the subject change, it is desired to ensure comfortable visibility and photographing performance as the entire imaging apparatus system.
本発明は、上記の課題認識に基づいてなされたものであり、被写体の明るさが暗い状態に変化した場合や、被写体の移動速度が変化した場合などにおいても、動画表示のフレームレートや解像度を適宜制御することができ、快適な視認性を確保することができる撮像装置、撮像制御方法、およびプログラムを提供することを目的としている。 The present invention has been made on the basis of the above problem recognition, and the frame rate and resolution of moving image display can be reduced even when the brightness of the subject changes to a dark state or when the moving speed of the subject changes. An object of the present invention is to provide an imaging apparatus, an imaging control method, and a program that can be appropriately controlled and can ensure comfortable visibility.
上記の課題を解決するため、本発明のある態様に係る撮像装置は、撮像素子上に配置された複数の画素からの画素信号の読み出しを制御する読出制御部と、静止画用および動画用の前記画素信号の読み出しに係わる画素信号読出シーケンスを含み、かつ、連写を行いながら動画表示を行うことを目的とした第１の読出シーケンスを、少なくとも設定可能な読出シーケンス設定部と、前記読み出された画素信号に基づいて、前記第１の読出シーケンス内の一つ以上の前記画素信号読出シーケンスの設定を制御する信号読出シーケンス制御部と、を備える。 In order to solve the above-described problem, an imaging apparatus according to an aspect of the present invention includes a readout control unit that controls readout of pixel signals from a plurality of pixels arranged on an imaging element, A first read sequence including a pixel signal read sequence related to reading of the pixel signal and intended to display a moving image while performing continuous shooting, at least a read sequence setting unit capable of being set, and the read And a signal readout sequence control unit that controls setting of one or more of the pixel signal readout sequences in the first readout sequence based on the pixel signals that are generated.
また、本発明のある態様に係る撮像装置は、撮像素子上に配置された複数の画素からの画素信号の読み出しを制御する読出制御部と、静止画用および動画用の前記画素信号の読み出しに係わる画素信号読出シーケンスを含み、かつ、連写を行いながら動画表示を行うことを目的とした第１の読出シーケンスを、少なくとも設定可能な読出シーケンス設定部と、被写体の輝度を検出する輝度検出部と、前記輝度検出部が検出した前記被写体の輝度に基づいて、前記第１の読出シーケンス内の一つ以上の前記画素信号読出シーケンスの設定を制御する信号読出シーケンス制御部と、を備える。 In addition, an imaging apparatus according to an aspect of the present invention includes a readout control unit that controls readout of pixel signals from a plurality of pixels arranged on an imaging element, and readout of the pixel signals for still images and moving images. A reading sequence setting unit capable of setting at least a first reading sequence including a pixel signal reading sequence and performing a moving image display while performing continuous shooting, and a luminance detecting unit for detecting luminance of a subject And a signal readout sequence control unit that controls the setting of one or more pixel signal readout sequences in the first readout sequence based on the luminance of the subject detected by the luminance detection unit.
また、本発明のある態様に係る撮像装置は、撮像素子上に配置された複数の画素からの画素信号の読み出しを制御する読出制御部と、静止画用および動画用の前記画素信号の読み出しに係わる画素信号読出シーケンスを含み、かつ、連写を行いながら動画表示を行うことを目的とした第１の読出シーケンスを、少なくとも設定可能な読出シーケンス設定部と、被写体が移動する速度を検出する移動速度検出部と、前記移動速度検出部が検出した前記被写体の移動速度に基づいて、前記第１の読出シーケンス内の一つ以上の前記画素信号読出シーケンスの設定を制御する信号読出シーケンス制御部と、を備える。 In addition, an imaging apparatus according to an aspect of the present invention includes a readout control unit that controls readout of pixel signals from a plurality of pixels arranged on an imaging element, and readout of the pixel signals for still images and moving images. A first readout sequence that includes the pixel signal readout sequence and that is intended to display a moving image while performing continuous shooting, and at least a readout sequence setting section that can be set, and a movement that detects the speed at which the subject moves A speed detection unit; and a signal readout sequence control unit that controls setting of one or more of the pixel signal readout sequences in the first readout sequence based on the movement speed of the subject detected by the movement speed detection unit; .
また、本発明のある態様に係る撮像制御方法は、撮像素子上に配置された複数の画素からの画素信号の読み出しを制御する読出制御ステップと、静止画用および動画用の前記画素信号の読み出しに係わる画素信号読出シーケンスを含み、かつ、連写を行いながら動画表示を行うことを目的とした第１の読出シーケンスを、少なくとも設定可能な読出シーケンス設定ステップと、前記読み出された画素信号に基づいて、前記第１の読出シーケンス内の一つ以上の前記画素信号読出シーケンスの設定を制御する信号読出シーケンス制御ステップと、を含む。 In addition, an imaging control method according to an aspect of the present invention includes a readout control step for controlling readout of pixel signals from a plurality of pixels arranged on an imaging device, and readout of the pixel signals for still images and moving images. A first readout sequence including a pixel signal readout sequence related to the above and intended to display a moving image while performing continuous shooting, at least a readout sequence setting step that can be set, and the readout pixel signal And a signal readout sequence control step for controlling the setting of one or more of the pixel signal readout sequences in the first readout sequence.
また、本発明のある態様に係るプログラムは、撮像素子上に配置された複数の画素からの画素信号の読み出しを制御する読出制御ステップと、静止画用および動画用の前記画素信号の読み出しに係わる画素信号読出シーケンスを含み、かつ、連写を行いながら動画表示を行うことを目的とした第１の読出シーケンスを、少なくとも設定可能な読出シーケンス設定ステップと、前記読み出された画素信号に基づいて、前記第１の読出シーケンス内の一つ以上の前記画素信号読出シーケンスの設定を制御する信号読出シーケンス制御ステップと、をコンピュータに実行させる。 A program according to an aspect of the present invention relates to a readout control step for controlling readout of pixel signals from a plurality of pixels arranged on an image sensor, and readout of the pixel signals for still images and moving images. A first readout sequence including a pixel signal readout sequence and intended to display a moving image while performing continuous shooting is based on at least a settable readout sequence setting step and the readout pixel signal. And a signal readout sequence control step for controlling the setting of one or more of the pixel signal readout sequences in the first readout sequence.
＜第１の実施形態＞
以下、本発明の実施形態について、図面を参照して説明する。なお、以下の説明は、例示のために特定の詳細な内容が含まれている。しかし、当業者であれば、以下に説明する詳細な内容に様々な変更を加えた場合であっても、本発明の範囲を超えないことは理解できるであろう。従って、以下に説明する本発明の例示的な実施形態は、権利を請求された発明に対して、一般性を失わせることなく、また、何ら限定をすることもなく、述べられたものである。
<First Embodiment>
Hereinafter, embodiments of the present invention will be described with reference to the drawings. The following description includes specific details for illustrative purposes. However, those skilled in the art will understand that even if various modifications are made to the detailed contents described below, the scope of the present invention is not exceeded. Accordingly, the exemplary embodiments of the invention described below are set forth without loss of generality or limitation to the claimed invention. .
図１は、本第１の実施形態における撮像装置の概略構成を示したブロック図である。ここに示した各構成要素は、ハードウェア的には、コンピュータのＣＰＵやメモリをはじめとする素子で実現することができ、ソフトウェア的にはコンピュータプログラムなどによって実現されるものであるが、ここでは、これらの連携によって実現される機能ブロックとして示している。従って、これらの機能ブロックは、ハードウェア、ソフトウェアの組合せによって、様々な形式で実現できるということは、当業者には理解できるであろう。 FIG. 1 is a block diagram illustrating a schematic configuration of the imaging apparatus according to the first embodiment. Each component shown here can be realized in terms of hardware by elements such as a CPU and a memory of a computer, and in terms of software, it can be realized by a computer program. These are shown as functional blocks realized by these linkages. Therefore, those skilled in the art will understand that these functional blocks can be realized in various forms by a combination of hardware and software.
図１に示した撮像装置１００は、レンズ１と、撮像部２と、画像処理部３と、表示部４と、読出シーケンス設定部６と、信号読出シーケンス制御部７と、駆動制御部８と、レンズ制御部９と、カメラ制御部１０と、カメラ操作部１１と、画像信号検出部１２と、明るさ・速度検出部１３と、を備えている。また、カメラ制御部１０には、連写速度設定部１０１と、解像度設定部１０２と、を備えている。なお、図１に示した撮像装置１００の構成要素であるメモリカード５は、撮像装置１００に対して着脱可能に構成されており、撮像装置１００に固有の構成でなくてもよい。
An
図１に示した撮像装置１００は、画像信号を読み出す読み出しシーケンスとして、被撮像範囲をリアルタイムに表示する動画（ライブビュー）用の画像信号を読み出す第２の読出シーケンス（以下、「動画表示シーケンス」という）と、連写で複数の静止画像用の画像信号を連続して読み出す間に動画用の画像信号を読み出して動画表示を行う第１の読出シーケンス（以下、「動画表示連写シーケンス」という）を少なくとも有している。
The
レンズ１は、レンズ制御部９によってレンズ１内に備えるフォーカスレンズの駆動、絞り機構の駆動、シャッタ機構の駆動などが制御され、被写体の光学像を撮像部２に備える撮像素子の撮像面に結像するための撮影レンズである。
The
撮像部２は、レンズ１によって結像された被写体の光学像を光電変換する固体撮像素子を備え、被写体光に応じた画像信号（デジタル信号）を出力する。また、撮像部２は、少なくとも、全画素の露光開始タイミングおよび露光終了タイミングを一括して制御するグローバルシャッタモードを有しており、駆動制御部８による駆動制御によって、グローバルシャッタ動作を行う。また、撮像部２は、例えば、固体撮像素子内の画素の行単位または画素単位で、露光および画像信号の読み出しを順次制御するローリングシャッタモードも有しており、駆動制御部８による駆動制御によって、ローリングシャッタ動作を行う。そして、撮像部２は、グローバルシャッタ動作またはローリングシャッタ動作によって得た画像信号を、画像処理部３および画像信号検出部１２に出力する。
The
画像処理部３は、撮像部２から出力された画像信号に種々のデジタル的な画像処理を行う。画像処理部３による画像処理には、例えば、画像信号を記録するための記録用の画像処理や、被写体の画像（動画）を表示部４に表示させるための表示用の画像処理が含まれる。そして、記録用の画像処理を行った画像信号をメモリカード５に、表示用の画像処理を行った画像信号を表示部４に出力する。
The
表示部４は、例えば、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）などの表示装置を備え、画像処理部３によって表示用の画像処理がされた画像信号に基づいた画像を表示する。表示部４は、撮像装置１００が撮影した静止画像や、メモリカード５に保存されている画像の再生表示をすることができる共に、撮像装置１００が撮影する被撮像範囲をリアルタイムに表示する動画（ライブビュー）表示を行うことができる。また、表示部４は、カメラ制御部１０から入力された情報を表示する。
The
メモリカード５は、撮像装置１００によって撮影された静止画像を保存するための記録媒体である。メモリカード５には、画像処理部３によって記録用の画像処理がされ、さらに、例えば、圧縮処理などの画像処理が行われた静止画像のデータが記録される。
The
明るさ・速度検出部１３は、例えば、明るさセンサーなどを備え、撮像装置１００の被撮像範囲の明るさを検出することによって、被写体の明るさを検出する。また、例えば、ジャイロセンサーなどを備え、撮像装置１００自体の動きを検出することによって、被写体が移動する速度を検出する。また、明るさ・速度検出部１３は、検出した被写体の明るさ、および検出した被写体の移動速度を表す情報（以下、「明るさ・速度情報」という）を、カメラ制御部１０に出力する。
The brightness /
読出シーケンス設定部６は、カメラ制御部１０から入力された撮影モード（例えば、単写モード、連写モード、動画（ライブビュー）モードなど）に応じて、撮像装置１００における撮像動作の読み出しシーケンスを設定する。読出シーケンス設定部６によって設定される読み出しシーケンスは、例えば、撮像装置１００のユーザー（使用者）の指示に応じて設定される。
The readout
信号読出シーケンス制御部７は、読出シーケンス設定部６によって連写を行いながら動画表示を行う動画表示連写シーケンスが設定されたときに、カメラ制御部１０から入力された動画表示連写シーケンスに関する情報に基づいて、撮像部２内の固体撮像素子から画像信号を読み出すための読み出しシーケンスの種々の設定を制御する。より具体的には、撮像部２内の固体撮像素子から静止画像用の画像信号を読み出すための駆動（静止画読出シーケンス）と、動画用の画像信号を読み出すための駆動（動画読出シーケンス）とを制御する。そして、静止画読出シーケンスおよび動画読出シーケンスに基づいた読み出し指令を、駆動制御部８に出力する。
The signal readout
駆動制御部８は、信号読出シーケンス制御部７またはカメラ制御部１０から入力された読み出し指令に基づいて、撮像部２を駆動し、撮像部２による撮像および露光の動作を制御する。なお、駆動制御部８による撮像部２の駆動制御に関する詳細な説明は、後述する。
The
レンズ制御部９は、カメラ制御部１０から入力されたレンズ制御指令に基づいて、レンズ１の絞りや焦点位置などを制御する。より具体的には、レンズ制御部９は、カメラ制御部１０から入力されたフォーカス制御指令に基づいて、レンズ１に備えるフォーカスレンズを駆動し、撮像部２に結像される被写体像を合焦させる。また、レンズ制御部９は、カメラ制御部１０から入力された露出制御指令に基づいて、レンズ１に備える絞り機構を駆動し、撮像部２に結像される被写体像の明るさを変化させる。また、レンズ制御部９は、カメラ制御部１０から入力されたシャッタ制御指令に基づいて、レンズ１に備えるシャッタ機構を駆動し、撮像部２に被写体像を結像させる。
The
カメラ操作部１１は、撮像装置１００のユーザーが、撮像装置１００に対して各種の操作を入力するための操作部である。このカメラ操作部１１に含まれる操作部材の例としては、撮像装置１００の電源をオン／オフするための電源スイッチ、撮像装置１００に静止画像（被写体）の撮影を指示入力するための２段式押圧ボタンであるレリーズボタン、撮像装置１００の撮影モードを単写モード、連写モード、動画（ライブビュー）モードなどに切り替えるための撮影モードスイッチなどがある。カメラ操作部１１は、これらの操作部材によって設定されたカメラの操作情報を、カメラ制御部１０に出力する。
The
画像信号検出部１２は、撮像部２内の固体撮像素子から読み出された動画用の画像信号に基づいて、撮像装置１００の被写体の明るさおよび被写体が移動する速度を検出する。画像信号検出部１２における被写体の明るさの検出は、例えば、動画用の画像信号に含まれる画素領域の平均値を求めるなどの処理を行うことによって、被写体の明るさ、すなわち、輝度に相当する情報を検出することができる。
The image
また、画像信号検出部１２における被写体の移動速度の検出は、例えば、動画のフレーム間の相関関係を用いることにより検出することができる。より具体的には、例えば、被写体の移動速度Ｖは、被写体のフレーム間のズレ量Ｌと、フレーム間の時間差ΔＴとから、下式（１）のように算出することができる。なお、動画表示は、予め定められた周期で動画のフレームを表示しているため、フレーム間の時間差ΔＴは動画表示の周期と同様の時間である。
Further, the detection of the moving speed of the subject in the image
Ｖ＝Ｌ／ΔＴ ・・・・・（１） V = L / ΔT (1)
画像信号検出部１２は、輝度に相当する情報および被写体の移動速度の情報を、カメラ制御部１０に出力する。
The image
カメラ制御部１０は、撮像装置１００の全体を制御する。カメラ制御部１０は、画像処理部３から入力された記録用の画像処理を行った画像信号、表示用の画像処理を行った画像信号、カメラ操作部１１からの操作入力などに基づいて、撮像装置１００における撮像動作や記録動作に関する制御指令を、読出シーケンス設定部６、信号読出シーケンス制御部７、駆動制御部８、レンズ制御部９に出力する。また、撮像装置１００における撮像動作や記録動作に関する情報を表示部４に出力すると共に、撮像装置１００の設定を促すための指示要求の情報を表示部４に出力する。これにより、撮像装置１００のユーザーは、現在の撮像装置１００の動作状態を確認することができ、また、カメラ操作部１１を操作して撮像装置１００の動作において必要な設定を行うことができる。カメラ制御部１０内には、静止画像を連写する際の連写速度を設定する連写速度設定部１０１と、動画表示の解像度を設定する解像度設定部１０２とを備えている。
The
連写速度設定部１０１は、ユーザーはカメラ操作部１１を操作して、撮像装置１００の撮影モードを連写モードに切り替えたとき、静止画像を連写する際に目標とする連写速度（目標連写速度）を設定する。また、連写速度設定部１０１は、撮像装置１００における静止画像の撮影条件などによって決まる最大の連写速度の情報を取得する最大連写速度取得機能を有している。そして、連写速度設定部１０１は、取得した最大の連写速度を、静止画像を連写する際の目標連写速度の設定（目標連写速度設定）として設定する。
The continuous shooting
解像度設定部１０２は、ユーザーはカメラ操作部１１を操作して、撮像装置１００の撮影モードを連写モードに切り替えたとき、動画表示する際の解像度を設定する。また、解像度設定部１０２は、撮像装置１００の表示部４の性能などによって決まる動画の下限の解像度、表示時間および表示回数の情報を取得する下限解像度取得機能を有している。そして、解像度設定部１０２は、取得した下限の解像度、表示時間および表示回数を、表示部４の下限表示の設定（下限表示設定）として設定する。
The
カメラ制御部１０は、明るさ・速度検出部１３が検出した明るさ・速度情報、または画像信号検出部１２が検出した輝度に相当する情報および被写体の移動速度の情報と、連写速度設定部１０１によって設定された目標連写速度設定と、解像度設定部１０２によって設定された下限表示設定とに基づいて、動画表示連写シーケンスの制御方法を決定する。そして、決定した動画表示連写シーケンスの制御方法を、動画表示連写シーケンスに関する情報として、信号読出シーケンス制御部７に出力する。
The
次に、本第１の実施形態の撮像装置に備えた撮像部について説明する。図２は、本第１の実施形態の撮像装置１００における撮像部２の概略構成を示したブロック図である。図２において、撮像部２は、グローバルシャッタ機能を持った、例えば、ＭＯＳ（Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ：金属酸化膜半導体）型の固体撮像素子２１と、ＡＤ（アナログ−デジタル）変換部２２と、ノイズ除去部２３と、を備えている。また、固体撮像素子２１は、画素部２４と、列処理回路部２５と、垂直制御回路２６と、水平制御回路２７と、を備えている。
Next, an imaging unit provided in the imaging apparatus of the first embodiment will be described. FIG. 2 is a block diagram illustrating a schematic configuration of the
画素部２４は、複数の画素２８が、行方向および列方向（図２においては、３行３列）の２次元状に配列されている。なお、画素２８の構成については後述する。
In the
垂直制御回路２６は、画素部２４に配列された画素２８を行単位で制御するための制御信号を、画素２８の行毎に出力する垂直走査回路である。また、垂直制御回路２６は、垂直走査回路の他に、画素２８をリセットするためのリセット制御部、画素２８から信号を読み出すための信号読出制御部を含んでいる。この垂直制御回路２６によって選択された行の画素２８から出力された画素信号は、列毎に設けられている画素２８の出力信号線（後述する図３の垂直信号線ＶＴＬ）に出力される。
The
列処理回路部２５は、駆動制御部８による駆動制御によって垂直信号線ＶＴＬに出力された画素信号を列毎に処理する。列処理回路部２５による処理には、例えば、画素信号の増幅処理や、固体撮像素子２１をローリングシャッタ動作させたときのノイズ除去のために行う相関二重サンプリング（Ｃｏｒｒｅｌａｔｅｄ Ｄｏｕｂｌｅ Ｓａｍｐｌｉｎｇ：ＣＤＳ）の処理が含まれる。
The column
水平制御回路２７は、垂直制御回路２６に選択され、列処理回路部２５から出力された１行分の画素信号を取り込む。そして、水平制御回路２７は、画素２８の水平方向の並び順で取り込んだ画素信号（アナログ画素信号）を、時系列にＡＤ変換部２２に出力する。
The
ＡＤ変換部２２は、固体撮像素子２１から出力されたアナログ画素信号を、デジタルの画素信号（デジタル画素信号）に変換する。そして、ＡＤ変換部２２は、変換したデジタル画像信号をノイズ除去部２３に出力する。なお、列処理回路部２５内にＡＤ変換回路を備えている場合には、ＡＤ変換回路２２は不要である。
The
ノイズ除去部２３は、固体撮像素子２１がグローバルシャッタ動作を行うときに、ＡＤ変換部２２から出力されたデジタル画像信号に、ノイズ除去の処理を行う。このノイズ除去の処理が行われたデジタル画像信号が、撮像部２から出力される被写体光に応じた画像信号として、画像処理部３および画像信号検出部１２に出力される。
The
＜画素構成＞
次に、本第１の実施形態の撮像装置に備えた撮像部における画素の構成例について説明する。図３は、本第１の実施形態の撮像部２内の画素部２４における画素２８の構成例を示した回路図である。なお、図３では、２つの画素２８を表している。図３に示した画素２８は、フォトダイオードＰＤ、信号蓄積部ＦＤ、転送トランジスタＭｔｘ１、ＰＤリセットトランジスタＭｔｘ２、増幅トランジスタＭａ、選択トランジスタＭｂ、ＦＤリセットトランジスタＭｒから構成される。図３に示した画素２８では、信号蓄積部ＦＤを画素内メモリとして用いることにより、グローバルシャッタ機能を可能としている。
<Pixel configuration>
Next, a configuration example of pixels in the imaging unit provided in the imaging apparatus of the first embodiment will be described. FIG. 3 is a circuit diagram illustrating a configuration example of the
フォトダイオードＰＤは、被写体光を光電変換して信号電荷を発生する光電変換部である。信号蓄積部ＦＤは、フォトダイオードＰＤで発生した信号電荷を一時的に保持し、電荷電圧変換する信号蓄積部（フローティングディフュージョン）である。ＰＤリセットトランジスタＭｔｘ２は、ＰＤリセットパルスＴＸ２に応じて、フォトダイオードＰＤで発生した信号電荷を、電圧ＶＤＤのレベルにリセットする。転送トランジスタＭｔｘ１は、行転送パルスＴＸ１に応じて、フォトダイオードＰＤで発生した信号電荷を信号蓄積部ＦＤに転送する。増幅トランジスタＭａは、信号蓄積部ＦＤによって電荷電圧変換された信号を増幅して出力する。この増幅トランジスタＭａは、電源ＶＤＤに接続され、垂直信号線ＶＴＬに設けられた不図示の電流源とでソースフォロア回路が構成されている。信号蓄積部ＦＤから出力された電荷電圧変換後の信号は、このソースフォロア回路によって増幅される。選択トランジスタＭｂは、行選択パルスＳＥＬに応じて、ソースフォロア回路によって増幅された信号を選択し、画素２８の出力信号線である垂直信号線ＶＴＬに出力する。ＦＤリセットトランジスタＭｒは、ＦＤリセットパルスＲＥＳに応じて、信号蓄積部ＦＤでありソースフォロア回路の入力部である増幅トランジスタＭａのゲート部を、電圧ＶＤＤのレベルにリセットする
The photodiode PD is a photoelectric conversion unit that photoelectrically converts subject light to generate signal charges. The signal storage unit FD is a signal storage unit (floating diffusion) that temporarily holds the signal charge generated in the photodiode PD and performs charge-voltage conversion. The PD reset transistor Mtx2 resets the signal charge generated in the photodiode PD to the level of the voltage VDD in response to the PD reset pulse TX2. The transfer transistor Mtx1 transfers the signal charge generated in the photodiode PD to the signal storage unit FD in response to the row transfer pulse TX1. The amplification transistor Ma amplifies and outputs the signal that has been subjected to charge-voltage conversion by the signal storage unit FD. The amplifying transistor Ma is connected to the power supply VDD and forms a source follower circuit with a current source (not shown) provided on the vertical signal line VTL. The signal after charge-voltage conversion output from the signal storage unit FD is amplified by the source follower circuit. The selection transistor Mb selects the signal amplified by the source follower circuit according to the row selection pulse SEL, and outputs the signal to the vertical signal line VTL that is the output signal line of the
なお、図３に示した画素２８の構成例において、行転送パルスＴＸ１とＦＤリセットパルスＲＥＳとを同時に印加し、転送トランジスタＭｔｘ１とＦＤリセットトランジスタＭｒとを同時にオンすることによって、信号蓄積部ＦＤをリセットするのみではなく、同時にフォトダイオードＰＤもリセットすることができる。このように、転送トランジスタＭｔｘ１とＦＤリセットトランジスタＭｒとの組み合わせによって、ＰＤリセットトランジスタＭｔｘ２と同様に、フォトダイオードＰＤをリセットすることもできる。
In the configuration example of the
＜グローバルシャッタ動作＞
次に、本第１の実施形態の撮像装置に備えた固体撮像素子の動作について説明する。図４は、本第１の実施形態の撮像装置１００におけるグローバルシャッタ動作のタイミングを示したタイミングチャートである。図４に示したグローバルシャッタ動作のタイミングは、撮像装置１００が静止画像を撮影する際に、駆動制御部８によって行われる固体撮像素子２１の駆動制御である。このグローバルシャッタ動作による駆動制御を連続して行うことによって、撮像装置１００による連写を行うことができる。つまり、撮像装置１００における動画非表示連写シーケンスまたは動画表示連写シーケンスの連写シーケンスにおける静止画像用の画像信号の取得は、グローバルシャッタ動作によって行われる。なお、図４に示したグローバルシャッタ動作のタイミングにおいては、駆動制御部８による駆動制御に応じて固体撮像素子２１内の垂直制御回路２６から出力される画素部２４の制御パルスの内、行転送パルスＴＸ１とＰＤリセットパルスＴＸ２とを示す。
<Global shutter operation>
Next, the operation of the solid-state image sensor provided in the imaging apparatus according to the first embodiment will be described. FIG. 4 is a timing chart showing the timing of the global shutter operation in the
図４（ａ）は、静止画像の撮影動作の際に用いられるグローバルシャッタ動作を示したタイミングチャートである。そして、図４（ａ）は、横軸を時間として、縦方向には画素部２４に配列された画素２８を、１行目からｎ行目（最終行）まで順次選択して画素信号を出力させる様子を示している。なお、図４（ａ）の行転送パルスＴＸ１およびＰＤリセットパルスＴＸ２については、画素部２４の全ての画素２８に同時に印加される信号のタイミングのみを示している。
FIG. 4A is a timing chart showing a global shutter operation used in the still image capturing operation. In FIG. 4A, the horizontal axis is time, and the
グローバルシャッタ動作によって静止画像の露光（光信号の蓄積）を行う前に、まず、リセット信号読出期間において、信号蓄積部ＦＤのリセットレベルの読み出しを行う。より具体的には、この期間では、まず、画素部２４の第１行目に配列された各画素２８のＦＤリセットトランジスタＭｒに、“Ｈ”レベルのＦＤリセットパルスＲＥＳを印加して、第１行目の信号蓄積部ＦＤのリセットを行う。さらに、画素部２４の第１行目に配列された各画素２８の選択トランジスタＭｂに、“Ｈ”レベルの行選択パルスＳＥＬを印加する。これにより、画素部２４の第１行目の各画素２８に備えた信号蓄積部ＦＤのリセットレベルの信号が、増幅トランジスタＭａによって増幅されて、選択トランジスタＭｂを介して垂直信号線ＶＴＬに読み出される。ここで読み出されたリセットレベルの信号は、列処理回路部２５、水平制御回路２７を介してＡＤ変換部２２に出力にされ、ＡＤ変換部２２によってデジタルのリセット信号に変換された後に、ノイズ除去部２３に読み出されて記憶される。
Prior to exposure of a still image (accumulation of an optical signal) by the global shutter operation, first, the reset level of the signal accumulation unit FD is read in the reset signal reading period. More specifically, in this period, first, the FD reset pulse RES of “H” level is applied to the FD reset transistor Mr of each
このようなリセット信号の読み出し動作によって、画素部２４の第１行目から第ｎ行目（最終行）までの各画素２８を駆動し、全ての画素２８に備えた信号蓄積部ＦＤのリセットレベルの信号の読み出しが完了したところで、リセット信号読出期間を終了する。なお、グローバルシャッタ動作によるリセット信号の読み出し動作においては、列処理回路部２５による相関二重サンプリングの処理は行わない。
By such reset signal readout operation, the
続いて、露光期間において、グローバルシャッタ動作による静止画像の露光を行う。より具体的には、まず、画素部２４の全ての画素２８のＰＤリセットパルスＴＸ２を“Ｈ”レベルにして、ＰＤリセットトランジスタＭｔｘ２を同時にオン状態にすることにより、全ての画素２８のフォトダイオードＰＤを一括してリセットする。その後、画素部２４の全ての画素２８のＰＤリセットパルスＴＸ２を“Ｌ”レベルにして、ＰＤリセットトランジスタＭｔｘ２を同時にオフ状態にする。これにより、全ての画素２８のフォトダイオードＰＤへの信号電荷の蓄積（露光）が同時に開始される。
Subsequently, the still image is exposed by the global shutter operation in the exposure period. More specifically, first, the PD reset pulse TX2 of all the
その後、所定の露光時間が経過した後に、画素部２４の全ての画素２８の行転送パルスＴＸ１を“Ｈ”レベルにして、転送トランジスタＭｔｘ１を同時にオン状態にすることにより、露光期間中にフォトダイオードＰＤに蓄積された信号電荷を、信号蓄積部ＦＤに一括して転送する。つまり、全ての画素２８の露光を同時に終了する。
Thereafter, after a predetermined exposure time has elapsed, the row transfer pulse TX1 of all the
続いて、光信号読出期間において、露光した画素信号を読み出す。より具体的には、この期間では、まず、画素部２４の第１行目に配列された各画素２８の選択トランジスタＭｂに、“Ｈ”レベルの行選択パルスＳＥＬを印加する。これにより、画素部２４の第１行目の各画素２８に備えた信号蓄積部ＦＤによって電荷電圧変換された信号が、増幅トランジスタＭａによって増幅されて、選択トランジスタＭｂを介して垂直信号線ＶＴＬに読み出される。ここで読み出された信号は、列処理回路部２５、水平制御回路２７を介してＡＤ変換部２２に出力にされ、ＡＤ変換部２２によってデジタルの信号に変換された後に、ノイズ除去部２３に読み出される。そして、ノイズ除去部２３において、リセット信号読出期間に記憶したリセット信号と、光信号読出期間に読み出された信号との差分処理が行なわれ、ノイズが除去された光信号が画像処理部３に出力される。
Subsequently, the exposed pixel signal is read in the optical signal reading period. More specifically, in this period, first, the row selection pulse SEL of “H” level is applied to the selection transistors Mb of the
このような光信号の読み出し動作によって、画素部２４の第１行目から第ｎ行目（最終行）までの各画素２８を駆動し、全ての画素２８が露光した画素信号の読み出しが完了したところで、光信号読出期間を終了する。なお、グローバルシャッタ動作による光信号の読み出し動作においては、列処理回路部２５による相関二重サンプリングの処理は行わない。
By such an optical signal readout operation, each
上記に述べたようなグローバルシャッタ動作を行うことによって、１枚の静止画像用の画像信号が画像処理部３に出力される。なお、グローバルシャッタ動作において画素部２４に配列された画素２８を読み出す順番は、必ずしも画素部２４の第１行目から第ｎ行目（最終行）まで順に読み出す必要はない。すなわち、グローバルシャッタ動作において、画像処理部３に出力する１枚の静止画像用の画像信号を分割して読み出すこともできる。図４（ｂ）は、静止画像用の画像信号を複数に分割して読み出すグローバルシャッタ動作を示したタイミングチャートである。
By performing the global shutter operation as described above, one image signal for a still image is output to the
図４（ｂ）に示したタイミングチャートは、リセット信号読出期間と光信号読出期間における信号の読み出しを、それぞれ３つのフィールドに分けて行った場合の例を示している。ここで、図４（ｂ）では、画素部２４の第１行目、４行目、７行目、・・・の画素２８を第１フィールドｆ−Ａ、第２行目、５行目、８行目、・・・の画素２８を第２フィールドｆ−Ｂ、第３行目、６行目、９行目、・・・の画素２８を第３フィールドｆ−Ｃとしている。そして、最初に第１フィールドｆ−Ａに属する画素２８を読み出し、続いて第２フィールドｆ−Ｂに属する画素２８を読み出し、最後に第３フィールドｆ−Ｃに属する画素２８を読み出すという順番で各画素２８の読み出しを行っている。
The timing chart shown in FIG. 4B shows an example in which the signal reading in the reset signal reading period and the optical signal reading period is performed in three fields. Here, in FIG. 4B, the
なお、図４（ｂ）に示したタイミングチャートにおける各画素２８の駆動は、図４（ａ）に示したタイミングチャートにおける各画素２８の駆動に対して、各画素２８を読み出す順番が異なるのみである。従って、図４（ｂ）に示した複数に分割して読み出すグローバルシャッタ動作の詳細な説明は省略する。
Note that the driving of each
＜ローリングシャッタ動作＞
次に、本第１の実施形態の撮像装置に備えた固体撮像素子におけるローリングシャッタ動作について説明する。図５は、本第１の実施形態の撮像装置１００におけるローリングシャッタ動作のタイミングを示したタイミングチャートである。図５に示したローリングシャッタ動作のタイミングは、撮像装置１００が被撮像範囲をリアルタイムに表示する動画を撮影する際に、駆動制御部８によって行われる固体撮像素子２１の駆動制御である。このローリングシャッタ動作による駆動制御を連続して行うことによって、撮像装置１００が動画表示を行うことができる。つまり、撮像装置１００における動画表示シーケンスにおける動画用の画像信号の取得は、ローリングシャッタ動作によって行われる。なお、図５に示したローリングシャッタ動作のタイミングにおいては、駆動制御部８による駆動制御に応じて固体撮像素子２１内の垂直制御回路２６から出力される画素部２４の制御パルスの内、行転送パルスＴＸ１とＰＤリセットパルスＴＸ２とを示す。
<Rolling shutter operation>
Next, a rolling shutter operation in the solid-state imaging device provided in the imaging apparatus according to the first embodiment will be described. FIG. 5 is a timing chart showing the timing of the rolling shutter operation in the
また、図５に示したローリングシャッタ動作のタイミングにおいては、横軸を時間として、縦方向には画素部２４に配列された画素２８を、１行目からｎ行目（最終行）まで順次制御している様子を示している。そして、破線は画素２８をリセットするための走査（リセット走査）を示し、実線は画素２８から光信号を読み出す走査（光信号読み出し走査）を示している。また、行転送パルスＴＸ１およびＰＤリセットパルスＴＸ２は、画素部２４のそれぞれの画素２８を駆動している様子を示している。
In addition, at the timing of the rolling shutter operation shown in FIG. 5, the
ローリングシャッタ動作では、画素部２４の行毎に時間をずらして画素２８のリセット、露光、および光信号の読み出しを順次行うことによって、動画用の画像信号を取得する。より具体的には、例えば、１行目の画素２８の駆動は、まず、画素部２４の第１行目に配列された各画素２８のＰＤリセットトランジスタＭｔｘ２に、“Ｈ”レベルのＰＤリセットパルスＴＸ２を印加して、第１行目のフォトダイオードＰＤのリセットを行う。これにより、フォトダイオードＰＤがリセットされ、画素部２４の第１行目に配列された各画素２８のフォトダイオードＰＤへの信号電荷の蓄積（露光）が開始される。なお、フォトダイオードＰＤのリセットは、以下の駆動によって行うこともできる。まず、画素部２４の第１行目に配列された各画素２８のＦＤリセットトランジスタＭｒに、“Ｈ”レベルのＦＤリセットパルスＲＥＳを印加して、第１行目の信号蓄積部ＦＤのリセットを行う。さらに、画素部２４の第１行目に配列された各画素２８の転送トランジスタＭｔｘ１に、“Ｈ”レベルの行転送パルスＴＸ１を印加して、フォトダイオードＰＤに蓄積されている信号電荷を信号蓄積部ＦＤに転送する。このような駆動を画素部２４の行毎に順次行うことによって、フォトダイオードＰＤをリセットすることもできる。
In the rolling shutter operation, the image signal for moving image is acquired by sequentially resetting the
その後、所定の露光時間が経過した後に、画素部２４の第１行目に配列された各画素２８のＦＤリセットトランジスタＭｒに、“Ｈ”レベルのＦＤリセットパルスＲＥＳを印加して、第１行目の信号蓄積部ＦＤのリセットを行う。その後、画素部２４の第１行目に配列された各画素２８の行転送パルスＴＸ１を“Ｈ”レベルにして、転送トランジスタＭｔｘ１をオン状態にすることにより、第１行目の露光期間中にフォトダイオードＰＤに蓄積された信号電荷を、信号蓄積部ＦＤに転送する。つまり、画素部２４の第１行目の各画素２８の露光を終了する。この期間、画素部２４の第１行目に配列された各画素２８の選択トランジスタＭｂに、“Ｈ”レベルの行選択パルスＳＥＬを印加している。これにより、信号蓄積部ＦＤをリセットしたときのリセットレベルの信号と、フォトダイオードＰＤに蓄積された信号電荷を信号保持部ＦＤに転送した後の電荷電圧変換された信号とが、増幅トランジスタＭａと選択トランジスタＭｂとを介して垂直信号線ＶＴＬに読み出される。そして、列処理回路部２５によって読み出されたリセットレベルの信号と電荷電圧変換された信号との差分処理が行なわれ、画素２８毎のバラツキなどのノイズを除去した光信号を生成する。その後、水平走査回路２７、ＡＤ変換部２２を介して、デジタルの信号に変換された光信号が画像処理部３に出力される。
Thereafter, after a predetermined exposure time has elapsed, an “H” level FD reset pulse RES is applied to the FD reset transistors Mr of the
このような行毎の駆動を画素部２４の第１行目から第ｎ行目（最終行）まで行うことによって、１フレーム分の動画用の画像信号を取得することができる。なお、撮像装置１００の動画（ライブビュー）モードにおいては、画素部２４に配列された全ての画素２８から光信号を読み出すのではなく、画素部２４の行を間引いた光信号の読み出しを行うことができる。
By performing such row-by-row driving from the first row to the n-th row (final row) of the
図６は、本第１の実施形態の撮像装置１００において動画モードのときに読み出される画素部２４の行の例を示した図である。図６は、網掛けで示された行の画素２８から光信号を読み出す例を示している。図６に示すように画素部２４の行を間引いて光信号を読み出すことにより、１フレーム分の動画用の画像信号の取得に要する期間を短くすることができ、滑らかな動画表示をすることができる。
FIG. 6 is a diagram illustrating an example of a row of the
なお、動画モードにおいて画素部２４の行を間引いて光信号を読み出す場合の画素２８の駆動方法は、時間をずらして画素２８のリセット、露光、および光信号の読み出しを行う画素部２４の行が異なるのみである。より具体的には、画素部２４に配列された全ての画素２８から光信号を読み出す場合に、第１行目、２行目、３行目、・・・という順番で駆動していたのに対し、例えば、画素部２４の行を１／３間引きで光信号を読み出す場合には、第１行目、４行目、７行目、・・・という順番で駆動する。従って、画素部２４の行を間引いて光信号の読み出すローリングシャッタ動作の詳細な説明は省略する。
Note that the driving method of the
次に、本第１の実施形態の撮像装置の動作について説明する。本第１の実施形態の撮像装置１００は、画像信号を読み出す読み出しシーケンスとして、動画表示シーケンスと、動画表示連写シーケンスとを有している。なお、撮像装置１００においては、動画表示シーケンスによって動画用の画像信号を取得する際、画素部２４の行を１／３に間引いて、すなわち、画素部２４の１／３の画素２８から光信号を読み出す。また、動画表示連写シーケンスによって静止画像用の画像信号を取得する際、画素部２４を行毎に３つのフィールドに分けて、それぞれのフィールドに属する画素２８の読み出しを順次行う。
Next, the operation of the imaging apparatus according to the first embodiment will be described. The
＜第１の読出シーケンス（動画表示連写シーケンス）＞
図７は、本第１の実施形態の撮像装置１００において動画表示を行いながら静止画像を連写するタイミングの第１の例を示したタイミングチャートである。図７は、動画（ライブビュー）モードの動作、すなわち、動画表示シーケンスによって動画用の画像信号を読み出して動画表示をしている最中に、静止画像を連写する指示が入力され、動画表示から静止画像の連写に切り替わる場合のタイミングチャートを示している。そして、図７では、動画表示を行いながら連写を行う動画表示連写シーケンスによって静止画像用の画像信号を連続して読み出す場合を示している。また、図７は、横軸を時間として、縦方向には画素部２４に配列された画素２８を行毎に選択して、画素信号を読み出す様子を示している。
<First reading sequence (moving image display continuous shooting sequence)>
FIG. 7 is a timing chart showing a first example of timing for continuously shooting still images while displaying a moving image in the
なお、図７では、動画表示シーケンスから動画表示連写シーケンスへの切り替わりを示しているため、図４および図５に示したように、画素２８に入力される駆動パルスのタイミングが読み出しシーケンス毎に異なる。また、動画表示連写シーケンスでは、動画表示を行いながら静止画像の連写を行うため、動画表示連写シーケンス中にも動画用の画像信号の読み出しが行われる。しかし、図７においては、動画表示シーケンスと動画表示連写シーケンスとにおける駆動パルスのタイミングの違い、さらに、動画表示連写シーケンス内における動画用の画像信号の読み出しと、静止画像用の画像信号の読み出しとにおける駆動パルスのタイミングの違いを明確に示すため、画素部２４の全ての画素２８に同時に印加される行転送パルスＴＸ１およびＰＤリセットパルスＴＸ２のタイミングのみを示すこととする。また、図７の動画表示シーケンスの期間では、図５で示したリセット走査と光信号読み出し走査との内、光信号読み出し走査のみを示すこととする。
Note that, since FIG. 7 shows switching from the moving image display sequence to the moving image display continuous shooting sequence, as shown in FIGS. 4 and 5, the timing of the drive pulse input to the
図７において、動画表示シーケンスの期間では、画素部２４の行を間引きながら動画用の画像信号を読み出す。そして、読み出された動画用の画像信号は、画像処理部３によって表示用の画像処理が行われ、表示部４に表示される。この動画表示シーケンスは、図７に示すように、撮像装置１００に静止画像の連写を指示入力するレリーズボタンの押圧（例えば、２段式押圧ボタンの２段目の押圧）がされるまで、繰り返される。
In FIG. 7, during the period of the moving image display sequence, moving image signals are read while thinning out the rows of the
そして、動画表示を行っている最中に、レリーズボタンによって、静止画像を連写する指示が入力されると、動画表示シーケンスから動画表示連写シーケンスに移行する。動画表示連写シーケンスでは、図４（ｂ）に示したグローバルシャッタ動作において、静止画像用の画像信号を読み出す各フィールドの間の期間に、図５に示したローリングシャッタ動作のタイミングによる動画用の画像信号の読み出しが行われる。すなわち、動画表示連写シーケンスでは、静止画像用の画像信号を読み出すための画素２８の駆動と、動画用の画像信号を読み出すための画素２８の駆動とが、交互に行われる。そして、読み出された動画用の画像信号は、画像処理部３によって表示用の画像処理が行われて、表示部４に表示される。図７においては、３枚の静止画像用の画像信号を連続して取得する間に、１５フレームの動画用の画像信号が読み出される場合を示している。
When an instruction to continuously shoot still images is input by the release button during the moving image display, the moving image display sequence shifts to the moving image display continuous shooting sequence. In the moving image display continuous shooting sequence, in the global shutter operation shown in FIG. 4B, during the period between each field for reading out the still image signal, the moving image display sequence according to the timing of the rolling shutter operation shown in FIG. The image signal is read out. That is, in the moving image display continuous shooting sequence, driving of the
より具体的には、静止画像用の画像信号を取得するとき、リセット信号読出期間において、図４（ｂ）に示したグローバルシャッタ動作と同様に、フィールドｆ＿Ａ、フィールドｆ＿Ｂ、フィールドｆ＿Ｃの順番でリセット信号の読み出しを行う。また、リセット信号を読み出すフィールドとフィールドとの間（例えば、フィールドｆ＿Ａとフィールドｆ＿Ｂとの間）に、リセット信号の読み出しを完了していないフィールド（図７においては、フィールドｆ＿Ｃ）を用いて、動画用の画像信号の読み出しを行う。図７では、最初に、フィールドｆ＿Ｃを用いて、動画用の画像信号の読み出しを行い、続いて、各フィールドのリセット信号の読み出しを行う例を示している。 More specifically, when an image signal for a still image is acquired, reset is performed in the order of the field f_A, the field f_B, and the field f_C in the reset signal readout period, similarly to the global shutter operation illustrated in FIG. Read the signal. In addition, a field in which reading of the reset signal is not completed (field f_C in FIG. 7) is used between the field from which the reset signal is read (for example, between the field f_A and the field f_B). The image signal for reading is read out. FIG. 7 shows an example in which the image signal for moving image is first read using the field f_C, and then the reset signal for each field is read.
なお、リセット信号の読み出しを完了していないフィールドを用いて動画用の画像信号の読み出しを行う理由は、リセット信号の読み出しを完了したフィールドｆ＿Ａ、またはフィールドｆ＿Ｂを使用して動画用の画像信号を取得すると、すでに取得している信号蓄積部ＦＤのリセットレベルを破壊してしまい、次に良好な静止画像用の光信号の読み出しができないためである。 Note that the reason why the image signal for moving image is read using the field for which the reading of the reset signal has not been completed is that the image signal for moving image is read using the field f_A or the field f_B where the reading of the reset signal has been completed. This is because the acquired reset level of the signal storage unit FD is destroyed, and the next best still image optical signal cannot be read out.
そして、最後に、フィールドｆ＿Ｃのリセット信号を読み出した後に、静止画像の露光期間において、図４（ｂ）に示したグローバルシャッタ動作と同様に、画素部２４内の全ての画素２８の露光を同時に開始する。
Finally, after reading the reset signal of the field f_C, the exposure of all the
そして、光信号読出期間において、図４（ｂ）に示したグローバルシャッタ動作と同様に、フィールドｆ＿Ａ、フィールドｆ＿Ｂ、フィールドｆ＿Ｃの順番で光信号の読み出しを行う。また、光信号を読み出すフィールドとフィールドとの間（例えば、フィールドｆ＿Ａとフィールドｆ＿Ｂとの間）に、光信号の読み出しを完了したフィールド（図７においては、フィールドｆ＿Ａ）を用いて、動画用の画像信号の読み出しを行う。このようにして、動画用の画像信号の読み出しを行いながら、複数の静止画像用の画像信号を連続して読み出す。 Then, in the optical signal readout period, optical signals are read out in the order of field f_A, field f_B, and field f_C, as in the global shutter operation shown in FIG. Further, a field for reading out an optical signal (field f_A in FIG. 7) is used between the field from which the optical signal is read (for example, between the field f_A and the field f_B). Read image signal. In this manner, a plurality of still image signals are continuously read while reading moving image signals.
なお、光信号の読み出しを完了したフィールドを用いて動画用の画像信号の読み出しを行う理由は、光信号の読み出しを完了してないフィールドｆ＿Ｂ、またはフィールドｆ＿Ｃを使用して動画用の画像信号を取得すると、信号蓄積部ＦＤによって電荷電圧変換された被写体の光信号を破壊してしまうためである。 Note that the reason why the image signal for moving image is read using the field where the reading of the optical signal is completed is that the image signal for moving image is read using the field f_B or the field f_C where reading of the optical signal is not completed. This is because, if acquired, the optical signal of the subject that has been subjected to charge-voltage conversion by the signal storage unit FD is destroyed.
そして、所望の静止画像の連写撮影が終了した後、再び動画表示シーケンスに移行して、動画表示が再開される。 Then, after the continuous shooting of the desired still image is completed, the moving image display sequence is resumed, and the moving image display is resumed.
このように、動画表示連写シーケンスでは、静止画像を連写している期間中の動画表示が一時的に黒表示の状態（ブラックアウト）や、同じ画面が続けて表示される状態（フリーズ）となることがなく、動画表示を継続して行うことができる。その結果、本第１の実施形態の撮像装置１００のユーザーは、表示部４に表示された動画の画像を確認しながら被写体の動きに追従した静止画像の連写を行うことができる。
In this way, in the video display continuous shooting sequence, the video display during the period of continuous shooting of still images is temporarily black (blackout), or the same screen is continuously displayed (freeze). Therefore, the moving image display can be continued. As a result, the user of the
また、撮像装置１００では、カメラ制御部１０が動画表示連写シーケンスの制御方法を決定する。より具体的には、カメラ制御部１０が、静止画像用の画像信号を読み出すときのフィールド数、および動画用の画像信号を読み出すときの動画の画素数や読み出し時間および読み出し回数を決定する。この静止画像用の画像信号のフィールド数、および動画用の画像信号の画素数や読み出し時間および読み出し回数は、明るさ・速度検出部１３が検出した明るさ・速度情報、または画像信号検出部１２が検出した輝度に相当する情報および被写体の移動速度の情報と、連写速度設定部１０１が設定した目標連写速度設定と、解像度設定部１０２が設定した下限表示設定とに基づいて決定される。
In the
そして、カメラ制御部１０によって決定された制御方法に基づいて、信号読出シーケンス制御部７が、静止画読出シーケンスと動画読出シーケンスとを制御する。これにより、動画表示のフレームレートおよび解像度と、静止画像の連写速度とを変更することができ、被写体の状態に応じて、より最適な動画表示を行いながら静止画像の連写撮影を行うことができる。
Based on the control method determined by the
＜第１の読出シーケンス（動画表示連写シーケンス：フレームレート優先）＞
図８は、本第１の実施形態の撮像装置１００において動画表示を行いながら静止画像を連写するタイミングの第２の例を示したタイミングチャートである。図８に示した動画表示連写シーケンスのタイミングチャートでは、図７に示した動画表示連写シーケンスのタイミングチャートと同様に、静止画像用の画像信号を読み出すための画素２８の駆動と、動画用の画像信号を読み出すための画素２８の駆動とが、交互に行われる。ただし、図８においては、画素部２４を行毎に５つのフィールドに分けて、それぞれのフィールドに属する画素２８の読み出しを順次行っている。なお、図８における画素部２４を行毎に分けるフィールドの分割数は、連写速度設定部１０１によって設定された目標連写速度設定および解像度設定部１０２によって設定された下限表示設定に基づいて、カメラ制御部１０によって制御されたものである。なお、図８は、２枚の静止画像用の画像信号を連続して取得する間に、１８フレームの動画用の画像信号が読み出される場合を示している。
<First Reading Sequence (Movie Display Continuous Shooting Sequence: Frame Rate Priority)>
FIG. 8 is a timing chart illustrating a second example of timing for continuously shooting still images while displaying a moving image in the
より具体的に、図８に示した動画表示連写シーケンスのタイミングチャートについて説明する。静止画像用の画像信号を取得するとき、リセット信号読出期間において、フィールドｆ＿Ａ、フィールドｆ＿Ｂ、フィールドｆ＿Ｃ、フィールドｆ＿Ｄ、フィールドｆ＿Ｅの順番でリセット信号の読み出しを行う。また、リセット信号を読み出すフィールドとフィールドとの間（例えば、フィールドｆ＿Ａとフィールドｆ＿Ｂとの間）に、リセット信号の読み出しを完了していないフィールド（図８においては、フィールドｆ＿Ｅ）を用いて、動画用の画像信号の読み出しを行う。図８では、最初に、フィールドｆ＿Ｅを用いて、動画用の画像信号の読み出しを行い、続いて、各フィールドのリセット信号の読み出しを行う例を示している。なお、リセット信号の読み出しを完了していないフィールドｆ＿Ｅを用いて動画用の画像信号の読み出しを行う理由は、図７において説明した理由と同様である。 More specifically, a timing chart of the moving image display continuous shooting sequence shown in FIG. 8 will be described. When an image signal for a still image is acquired, the reset signal is read in the order of field f_A, field f_B, field f_C, field f_D, and field f_E in the reset signal reading period. In addition, a field in which reading of the reset signal is not completed (field f_E in FIG. 8) is used between the field from which the reset signal is read (for example, between the field f_A and the field f_B). The image signal for reading is read out. FIG. 8 shows an example in which the image signal for moving image is first read using the field f_E, and then the reset signal for each field is read. Note that the reason why the image signal for moving image is read using the field f_E for which reading of the reset signal has not been completed is the same as the reason described in FIG.
そして、最後に、フィールドｆ＿Ｅのリセット信号を読み出した後に、静止画像の露光期間において、画素部２４内の全ての画素２８の露光を同時に開始する。
Finally, after reading the reset signal of the field f_E, the exposure of all the
そして、光信号読出期間において、フィールドｆ＿Ａ、フィールドｆ＿Ｂ、フィールドｆ＿Ｃ、フィールドｆ＿Ｄ、フィールドｆ＿Ｅの順番で光信号の読み出しを行う。また、光信号を読み出すフィールドとフィールドとの間（例えば、フィールドｆ＿Ａとフィールドｆ＿Ｂとの間）に、光信号の読み出しを完了したフィールド（図８においては、フィールドｆ＿Ａ）を用いて、動画用の画像信号の読み出しを行う。なお、光信号の読み出しを完了したフィールドｆ＿Ａを用いて動画用の画像信号の読み出しを行う理由は、図７において説明した理由と同様である。このようにして、動画用の画像信号の読み出しを行いながら、複数の静止画像用の画像信号を連続して読み出す。 In the optical signal readout period, optical signals are read out in the order of field f_A, field f_B, field f_C, field f_D, and field f_E. Further, a field for reading out an optical signal (field f_A in FIG. 8) is used between the field from which the optical signal is read (for example, between the field f_A and the field f_B). Read image signal. Note that the reason why the image signal for moving image is read using the field f_A for which the reading of the optical signal has been completed is the same as the reason described in FIG. In this manner, a plurality of still image signals are continuously read while reading moving image signals.
このように、図８に示した動画表示連写シーケンスにおいても、静止画像を連写している期間中の動画表示を継続して行うことができる。そして、図８に示した動画表示連写シーケンスにおいては、フィールド数を５フィールドに増やしているため、１フィールドあたりの動画用の画像信号に含まれる画素数は減少してしまうが、それぞれのフィールドにおいて動画用の画像信号の読み出しに要する時間を短くすることができる。その結果、動画表示のフレームレートが高くなり、静止画像の連写撮影中の動画表示をより滑らかにすることができる。このフレームレートを優先した動画表示連写シーケンスは、被写体の輝度が高い（輝度の値が大きい）、すなわち、被写体の明るさが明るい場合や、被写体の移動速度が速い場合に適している。 As described above, also in the moving image display continuous shooting sequence shown in FIG. 8, it is possible to continuously perform moving image display during a period in which still images are continuously shot. In the moving image display continuous shooting sequence shown in FIG. 8, since the number of fields is increased to five, the number of pixels included in the moving image signal per field is reduced. In this case, it is possible to shorten the time required for reading the image signal for moving images. As a result, the frame rate of the moving image display increases, and the moving image display during continuous shooting of still images can be made smoother. This moving image display continuous shooting sequence giving priority to the frame rate is suitable for a case where the brightness of the subject is high (the brightness value is large), that is, when the brightness of the subject is bright or the moving speed of the subject is fast.
なお、図８に示した動画表示連写シーケンスでは、静止画像用の画像信号の読み出しも５フィールドに増やしているが、この場合であっても連写速度は、図７に示した動画表示連写シーケンスと同様である。すなわち、画素部２４を行毎に分けるフィールド数が異なるのみであり、読み出す静止画像用の画像信号の画素数に変わりはないため、静止画像用の画像信号の読み出しに要する時間に変わりはない。
In the moving image display continuous shooting sequence shown in FIG. 8, the readout of the image signal for still images is also increased to five fields, but even in this case, the continuous shooting speed is as follows. This is the same as the copy sequence. That is, only the number of fields for dividing the
上記に述べたように、フレームレートを優先した動画表示連写シーケンスでは、画素部２４を行毎に分割するフィールド数を増やすことによって動画表示のフレームレートを高くして、動画表示をより滑らかにすることができる。なお、上記に述べたように、フィールド数の増加に伴って動画用の画像信号に含まれる画素数は減少していく。従って、フレームレートを優先した動画表示連写シーケンスにおいて増やすことができるフィールド数は、解像度設定部１０２が取得した撮像装置１００に備えた表示部４の性能（例えば、下限の解像度）によって許容できる範囲までとなる。
As described above, in the moving image display continuous shooting sequence in which the frame rate is prioritized, the frame rate of the moving image display is increased by increasing the number of fields in which the
＜第１の読出シーケンス（動画表示連写シーケンス：連写速度優先）＞
図９は、本第１の実施形態の撮像装置１００において動画表示を行いながら静止画像を連写するタイミングの第３の例を示したタイミングチャートである。図９に示した動画表示連写シーケンスのタイミングチャートでは、図７および図８に示した動画表示連写シーケンスのタイミングチャートと同様に、静止画像用の画像信号を読み出すための画素２８の駆動と、動画用の画像信号を読み出すための画素２８の駆動とが、交互に行われる。そして、図９においては、図７に示した動画表示連写シーケンスと同様に、画素部２４を行毎に３つのフィールドに分けて、それぞれのフィールドに属する画素２８の読み出しを順次行っている。ただし、図９では、動画の画素数を図７に示した動画表示連写シーケンスの半分（画素数＝１／２は、間引き率＝２倍）にしている。しかし、図９では、２枚の静止画像用の画像信号を連続して取得する間に、１０フレームの動画用の画像信号が読み出されるため、動画表示のフレームレートは、図７に示した動画表示連写シーケンスと同様である。なお、図９における動画の画素数（間引き率）は、連写速度設定部１０１によって設定された目標連写速度設定および解像度設定部１０２によって設定された下限表示設定に基づいて、カメラ制御部１０によって制御されたものである。
<First readout sequence (video display continuous shooting sequence: continuous shooting speed priority)>
FIG. 9 is a timing chart illustrating a third example of timing for continuously shooting still images while displaying a moving image in the
より具体的に、図９に示した動画表示連写シーケンスのタイミングチャートについて説明する。静止画像用の画像信号を取得するとき、リセット信号読出期間において、フィールドｆ＿Ａ、フィールドｆ＿Ｂ、フィールドｆ＿Ｃの順番でリセット信号の読み出しを行う。また、リセット信号を読み出すフィールドとフィールドとの間（例えば、フィールドｆ＿Ａとフィールドｆ＿Ｂとの間）に、リセット信号の読み出しを完了していないフィールド（図９においては、フィールドｆ＿Ｃ）を用いて、動画用の画像信号の読み出しを行う。このとき、フィールドｆ＿Ｃに属する画素２８をさらに１／２に間引いて（例えば、フィールドｆ＿Ｃに属する画素部２４の行を１／２に間引いて）、動画用の画像信号の読み出しを行う。図９では、最初に、フィールドｆ＿Ｃを用いて、動画用の画像信号の読み出しを行い、続いて、各フィールドのリセット信号の読み出しを行う例を示している。
More specifically, a timing chart of the moving image display continuous shooting sequence shown in FIG. 9 will be described. When an image signal for a still image is acquired, the reset signal is read in the order of the field f_A, the field f_B, and the field f_C in the reset signal reading period. In addition, a field in which reading of the reset signal is not completed (field f_C in FIG. 9) is used between the field from which the reset signal is read (for example, between the field f_A and the field f_B). The image signal for reading is read out. At this time, the
そして、最後に、フィールドｆ＿Ｃのリセット信号を読み出した後に、静止画像の露光期間において、画素部２４内の全ての画素２８の露光を同時に開始する。
Finally, after reading the reset signal of the field f_C, the exposure of all the
そして、光信号読出期間において、フィールドｆ＿Ａ、フィールドｆ＿Ｂ、フィールドｆ＿Ｃの順番で光信号の読み出しを行う。また、光信号を読み出すフィールドとフィールドとの間（例えば、フィールドｆ＿Ａとフィールドｆ＿Ｂとの間）に、光信号の読み出しを完了したフィールド（図９においては、フィールドｆ＿Ａ）を用いて、動画用の画像信号の読み出しを行う。このとき、フィールドｆ＿Ａに属する画素２８をさらに１／２に間引いて（例えば、フィールドｆ＿Ａに属する画素部２４の行を１／２に間引いて）、動画用の画像信号の読み出しを行う。このようにして、動画用の画像信号の間引き読み出しを行いながら、複数の静止画像用の画像信号を連続して読み出す。
Then, in the optical signal readout period, optical signals are read out in the order of field f_A, field f_B, and field f_C. Further, a field for which the optical signal is completely read (field f_A in FIG. 9) is used between the field from which the optical signal is read (for example, between the field f_A and the field f_B). Read image signal. At this time, the
このように、図９に示した動画表示連写シーケンスにおいても、静止画像を連写している期間中の動画表示を継続して行うことができる。そして、図９に示した動画表示連写シーケンスにおいては、実際に読み出す動画用の画像信号の画素数を減らしているため、動画表示の解像度は低下してしまうが、動画用の画像信号の読み出しに要する時間を短くすることができる。その結果、静止画像用の画像信号を取得するフィールド間の時間間隔が短くなり、静止画像用の画像信号の読み出しに要する合計の時間も短くなる。そして、図９に示した動画表示連写シーケンスでは、動画表示の解像度が低下してしまうが、図８に示した動画表示連写シーケンスよりも連写速度を向上することができる。すなわち、図８に示した動画表示連写シーケンスにおいて、フィールド数をさらに増やすことによって、図９に示した動画表示連写シーケンスと同様の動画表示の解像度とした場合であっても、連写速度を向上することはできないが、図９に示した動画表示連写シーケンスでは、連写速度を確実に向上することができる。この連写速度を優先した動画表示連写シーケンスは、被写体の輝度が高い（輝度の値が大きい：被写体が明るい）場合や、被写体の移動速度がさらに速い場合に適している。 As described above, also in the moving image display continuous shooting sequence shown in FIG. 9, it is possible to continuously perform moving image display during a period in which still images are continuously shot. In the moving image display continuous shooting sequence shown in FIG. 9, since the number of pixels of the moving image signal to be actually read is reduced, the moving image display resolution is lowered, but the moving image signal is read. Can be shortened. As a result, the time interval between the fields for acquiring the still image signal is shortened, and the total time required for reading the still image signal is also shortened. In the moving image display continuous shooting sequence shown in FIG. 9, the resolution of moving image display is lowered, but the continuous shooting speed can be improved as compared with the moving image display continuous shooting sequence shown in FIG. That is, in the moving image display continuous shooting sequence shown in FIG. 8, the continuous shooting speed is increased even if the number of fields is further increased to achieve the same moving image display resolution as the moving image display continuous shooting sequence shown in FIG. However, in the moving image display continuous shooting sequence shown in FIG. 9, the continuous shooting speed can be reliably improved. This moving image display continuous shooting sequence giving priority to the continuous shooting speed is suitable when the luminance of the subject is high (the luminance value is large: the subject is bright) or when the moving speed of the subject is faster.
上記に述べたように、連写速度を優先した動画表示連写シーケンスでは、動画用の画像信号の画素数を減らすことによって、被写体の移動速度に応じてより最適な動画表示を行いながら、静止画像の撮影条件などによって決まる目標連写速度または目標連写速度に近い連写速度まで連写速度を向上した静止画像の連写撮影を行うことができる。なお、連写速度を優先した動画表示連写シーケンスにおける最大の連写速度は、解像度設定部１０２が取得した撮像装置１００に備えた表示部４の性能（例えば、下限の解像度）によって許容できる範囲までとなる。
As described above, in the video display continuous shooting sequence that prioritizes continuous shooting speed, by reducing the number of pixels in the image signal for video, while still displaying the optimal video according to the moving speed of the subject, It is possible to perform continuous shooting of still images with a continuous shooting speed improved to a target continuous shooting speed determined by image shooting conditions or the like or a continuous shooting speed close to the target continuous shooting speed. Note that the maximum continuous shooting speed in the moving image display continuous shooting sequence giving priority to the continuous shooting speed is an allowable range depending on the performance (for example, the lower limit resolution) of the
このように、撮像装置１００では、カメラ制御部１０が、静止画像用の画像信号を読み出すときのフィールド数、および動画用の画像信号を読み出すときの動画の画素数や読み出し時間および読み出し回数を決定することによって、被写体の明るさや移動速度に応じた適切なフレームレートや連写速度の動画表示連写シーケンスとすることができる。その結果、より快適な視認性を確保した、静止画像の連写撮影をユーザーに提供することができる。
As described above, in the
なお、図８および図９においては、動画用の画像信号の画素数を減らす方向、すなわち、動画表示の解像度が低下する方向に制御した動画表示連写シーケンスの例を説明したが、逆に、動画表示の解像度を向上する方向に制御することもできる。より具体的には、静止画像用の画像信号のフィールド数を減らして、１フィールドあたりの動画用の画像信号に含まれる画素数を増やすことによって、動画表示のフレームレートは低下してしまうが、動画表示の解像度を向上することができる。また、動画用の画像信号の画素数を増やすことによって、連写速度が低下してしまうが、動画表示の解像度を向上することができる。この動画表示の解像度を優先した動画表示連写シーケンスは、被写体の輝度が低い（輝度の値が小さい）、すなわち、被写体の明るさが暗い場合や、被写体の移動速度が遅い場合に適している。 8 and 9, the example of the moving image display continuous shooting sequence controlled in the direction in which the number of pixels of the image signal for moving images is reduced, that is, in the direction in which the resolution of moving image display is reduced, is described. It can also be controlled to improve the resolution of moving image display. More specifically, by reducing the number of fields of the image signal for still images and increasing the number of pixels included in the image signal for moving images per field, the frame rate of moving image display decreases. The resolution of moving image display can be improved. Also, increasing the number of pixels of the image signal for moving images decreases the continuous shooting speed, but the resolution of moving image display can be improved. This video display continuous shooting sequence giving priority to the resolution of video display is suitable when the subject brightness is low (the brightness value is small), that is, when the subject brightness is low or the subject moving speed is slow. .
上記に述べたように、本第１の実施形態の撮像装置１００では、被写体の明るさや移動速度に応じて、カメラ制御部１０が、動画表示連写シーケンスにおけるフィールドの分割数や、動画の画素数（間引き率）などを決定する。
As described above, in the
例えば、画像信号検出部１２が検出した被写体輝度が、予め定められた被写体の輝度の閾値よりも大きい（被写体が明るい）場合には、表示部４に表示された動画の画像によって被写体を確認することが容易である。このため、カメラ制御部１０は、動画表示の解像度よりもフレームレートを優先した動画表示連写シーケンスとする。このとき、カメラ制御部１０は、動画表示連写シーケンスにおけるフィールド数を増やす方向にするが、併せて、動画の画素数（間引き率）を上げて、目標連写速度を確保できるように、動画の画素数や読み出し時間および読み出し回数を決定する。なお、このとき、下限表示設定の動画表示は確保できるようにする。また、下限表示設定の動画表示が確保できない場合には、連写速度を下げていく。
For example, when the subject brightness detected by the image
また、例えば、画像信号検出部１２が検出した被写体輝度が、予め定められた被写体の輝度の閾値よりも小さい（被写体が暗い）場合には、表示部４に表示された動画の画像によって被写体を確認することが容易ではない。このため、カメラ制御部１０は、動画表示のフレームレートよりも解像度を優先した動画表示連写シーケンスとする。このとき、カメラ制御部１０は、動画表示連写シーケンスにおけるフィールド数を減らす、または動画の画素数（間引き率）を下げて、画素数を増やす方向にするが、併せて、予め定められた最低限の連写速度を確保できるようにする。なお、連写速度が予め定められた速度以下となるような場合には、画素数を減らして最低限の連写速度を確保できるようにする。
Further, for example, when the subject brightness detected by the image
また、例えば、画像信号検出部１２が検出した被写体速度が、予め定められた被写体の移動速度の閾値よりも大きい（移動速度が速い）場合には、表示部４に表示された動画の画像によって速い動きの被写体を確認できることが必要となる。このため、カメラ制御部１０は、静止画像の連写速度を優先し、さらに、動画表示の解像度よりもフレームレートを優先した動画表示連写シーケンスとする。このとき、カメラ制御部１０は、動画表示連写シーケンスにおける動画の画素数（間引き率）を上げる方向にするが、併せて、フィールド数を増やし、目標連写速度を確保した上で、動画表示のフレームレートを高くするように、動画の画素数、読み出し時間、読み出し回数、およびフィールド数を決定する。なお、このとき、下限表示設定の動画表示は確保できるようにする。また、下限表示設定の動画表示が確保できない場合には、連写速度を下げていく。
For example, when the subject speed detected by the image
また、例えば、画像信号検出部１２が検出した被写体速度が、予め定められた被写体の移動速度の閾値よりも小さい（移動速度が遅い）場合には、表示部４に表示された動画の画像によって被写体の動きをより確実に確認できることが必要となる。このため、カメラ制御部１０は、静止画像の連写速度は優先せず、動画表示のフレームレートよりも解像度を優先した動画表示連写シーケンスとする。このとき、カメラ制御部１０は、動画表示連写シーケンスにおける動画の画素数（間引き率）を下げる、またはフィールド数を減らして、画素数を増やす方向にするが、併せて、予め定められた最低限の連写速度を確保できるようにする。なお、連写速度が予め定められた速度以下となるような場合には、画素数を減らして最低限の連写速度を確保できるようにする。
Further, for example, when the subject speed detected by the image
このように、本第１の実施形態の撮像装置１００では、動画表示連写シーケンスにおいて静止画像用の画像信号を読み出すときのフィールド数や、動画用の画像信号を読み出すときの動画の画素数（間引き率）、読み出し時間、および読み出し回数を、被写体の明るさや移動速度に応じた設定にすることができる。なお、フィールド数や、動画の画素数（間引き率）、読み出し時間、および読み出し回数の設定は、例えば、被写体の明るさや移動速度に応じたテーブル情報を予め準備しておき、このテーブル情報に基づいて、対応する被写体の明るさや移動速度に応じた設定を行うようというような方法がある。
As described above, in the
ここで、動画表示連写シーケンスにおけるフィールド数の設定と動画の周期および静止画像の連写間隔の例について説明する。動画表示連写シーケンスにおいて、フィールド数や動画の画素数（間引き率）などを決定する際には、動画表示連写シーケンスにおける静止画像用の画像信号の１フィールドの画素数、動画用の画像信号の１フレームに含まれる画素数、動画用の画像信号を読み出す周期、および静止画像の連写速度を表す連写間隔が考慮される。 Here, an example of setting of the number of fields in the moving image display continuous shooting sequence, a cycle of moving images, and a continuous shooting interval of still images will be described. When determining the number of fields, the number of moving picture pixels (decimation rate), etc. in the moving picture display continuous shooting sequence, the number of pixels in one field of the still picture image signal in the moving picture display continuous shooting sequence, the moving picture image signal The number of pixels included in one frame, the period for reading the image signal for moving images, and the continuous shooting interval representing the continuous shooting speed of still images are taken into consideration.
動画表示連写シーケンスにおける静止画像用の画像信号の１フィールドの画素数Ｐｘｆは、全ての画素数Ｐｘと、静止画のフィールド数ｆとから、下式（２）のように算出することができる。 The number of pixels Pxf in one field of the image signal for still images in the moving image display continuous shooting sequence can be calculated from the number of all pixels Px and the number of fields f of the still image as shown in the following equation (2). .
Ｐｘｆ＝Ｐｘ／ｆ ・・・・・（２） Pxf = Px / f (2)
また、動画表示連写シーケンスにおける動画用の画像信号の１フレームに含まれる画素数ＰｘＦは、全ての画素数Ｐｘと、動画のフレーム数Ｆと、間引き率Ｒｔとから、下式（３）のように算出することができる。 In addition, the number of pixels PxF included in one frame of the moving image signal in the moving image display continuous shooting sequence is calculated from the following equation (3) from the total number of pixels Px, the moving image frame number F, and the thinning rate Rt. Can be calculated as follows.
ＰｘＦ＝（Ｐｘ／Ｆ）／Ｒｔ ・・・・・（３） PxF = (Px / F) / Rt (3)
また、動画表示連写シーケンスにおける動画用の画像信号を読み出す周期（動画の周期）Ｐｍは、全ての画素の読み出し時間Ｔｒと、静止画のフィールド数ｆと、動画のフレーム数Ｆと、間引き率Ｒｔとから、下式（４）のように算出することができる。 In addition, the cycle (moving image cycle) Pm for reading moving image signals in the moving image display continuous shooting sequence is the reading time Tr of all the pixels, the number of still image fields f, the number of moving image frames F, and the thinning rate. From Rt, it can be calculated as in the following formula (4).
Ｐｍ＝（Ｔｒ／ｆ）＋（（Ｔｒ／Ｆ）／Ｒｔ） ・・・・・（４） Pm = (Tr / f) + ((Tr / F) / Rt) (4)
ここで、上式（４）の右辺の第１項（Ｔｒ／ｆ）は、１フィールドの静止画像用の画像信号の読み出し時間、右辺の第２項（（Ｔｒ／Ｆ）／Ｒｔ）は、１フレームの動画用の画像信号の読み出し時間を表している。また、動画の周期Ｐｍは、静止画像用の画像信号の取得における１フィールドの画像信号（リセット信号読出期間におけるリセット信号、および光信号読出期間における光信号）を読み出す周期に相当する。 Here, the first term (Tr / f) on the right side of the above equation (4) is the readout time of an image signal for a still image of one field, and the second term ((Tr / F) / Rt) on the right side is It represents the readout time of an image signal for one frame of moving image. The moving image period Pm corresponds to a period for reading out one-field image signals (a reset signal in the reset signal reading period and an optical signal in the optical signal reading period) in acquiring an image signal for a still image.
また、動画表示連写シーケンスにおける静止画像の連写速度を表す連写間隔Ｔｃは、動画の周期Ｐｍ（１フィールドの静止画像用の画像信号を読み出す周期）と、静止画のフィールド数ｆとから、下式（５）のように算出することができる。 The continuous shooting interval Tc representing the continuous shooting speed of the still image in the moving image display continuous shooting sequence is determined from the cycle Pm of the moving image (the cycle for reading the image signal for one field of still images) and the number f of the still image fields. And can be calculated as in the following equation (5).
Ｔｃ＝（Ｐｍ×ｆ）×２ ・・・・・（５） Tc = (Pm × f) × 2 (5)
ここで、上式（５）の右辺の第１項（Ｐｍ×ｆ）は、静止画像の露光期間の前後におけるリセット信号読出期間または光信号読出期間を表している。そして、上式（５）の右辺の第２項で“２”を乗算することによって、静止画像用の画像信号を取得する全ての期間を表している。ただし、実際には静止画像の露光期間も含まれるため、実際の静止画像の連写撮影における連写間隔は、上式（５）によって算出した連写間隔Ｔｃに静止画像の露光期間を加算した時間の間隔となる。 Here, the first term (Pm × f) on the right side of the above equation (5) represents the reset signal readout period or the optical signal readout period before and after the still image exposure period. Then, by multiplying “2” by the second term on the right side of the above equation (5), all periods for acquiring still image signals are shown. However, since the exposure period of still images is actually included, the continuous shooting interval in actual continuous shooting of still images is obtained by adding the exposure period of still images to the continuous shooting interval Tc calculated by the above equation (5). It becomes time interval.
図１０は、本第１の実施形態の撮像装置１００における動画の画素数および周期と静止画像の連写間隔との関係をまとめた図である。図１０は、画素部２４内の全ての画素数を６００万画素（６Ｍ）とし、この６００万画素を１／１０［ｓｅｃ］で読み出す場合を例とした場合の、上記に述べた動画表示連写シーケンスにおける、それぞれの値を算出した例を示している。図１０の１段目、２段目、３段目は、それぞれ、図７、図８、図９に示した動画表示連写シーケンスにおける静止画像用の画像信号の１フィールドの画素数Ｐｘｆ、動画用の画像信号の１フレームに含まれる画素数ＰｘＦ、動画の周期Ｐｍ、連写間隔Ｔｃを示している。また、図１０の４段目は、撮像装置１００に備えた表示部４で許容することができる下限の解像度（画素数）が、５０万画素（０．５Ｍ）であると仮定した場合の、それぞれの値を示している。これは、図９に示した動画表示連写シーケンスに対して、動画の画素数をさらに半分、ずなわち、図７に示した動画表示連写シーケンスに対して１／４（画素数＝１／４は、間引き率＝４倍）とした場合に相当する。
FIG. 10 is a diagram summarizing the relationship between the number of pixels and the period of a moving image and the continuous shooting interval of still images in the
なお、実際の静止画像の露光期間は、静止画像の撮影条件などによって決まり、必ずしも同じ時間とならない。このため、図１０では、説明を容易にするという目的から、連写間隔Ｔｃにおける静止画像の露光期間を“０”として省略した場合を示すこととする。 Note that the actual still image exposure period is determined by still image capturing conditions and the like, and is not necessarily the same time. For this reason, FIG. 10 shows a case where the exposure period of the still image at the continuous shooting interval Tc is omitted as “0” for the purpose of facilitating the description.
図１０を見てわかるように、動画の画素数（間引き率）が同じである図１０の１段目（図７）と２段目（図８）とを比較した場合は、動画のフレーム数が多い方が、動画用の画像信号の１フレームに含まれる画素数ＰｘＦ、すなわち、動画表示の解像度が低くなる。しかし、動画の周期Ｐｍは短く、すなわち、動画表示のフレームレートは高くなる。そして、このときの連写間隔Ｔｃ、すなわち、連写速度は同じである。 As can be seen from FIG. 10, when the first stage (FIG. 7) and the second stage (FIG. 8) in FIG. 10 having the same number of moving picture pixels (thinning rate) are compared, the number of moving picture frames The greater the number of pixels, the lower the number of pixels PxF included in one frame of the moving image signal, that is, the resolution of moving image display. However, the moving picture period Pm is short, that is, the moving picture display frame rate is high. The continuous shooting interval Tc at this time, that is, the continuous shooting speed is the same.
また、図１０を見てわかるように、動画の画素数（間引き率）が異なる図１０の１段目（図７）と３段目（図９）とを比較した場合は、動画の間引き率が高い方が、動画表示の解像度（画素数ＰｘＦ）が低くなる。そして、連写速度（連写間隔Ｔｃ）は速くなる。なお、図１０の３段目（図９）においては、動画表示の解像度が低いことによって、動画表示のフレームレート（動画の周期Ｐｍ）も少し高くなっている。 Further, as can be seen from FIG. 10, when the first stage (FIG. 7) and the third stage (FIG. 9) in FIG. The higher the is, the lower the resolution (number of pixels PxF) for moving image display. The continuous shooting speed (continuous shooting interval Tc) is increased. In the third stage of FIG. 10 (FIG. 9), the moving image display frame rate (moving image period Pm) is slightly increased due to the low moving image display resolution.
また、図１０を見てわかるように、動画の画素数（間引き率）がさらに高くなった図１０の１段目（図７）と４段目、または３段目（図９）と４段目を比較した場合は、動画の間引き率が高い方が、動画表示の解像度（画素数ＰｘＦ）が、さらに低くなる。そして、連写速度（連写間隔Ｔｃ）も、さらに速くなる。また、動画表示の解像度がさらに低いことによって、動画表示のフレームレート（動画の周期Ｐｍ）も、さらに高くなり、動画のフレーム数を増やした場合と、ほぼ同等のフレームレートとなっている。このことから、動画の画素数（間引き率）を高くすることは、動画表示の解像度を同等とした場合において、動画表示のフレームレートと連写速度との両方を向上させるのに有効であるといえる。 Further, as can be seen from FIG. 10, the first stage (FIG. 7) and the fourth stage, or the third stage (FIG. 9) and the fourth stage of FIG. When the eyes are compared, the higher the moving image thinning rate, the lower the moving image display resolution (number of pixels PxF). Further, the continuous shooting speed (continuous shooting interval Tc) is further increased. Further, since the resolution of moving image display is lower, the frame rate of moving image display (moving image period Pm) is further increased, and the frame rate is substantially the same as when the number of moving image frames is increased. Therefore, increasing the number of moving picture pixels (decimation rate) is effective to improve both the frame rate and continuous shooting speed of moving picture display when the resolution of moving picture display is made equal. I can say that.
上記に述べたように、本第１の実施形態の撮像装置１００では、動画表示連写シーケンスにおいて静止画像用の画像信号を読み出すときのフィールド数や、動画用の画像信号を読み出すときの動画の画素数（間引き率）、読み出し時間、および読み出し回数を、被写体の明るさや移動速度に応じた設定にすることができる。また、画像信号検出部１２では、撮像部２から読み出された動画用の画像信号に基づいて、被写体の明るさや移動速度を検出することができる。そして、本第１の実施形態の撮像装置１００では、明るさ・速度検出部１３または画像信号検出部１２が検出した被写体の明るさや移動速度に基づいて、動画表示連写シーケンス内の静止画像用の画像信号の読み出し動作（静止画読出シーケンス）と、動画用の画像信号の読み出し動作（動画読出シーケンス）とを制御することができる。これにより、被写体の明るさや移動速度が変化した場合でも、動画表示連写シーケンスにおいて表示される動画表示のフレームレートや解像度を、適宜制御することができ、より最適な動画表示を行いながら静止画像の連写撮影を行うことができる。
As described above, in the
なお、動画表示連写シーケンスにおけるフィールド数や、動画の画素数（間引き率）、読み出し時間、および読み出し回数の設定は、例えば、被写体の明るさや移動速度に応じたテーブル情報を予め準備しておき、このテーブル情報に基づいて、対応する被写体の明るさや移動速度に応じた設定を行うようというような方法がある。 For setting the number of fields, the number of moving picture pixels (thinning rate), the readout time, and the number of readouts in the video display continuous shooting sequence, for example, table information corresponding to the brightness and moving speed of the subject is prepared in advance. Based on this table information, there is a method of performing settings according to the brightness and moving speed of the corresponding subject.
なお、画像信号検出部１２において、被写体の移動速度を検出する場合、撮像装置１００が固定されているときには、動画用の画像信号に含まれる被写体の領域から移動速度を検出することができる。しかし、ユーザーが被写体の動きに追従しているときには、被写体の領域から移動速度を検出すると、実際の被写体の移動速度と異なる移動速度を検出してしまうことがある。このようなときには、例えば、動画用の画像信号に含まれる被写体の領域と異なる背景の領域に基づいて、移動速度を検出するようにすることもできる。また、例えば、明るさ・速度検出部１３が検出した撮像装置１００自体の動きの情報と、動画用の画像信号に含まれる被写体の領域または背景の領域とに基づいて、移動速度を検出するようにすることもできる。
When the image
また、本第１の実施形態の撮像装置１００の連写モードにおいては、ユーザーが動画表示連写シーケンスにおいて静止画像用の画像信号を読み出すときのフィールド数、または動画用の画像信号を読み出すときの動画の画素数や読み出し時間および読み出し回数を変更するようにすることもできる。例えば、連写シーケンスにおける現在の設定の状態を表示部４に表示する。そして、ユーザーは、表示部４に表示された動画表示連写シーケンスの設定を確認しながら、カメラ操作部１１を操作して、フィールド数や動画の画素数（間引き率）などを決定する。
In the continuous shooting mode of the
＜第２の実施形態＞
次に、本実施形態の撮像装置の別の構成について説明する。図１１は、本第２の実施形態における撮像装置の概略構成を示したブロック図である。図１１に示した撮像装置２００は、レンズ１と、撮像部２と、画像処理部３と、表示部４と、読出シーケンス設定部６と、信号読出シーケンス制御部７と、駆動制御部８と、レンズ制御部９と、カメラ制御部１０と、カメラ操作部１１と、輝度検出部３２と、速度検出部３３と、を備えている。また、カメラ制御部１０には、連写速度設定部１０１と、解像度設定部１０２と、を備えている。なお、図１１に示した撮像装置１００の構成要素であるメモリカード５は、撮像装置１００に対して着脱可能に構成されており、撮像装置１００に固有の構成でなくてもよい。
<Second Embodiment>
Next, another configuration of the imaging apparatus according to the present embodiment will be described. FIG. 11 is a block diagram illustrating a schematic configuration of the imaging apparatus according to the second embodiment. The
図１１に示した本第２の実施形態の撮像装置２００は、図１に示した撮像装置１００の構成要素である画像信号検出部１２に代わって輝度検出部３２を備え、明るさ・速度検出部１３に代わって速度検出部３３を備えた構成である。従って、撮像装置２００において撮像装置１００と同様の構成要素には、同一の符号を付与し、詳細な説明は省略する。
An
速度検出部３３は、例えば、ジャイロセンサーなどを備え、撮像装置２００自体の動きを検出することによって、被写体が移動する速度を検出する。また、速度検出部３３は、検出した被写体の移動速度を表す情報（以下、「速度情報」という）を、カメラ制御部１０に出力する。
The
輝度検出部３２は、撮像部２内の固体撮像素子から読み出された動画用の画像信号に基づいて、撮像装置１００の被写体の明るさを検出する。輝度検出部３２における被写体の明るさの検出は、例えば、動画用の画像信号に含まれる画素領域の平均値を求めるなどの処理を行うことによって、被写体の明るさ、すなわち、輝度に相当する情報を検出することができる。輝度検出部３２は、輝度に相当する情報を、カメラ制御部１０に出力する。
The
カメラ制御部１０は、速度検出部３３が検出した速度情報と、輝度検出部３２が検出した輝度に相当する情報と、連写速度設定部１０１によって設定された目標連写速度設定と、解像度設定部１０２によって設定された下限表示設定とに基づいて、動画表示連写シーケンスの制御方法を決定する。そして、決定した動画表示連写シーケンスの制御方法を、動画表示連写シーケンスに関する情報として、信号読出シーケンス制御部７に出力する。
The
図１に示した撮像装置１００では、画像信号検出部１２と明るさ・速度検出部１３とが、それぞれ、被写体の明るさや移動速度の情報を検出し、カメラ制御部１０が、いずれか一つの構成要素が検出した被写体の明るさおよび移動速度の情報に基づいて、動画表示連写シーケンスの制御方法を決定していた。撮像装置２００では、輝度検出部３２が被写体の明るさ、速度検出部３３が被写体の移動速度を、それぞれ検出し、検出したそれぞれの情報に基づいて、カメラ制御部１０が、動画表示連写シーケンスの制御方法を決定する構成である。従って、撮像装置２００においては、カメラ制御部１０によって行われる動画表示連写シーケンスの制御方法を決定処理や、撮像装置２００における動画表示連写シーケンスは、図１に示した第１の実施形態の撮像装置１００と同様であるため、詳細な説明は省略する。
In the
上記に述べたように、本第２の実施形態の撮像装置２００においても、第１の実施形態の撮像装置１００と同様に、動画表示連写シーケンスにおいて静止画像用の画像信号を読み出すときのフィールド数や、動画用の画像信号を読み出すときの動画の画素数（間引き率）、読み出し時間、および読み出し回数を、被写体の明るさや移動速度に応じた設定にすることができる。これにより、第１の実施形態の撮像装置１００と同様に、被写体の明るさや移動速度が変化した場合でも、動画表示連写シーケンスにおいて表示される動画表示のフレームレートや解像度を、適宜制御することができ、より最適な動画表示を行いながら静止画像の連写撮影を行うことができる。
As described above, in the
また、本第２の実施形態の撮像装置２００では、輝度検出部３２が被写体の明るさを検出し、速度検出部３３が被写体の移動速度を検出する。その結果、第１の実施形態の撮像装置１００よりも容易に撮像装置２００を構成することができる。
In the
＜第３の実施形態＞
次に、本実施形態の撮像装置の、さらに別の構成について説明する。図１２は、本第３の実施形態における撮像装置の概略構成を示したブロック図である。図１２に示した撮像装置３００は、レンズ１と、撮像部２と、画像処理部３と、表示部４と、読出シーケンス設定部６と、信号読出シーケンス制御部７と、駆動制御部８と、レンズ制御部９と、カメラ制御部１０と、カメラ操作部１１と、移動速度検出部４２と、明るさ検出部４３と、を備えている。また、カメラ制御部１０には、連写速度設定部１０１と、解像度設定部１０２と、を備えている。なお、図１２に示した撮像装置１００の構成要素であるメモリカード５は、撮像装置１００に対して着脱可能に構成されており、撮像装置１００に固有の構成でなくてもよい。
<Third Embodiment>
Next, still another configuration of the imaging apparatus according to the present embodiment will be described. FIG. 12 is a block diagram illustrating a schematic configuration of the imaging apparatus according to the third embodiment. An
図１２に示した本第３の実施形態の撮像装置３００は、図１に示した撮像装置１００の構成要素である画像信号検出部１２に代わって移動速度検出部４２を備え、明るさ・速度検出部１３に代わって明るさ検出部４３を備えた構成である。従って、撮像装置３００において撮像装置１００と同様の構成要素には、同一の符号を付与し、詳細な説明は省略する。
An
明るさ検出部４３は、例えば、明るさセンサーなどを備え、撮像装置１００の被撮像範囲の明るさを検出することによって、被写体の明るさを検出する。また、明るさ検出部４３は、検出した被写体の明るさを表す情報（以下、「明るさ情報」という）を、カメラ制御部１０に出力する。
The
移動速度検出部４２は、撮像部２内の固体撮像素子から読み出された動画用の画像信号に基づいて、撮像装置１００の被写体が移動する速度を検出する。移動速度検出部４２における被写体の移動速度の検出は、例えば、動画のフレーム間の相関関係を用いることにより検出することができる。移動速度検出部４２は、被写体の移動速度の情報を、カメラ制御部１０に出力する。
The moving
カメラ制御部１０は、明るさ検出部４３が検出した明るさ情報と、移動速度検出部４２が検出した被写体の移動速度の情報と、連写速度設定部１０１によって設定された目標連写速度設定と、解像度設定部１０２によって設定された下限表示設定とに基づいて、動画表示連写シーケンスの制御方法を決定する。そして、決定した動画表示連写シーケンスの制御方法を、動画表示連写シーケンスに関する情報として、信号読出シーケンス制御部７に出力する。
The
図１に示した撮像装置１００では、画像信号検出部１２と明るさ・速度検出部１３とが、それぞれ、被写体の明るさや移動速度の情報を検出し、カメラ制御部１０が、いずれか一つの構成要素が検出した被写体の明るさおよび移動速度の情報に基づいて、動画表示連写シーケンスの制御方法を決定していた。撮像装置３００では、移動速度検出部４２が被写体の移動速度、明るさ検出部４３が被写体の明るさを、それぞれ検出し、検出したそれぞれの情報に基づいて、カメラ制御部１０が、動画表示連写シーケンスの制御方法を決定する構成である。従って、撮像装置３００においては、カメラ制御部１０によって行われる動画表示連写シーケンスの制御方法を決定処理や、撮像装置３００における動画表示連写シーケンスは、図１に示した第１の実施形態の撮像装置１００と同様であるため、詳細な説明は省略する。
In the
上記に述べたように、本第３の実施形態の撮像装置３００においても、第１の実施形態の撮像装置１００と同様に、動画表示連写シーケンスにおいて静止画像用の画像信号を読み出すときのフィールド数や、動画用の画像信号を読み出すときの動画の画素数（間引き率）、読み出し時間、および読み出し回数を、被写体の明るさや移動速度に応じた設定にすることができる。これにより、第１の実施形態の撮像装置１００と同様に、被写体の明るさや移動速度が変化した場合でも、動画表示連写シーケンスにおいて表示される動画表示のフレームレートや解像度を、適宜制御することができ、より最適な動画表示を行いながら静止画像の連写撮影を行うことができる。
As described above, in the
また、本第３の実施形態の撮像装置３００では、移動速度検出部４２が被写体の移動速度を検出し、明るさ検出部４３が被写体の明るさを検出する。その結果、第１の実施形態の撮像装置１００よりも容易に撮像装置３００を構成することができる。
In the
上記に述べたように、本発明を実施するための形態によれば、被写体の明るさや移動速度に応じて、動画表示連写シーケンスにおけるフィールドの分割数や、動画の画素数（間引き率）などを制御することによって、動画表示連写シーケンス内の静止画像用の画像信号の読み出し動作（静止画読出シーケンス）と、動画用の画像信号の読み出し動作（動画読出シーケンス）とを制御することができる。これにより、被写体の明るさが暗い状態に変化した場合や、被写体の移動速度が変化した場合などにおいても、動画表示のフレームレートや解像度を適宜制御することができる。その結果、撮像装置のシステム全体として、ユーザーに快適な視認性を確保した、静止画像の連写撮影を提供することができる。 As described above, according to the mode for carrying out the present invention, the number of field divisions in the moving image display continuous shooting sequence, the number of moving image pixels (decimation rate), etc., according to the brightness and moving speed of the subject. By controlling, it is possible to control the image signal readout operation (still image readout sequence) for still images in the movie display continuous shooting sequence and the image signal readout operation (movie readout sequence) for movies. . Thereby, even when the brightness of the subject changes to a dark state, or when the moving speed of the subject changes, it is possible to appropriately control the frame rate and resolution of the moving image display. As a result, as a whole system of the imaging apparatus, it is possible to provide continuous shooting of still images while ensuring comfortable visibility for the user.
なお、本発明のある態様に係る撮像装置における読出制御部は、本実施形態においては、例えば、駆動制御部８と、垂直制御回路２６と、水平制御回路２７とに対応し、信号読出シーケンス制御部は、例えば、信号読出シーケンス制御部７と、カメラ制御部１０とに対応する。また、本発明のある態様に係る輝度検出部は、本実施形態においては、例えば、画像信号検出部１２、明るさ・速度検出部１３、輝度検出部３２、または明るさ検出部４３に対応し、移動速度検出部は、例えば、画像信号検出部１２、明るさ・速度検出部１３、速度検出部３３、または移動速度検出部４２に対応する。また、本発明のある態様に係る最大連写速度取得部は、本実施形態においては、例えば、連写速度設定部１０１に対応し、下限解像度取得部は、例えば、解像度設定部１０２に対応する。また、本発明のある態様に係る入力受付部は、本実施形態においては、例えば、カメラ操作部１１およびカメラ制御部１０に対応し、出力部は、例えば、表示部４に対応する。
In the present embodiment, the readout control unit in the imaging apparatus according to an aspect of the present invention corresponds to, for example, the
なお、本発明を実施するための形態では、連写シーケンスに移行する前に、例えば、明るさ・速度検出部１３または画像信号検出部１２が検出した被写体の明るさや移動速度に基づいて、カメラ制御部１０が、動画表示連写シーケンスにおけるフィールドの分割数や、動画の画素数（間引き率）などを決定する場合について説明した。しかし、カメラ制御部１０が決定する動画表示連写シーケンスの制御方法は、本発明を実施するための形態に限定されるものではない。例えば、静止画像の連写撮影の動作中においても、例えば、明るさ・速度検出部１３または画像信号検出部１２が検出した被写体の明るさや移動速度に基づいて、動画表示連写シーケンスにおけるフィールド数や、動画の画素数（間引き率）、読み出し時間、および読み出し回数を切り替えるようにすることもできる。
In the embodiment for carrying out the present invention, before moving to the continuous shooting sequence, for example, based on the brightness and moving speed of the subject detected by the brightness /
なお、本発明を実施するための形態においては、動画表示連写シーケンスにおいて、静止画像用の画像信号の読み出しと、動画用の画像信号を読み出しとが、交互に行われる場合について説明した。しかし、動画表示連写シーケンス内の動作は、本発明を実施するための形態に限定されるものではない。例えば、動画表示連写シーケンスにおいて、動画用の画像信号の読み出し回数を減らしたり、逆に増やしたりすることもできる。 In the embodiment for carrying out the present invention, a case has been described in which reading of still image signals and reading of moving image signals are alternately performed in the moving image display continuous shooting sequence. However, the operation in the moving image display continuous shooting sequence is not limited to the mode for carrying out the present invention. For example, in the moving image display continuous shooting sequence, the number of times of reading out image signals for moving images can be reduced or conversely increased.
なお、上記に述べたように、動画用の画像信号に含まれる画素数を減らすほど、動画用の画像信号の読み出しに要する時間が短くなり、動画表示のフレームレートまたは連写速度の向上をすることができる。ただし、上記に述べたように、画素数を減らすほど、動画表示の解像度は減少する。このため、例えば、動画表示連写シーケンスに移行する前の動画用の画像信号から被写体に応じた動画表示が許容できる解像度の下限を決めた上で、動画表示連写シーケンス内の動作を制御するようにすることが望ましい。例えば、撮像装置１００に備えた表示部４の性能に応じて許容される下限の解像度を維持した上で、最大の連写速度が得られるように制御する。これにより、快適な動画表示を行いながら快適に静止画像を連写する連写速度を上げることができる。例えば、図１０の４段目の設定においては、下限の解像度を５０万画素（０．５Ｍ）とすることによって、４コマ／秒の連写速度を得ることができる。
As described above, as the number of pixels included in the moving image signal is reduced, the time required for reading out the moving image signal is shortened, and the frame rate or continuous shooting speed of moving image display is improved. be able to. However, as described above, the resolution of moving image display decreases as the number of pixels decreases. For this reason, for example, after determining the lower limit of the resolution that allows moving image display according to the subject from the moving image display signal before moving to the moving image display continuous shooting sequence, the operation in the moving image display continuous shooting sequence is controlled. It is desirable to do so. For example, while maintaining the lower limit resolution allowed according to the performance of the
また、逆に被写体の移動速度、輝度から撮像装置が実行することができる最大の連写速度を決定し、その上で動画表示連写シーケンス内の動作を制御して、動画表示のフレームレートと解像度とを決めることによって、快適な静止画像の連写撮影も行うことができる。 Conversely, the maximum continuous shooting speed that the imaging device can execute is determined from the moving speed and brightness of the subject, and then the operation in the video display continuous shooting sequence is controlled to determine the frame rate of the video display. By determining the resolution, comfortable continuous shooting of still images can be performed.
また、本発明における回路構成および駆動方式の具体的な構成は、本発明を実施するための形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲において種々の変更をすることができる。例えば、画素の構成要素および駆動方法が変わった場合においても、例えば、撮像部２や固体撮像素子２１内の構成要素や回路構成に応じて駆動方法を変更することによって対応することができる。
Further, the specific configuration of the circuit configuration and the driving system in the present invention is not limited to the mode for carrying out the present invention, and various modifications can be made without departing from the spirit of the present invention. . For example, even when the pixel components and the driving method are changed, for example, it is possible to cope with the problem by changing the driving method according to the components and the circuit configuration in the
また、画素の行方向および列方向の配置は、本発明を実施するための形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲において画素を配置する行方向および列方向の数を変更することができる。 Further, the arrangement of the pixels in the row direction and the column direction is not limited to the mode for carrying out the present invention, and the number of pixels in the row direction and the column direction in which the pixels are arranged without departing from the gist of the present invention. Can be changed.
また、本発明を実施するための形態では、動画用の画像信号を用いずに被写体の移動速度を検出する場合の例として、ジャイロセンサーを用いて撮像装置自体の動きを検出することによって、被写体が移動する速度を検出する場合について説明した。しかし、動画用の画像信号を用いずに被写体の移動速度を検出する方法は、本発明を実施するための形態に限定されるものではない。例えば、被写体の移動速度を検出するための専用のセンサを用いることもできる。また、本発明を実施するための形態では、動画用の画像信号を用いずに被写体の明るさを検出する場合の例として、明るさセンサーを用いて撮像装置の被撮像範囲の明るさを検出する場合について説明した。しかし、動画用の画像信号を用いずに被写体の明るさを検出する方法は、本発明を実施するための形態に限定されるものではない。例えば、被写体の明るさを直接検出するための専用のセンサを用いることもできる。 In the embodiment for carrying out the present invention, as an example of detecting the moving speed of a subject without using a moving image signal, the subject is detected by detecting the movement of the imaging device itself using a gyro sensor. The case where the moving speed is detected has been described. However, the method for detecting the moving speed of the subject without using the moving image signal is not limited to the mode for carrying out the present invention. For example, a dedicated sensor for detecting the moving speed of the subject can be used. In the embodiment for carrying out the present invention, as an example of detecting the brightness of a subject without using an image signal for moving images, the brightness of an imaging range of the imaging apparatus is detected using a brightness sensor. Explained when to do. However, the method for detecting the brightness of a subject without using an image signal for moving images is not limited to the mode for carrying out the present invention. For example, a dedicated sensor for directly detecting the brightness of the subject can be used.
以上、本発明を実施するための形態をもとに説明したが、各構成要素や各処理プロセスの任意の組み合わせ、本発明の表現をコンピュータプログラムプロダクトなどに変換したものもまた、本発明の態様として有効である。ここで、コンピュータプログラムプロダクトとは、プログラムコードが記録された記録媒体（ＤＶＤ媒体、ハードディスク媒体、メモリ媒体など）、プログラムコードが記録されたコンピュータ、プログラムコードが記録されたインターネットシステム（例えば、サーバとクライアント端末を含むシステム）など、プログラムコードが記録された記録媒体、装置、機器やシステムをいう。この場合、上述した各構成要素や各処理プロセスは各モジュールで実装され、その実装されたモジュールからなるプログラムコードはコンピュータプログラムプロダクト内に記録される。 As described above, the description has been given based on the embodiment for carrying out the present invention. However, any combination of each component, each processing process, and the expression of the present invention converted into a computer program product or the like is also an aspect of the present invention. It is effective as Here, the computer program product includes a recording medium (DVD medium, hard disk medium, memory medium, etc.) on which a program code is recorded, a computer on which the program code is recorded, and an Internet system (for example, a server and the like) on which the program code is recorded. A recording medium, apparatus, device or system in which a program code is recorded, such as a system including a client terminal. In this case, each component and each processing process described above are mounted in each module, and a program code including the mounted module is recorded in a computer program product.
例えば、本発明のある態様に係るコンピュータプログラムプロダクトは、撮像素子上に配置された複数の画素からの画素信号の読み出しを制御する読出制御モジュールと、静止画用および動画用の前記画素信号の読み出しに係わる画素信号読出シーケンスを含み、かつ、連写を行いながら動画表示を行うことを目的とした第１の読出シーケンスを、少なくとも設定可能な読出シーケンス設定モジュールと、前記読み出された画素信号に基づいて、前記第１の読出シーケンス内の一つ以上の前記画素信号読出シーケンスの設定を制御する信号読出シーケンス制御モジュールと、をコンピュータに実行させるためのプログラムコードが記録されたコンピュータプログラムプロダクトである。 For example, a computer program product according to an aspect of the present invention includes a readout control module that controls readout of pixel signals from a plurality of pixels arranged on an image sensor, and readout of the pixel signals for still images and moving images. A first readout sequence including a pixel signal readout sequence related to the above and intended to display a moving image while performing continuous shooting, and at least a readout sequence setting module that can be set, and the readout pixel signal And a signal readout sequence control module for controlling a setting of one or more of the pixel signal readout sequences in the first readout sequence, and a computer program product in which program code for causing a computer to execute is recorded. .
また、例えば、図１に示した撮像装置１００の各構成要素による処理を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、当該記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより、撮像装置１００に係る上述した種々の処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものであってもよい。また、「コンピュータシステム」は、ＷＷＷシステムを利用している場合であれば、ホームページ提供環境（あるいは表示環境）も含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、フラッシュメモリ等の書き込み可能な不揮発性メモリ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。
Further, for example, a program for realizing processing by each component of the
さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（例えばＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ））のように、一定時間プログラムを保持しているものも含むものとする。また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク（通信網）や電話回線等の通信回線（通信線）のように情報を伝送する機能を有する媒体のことをいう。また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であっても良い。 Further, the “computer-readable recording medium” refers to a volatile memory (for example, DRAM (Dynamic) in a computer system serving as a server or a client when a program is transmitted via a network such as the Internet or a communication line such as a telephone line. Random Access Memory)) that holds a program for a certain period of time is also included. The program may be transmitted from a computer system storing the program in a storage device or the like to another computer system via a transmission medium or by a transmission wave in the transmission medium. Here, the “transmission medium” for transmitting the program refers to a medium having a function of transmitting information, such as a network (communication network) such as the Internet or a communication line (communication line) such as a telephone line. The program may be for realizing a part of the functions described above. Furthermore, what can implement | achieve the function mentioned above in combination with the program already recorded on the computer system, and what is called a difference file (difference program) may be sufficient.
以上、本発明の実施形態について、図面を参照して説明してきたが、具体的な構成はこの実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲においての種々の変更も含まれる。 The embodiment of the present invention has been described above with reference to the drawings. However, the specific configuration is not limited to this embodiment, and includes various modifications within the scope of the present invention. It is.
また、本発明のある態様に係る撮像装置は、撮像素子上に配置された複数の画素からの画素信号の読み出しを制御する読出制御手段と、静止画用および動画用の前記画素信号の読み出しに係わる画素信号読出シーケンスを含み、かつ、連写を行いながら動画表示を行うことを目的とした第１の読出シーケンスを、少なくとも設定可能な読出シーケンス設定手段と、前記読み出された画素信号に基づいて、前記第１の読出シーケンス内の一つ以上の前記画素信号読出シーケンスの設定を制御する信号読出シーケンス制御手段と、を備えることを特徴とする撮像装置であってもよい。 In addition, an imaging apparatus according to an aspect of the present invention includes a readout control unit that controls readout of pixel signals from a plurality of pixels arranged on an imaging device, and readout of the pixel signals for still images and moving images. A first readout sequence including a related pixel signal readout sequence and intended to display a moving image while performing continuous shooting, based on at least readout sequence setting means that can be set and the readout pixel signal In addition, the imaging apparatus may include a signal readout sequence control unit that controls setting of one or more of the pixel signal readout sequences in the first readout sequence.
また、本発明のある態様に係る撮像装置は、撮像素子上に配置された複数の画素からの画素信号の読み出しを制御する読出制御手段と、静止画用および動画用の前記画素信号の読み出しに係わる画素信号読出シーケンスを含み、かつ、連写を行いながら動画表示を行うことを目的とした第１の読出シーケンスを、少なくとも設定可能な読出シーケンス設定手段と、被写体の輝度を検出する輝度検出手段と、前記輝度検出手段が検出した前記被写体の輝度に基づいて、前記第１の読出シーケンス内の一つ以上の前記画素信号読出シーケンスの設定を制御する信号読出シーケンス制御手段と、を備えることを特徴とする撮像装置であってもよい。 In addition, an imaging apparatus according to an aspect of the present invention includes a readout control unit that controls readout of pixel signals from a plurality of pixels arranged on an imaging device, and readout of the pixel signals for still images and moving images. A reading sequence setting means capable of setting at least a first reading sequence including a pixel signal reading sequence and performing a moving image display while performing continuous shooting, and a luminance detecting means for detecting the luminance of a subject And signal readout sequence control means for controlling the setting of one or more pixel signal readout sequences in the first readout sequence based on the brightness of the subject detected by the brightness detection means. The imaging device may be a feature.
また、本発明のある態様に係る撮像装置は、撮像素子上に配置された複数の画素からの画素信号の読み出しを制御する読出制御手段と、静止画用および動画用の前記画素信号の読み出しに係わる画素信号読出シーケンスを含み、かつ、連写を行いながら動画表示を行うことを目的とした第１の読出シーケンスを、少なくとも設定可能な読出シーケンス設定手段と、被写体が移動する速度を検出する移動速度検出手段と、前記移動速度検出手段が検出した前記被写体の移動速度に基づいて、前記第１の読出シーケンス内の一つ以上の前記画素信号読出シーケンスの設定を制御する信号読出シーケンス制御手段と、を備えることを特徴とする撮像装置であってもよい。 In addition, an imaging apparatus according to an aspect of the present invention includes a readout control unit that controls readout of pixel signals from a plurality of pixels arranged on an imaging device, and readout of the pixel signals for still images and moving images. A first reading sequence that includes the pixel signal reading sequence and that is intended to display a moving image while performing continuous shooting, at least a reading sequence setting means that can be set, and a movement that detects the moving speed of the subject Speed detection means; and signal readout sequence control means for controlling the setting of one or more of the pixel signal readout sequences in the first readout sequence based on the moving speed of the subject detected by the movement speed detection means The imaging apparatus characterized by including these may be sufficient.
以上、本発明の実施形態について、図面を参照して説明してきたが、具体的な構成はこの実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲において種々の代替物、変形、等価物による変更を行うこともできる。従って、本発明の範囲は、上記の説明を参照して決められるものではなく、請求項によって決められるべきであり、均等物の全ての範囲も含まれる。また、上述した特徴は、いずれも、好ましいか否かを問わず、他の特徴と組み合わせてもよい。また、請求項において、明示的に断らない限り、各構成要素は１またはそれ以上の数量である。また、請求項において「〜のための手段」のような語句を用いて明示的に記載する場合を除いて、請求項が、ミーンズ・プラス・ファンクションの限定を含むものと解してはならない。 The embodiment of the present invention has been described above with reference to the drawings. However, the specific configuration is not limited to this embodiment, and various alternatives and modifications can be made without departing from the spirit of the present invention. The equivalent can also be changed. Accordingly, the scope of the invention should not be determined with reference to the above description, but should be determined by the claims, including the full scope of equivalents. In addition, any of the features described above may be combined with other features regardless of whether or not they are preferable. Also, in the claims, each component is one or more quantities unless explicitly stated otherwise. In addition, the claims should not be construed as including means-plus-function limitations unless explicitly stated in the claims using words such as “means for”.
１００，２００，３００・・・撮像装置
１・・・レンズ
２・・・撮像部
２１・・・固体撮像素子
２２・・・ＡＤ変換部
２３・・・ノイズ除去部
２４・・・画素部
２５・・・列処理回路部
２６・・・垂直制御回路
２７・・・水平制御回路
２８・・・画素
３・・・画像処理部
４・・・表示部
５・・・メモリカード
６・・・読出シーケンス設定部
７・・・信号読出シーケンス制御部
８・・・駆動制御部
９・・・レンズ制御部
１０・・・カメラ制御部
１０１・・・連写速度設定部
１０２・・・解像度設定部
１１・・・カメラ操作部
１２・・・画像信号検出部
１３・・・明るさ・速度検出部
３２・・・輝度検出部
３３・・・速度検出部
４２・・・移動速度検出部
４３・・・明るさ検出部
ＰＤ・・・フォトダイオード
ＦＤ・・・信号蓄積部
Ｍｔｘ１・・・転送トランジスタ
Ｍｔｘ２・・・ＰＤリセットトランジスタ
Ｍａ・・・増幅トランジスタ
Ｍｂ・・・選択トランジスタ
Ｍｒ・・・ＦＤリセットトランジスタ
DESCRIPTION OF SYMBOLS 100,200,300 ...
Claims (24)
静止画用および動画用の前記画素信号の読み出しに係わる画素信号読出シーケンスを含み、かつ、連写を行いながら動画表示を行うことを目的とした第１の読出シーケンスを、少なくとも設定可能な読出シーケンス設定部と、
前記読み出された画素信号に基づいて、前記第１の読出シーケンス内の一つ以上の前記画素信号読出シーケンスの設定を制御する信号読出シーケンス制御部と、
を備えることを特徴とする撮像装置。 A readout control unit that controls readout of pixel signals from a plurality of pixels arranged on the image sensor;
A readout sequence that includes a pixel signal readout sequence related to readout of the pixel signals for still images and moving images, and that can set at least a first readout sequence for displaying moving images while performing continuous shooting A setting section;
A signal readout sequence controller that controls the setting of one or more of the pixel signal readout sequences in the first readout sequence based on the readout pixel signals;
An imaging apparatus comprising:
過去に実行された読出シーケンスによって読み出された画素信号に基づいて、前記第１の読出シーケンス内の前記画素信号読出シーケンスの設定を制御する、
ことを特徴とする請求項１に記載の撮像装置。 The signal readout sequence controller is
Controlling the setting of the pixel signal readout sequence in the first readout sequence based on a pixel signal read out by a readout sequence executed in the past;
The imaging apparatus according to claim 1.
動画表示のみを目的として前記画素信号を読み出す第２の読出シーケンスを設定可能であり、
前記過去に実行された読出シーケンスは、
前記第１の読出シーケンスによって前記画素信号を読み出す前に実行された前記第２の読出シーケンスである、
ことを特徴とする請求項２に記載の撮像装置。 The read sequence setting unit further includes:
A second readout sequence for reading out the pixel signal only for the purpose of displaying a moving image can be set;
The read sequence executed in the past is:
The second readout sequence executed before reading out the pixel signal by the first readout sequence;
The imaging apparatus according to claim 2.
前記画素信号に基づいて、目標となりうる連写速度を設定し、
該設定した目標となりうる連写速度による連写を実現するように、実行する前記第１の読出シーケンス内の前記画素信号読出シーケンスの設定を制御する、
ことを特徴とする請求項１に記載の撮像装置。 The signal readout sequence controller is
Based on the pixel signal, set a target continuous shooting speed,
Controlling the setting of the pixel signal reading sequence in the first reading sequence to be executed so as to realize continuous shooting at a continuous shooting speed that can be the set target;
The imaging apparatus according to claim 1.
を備え、
前記信号読出シーケンス制御部は、
前記輝度検出部が検出した前記被写体の輝度に基づいて、前記目標となりうる連写速度を設定する、
ことを特徴とする請求項４に記載の撮像装置。 A luminance detector that detects the luminance of a subject included in the pixel signal based on the pixel signal;
With
The signal readout sequence controller is
Based on the brightness of the subject detected by the brightness detector, a continuous shooting speed that can be the target is set.
The imaging apparatus according to claim 4.
前記輝度検出部が検出した前記被写体の輝度が所定の輝度の閾値よりも小さい場合に、前記目標となりうる連写速度を小さくする、
ことを特徴とする請求項５に記載の撮像装置。 The signal readout sequence controller is
When the luminance of the subject detected by the luminance detection unit is smaller than a predetermined luminance threshold, the continuous shooting speed that can be the target is reduced.
The imaging apparatus according to claim 5.
前記輝度検出部が検出した前記被写体の輝度が所定の輝度の閾値よりも大きい場合に、前記目標となりうる連写速度を大きくする、
ことを特徴とする請求項５に記載の撮像装置。 The signal readout sequence controller is
Increasing the target continuous shooting speed when the luminance of the subject detected by the luminance detection unit is larger than a predetermined luminance threshold,
The imaging apparatus according to claim 5.
を備え、
前記信号読出シーケンス制御部は、
前記移動速度検出部が検出した前記被写体の移動速度に基づいて、前記目標となりうる連写速度を設定する、
ことを特徴とする請求項４に記載の撮像装置。 A moving speed detector that detects a moving speed of a subject included in the pixel signal based on the pixel signal;
With
The signal readout sequence controller is
Based on the moving speed of the subject detected by the moving speed detector, a continuous shooting speed that can be the target is set.
The imaging apparatus according to claim 4.
連写における静止画用のデータを取得することを目的として前記画素信号を読み出す静止画読出シーケンスと、動画用のデータを取得することを目的として前記画素信号を読み出す動画読出シーケンスとをそれぞれ一つ以上含み、
前記信号読出シーケンス制御部は、
前記設定した目標となりうる連写速度が所定の速度の閾値よりも小さい場合に、該第１の読出シーケンスにおいて実行される前記静止画読出シーケンスと、前記動画読出シーケンスとの少なくとも一つ以上の画素信号読出シーケンスに対して、画素信号読出シーケンスを実行する数および画素信号読出シーケンスを実行する時間の幅の内、少なくとも一つ以上を増加させるように制御する、
ことを特徴とする請求項４に記載の撮像装置。 The first reading sequence within a predetermined time is:
One still image reading sequence for reading out the pixel signal for the purpose of acquiring still image data in continuous shooting and one moving image reading sequence for reading out the pixel signal for the purpose of acquiring data for moving image Including
The signal readout sequence controller is
At least one or more pixels of the still image reading sequence and the moving image reading sequence executed in the first reading sequence when the continuous shooting speed that can be the set target is smaller than a predetermined speed threshold Control the signal readout sequence to increase at least one of the number of pixel signal readout sequences to be executed and the width of time to execute the pixel signal readout sequence.
The imaging apparatus according to claim 4.
連写における静止画用のデータを取得することを目的として前記画素信号を読み出す静止画読出シーケンスと、動画用のデータを取得することを目的として前記画素信号を読み出す動画読出シーケンスとをそれぞれ一つ以上含み、
前記信号読出シーケンス制御部は、
前記設定した目標となりうる連写速度が所定の速度の閾値よりも大きい場合に、該第１の読出シーケンスにおいて実行される前記静止画読出シーケンスと、前記動画読出シーケンスとの少なくとも一つ以上の画素信号読出シーケンスに対して、画素信号読出シーケンスを実行する数および画素信号読出シーケンスを実行する時間の幅の内、少なくとも一つ以上を減少させるように制御する、
ことを特徴とする請求項４に記載の撮像装置。 The first reading sequence within a predetermined time is:
One still image reading sequence for reading out the pixel signal for the purpose of acquiring still image data in continuous shooting and one moving image reading sequence for reading out the pixel signal for the purpose of acquiring data for moving image Including
The signal readout sequence controller is
When the continuous shooting speed that can be the set target is larger than a predetermined speed threshold, at least one pixel of the still image reading sequence and the moving image reading sequence executed in the first reading sequence Control the signal readout sequence so as to reduce at least one of the number of pixel signal readout sequences to be executed and the width of time to execute the pixel signal readout sequence.
The imaging apparatus according to claim 4.
をさらに備え、
前記信号読出シーケンス制御部は、
前記輝度検出部が検出した前記被写体の輝度が所定の輝度の閾値よりも大きい場合に、前記最大連写速度取得部が取得した前記最大連写速度による連写を実現するように、実行する前記第１の読出シーケンス内の前記画素信号読出シーケンスの設定を制御する、
ことを特徴とする請求項５に記載の撮像装置。 A maximum continuous shooting speed acquisition unit that acquires a maximum continuous shooting speed as a maximum continuous shooting speed among the continuous shooting speeds that can be the target;
Further comprising
The signal readout sequence controller is
When the luminance of the subject detected by the luminance detection unit is larger than a predetermined luminance threshold, the continuous execution at the maximum continuous shooting speed acquired by the maximum continuous shooting speed acquisition unit is executed. Controlling the setting of the pixel signal readout sequence in a first readout sequence;
The imaging apparatus according to claim 5.
をさらに備え、
前記信号読出シーケンス制御部は、
前記移動速度検出部が検出した前記被写体の移動速度が所定の速度の閾値よりも大きい場合に、前記最大連写速度取得部が取得した前記最大連写速度による連写を実現するように、実行する前記第１の読出シーケンス内の前記画素信号読出シーケンスの設定を制御する、
ことを特徴とする請求項８に記載の撮像装置。 A maximum continuous shooting speed acquisition unit that acquires a maximum continuous shooting speed as a maximum continuous shooting speed among the continuous shooting speeds that can be the target;
Further comprising
The signal readout sequence controller is
When the moving speed of the subject detected by the moving speed detection unit is larger than a predetermined speed threshold, execution is performed so as to realize continuous shooting at the maximum continuous shooting speed acquired by the maximum continuous shooting speed acquisition unit. Controlling the setting of the pixel signal readout sequence in the first readout sequence;
The imaging apparatus according to claim 8.
をさらに備え、
前記最大連写速度取得部は、
前記下限解像度取得部が取得した前記下限解像度の情報に基づいて、前記最大連写速度を取得する、
ことを特徴とする請求項１１または請求項１２に記載の撮像装置。 A lower limit resolution acquisition unit for acquiring information of a lower limit resolution indicating a lower limit of an allowable resolution when displaying the data for the moving image;
Further comprising
The maximum continuous shooting speed acquisition unit
Based on the information on the lower limit resolution acquired by the lower limit resolution acquisition unit, the maximum continuous shooting speed is acquired.
The imaging device according to claim 11 or 12,
前記動画用のデータに基づいて生成される画像の解像度が、前記下限解像度以上であるという制約下において最大の連写速度を、前記最大連写速度として取得する、
ことを特徴とする請求項１３に記載の撮像装置。 The maximum continuous shooting speed acquisition unit
Obtaining the maximum continuous shooting speed as the maximum continuous shooting speed under the constraint that the resolution of the image generated based on the moving image data is equal to or higher than the lower limit resolution;
The imaging apparatus according to claim 13.
をさらに備え、
前記信号読出シーケンス制御部は、
前記輝度検出部が検出した前記被写体の輝度が所定の輝度の閾値よりも大きい場合に、現在の前記第１の読出シーケンスにおける前記最大連写速度から、連写速度を順次下げていくように、実行する前記第１の読出シーケンス内の前記画素信号読出シーケンスの設定を制御する、
ことを特徴とする請求項５に記載の撮像装置。 A maximum continuous shooting speed acquisition unit that acquires a maximum continuous shooting speed as a maximum continuous shooting speed among the continuous shooting speeds that can be the target;
Further comprising
The signal readout sequence controller is
When the brightness of the subject detected by the brightness detection unit is greater than a predetermined brightness threshold, the continuous shooting speed is sequentially decreased from the maximum continuous shooting speed in the current first reading sequence. Controlling the setting of the pixel signal readout sequence in the first readout sequence to be executed;
The imaging apparatus according to claim 5.
をさらに備え、
前記信号読出シーケンス制御部は、
前記移動速度検出部が検出した前記被写体の移動速度が所定の速度の閾値よりも大きい場合に、現在の前記第１の読出シーケンスにおける前記最大連写速度から、連写速度を順次下げていくように、実行する前記第１の読出シーケンス内の前記画素信号読出シーケンスの設定を制御する、
ことを特徴とする請求項８に記載の撮像装置。 A maximum continuous shooting speed acquisition unit that acquires a maximum continuous shooting speed as a maximum continuous shooting speed among the continuous shooting speeds that can be the target;
Further comprising
The signal readout sequence controller is
When the moving speed of the subject detected by the moving speed detector is greater than a predetermined speed threshold, the continuous shooting speed is sequentially decreased from the maximum continuous shooting speed in the current first reading sequence. The setting of the pixel signal readout sequence in the first readout sequence to be executed,
The imaging apparatus according to claim 8.
前記目標となりうる連写速度で実行される、前記第１の読出シーケンスによる連写における連写速度の是非に関する入力指示を受け付ける入力受付部と、
をさらに備え、
前記信号読出シーケンス制御部は、
前記入力受付部が受け付けた前記入力指示が非であることを示している間、該第１の読出シーケンスにおける連写速度を、前記最大連写速度から順次下げていくように該第１の読出シーケンス内の前記画素信号読出シーケンスの設定を制御する、
ことを特徴とする請求項４に記載の撮像装置。 A maximum continuous shooting speed acquisition unit that acquires a maximum continuous shooting speed as a maximum continuous shooting speed among the continuous shooting speeds that can be the target;
An input receiving unit that receives an input instruction regarding the right or wrong of the continuous shooting speed in the continuous shooting by the first readout sequence, which is executed at the continuous shooting speed that can be the target;
Further comprising
The signal readout sequence controller is
While indicating that the input instruction received by the input receiving unit is not, the first reading so that the continuous shooting speed in the first reading sequence is sequentially decreased from the maximum continuous shooting speed. Controlling the setting of the pixel signal readout sequence in the sequence;
The imaging apparatus according to claim 4.
をさらに備える、
ことを特徴とする請求項１７に記載の撮像装置。 An output unit for outputting information for requesting input of the input instruction;
Further comprising
The imaging apparatus according to claim 17.
静止画用のデータを取得するために前記複数の画素の露光を行うとき、
全ての前記画素の露光開始タイミングと露光期間とを同一とするように制御する、
ことを特徴とする請求項１に記載の撮像装置。 The read control unit
When performing exposure of the plurality of pixels to obtain data for a still image,
Controlling the exposure start timing and exposure period of all the pixels to be the same,
The imaging apparatus according to claim 1.
をさらに備える、
ことを特徴とする請求項１に記載の撮像装置。 An output unit that outputs information on the controlled pixel signal readout sequence when the setting of one or more of the pixel signal readout sequences in the first readout sequence is controlled by the signal readout sequence control unit;
Further comprising
The imaging apparatus according to claim 1.
静止画用および動画用の前記画素信号の読み出しに係わる画素信号読出シーケンスを含み、かつ、連写を行いながら動画表示を行うことを目的とした第１の読出シーケンスを、少なくとも設定可能な読出シーケンス設定部と、
被写体の輝度を検出する輝度検出部と、
前記輝度検出部が検出した前記被写体の輝度に基づいて、前記第１の読出シーケンス内の一つ以上の前記画素信号読出シーケンスの設定を制御する信号読出シーケンス制御部と、
を備えることを特徴とする撮像装置。 A readout control unit that controls readout of pixel signals from a plurality of pixels arranged on the image sensor;
A readout sequence that includes a pixel signal readout sequence related to readout of the pixel signals for still images and moving images, and that can set at least a first readout sequence for displaying moving images while performing continuous shooting A setting section;
A luminance detector for detecting the luminance of the subject;
A signal readout sequence control unit that controls setting of one or more of the pixel signal readout sequences in the first readout sequence based on the luminance of the subject detected by the luminance detection unit;
An imaging apparatus comprising:
静止画用および動画用の前記画素信号の読み出しに係わる画素信号読出シーケンスを含み、かつ、連写を行いながら動画表示を行うことを目的とした第１の読出シーケンスを、少なくとも設定可能な読出シーケンス設定部と、
被写体が移動する速度を検出する移動速度検出部と、
前記移動速度検出部が検出した前記被写体の移動速度に基づいて、前記第１の読出シーケンス内の一つ以上の前記画素信号読出シーケンスの設定を制御する信号読出シーケンス制御部と、
を備えることを特徴とする撮像装置。 A readout control unit that controls readout of pixel signals from a plurality of pixels arranged on the image sensor;
A readout sequence that includes a pixel signal readout sequence related to readout of the pixel signals for still images and moving images, and that can set at least a first readout sequence for displaying moving images while performing continuous shooting A setting section;
A moving speed detector for detecting the moving speed of the subject;
A signal readout sequence controller that controls the setting of one or more of the pixel signal readout sequences in the first readout sequence based on the movement speed of the subject detected by the movement speed detector;
An imaging apparatus comprising:
静止画用および動画用の前記画素信号の読み出しに係わる画素信号読出シーケンスを含み、かつ、連写を行いながら動画表示を行うことを目的とした第１の読出シーケンスを、少なくとも設定可能な読出シーケンス設定ステップと、
前記読み出された画素信号に基づいて、前記第１の読出シーケンス内の一つ以上の前記画素信号読出シーケンスの設定を制御する信号読出シーケンス制御ステップと、
を含むことを特徴とする撮像制御方法。 A readout control step for controlling readout of pixel signals from a plurality of pixels arranged on the image sensor;
A readout sequence that includes a pixel signal readout sequence related to readout of the pixel signals for still images and moving images, and that can set at least a first readout sequence for displaying moving images while performing continuous shooting Configuration steps;
A signal readout sequence control step for controlling the setting of one or more of the pixel signal readout sequences in the first readout sequence based on the readout pixel signals;
An imaging control method comprising:
静止画用および動画用の前記画素信号の読み出しに係わる画素信号読出シーケンスを含み、かつ、連写を行いながら動画表示を行うことを目的とした第１の読出シーケンスを、少なくとも設定可能な読出シーケンス設定ステップと、
前記読み出された画素信号に基づいて、前記第１の読出シーケンス内の一つ以上の前記画素信号読出シーケンスの設定を制御する信号読出シーケンス制御ステップと、
をコンピュータに実行させることを特徴とするプログラム。 A readout control step for controlling readout of pixel signals from a plurality of pixels arranged on the image sensor;
A readout sequence that includes a pixel signal readout sequence related to readout of the pixel signals for still images and moving images, and that can set at least a first readout sequence for displaying moving images while performing continuous shooting Configuration steps;
A signal readout sequence control step for controlling the setting of one or more of the pixel signal readout sequences in the first readout sequence based on the readout pixel signals;
A program that causes a computer to execute.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010158919A JP2012023497A (en) | 2010-07-13 | 2010-07-13 | Imaging device, imaging control method, and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010158919A JP2012023497A (en) | 2010-07-13 | 2010-07-13 | Imaging device, imaging control method, and program |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2012023497A true JP2012023497A (en) | 2012-02-02 |
Family
ID=45777401
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2010158919A Pending JP2012023497A (en) | 2010-07-13 | 2010-07-13 | Imaging device, imaging control method, and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2012023497A (en) |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015142327A (en) * | 2014-01-30 | 2015-08-03 | カシオ計算機株式会社 | Image processing apparatus, image processing method and program |
| JP2016052133A (en) * | 2015-09-18 | 2016-04-11 | 株式会社ニコン | Imaging apparatus |
| JP2016052132A (en) * | 2015-09-18 | 2016-04-11 | 株式会社ニコン | Imaging apparatus |
| JP2016052131A (en) * | 2015-09-18 | 2016-04-11 | 株式会社ニコン | Imaging apparatus |
| JP2016052134A (en) * | 2015-09-18 | 2016-04-11 | 株式会社ニコン | Imaging apparatus |
| JP2019009783A (en) * | 2018-07-11 | 2019-01-17 | 株式会社ニコン | Imaging apparatus |
| US10279742B2 (en) | 2014-05-29 | 2019-05-07 | Nikon Corporation | Image capture device and vehicle |
| JP2020120219A (en) * | 2019-01-22 | 2020-08-06 | キヤノン株式会社 | Imaging apparatus, control method for imaging apparatus and program |
| WO2022181087A1 (en) * | 2021-02-25 | 2022-09-01 | ソニーグループ株式会社 | Image processing device and method, and program |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003153090A (en) * | 2001-11-16 | 2003-05-23 | Minolta Co Ltd | X-y scanning image pickup element and imaging device equipped with the same |
| JP2003244529A (en) * | 2002-02-20 | 2003-08-29 | Minolta Co Ltd | Digital camera |
| JP2006287666A (en) * | 2005-04-01 | 2006-10-19 | Casio Comput Co Ltd | Image pickup device |
-
2010
- 2010-07-13 JP JP2010158919A patent/JP2012023497A/en active Pending
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003153090A (en) * | 2001-11-16 | 2003-05-23 | Minolta Co Ltd | X-y scanning image pickup element and imaging device equipped with the same |
| JP2003244529A (en) * | 2002-02-20 | 2003-08-29 | Minolta Co Ltd | Digital camera |
| JP2006287666A (en) * | 2005-04-01 | 2006-10-19 | Casio Comput Co Ltd | Image pickup device |
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104822015A (en) * | 2014-01-30 | 2015-08-05 | 卡西欧计算机株式会社 | Image processing apparatus and image processing method |
| JP2015142327A (en) * | 2014-01-30 | 2015-08-03 | カシオ計算機株式会社 | Image processing apparatus, image processing method and program |
| US9456138B2 (en) | 2014-01-30 | 2016-09-27 | Casio Computer Co., Ltd. | Image processing apparatus, image processing method and computer readable recording medium having program for generating time-lapse moving image |
| US10279742B2 (en) | 2014-05-29 | 2019-05-07 | Nikon Corporation | Image capture device and vehicle |
| US11572016B2 (en) | 2014-05-29 | 2023-02-07 | Nikon Corporation | Image capture device and vehicle |
| US11220215B2 (en) | 2014-05-29 | 2022-01-11 | Nikon Corporation | Image capture device and vehicle |
| US10807532B2 (en) | 2014-05-29 | 2020-10-20 | Nikon Corporation | Image capture device and vehicle |
| JP2016052132A (en) * | 2015-09-18 | 2016-04-11 | 株式会社ニコン | Imaging apparatus |
| JP2016052134A (en) * | 2015-09-18 | 2016-04-11 | 株式会社ニコン | Imaging apparatus |
| JP2016052131A (en) * | 2015-09-18 | 2016-04-11 | 株式会社ニコン | Imaging apparatus |
| JP2016052133A (en) * | 2015-09-18 | 2016-04-11 | 株式会社ニコン | Imaging apparatus |
| JP2019009783A (en) * | 2018-07-11 | 2019-01-17 | 株式会社ニコン | Imaging apparatus |
| JP2020120219A (en) * | 2019-01-22 | 2020-08-06 | キヤノン株式会社 | Imaging apparatus, control method for imaging apparatus and program |
| WO2022181087A1 (en) * | 2021-02-25 | 2022-09-01 | ソニーグループ株式会社 | Image processing device and method, and program |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2012023497A (en) | Imaging device, imaging control method, and program | |
| JP5226552B2 (en) | Imaging device | |
| JP6476065B2 (en) | IMAGING DEVICE AND IMAGING DEVICE CONTROL METHOD | |
| JP5317591B2 (en) | Imaging device | |
| US8218065B2 (en) | Imaging device | |
| US9398230B2 (en) | Imaging device and imaging method | |
| US8396333B2 (en) | Image pickup apparatus, solid-state imaging device, and image generating method | |
| CN109474781B (en) | Image pickup apparatus, control method for image pickup apparatus, and recording medium | |
| JP5484617B2 (en) | Imaging device | |
| JP2009103997A (en) | Image pickup device | |
| JP5631643B2 (en) | Read control device, read control method, imaging device, solid-state imaging device, and program | |
| JP5657184B2 (en) | Imaging apparatus and signal processing method | |
| JP5279638B2 (en) | Imaging device | |
| US8531537B2 (en) | Imaging apparatus for processing still picture signals and live view signals output from an image sensor | |
| JP2012004819A (en) | Reading control device, reading control method, imaging device, solid state imaging device, and program | |
| JP5530262B2 (en) | Camera shake correction control apparatus, camera shake correction control method, imaging apparatus, and program | |
| JP5452269B2 (en) | Imaging device | |
| JP5530279B2 (en) | Imaging apparatus, imaging control method, and program | |
| JP5235701B2 (en) | Imaging device | |
| JP2008187614A (en) | Photographing apparatus | |
| JP2011182321A (en) | Solid-state imaging apparatus, driving method and imaging apparatus | |
| JP2008072501A (en) | Imaging apparatus, imaging method, program, and recording medium | |
| US20150085172A1 (en) | Image capturing apparatus and control method thereof | |
| JP5127510B2 (en) | IMAGING DEVICE AND IMAGING DEVICE CONTROL METHOD | |
| JP5624804B2 (en) | Read control device, read control method, program, imaging device, and solid-state imaging device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130524 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140109 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140121 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140317 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20140318 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140520 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20140930 |