JP2015119205A - Imaging device, control method, and program - Google Patents
Imaging device, control method, and program Download PDFInfo
- Publication number
- JP2015119205A JP2015119205A JP2013259304A JP2013259304A JP2015119205A JP 2015119205 A JP2015119205 A JP 2015119205A JP 2013259304 A JP2013259304 A JP 2013259304A JP 2013259304 A JP2013259304 A JP 2013259304A JP 2015119205 A JP2015119205 A JP 2015119205A
- Authority
- JP
- Japan
- Prior art keywords
- reading
- changed
- subject
- image
- image data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Studio Devices (AREA)
Abstract
Description
本発明は、電子ビューファンダ機能を有する例えばデジタルスチルカメラやデジタルビデオカメラ等の撮像装置に関する。 The present invention relates to an imaging apparatus having an electronic view funder function, such as a digital still camera or a digital video camera.
デジタルスチルカメラ等の撮像装置では、静止画の撮影前に被写体の画像（動画）を装置本体の画像表示部に表示する電子ビューファンダ機能（ＥＶＦ機能）を有するものがある。電子ビューファンダ機能の一般的な動作として、ユーザが撮像画像のレイアウトを画像表示部で確認し、レリーズボタンを全押しする等して静止画撮影を指示すると、オートフォーカス機能により焦点位置が調整された後、静止画が撮像され、記録される。 Some imaging apparatuses such as a digital still camera have an electronic view funder function (EVF function) that displays an image (moving image) of a subject on an image display unit of the apparatus main body before shooting a still image. As a general operation of the electronic view funder function, when the user confirms the layout of the captured image on the image display unit and instructs to take a still image by pressing the release button fully, the focus position is adjusted by the autofocus function. After that, a still image is captured and recorded.
このような処理において、画像表示部に表示される動画像は、確認用であるので、フレームレートは、処理の負荷を低減させるために、例えば３０ｆｐｓのような比較的低いレートが望ましい。これに対し、オートフォーカス処理を実行する際には、ユーザの指示から静止画撮影が行われるまでの応答性を向上させるため、より高速に焦点位置を決定する必要があることから、フレームレートは、例えば２４０ｆｐｓのようなより高いレートが望ましい。 In such processing, since the moving image displayed on the image display unit is for confirmation, the frame rate is preferably a relatively low rate such as 30 fps in order to reduce the processing load. On the other hand, when performing autofocus processing, it is necessary to determine the focal position at a higher speed in order to improve responsiveness from the user's instruction until still image shooting is performed. Higher rates such as 240 fps are desirable.
そこで、一般的には、静止画の撮影前に被写体の動画像を低フレームレートで画像表示部に表示し、ユーザ操作により静止画の撮影指示がされると、フレームレートを高レートに切り替えてオートフォーカス処理が実行される。しかし、この場合、フレームレートを切り替える際に、不要な待機時間が生じ、操作性が低下するおそれがある。 Therefore, generally, a moving image of a subject is displayed on the image display unit at a low frame rate before shooting a still image, and when a still image shooting instruction is given by a user operation, the frame rate is switched to a high rate. Autofocus processing is executed. However, in this case, when switching the frame rate, an unnecessary waiting time is generated, and the operability may be reduced.
このような不要な待機時間を短縮する方法として、撮像素子に対して複数のフレームレートで同時に画像を読み出すことにより、ユーザ操作による撮影指示から静止画撮影が開始されるまでの操作性を向上させる技術が提案されている（特許文献１）。 As a method for shortening such an unnecessary standby time, the operability from the shooting instruction by the user operation to the start of still image shooting is improved by simultaneously reading out images at a plurality of frame rates with respect to the image sensor. Technology has been proposed (Patent Document 1).
また、撮像部における撮像を一時的に停止、再開するための、一時停止信号、再開信号を出力する操作部と、一時停止信号および再開信号に基づいて、撮像部における撮像を制御する制御部とを備える撮像装置が提案されている（特許文献２）。この提案では、ユーザ操作により撮像部による撮像を一時停止させることで、不要な被写体画像を記録することなく撮影を行うことができる。 In addition, an operation unit that outputs a pause signal and a restart signal for temporarily stopping and restarting imaging in the imaging unit, and a control unit that controls imaging in the imaging unit based on the pause signal and the restart signal Has been proposed (Patent Document 2). In this proposal, it is possible to take an image without recording an unnecessary subject image by temporarily stopping the imaging by the imaging unit by a user operation.
しかし、上記特許文献１では、静止画の撮影前に被写体画像を画像表示部に表示している間は、常に複数のフレームレートで同時に画像を読み出すことになり、消費電力を増大させてしまう。また、レリーズボタンの押下操作で複数のフレームレートで同時に画像を読み出すようにすると、撮像素子の制御の切り替えに不要な待機時間が発生し、その間のタイムラグがカメラの操作性を低下させてしまう。 However, in Patent Document 1, while the subject image is displayed on the image display unit before the still image is captured, the images are always read out simultaneously at a plurality of frame rates, which increases power consumption. If images are read simultaneously at a plurality of frame rates by pressing the release button, a standby time unnecessary for switching the image sensor control occurs, and the time lag between them decreases the operability of the camera.
一方、上記特許文献２では、ユーザ操作による指示で撮像部における撮像の一時停止、再開を行うため、一時停止期間の必要な被写体情報を取得することができない。 On the other hand, in Japanese Patent Application Laid-Open No. H10-228867, since the imaging unit temporarily stops and restarts according to an instruction by a user operation, it is impossible to acquire subject information that requires a pause period.
そこで、本発明は、第２の読み出し手段による読み出しの開始条件と終了条件とを設定することで、撮像素子による撮像を一時停止させることなく、撮像装置の操作性を向上させるとともに、省電力化を図る仕組みを提供することを目的とする。 Therefore, the present invention improves the operability of the image pickup apparatus and saves power without temporarily stopping the image pickup by the image pickup element by setting the read start condition and the end condition by the second read means. The purpose is to provide a mechanism to achieve this.
上記目的を達成するために、本発明の撮像装置は、撮影前に被写体の画像を画像表示部に表示する電子ビューファンダ機能を有する撮像装置であって、撮像素子から読み出し行を間引いて前記画像表示部に表示するための画像データを取得して出力する第１の読み出し手段と、前記撮像素子の前記第１の読み出し手段と重複しない読み出し行から前記第１の読み出し手段より高速で画像データを取得して前記第１の読み出し手段と同時に出力する第２の読み出し手段と、前記第１の読み出し手段により取得した画像データから被写体の状態が変化したかを判断する判断手段と、前記判断手段が前記第１の読み出し手段により取得した画像データの前記被写体の状態が変化したと判断した場合、及びユーザ操作により撮影モードが他の撮影モードに変更された場合の少なくとも一つの場合を前記第２の読み出し手段による読み出し開始条件として、前記読み出し開始条件を満たしたときに、前記第２の読み出し手段による読み出しを開始し、前記読み出し開始条件に応じて予め定めた読み出し終了条件を満たしたときに、前記第２の読み出し手段による読み出しを終了するように制御する制御手段と、を備えることを特徴とする。 In order to achieve the above object, an image pickup apparatus according to the present invention is an image pickup apparatus having an electronic view funda function for displaying an image of a subject on an image display unit before shooting. First reading means for acquiring and outputting image data to be displayed on the display unit, and image data from the reading line that does not overlap with the first reading means of the image sensor at a higher speed than the first reading means. A second reading unit that acquires and outputs simultaneously with the first reading unit; a determination unit that determines whether the state of the subject has changed from the image data acquired by the first reading unit; and the determination unit When it is determined that the state of the subject in the image data acquired by the first reading unit has changed, and the shooting mode is set to another shooting mode by a user operation. When the read start condition is satisfied, the read by the second read unit is started when the read start condition is satisfied, and the read start condition is set as the read start condition. And a control unit that controls to end reading by the second reading unit when a predetermined reading end condition is satisfied.
本発明によれば、第２の読み出し手段による読み出しの開始条件と終了条件とを設定することで、撮像素子による撮像を一時停止させることなく、撮像装置の操作性を向上させることができるとともに、省電力化を図ることができる。 According to the present invention, it is possible to improve the operability of the image pickup apparatus without temporarily stopping the image pickup by the image pickup device by setting the start condition and the end condition of the read by the second reading unit. Power saving can be achieved.
以下、本発明の実施形態の一例を図面を参照して説明する。 Hereinafter, an example of an embodiment of the present invention will be described with reference to the drawings.
図１は、本発明の撮像装置の実施形態の一例であるデジタルスチルカメラの概略ブロック図である。 FIG. 1 is a schematic block diagram of a digital still camera which is an example of an embodiment of an imaging apparatus of the present invention.
本実施形態のデジタルスチルカメラ１００は、図１に示すように、撮影レンズ１０、絞り機能を備える機械式のシャッタ１２、光学像を電気信号に変換する撮像素子１４、及び撮像素子１４のアナログ信号出力をデジタル信号に変換するＡ／Ｄ変換器１６等を有する。タイミング発生回路１８は、メモリ制御回路２２及びシステム制御回路５０により制御され、撮像素子１４、 及びＡ／Ｄ変換器１６にクロック信号や制御信号を供給する。なお、シャッタ１２以外にも、撮像素子１４のリセットタイミングの制御によって、電子シャッタとして、電荷の蓄積時間を制御することができ、動画撮影などに使用可能である。
As shown in FIG. 1, a
画像処理回路２０は、 Ａ／Ｄ変換器１６からのデータ或いはメモリ制御回路２２からのデータに対して所定の画素補間処理や色変換処理を行う。また、画像処理回路２０によって、画像の切り出しや変倍処理を行うことで電子ズーム機能が実現される。さらに、画像処理回路２０では、画像データの画像識別や、前フレーム画像との変化量を検出する処理も行っている。
The
また、画像処理回路２０では、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてシステム制御回路５０が露光制御部４０、フォーカス制御部４２に対して制御を行う、ＴＴＬ方式のＡＦ処理、ＡＥ処理、ＥＦ処理を行う。更に、画像処理回路２０では、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてＴＴＬ方式のＡＷＢ（オートホワイトバランス）処理も行う。
The
メモリ制御回路２２は、Ａ／Ｄ変換器１６、タイミング発生回路１８、画像処理回路２０、メモリ３０、及び圧縮・伸長回路３２を制御する。Ａ／Ｄ変換器１６のデータが画像処理回路２０、及びメモリ制御回路２２を介して、或いは直接メモリ制御回路２２を介してメモリ３０に書き込まれる。メモリ３０には、撮影した静止画像データや動画像データが格納される。また、メモリ３０は、システム制御回路５０の作業領域としても使用することが可能である。
The
画像表示部２８は、ＴＦＴやＬＣＤ等で構成される。メモリ３０に書き込まれた表示用の画像データは、メモリ制御回路２２を介して画像表示部２８により表示される。画像表示部２８に撮像した画像データを逐次表示すれば、静止画の撮影前に被写体の画像を画像表示部２８に表示する電子ビューファンダ機能を実現することが可能である。
The
システム制御回路５０は、デジタルスチルカメラ１００全体の制御を司る。システム制御回路５０が実行するプログラムコードは、フラッシュロム等の不揮発性メモリ３１に書き込まれて、逐次読み出される。また、不揮発性メモリ３１には、システム情報を記憶する領域や、ユーザ設定情報を記憶する領域が設けられ、各種情報や設定が次回起動時に読み出される。
The
圧縮・伸長回路３２は、適応離散コサイン変換（ＡＤＣＴ）等により画像データを圧縮伸長する回路であり、メモリ３０に格納された画像を読み込んで圧縮処理或いは伸長処理を行い、処理を終えたデータをメモリ３０に書き込む。
The compression /
露光制御部４０は、シャッタ１２を制御し、また、ストロボ４８と連動することによりストロボ調光機能も有する。フォーカス制御部４２は、撮影レンズ１０のフォーカシングを制御し、ズーム制御部４４は、撮影レンズ１０のズーミングを制御する。ストロボ４８は、ストロボ調光機能の他に、ＡＦ補助光の投光機能も有する。露光制御部４０及びフォーカス制御部４２は、ＴＴＬ方式を用いて制御され，撮像した画像データを画像処理回路２０によって演算した演算結果に基づき、システム制御回路５０が露光制御部４０及びフォーカス制御部４２に対して制御を行う。
The
モードダイアル６０は、電源オフ、自動撮影モード、撮影モード、パノラマ撮影モード、動画撮影モード、再生モード、ＰＣ接続モード等の各機能モードを切り替え設定する。 The mode dial 60 switches and sets various function modes such as power-off, automatic shooting mode, shooting mode, panoramic shooting mode, moving image shooting mode, playback mode, and PC connection mode.
シャッタスイッチ（ＳＷ１）６２は、シャッタボタンの操作途中でオンとなり、ＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＡＷＢ（オートホワイトバランス）処理等の動作開始を指示する。 The shutter switch (SW1) 62 is turned on during the operation of the shutter button, and instructs to start operations such as AF (autofocus) processing, AE (automatic exposure) processing, and AWB (auto white balance) processing.
シャッタスイッチ（ＳＷ２）６４は、シャッタボタンの操作完了でオンとなり、システム制御回路５０は、ストロボ撮影の場合、ＥＦ（調光）処理を行った後に、ＡＥ処理で決定された露光時間分、撮像素子１４を露光させる。そして、システム制御回路５０は、この露光期間中にストロボ４８を発光させて、露光期間終了と同時に露光制御部４０により遮光することで、撮像素子１４への露光を終了させる。
The shutter switch (SW2) 64 is turned on upon completion of the operation of the shutter button, and in the case of flash photography, the
また、シャッタスイッチ（ＳＷ２）６４がオンされると、システム制御回路５０は、撮像素子１４から読み出した信号をＡ／Ｄ変換器１６、及びメモリ制御回路２２を介してメモリ３０に画像データを書き込む読み出し処理を行う。
When the shutter switch (SW2) 64 is turned on, the
更に、シャッタスイッチ（ＳＷ２）６４がオンされると、システム制御回路５０は、画像処理回路２０やメモリ制御回路２２での演算による現像処理やメモリ３０から画像データを読み出して圧縮・伸長回路３２で圧縮する処理を行う。更に、シャッタスイッチ（ＳＷ２）６４がオンされると、システム制御回路５０は、記録媒体２００に画像データを書き込む記録処理を行う。
Further, when the shutter switch (SW2) 64 is turned on, the
表示切替スイッチ６６は、画像表示部２８の表示を切替える。この機能により、光学ファインダ１０４を用いて撮影を行う際に、画像表示部２８への電流供給を遮断することにより、省電力を図ることが可能となる。
The
操作部７０は、各種ボタン、タッチパネルや回転式ダイアル等から構成され、例えばメニューボタン、セットボタン、マクロボタン、マルチ画面再生改ページボタン、ストロボ設定ボタン、動画記録スイッチ、単写／連写／セルフタイマー切り替えボタン等がある。また、操作部７０には、電源スイッチ、サブメニュー移動＋（プラス）ボタン、メニュー移動−（マイナス）ボタン、再生画像移動＋（プラス）ボタン、再生画像移動−（マイナス）ボタン、撮影画質選択ボタン、露出補正ボタン、日付／時間設定ボタン等もある。 The operation unit 70 includes various buttons, a touch panel, a rotary dial, and the like. For example, a menu button, a set button, a macro button, a multi-screen playback page break button, a strobe setting button, a movie recording switch, single shooting / continuous shooting / self. There are timer switching buttons. Further, the operation unit 70 includes a power switch, submenu movement + (plus) button, menu movement-(minus) button, reproduction image movement + (plus) button, reproduction image movement-(minus) button, and shooting image quality selection button. There are also an exposure compensation button, a date / time setting button, and the like.
ズームスイッチ７２は、ユーザが撮像画像の倍率の変更指示を行うためのスイッチである。ズームスイッチ７２は、撮像画角を望遠側に変更させるテレスイッチと、広角側に変更させるワイドスイッチとを有する。ズームスイッチ７２は、ズーム制御部４４に撮影レンズ１０の撮像画角の変更を指示し、光学ズーム操作を行うトリガとなる。また、ズームスイッチ７２は、画像処理回路２０による画像の切り出しや、画素補間処理などによる撮像画角の電子的なズーミング変更のトリガともなる。
The
電源部８６は、アルカリ電池の一次電池やＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉイオン電池等の二次電池、ＡＣアダプタ等から構成される。Ｉ／Ｆ９０は、記録媒体２００とのインタフェースであり、コネクタ９２には、記録媒体２００が接続される。記録媒体２００は、メモリカードやハードディスク等で構成され、半導体メモリや磁気ディスク等の記録部２０２、デジタルスチルカメラ１００とのＩ／Ｆ（インタフェース）２０４、コネクタ９２に接続されるコネクタ２０６を備える。
The
光学ファインダ１０４は、画像表示部２８による電子ファインダ機能を使用することなく、撮影を行うことを可能にする。通信部１１０は、ＵＳＢ、ＩＥＥＥ１３９４、ＬＡＮ、無線通信等の各種通信機能を有する。コネクタ／アンテナ１１２は、通信部１１０によりデジタルスチルカメラ１００を他の機器と接続する際に用いるコネクタ、或いは無線通信の場合はアンテナである。
The
図２は、デジタルスチルカメラ１００の動作例を示すフローチャート図である。図２に示す処理は、システム制御回路５０のＣＰＵ等が不揮発性メモリ３１に格納されたプログラムをメモリ３０に展開して実行することにより実現される。
FIG. 2 is a flowchart illustrating an operation example of the digital
ステップＳ１０１では、システム制御回路５０は、電池交換等の電源投入によりフラグや制御変数等を初期化し、ステップＳ１０２に進む。
In step S101, the
ステップＳ１０２では、システム制御回路５０は、モードダイアル６０の設定位置を判断する。そして、システム制御回路５０は、モードダイアル６０が撮影モードに設定されている場合は、ステップＳ１０４に進み、モードダイアル６０が他のモード（再生等）に設定されている場合は、ステップＳ１０３に進む。
In step S102, the
ステップＳ１０３では、システム制御回路５０は、設定されたモードに応じた処理を実行し、処理終了後にステップＳ１０２に戻る。
In step S103, the
ステップＳ１０４では、システム制御回路５０は、撮像素子１４を起動させ、ステップＳ１０５に進む。撮像素子１４を起動させる場合、複数のフレームレート（取得速度）の読み出しモードで撮像素子１４を動作させる。この場合、静止画の撮影前に被写体の動画像を画像表示部２８に表示（以下、ＥＶＦ表示という。）する際のフレームレート読み出しを３０ｆｐｓとし、ＡＦ処理、ＡＥ処理及びＡＷＢ処理などに使用するフレームレート読み出しを２４０ｆｐｓとする。
In step S104, the
以下の説明では、３０ｆｐｓのレートでのフレーム読み出しをメインストリームとし、メインストリームより高速な２４０ｆｐｓのレートでのフレーム読み出しをサブストリームとする。 In the following description, it is assumed that frame reading at a rate of 30 fps is a main stream, and frame reading at a rate of 240 fps faster than the main stream is a substream.
ここで、メインストリームは、本発明の撮像素子から読み出し行を間引いて画像データを取得して出力する第１の読み出し手段の一例に相当する。また、サブストリームは、本発明の撮像素子の第１の読み出し手段と重複しない読み出し行から第１の読み出し手段より高速で画像データを取得して第１の読み出し手段と同時に出力する第２の読み出し手段の一例に相当する。 Here, the main stream corresponds to an example of a first readout unit that acquires and outputs image data by thinning out readout rows from the image sensor of the present invention. The sub-stream obtains image data at a higher speed than the first readout means from the readout row that does not overlap with the first readout means of the image sensor of the present invention, and outputs the second stream simultaneously with the first readout means. It corresponds to an example of means.
ステップＳ１０５では、システム制御回路５０は、メインストリームで読み出された画像データを画像表示部２８に逐次表示するＥＶＦ表示状態に設定し、ステップＳ１０６に進む。
In step S105, the
ステップＳ１０６では、システム制御回路５０は、操作部７０の電源スイッチがオフ操作されたかを判断し、電源スイッチがオフ操作されると、ステップＳ１０７に進み、オフ操作されない場合は、ステップＳ１０５に戻ってＥＶＦ表示状態を継続する。
In step S106, the
ステップＳ１０７では、システム制御回路５０は、カメラ動作を停止してステップＳ１０５のＥＶＦ表示状態を停止し、処理を終了する。
In step S107, the
図３は、メインストリームで読み出された画像データをＥＶＦ表示中において、撮像素子１４のサブストリームの読み出しの開始と読み出し終了とを制御する条件を示す図である。ここで、図３におけるサブストリームの読み出し終了条件は、条件Ａ乃至Ｅの読み出し開始条件に応じてそれぞれの目的を達成するために予め定められた条件である。
FIG. 3 is a diagram illustrating conditions for controlling the start and end of reading of substreams of the
図３の条件Ａは、ＥＶＦ表示中に、主被写体の状態に変化があった場合である。システム制御回路５０は、画像処理回路２０によって、主被写体の位置を判断し、主被写体を見失った場合、主被写体が画像表示部２８の表示画面の４隅に移動した場合、それぞれサブストリームの読み出しを開始する。また、主被写体が、ユーザの手動操作や所定のアルゴリズムに従って自動的に表示画面内の任意の位置に設定されるフレーム枠に近づいた場合も、サブストリームの読み出しを開始する。
Condition A in FIG. 3 is a case where the state of the main subject is changed during EVF display. The
その後、システム制御回路５０は、画像処理回路２０によって主被写体の検出を行い、主被写体に対して、ＡＦ処理、ＡＥ処理、ＡＷＢ処理を実施し、ＡＦ処理、ＡＥ処理、ＡＷＢ処理が終了した場合に、サブストリームの読み出しを終了する。また、システム制御回路５０は、画像処理回路２０によって主被写体を数フレームの間、検出できなかった場合には、サブストリームの読み出しを終了する。
Thereafter, the
図３の条件Ｂは、ＥＶＦ表示中に、顔検出結果に変化があった場合である。システム制御回路５０は、画像処理回路２０によって顔検出を行い、顔の数が増減した場合に、サブストリームの読み出しを開始する。
Condition B in FIG. 3 is when the face detection result is changed during EVF display. The
その後、システム制御回路５０は、画像処理回路２０によって主被写体の検出を行い、どの顔にＡＦ処理、ＡＥ処理、ＡＷＢ処理を実施すればいいかを高速に判断し、処理が終了した場合に、サブストリームの読み出しを終了する。
Thereafter, the
また、システム制御回路５０は、モードダイアル６０で撮影モードがスマイルシャッタモードに設定され、かつ画像処理回路２０によって顔を検出した場合には、サブストリームの読み出しを開始する。その後、システム制御回路５０は、画像処理回路２０によって顔が検出されなくなった場合、もしくはレリーズボタンの押下操作等で静止画撮影が完了した場合に、サブストリームの読み出しを終了する。なお、撮影モード、及び顔検出に関しては後述する。
In addition, when the shooting mode is set to the smile shutter mode by the
図３の条件Ｃは、ＥＶＦ表示中に、被写体のシーン判別に変化があった場合である。システム制御回路５０は、モードダイアル６０で撮影モードがシーン判別モードに設定され、画像処理回路２０によるシーン判別が変化した場合に、サブストリームの読み出しを開始する。また、システム制御回路５０は、画像処理回路２０によるＡＦ処理、ＡＥ処理、ＡＷＢ処理に急激な変化があった場合、サブストリームの読み出しを開始する。
Condition C in FIG. 3 is a case where there is a change in the scene determination of the subject during EVF display. The
その後、システム制御回路５０は、画像処理回路２０によってＡＦ処理、ＡＥ処理、ＡＷＢ処理を実施して、高速でシーンに合わせた画像処理を行い、ＡＦ処理、ＡＥ処理、ＡＷＢ処理が安定した場合に、サブストリームの読み出しを終了する。
Thereafter, the
図３の条件Ｄは、ＥＶＦ表示中に、被写体の動きが速い場合である。システム制御回路５０は、画像処理回路２０によって被写体の動作速度を判断し、動作速度が速い場合に、サブストリームの読み出しを開始する。
Condition D in FIG. 3 is a case where the subject moves quickly during EVF display. The
その後、システム制御回路５０は、画像処理回路２０によって、被写体に対してＡＦ処理、ＡＥ処理、ＡＷＢ処理を実施し、被写体の動作が停止した場合に、サブストリームの読み出しを終了する。
Thereafter, the
図３の条件Ｅは、ＥＶＦ表示中に、操作部７０、モードダイアル６０、ズームスイッチ７２のユーザ操作に変化があった場合である。システム制御回路５０は、モードダイアル６０で再生モードから撮影モードに変更された場合は、サブストリームの読み出しを開始する。その後、システム制御回路５０は、画像処理回路２０によってＡＦ処理、ＡＥ処理、ＡＷＢ処理を実施し、ＡＦ処理、ＡＥ処理、ＡＷＢ処理が安定した場合に、サブストリームの読み出しを終了する。
Condition E in FIG. 3 is a case where the user operation of the operation unit 70, the
また、システム制御回路５０は、モードダイアル６０で撮影モードを変更された場合、例えば、夕焼け撮影モードからポートレートモードに切り替えられた場合等は、サブストリームの読み出しを開始する。その後、システム制御回路５０は、画像処理回路２０によってＡＦ処理、ＡＥ処理、ＡＷＢ処理を実施し、ＡＦ処理、ＡＥ処理、ＡＷＢ処理が安定した場合に、サブストリームの読み出しを終了する。
In addition, when the shooting mode is changed by the
また、システム制御回路５０は、ズームスイッチ７２でズーム倍率が変化した場合、サブストリームの読み出しを開始する。その後、システム制御回路５０は、画像処理回路２０によってＡＦ処理、ＡＥ処理、ＡＷＢ処理を実施し、ＡＦ処理、ＡＥ処理、ＡＷＢ処理が安定した場合に、サブストリームの読み出しを終了する。
In addition, when the zoom magnification is changed by the
また、システム制御回路５０は、図３の条件Ａ乃至Ｅにおいて、メインストリームで画像処理回路２０により被写体が予め決められた閾値よりも低輝度と判断された場合は、サブストリームの読み出しを開始しないように撮像素子１４を制御する。これは、サブストリームは、フレームレートがメインストリームよりも高速であり各フレームの露光時間の上限が制限されるため、取得した画像データをＡＦ処理、ＡＥ処理、ＡＷＢ処理に利用できないことがあるからである。例えば、サブストリームのフレームレートが２４０ｆｐｓの場合、各フレームの露光時間は最長で１／２４０秒であり、低輝度の被写体に対して十分な露光時間を設定できず、取得した画像データが暗く主被写体の検出ができないことがあるからである。
In addition, the
図４は、図３の条件Ａ乃至Ｅに該当した場合の撮像素子１４の制御シーケンスを示すタイミングチャート図である。
FIG. 4 is a timing chart showing a control sequence of the
図４に示すように、ＥＶＦ表示中に、図３の条件Ａ乃至Ｅにおけるサブストリームの読み出し開始条件の少なくともいずれか一つを満たした場合、撮像素子１４のサブストリーム読み出しを開始する。その後、サブストリームの読み出し終了条件を満たしたならば、撮像素子１４のサブストリーム読み出しを終了する。
As shown in FIG. 4, during EVF display, when at least one of the substream reading start conditions in the conditions A to E in FIG. 3 is satisfied, substream reading of the
次に、撮影モードについて詳細に説明する。撮影モードとしては、オートモードやマニュアルモード、複数のシーン別撮影モード、スマイルシャッタモードがある。オートモードは、カメラの各種パラメータが計測された露出値に基づいて不揮発性メモリ３１に格納されたプログラムにより自動的に決定されるモードである。
Next, the shooting mode will be described in detail. Shooting modes include an auto mode, a manual mode, a plurality of scene-specific shooting modes, and a smile shutter mode. The auto mode is a mode that is automatically determined by a program stored in the
マニュアルモードは、カメラの各種パラメータをユーザが自由に変更可能なモードである。スマイルシャッタモードは、被写体の笑顔を検出し、笑顔が検出された場合に、自動的に静止画撮影を行うモードである。 The manual mode is a mode in which the user can freely change various parameters of the camera. The smile shutter mode is a mode in which a smiling face of a subject is detected and a still image is automatically taken when a smiling face is detected.
シーン別撮影モードとは、撮影シーン別にその撮影シーンに適したシャッタ速度や絞り値、ストロボ発光状態、感度設定、ホワイトバランス設定等を組み合わせることによって実現される撮影モードである。本実施形態のカメラ１００は、例えば、次の（１）乃至（５）のシーン別撮影モードを有する。なお、これらのシーン別撮影モードに限定されるものではない。
The scene-specific shooting mode is a shooting mode realized by combining a shutter speed and an aperture value, a flash emission state, a sensitivity setting, a white balance setting, and the like suitable for each shooting scene. The
（１）夜景撮影モード：人物にストロボ光を照射し、背景を遅いシャッタ速度で記録する、夜景シーンに特化したモード
（２）打ち上げ花火撮影モード：打ち上げ花火を最適な露出で鮮やかに撮影するためのモード
（３）夕焼け撮影モード：シルエットを強調し、赤を強調して撮影するモード
（４）ポートレート撮影モード：背景をぼかして人物を浮き立たせるようにして人物撮影に特化したモード
（５）スポーツ撮影モード：動きの速い被写体を撮影するのに特化した設定とする撮影モード
次に、画像処理回路２０による顔検出について詳細に説明する。画像処理回路２０は、顔検出対象の画像データに対して、水平及び垂直方向のバンドパスフィルタを行うことで、画像データからエッジ成分を検出する。
(1) Night scene shooting mode: A mode specialized for night scenes that shoots a person with strobe light and records the background at a slow shutter speed. (2) Fireworks shooting mode: For shooting fireworks vividly with optimal exposure. Mode (3) Sunset shooting mode: Mode that emphasizes silhouette and emphasizes red (4) Portrait shooting mode: Mode that specializes in portrait photography by blurring the background and making people stand out (5) Sports shooting mode: Shooting mode with special settings for shooting fast-moving subjects Next, face detection by the
画像処理回路２０は、検出されたエッジ成分に関してパターンマッチングを行い、目及び鼻、口、耳の候補群を抽出する。そして、画像処理回路２０は、抽出された目の候補群の中から、予め設定された条件（例えば２つの目の距離、傾き等）を満たすものを、目の対と判断し、目の対があるもののみ目の候補群として絞り込む。
The
また、画像処理回路２０は、絞り込まれた目の候補群とそれに対応する顔を形成する他のパーツ（鼻、口、耳）とを対応付け、また、予め設定した非顔条件フィルタを通すことで、顔を検出する。そして、画像処理回路２０は、顔の検出結果に応じて上記顔情報を出力し、処理を終了する。このとき、顔の数などの特徴量がメモリ３０に記憶される。
Further, the
このように、画像処理回路２０は、ＥＶＦ表示あるいは再生表示される画像データを画像解析し、画像データの特徴量を抽出して被写体情報を検出することが可能である。本実施形態では、被写体情報として、顔情報を例示したが、被写体情報には、他にも赤目判定や目の検出、目つむり検出、笑顔検出等の様々な情報がある。
As described above, the
なお、顔ＡＦと同時に、顔ＡＥ、顔ＷＢなどを行うことができる。顔ＡＥとは、検出された顔の明るさに合わせて、露出を制御することである。顔ＷＢとは、検出された顔の色に合わせて画面全体のホワイトバランスを制御することである。 Note that the face AE, the face WB, and the like can be performed simultaneously with the face AF. The face AE is to control exposure according to the detected brightness of the face. The face WB is to control the white balance of the entire screen in accordance with the detected face color.
以上説明したように、本実施形態では、サブストリームの読み出しの開始条件と終了条件とを設定することで、撮像素子１４による撮像を一時停止させることなく、カメラ１００の操作性を向上させることができるとともに、省電力化を図ることができる。
As described above, in this embodiment, by setting the start condition and the end condition for reading the substream, it is possible to improve the operability of the
また、本実施形態では、サブストリームの読み出しの開始条件、終了条件を複数例示したが、すべての開始条件に従う必要はなく、少なくとも１つの開始条件及び終了条件に従って、サブストリームの読み出しを開始及び終了する構成であればよい。 Also, in this embodiment, a plurality of substream read start conditions and end conditions are illustrated, but it is not necessary to follow all start conditions, and substream read starts and ends according to at least one start condition and end condition. Any configuration can be used.
なお、本発明は、上記実施形態に例示したものに限定されるものではなく、本発明の要旨を逸脱しない範囲において適宜変更可能である。 In addition, this invention is not limited to what was illustrated to the said embodiment, In the range which does not deviate from the summary of this invention, it can change suitably.
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。 The present invention can also be realized by executing the following processing. That is, software (program) that realizes the functions of the above-described embodiments is supplied to a system or apparatus via a network or various storage media, and a computer (or CPU, MPU, or the like) of the system or apparatus reads the program. It is a process to be executed.
１０ 撮影レンズ
１４ 撮像素子
２０ 画像処理回路
５０ システム制御回路
１００ デジタルスチルカメラ
DESCRIPTION OF
Claims (10)
撮像素子から読み出し行を間引いて前記画像表示部に表示するための画像データを取得して出力する第１の読み出し手段と、
前記撮像素子の前記第１の読み出し手段と重複しない読み出し行から前記第１の読み出し手段より高速で画像データを取得して前記第１の読み出し手段と同時に出力する第２の読み出し手段と、
前記第１の読み出し手段により取得した画像データから被写体の状態が変化したかを判断する判断手段と、
前記判断手段が前記第１の読み出し手段により取得した画像データの前記被写体の状態が変化したと判断した場合、及びユーザ操作により撮影モードが他の撮影モードに変更された場合の少なくとも一つの場合を前記第２の読み出し手段による読み出し開始条件として、前記読み出し開始条件を満たしたときに、前記第２の読み出し手段による読み出しを開始し、
前記読み出し開始条件に応じて予め定めた読み出し終了条件を満たしたときに、前記第２の読み出し手段による読み出しを終了するように制御する制御手段と、を備えることを特徴とする撮像装置。 An imaging device having an electronic view funder function for displaying an image of a subject on an image display unit before shooting,
First reading means for acquiring and outputting image data to be displayed on the image display unit by thinning out reading rows from the image sensor;
Second reading means for acquiring image data at a higher speed than the first reading means from a reading row that does not overlap with the first reading means of the image sensor and outputting the image data simultaneously with the first reading means;
Determining means for determining from the image data acquired by the first reading means whether the state of the subject has changed;
At least one of the case where the determination unit determines that the state of the subject of the image data acquired by the first reading unit has changed, and the case where the shooting mode is changed to another shooting mode by a user operation. As the read start condition by the second read unit, when the read start condition is satisfied, the read by the second read unit is started,
An image pickup apparatus comprising: a control unit that controls to end reading by the second reading unit when a predetermined reading end condition is satisfied according to the reading start condition.
撮像素子から読み出し行を間引いて前記画像表示部に表示するための画像データを取得して出力する第１の読み出しステップと、
前記撮像素子の前記第１の読み出しステップと重複しない読み出し行から前記第１の読み出しステップより高速で画像データを取得して前記第１の読み出しステップと同時に出力する第２の読み出しステップと、
前記第１の読み出しステップで取得した画像データから被写体の状態が変化したかを判断する判断ステップと、
前記判断ステップで前記第１の読み出しステップにより取得した画像データの前記被写体の状態が変化したと判断した場合、及びユーザ操作により撮影モードが他の撮影モードに変更された場合の少なくとも一つの場合を前記第２の読み出しステップでの読み出し開始条件として、前記読み出し開始条件を満たしたときに、前記第２の読み出しステップでの読み出しを開始し、
前記読み出し開始条件に応じて予め定めた読み出し終了条件を満たしたときに、前記第２の読み出しステップでの読み出しを終了するように制御する制御ステップと、を備えることを特徴とする撮像装置の制御方法。 A method of controlling an imaging apparatus having an electronic view funder function for displaying an image of a subject on an image display unit before shooting,
A first reading step of acquiring and outputting image data to be displayed on the image display unit by thinning out readout rows from the image sensor;
A second readout step of acquiring image data at a speed higher than that of the first readout step from a readout row that does not overlap with the first readout step of the imaging device, and outputting the image data simultaneously with the first readout step;
A determination step of determining whether the state of the subject has changed from the image data acquired in the first reading step;
At least one of the case where it is determined in the determination step that the state of the subject of the image data acquired in the first reading step has changed, and the shooting mode is changed to another shooting mode by a user operation. As the read start condition in the second read step, when the read start condition is satisfied, the read in the second read step is started,
And a control step for controlling to end reading in the second reading step when a predetermined reading end condition is satisfied in accordance with the reading start condition. Method.
撮像素子から読み出し行を間引いて前記画像表示部に表示するための画像データを取得して出力する第１の読み出しステップと、
前記撮像素子の前記第１の読み出しステップと重複しない読み出し行から前記第１の読み出しステップより高速で画像データを取得して前記第１の読み出しステップと同時に出力する第２の読み出しステップと、
前記第１の読み出しステップで取得した画像データから被写体の状態が変化したかを判断する判断ステップと、
前記判断ステップで前記第１の読み出しステップにより取得した画像データの前記被写体の状態が変化したと判断した場合、及びユーザ操作により撮影モードが他の撮影モードに変更された場合の少なくとも一つの場合を前記第２の読み出しステップでの読み出し開始条件として、前記読み出し開始条件を満たしたときに、前記第２の読み出しステップでの読み出しを開始し、
前記読み出し開始条件に応じて予め定めた読み出し終了条件を満たしたときに、前記第２の読み出しステップでの読み出しを終了するように制御する制御ステップと、をコンピュータに実行させることを特徴とするプログラム。 A program for controlling an imaging apparatus having an electronic view funder function for displaying an image of a subject on an image display unit before shooting,
A first reading step of acquiring and outputting image data to be displayed on the image display unit by thinning out readout rows from the image sensor;
A second readout step of acquiring image data at a speed higher than that of the first readout step from a readout row that does not overlap with the first readout step of the imaging device, and outputting the image data simultaneously with the first readout step;
A determination step of determining whether the state of the subject has changed from the image data acquired in the first reading step;
At least one of the case where it is determined in the determination step that the state of the subject of the image data acquired in the first reading step has changed, and the shooting mode is changed to another shooting mode by a user operation. As the read start condition in the second read step, when the read start condition is satisfied, the read in the second read step is started,
A program for causing a computer to execute a control step of controlling to end reading in the second reading step when a predetermined reading end condition is satisfied according to the reading start condition .
Priority Applications (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013259304A JP6289068B2 (en) | 2013-12-16 | 2013-12-16 | Imaging apparatus and control method thereof |
| US14/564,418 US9854216B2 (en) | 2013-12-10 | 2014-12-09 | Image pickup apparatus that displays image based on signal output from image pickup device, method of controlling the same, and storage medium |
| CN201410756618.0A CN104702826B (en) | 2013-12-10 | 2014-12-10 | Picture pick-up device and its control method |
| US15/814,729 US10349028B2 (en) | 2013-12-10 | 2017-11-16 | Image pickup apparatus that displays image based on signal output from image pickup device, method of controlling the same, and storage medium |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013259304A JP6289068B2 (en) | 2013-12-16 | 2013-12-16 | Imaging apparatus and control method thereof |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2015119205A true JP2015119205A (en) | 2015-06-25 |
| JP2015119205A5 JP2015119205A5 (en) | 2017-02-02 |
| JP6289068B2 JP6289068B2 (en) | 2018-03-07 |
Family
ID=53531609
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2013259304A Expired - Fee Related JP6289068B2 (en) | 2013-12-10 | 2013-12-16 | Imaging apparatus and control method thereof |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6289068B2 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20190065066A (en) * | 2017-12-01 | 2019-06-11 | 삼성전자주식회사 | Electronic device and method of acquiring images of the same |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH11103412A (en) * | 1997-09-26 | 1999-04-13 | Olympus Optical Co Ltd | Automatic focus adjusting device |
| JP2005277513A (en) * | 2004-03-23 | 2005-10-06 | Olympus Corp | Solid state imaging device |
| JP2009231966A (en) * | 2008-03-19 | 2009-10-08 | Casio Comput Co Ltd | Imaging apparatus and program therefor |
| JP2009273023A (en) * | 2008-05-09 | 2009-11-19 | Fujifilm Corp | Imaging device, imaging method, focusing control method, and program |
| JP2012060371A (en) * | 2010-09-08 | 2012-03-22 | Pentax Ricoh Imaging Co Ltd | Imaging system and pixel signal reading method |
-
2013
- 2013-12-16 JP JP2013259304A patent/JP6289068B2/en not_active Expired - Fee Related
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH11103412A (en) * | 1997-09-26 | 1999-04-13 | Olympus Optical Co Ltd | Automatic focus adjusting device |
| JP2005277513A (en) * | 2004-03-23 | 2005-10-06 | Olympus Corp | Solid state imaging device |
| JP2009231966A (en) * | 2008-03-19 | 2009-10-08 | Casio Comput Co Ltd | Imaging apparatus and program therefor |
| JP2009273023A (en) * | 2008-05-09 | 2009-11-19 | Fujifilm Corp | Imaging device, imaging method, focusing control method, and program |
| JP2012060371A (en) * | 2010-09-08 | 2012-03-22 | Pentax Ricoh Imaging Co Ltd | Imaging system and pixel signal reading method |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20190065066A (en) * | 2017-12-01 | 2019-06-11 | 삼성전자주식회사 | Electronic device and method of acquiring images of the same |
| KR102475912B1 (en) * | 2017-12-01 | 2022-12-09 | 삼성전자 주식회사 | Electronic device and method of acquiring images of the same |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6289068B2 (en) | 2018-03-07 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4448039B2 (en) | Imaging apparatus and control method thereof | |
| US7893984B2 (en) | Image capturing apparatus, method of controlling the same, and program | |
| US8711244B2 (en) | Imaging apparatus for calculating a histogram to adjust color balance | |
| JP2009130531A (en) | Image sensing apparatus and control method therefor | |
| US9871970B2 (en) | Imaging apparatus, control method, and storage medium storing program | |
| JP5889247B2 (en) | Image processing apparatus, image processing method, image processing program, and imaging apparatus | |
| JP6198600B2 (en) | Image processing apparatus, imaging apparatus, control method thereof, and program | |
| US10839497B2 (en) | Image processing apparatus and method | |
| JP2007081732A (en) | Imaging apparatus | |
| JP2003244520A (en) | Photographing device | |
| JP5311922B2 (en) | Imaging apparatus and control method thereof | |
| JP2012090041A (en) | Image processing device, method, and program | |
| JP6289068B2 (en) | Imaging apparatus and control method thereof | |
| JP2011091792A (en) | Imaging device and method for controlling imaging device | |
| JP2011130031A (en) | Imaging apparatus, and control method for the same | |
| JP2009088628A (en) | Image processor | |
| JP5854861B2 (en) | Imaging device, control method thereof, and control program | |
| JP6669404B2 (en) | Imaging device, control method thereof, and control program | |
| JP6611566B2 (en) | IMAGING DEVICE, IMAGING DEVICE CONTROL METHOD, AND PROGRAM | |
| JP5164775B2 (en) | Imaging apparatus, control method thereof, and program | |
| JP2008060844A (en) | Image processor and image processing method | |
| JP2014206592A (en) | Imaging device, and control method and program of the same | |
| JP2020068396A (en) | Imaging device and controlling method thereof | |
| JP2014075729A (en) | Image processing system and image processing method | |
| JP2020088663A (en) | Imaging apparatus |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161216 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20161216 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170821 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170829 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171027 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180109 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180206 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 6289068 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| LAPS | Cancellation because of no payment of annual fees |