JP2020088600A - Image pick-up device, imaging apparatus, control method, and program - Google Patents
Image pick-up device, imaging apparatus, control method, and program Download PDFInfo
- Publication number
- JP2020088600A JP2020088600A JP2018220302A JP2018220302A JP2020088600A JP 2020088600 A JP2020088600 A JP 2020088600A JP 2018220302 A JP2018220302 A JP 2018220302A JP 2018220302 A JP2018220302 A JP 2018220302A JP 2020088600 A JP2020088600 A JP 2020088600A
- Authority
- JP
- Japan
- Prior art keywords
- image
- display
- recording
- image data
- analog
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Studio Devices (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
Abstract
Description
本発明は、撮像素子、撮像装置、制御方法、並びにプログラムに関し、特に、高速な連写機能により撮像された画像の転送に用いられる撮像素子、撮像装置、制御方法、並びにプログラムに関する。 The present invention relates to an image pickup device, an image pickup device, a control method, and a program, and particularly to an image pickup device, an image pickup device, a control method, and a program used for transferring an image picked up by a high-speed continuous shooting function.
近年、家庭用のビデオカメラやデジタルスチルカメラなどの撮像装置が一般に普及している。 In recent years, image pickup devices such as home video cameras and digital still cameras have become popular.
これらの撮像装置は連写や動画といった機能を提供しており、ユーザにとって撮影の利便性が向上している。またメカシャッターを使用せずに撮像素子のスリットローリング読み出しのみで撮影するモードも提供され、シャッターの動作音をさせずに静かに撮影できるモードも存在している。スリットローリング読み出しは、メカシャッターに比べて高速シャッターを実現しやすいというメリットも存在する。 These image pickup devices provide functions such as continuous shooting and moving images, and the convenience of shooting is improved for the user. In addition, there is also a mode in which shooting is performed only by slit rolling reading of the image sensor without using a mechanical shutter, and there is also a mode in which shooting can be performed quietly without making a shutter operation noise. Slit rolling readout also has the merit that it is easier to realize a high-speed shutter than a mechanical shutter.
スリットローリング読み出しはメカシャッターを使用しないため連写速度を上げやすく、高速な連写機能を提供できる。特に撮像素子で撮像された画像をデータ圧縮して転送することにより、転送時間を短縮して高速化を実現する手法が知られている(例えば、特許文献1参照)。 Since slit rolling reading does not use a mechanical shutter, it is easy to increase the continuous shooting speed and provide a high-speed continuous shooting function. In particular, a method is known in which an image captured by an image sensor is compressed and transferred to reduce the transfer time and increase the speed (see, for example, Patent Document 1).
しかしながら、かかる高速な連写機能を用いて連写された撮像画像を撮像素子から高速読み出ししながら転送すると、転送先の処理能力を超えてしまうことがある。例えば、転送先である表示部において撮像画像を連写の途中で表示できなくなり、ユーザが連写中の撮像画像を確認できなくなるという問題が生じる。撮像画像の転送先の処理能力を高速化させればかかる問題は解消するが、そのためには多額のコストアップが発生してしまい、現実的でない。またかかる高速化による発熱も課題となる。 However, if the picked-up images continuously shot using such a high-speed continuous shooting function are transferred while being read out at high speed from the image sensor, the processing capability of the transfer destination may be exceeded. For example, there arises a problem that the captured image cannot be displayed on the display unit, which is the transfer destination, during the continuous shooting, and the user cannot confirm the captured image during the continuous shooting. The problem can be solved by speeding up the processing capacity of the transfer destination of the captured image, but this causes a large increase in cost and is not realistic. Further, heat generation due to such speeding up also poses a problem.
そこで本発明は、高速な連写機能を用いて連写された全ての撮像画像に関する処理をその転送先において確実に行うことができる撮像装置、制御方法、並びにプログラムを提供することにある。 Therefore, it is an object of the present invention to provide an image pickup apparatus, a control method, and a program capable of surely performing processing on all picked-up images continuously shot using a high-speed continuous shooting function at its transfer destination.
本発明の請求項1に係る撮像装置は、露光により得られた光学像を電気信号に変換して、アナログ画像データを生成する撮像素子と、前記アナログ画像データを読み出してデジタル画像データに変換し、前記デジタル画像データから記録用画像及び非記録用画像を生成する第1の生成手段と、前記記録用画像を第1の伝送路を介して記録部に転送する第1の転送手段と、前記非記録用画像から表示用画像を生成する第2の生成手段と、前記表示用画像を第2の伝送路を介して画像表示部に転送する第2の転送手段とを備えることを特徴とする。 An image pickup apparatus according to claim 1 of the present invention converts an optical image obtained by exposure into an electric signal to generate analog image data, and an analog image data read out and converted into digital image data. A first generation unit that generates a recording image and a non-recording image from the digital image data; a first transfer unit that transfers the recording image to a recording unit via a first transmission path; It is characterized by further comprising: second generating means for generating a display image from the non-recording image; and second transfer means for transferring the display image to the image display section via the second transmission path. ..
本発明によれば、高速な連写機能を用いて連写された全ての撮像画像に関する処理をその転送先において確実に行うことができる。 According to the present invention, it is possible to reliably perform processing on all captured images continuously shot using the high-speed continuous shooting function at the transfer destination.
以下に、本発明の好ましい実施例を、添付の図面に基づいて詳細に説明する。 Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings.
本実施例では、本発明の撮像装置としてデジタルカメラ100を例に用いて説明をおこなう。
In this embodiment, a
図1は、デジタルカメラ100のハードウェア構成を示すブロック図である。
FIG. 1 is a block diagram showing the hardware configuration of the
図1において、デジタルカメラ100は、撮影レンズ10、シャッター12、撮像素子14、A/D変換器16、タイミング発生回路18、画像処理回路20、メモリ制御回路22、画像表示部28、メモリ30、及び不揮発性メモリ31を備える。また、デジタルカメラ100は、圧縮伸長回路32、露光制御部40、測距制御部42、ズーム制御部44、フラッシュ48、システム制御回路50、モードダイアル60、シャッターボタン62、表示切替スイッチ66、及び操作部70を備える。さらに、デジタルカメラ100は、ズームスイッチ72、サーミスタ74、電源86、I/F90、コネクタ92、光学ファインダー104、通信部110、及び通信I/F112を備える。
1, the
シャッター12は、絞り機能を備え、撮像素子14への電荷の蓄積時間を制御する機械式シャッターである。尚、シャッター12の動作音を無くしたい動画撮影などの場合は、撮像素子14のリセットタイミングを制御する電子シャッターをシャッター12の代わりに用いてもよい。
The
撮像素子14は、光学像(露光により蓄積された電荷)を電気信号に変換して得られたアナログ画像データを出力する。
The
A/D変換器16は、撮像素子14から読み出したアナログ画像データをデジタル画像データに変換する。
The A/
タイミング発生回路18は、撮像素子14及びA/D変換器16にクロック信号や制御信号を供給する回路であり、メモリ制御回路22及びシステム制御回路50により制御される。
The
画像処理回路20は、A/D変換器16からのデータ或いはメモリ制御回路22からのデータに対して所定の画素補間処理や色変換処理を行う。また画像処理回路20によって画像の切り出し、変倍処理を行うことで電子ズーム機能が実現される。
The
また、画像処理回路20においては、撮像された画像を用いて所定の演算処理を行い、得られた演算結果に基づいてシステム制御回路50が露光制御部40、測距制御部42に対して制御を行う、TTL方式のAF処理、AE処理、EF処理を行っている。
Further, in the
さらに、画像処理回路20においては、撮像された画像を用いて所定の演算処理を行い、得られた演算結果に基づいてTTL方式のAWB(オートホワイトバランス)処理も行っている。
Further, the
メモリ制御回路22は、A/D変換器16、タイミング発生回路18、画像処理回路20、メモリ30、圧縮伸長回路32を制御する。
The
A/D変換器16のデータが画像処理回路20、メモリ制御回路22を介して、或いはA/D変換器16のデータが直接メモリ制御回路22を介して、メモリ30に書き込まれる。
The data of the A/
画像表示部28は、TFT LCD等からなり、メモリ30に書き込まれた表示用の画像データはメモリ制御回路22を介して画像表示部28で表示される。
The
画像表示部28を用いて撮像した画像データを逐次表示すれば、電子ファインダー機能を実現することが可能である。
The electronic viewfinder function can be realized by sequentially displaying the captured image data using the
また、画像表示部28は、システム制御回路50の指示により任意に表示をON/OFFすることが可能であり、表示をOFFにした場合にはデジタルカメラ100の電力消費を大幅に低減することが出来る。
Further, the
メモリ30は、撮影した静止画像や動画像を格納するため、所定枚数の静止画像や所定時間の動画像を格納するのに十分な記憶量を備えている。これにより、複数枚の静止画像を連続して撮影する連写撮影やパノラマ撮影の場合にも、高速かつ大量の画像書き込みをメモリ30に対して行うことが可能となる。
The
また、メモリ30はシステム制御回路50の作業領域としても使用することが可能である。
The
不揮発性メモリ31は、FlashROM等で構成される。システム制御回路50が実行するプログラムコードは不揮発性メモリ31に書き込まれ、逐次読み出しながらプログラムコードを実行する。また、不揮発性メモリ31内にはシステム情報を記憶する領域や、ユーザ設定情報を記憶する領域が設けられ、さまざまな情報や設定を次回起動時に読み出して、復元する。
The
圧縮伸長回路32は、適応離散コサイン変換(ADCT)等により画像データを圧縮伸長する。具体的には、メモリ30に格納された画像データを読み込んで圧縮処理或いは伸長処理を行い、処理を終えた画像データをメモリ30に書き込む。
The compression/
露光制御部40は、撮像素子14への入射光量を制御する絞り機能を備えるシャッター12を制御する。また、露光制御部40は、フラッシュ48と連動することによるフラッシュ調光機能も有する。
The
測距制御部42は、撮影レンズ10のフォーカシングを制御する。
The distance
ズーム制御部44は、撮影レンズ10のズーミングを制御する。
The
フラッシュ48は、ストロボ撮影の際のプレ発光やメイン発光を行うだけでなく、AF補助光としての投光や、フラッシュの調光も行う。
The
露光制御部40及び測距制御部42は、TTL方式を用いて制御される。すなわち、撮像した画像データを画像処理回路20によって演算した演算結果に基づき、システム制御回路50が露光制御部40、測距制御部42に対して制御を行う。
The
システム制御回路50は、デジタルカメラ100全体を制御する。
The
モードダイアル60、シャッターボタン62、表示切替スイッチ66、操作部70、及びズームスイッチ72は、システム制御回路50の各種の動作指示を入力するための操作手段である。これらは、スイッチやダイアル、タッチパネル、視線検知によるポインティング、音声認識装置等の単数或いは複数の組み合わせで構成される。
The
ここで、これらの操作手段の具体的な説明を行う。 Here, a concrete description of these operating means will be given.
モードダイアル60は、電源オフ、自動撮影モード、撮影モード、パノラマ撮影モード、動画撮影モード、再生モード、PC接続モード等の各機能モードを切り替え設定することが出来る。
The
シャッターボタン62は、その操作途中(半押し操作)でシャッタースイッチSW1がONとなり、AF(オートフォーカス)処理、AE(自動露出)処理、AWB(オートホワイトバランス)処理等の動作開始を指示する。またその操作完了(全押し操作)でシャッタースイッチSW2がONとなる。フラッシュ撮影の場合、シャッタースイッチSW2がONとなると、まず、EF(フラッシュプリ発光)処理を行う。その後、AE処理で決定された露光時間分、撮像素子14を露光させる。また、この露光期間中にフラッシュ48をメイン発光させて、露光期間終了と同時に露光制御部40により遮光することで、撮像素子14への露光を終了させる。露光が終了した撮像素子14から読み出したアナログ画像データは、A/D変換器16でデジタル画像データに変換された後、メモリ制御回路22を介してメモリ30に記録用画像として書き込まれる。さらに、画像処理回路20及びメモリ制御回路22での演算を用いたこの画像データの現像処理、及び圧縮伸長回路32での圧縮処理が行われた後、記録媒体200に書き込む。このような一連の処理の動作がシャッタースイッチSW2がONとなると開始する。
The
表示切替スイッチ66は、画像表示部28の表示切替をすることが出来る。この機能により、光学ファインダー104を用いて撮影を行う際に、TFT LCD等から成る画像表示部28への電流供給を遮断することにより、省電力を図ることが可能となる。
The
操作部70は、各種ボタン、タッチパネルや回転式ダイアル等からなり、メニューボタン、セットボタン、マクロボタン、マルチ画面再生改ページボタン、フラッシュ設定ボタン、単写/連写/セルフタイマー切り替えボタン等がある。またメニュー移動+(プラス)ボタン、メニュー移動−(マイナス)ボタン、再生画像移動+(プラス)ボタン、再生画像移動−(マイナス)ボタン、撮影画質選択ボタン、露出補正ボタン、日付/時間設定ボタン等もある。
The
ズームスイッチ72は、ユーザが撮像画像の倍率(ズーム)変更の操作を行うスイッチ部である。ズームスイッチ72は、撮像画角を望遠側に変更させるテレスイッチと、広角側に変更させるワイドスイッチからなる。このズームスイッチ72によるズーム変更操作は、ズーム制御部44が撮影レンズ10の撮像画角の変更を指示し光学ズーム操作を行うトリガとなる。また、画像処理回路20による画像の切り出しや、画素補間処理などによる撮像画角の電子的なズーミング変更のトリガともなる。
The
サーミスタ74は、撮像素子14の近くに配置され、撮像素子14自体の温度を測定する。この測定は、撮像素子14の欠陥画素は温度による影響を受けるため、撮影時の温度に応じて傷補正処理を変更する必要があるために行われる。
The
電源86は、アルカリ電池の一次電池やNiCd電池やNiMH電池、Liイオン電池等の二次電池、ACアダプター等からなる、デジタルカメラ100の全体の電源である。
The
I/F90は記録媒体200とのインターフェースである。
The I/
コネクタ92は記録媒体200と接続を行う。
The
光学ファインダー104は、ユーザが撮影レンズ10を介して直接被写体を見るための覗き窓であり、これを用いることにより、画像表示部28による電子ファインダー機能を使用すること無しに、撮影を行うことが可能である。
The optical viewfinder 104 is a viewing window for the user to directly view the subject through the taking
通信部110は、USB、IEEE1394、LAN、無線通信、等の各種通信機能を有する。 The communication unit 110 has various communication functions such as USB, IEEE1394, LAN, and wireless communication.
通信I/F112は、通信部110によりデジタルカメラ100を他の機器と接続するためのインターフェースであり、有線通信の場合コネクタで構成され、無線通信の場合はアンテナで構成される。
The communication I/
記録媒体200は、メモリカードやハードディスク等の記録媒体である。記録媒体200は、半導体メモリや磁気ディスク等から構成される記録部202、デジタルカメラ100とのインターフェースであるI/F204、及びデジタルカメラ100と接続を行うコネクタ206を備えている。
The
図2は、本発明の実施例に係る連写処理の手順を示すフローチャートである。本処理は、モードダイアル60で撮影モードが連続撮影に切り替えられた後、シャッターボタン62の操作完了でシャッタースイッチSW2がONとなったときに、システム制御回路50により実行される。
FIG. 2 is a flowchart showing a procedure of continuous shooting processing according to the embodiment of the present invention. This processing is executed by the
まず、ステップS101で撮影を行う。具体的には、AE処理により予め決定されていたシャッター速度・絞り値・感度、またはユーザが任意に指示したシャッター速度・絞り値・感度で露光を行う。この露光と同時に、撮像素子14の蓄積動作により入射光の強さに応じた電荷を蓄積し、それを電気信号に変換したアナログ画像データを生成する。その後、A/D変換器16は、撮像素子14から読み出したアナログ画像データをデジタル画像データに変換した後、図3,4にて後述する記録用画像及び非記録用画像を生成する。
First, shooting is performed in step S101. Specifically, the exposure is performed at the shutter speed/aperture value/sensitivity that is predetermined by the AE process, or at the shutter speed/aperture value/sensitivity that the user arbitrarily instructed. Simultaneously with this exposure, the charge according to the intensity of the incident light is accumulated by the accumulation operation of the
ステップS102aでは、メモリ制御回路22がA/D変換器16から記録用画像を読み出して、メモリ30に記憶させる。
In step S102a, the
ステップS102bでは、画像処理回路20がA/D変換器16から非記録用画像を読み出して、画像表示部28へ表示させるための画像(以下表示用画像という)と測距制御部42で測距演算を行わせるための画像(以下測距用画像という)を生成する。メモリ制御回路22は、画像処理回路20から表示用画像を読み出し、画像処理回路20を介して画像表示部28に送信する。これにより、その表示用画像で画像表示部28の表示が更新される。一方、メモリ制御回路22は、画像処理回路20から測距用画像を読み出し、システム制御回路50を介して測距制御部42に送信する。これにより、測距制御部42によるその測距用画像を用いた測距演算が行われる。
In step S102b, the
ステップS103で撮影を継続するか否かを判定し、継続すると判定した場合、ステップS101に戻り、継続しないと判定した場合、本処理を終了する。 In step S103, it is determined whether or not to continue shooting. If it is determined to continue shooting, the process returns to step S101, and if it is determined not to continue, this processing ends.
図3は、本発明の実施例に係る撮像素子14で生成されたアナログ画像データの転送方法を示す図である。
FIG. 3 is a diagram showing a method of transferring analog image data generated by the
撮像素子14は、入射した光を電荷として蓄積し、その電荷を電気信号に変換してアナログ画像データを生成する。
The
A/D変換器16は、撮像素子14からアナログ画像データを読み出してA/D変換し、デジタル画像データ(本画像)を生成する。さらに、デジタル画像データから記録用画像と非記録用画像を生成する。
The A/
画像処理回路20は、A/D変換器16から非記録用画像を読み出して、縮小や加算・間引き等の簡易的な画像処理を行い、表示用画像と測距用画像を生成する。ここで表示用画像としては、表示先に合わせて水平方向に非記録用画像を縮小した画像を用いるが、測距用画像として非記録用画像を縮小した画像を用いると測距できなくなる。よって、非記録用画像の水平方向はそのままとし、垂直方向に間引きを行った画像を測距用画像として用いる。
The
メモリ制御回路22は、A/D変換器16から記録用画像を読み出し、図3に示す転送1のルートで縮小等の処理を行うことなくそのままメモリ30に転送する。
The
また、メモリ制御回路22は、画像処理回路20から表示用画像と測距用画像を読み出し、夫々図3に示す転送2のルートで画像処理回路20や測距制御部42に転送する。
Further, the
本実施例では、記録用画像及び非記録用画像はA/D変換器16からいわゆるマルチストリーム出力により出力される。具体的には、A/D変換器16はライン単位で独立してデジタル画像データの読み出しタイミングを変更して、フレームレートの異なる2種の画像を生成し、一方を記録用画像としてメモリ制御回路22へ、他方を非記録用画像として画像処理回路20に出力する。尚、撮像素子14において、デジタル画像データから記録用画像及び非記録用画像が生成されれ、記録用画像がメモリ制御回路22へ出力され、非記録用画像が画像処理回路20に出力されればかかる構成でなくてもよい。例えば、A/D変換器16でオリジナルのデジタル画像データのコピーを作成し、デジタル画像データのオリジナル及びコピーの一方をメモリ制御回路22へ出力し、他方を画像処理回路20に出力するようにしてもよい。
In this embodiment, the recording image and the non-recording image are output from the A/
メモリ制御回路22は、転送1のルートでA/D変換器16からから読み出した記録用画像をメモリ30へ記憶させる。転送2のルートでA/D変換器16から読み出した非記録用画像の一部は表示用画像として、画像処理回路20で現像処理を行なうと共に画像表示部28の表示サイズに合わせてリサイズを行い、その後、画像表示部28へ送り、撮影画像の表示を行う。このように毎撮影において画像表示部28の表示を更新することで、ユーザは連続撮影画像の確認を行うことができる。転送2のルートでA/D変換器16から読み出した非記録用画像の残りは測距用画像として測距制御部42へ送り、測距演算に使用する。
The
図3に示すように、転送1のルートは記録用のサイズの大きい画像データを転送する伝送路なのでデータの転送幅が大きい。一方、転送2のルートは表示・測距用のサイズの小さい画像データを転送する伝送路なのでデータの転送幅が小さい。例えば撮像素子14からの転送信号線が8本であった場合、転送1のルートには6本の信号線を割り当て、転送2のルートには2本の信号線を割り当てる。
As shown in FIG. 3, the transfer 1 route has a large data transfer width because it is a transmission path for transferring image data of a large size for recording. On the other hand, the route of transfer 2 is a transmission line for transferring image data of small size for display/distance measurement, and thus has a small data transfer width. For example, when the number of transfer signal lines from the
図4は、図3におけるA/D変換器16で生成されるデジタル画像データ(本画像)と、デジタル画像データに基づき生成され、転送1のルートで転送される記録画像及び転送2のルートで転送される測距用画像及び表示用画像とを示す図である。
FIG. 4 shows digital image data (main image) generated by the A/
A/D変換器16は垂直同期信号VDと水平同期信号HDのタイミングに同期して撮像素子14からのアナログ画像データを読み出す。
The A/
転送1のルートで転送する画像は記録用画像なので、A/D変換器16は、その後、アナログ画像データを縮小せずにそのままメモリ制御回路22に転送する。転送1は転送幅も十分に大きいため、縮小せずにアナログ画像データを転送することができる。
Since the image transferred by the route of transfer 1 is a recording image, the A/
一方、転送2のルートで転送する画像として、A/D変換器16は、画像処理回路20を介して最初の水平期間で表示用画像をメモリ制御回路22に転送する。転送2は転送幅が小さいため、画像処理回路20においてアナログ画像データから生成された非記録用画像が縮小された後、表示用画像としてメモリ制御回路22に転送される。次の水平期間も画像処理回路20において非記録用画像が縮小された後、表示用画像としてメモリ制御回路22に転送される。3つ目の水平期間では、A/D変換器16は、画像処理回路20を介して測距用画像をメモリ制御回路22に転送する。測距用画像は非記録用画像の縮小を行わず、水平はそのままで垂直方向にのみ間引きを行うため画像サイズが大きくなってしまい、そのままでは1水平期間に転送2のルートで転送できない。このため測距用画像は2水平期間にまたがって画像の転送を行う。このため4つ目の水平期間の画像は間引かれる。転送2のルートでの画像転送はこれを繰り返す。すなわち、4水平期間を1つの周期として表示用画像及び測距用画像をメモリ制御回路22に転送する。
On the other hand, as the image to be transferred by the route of transfer 2, the A/
この動作を1フレームの間繰り返し、メモリ制御回路22には、転送1ルートで記録用画像が転送され、転送2のルートで表示用画像及び測距用画像が転送される。
By repeating this operation for one frame, the recording image is transferred to the
図5は、本発明の表示先に応じた表示用画像の縮小率の切替を示す図である。 FIG. 5 is a diagram showing switching of the reduction ratio of the display image according to the display destination of the present invention.
表示先の例として、背面LCD・EVFファインダー・HDMI(登録商標)出力を挙げている。表示先ごとにその表示画素数は異なっている。すなわち、表示先の画素数が少ないときに、表示用画像として高解像度の画像を表示先に出力してもオーバースペックとなるので、表示先により適切な縮小率を選択する。この縮小率は、表示用画像を画像処理回路20が生成する際に適応される。
As an example of the display destination, a rear LCD, EVF finder, and HDMI (registered trademark) output are listed. The number of display pixels is different for each display destination. That is, when the display destination has a small number of pixels, even if a high-resolution image is output to the display destination as an image for display, it is over-specified, so an appropriate reduction ratio is selected depending on the display destination. This reduction rate is applied when the
表示先に背面LCDが選択されたら、水平1/4・垂直1/4の縮小率を選択する。表示先にEVFファインダーが選択されたら、水平1/3・垂直1/3の縮小率を選択する。表示先にHDMI出力が選択されたら、水平1/2・垂直1/2の縮小率を選択する。 When the rear LCD is selected as the display destination, the reduction ratio of horizontal 1/4 and vertical 1/4 is selected. When the EVF finder is selected as the display destination, the reduction ratio of horizontal 1/3 and vertical 1/3 is selected. When the HDMI output is selected as the display destination, the reduction ratio of horizontal 1/2/vertical 1/2 is selected.
図6は、本発明の撮像素子14のフレームレートに応じた表示用画像の縮小率の切替を示す図である。
FIG. 6 is a diagram showing switching of the reduction ratio of the display image according to the frame rate of the
撮像素子14のフレームレートが高速な場合、画像処理回路20で処理するデータ量が非常に大きくなるため、連写中などにおいて表示先に適切なタイミングで高解像度の表示用画像を順次出力できないことがある。また高解像度の表示用画像を表示先に表示しても、フレームレートが早いため高解像度である事が分かりづらい。よって、フレームレートに応じて適切な表示用画像の縮小率を選択する。この縮小率は、表示用画像を画像処理回路20が生成する際に適応される。
When the frame rate of the
フレームレートが100fpsと高速なときは、水平1/4・垂直1/4の縮小率を選択する。フレームレートが50fpsで中程度の速度の時は、水平1/3・垂直1/3の縮小率を選択する。フレームレートが30fpsと低速なときは、水平1/2・垂直1/2の縮小率を選択する。 When the frame rate is as high as 100 fps, the reduction ratio of horizontal 1/4 and vertical 1/4 is selected. When the frame rate is 50 fps and the speed is medium, a reduction ratio of horizontal 1/3 and vertical 1/3 is selected. When the frame rate is as low as 30 fps, a reduction ratio of 1/2 horizontal and 1/2 vertical is selected.
図7は、本発明の実施例に係る連写タイミングチャートを示す図である。 FIG. 7 is a diagram showing a continuous shooting timing chart according to the embodiment of the present invention.
連写が開始されると、撮像素子14による露光と、A/D変換器16による撮像素子14からのアナログ画像データの高速な読み出し(高速Read)が行われる。高速Readが完了する毎に、システム制御回路50は、非記録用画像を補正し、表示用画像や測距用画像(以下、レビュー画像という)の作成を開始するよう画像処理回路20を制御する。上記補正やレビュー画像の作成にかかる時間は画像処理回路20の処理速度から推定できるので、上記補正やレビュー画像の作成の終了予測時刻を算出できる。この終了予測時刻から撮像素子14による露光にかかる時間分を前倒して、システム制御回路50は撮像素子14に次の露光を開始させる。露光が終了した直後に前回露光分の補正・レビュー画像作成が完了するので、今回露光分の読み出しを開始する。このように高速Readと上記補正やレビュー画像の作成の時間を重複させないのは、これらは共にデジタルカメラ100全体の処理能力の多くを充てる必要があるためである。このため、高速Readと上記補正やレビュー画像の作成とのタイミングをずらしている。尚、シャッター12の絞りの制御はデジタルカメラ100全体の処理能力の多くを充てる必要がないため、システム制御回路50は、高速Readが完了する毎に上記補正やレビュー画像の作成と並行してシャッター12に絞りの制御を開始させる。
When continuous shooting is started, exposure by the
上記終了予測時刻は、具体的には撮像素子14の画素数から推定することができる。例えば撮像素子14の画素数が2000万画素であり、画像処理回路20の処理速度が500MPix/secであれば、以下の式が成立する。
処理時間 = 画素数 / 処理レート
= 20M / 500M = 40msec
The predicted end time can be specifically estimated from the number of pixels of the
Processing time = number of pixels / processing rate
= 20M / 500M = 40msec
すなわち、上記補正やレビュー画像の作成にかかる時間は40msecとなる。このとき次の撮影の露光時間が10msであれば、補正・レビュー画像作成開始から30msec経過したところで、露光を開始させれば、露光と補正・レビュー画像作成が同時に終了する。 That is, the time required for the correction and the creation of the review image is 40 msec. At this time, if the exposure time of the next shooting is 10 ms, if exposure is started 30 msec after the start of the correction/review image creation, the exposure and the correction/review image creation are completed at the same time.
本実施例では、図4に示すように、転送2のルートでの画像転送は、4水平期間を1つの周期としていたが、表示用画像の縮小率や測距用画像の間引き率に応じて1つの周期に含まれる水平期間を変更してもよい。また、本実施例では、測距用画像は、非記録用画像からの縮小はされずに転送2のルートで転送されたが、撮影条件や被写体条件によりある程度非記録用画像から縮小してもよい。 In the present embodiment, as shown in FIG. 4, the image transfer through the route of transfer 2 has four horizontal periods as one cycle, but it depends on the reduction ratio of the display image and the thinning ratio of the distance measurement image. The horizontal period included in one cycle may be changed. Further, in the present embodiment, the distance-measuring image was transferred through the route of transfer 2 without being reduced from the non-recording image, but it may be reduced from the non-recording image to some extent depending on the shooting conditions and subject conditions. Good.
また、本実施例では図7の補正やレビュー画像の作成と並行してシャッター12の絞りの制御を開始したが、撮影レンズ10やNDフィルタ等の光学部材の制御を開始するようにしてもよい。
Further, in the present embodiment, the control of the diaphragm of the
[その他の実施例]
本発明の目的は、前述した実施例の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、装置に供給することによっても、達成されることは言うまでもない。このとき、供給された装置の制御部を含むコンピュータ(またはCPUやMPU)は、記憶媒体に格納されたプログラムコードを読み出し実行する。
[Other Examples]
Needless to say, the object of the present invention can be achieved by supplying a storage medium storing a program code of software for realizing the functions of the above-described embodiments to the apparatus. At this time, the computer (or CPU or MPU) including the control unit of the supplied device reads and executes the program code stored in the storage medium.
この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施例の機能を実現することになり、プログラムコード自体及びそのプログラムコードを記憶した記憶媒体は本発明を構成することになる。 In this case, the program code itself read from the storage medium realizes the function of the above-described embodiment, and the program code itself and the storage medium storing the program code constitute the present invention.
プログラムコードを供給するための記憶媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、CD−ROM、CD−R、磁気テープ、不揮発性のメモリカード、ROM等を用いることができる。 As the storage medium for supplying the program code, for example, a flexible disk, a hard disk, an optical disk, a magneto-optical disk, a CD-ROM, a CD-R, a magnetic tape, a non-volatile memory card, a ROM or the like can be used.
また、上述のプログラムコードの指示に基づき、装置上で稼動しているOS(基本システムやオペレーティングシステム)などが処理の一部又は全部を行い、その処理によって前述した実施例の機能が実現される場合も含まれることは言うまでもない。 An OS (basic system or operating system) running on the device performs some or all of the processing based on the instructions of the program code, and the processing realizes the functions of the above-described embodiments. It goes without saying that cases are included.
さらに、記憶媒体から読み出されたプログラムコードが、装置に挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書込まれ、前述した実施例の機能が実現される場合も含まれることは言うまでもない。このとき、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPU等が実際の処理の一部又は全部を行う。 Further, the program code read from the storage medium may be written in a memory provided in a function expansion board inserted into the device or a function expansion unit connected to the computer to realize the functions of the above-described embodiments. Needless to say, it is included. At this time, the CPU or the like included in the function expansion board or function expansion unit performs a part or all of the actual processing based on the instruction of the program code.
10 撮影レンズ
14 撮像素子
16 A/D変換器
20 画像処理回路
22 メモリ制御回路
28 画像表示部
30 メモリ
42 測距制御部
50 システム制御回路
100 デジタルカメラ
10
Claims (9)
前記アナログ画像データを読み出してデジタル画像データに変換し、前記デジタル画像データから記録用画像及び非記録用画像を生成する第1の生成手段と、
前記記録用画像を第1の伝送路を介して記録部に転送する第1の転送手段と、
前記非記録用画像から表示用画像を生成する第2の生成手段と、
前記表示用画像を第2の伝送路を介して画像表示部に転送する第2の転送手段とを備えることを特徴とする撮像装置。 An image sensor that converts an optical image obtained by exposure into an electric signal to generate analog image data,
First generating means for reading the analog image data, converting the analog image data into digital image data, and generating a recording image and a non-recording image from the digital image data;
First transfer means for transferring the recording image to a recording unit via a first transmission path;
Second generation means for generating a display image from the non-recording image;
An image pickup apparatus, comprising: a second transfer unit that transfers the display image to an image display unit via a second transmission path.
前記第2の生成手段は、前記複数の表示先の夫々の表示画素数に応じた縮小率で前記非記録用画像を縮小して、前記表示用画像を生成することを特徴とする請求項2記載の撮像装置。 The imaging device includes a plurality of display destinations as the image display unit, and the second generation unit reduces the non-recording image at a reduction ratio according to the number of display pixels of each of the plurality of display destinations. The image pickup apparatus according to claim 2, wherein the display image is generated.
前記表示用画像の生成の終了予測時刻から前記撮像素子による露光にかかる時間分を前倒して、前記撮像素子に次の露光を開始させる第2の制御手段とを備えることを特徴とする請求項1乃至5のいずれか1項に記載の撮像装置。 When continuous shooting is started, the second generation unit is started so as to start generation of the display image each time the exposure of the image sensor and the reading of the analog image data by the first generation unit are completed. First control means for controlling,
2. A second control unit that advances the time required for exposure by the image sensor from the predicted end time of generation of the display image to start the next exposure of the image sensor. The image pickup apparatus according to any one of items 1 to 5.
前記連写が開始されると、前記第1の生成手段による前記アナログ画像データの読み出しが完了する毎に前記絞り手段の制御を開始する第3の制御手段とを備えることを特徴とする請求項6記載の撮像装置。
撮像装置。 Further comprising diaphragm means for controlling the amount of light incident on the image sensor,
A third control unit that starts control of the aperture unit each time the reading of the analog image data by the first generation unit is completed when the continuous shooting is started. 6. The imaging device according to 6.
Imaging device.
前記アナログ画像データを読み出してデジタル画像データに変換し、前記デジタル画像データから記録用画像及び非記録用画像を生成する第2の生成ステップ、
前記記録用画像を第1の伝送路を介して記録部に転送する第1の転送ステップと、
前記非記録用画像から表示用画像を生成する第3の生成ステップと、
前記表示用画像を第2の伝送路を介して画像表示部に転送する第2の転送ステップとを有することを特徴とする撮像装置の制御方法。 A first generation step of converting an optical image obtained by exposure by the image sensor into an electric signal to generate analog image data;
A second generating step of reading the analog image data, converting the analog image data into digital image data, and generating a recording image and a non-recording image from the digital image data;
A first transfer step of transferring the recording image to a recording unit via a first transmission path;
A third generation step of generating a display image from the non-recording image,
A second transfer step of transferring the display image to the image display unit via a second transmission path.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018220302A JP2020088600A (en) | 2018-11-26 | 2018-11-26 | Image pick-up device, imaging apparatus, control method, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018220302A JP2020088600A (en) | 2018-11-26 | 2018-11-26 | Image pick-up device, imaging apparatus, control method, and program |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2020088600A true JP2020088600A (en) | 2020-06-04 |
Family
ID=70909111
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018220302A Pending JP2020088600A (en) | 2018-11-26 | 2018-11-26 | Image pick-up device, imaging apparatus, control method, and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2020088600A (en) |
-
2018
- 2018-11-26 JP JP2018220302A patent/JP2020088600A/en active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5276308B2 (en) | Imaging apparatus and control method thereof | |
JP2013046259A (en) | Video apparatus, control method, and program | |
JP2006287803A (en) | Imaging device | |
JP6238756B2 (en) | Imaging apparatus, control method, and program | |
JP6198600B2 (en) | Image processing apparatus, imaging apparatus, control method thereof, and program | |
JP2008167293A (en) | Imaging apparatus and imaging method | |
JP5432664B2 (en) | Imaging device | |
JP2007081465A (en) | Remote controller and imaging apparatus | |
JP5063372B2 (en) | Image processing apparatus, control method, and program | |
JP2018152630A (en) | Image processing apparatus and method, and imaging apparatus | |
JP2016019161A (en) | Imaging device | |
JP6559014B2 (en) | Imaging apparatus, control method thereof, and program | |
JP6300569B2 (en) | Imaging apparatus and control method thereof | |
JP2020088600A (en) | Image pick-up device, imaging apparatus, control method, and program | |
JP2016092467A (en) | Imaging device, control method and program therefor | |
JP2012156886A (en) | Imaging apparatus | |
JP2014053777A (en) | Imaging apparatus | |
JP5882794B2 (en) | Imaging device | |
JP5448498B2 (en) | Imaging apparatus, control method thereof, and program | |
JP4993683B2 (en) | Imaging apparatus and control method thereof | |
JP2006203665A (en) | Imaging device and method therefor, and recording medium and program | |
JP2011130198A (en) | Imaging apparatus, control method thereof and program | |
JP2015171113A (en) | Image processing system and control method of the same | |
JP2017038300A (en) | Image processing apparatus and method | |
JP2016208206A (en) | Recording apparatus |