JP2013162187A - Image recording and reproducing apparatus - Google Patents

Abstract

PROBLEM TO BE SOLVED: To record the situation before photography as moving images by being interlocked with photography of still images, and eliminate an influence by a zoom operation to be performed during stand-by, a camera setting operation, and a photography preparation operation for photographing the still images to be performed in depression of a release switch.SOLUTION: An image recording and reproducing apparatus includes: means for continuously reading output of imaging means to generate images for display, moving images, and still images; means for storing the images for display, the moving images, and the still images; means for displaying the images for display; means for recording the stored moving images, and the still images in a recording medium; and means for performing a photography instruction. The apparatus generates the images for display to be displayed, generates the moving images, generates the still images according to the photography instruction, starts generation of the moving images on the basis of completion of photography preparation to be instructed at a first position of the photography instruction means when the moving images are recorded in the recording medium together with the still images, and records moving image data photographed by tracking back for predetermined time from still image photography in accordance with still image photography to be instructed at a second position of the photography instruction means.

Description

本発明は、撮像素子の出力を利用して動画像を撮像記録及び、再生する画像記録再生装置に関するものである。   The present invention relates to an image recording / reproducing apparatus that captures, records, and reproduces a moving image using an output of an image sensor.

近年のデジタルカメラなどの画像記録再生装置では、音声付き動画を撮影記録及び、再生する様々な方式が採られる。従来通り、使用者が撮影記録の開始指示をしてから終了指示をするまで撮影し続ける方式や、撮影記録の開始指示から予め決められた時間だけ撮影記録する方式がある。   2. Description of the Related Art Recent image recording / playback apparatuses such as digital cameras employ various methods for shooting, recording, and playing back moving images with sound. As usual, there are a method in which shooting is performed until a user gives an instruction to start recording after the start of shooting / recording, and a method of shooting / recording for a predetermined time from a shooting / recording start instruction.

前者の方式で撮影された動画を再生する場合は、画像データ単位で再生し、後者の方式で撮影された動画を再生する場合には、複数の画像データから再生リストを作成して、その順序にしたがって連続して複数の動画を連続して再生する方式が採られている。   When playing back movies shot with the former method, playback is performed in units of image data. When playing back movies shot with the latter method, a playlist is created from multiple image data, and the order is Accordingly, a method of continuously playing back a plurality of moving images is adopted.

しかしながら、静止画と動画を撮り分けたりすることの煩わしさから、静止画撮影に連動して静止画撮影前を動画として記録することが考えられる。   However, it is conceivable to record the pre-still image shooting as a moving image in conjunction with the still image shooting because of the trouble of separately taking the still image and the moving image.

特許文献１では、静止画モードと動画モードを有し、半押しと全押しの２段階操作を備えたダブルアクションレリーズスイッチと、半押し時間計時を行う手段があり、動画モードで半押しが所定時間より短く全押しされたら動画のみ、半押しが所定時間より長く全押しされたら動画と静止画を記録する技術が提案されている。   In Patent Document 1, there is a double action release switch having a still image mode and a moving image mode, and a two-step operation of half-pressing and full-pressing, and means for measuring the time of half-pressing. A technique has been proposed in which only a moving image is recorded when the button is fully pressed for less than the time, and a moving image and a still image are recorded when the half-press is pressed for a longer time than the predetermined time.

具体的な動作フローによれば、動画記録前の場合、半押し状態が短く全押しされた時には、動画記録開始し、半押し状態が長く全押しされた時には、静止画撮影してから動画記録開始する。また、動画記録中の場合、半押し状態が短く全押しされた時には、動画記録終了し、半押し状態が長く全押しされた時には、静止画撮影してから動画記録終了するものである。   According to the specific operation flow, before recording a movie, when the half-pressed state is short and fully pressed, the movie recording starts.When the half-pressed state is fully pressed for a long time, a still image is shot and then the movie is recorded. Start. In addition, during video recording, video recording ends when the half-pressed state is fully pressed for a short time, and when the half-pressed state is fully pressed for a long time, a still image is shot and video recording ends.

特開２０１０−１１４１６号公報JP 2010-11416 A

しかしながら、上述の特許文献１に開示された従来技術では、静止画撮影時に動画記録開始と終了の場合があり、レリーズスイッチ保持時間で静止画撮影が決定する。したがって、静止画撮影タイミングに対して、動画は前の時と後ろの時があり、使用者が静止画撮影時に動画撮影中か否か強く意識する必要があった。また、静止画撮影に伴う操作音や駆動音が記録される動画に混入する可能性があった。   However, in the conventional technique disclosed in Patent Document 1 described above, there are cases where moving image recording starts and ends during still image shooting, and still image shooting is determined by the release switch holding time. Therefore, there are moving images before and after the still image shooting timing, and it is necessary for the user to be conscious of whether or not moving images are being shot at the time of still image shooting. Further, there is a possibility that operation sounds and driving sounds accompanying still image shooting may be mixed in a moving image to be recorded.

本発明の目的は、静止画撮影に連動してレリーズ前の様子を動画として記録すると共に、静止画撮影の待機中に行われるズーム操作、カメラ設定操作及び、レリーズスイッチ押下時に行われる静止画撮影用の撮影準備動作による影響を排除できる画像記録再生装置を提供することである。   An object of the present invention is to record the state before release as a moving image in conjunction with still image shooting, and also to perform zoom operation, camera setting operation, and still image shooting performed when the release switch is pressed during standby for still image shooting. It is an object of the present invention to provide an image recording / reproducing apparatus that can eliminate the influence of a shooting preparation operation.

上記目的を達成するために、本発明は、被写体像を形成する光学系と、該光学系により形成された光学像を電気信号に変換する撮像手段と、該撮像手段の出力を連続的に読み出して表示用画像及び、記録用動画像を生成する動画像生成手段と、前記撮像素子の出力を読み出して記録用静止画像を生成する静止画像生成手段と、前記表示用画像の一時記憶、前記記録用動画像及び、前記記録用静止画像を蓄積記憶する記憶手段と、表示用画像を表示する表示手段と、蓄積記憶した前記記録用動画像及び、前記静止画画像を記録媒体に記録する記録手段と、撮影指示を行う撮影指示手段とを備え、
表示用画像を生成して表示すると共に、前記記録用動画像を生成して蓄積記憶し、前記撮影指示に応じて、前記記録用静止画像を生成して蓄積記憶すると共に、前記記録用静止画と共に前記記録用動画像を記録媒体に記録する画像記録再生装置において、
前記撮影指示は、撮影準備を指示する第一の位置と、撮影記録を指示する第二の位置を備えて、前記撮影指示手段の第一の位置で指示される撮影準備完了に基づいて前記記録用動画像の生成を開始し、前記撮影指示手段の第二の位置で指示される静止画撮影に伴って、静止画撮影から所定時間遡って撮影した動画データを記録することを特徴とする。 In order to achieve the above object, the present invention provides an optical system that forms a subject image, an imaging unit that converts an optical image formed by the optical system into an electrical signal, and an output of the imaging unit is continuously read out. A moving image generating means for generating a display image and a recording moving image, a still image generating means for generating a recording still image by reading the output of the image sensor, a temporary storage of the display image, and the recording Storage means for accumulating and storing moving images and recording still images; Display means for displaying display images; Recording means for storing and storing the recorded moving images and still image images on a recording medium And a shooting instruction means for giving a shooting instruction,
In addition to generating and displaying a display image, the recording moving image is generated and stored and stored, and the recording still image is generated and stored according to the shooting instruction, and the recording still image is displayed. And an image recording / reproducing apparatus for recording the recording moving image on a recording medium,
The shooting instruction includes a first position for instructing shooting preparation and a second position for instructing shooting recording, and the recording is based on completion of shooting preparation instructed at the first position of the shooting instruction means. The generation of the moving image is started, and the moving image data photographed for a predetermined time from the still image photographing is recorded along with the still image photographing designated at the second position of the photographing instruction means.

本発明によれば、操作部材の操作音、ズームレンズの駆動音、動画用とは異なる静止画撮影用のズームレンズ駆動による画角の見え方、自動露出制御による絞り駆動の様子や絞り駆動音、自動焦点調節制御による被写体ピントずれの様子やフォーカスモーター駆動音などが動画として記録されることを排除できる。また、待機中に行われるホワイトバランスモード、カラー調整または、露出補正における補正値など変更の様子が記録される動画像に影響を与えないようにできる。   According to the present invention, the operation sound of the operation member, the driving sound of the zoom lens, the view angle of view by the zoom lens driving for still image shooting different from that for moving images, the state of aperture driving by automatic exposure control, and the aperture driving sound In addition, it is possible to eliminate the fact that the subject is out of focus or the focus motor drive sound is recorded as a moving image by the automatic focus adjustment control. In addition, it is possible to prevent the moving image in which changes such as the white balance mode, color adjustment, or correction value in exposure correction performed during standby are recorded from being affected.

本実施例の画像記録再生装置のブロック図Block diagram of the image recording / reproducing apparatus of the present embodiment 本実施例の動作を示すフローチャートFlow chart showing the operation of this embodiment 本実施例のＡＦ動作を示すフローチャートFlowchart showing the AF operation of the present embodiment 本実施例のＡＥ動作を示すフローチャートFlow chart showing the AE operation of this embodiment

以下、添付図面を参照して本発明を実施する最良の形態を詳細に説明する。   The best mode for carrying out the present invention will be described below in detail with reference to the accompanying drawings.

図１は、本実施の形態に係る画像記録再生装置システムの構成を示すブロック図である。同図において、１００は画像記録装置本体、１１０はズームレンズ、１１１はカメラのブレを補正するシフトレンズ、１１２は焦点調節用フォーカスレンズ、１１３は後段への光束を遮断するメカニカルシャッタ、１１４は後段への光束を調節する絞りである。１１５は撮像素子、１１６は撮像素子１１５を駆動及び、サンプリングに必要なタイミングパルスを発生するタイミング発生器である。   FIG. 1 is a block diagram showing a configuration of an image recording / reproducing apparatus system according to the present embodiment. In the figure, 100 is an image recording apparatus main body, 110 is a zoom lens, 111 is a shift lens that corrects camera shake, 112 is a focus adjusting focus lens, 113 is a mechanical shutter that blocks light flux to the subsequent stage, and 114 is a subsequent stage. This is a diaphragm that adjusts the luminous flux to the lens. Reference numeral 115 denotes an image sensor, and 116 denotes a timing generator that drives the image sensor 115 and generates timing pulses necessary for sampling.

１１７は、撮像駆動用の同期信号を発生するＳＳＧ回路や、撮像出力となるデジタル出力を受信し、前処理回路、ＡＦ評価値演算回路、輝度積分回路、信号処理回路、顔検出回路、縮小回路、ラスタブロック変換回路及び、圧縮回路を含む画像処理部である。ＳＳＧ回路では、タイミング発生器から撮像駆動用のクロックを受けて、水平及び、垂直同期信号を発生し、タイミング発生器と撮像素子に出力する。前処理回路では、入力画像を行単位で輝度積分回路と信号処理回路とに分配する。また、撮像データに必要となるチャネル間のデータ補正等の処理を行う。ＡＦ評価値演算回路では、設定された複数の評価領域内に入力される画像信号の輝度成分について水平方向のフィルタ処理を施し、コントラストをあらわす所定周波数を抽出しながら最大値を選択し、垂直方向に積分演算を行う。輝度積分回路では、ＲＧＢ信号から輝度成分を混合生成し、入力画像を複数領域に分割し、領域毎に輝度成分を生成する。信号処理回路では、撮像素子出力データに色キャリア除去、アパーチャー補正、ガンマ補正処理等を行って輝度信号を生成する。同時に、色補間、マトリックス変換、ガンマ処理、ゲイン調整等を施して色差信号を生成し、メモリ部１２３にＹＵＶ形式の画像データを形成する。また、信号処理回路では、生成するＹＵＶ形式の画像データの輝度信号（Ｙ）をそのレベル毎に集計し、画像データ毎の輝度分布データを生成する。   Reference numeral 117 denotes an SSG circuit that generates a synchronization signal for imaging drive, and a digital output that is an imaging output, and receives a preprocessing circuit, an AF evaluation value calculation circuit, a luminance integration circuit, a signal processing circuit, a face detection circuit, and a reduction circuit. , An image processing unit including a raster block conversion circuit and a compression circuit. The SSG circuit receives an imaging drive clock from the timing generator, generates horizontal and vertical synchronization signals, and outputs them to the timing generator and the image sensor. The preprocessing circuit distributes the input image to the luminance integration circuit and the signal processing circuit in units of rows. Further, processing such as data correction between channels necessary for imaging data is performed. In the AF evaluation value calculation circuit, the luminance component of the image signal input in the set plurality of evaluation areas is subjected to horizontal filtering, and the maximum value is selected while extracting a predetermined frequency representing contrast, and the vertical direction Perform the integral operation. In the luminance integration circuit, luminance components are mixed and generated from RGB signals, the input image is divided into a plurality of regions, and a luminance component is generated for each region. The signal processing circuit generates a luminance signal by performing color carrier removal, aperture correction, gamma correction processing, and the like on the image sensor output data. At the same time, color interpolation, matrix conversion, gamma processing, gain adjustment, and the like are performed to generate a color difference signal, and image data in YUV format is formed in the memory unit 123. In the signal processing circuit, the luminance signals (Y) of the YUV format image data to be generated are tabulated for each level, and luminance distribution data for each image data is generated.

縮小回路では、信号処理回路の出力を受けて、入力される画素データの切り出し、間引き及び、線形補間処理等を行い、水平垂直方向に画素データの縮小処理を施す。それを受けて、ラスタブロック変換回路では、縮小回路で変倍されたラスタスキャン画像データをブロックスキャン画像データに変換する。こうした一連の画像処理は、メモリ部１２３がバッファメモリとして用いられて実現される。圧縮回路は、バッファメモリでブロックスキャンデータに変換したＹＵＶ画像データを動画圧縮方式に従って圧縮して、動画ビットストリームを出力する。   The reduction circuit receives the output of the signal processing circuit, cuts out input pixel data, performs thinning, linear interpolation processing, and the like, and performs pixel data reduction processing in the horizontal and vertical directions. In response to this, the raster block conversion circuit converts the raster scan image data scaled by the reduction circuit into block scan image data. Such a series of image processing is realized by using the memory unit 123 as a buffer memory. The compression circuit compresses the YUV image data converted into the block scan data by the buffer memory according to the moving image compression method, and outputs a moving image bit stream.

１１８はメカニカルシャッタ１１３、絞り１１４を制御する露出制御部である。１１８はズームレンズ１１０、焦点調節レンズ１１２を光軸上に沿って移動させ、被写界像を撮像素子１１５上に結像させるレンズ制御部である。また、角速度センサと加速度センサの出力に応じてシフトレンズを駆動し、画像記録再生装置の手ブレを光学的に補正する。また、１２０は撮影指示を行うレリーズスイッチである。   An exposure control unit 118 controls the mechanical shutter 113 and the diaphragm 114. A lens control unit 118 moves the zoom lens 110 and the focus adjustment lens 112 along the optical axis, and forms an object scene image on the image sensor 115. Further, the shift lens is driven in accordance with the outputs of the angular velocity sensor and the acceleration sensor, and the camera shake of the image recording / reproducing apparatus is optically corrected. Reference numeral 120 denotes a release switch for instructing photographing.

１２７は入力された音声を音声信号に変換するマイクロフォン、１２８はマイクロフォンの音声出力をデジタル音声信号に変換するＡ／Ｄ変換器、１２９は、デジタル音声データに所定の音声処理を施し、音声ビットストリームを出力する音声処理部である。   Reference numeral 127 denotes a microphone that converts input sound into a sound signal, 128 denotes an A / D converter that converts the sound output of the microphone into a digital sound signal, and 129 performs predetermined sound processing on the digital sound data to generate an audio bitstream. Is a voice processing unit that outputs.

これらの制御は、ＣＰＵとそのインターフェイス回路、ＤＭＡＣ（Direct・Memory・Access・Controller）、バスアービター等で構成されるシステム制御回路１２１で行われる。ＣＰＵが実行するプログラムは、フラッシュメモリ１２２に記憶されている。   These controls are performed by a system control circuit 121 including a CPU and its interface circuit, a DMAC (Direct Memory Access Controller), a bus arbiter, and the like. A program executed by the CPU is stored in the flash memory 122.

１４２は電源となる電池、１３０と１４１は画像記録装置１００と電池１４２とを係合させる接続端子、１４０は画像記録装置１００に電池１４２を保持する電池ＢＯＸである。１３３は画像を記録する記録媒体、１２５と１３２は、画像記録装置１００と記録媒体１３３とを係合させる接続端子、１３４は記録媒体の書き込み禁止スイッチを検出するスイッチ、１２６は記録媒体１３３の着脱を検出する検出スイッチである。   142 is a battery serving as a power source, 130 and 141 are connection terminals for engaging the image recording apparatus 100 and the battery 142, and 140 is a battery BOX that holds the battery 142 in the image recording apparatus 100. Reference numeral 133 denotes a recording medium for recording an image; 125 and 132, connection terminals for engaging the image recording apparatus 100 and the recording medium 133; 134, a switch for detecting a write-protect switch of the recording medium; 126, attachment / detachment of the recording medium 133 This is a detection switch for detecting.

１５０は画像処理部１１７で生成され、メモリ部１２３に記憶された画像データを表示用画像に変換してモニタに転送する再生回路、１５１は表示装置である。再生回路１５０では、ＹＵＶ形式の画像データを輝度成分信号Ｙと変調色差成分Ｃとに分離し、Ｄ／Ａ変換を行ったアナログ化されたＹ信号にＬＰＦを施す。また、Ｄ／Ａ変換を行ったアナログＣ信号にＢＰＦを施して変調色差成分の周波数成分のみを抽出する。こうして生成された信号成分とサブキャリア周波数に基づいて、Ｙ信号とＲＧＢ信号に変換生成して、モニタ１５１に出力される。このように、撮像素子からの画像データを逐次処理して表示することによってＥＶＦが実現される。   Reference numeral 150 denotes a reproduction circuit that converts image data generated by the image processing unit 117 and stored in the memory unit 123 into a display image and transfers it to a monitor, and 151 denotes a display device. The reproduction circuit 150 separates the YUV format image data into a luminance component signal Y and a modulated chrominance component C, and applies LPF to the analog Y signal subjected to D / A conversion. Further, BPF is applied to the analog C signal that has been subjected to D / A conversion, and only the frequency component of the modulated color difference component is extracted. Based on the signal component thus generated and the subcarrier frequency, the signal is converted into a Y signal and an RGB signal and output to the monitor 151. Thus, EVF is realized by sequentially processing and displaying the image data from the image sensor.

１８０はモード変更を指示するモードダイヤル、１８１はズームレンズを操作するズームスイッチ、１８２は露出補正スイッチ、１８３はホワイトバランスのモードを変更するＷＢスイッチである。   Reference numeral 180 denotes a mode dial for instructing a mode change, 181 denotes a zoom switch for operating the zoom lens, 182 denotes an exposure correction switch, and 183 denotes a WB switch for changing a white balance mode.

図２は本発明の画像記録再生装置の動作を示すフローチャートである。このフローチャートを用いて、画像記録再生装置の動作を説明する。また、これらの動作は、システム制御回路１２１がフラッシュメモリ１２２に記憶されたプログラムをロードして実行することで実現する。   FIG. 2 is a flowchart showing the operation of the image recording / reproducing apparatus of the present invention. The operation of the image recording / playback apparatus will be described using this flowchart. Also, these operations are realized by the system control circuit 121 loading and executing a program stored in the flash memory 122.

画像記録再生装置が起動すると自動露出制御によって得られる略適正露出の撮像素子１１５出力から表示用画像を生成する（Ｓ２０１）。具体的には、システム制御回路１２１が予めプログラミングされた同期信号パターンを画像処理部１１７のＳＳＧ回路に設定する。ＳＳＧ回路は、タイミング発生回路１１６のクロックに基づいて、水平及び、垂直同期信号を出力する。撮像素子１１５は、これらの同期信号に基づいて生成されるタイミング発生器１１６の出力にしたがって駆動され、連続的に撮像して得られたデジタル画像データが画像処理部に取り込まれる。取り込まれた画像データは後に説明する自動露出制御を受けて、略適正露出で画像処理部に取り込まれるようになる。その後、順次、先に説明した画像処理を受けて、表示用のＹＵＶデータのＹＵＶデータに変換され、メモリ部１２３に書き込まれる。書き込まれたＹＵＶデータは、先に説明した方法で表示装置１５１に表示される。   When the image recording / reproducing apparatus is activated, a display image is generated from the output of the image sensor 115 with substantially appropriate exposure obtained by automatic exposure control (S201). Specifically, the system control circuit 121 sets a synchronization signal pattern programmed in advance in the SSG circuit of the image processing unit 117. The SSG circuit outputs horizontal and vertical synchronization signals based on the clock of the timing generation circuit 116. The image sensor 115 is driven according to the output of the timing generator 116 generated based on these synchronization signals, and digital image data obtained by continuously capturing images is taken into the image processing unit. The captured image data is subjected to automatic exposure control, which will be described later, and is captured by the image processing unit with substantially proper exposure. Thereafter, the image processing described above is sequentially received, converted into YUV data for display YUV data, and written into the memory unit 123. The written YUV data is displayed on the display device 151 by the method described above.

次に、記録再生装置のモードが静止画撮影に連動して動画を撮影記録するモードであるかを判定し、モードダイヤル１８０でモードが変更された場合には、変更後のモードに遷移するためにこの後の動作を終了する（Ｓ２０２）。   Next, it is determined whether the mode of the recording / playback apparatus is a mode for shooting and recording a moving image in conjunction with still image shooting. When the mode is changed with the mode dial 180, the mode is changed to the changed mode. The subsequent operation is terminated (S202).

次にズームスイッチ１８１が操作されたかを判定し（Ｓ２０３）、操作された場合には、操作に応じてＷｉｄｅ若しくは、Ｔｅｌｅ方向にズームレンズ１１０を駆動する（Ｓ２０４）。   Next, it is determined whether the zoom switch 181 has been operated (S203). If the zoom switch 181 has been operated, the zoom lens 110 is driven in the Wide or Tele direction according to the operation (S204).

次に露出補正スイッチ１８２が操作されたかを判定し（Ｓ２０５）、操作された場合には、操作によって設定された補正量に応じて、撮像素子の蓄積時間若しくは、絞り１１４を駆動し、露出補正を行う（Ｓ２０６）。   Next, it is determined whether or not the exposure correction switch 182 has been operated (S205). If the exposure correction switch 182 has been operated, the accumulation time of the image sensor or the diaphragm 114 is driven in accordance with the correction amount set by the operation, and exposure correction is performed. (S206).

次にＷＢスイッチ１８３が操作されたかを判定し（Ｓ２０７）、操作された場合には、操作によって設定されたホワイトバランスモードに設定を行う（Ｓ２０８）。   Next, it is determined whether the WB switch 183 has been operated (S207). If the WB switch 183 has been operated, the white balance mode set by the operation is set (S208).

次にレリーズスイッチが第一の位置まで操作されると（Ｓ２０９）、静止画撮影用の準備即ち、自動露出制御並びに、自動焦点調節を行う（Ｓ２１０）。   Next, when the release switch is operated to the first position (S209), preparation for still image shooting, that is, automatic exposure control and automatic focus adjustment are performed (S210).

撮影準備が完了すると、記録用動画像の生成と音声サンプリングを開始する（Ｓ２１１）。具体的には、表示用画像と同様にして、画像処理部に取り込まれた画像データを順次、動画記録用のＹＵＶデータに変換する。画像処理部の圧縮部では、動画記録用のＹＵＶデータを圧縮して動画ビットストリームを出力する。システム制御回路１２１は、動画ビットストリームと音声ビットストリームから記録用の動画データをメモリに逐次メモリ部１２３に蓄積する。記録用動画像を蓄積するメモリ部１２３内の動画バッファは、静止画と共に記録する動画像の記録時間に相当する容量が割り当てられ、一般的なリングバッファとして使用する。   When preparation for photographing is completed, generation of a moving image for recording and audio sampling are started (S211). Specifically, similarly to the display image, the image data captured by the image processing unit is sequentially converted into YUV data for moving image recording. The compression unit of the image processing unit compresses the YUV data for moving image recording and outputs a moving image bit stream. The system control circuit 121 sequentially stores moving image data for recording from the moving image bit stream and the audio bit stream in the memory unit 123 in a memory. The moving image buffer in the memory unit 123 that stores the recording moving image is assigned a capacity corresponding to the recording time of the moving image to be recorded together with the still image, and is used as a general ring buffer.

記録用動画像生成開始後、レリーズスイッチが放されると（Ｓ２１２）、記録用動画像生成と音声サンプリングを終了する（Ｓ２１３）。   When the release switch is released after the start of the recording moving image generation (S212), the recording moving image generation and the audio sampling are finished (S213).

また、レリーズスイッチが第二の位置まで操作されると（Ｓ２１４）、表示装置の画像表示を停止すると共に、表示用画像の生成と記録用動画像の生成と音声サンプリングを終了する（Ｓ２１５）。引き続いて、記録用の静止画撮影を行う（Ｓ２１６）。   When the release switch is operated to the second position (S214), the display of the display device is stopped, and the generation of the display image, the generation of the moving image for recording, and the audio sampling are ended (S215). Subsequently, recording still image shooting is performed (S216).

撮影準備完了から開始し、静止画撮影に伴って生成を終了した記録用動画像の記録時間が所定時間を超えたかを判定し（Ｓ２１７）、所定時間以上の場合にはリングバッファに蓄積した動画を記録媒体１３３に記録後（Ｓ２１８）、静止画の現像処理を行い（Ｓ２１９）、記録媒体１３３に記録する（Ｓ２２０）。   It is determined whether or not the recording time of the recording moving image that has started from completion of shooting preparation and has been generated along with still image shooting has exceeded a predetermined time (S217). Is recorded on the recording medium 133 (S218), the still image is developed (S219), and is recorded on the recording medium 133 (S220).

＜静止画撮影用ＡＦ動作の説明＞
図３は静止画撮影前に行う自動焦点調節制御のフローチャートである。自動焦点調節制御は、システム制御回路１２１のプログラム領域に記憶されたプログラムによって行われる。 <Explanation of AF operation for still image shooting>
FIG. 3 is a flowchart of automatic focus adjustment control performed before still image shooting. The automatic focus adjustment control is performed by a program stored in the program area of the system control circuit 121.

プログラムはレンズを駆動するレンズ制御部１１９、被写体の合焦評価値を測定する評価部とから成り、撮像素子１１５の露光単位でレンズ位置を移動させながらレンズ位置に評価値を対応付ける。被写界深度に応じたレンズのスキャン範囲でデータのサンプリングを行って、一定のアルゴリズムで最終的なレンズ位置を決定する。   The program includes a lens control unit 119 that drives the lens and an evaluation unit that measures the focus evaluation value of the subject, and associates the evaluation value with the lens position while moving the lens position in the exposure unit of the image sensor 115. Data sampling is performed within a lens scanning range corresponding to the depth of field, and a final lens position is determined by a predetermined algorithm.

まず、フォーカスレンズ１１２をリセットし初期位置へ移動し（Ｓ３０１）、露光カウント値（Ｎ）と焦点評価値カウント（Ｍ）を初期化する（Ｓ３０２）。次に焦点距離に応じたサンプリング数を決定し、サンプリング総数と通常撮像駆動時の駆動レートによるサンプリング総時間を求める（Ｓ３０３）。サンプリング総時間が所定時間内であれば（Ｓ３０４）、通常撮像駆動に設定し（Ｓ３０５）、所定時間以上であれば高速撮像駆動に設定する（Ｓ３０６）。   First, the focus lens 112 is reset and moved to an initial position (S301), and an exposure count value (N) and a focus evaluation value count (M) are initialized (S302). Next, the number of samplings corresponding to the focal length is determined, and the total sampling time based on the total number of samplings and the driving rate during normal imaging driving is obtained (S303). If the total sampling time is within the predetermined time (S304), the normal imaging drive is set (S305), and if the total sampling time is longer than the predetermined time, the high-speed imaging drive is set (S306).

撮像駆動が確定してＡＦ動作が開始されると、フォーカスレンズ１１２をスキャン開始位置に相当する第１ステップに移動する（Ｓ３０７）。   When the imaging drive is confirmed and the AF operation is started, the focus lens 112 is moved to the first step corresponding to the scan start position (S307).

次に、スキャン開始位置である第１ステップにおいて撮像素子１１５の露光完了を待つ（Ｓ３０８）。露光が完了したら、露光カウントをインクリメントし（Ｓ３０９）、露光カウント値がサンプリング総数値以下ならば（Ｓ３１０）、第２のステップにレンズを移動させて（Ｓ３１１）、第２の露光期間中に読み出される画像データを輝度の高周波成分の抽出を行う（Ｓ３１２）。また、得られた焦点評価値とフォーカスレンズ１１２の位置との対応を記憶し（Ｓ３１３）、焦点評価値カウントをインクリメントし（Ｓ３１４）、第２の露光を待つ（Ｓ３０８）。このようにして、焦点評価値がサンプリング総数揃うまでを繰り返し行う（Ｓ２１５）。そして、全サンプリングが完了した時点で、焦点評価値の最も出力の大きいレンズ位置に移動して終了する。   Next, the completion of exposure of the image sensor 115 is awaited in the first step which is the scan start position (S308). When the exposure is completed, the exposure count is incremented (S309), and if the exposure count value is equal to or less than the total sampling value (S310), the lens is moved to the second step (S311) and read during the second exposure period. The high-frequency component of luminance is extracted from the image data to be obtained (S312). Further, the correspondence between the obtained focus evaluation value and the position of the focus lens 112 is stored (S313), the focus evaluation value count is incremented (S314), and the second exposure is waited (S308). In this way, the process is repeated until the focus evaluation values are equal to the total number of samplings (S215). Then, when all the samplings are completed, the lens is moved to the lens position with the largest output of the focus evaluation value, and the process ends.

＜自動露出制御の説明＞
図４は、動画撮影記録中におけるＡＥ（自動露出制御）動作のフローチャートである。このフローチャートを用いて、本実施例に係わるＡＥ動作を説明する。この動作もシステム制御回路１２１がフラッシュメモリ１２２に記憶されたプログラムをロードして実行することで実現する。 <Explanation of automatic exposure control>
FIG. 4 is a flowchart of an AE (automatic exposure control) operation during moving image shooting and recording. The AE operation according to the present embodiment will be described using this flowchart. This operation is also realized by the system control circuit 121 loading and executing a program stored in the flash memory 122.

システム制御回路１２１のＣＰＵは、撮像素子１１５の駆動を開始し（Ｓ４００）、画像処理部１１７の輝度積分回路に対し、入力画像を複数領域に分割し、領域毎に輝度成分を生成するための設定を行う（Ｓ４０１）。初期の露出制御を行い（Ｓ４０２）、この露出制御下での輝度積分が完了するのを待つ（Ｓ４０３）。輝度積分が完了すると、分割した領域毎の積分結果の評価演算を行い、適正露出からのずれ量を共に被写界輝度を求める（Ｓ４０４）。求められた被写界輝度に適合する露出制御値に基づいて次の露光タイミングの露出制御を行う（Ｓ４０５）。これらを終了指示まで続ける（Ｓ４０６）。   The CPU of the system control circuit 121 starts driving the image sensor 115 (S400), divides the input image into a plurality of areas for the luminance integration circuit of the image processing unit 117, and generates a luminance component for each area. Settings are made (S401). Initial exposure control is performed (S402), and the completion of luminance integration under this exposure control is awaited (S403). When the luminance integration is completed, evaluation calculation of the integration result for each divided area is performed, and the field luminance is obtained together with the amount of deviation from the appropriate exposure (S404). Based on the exposure control value that matches the determined field luminance, exposure control is performed at the next exposure timing (S405). These are continued until the end instruction (S406).

以上のように、静止画撮影に連動して、静止画撮影前の様子を動画として記録すると共に、静止画撮影に伴う撮影準備完了から記録用動画像を生成することにより、レリーズスイッチ操作前に行われるズーム操作、露出補正、ホワイトバランスモード変更に伴う画質や音質への影響（操作音、駆動音、画像の不自然な変化）を排除することができる。   As described above, in conjunction with still image shooting, the state before still image shooting is recorded as a moving image, and a moving image for recording is generated from the completion of shooting preparation associated with still image shooting, so that the release switch can be operated. It is possible to eliminate the influence on the image quality and sound quality (operation sound, drive sound, unnatural change in image) due to zoom operation, exposure correction, and white balance mode change.

本発明は、静止画撮影に連動して撮影された動画を静止画と共に記録する技術に関する。   The present invention relates to a technique for recording a moving image shot in conjunction with still image shooting together with a still image.

１１２：フォーカスレンズ、１１５：撮像素子、１１６：タイミング発生部、１１７：画像処理部、１１８：レンズ駆動部、１２１：システム制御部、１２７：マイクロフォン、１２８：音声用Ａ／Ｄ変換器、１２９：音声処理部、１８０：モードダイヤル、１８１：ズームスイッチ、１８２：露出補正スイッチ、１８３：ＷＢスイッチ
112: Focus lens, 115: Image sensor, 116: Timing generation unit, 117: Image processing unit, 118: Lens drive unit, 121: System control unit, 127: Microphone, 128: Audio A / D converter, 129: Audio processing unit, 180: mode dial, 181: zoom switch, 182: exposure compensation switch, 183: WB switch

Claims (2)

被写体像を形成する光学系と、該光学系により形成された光学像を電気信号に変換する撮像手段と、該撮像手段の出力を連続的に読み出して表示用画像及び、記録用動画像を生成する動画像生成手段と、前記撮像素子の出力を読み出して記録用静止画像を生成する静止画像生成手段と、前記表示用画像の一時記憶、前記記録用動画像及び、前記記録用静止画像を蓄積記憶する記憶手段と、表示用画像を表示する表示手段と、蓄積記憶した前記記録用動画像及び、前記静止画画像を記録媒体に記録する記録手段と、撮影指示を行う撮影指示手段とを備え、
表示用画像を生成して表示すると共に、前記記録用動画像を生成して蓄積記憶し、前記撮影指示に応じて、前記記録用静止画像を生成して蓄積記憶すると共に、前記記録用静止画と共に前記記録用動画像を記録媒体に記録する画像記録再生装置において、
前記撮影指示は、撮影準備を指示する第一の位置と、撮影記録を指示する第二の位置を備えて、前記撮影指示手段の第一の位置で指示される撮影準備完了に基づいて前記記録用動画像の生成を開始し、前記撮影指示手段の第二の位置で指示される静止画撮影に伴って、静止画撮影から所定時間遡って撮影した動画データを記録することを特徴とする画像記録再生装置。 An optical system for forming a subject image, an imaging means for converting the optical image formed by the optical system into an electrical signal, and an output of the imaging means are continuously read to generate a display image and a recording moving image A moving image generating means for reading, a still image generating means for reading out an output of the image sensor and generating a recording still image, a temporary storage of the display image, the recording moving image, and the recording still image are stored. Storage means for storing, display means for displaying a display image, recording moving images stored and stored, recording means for recording the still image on a recording medium, and imaging instruction means for instructing imaging ,
In addition to generating and displaying a display image, the recording moving image is generated and stored and stored, and the recording still image is generated and stored according to the shooting instruction, and the recording still image is displayed. And an image recording / reproducing apparatus for recording the recording moving image on a recording medium,
The shooting instruction includes a first position for instructing shooting preparation and a second position for instructing shooting recording, and the recording is based on completion of shooting preparation instructed at the first position of the shooting instruction means. An image characterized by starting the generation of a moving image and recording moving image data photographed a predetermined time after the still image photographing together with the still image photographing designated at the second position of the photographing instruction means Recording / playback device. 被写体像を形成する光学系と、該光学系により形成された光学像を電気信号に変換する撮像ステップと、該撮像の出力を連続的に読み出して表示用画像及び、記録用動画像を生成するステップと、前記撮像素子の出力を読み出して記録用静止画像を生成する静止画像生成ステップと、前記表示用画像の一時記憶、前記記録用動画像及び、前記記録用静止画像を蓄積記憶する記憶ステップと、表示用画像を表示するステップと、蓄積記憶した前記記録用動画像及び、前記静止画画像を記録媒体に記録するステップと、撮影指示を行うステップを備えた画像記録再生装置の制御方法であって、
表示用画像を生成して表示するステップと、前記記録用動画像を生成して蓄積記憶するステップと、前記撮影指示に応じて、前記記録用静止画像を生成して蓄積記憶するステップと、前記記録用静止画と共に前記記録用動画像を記録媒体に記録するステップを有し、前記撮影指示の撮影準備を指示する第一の位置で撮影準備を行うステップと、前記撮影指示手段の第二の位置で静止画撮影を行いステップとを有し、静止画撮影から所定時間遡って撮影した動画データを記録するステップを有することを特徴とする画像記録再生装置の制御方法。
An optical system for forming a subject image, an imaging step for converting the optical image formed by the optical system into an electric signal, and an output of the imaging are continuously read to generate a display image and a recording moving image. A step of generating a still image for recording by reading the output of the image sensor and a step of storing the temporary storage of the display image, the moving image for recording, and the still image for recording A method for controlling an image recording / reproducing apparatus, comprising: a step of displaying a display image; a step of recording the stored moving image for recording and the still image on a recording medium; and a step of issuing a shooting instruction. There,
Generating and displaying a display image; generating and storing the recording moving image; generating and storing the recording still image in response to the shooting instruction; A step of recording the recording moving image together with a recording still image on a recording medium, the step of performing shooting preparation at a first position instructing shooting preparation of the shooting instruction, and a second of the shooting instruction means A method for controlling an image recording / reproducing apparatus, comprising: taking a still image at a position and recording moving image data taken a predetermined time backward from the still image shooting.