JP2015171113A - Image processing system and control method of the same - Google Patents

Image processing system and control method of the same Download PDF

Info

Publication number
JP2015171113A
JP2015171113A JP2014047042A JP2014047042A JP2015171113A JP 2015171113 A JP2015171113 A JP 2015171113A JP 2014047042 A JP2014047042 A JP 2014047042A JP 2014047042 A JP2014047042 A JP 2014047042A JP 2015171113 A JP2015171113 A JP 2015171113A
Authority
JP
Japan
Prior art keywords
moving image
image
additional recording
unit
condition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2014047042A
Other languages
Japanese (ja)
Inventor
松本 哲
Satoru Matsumoto
哲 松本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2014047042A priority Critical patent/JP2015171113A/en
Publication of JP2015171113A publication Critical patent/JP2015171113A/en
Pending legal-status Critical Current

Links

Landscapes

  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide an image processing system which additionally records a newly photographed second moving image to a previously recorded first moving image without selecting a moving image which is additionally recorded for each photographing by a user.SOLUTION: When a newly photographed second moving image is matched with a condition which a user previously designates, it is additionally recorded in a previously recorded first moving image.

Description

本発明は、静止画像や動画像を撮像、記録、再生する画像処理装置及びその制御方法に関するものである。   The present invention relates to an image processing apparatus that captures, records, and reproduces still images and moving images, and a control method thereof.

近年、家庭用ビデオカメラやデジタルスチルカメラなどの画像処理装置が一般に普及している。この画像処理装置は、記録済みの動画像に対して、新たに撮影した動画像を追加記録する機能を備えていることがある。   In recent years, image processing apparatuses such as home video cameras and digital still cameras have become popular. This image processing apparatus may have a function of additionally recording a newly captured moving image with respect to a recorded moving image.

例えば、下記特許文献1には、記録済みのどの動画像に対して、新たに撮影した動画像を追加記録させるかを選択する表示機能を備えることで、どの動画像に追加記録させるかをユーザに解り易く提供する方法が提案されている。   For example, the following Patent Document 1 includes a display function for selecting a recorded moving image to additionally record a newly captured moving image, so that a user can determine which moving image is to be additionally recorded. There has been proposed a method for providing easy to understand.

特開2003−219325号公報JP 2003-219325 A

しかしながらこれらの画像処理装置では、例えば図1に示すように、撮影ごとに追加記録させたい動画像が変化する場合には、撮影ごとに追加記録させる動画像をユーザが選択する必要があり、利便性が低いという問題があった。   However, in these image processing apparatuses, for example, as shown in FIG. 1, when a moving image to be additionally recorded for each shooting changes, the user needs to select a moving image to be additionally recorded for each shooting. There was a problem of low nature.

本発明に係る画像処理装置に於いては、被写体を撮像して画像を得る撮像手段と、前記撮像手段によって動画像を生成する動画像生成手段と、前記動画像生成手段によって生成された第1の動画像に対して、新たに生成された第2の動画像を追加記録する条件を指定する追加記録条件指定手段と、前記第2の動画像が前記追加記録条件指定手段によって指定された条件に合致しているかを判別する判別手段と、前記判別手段によって条件に合致していると判別された際に、条件に合致した前記第1の動画像が存在する場合は、前記第2の動画像を前記第1の動画像に追加記録する動画像追加記録手段と、を備えたことを特徴とする。   In the image processing apparatus according to the present invention, an imaging unit that captures an image of a subject to obtain an image, a moving image generation unit that generates a moving image by the imaging unit, and a first image generated by the moving image generation unit. An additional recording condition designating unit that designates a condition for additionally recording the newly generated second moving image, and a condition that the second moving image is designated by the additional recording condition designating unit. And when the first moving image that matches the condition exists when it is determined by the determining means that the condition is met, the second moving image Moving image additional recording means for additionally recording an image on the first moving image.

課題を解決するための手段に記載した構成により、撮影ごとに追加記録させる動画像をユーザが選択する必要がなくなり、利便性を向上させることが可能となる。   With the configuration described in the means for solving the problem, it is not necessary for the user to select a moving image to be additionally recorded for each shooting, and convenience can be improved.

本発明が解決しようとする課題の具体例を示す図The figure which shows the specific example of the subject which this invention tends to solve 本発明を実施するための形態の構成ブロック図Configuration block diagram of an embodiment for carrying out the present invention 第1の実施形態における動画像追加記録処理のフローチャートFlowchart of moving image additional recording processing in the first embodiment 第2の実施形態における動画像追加記録処理のフローチャートFlowchart of moving image additional recording processing in the second embodiment 第3の実施形態における動画像追加記録処理のフローチャートFlowchart of moving image additional recording processing in the third embodiment 第1,2,3の実施形態における追加記録条件テーブルの構成図Configuration diagram of additional recording condition table in first, second, and third embodiments

本発明をデジタルカメラを例に用いて説明をおこなう。   The present invention will be described using a digital camera as an example.

以下、図面を参照して本発明の実施例を説明する。 図2は、本発明の実施例の構成を示す図である。
図2において、100は画像処理装置である。
Embodiments of the present invention will be described below with reference to the drawings. FIG. 2 is a diagram showing the configuration of the embodiment of the present invention.
In FIG. 2, reference numeral 100 denotes an image processing apparatus.

10は撮影レンズ、12は絞り機能を備える機械式シャッター、14は光学像を電気信号に変換する撮像素子、16は撮像素子14のアナログ信号出力をデジタル信号に変換するA/D変換器である。   10 is a photographing lens, 12 is a mechanical shutter having an aperture function, 14 is an image sensor that converts an optical image into an electrical signal, and 16 is an A / D converter that converts an analog signal output of the image sensor 14 into a digital signal. .

18は撮像素子14、 A/D変換器16にクロック信号や制御信号を供給するタイミング発生回路であり、メモリ制御回路22及びシステム制御回路50により制御される。12の機械式シャッター以外にも、18の撮像素子のリセットタイミングの制御によって、電子シャッタとして、蓄積時間を制御することが可能であり、動画撮影などに使用可能である。   A timing generation circuit 18 supplies a clock signal and a control signal to the image sensor 14 and the A / D converter 16, and is controlled by the memory control circuit 22 and the system control circuit 50. In addition to the twelve mechanical shutters, the accumulation time can be controlled as an electronic shutter by controlling the reset timing of the eighteen image sensors, and can be used for moving image shooting and the like.

20は画像処理回路であり、 A/D変換器16からのデータ或いはメモリ制御回路22からのデータに対して所定の画素補間処理や色変換処理を行う。また20の画像処理回路によって画像の切り出し、変倍処理を行うことで電子ズーム機能が実現される。   An image processing circuit 20 performs predetermined pixel interpolation processing and color conversion processing on the data from the A / D converter 16 or the data from the memory control circuit 22. Further, an electronic zoom function is realized by performing image cutting and scaling processing by 20 image processing circuits.

また、画像処理回路20においては、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてシステム制御回路50が露光制御手段40、測距制御手段42に対して制御を行う、TTL方式のAF処理、AE処理、EF処理を行っている。   Further, the image processing circuit 20 performs predetermined calculation processing using the captured image data, and the system control circuit 50 controls the exposure control means 40 and the distance measurement control means 42 based on the obtained calculation result. TTL AF processing, AE processing, and EF processing are performed.

さらに、画像処理回路20においては、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてTTL方式のAWB(オートホワイトバランス)処理も行っている。   Further, the image processing circuit 20 performs predetermined arithmetic processing using the captured image data, and also performs TTL AWB (auto white balance) processing based on the obtained arithmetic result.

22はメモリ制御回路であり、A/D変換器16、タイミング発生回路18、画像処理回路20、メモリ30、圧縮・伸長回路32を制御する。   A memory control circuit 22 controls the A / D converter 16, the timing generation circuit 18, the image processing circuit 20, the memory 30, and the compression / decompression circuit 32.

A/D変換器16のデータが画像処理回路20、メモリ制御回路22を介して、或いはA/D変換器16のデータが直接メモリ制御回路22を介して、メモリ30に書き込まれる。   The data of the A / D converter 16 is written into the memory 30 via the image processing circuit 20 and the memory control circuit 22, or the data of the A / D converter 16 is directly written via the memory control circuit 22.

28はTFT LCD等から成る画像表示部であり、メモリ20に書き込まれた表示用の画像データはメモリ制御回路22を介して画像表示部28により表示される。   Reference numeral 28 denotes an image display unit composed of a TFT LCD or the like, and display image data written in the memory 20 is displayed by the image display unit 28 via the memory control circuit 22.

画像表示部28を用いて撮像した画像データを逐次表示すれば、電子ファインダー機能を実現することが可能である。   If the image data captured using the image display unit 28 is sequentially displayed, the electronic viewfinder function can be realized.

また、画像表示部28は、システム制御回路50の指示により任意に表示をON/OFFすることが可能であり、表示をOFFにした場合には画像処理装置100の電力消費を大幅に低減することが出来る。   Further, the image display unit 28 can arbitrarily turn on / off the display according to an instruction from the system control circuit 50. When the display is turned off, the power consumption of the image processing apparatus 100 can be greatly reduced. I can do it.

30は撮影した静止画像や動画像を格納するためのメモリであり、所定枚数の静止画像や所定時間の動画像を格納するのに十分な記憶量を備えている。   Reference numeral 30 denotes a memory for storing captured still images and moving images, and has a sufficient storage capacity to store a predetermined number of still images and a predetermined time of moving images.

これにより、複数枚の静止画像を連続して撮影する連写撮影やパノラマ撮影の場合にも、高速かつ大量の画像書き込みをメモリ30に対して行うことが可能となる。   This makes it possible to write a large amount of images to the memory 30 at high speed even in continuous shooting or panoramic shooting in which a plurality of still images are continuously shot.

また、メモリ30はシステム制御回路50の作業領域としても使用することが可能である。   The memory 30 can also be used as a work area for the system control circuit 50.

31はFlashROM等で構成された不揮発性メモリである。システム制御回路50が実行するプログラムコードは不揮発性メモリ31に書き込まれ、逐次読み出しながらプログラムコードを実行する。また、不揮発性メモリ内にはシステム情報を記憶する領域や、ユーザー設定情報を記憶する領域を設け、さまざまな情報や設定を次回起動時に読み出して、復元することを実現している。   Reference numeral 31 denotes a non-volatile memory composed of a flash ROM or the like. The program code executed by the system control circuit 50 is written in the nonvolatile memory 31, and the program code is executed while being read sequentially. In addition, an area for storing system information and an area for storing user setting information are provided in the nonvolatile memory, and various information and settings are read and restored at the next startup.

32は適応離散コサイン変換(ADCT)等により画像データを圧縮伸長する圧縮・伸長回路であり、メモリ30に格納された画像を読み込んで圧縮処理或いは伸長処理を行い、処理を終えたデータをメモリ30に書き込む。   Reference numeral 32 denotes a compression / decompression circuit that compresses and decompresses image data by adaptive discrete cosine transform (ADCT) or the like, reads an image stored in the memory 30, performs compression processing or decompression processing, and stores the processed data in the memory 30. Write to.

40は絞り機能を備えるシャッター12を制御する露光制御手段であり、フラッシュ48と連動することによりフラッシュ調光機能も有するものである。   Reference numeral 40 denotes an exposure control means for controlling the shutter 12 having a diaphragm function, and has a flash light control function in conjunction with the flash 48.

42は撮影レンズ10のフォーカシングを制御する測距制御手段、44は撮影レンズ10のズーミングを制御するズーム制御手段である。   Reference numeral 42 denotes distance measurement control means for controlling the focusing of the photographing lens 10, and reference numeral 44 denotes zoom control means for controlling the zooming of the photographing lens 10.

48はフラッシュであり、AF補助光の投光機能、フラッシュ調光機能も有する。
露光制御手段40、測距制御手段42はTTL方式を用いて制御されており、撮像した画像データを画像処理回路20によって演算した演算結果に基づき、システム制御回路50が露光制御手段40、測距制御手段42に対して制御を行う。
A flash 48 has an AF auxiliary light projecting function and a flash light control function.
The exposure control means 40 and the distance measurement control means 42 are controlled using the TTL method, and based on the calculation result obtained by calculating the captured image data by the image processing circuit 20, the system control circuit 50 performs the exposure control means 40 and the distance measurement. Control is performed on the control means 42.

50は画像処理装置100全体を制御するシステム制御回路である。   A system control circuit 50 controls the entire image processing apparatus 100.

60、62、64、66、70及び72は、システム制御回路50の各種の動作指示を入力するための操作手段であり、スイッチやダイアル、タッチパネル、視線検知によるポインティング、音声認識装置等の単数或いは複数の組み合わせで構成される。   Reference numerals 60, 62, 64, 66, 70, and 72 denote operation means for inputting various operation instructions of the system control circuit 50. A single unit such as a switch, a dial, a touch panel, pointing by line-of-sight detection, a voice recognition device, or the like Consists of multiple combinations.

ここで、これらの操作手段の具体的な説明を行う。   Here, a specific description of these operating means will be given.

60はモードダイアルスイッチで、電源オフ、自動撮影モード、撮影モード、パノラマ撮影モード、動画撮影モード、再生モード、PC接続モード等の各機能モードを切り替え設定することが出来る。   Reference numeral 60 denotes a mode dial switch, which can switch and set various function modes such as power-off, automatic shooting mode, shooting mode, panoramic shooting mode, moving image shooting mode, playback mode, and PC connection mode.

62はシャッタースイッチSW1で、シャッターボタンの操作途中でONとなり、AF(オートフォーカス)処理、AE(自動露出)処理、AWB(オートホワイトバランス)処理等の動作開始を指示する。   Reference numeral 62 denotes a shutter switch SW1, which is turned ON during the operation of the shutter button, and instructs to start operations such as AF (autofocus) processing, AE (automatic exposure) processing, and AWB (auto white balance) processing.

64はシャッタースイッチSW2で、シャッターボタンの操作完了でONとなる。フラッシュ撮影の場合、EF(フラッシュプリ発光)処理を行った後に、AE処理で決定された露光時間分、撮像素子14を露光させ、フラッシュ撮影の場合、この露光期間中に発光させて、露光期間終了と同時に露光制御手段40により遮光することで、撮像素子14への露光を終了させる。撮像素子14から読み出した信号をA/D変換器16、メモリ制御回路22を介してメモリ30に画像データを書き込む読み出し処理、画像処理回路20やメモリ制御回路22での演算を用いた現像処理、メモリ30から画像データを読み出し、圧縮・伸長回路32で圧縮を行う、次に記録媒体200に画像データを書き込む記録処理という一連の処理の動作開始を指示する。   A shutter switch SW2 64 is turned on when the operation of the shutter button is completed. In the case of flash photography, after performing EF (flash pre-emission) processing, the image sensor 14 is exposed for the exposure time determined in the AE processing. In flash photography, light is emitted during this exposure period, and the exposure period. Simultaneously with the end of the exposure, the exposure control means 40 shields the light, thereby completing the exposure to the image sensor 14. A read process for writing the image data to the memory 30 via the A / D converter 16 and the memory control circuit 22 for the signal read from the image sensor 14, a development process using computations in the image processing circuit 20 and the memory control circuit 22; The image data is read from the memory 30 and compressed by the compression / decompression circuit 32. Next, the start of a series of processing operations such as recording processing for writing the image data to the recording medium 200 is instructed.

66は表示切替スイッチで、画像表示部28の表示切替をすることが出来る。この機能により、光学ファインダー104を用いて撮影を行う際に、TFT LCD等から成る画像表示部への電流供給を遮断することにより、省電力を図ることが可能となる。   Reference numeral 66 denotes a display changeover switch, which can change the display of the image display unit 28. With this function, when photographing using the optical viewfinder 104, it is possible to save power by cutting off the current supply to the image display unit such as a TFT LCD.

70は各種ボタン、タッチパネルや回転式ダイアル等からなる操作部で、メニューボタン、セットボタン、マクロボタン、マルチ画面再生改ページボタン、フラッシュ設定ボタン、単写/連写/セルフタイマー切り替えボタン等がある。またメニュー移動+(プラス)ボタン、メニュー移動−(マイナス)ボタン、再生画像移動+(プラス)ボタン、再生画像移動−(マイナス)ボタン、撮影画質選択ボタン、露出補正ボタン、日付/時間設定ボタン等もある。   Reference numeral 70 denotes an operation unit including various buttons, a touch panel, a rotary dial, and the like, including a menu button, a set button, a macro button, a multi-screen playback page break button, a flash setting button, a single shooting / continuous shooting / self-timer switching button, and the like. . Menu move + (plus) button, menu move-(minus) button, playback image move + (plus) button, playback image move-(minus) button, shooting quality selection button, exposure compensation button, date / time setting button, etc. There is also.

72はユーザーが撮像画像の倍率変更指示を行うズーム操作手段としてのズームスイッチ部である。以下、ズームスイッチ72ともいう。このズームスイッチ72は、撮像画角を望遠側に変更させるテレスイッチと、広角側に変更させるワイドスイッチからなる。このズームスイッチ72を用いることにより、ズーム制御手段44に撮影レンズ10の撮像画角の変更を指示し光学ズーム操作を行うトリガとなる。また、画像処理回路20による画像の切り出しや、画素補間処理などによる撮像画角の電子的なズーミング変更のトリガともなる。   Reference numeral 72 denotes a zoom switch unit as zoom operation means for a user to give an instruction to change the magnification of a captured image. Hereinafter, the zoom switch 72 is also referred to. The zoom switch 72 includes a tele switch that changes the imaging field angle to the telephoto side and a wide switch that changes the imaging angle of view to the wide angle side. By using the zoom switch 72, the zoom control unit 44 is instructed to change the imaging field angle of the photographing lens 10 and becomes a trigger for performing an optical zoom operation. In addition, it also serves as a trigger for electronic zooming change of the imaging angle of view by image cropping by the image processing circuit 20 or pixel interpolation processing.

86はアルカリ電池の一次電池やNiCd電池やNiMH電池、Liイオン電池等の二次電池、ACアダプター等からなる電源手段である。   Reference numeral 86 denotes a power supply means including a primary battery of an alkaline battery, a secondary battery such as a NiCd battery, a NiMH battery, or a Li ion battery, an AC adapter, or the like.

90はメモリカードやハードディスク等の記録媒体とのインタフェース、92はメモリカードやハードディスク等の記録媒体と接続を行うコネクタである。   Reference numeral 90 denotes an interface with a recording medium such as a memory card or hard disk, and reference numeral 92 denotes a connector for connecting to a recording medium such as a memory card or hard disk.

102は、画像処理装置100のレンズ10を含む撮像部を覆う事により、撮像部の汚れや破損を防止するバリアである保護手段である。   Reference numeral 102 denotes protection means that is a barrier that prevents the imaging unit from being soiled or damaged by covering the imaging unit including the lens 10 of the image processing apparatus 100.

104は光学ファインダであり、画像表示部28による電子ファインダー機能を使用すること無しに、光学ファインダのみを用いて撮影を行うことが可能である。   Reference numeral 104 denotes an optical viewfinder, which can take an image using only the optical viewfinder without using the electronic viewfinder function of the image display unit 28.

110は通信手段でUSB、IEEE1394、LAN、無線通信、等の各種通信機能を有する。   A communication unit 110 has various communication functions such as USB, IEEE1394, LAN, and wireless communication.

112は通信手段110により画像処理装置100を他の機器と接続するコネクタ或いは無線通信の場合はアンテナである。   Reference numeral 112 denotes a connector for connecting the image processing apparatus 100 to another device by the communication unit 110 or an antenna in the case of wireless communication.

200はメモリカードやハードディスク等の記録媒体である。記録媒体200は、半導体メモリや磁気ディスク等から構成される記録部202、画像処理装置100とのインタフェース204、画像処理装置100と接続を行うコネクタ206を備えている。   Reference numeral 200 denotes a recording medium such as a memory card or a hard disk. The recording medium 200 includes a recording unit 202 composed of a semiconductor memory, a magnetic disk, or the like, an interface 204 with the image processing apparatus 100, and a connector 206 for connecting to the image processing apparatus 100.

210はメモリカードやハードディスク等の記録媒体である。   Reference numeral 210 denotes a recording medium such as a memory card or a hard disk.

以下に図3〜6図を参照して、本発明の各実施例の動作を説明する。   The operation of each embodiment of the present invention will be described below with reference to FIGS.

<第1の実施形態>
第1の実施形態では、既に記録済みの第1の動画像に対して、新たに撮影した第2動画像が、ユーザが予め指定した条件に合致するかどうかを、第2の動画像の最終フレームを基に判別して、追加記録を行う例を述べる。
<First Embodiment>
In the first embodiment, whether or not a newly captured second moving image matches a condition specified in advance by the user with respect to the already recorded first moving image is determined based on whether the second moving image is final. An example of discriminating based on the frame and performing additional recording will be described.

図3は第1の実施形態における動画像追加記録処理のフローチャートである。この動画像追加記録処理における各処理は、システム制御回路50が不揮発性メモリ31に格納されたプログラムをメモリ30に展開して実行することにより実現される。   FIG. 3 is a flowchart of the moving image additional recording process in the first embodiment. Each process in the moving image additional recording process is realized by the system control circuit 50 developing the program stored in the nonvolatile memory 31 in the memory 30 and executing it.

システム制御回路50は、撮像素子14から入力されたデータから第2の動画像を生成する(S301)。   The system control circuit 50 generates a second moving image from the data input from the image sensor 14 (S301).

次に、追加記録条件テーブルのIndex Nを0に初期化する(S302)。追加記録条件テーブルは、図6に示すように、ユーザが予め指定した条件を格納している。   Next, Index N of the additional recording condition table is initialized to 0 (S302). As shown in FIG. 6, the additional recording condition table stores conditions specified in advance by the user.

次に、追加記録条件テーブル[N]の属性を判定する(S303)。   Next, the attribute of the additional recording condition table [N] is determined (S303).

S303の結果、属性が人物の場合は、第2の動画像の最終フレームを抽出する(S304)。   As a result of S303, if the attribute is a person, the final frame of the second moving image is extracted (S304).

次に、S304で抽出した最終フレーム内から人物の顔を検出し、当該顔と追加記録条件テーブル[N]の条件の人物の顔とが一致するか個人認識処理を行う。最終フレーム内から複数の人物の顔が検出された場合は、それぞれの顔の向き、位置、大きさなどの情報から重み付けをして主となる顔を決定した上、個人認識処理を行う。これにより、最終フレーム内に追加記録条件テーブル[N]の条件の人物が検出されたかを判定する(S305)。   Next, a person's face is detected from the final frame extracted in S304, and personal recognition processing is performed to determine whether the face matches the face of the person in the condition of the additional recording condition table [N]. When a plurality of human faces are detected from the final frame, the main face is determined by weighting from information such as the orientation, position, and size of each face, and then the personal recognition process is performed. Thereby, it is determined whether or not a person having the condition of the additional recording condition table [N] is detected in the last frame (S305).

S303の結果、属性が撮影日の場合は、第2の動画像の撮影日が追加記録条件テーブル[N]の条件の撮影日と一致するかを判定する(S306)。   As a result of S303, when the attribute is the shooting date, it is determined whether the shooting date of the second moving image matches the shooting date of the condition of the additional recording condition table [N] (S306).

S305の結果、最終フレーム内に追加記録条件テーブル[N]の条件の人物が検出された場合、及び、S306の結果、第2の動画像の撮影日が追加記録条件テーブル[N]の条件の撮影日と一致する場合、追加記録条件テーブル[N]の情報が付加された第1の動画像が存在するかを判定する(S307)。   As a result of S305, when a person with the condition of the additional recording condition table [N] is detected in the final frame, and as a result of S306, the shooting date of the second moving image is the condition of the additional recording condition table [N]. If it coincides with the shooting date, it is determined whether there is a first moving image to which the information of the additional recording condition table [N] is added (S307).

S305の結果、最終フレーム内に追加記録条件テーブル[N]の条件の人物が検出されない場合、及び、S306の結果、第2の動画像の撮影日が追加記録条件テーブル[N]の条件の撮影日と一致しない場合、追加記録条件テーブルのIndex Nをインクリメントして、S303へ戻る(S310)。   As a result of S305, when the person of the condition of the additional recording condition table [N] is not detected in the final frame, and as a result of S306, the shooting date of the second moving image is the shooting of the condition of the additional recording condition table [N]. If the date does not match, Index N in the additional recording condition table is incremented, and the process returns to S303 (S310).

S307の結果、追加記録条件テーブル[N]の情報が付加された第1の動画像が存在する場合、第1の動画像に第2の動画像を追加記録する(S308)。   As a result of S307, when the first moving image to which the information of the additional recording condition table [N] is added exists, the second moving image is additionally recorded on the first moving image (S308).

S307の結果、追加記録条件テーブル[N]の情報が付加された第1の動画像が存在しない場合、第2の動画像に追加記録条件テーブル[N]の情報を付加する(S309)。   As a result of S307, when there is no first moving image to which the information of the additional recording condition table [N] is added, the information of the additional recording condition table [N] is added to the second moving image (S309).

S308、S309の処理の次に、追加記録条件テーブルのIndex Nをインクリメントして、S303へ戻る(S310)。   Following the processing of S308 and S309, Index N of the additional recording condition table is incremented, and the process returns to S303 (S310).

S303の結果、追加記録条件がない場合は、動画像追加記録処理を終了する。   If there is no additional recording condition as a result of S303, the moving image additional recording process is terminated.

<第2の実施形態>
第2の実施形態では、既に記録済みの第1の動画像に対して、新たに撮影した第2の動画像が、ユーザが予め指定した条件に合致するかどうかを、第2の動画像の複数フレームを基に判別して、追加記録を行う例を述べる。
<Second Embodiment>
In the second embodiment, whether the second moving image newly captured matches the condition specified in advance by the user with respect to the first moving image that has already been recorded is determined according to the second moving image. An example of performing additional recording by discriminating based on a plurality of frames will be described.

図4は第2の実施形態における動画像追加記録処理のフローチャートである。この動画像追加記録処理における各処理は、システム制御回路50が不揮発性メモリ31に格納されたプログラムをメモリ30に展開して実行することにより実現される。   FIG. 4 is a flowchart of the moving image additional recording process in the second embodiment. Each process in the moving image additional recording process is realized by the system control circuit 50 developing the program stored in the nonvolatile memory 31 in the memory 30 and executing it.

システム制御回路50は、撮像素子14から入力されたデータから第2の動画像を生成する(S401)。   The system control circuit 50 generates a second moving image from the data input from the image sensor 14 (S401).

次に、追加記録条件テーブルのIndex Nを0に初期化する(S402)。追加記録条件テーブルは、図6に示すように、ユーザが予め指定した条件を格納している。   Next, Index N of the additional recording condition table is initialized to 0 (S402). As shown in FIG. 6, the additional recording condition table stores conditions specified in advance by the user.

次に、追加記録条件テーブル[N]の属性を判定する(S403)。   Next, the attribute of the additional recording condition table [N] is determined (S403).

S403の結果、属性が人物の場合は、第2の動画像の記録フレームレートを判定する(S404)。   If the attribute is person as a result of S403, the recording frame rate of the second moving image is determined (S404).

S404の結果、第2の動画像の記録フレームレートが15fpsの場合、第2の動画像の15×n番目(n=1,2,3)のフレームを全て抽出し、第2の動画像の記録フレームレートが24fpsの場合、第2の動画像の24×n番目(n=1,2,3)のフレームを全て抽出し、第2の動画像の記録フレームレートが30fpsの場合、第2の動画像の30×n番目(n=1,2,3)のフレームを全て抽出する(S405)。   As a result of S404, if the recording frame rate of the second moving image is 15 fps, all the 15 × n-th (n = 1, 2, 3) frames of the second moving image are extracted, and the second moving image When the recording frame rate is 24 fps, all 24 × n-th (n = 1, 2, 3) frames of the second moving image are extracted, and when the recording frame rate of the second moving image is 30 fps, the second All 30 × n-th (n = 1, 2, 3) frames of the moving image are extracted (S405).

次に、S405で抽出した第2の動画像の各フレーム内から人物の顔を検出し、当該顔と追加記録条件テーブル[N]の条件の人物の顔とが一致するか個人認識処理を行う。最終フレーム内から複数の人物の顔が検出された場合は、それぞれの顔の向き、位置、大きさなどの情報から重み付けをして主となる顔を決定した上、個人認識処理を行う。これにより、各フレーム内に追加記録条件テーブル[N]の条件の人物が検出されたかを判定し、検出されたフレーム数をカウントする(S406)。   Next, a person's face is detected from each frame of the second moving image extracted in S405, and personal recognition processing is performed to determine whether the face matches the person's face in the condition of the additional recording condition table [N]. . When a plurality of human faces are detected from the final frame, the main face is determined by weighting from information such as the orientation, position, and size of each face, and then the personal recognition process is performed. Thereby, it is determined whether or not a person in the additional recording condition table [N] is detected in each frame, and the number of detected frames is counted (S406).

次に、S406でカウントしたフレーム数が閾値T以上であるかを判定する(S407)。   Next, it is determined whether the number of frames counted in S406 is greater than or equal to a threshold T (S407).

S403の結果、属性が撮影日の場合は、第2の動画像の撮影日が追加記録条件テーブル[N]の条件の撮影日と一致するかを判定する(S408)。   As a result of S403, if the attribute is the shooting date, it is determined whether the shooting date of the second moving image matches the shooting date in the condition of the additional recording condition table [N] (S408).

S407の結果、S406でカウントしたフレーム数が閾値T以上である場合、及び、S408の結果、第2の動画像の撮影日が追加記録条件テーブル[N]の条件の撮影日と一致する場合、追加記録条件テーブル[N]の情報が付加された第1の動画が存在するかを判定する(S409)。   As a result of S407, when the number of frames counted in S406 is equal to or greater than the threshold T, and as a result of S408, the shooting date of the second moving image matches the shooting date of the condition of the additional recording condition table [N]. It is determined whether there is a first moving image to which information of the additional recording condition table [N] is added (S409).

S407の結果、S406でカウントしたフレーム数が閾値Tより小さい場合、及び、S408の結果、第2の動画像の撮影日が追加記録条件テーブル[N]の条件の撮影日と一致しない場合、追加記録条件テーブルのIndex Nをインクリメントして、S403へ戻る(S412)。   As a result of S407, when the number of frames counted in S406 is smaller than the threshold T, and as a result of S408, the shooting date of the second moving image does not match the shooting date of the condition of the additional recording condition table [N]. Index N in the recording condition table is incremented, and the process returns to S403 (S412).

S409の結果、追加記録条件テーブル[N]の情報が付加された第1の動画像が存在する場合、第1の動画像に第2の動画像を追加記録する(S410)。   As a result of S409, when there is a first moving image to which the information of the additional recording condition table [N] is added, the second moving image is additionally recorded on the first moving image (S410).

S409の結果、追加記録条件テーブル[N]の情報が付加された第1の動画像が存在しない場合、第2の動画像に追加記録条件テーブル[N]の情報を付加する(S411)。   As a result of S409, when there is no first moving image to which the information of the additional recording condition table [N] is added, the information of the additional recording condition table [N] is added to the second moving image (S411).

S410、S411の処理の次に、追加記録条件テーブルIndex Nをインクリメントして、S403へ戻る(S411)。   Following the processing of S410 and S411, the additional recording condition table Index N is incremented, and the process returns to S403 (S411).

S403の結果、追加記録条件がない場合は、動画像追加記録処理を終了する。   If there is no additional recording condition as a result of S403, the moving image additional recording process is terminated.

<第3の実施形態>
第3の実施形態では、静止画像の記録に連動して動画像を記録する機能を有する画像処理装置において、既に記録済みの第1の動画像に対して、新たに撮影した第2の動画像が、ユーザが予め指定した条件に合致するかどうかを、第2の動画像に連動している静止画を基に判別して、追加記録を行う例を述べる。
<Third Embodiment>
In the third embodiment, in the image processing apparatus having a function of recording a moving image in conjunction with recording of a still image, a second moving image newly taken with respect to the already recorded first moving image However, an example will be described in which additional recording is performed by determining whether or not a condition specified in advance by the user is met based on a still image linked to the second moving image.

静止画像の記録に連動して動画像を記録する機能では、システム制御回路50は、撮像素子14から入力されるデータから動画像を生成し、メモリ30の動画像格納領域に書き込む。さらに、シャッタースイッチ(SW2)64が操作された場合に、撮像素子14から入力されるデータから静止画像を生成し、また、メモリ30の動画像格納領域に書き込まれた動画像のうち、シャッタースイッチ(SW2)64が操作された前、後、又は前後の所定時間分を切り出し静止画像に連動した動画を生成する。さらに、生成した静止画像と静止画像に連動した動画像を記録媒体200へ記録する。   In the function of recording a moving image in conjunction with recording of a still image, the system control circuit 50 generates a moving image from data input from the image sensor 14 and writes it in a moving image storage area of the memory 30. Further, when the shutter switch (SW2) 64 is operated, a still image is generated from the data input from the image sensor 14, and among the moving images written in the moving image storage area of the memory 30, the shutter switch (SW2) A moving image linked with a still image is generated by cutting out a predetermined time before, after, or before and after 64 is operated. Further, the generated still image and a moving image linked to the still image are recorded on the recording medium 200.

図5は第3の実施形態におけるシャッタースイッチ(SW2)64が操作された際の静止画像記録及び動画像追加記録処理のフローチャートである。この静止画像記録及び動画像追加記録処理における各処理は、システム制御回路50が不揮発性メモリ31に格納されたプログラムをメモリ30に展開して実行することにより実現される。   FIG. 5 is a flowchart of still image recording and moving image additional recording processing when the shutter switch (SW2) 64 is operated in the third embodiment. Each processing in this still image recording and moving image additional recording processing is realized by the system control circuit 50 developing and executing a program stored in the nonvolatile memory 31 in the memory 30.

システム制御回路50は、シャッタースイッチ(SW2)64が操作された際、撮像素子14から入力されたデータから静止画像を生成する(S501)。   When the shutter switch (SW2) 64 is operated, the system control circuit 50 generates a still image from data input from the image sensor 14 (S501).

次に、静止画像に連動した第2の動画像を生成する(S502)。   Next, a second moving image linked to the still image is generated (S502).

次に、追加記録条件テーブルのIndex Nを0に初期化する(S503)。   Next, Index N of the additional recording condition table is initialized to 0 (S503).

次に、追加記録条件テーブル[N]の属性を判定する(S504)。   Next, the attribute of the additional recording condition table [N] is determined (S504).

S504の結果、属性が人物の場合は、S501で生成した静止画像から人物の顔を検出し、当該顔と追加記録条件テーブル[N]の条件の人物の顔とが一致するか個人認識処理を行う。最終フレーム内から複数の人物の顔が検出された場合は、それぞれの顔の向き、位置、大きさなどの情報から重み付けをして主となる顔を決定した上、個人認識処理を行う。これにより、最終フレーム内に追加記録条件テーブル[N]の条件の人物が検出されたかを判定する(S505)。   As a result of S504, if the attribute is a person, the face of the person is detected from the still image generated in S501, and a personal recognition process is performed to determine whether the face matches the face of the person in the condition of the additional recording condition table [N]. Do. When a plurality of human faces are detected from the final frame, the main face is determined by weighting from information such as the orientation, position, and size of each face, and then the personal recognition process is performed. Thereby, it is determined whether or not a person having the condition of the additional recording condition table [N] is detected in the final frame (S505).

S504の結果、属性が撮影日の場合は、第2の動画像の撮影日が追加記録条件テーブル[N]の条件の撮影日と一致するかを判定する(S506)。   As a result of S504, if the attribute is the shooting date, it is determined whether the shooting date of the second moving image matches the shooting date of the condition of the additional recording condition table [N] (S506).

S505の結果、静止画像に追加記録条件テーブル[N]の条件の人物が検出された場合、及び、S506の結果、第2の動画像の撮影日が追加記録条件テーブル[N]の条件の撮影日と一致する場合、追加記録条件テーブル[N]の情報が付加された第1の動画像が存在するかを判定する(S507)。   As a result of S505, when a person in the condition of the additional recording condition table [N] is detected in the still image, and as a result of S506, the shooting date of the second moving image is captured in the condition of the additional recording condition table [N]. If the date coincides with the date, it is determined whether or not the first moving image to which the information of the additional recording condition table [N] is added exists (S507).

S505の結果、静止画像に追加記録条件テーブル[N]の条件の人物が検出されない場合、及び、S506の結果、第2の動画像の撮影日が追加記録条件テーブル[N]の条件の撮影日と一致しない場合、追加記録条件テーブルのIndex Nをインクリメントして、S504へ戻る(S510)。   As a result of S505, when a person in the additional recording condition table [N] is not detected in the still image, and as a result of S506, the shooting date of the second moving image is the shooting date of the additional recording condition table [N]. If not, Index N in the additional recording condition table is incremented, and the process returns to S504 (S510).

S507の結果、追加記録条件テーブル[N]の情報が付加された第1の動画像が存在する場合、第1の動画像に第2の動画像を追加記録する(S508)。   As a result of S507, if there is a first moving image to which the information of the additional recording condition table [N] is added, the second moving image is additionally recorded on the first moving image (S508).

S507の結果、追加記録条件テーブル[N]の情報が付加された第1の動画像が存在しない場合、第2の動画像に追加記録条件テーブル[N]の情報を付加する(S509)。   As a result of S507, when there is no first moving image to which the information of the additional recording condition table [N] is added, the information of the additional recording condition table [N] is added to the second moving image (S509).

S508、S509の処理の次に、追加記録条件テーブルのIndex Nをインクリメントして、S504へ戻る(S510)。   Following the processing of S508 and S509, Index N in the additional recording condition table is incremented, and the process returns to S504 (S510).

S504の結果、追加記録条件がない場合は、静止画像を記録し動画像追加記録処理を終了する(S511)。   If there is no additional recording condition as a result of S504, the still image is recorded and the moving image additional recording process is terminated (S511).

10:撮影レンズ 12:シャッター 14:撮像素子 16:A/D変換器 18:タイミング発生回路 20:画像処理回路 22:メモリ制御回路 28:画像表示部 30:メモリ 32:画像圧縮・伸長回路
40:露光制御手段 42:測距制御手段 44:ズーム制御手段y48:フラッシュ
50:システム制御回路
60:モードダイアルスイッチ 62:シャッタースイッチSW1 64:シャッタースイッチSW2
66:表示切替スイッチ 70:操作部 72:ズームスイッチ
90:インタフェース 92:コネクタ
100:画像処理装置 102:保護手段 104:光学ファインダ
110:通信手段 112:コネクタ(またはアンテナ)
200:記録媒体 202:記録部 204:インタフェース 206:コネクタ
DESCRIPTION OF SYMBOLS 10: Shooting lens 12: Shutter 14: Image pick-up element 16: A / D converter 18: Timing generation circuit 20: Image processing circuit 22: Memory control circuit 28: Image display part 30: Memory 32: Image compression / expansion circuit 40: Exposure control means 42: Distance measurement control means 44: Zoom control means y48: Flash
50: System control circuit 60: Mode dial switch 62: Shutter switch SW1 64: Shutter switch SW2
66: Display changeover switch 70: Operation unit 72: Zoom switch 90: Interface 92: Connector 100: Image processing apparatus 102: Protection means 104: Optical viewfinder 110: Communication means 112: Connector (or antenna)
200: Recording medium 202: Recording unit 204: Interface 206: Connector

Claims (5)

被写体を撮像して画像を得る撮像手段と、
前記撮像手段によって動画像を生成する動画像生成手段と、
前記動画像生成手段によって生成された第1の動画像に対して、新たに生成された第2の動画像を追加記録する条件を指定する追加記録条件指定手段と、
前記第2の動画像が前記追加記録条件指定手段によって指定された条件に合致しているかを判別する判別手段と、
前記判別手段によって条件に合致していると判別された際に、条件に合致した前記第1の動画像が存在する場合は、前記第2の動画像を前記第1の動画像に追加記録する動画像追加記録手段と、
を備えたことを特徴とする画像処理装置。
Imaging means for capturing an image of a subject and obtaining an image;
Moving image generating means for generating a moving image by the imaging means;
An additional recording condition designating unit for designating a condition for additionally recording the newly generated second moving image with respect to the first moving image generated by the moving image generating unit;
A discriminating unit for discriminating whether the second moving image matches a condition designated by the additional recording condition designating unit;
If it is determined by the determining means that the condition is met, and the first moving image that matches the condition exists, the second moving image is additionally recorded in the first moving image. Moving image additional recording means;
An image processing apparatus comprising:
前記判別手段は、画像データ内の人物を個人認識する個人認識手段によって判別する判別手段を備えたことを特徴とする請求項1に記載の画像処理装置。 The image processing apparatus according to claim 1, wherein the determination unit includes a determination unit that determines a person in the image data by a personal recognition unit that recognizes a person. 前記追加記録条件指定手段によって指定された条件に合致しているかを、前記第2の動画像の最終フレームを基に判別する判別手段を備えたことを特徴とする請求項1又は請求項2に記載の画像処理装置。 3. The discriminating unit according to claim 1, further comprising: a discriminating unit that discriminates whether or not a condition specified by the additional recording condition specifying unit is met based on a final frame of the second moving image. The image processing apparatus described. 前記追加記録条件指定手段によって指定された条件に合致しているかを、前記第2の動画像の複数フレームを基に判別する判別手段を備えたことを特徴とする請求項1又は請求項2に記載の画像処理装置。 3. The determination unit according to claim 1, further comprising a determination unit configured to determine whether the condition specified by the additional recording condition specifying unit is met based on a plurality of frames of the second moving image. The image processing apparatus described. 前記追加記録条件指定手段によって指定された条件に合致しているかを、静止画像の記録に連動して記録される前記第2の動画像を基に判別する判別手段を備えたことを特徴とする請求項1又は請求項2に記載の画像処理装置。 And a discriminating unit for discriminating whether the condition specified by the additional recording condition specifying unit is met based on the second moving image recorded in conjunction with the recording of the still image. The image processing apparatus according to claim 1.
JP2014047042A 2014-03-11 2014-03-11 Image processing system and control method of the same Pending JP2015171113A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014047042A JP2015171113A (en) 2014-03-11 2014-03-11 Image processing system and control method of the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014047042A JP2015171113A (en) 2014-03-11 2014-03-11 Image processing system and control method of the same

Publications (1)

Publication Number Publication Date
JP2015171113A true JP2015171113A (en) 2015-09-28

Family

ID=54203445

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014047042A Pending JP2015171113A (en) 2014-03-11 2014-03-11 Image processing system and control method of the same

Country Status (1)

Country Link
JP (1) JP2015171113A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11641443B2 (en) 2020-05-27 2023-05-02 Fujifilm Business Innovation Corp. Information processing apparatus and non-transitory computer readable medium

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11641443B2 (en) 2020-05-27 2023-05-02 Fujifilm Business Innovation Corp. Information processing apparatus and non-transitory computer readable medium

Similar Documents

Publication Publication Date Title
JP2007081732A (en) Imaging apparatus
JP2015225284A (en) Imaging device and control method of the same, program thereof and recording medium
JP2017126915A (en) Imaging apparatus
JP2016019161A (en) Imaging device
JP6559014B2 (en) Imaging apparatus, control method thereof, and program
JP6362338B2 (en) IMAGING DEVICE AND IMAGING DEVICE CONTROL METHOD
JP5911300B2 (en) Imaging apparatus and control method thereof
JP2014143457A (en) HDR switching control method
JP6256298B2 (en) IMAGING DEVICE, ITS CONTROL METHOD AND PROGRAM
JP5854861B2 (en) Imaging device, control method thereof, and control program
JP2015171113A (en) Image processing system and control method of the same
JP2017063247A (en) Imaging apparatus and method of controlling filter
JP2012156886A (en) Imaging apparatus
JP2015080152A (en) Imaging device, control method thereof, and program
JP2015126243A (en) Imaging device, method of controlling display control device, and method of controlling recording device
JP6006567B2 (en) Movie playback apparatus and movie playback method
JP6526270B2 (en) Image pickup apparatus and control method thereof
JP2011130198A (en) Imaging apparatus, control method thereof and program
JP6551496B2 (en) Image pickup apparatus, control method thereof and program
JP2016167088A (en) Imaging device and control method of the same
JP2020088663A (en) Imaging apparatus
JP2020088600A (en) Image pick-up device, imaging apparatus, control method, and program
JP2019012399A (en) Image processing device
JP2016208206A (en) Recording apparatus
JP2015028647A (en) Imaging apparatus and control method thereof