JP2011211329A - Imaging apparatus and control method thereof, image processing apparatus and control method thereof, and image processing program - Google Patents

Imaging apparatus and control method thereof, image processing apparatus and control method thereof, and image processing program Download PDF

Info

Publication number
JP2011211329A
JP2011211329A JP2010074866A JP2010074866A JP2011211329A JP 2011211329 A JP2011211329 A JP 2011211329A JP 2010074866 A JP2010074866 A JP 2010074866A JP 2010074866 A JP2010074866 A JP 2010074866A JP 2011211329 A JP2011211329 A JP 2011211329A
Authority
JP
Japan
Prior art keywords
color blur
image
image data
imaging
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010074866A
Other languages
Japanese (ja)
Other versions
JP5378283B2 (en
Inventor
Tetsuo Ashida
哲郎 芦田
Satoru Ohinata
悟 大日方
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2010074866A priority Critical patent/JP5378283B2/en
Publication of JP2011211329A publication Critical patent/JP2011211329A/en
Application granted granted Critical
Publication of JP5378283B2 publication Critical patent/JP5378283B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Studio Devices (AREA)
  • Image Processing (AREA)
  • Color Television Image Signal Generators (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

PROBLEM TO BE SOLVED: To obtain an image wherein a purple fringe is eliminated, while reflecting photographer's intention.SOLUTION: One subject is imaged twice; an image A, captured under the photographic condition of following photographer's setting, is obtained; and an image B captured under a photographic condition suitable for eliminating a purple fringe that differs from the photographer's setting. Positions of the image A and B are made to coincide, and a purple fringe region (PF region) in the image A is replaced by the replacement region in the image B, which corresponds to the purple fringe region. A purple fringe in an image intended by the photographer and that includes the purple fringe region is eliminated or reduced, and an image with the purple fringe eliminated or reduced is obtained.

Description

この発明は撮像装置およびその制御方法に関する。また,この発明は,画像処理装置,その制御方法,および画像処理プログラムに関する。   The present invention relates to an imaging apparatus and a control method thereof. The present invention also relates to an image processing apparatus, a control method thereof, and an image processing program.

処理対象画像中に含まれる色滲み(偽色,パープルフリンジ)を低減するための処理が提案されている(特許文献1,2,3)。   Processing for reducing color blur (false color, purple fringe) included in a processing target image has been proposed (Patent Documents 1, 2, and 3).

しかしながら,上記特許文献1〜3では色滲みが除去された画像が得られても,その画像が撮影者の意図とは異なる画像であることがある。   However, in Patent Documents 1 to 3, even if an image from which color blur is removed is obtained, the image may be different from the photographer's intention.

特開2009−284009号公報JP 2009-284209 A 特開2007−258923号公報JP 2007-258923 A 特開2009−268033号公報JP 2009-268033 A

この発明は,撮影者の意図を反映しつつ,色滲みが除去された画像を得ることができるようにすることを目的とする。   An object of the present invention is to make it possible to obtain an image from which color blur has been removed while reflecting the intention of a photographer.

この発明による撮像装置は,それぞれ異なる撮影条件の下で同一の被写体を複数回撮像し,撮像によって得られる複数の画像データを出力する撮像手段,上記撮像手段から出力される複数の画像データによって表される複数の画像の位置を合わせる位置合わせ手段,上記撮像手段から出力される画像データによって表される画像に色滲み領域が含まれるかどうかを検出する色滲み領域検出手段,および上記色滲み領域検出手段によって色滲み領域が検出された画像データ以外の画像データによって表される画像中の上記色滲み領域に対応する領域によって,上記色滲み領域が検出された画像データによって表される画像中の色滲み領域を置換する色滲み除去手段を備える。   An image pickup apparatus according to the present invention displays an image of the same subject a plurality of times under different shooting conditions and outputs a plurality of image data obtained by the image pickup, and a plurality of image data output from the image pickup means. Positioning means for aligning the positions of a plurality of images, color blur area detecting means for detecting whether a color blur area is included in an image represented by image data output from the imaging means, and the color blur area In the image represented by the image data in which the color blur area is detected by the area corresponding to the color blur area in the image represented by the image data other than the image data in which the color blur area is detected by the detecting means Color blur removing means for replacing the color blur area is provided.

この発明は上述した撮像装置の制御に適する方法の発明も提供する。この方法は,撮像手段が,それぞれ異なる撮影条件の下で同一の被写体を複数回撮像し,撮像によって得られる複数の画像データを出力し,位置合わせ手段が,上記撮像手段から出力される複数の画像データによって表される複数の画像の位置を合わせし,色滲み領域検出手段が,上記撮像手段から出力される画像データによって表される画像に色滲み領域が含まれるかどうかを検出し,色滲み除去手段が,上記色滲み領域検出手段によって色滲み領域が検出された画像データ以外の画像データによって表される画像中の上記色滲み領域に対応する領域によって,上記色滲み領域が検出された画像データによって表される画像中の色滲み領域を置換するものである。   The present invention also provides a method invention suitable for controlling the above-described imaging apparatus. In this method, the imaging unit images the same subject a plurality of times under different shooting conditions, outputs a plurality of image data obtained by the imaging, and the alignment unit outputs a plurality of images output from the imaging unit. The positions of a plurality of images represented by the image data are aligned, and the color blur area detection unit detects whether the color blur area is included in the image represented by the image data output from the imaging unit. The color blur area is detected by the area corresponding to the color blur area in the image represented by the image data other than the image data in which the color blur area is detected by the color blur area detecting means. The color blur area in the image represented by the image data is replaced.

この発明によると,異なる撮影条件の下で複数回の撮像が行われるので,複数の画像のうちのいずれかが撮影装置のユーザの意図に沿うものである場合に,残りの画像は撮影装置のユーザの意図に沿うものでないものになる。撮像手段から出力される画像データによって表される画像に色滲み領域が含まれるかどうかが検出される。複数の画像のうちの色滲み領域が含まれない画像が撮影者(ユーザ)の意図に沿うものであれば,特段色滲み処理する必要性はない。複数の画像のうちの色滲み領域が含まれる画像がユーザの意図に沿うものである場合には,その画像中の色滲み領域が,異なる撮影条件の下で得られた他の画像の中の上記色滲み領域に対応する領域によって置換される。一の画像中に色滲みが含まれているとすると,撮影条件を異ならせることによって得られた他の画像中においては色滲みが無いまたは少ないものが存在しうる。したがって,異なる撮影条件の下で得られた他の画像の中の上記色滲み領域に対応する領域によって置換されると,色滲み領域が含まれる画像において色滲みは無くなるまたは低減される。複数の画像のうち色滲み領域が含まれる画像が撮影者の意図に沿う画像であったとしても,色滲みの無いまたは低減された画像を得ることができる。   According to the present invention, since a plurality of times of imaging are performed under different shooting conditions, if any of the plurality of images is in accordance with the intention of the user of the shooting apparatus, the remaining images are stored in the shooting apparatus. It will not be in line with the user's intention. It is detected whether a color blur area is included in the image represented by the image data output from the imaging means. If an image that does not include a color blur area among a plurality of images is in accordance with the intention of the photographer (user), there is no need to perform special color blur processing. When an image including a color blur area among a plurality of images is in accordance with the user's intention, the color blur area in the image is different from other images obtained under different shooting conditions. It is replaced by an area corresponding to the color blur area. Assuming that color blur is included in one image, there may be no or little color blur in other images obtained by changing the shooting conditions. Therefore, when the image is replaced by a region corresponding to the color blur region in another image obtained under different shooting conditions, the color blur is eliminated or reduced in the image including the color blur region. Even if an image including a color blur area among a plurality of images is an image that meets the photographer's intention, an image having no color blur or reduced can be obtained.

一実施態様では,上記撮像装置は,上記撮像手段から出力される複数の画像データを入力し,動き部分を検出する動き検出手段を備え,色滲み除去手段は,上記色滲み領域検出手段によって検出された色滲み領域と上記動き検出手段によって検出された動き部分とが重複している場合に,その重複部分を除いた色滲み領域を置換する。動きを伴う被写体(動体)が存在する場合の誤補正を未然に防止することができる。   In one embodiment, the imaging apparatus includes a motion detection unit that receives a plurality of image data output from the imaging unit and detects a moving portion, and the color blur removal unit is detected by the color blur region detection unit. When the color blur area that has been detected overlaps with the motion part detected by the motion detection means, the color blur area excluding the overlap part is replaced. It is possible to prevent erroneous correction when there is a subject (moving body) that accompanies movement.

他の実施態様では,上記撮像装置は,光学的にズーム処理する光学ズーム手段,上記光学ズーム手段における広角端から望遠端にかけてのそれぞれのズーム位置に対応する滲み量の大きさを表す滲み量データを記憶する滲み量データ記憶手段,上記光学ズーム手段において設定されるズーム位置よりも滲み量が少ないズーム位置が存在するかどうかを,上記滲み量データ記憶手段に記憶されている滲み量データにしたがって判断する判断手段,上記判断手段によって上記光学ズーム手段において設定されているズーム位置よりも滲み量が少ないズーム位置が存在する場合に,そのズーム位置となるように上記光学ズーム手段を制御する光学ズーム制御手段,および上記光学ズーム制御手段によってズーム位置が変えられた後に撮像手段から出力されたズーム後画像データによって表されるズーム後画像を拡大または縮小することによって,上記光学ズーム制御手段によってズーム位置が変えられる前に撮像手段から出力されたズーム前画像データによって表されるズーム前画像と上記ズーム後画像の画角を合わせる画角合わせ手段をさらに備える。   In another embodiment, the imaging device includes optical zoom means for optically zooming, and blur amount data representing the amount of blur corresponding to each zoom position from the wide-angle end to the telephoto end in the optical zoom means. Whether or not there is a zoom position with a smaller blur amount than the zoom position set in the optical zoom means according to the blur amount data stored in the blur amount data storage means. An optical zoom that controls the optical zoom means to be a zoom position when there is a zoom position with less blurring than a zoom position set in the optical zoom means by the determination means; Control means, and after the zoom position is changed by the optical zoom control means, Before zooming represented by the pre-zoom image data output from the imaging unit before the zoom position is changed by the optical zoom control unit by enlarging or reducing the zoomed image represented by the post-zoom image data. An angle of view matching means for matching the angle of view of the image and the image after zooming is further provided.

ズーム位置(ズーム量)によって色滲みが生じたり減少することがある。この実施態様では,ズーム位置と滲み量との関係を表す滲み量データが用いられて,より滲みのない画像を得ることができるようにズーム位置が変更された上で撮像が行われる。撮影者によって設定されたズーム位置がたとえ色滲みを発生しやすいズーム位置であったとしても,それよりも色滲みの少ないズーム位置の下での撮像が併せて行われるので,撮影者によって設定されたズーム位置の下での撮像によって得られた画像中に色滲み領域が存在しても,ズーム位置が変更された上で撮像された画像中の上記色滲み領域に対応する領域によって置換することによって,撮影者によって設定されたズーム位置の下での撮像によって得られた画像を,色滲み領域が無いまたは低減されたものとすることができる。   Color blur may occur or decrease depending on the zoom position (zoom amount). In this embodiment, blur amount data representing the relationship between the zoom position and the blur amount is used, and imaging is performed after the zoom position is changed so that an image without blur can be obtained. Even if the zoom position set by the photographer is a zoom position where color blur is likely to occur, imaging is performed at the same zoom position where there is less color blur. Even if a color blur area exists in an image obtained by imaging under a zoom position, the image is replaced by an area corresponding to the color blur area in the image captured after the zoom position is changed. Thus, the image obtained by imaging under the zoom position set by the photographer can be made free of or reduced in color blur area.

一実施態様では焦点距離の相違によって上記撮影条件は異なるものとされる。焦点距離を相違させる(ピントをずらす)ことによって色滲みが抑制されるからである。   In one embodiment, the imaging conditions differ depending on the focal length. This is because color blur is suppressed by making the focal lengths different (shifting the focus).

他の実施態様では絞り値の相違によって上記撮影条件は異なるものとされる。絞りを絞る(F値を大きくする)ことによっても色滲みは抑制されるからである。   In other embodiments, the photographing conditions differ depending on the aperture value. This is because color bleeding is also suppressed by reducing the aperture (increasing the F value).

好ましくは,上記異なる撮影条件のうちの一つは,撮影者(上記撮像装置の使用者)による設定にしたがう撮影条件であり,残りの撮影条件は上記撮影者による設定と異なる撮影条件である。撮影者による設定にしたがう撮影条件の下で得られた画像中に色滲み領域が存在する場合に,その色滲み領域を,撮影者による設定と異なる撮影条件の下で得られた画像中の上記色滲み領域に対応する領域によって置換することによって,撮影者による設定にしたがう撮影条件の下で得られた画像において色滲み領域を無くすまたは低減することができる。   Preferably, one of the different shooting conditions is a shooting condition according to a setting by a photographer (user of the imaging apparatus), and the remaining shooting conditions are shooting conditions different from the setting by the photographer. If there is a color blur area in the image obtained under the shooting conditions according to the settings by the photographer, the color blur area is the above in the image obtained under the shooting conditions different from the settings by the photographer. By substituting with the area corresponding to the color blur area, the color blur area can be eliminated or reduced in the image obtained under the shooting conditions set by the photographer.

第2の発明による撮像装置は,撮影者による設定にしたがう第1撮影条件と,色滲みが低減されるように上記第1撮影条件が変更された,上記第1撮影条件とは異なる第2撮影条件の下で,同一の被写体を2回撮像し,撮像によって得られる第1および第2の画像データを出力する撮像手段,上記撮像手段から出力される第1画像データによって表される第1画像と,第2画像データによって表される第2画像の位置を合わせる位置合わせ手段,上記第1画像に色滲み領域が含まれるかどうかを検出する色滲み領域検出手段,および上記色滲み領域検出手段によって色滲み領域が検出された場合に,上記第2画像中の上記色滲み領域に対応する領域によって,上記第1画像中の色滲み領域を置換する色滲み除去手段を備える。撮影者による設定にしたがう第1撮影条件の下で得られた第1画像中に色滲み領域が存在する場合に,その色滲み領域を,上記撮像装置の使用者による設定と異なる第2撮影条件の下で得られた第2画像中の上記色滲み領域に対応する領域によって置換することによって,第1画像において色滲み領域を無くすまたは低減することができる。   According to a second aspect of the present invention, there is provided an imaging apparatus according to a first imaging condition according to a setting by a photographer and a second imaging different from the first imaging condition in which the first imaging condition is changed so that color blur is reduced. Under the conditions, the same subject is imaged twice, the imaging means for outputting the first and second image data obtained by the imaging, and the first image represented by the first image data output from the imaging means Positioning means for aligning the position of the second image represented by the second image data, color blur area detection means for detecting whether the first image includes a color blur area, and the color blur area detection means When a color blur area is detected by the above, color blur removal means is provided for replacing the color blur area in the first image with an area corresponding to the color blur area in the second image. When there is a color blur area in the first image obtained under the first shooting condition according to the setting by the photographer, the color blur area is set to a second shooting condition different from the setting by the user of the imaging apparatus. By substituting with a region corresponding to the color blur region in the second image obtained under the above, the color blur region in the first image can be eliminated or reduced.

第3の発明による撮像装置は,撮影者による設定にしたがう第1撮影条件と,色滲みが低減されるように上記第1撮影条件が変更された,上記第1撮影条件とは異なる第2および第3撮影条件の下で,同一の被写体を3回撮像し,撮像によって得られる第1,第2および第3の画像データを出力する撮像手段,上記撮像手段から出力される,第1画像データによって表される第1画像と,第2画像データによって表される第2画像と,第3画像データによって表される第3画像の位置を合わせる位置合わせ手段,上記第1画像に色滲み領域が含まれるかどうかを検出する色滲み領域検出手段,上記第1,第2および第3の画像データを用いて動き部分を検出する動き検出手段,上記色滲み領域検出手段によって色滲み領域が検出された場合に,上記色滲み領域検出手段によって検出された色滲み領域と上記動き検出手段によって検出された動き部分とが重複しているときにはその重複部分を除いて,上記第2または第3画像中の上記色滲み領域に対応する領域によって,上記第1画像中の色滲み領域を置換する色滲み除去手段を備える。動体が存在する場合にその動体部分については色滲み除去しないようにすることによって,誤補正を未然に防ぐことができる。   An image pickup apparatus according to a third aspect of the present invention is characterized in that a first shooting condition according to a setting by a photographer and a second shooting condition different from the first shooting condition in which the first shooting condition is changed so that color blur is reduced. Under the third imaging condition, the same subject is imaged three times, imaging means for outputting the first, second and third image data obtained by the imaging, and the first image data output from the imaging means Alignment means for aligning positions of the first image represented by the second image data, the second image represented by the second image data, and the third image represented by the third image data, and a color blur area in the first image The color blur area is detected by the color blur area detecting means for detecting whether or not it is included, the motion detecting means for detecting the moving part using the first, second and third image data, and the color blur area detecting means. If When the color blur area detected by the color blur area detection unit and the motion part detected by the motion detection unit overlap, the color blur in the second or third image is excluded except for the overlap part. Color blur removing means for replacing the color blur area in the first image with an area corresponding to the area is provided. If there is a moving object, it is possible to prevent erroneous correction by preventing color blur from being removed.

第4の発明による撮像装置は,光学的にズーム処理する光学ズーム手段,上記光学ズーム手段における広角端から望遠端にかけてのそれぞれのズーム位置に対応する滲み量の大きさを表す滲み量データを記憶する滲み量データ記憶手段,撮影者による設定にしたがうズーム位置よりも滲み量が少ないズーム位置が存在するかどうかを,上記滲み量データ記憶手段に記憶されている滲み量データにしたがって判断する判断手段,上記判断手段によって上記光学ズーム手段において設定されているズーム位置よりも滲み量が少ないズーム位置が存在する場合に,そのズーム位置となるように上記光学ズーム手段を制御する光学ズーム制御手段,撮影者による設定にしたがうズーム位置と,上記光学ズーム制御手段による変更後のズーム位置の下で,同一の被写体を2回撮像し,撮像によって得られる第1および第2の画像データを出力する撮像手段,上記撮像手段から出力される第1画像データによって表される第1画像と,第2画像データによって表される第2画像の画像の位置を合わせる位置合わせ手段,上記第2画像を拡大または縮小することによって,第1画像と上記第2画像の画角を合わせる画角合わせ手段,上記第1画像に色滲み領域が含まれるかどうかを検出する色滲み領域検出手段,および上記色滲み領域検出手段によって色滲み領域が検出された場合に,上記第2画像中の上記色滲み領域に対応する領域によって,上記第1画像中の色滲み領域を置換する色滲み除去手段を備える。ユーザによって設定されたズーム位置の下での撮像によって得られた第1画像中に色滲み領域が存在しても,ズーム位置が変更された上で撮像された第2画像中の上記色滲み領域に対応する領域によって置換することによって,第1画像を,色滲み領域が無いまたは低減されたものとすることができる。   An image pickup apparatus according to a fourth aspect of the invention stores optical zoom means for optically zooming, and blur amount data representing the amount of blur corresponding to each zoom position from the wide-angle end to the telephoto end in the optical zoom means. A blur amount data storage means for determining whether or not there is a zoom position with a blur amount smaller than a zoom position according to a setting by the photographer according to the blur amount data stored in the blur amount data storage means; , An optical zoom control means for controlling the optical zoom means so that the zoom position becomes the zoom position when there is a zoom position where the blur amount is smaller than the zoom position set in the optical zoom means by the judging means. The zoom position according to the setting by the user and the zoom position after the change by the optical zoom control means An imaging means for imaging the same subject twice and outputting first and second image data obtained by imaging, a first image represented by the first image data output from the imaging means, and a second image Position adjusting means for adjusting the position of the image of the second image represented by the data, field angle adjusting means for adjusting the angle of view of the first image and the second image by enlarging or reducing the second image, Corresponding to the color blur area in the second image when the color blur area detection means for detecting whether a color blur area is included in one image and the color blur area detection means detects the color blur area Color blur removing means for replacing the color blur area in the first image by the area to be performed is provided. Even if a color blur region exists in the first image obtained by imaging under the zoom position set by the user, the color blur region in the second image captured after the zoom position is changed By substituting with a region corresponding to, the first image can have no or reduced color blur region.

この発明による画像処理装置は,それぞれ異なる撮影条件の下で同一の被写体が複数回撮像されることによって得られた複数の画像データの入力を受付ける画像データ入力手段,上記画像データ入力手段によって受付けられた複数の画像データによって表される複数の画像の位置を合わせる位置合わせ手段,上記画像データによって表される画像に色滲み領域が含まれるかどうかを検出する色滲み領域検出手段,および上記色滲み領域検出手段によって色滲み領域が検出された画像データ以外の画像データによって表される画像中の上記色滲み領域に対応する領域によって,上記色滲み領域が検出された画像データによって表される画像中の色滲み領域を置換する色滲み除去手段を備える。   An image processing apparatus according to the present invention is received by an image data input unit that receives an input of a plurality of image data obtained by imaging the same subject a plurality of times under different shooting conditions, and the image data input unit. Positioning means for aligning positions of a plurality of images represented by a plurality of image data, color blur area detecting means for detecting whether a color blur area is included in the image represented by the image data, and the color blur In the image represented by the image data in which the color blur area is detected by the area corresponding to the color blur area in the image represented by the image data other than the image data in which the color blur area is detected by the area detection means The color blur removing means for replacing the color blur area is provided.

この発明による画像処理方法は,画像データ入力手段が,それぞれ異なる撮影条件の下で同一の被写体が複数回撮像されることによって得られた複数の画像データの入力を受付け,位置合わせ手段が,上記画像データ入力手段によって受付けられた複数の画像データによって表される複数の画像の位置を合わせ,色滲み領域検出手段が,上記画像データによって表される画像に色滲み領域が含まれるかどうかを検出し,色滲み除去手段が,上記色滲み領域検出手段によって色滲み領域が検出された画像データ以外の画像データによって表される画像中の上記色滲み領域に対応する領域によって,上記色滲み領域が検出された画像データによって表される画像中の色滲み領域を置換するものである。   In the image processing method according to the present invention, the image data input means accepts input of a plurality of image data obtained by imaging the same subject a plurality of times under different shooting conditions, and the positioning means is the above described A plurality of images represented by the plurality of image data received by the image data input means are aligned, and the color blur area detection means detects whether the image represented by the image data includes a color blur area. Then, the color blur removal unit is configured to detect the color blur region by an area corresponding to the color blur region in the image represented by the image data other than the image data in which the color blur region is detected by the color blur region detection unit. The color blur area in the image represented by the detected image data is replaced.

この発明は,コンピュータを上記画像処理装置として機能させるためのプログラムも提供する。   The present invention also provides a program for causing a computer to function as the image processing apparatus.

この発明によると,受付けられる複数の画像データによって表される複数の画像のうちの色滲み領域が含まれる画像がユーザの意図に沿うものである場合,その画像中の色滲み領域が,異なる撮影条件の下で得られた他の画像の中の上記色滲み領域に対応する領域によって置換される。ユーザの意図に沿う色滲み領域が含まれる画像において色滲みは無くなるまたは低減され,色滲みの無いまたは低減された画像を得ることができる。   According to the present invention, when an image including a color blur area among a plurality of images represented by a plurality of received image data is in accordance with the user's intention, the color blur areas in the image are different from each other. It is replaced by a region corresponding to the color blur region in another image obtained under the condition. Color blur is eliminated or reduced in an image including a color blur area that meets the user's intention, and an image with no or reduced color blur can be obtained.

第1実施例のディジタル・スチル・カメラの電気的構成を示すブロック図である。It is a block diagram which shows the electric constitution of the digital still camera of 1st Example. 第1実施例の色滲み除去処理の手順を示すフローチャートである。It is a flowchart which shows the procedure of the color blur removal process of 1st Example. (A)は色滲み(パーフルフリンジ)が発生している画像を,(B)は色滲みの無い画像をそれぞれ示す。(A) shows an image in which color blur (perfull fringe) occurs, and (B) shows an image without color blur. 第2実施例のディジタル・スチル・カメラの電気的構成を示すブロック図である。It is a block diagram which shows the electric constitution of the digital still camera of 2nd Example. 第2実施例の色滲み除去処理の手順を示すフローチャートである。It is a flowchart which shows the procedure of the color blur removal process of 2nd Example. 第3実施例のディジタル・スチル・カメラの電気的構成を示すブロック図である。It is a block diagram which shows the electric constitution of the digital still camera of 3rd Example. 第3実施例の色滲み除去処理の手順を示すフローチャートである。It is a flowchart which shows the procedure of the color blur removal process of 3rd Example. ズーム位置ごとの色滲み量データを表すグラフである。6 is a graph showing color blur amount data for each zoom position. 第4実施例のディジタル・スチル・カメラの電気的構成を示すブロック図である。It is a block diagram which shows the electric constitution of the digital still camera of 4th Example. 第4実施例の色滲み除去処理の手順を示すフローチャートである。It is a flowchart which shows the procedure of the color blur removal process of 4th Example.

第1実施例
図1は第1実施例のディジタル・スチル・カメラ1の電気的構成を示すブロック図である。
First Embodiment FIG. 1 is a block diagram showing an electrical configuration of a digital still camera 1 according to a first embodiment.

ディジタル・スチル・カメラ1は,撮像ユニット10,演算/処理ユニット20および表示ユニット30を備えている。撮像ユニット10,演算/処理ユニット20および表示ユニット30はデータバスを介して互いに接続されている。データバスにはさらにVRAM41,メモリインターフェース(メモリI/F)42,外部メモリ・インターフェース(外部メモリI/F)45,および撮影条件自動変更制御装置47も接続されている。   The digital still camera 1 includes an imaging unit 10, an arithmetic / processing unit 20, and a display unit 30. The imaging unit 10, the arithmetic / processing unit 20, and the display unit 30 are connected to each other via a data bus. Further, a VRAM 41, a memory interface (memory I / F) 42, an external memory interface (external memory I / F) 45, and an imaging condition automatic change control device 47 are connected to the data bus.

撮像ユニット10はCCD11を備え,CCD11の前方に,ズームレンズ,撮像レンズ,絞り,赤外線カット・フィルタ,光学的ロウパスフィルタ(OLPF)等を含む光学ユニット12が設けられている。   The imaging unit 10 includes a CCD 11, and an optical unit 12 including a zoom lens, an imaging lens, a diaphragm, an infrared cut filter, an optical low pass filter (OLPF), and the like is provided in front of the CCD 11.

ディジタル・スチル・カメラ1の電源がオンされ,撮影モードが設定されると,被写体像を表す光線束が光学ユニット12に入射する。光線束は光学ユニット12を介してCCD11の受光面上に入射する。CCD11には多数のフォトダイオード(光電変換素子)がその受光面に二次元的に配置され,かつ受光面上には所定の配列構造(ベイヤー配列,Gストライプ配列など)を持って配列された赤(R),緑(G),青(B)のカラーフィルタが設けられている。光学ユニット12によって結像された被写体像がCCD11によって電子的に撮像される。   When the power of the digital still camera 1 is turned on and the photographing mode is set, a light beam representing a subject image enters the optical unit 12. The light beam is incident on the light receiving surface of the CCD 11 via the optical unit 12. In the CCD 11, a number of photodiodes (photoelectric conversion elements) are two-dimensionally arranged on the light receiving surface, and the red light is arranged on the light receiving surface with a predetermined arrangement structure (Bayer arrangement, G stripe arrangement, etc.). Color filters of (R), green (G), and blue (B) are provided. A subject image formed by the optical unit 12 is electronically captured by the CCD 11.

CCD11から出力された被写体像を表すアナログ信号は,アナログ信号処理装置13に入力する。   An analog signal representing the subject image output from the CCD 11 is input to the analog signal processing device 13.

アナログ信号処理装置13には,相関二重サンプリング回路,信号増幅器などが含まれている。CCD11から出力された被写体像を表すアナログ信号に対して,相関二重サンプリング,信号増幅などが行われる。アナログ信号処理装置13から出力されたアナログ映像信号(アナログRGB信号)はアナログ/ディジタル変換回路(ADC)14に入力し,所定の信号処理の後,ディジタル画像データ(デジタルRGBデータ)に変換される。また,必要に応じてRGBデータは輝度データ(Yデータ)と色差データ(Cr,Cbデータ)とからなる画像データ(YUVデータ)に変換される。   The analog signal processing device 13 includes a correlated double sampling circuit, a signal amplifier, and the like. Correlated double sampling, signal amplification, and the like are performed on the analog signal representing the subject image output from the CCD 11. An analog video signal (analog RGB signal) output from the analog signal processing device 13 is input to an analog / digital conversion circuit (ADC) 14 and converted into digital image data (digital RGB data) after predetermined signal processing. . Further, the RGB data is converted into image data (YUV data) including luminance data (Y data) and color difference data (Cr, Cb data) as necessary.

ADC14から出力されたディジタル画像データに対して,デジタル信号処理装置15において白バランス調整,ガンマ補正,同時化処理(単板CCDのカラーフィルタ配列に伴う色信号の空間的ズレを補完して色信号を同時式に変換する処理)などの所定のディジタル信号処理が行われる。ディジタル画像データはデータバスを介してVRAM41に一時的に記憶される。VRAM41から読出されたディジタル画像データによって表される被写体像は,画像再生処理装置31において所定の処理が行われた後,エンコーダ32にエンコードされて表示装置33に与えられ,表示画面上に表示される。   The digital image data output from the ADC 14 is subjected to white balance adjustment, gamma correction, and synchronization processing in the digital signal processing unit 15 (complementing the color signal spatial displacement associated with the color filter array of the single-plate CCD to obtain a color signal) Predetermined digital signal processing, such as a process for simultaneously converting Digital image data is temporarily stored in the VRAM 41 via a data bus. The subject image represented by the digital image data read from the VRAM 41 is subjected to predetermined processing in the image reproduction processing device 31, and then encoded by the encoder 32 and given to the display device 33, and displayed on the display screen. The

メモリI/F7にはRAM43およびROM44が接続されている。RAM43には後述する色にじみ除去処理において用いられるデータ等が一時的に記憶される。ROM44には,演算/処理ユニット20に含まれるCPU21が実行する制御プログラム,制御に必要な各種データ,撮影者設定情報等,デジタル・スチル・カメラの動作に関する各種設定情報等が記憶されている。   A RAM 43 and a ROM 44 are connected to the memory I / F 7. The RAM 43 temporarily stores data and the like used in the color blur removal process described later. The ROM 44 stores a control program executed by the CPU 21 included in the arithmetic / processing unit 20, various data necessary for control, photographer setting information, and various setting information related to the operation of the digital still camera.

ズームボタン(図示略)が操作されると,光学ユニット12に含まれるズームレンズがモータ駆動回路16によって駆動され,広角側と望遠側との間でズーム倍率が無段階に切替えられる。   When a zoom button (not shown) is operated, the zoom lens included in the optical unit 12 is driven by the motor drive circuit 16, and the zoom magnification is switched steplessly between the wide angle side and the telephoto side.

シャッタ・レリーズ・ボタン(図示略)の第一段階の押下があると,モータ駆動回路16によって光学ユニット12の撮像レンズが駆動されて焦点合わせが行われる。VRAM41から読出される画像データに基づいてデジタル信号処理装置15において輝度データが得られる。輝度データの積算値を表すデータがCPU21に与えられて露出量が算出される。算出された露出量となるように光学ユニット12の絞りの開口がモータ駆動回路16によって制御され,CCD11のシャッタ速度が撮像素子駆動回路(図示略)によって制御される。   When a shutter release button (not shown) is pressed in the first stage, the motor driving circuit 16 drives the imaging lens of the optical unit 12 to perform focusing. Luminance data is obtained in the digital signal processor 15 based on the image data read from the VRAM 41. Data representing the integrated value of the luminance data is given to the CPU 21 to calculate the exposure amount. The aperture opening of the optical unit 12 is controlled by the motor drive circuit 16 so that the calculated exposure amount is obtained, and the shutter speed of the CCD 11 is controlled by the image sensor drive circuit (not shown).

シャッタ・レリーズ・ボタンの第二段階の押下があると,ディジタル画像データはRAM43に記憶される。RAM43から読出された画像データに対し,所定のディジタル信号処理がデジタル信号処理装置15において行われ,圧縮伸張処理を経てデータ圧縮される。圧縮された画像データが外部メモリI/F45の制御によってメモリカード46に記録される。   When the shutter release button is pressed in the second stage, the digital image data is stored in the RAM 43. Predetermined digital signal processing is performed on the image data read from the RAM 43 in the digital signal processing device 15, and data compression is performed through compression / decompression processing. The compressed image data is recorded on the memory card 46 under the control of the external memory I / F 45.

再生モードが設定されると,メモリカード46に記録されている圧縮画像データが読み取られる。読取られた圧縮画像データは伸張された後VRAM41に記憶され,その後表示装置33において再生画像が表示される。   When the reproduction mode is set, the compressed image data recorded on the memory card 46 is read. The read compressed image data is decompressed and stored in the VRAM 41, and then the reproduced image is displayed on the display device 33.

撮影条件自動変更制御装置47は,撮影者によって設定される撮影条件(ディジタル・スチル・カメラ1によって自動的に設定される撮影条件(自動ピント合わせ,自動露出など)を含む)を,色滲み低減に着目して異なる撮影条件に自動的に変更するための装置である。撮影条件自動変更制御装置47の詳細は後述する。   The photographing condition automatic change control device 47 reduces color blurring by photographing conditions set by the photographer (including photographing conditions automatically set by the digital still camera 1 (automatic focusing, automatic exposure, etc.)). This is an apparatus for automatically changing to different shooting conditions. Details of the photographing condition automatic change control device 47 will be described later.

演算/処理ユニット20には,上述したCPU21の他に,画像取得回路22,複数画像位置合わせ処理回路23,色滲み検出処理回路24および色滲み補完処理回路25を含む。これらの回路はCPU21に接続されている。   The arithmetic / processing unit 20 includes an image acquisition circuit 22, a multiple image alignment processing circuit 23, a color blur detection processing circuit 24, and a color blur complement processing circuit 25 in addition to the CPU 21 described above. These circuits are connected to the CPU 21.

演算/処理ユニット20に含まれる各種回路が用いられて,以下に説明する色滲み除去処理が行われる。   Various circuits included in the arithmetic / processing unit 20 are used to perform the color blur removal process described below.

図2は,ディジタル・スチル・カメラ1によって行われる第1実施例の色滲み除去処理の手順を示すフローチャートである。   FIG. 2 is a flowchart showing a procedure of color blur removal processing of the first embodiment performed by the digital still camera 1.

上述したように,シャッタ・レリーズ・ボタンの第二段階の押下があると,ディジタル画像データはRAM43に記憶される。RAM43に記憶された画像データが色滲み除去処理の対象となる。色滲み除去処理はディジタル・スチル・カメラ1に設けられた操作部(図示略)によって色滲み除去モードが選択された状態でシャッタ・レリーズ・ボタンの第二段階の押下があったときに実行してもよいし,被写体が所定の条件に沿うとき,たとえば,高輝度の被写体と低輝度の被写体の両方を含む被写体が撮影されたことがCPU21によって判断された場合に実行するようにしてもよい。   As described above, the digital image data is stored in the RAM 43 when the shutter release button is pressed in the second stage. The image data stored in the RAM 43 is the target of color blur removal processing. The color blur removal process is executed when the shutter release button is pressed in the second stage while the color blur removal mode is selected by an operation unit (not shown) provided in the digital still camera 1. Alternatively, it may be executed when the CPU 21 determines that a subject including both a high-luminance subject and a low-luminance subject has been photographed when the subject meets a predetermined condition. .

第1実施例の色滲み除去処理では,シャッタ・レリーズ・ボタンの第二段階の押下があると,2回の撮像(画像データの取得)が行われる。   In the color blur removal process according to the first embodiment, when the shutter release button is pressed in the second stage, imaging (acquisition of image data) is performed twice.

第1回目の撮像は,撮影者の意図どおりの撮影条件(ピント合わせ,露出調整等)による撮像である。撮影者の意図どおりの撮影条件の下で得られる画像を,以下,「画像A」と呼ぶ。   The first imaging is an imaging under imaging conditions (focusing, exposure adjustment, etc.) as intended by the photographer. An image obtained under shooting conditions intended by the photographer is hereinafter referred to as “image A”.

第2回目の撮像は,撮影者の意図とは異なる色滲み低減に着目した撮影条件の下での撮像である。色滲み(パープルフリンジ)は被写体像における急激な輝度変化部分に発生する。また,撮像レンズの中心部を通過する光よりも周辺部を通過する光によって色滲みは発生する。したがって,色滲み低減に着目した撮影条件においては,光学ユニット12の撮像レンズを焦点合わせ位置とは異なる位置に駆動する(ピント位置をずらす)ことにより画像ぼけを発生させることによって,急激な輝度変化を緩やかな輝度変化にして被写体が撮像される。急激な輝度変化が緩和されるので色滲みが発生しにくくなる。さらに,これに併せて,光学ユニット12に含まれる絞りを絞る(F値を大きくする)ことも行われる。撮像レンズの中心を通過した光が使用されやすくなり,これによっても色滲みは低減される。また,光学ユニット12の絞りを絞ると被写体深度が深くなるので,上述の画像ぼけを緩和する効果も得られる。これらの撮影者の意図とは異なる色滲み低減に着目した撮影条件が撮影条件自動変更制御装置47によって決定される。撮影条件自動変更制御装置47からの撮影条件変更指示に基づいて,モータ駆動回路16によって光学ユニット12中の撮像レンズのレンズ位置および絞りの絞り値が変更される。   The second imaging is an imaging under imaging conditions focusing on color blur reduction different from the photographer's intention. Color blur (purple fringe) occurs in a sudden luminance change portion in a subject image. Further, color blur is caused by light passing through the peripheral part rather than light passing through the central part of the imaging lens. Therefore, under shooting conditions that focus on color blur reduction, a sudden change in brightness occurs by driving the imaging lens of the optical unit 12 to a position different from the focusing position (shifting the focus position) to generate image blur. The subject is imaged with a gradual change in brightness. Sudden changes in brightness are alleviated, so that color bleeding is less likely to occur. At the same time, the diaphragm included in the optical unit 12 is narrowed (F value is increased). Light that passes through the center of the imaging lens is likely to be used, and this also reduces color blur. Further, when the aperture of the optical unit 12 is reduced, the depth of the subject is increased, so that the effect of reducing the above-mentioned image blur can be obtained. An imaging condition automatic change control device 47 determines an imaging condition focusing on color blur reduction different from the intention of the photographer. Based on an imaging condition change instruction from the imaging condition automatic change control device 47, the motor drive circuit 16 changes the lens position of the imaging lens in the optical unit 12 and the aperture value of the aperture.

撮影者の意図とは異なる色滲み低減に着目した撮影条件の下で得られる画像を,以下「画像B」という。   An image obtained under imaging conditions focusing on color blur reduction different from the photographer's intention is hereinafter referred to as “image B”.

第1実施例の色滲み除去処理では,シャッタ・レリーズ・ボタンの第二段階の押下があると,上述の撮影者の意図どおりの撮影条件のもとで得られる画像Aと,撮影者の意図とは異なる色滲み低減に着目した撮影条件のもとで得られる画像Bの2つの画像が取得される(ステップ61,62)。画像Aを表す画像データおよび画像Bを表す画像データは,いずれもRAM43に一時的に記憶される。   In the color blur removal process of the first embodiment, when the shutter release button is pressed in the second stage, the image A obtained under the photographing conditions as intended by the photographer and the photographer's intention Two images B, which are obtained under imaging conditions focusing on color blur reduction different from the above, are acquired (steps 61 and 62). Both the image data representing the image A and the image data representing the image B are temporarily stored in the RAM 43.

RAM43に一時的に記憶された画像Aを表す画像データおよび画像Bを表す画像データは画像取得回路22によって読出され,CPU21を介して複数画像位置合わせ回路23に与えられる。   The image data representing the image A and the image data representing the image B, which are temporarily stored in the RAM 43, are read out by the image acquisition circuit 22 and given to the multiple image alignment circuit 23 via the CPU 21.

複数画像位置合わせ回路23では,画像Aと画像Bの位置合わせが行われる(ステップ63)。たとえば,画像A中の特徴点(範囲)に対応する画像B中の対応点(範囲)が検出され,画像A中の特徴点と画像B中の対応点とを一致させるパラメータ(回転パラメータ,移動パラメータ,拡大/縮小パラメータ)が算出される。このパラメータを用いて画像Aと画像Bの位置合わせが行われる。   The multiple image alignment circuit 23 aligns the images A and B (step 63). For example, a corresponding point (range) in image B corresponding to a feature point (range) in image A is detected, and a parameter (rotation parameter, movement) for matching the feature point in image A and the corresponding point in image B is detected. Parameters, enlargement / reduction parameters) are calculated. Image A and image B are aligned using this parameter.

さらに,画像Aを表す画像データは色滲み検出処理回路24に与えられ,ここで画像A中の色滲みが検出される。色滲み(パープルフリンジ)は,画素ごとにその画素の色(たとえば,CrデータおよびCbデータに基づいて判断される色)が紫色または紫色に近い色であるかどうかによって判断してもよい。上述のように色滲みは画像中の急激な輝度変化部分に表れるので,画像A中の輝度エッジを検出し,輝度エッジ部分周辺の画素のみを対象して紫色の画素を見つけるようにしてもよい。   Further, the image data representing the image A is given to the color blur detection processing circuit 24, where the color blur in the image A is detected. The color blur (purple fringe) may be determined for each pixel based on whether the color of the pixel (for example, a color determined based on Cr data and Cb data) is purple or a color close to purple. As described above, since color blur appears in a sudden luminance change portion in the image, a luminance edge in the image A may be detected, and a purple pixel may be found only for pixels around the luminance edge portion. .

色滲みが検出されると,色滲み領域を特定するデータ(色滲みがあると判断された画素の画像Aにおける位置データ)が色滲み補完処理回路25に与えられる。   When the color blur is detected, data for specifying the color blur area (position data of the pixel in the image A determined to have color blur) is supplied to the color blur complement processing circuit 25.

色滲み補完処理回路25は,上記色滲み検出処理回路24から与えられた色滲み領域データにしたがって,画像Aにおける色滲み領域の画像部分を,画像Bにおける対応領域の画像部分に置換する処理を行う(ステップ65)。上述のように,あらかじめ画像Aと画像Bは複数画像位置合わせ処理回路23によって位置合わせされているので,画像Aにおける色滲み領域の画像部分は,色滲みの無い画像Bにおける対応領域の画像部分にほぼ正確に置換される。   The color blur complement processing circuit 25 performs processing for replacing the image portion of the color blur region in the image A with the image portion of the corresponding region in the image B according to the color blur region data given from the color blur detection processing circuit 24. Perform (step 65). As described above, since the images A and B are registered in advance by the multiple image alignment processing circuit 23, the image portion of the color blur area in the image A is the image portion of the corresponding area in the image B without color blur. Is replaced almost exactly.

図3(A)は画像Aの一例を示すもので色滲み(パーフルフリンジ)が発生している様子を示している。図3(B)は画像Bを示すもので色滲みの無い画像である。画像A中の色滲み発生領域(PF発生領域)の画像部分が,画像Bにおける上記PF発生領域に対応する領域(被置換領域)の画像部分によって置き換えられる。これにより,色滲みが除去された画像Aが生成される。色滲みが除去された画像Aを表すデータによって表される画像が表示装置33に表示され,圧縮処理を経てメモリカード46に記憶される。撮影者の意図どおりの撮影条件の下で得られた画像であって色滲みのない画像を得ることができる。   FIG. 3A shows an example of the image A, and shows a state in which color blur (perful fringe) occurs. FIG. 3B shows an image B, which is an image without color blur. The image portion of the color blur generation region (PF generation region) in the image A is replaced with the image portion of the region (replacement region) corresponding to the PF generation region in the image B. Thereby, an image A from which color blur is removed is generated. An image represented by the data representing the image A from which color blur has been removed is displayed on the display device 33, and is stored in the memory card 46 after being subjected to compression processing. It is possible to obtain an image obtained under photographing conditions as intended by the photographer and having no color blur.

第2実施例
図4は,第2実施例のディジタル・スチル・カメラ1Aの電気的構成を示すブロック図である。第1実施例のディジタル・スチル・カメラ1(図1)とは,演算/処理ユニット20Aに動体検出処理回路26が加えられている点が異なる。第1実施例で説明したディジタル・スチル・カメラ1中の装置および回路と同一物には同一符号を付し,重複説明を避ける。図5は第2実施例の色滲み除去処理の手順を示すフローチャートである。第1実施例のフローチャート(図2)と同一処理には同一符号を付し,重複説明を避ける。
Second Embodiment FIG. 4 is a block diagram showing an electrical configuration of a digital still camera 1A according to a second embodiment. This embodiment differs from the digital still camera 1 (FIG. 1) of the first embodiment in that a moving object detection processing circuit 26 is added to the arithmetic / processing unit 20A. The same components and circuits in the digital still camera 1 described in the first embodiment are denoted by the same reference numerals to avoid redundant description. FIG. 5 is a flowchart showing the procedure of color blur removal processing according to the second embodiment. The same processes as those in the flowchart (FIG. 2) of the first embodiment are denoted by the same reference numerals to avoid redundant description.

第2実施例の色滲み除去処理では,シャッタ・レリーズ・ボタンの第二段階の押下があると,3回の撮像(画像データの取得)が行われる。   In the color blur removal process of the second embodiment, when the shutter release button is pressed in the second stage, the image pickup (acquisition of image data) is performed three times.

第1回目の撮像および第3回目の撮像は,上述した撮影者の意図とは異なる色滲み低減に着目した撮影条件の下での撮像である。第1回目の撮像と第3回目の撮像は同一撮影条件の下での撮像であってもよいし,互いに撮像条件を異ならせてもよい。たとえば,第1回目の撮像においては焦点を合焦位置から前方向にずらし,第3回目の撮像では合焦位置から後方向にずらすようにしてもよい。いずれにしても,第1回目および第3回目の撮像は色滲み低減に着目した撮影条件の下での撮像とされる(ステップ62,ステップ71)。第1回目の撮像によって得られる画像を画像B,第3回目の撮像によって得られる画像を画像Cとする。   The first imaging and the third imaging are imaging under imaging conditions focusing on color blur reduction different from the above-described intention of the photographer. The first imaging and the third imaging may be imaging under the same imaging conditions, or the imaging conditions may be different from each other. For example, the focus may be shifted forward from the in-focus position in the first imaging, and may be shifted backward from the in-focus position in the third imaging. In any case, the first and third imaging are performed under imaging conditions focusing on color blur reduction (steps 62 and 71). An image obtained by the first imaging is called an image B, and an image obtained by the third imaging is called an image C.

第2回目の撮像は撮影者の意図どおりの撮影条件(ピント合わせ,露出調整等)による撮像である(ステップ61)。画像Aが得られる。   The second imaging is based on the imaging conditions (focusing, exposure adjustment, etc.) as intended by the photographer (step 61). Image A is obtained.

画像A,画像Bおよび画像Cを表す3つの画像データは,複数画像位置合わせ回路23に与えられ,ここで3つの画像ABC間で位置合わせが行われる(ステップ72)。   The three image data representing the image A, the image B, and the image C are given to the multiple image alignment circuit 23, where the alignment between the three images ABC is performed (step 72).

3つの画像ABCを表す画像データは,次に動体検出処理回路26に与えられる。   Image data representing the three images ABC is then provided to the moving object detection processing circuit 26.

動体検出処理回路26では3つの画像ABC間の差分が算出され,被写体像内の動体が検出される(ステップ73)。   The moving object detection processing circuit 26 calculates a difference between the three images ABC, and detects a moving object in the subject image (step 73).

動体検出処理回路26によって検出された動体が,画像Aにおける色滲み領域(図3(A)参照)上に存在している場合,その領域を避けて補完(置換)処理(ステップ74)は行われる。被置換領域としては画像Bを用いても画像Cを用いてもよい。動体が存在する色滲み領域は色滲み領域としての信憑性(確度)が低く,したがって色滲み除去処理を行わないようにするものである。これにより,動きを伴う被写体(動体)が存在する場合の誤補正(色滲み領域とは言えない領域まで置換されてしまうこと)を未然に防止することができる。   When the moving object detected by the moving object detection processing circuit 26 exists on the color blur area (see FIG. 3A) in the image A, the complement (replacement) process (step 74) is performed while avoiding that area. Is called. As the replacement area, the image B or the image C may be used. The color blur area in which a moving object exists has a low credibility (accuracy) as the color blur area, and therefore the color blur removal process is not performed. Thereby, it is possible to prevent erroneous correction (replacement of a region that cannot be said to be a color blur region) when there is a subject (moving body) that involves movement.

第3実施例
図6は第3実施例のディジタル・スチル・カメラ1Bの電気的構成を示すブロック図である。図1に示す第1実施例のディジタル・スチル・カメラ1とは,色滲み軽減ズーム位置算出処理回路48およびズーム位置ごとの色滲み量データを記憶した記憶装置51が加えられている点が異なる。第1実施例で説明したディジタル・スチル・カメラ1中の装置および回路と同一物には同一符号を付し,重複説明を避ける。図7は第3実施例の色滲み除去処理の手順を示すフローチャートである。第1実施例のフローチャート(図2)と同一処理には同一符号を付し,重複説明を避ける。
Third Embodiment FIG. 6 is a block diagram showing an electrical configuration of a digital still camera 1B according to a third embodiment. 1 is different from the digital still camera 1 of the first embodiment shown in FIG. 1 in that a color blur reduction zoom position calculation processing circuit 48 and a storage device 51 that stores color blur amount data for each zoom position are added. . The same components and circuits in the digital still camera 1 described in the first embodiment are denoted by the same reference numerals to avoid redundant description. FIG. 7 is a flowchart showing the procedure of the color blur removal process of the third embodiment. The same processes as those in the flowchart (FIG. 2) of the first embodiment are denoted by the same reference numerals to avoid redundant description.

ズームレンズによってはそのズーム位置によって色滲みの発生度合いが変わるものが存在する。ズーム位置にしたがう色滲みは,絞りのように特定の操作をすれば軽減できるといった固定の法則がないので,第3実施例では,記憶装置51(ROM44でもよい)に,ズーム位置ごとの色滲み量データがあらかじめ記憶され,記憶装置51に記憶されているズーム位置ごとの色滲み量データが,色滲み除去処理に用いられる。   Some zoom lenses change the degree of color blurring depending on the zoom position. Since there is no fixed law that the color blur according to the zoom position can be reduced by performing a specific operation like an aperture, in the third embodiment, the color blur at each zoom position is stored in the storage device 51 (or ROM 44). The amount data is stored in advance, and the color blur amount data for each zoom position stored in the storage device 51 is used for the color blur removal process.

図8は,記憶装置51に記憶されているズーム位置ごとの色滲み量データ(以下,色滲み量データという)の一例を示している。図8に示す色滲み量データが第3実施例における色滲み除去処理において用いられる。   FIG. 8 shows an example of color blur amount data (hereinafter referred to as color blur amount data) for each zoom position stored in the storage device 51. The color blur amount data shown in FIG. 8 is used in the color blur removal process in the third embodiment.

図7を参照して,シャッタ・レリーズ・ボタンの第二段階の押下があると,撮影意図のズーム位置よりも色滲みの少ないズーム位置が広角側に存在するかどうかが判断される(ステップ81)。   Referring to FIG. 7, when the shutter release button is pressed in the second stage, it is determined whether or not there is a zoom position on the wide-angle side with less color blur than the zoom position intended for shooting (step 81). ).

図8を参照して,撮影者によるズーム操作によるズーム位置が符号Aに示すズーム位置であったとする。符号Aに示すズーム位置よりも色滲みの少ないズーム位置が広角側に存在するので,この場合,色滲み軽減ズーム位置算出処理回路48によって,撮影者によるズーム操作に基づくズーム位置Aと,上記記憶装置51に記憶されている色滲み量データとに基づいて,撮影意図のズーム位置Aよりも色滲みの少ないズーム位置が広角側に存在すると判断される。次の処理に進むことになる(ステップ81でYES )。撮影者によるズーム操作によるズーム位置が図8の符号Bに示すズーム位置であった場合も同様である。   Referring to FIG. 8, it is assumed that the zoom position by the zoom operation by the photographer is the zoom position indicated by symbol A. Since a zoom position with less color blur than the zoom position indicated by the symbol A exists on the wide-angle side, in this case, the zoom position A based on the zoom operation by the photographer and the above memory are stored by the color blur reduction zoom position calculation processing circuit 48. Based on the color blur amount data stored in the device 51, it is determined that a zoom position with less color blur than the zoom position A intended for photographing exists on the wide angle side. The process proceeds to the next process (YES in step 81). The same applies when the zoom position by the photographer's zoom operation is the zoom position indicated by symbol B in FIG.

他方,撮影者によるズーム操作によるズーム位置が符号Cに示すズーム位置であった場合,符号Cに示すズーム位置よりも色滲み量の少ないズーム位置は広角側に存在しない。この場合には,色滲み処理は行われずに処理が終了する(ステップ81でNO)。   On the other hand, when the zoom position by the photographer's zoom operation is the zoom position indicated by reference numeral C, there is no zoom position on the wide-angle side that has less color blurring than the zoom position indicated by reference numeral C. In this case, the color blur process is not performed and the process ends (NO in step 81).

撮影意図のズーム位置よりも色滲みの少ないズーム位置が広角側に存在する場合(ステップ81でYES ),撮影者の意図どおりの撮影条件の下で画像Aが撮像され(ステップ61),その後撮影者の意図とは異なる撮影条件の下で画像Bが撮像される(ステップ62)。第3実施例における画像Bは,撮影者の意図によるズーム位置よりも広角側のズーム位置であって,撮影者の意図によるズーム位置に対応する滲み量よりも低い滲み量が得られるズーム位置が採用される。採用される広角側の色滲み低減ズーム位置は,色滲み軽減ズーム位置算出処理回路48によって上述の色滲み量データ(図8)が用いられて決定され,これに基づいてモータ駆動回路16によって光学ユニット12中のズームレンズのズーム位置が制御される。   If a zoom position with less color blur than the zoom position intended for shooting exists on the wide-angle side (YES in step 81), image A is taken under the shooting conditions intended by the photographer (step 61), and then shot. The image B is captured under shooting conditions different from the person's intention (step 62). The image B in the third embodiment is a zoom position on the wide-angle side from the zoom position intended by the photographer, and has a zoom position where a blur amount lower than the blur amount corresponding to the zoom position intended by the photographer is obtained. Adopted. The wide-angle color blur reduction zoom position to be adopted is determined by the color blur reduction zoom position calculation processing circuit 48 using the above-mentioned color blur amount data (FIG. 8). The zoom position of the zoom lens in the unit 12 is controlled.

画像Aを表す画像データおよび画像Bを表す画像データは複数画像位置合わせ回路23に与えられ,ここで位置合わせ処理と画角合わせ処理が行われる(ステップ82)。ズーム位置の相違によって画像Aの画角と画像Bの画角が異なるものになっているので,画角合わせ処理では,撮影者の意図とは異なる撮影条件の下で得られた画像Bの拡大処理(アフィン変換等)が行われる。   The image data representing the image A and the image data representing the image B are given to the multiple image alignment circuit 23, where alignment processing and angle-of-view alignment processing are performed (step 82). Since the angle of view of the image A and the angle of view of the image B are different due to the difference in the zoom position, in the angle-of-view adjustment processing, the image B obtained under shooting conditions different from the photographer's intention is enlarged. Processing (affine transformation or the like) is performed.

画像Aから色滲み領域が検出され,位置合わせおよび画角合わせが行われた画像Aおよび画像Bが用いられて,画像Aの色滲み領域が画像Bの被置換領域によって補完(置換)されるのは第1実施例と同様である。   The color blur area is detected from the image A, and the image A and the image B subjected to the alignment and the angle of view adjustment are used, and the color blur area of the image A is complemented (replaced) by the replacement area of the image B. This is the same as in the first embodiment.

上述した第3実施例において,画像Bについて撮影者の意図によるズーム位置よりも広角側のズーム位置を用いて撮像するのは,望遠側にすると,撮影者の意図どおりで撮影される画像Aの画角よりも色滲み除去処理に用いられる画像Bの画角が狭くなってしまい,画像A中の色滲み領域よりも広い範囲が被置換領域によって置換えられるのを防止するためである。もちろん,画像Bとして撮影者の意図によるズーム位置よりも望遠側のズーム位置を用いて撮像したものを用いてもよい。   In the third embodiment described above, the image B is imaged using the zoom position on the wide angle side with respect to the zoom position intended by the photographer. When the telephoto side is used, the image A is captured as intended by the photographer. This is to prevent the angle of view of the image B used for the color blur removal process from being narrower than the angle of view, and a range wider than the color blur area in the image A from being replaced by the replacement area. Of course, the image B may be an image captured using a zoom position on the telephoto side relative to the zoom position intended by the photographer.

ズーム位置を用いた撮影条件変更に加えて,第1実施例で説明した焦点位置ずらし(ピント位置ずらし)および絞り調整を併せて用いてもよい。   In addition to the photographing condition change using the zoom position, the focus position shift (focus position shift) and the aperture adjustment described in the first embodiment may be used together.

第4実施例
図9は第4実施例のディジタル・スチル・カメラ1Cの電気的構成を示すブロック図である。図10は第4実施例のディジタル・スチル・カメラ1Cによって行われる色滲み除去処理の手順を示すフローチャートである。第4実施例のディジタル・スチル・カメラ1Cの演算/処理ユニット20Bは,上述した第1実施例〜第3実施例で説明した処理回路,すなわち,画像取得回路22,複数画像位置合わせ処理回路23,色滲み検出処理回路24,色滲み補完処理回路25および動体検出処理回路26を含み,かつスルー画動体検出処理回路27をさらに備えている。
Fourth Embodiment FIG. 9 is a block diagram showing an electrical configuration of a digital still camera 1C according to a fourth embodiment. FIG. 10 is a flowchart showing the procedure of color blur removal processing performed by the digital still camera 1C of the fourth embodiment. The arithmetic / processing unit 20B of the digital still camera 1C of the fourth embodiment includes the processing circuits described in the first to third embodiments, that is, the image acquisition circuit 22 and the multiple image alignment processing circuit 23. , A color blur detection processing circuit 24, a color blur complement processing circuit 25, and a moving object detection processing circuit 26, and further includes a through image moving object detection processing circuit 27.

第4実施例では,上述した第1実施例〜第3実施例の色滲み除去処理のいずれの処理によって色滲み除去を行うかが判断され,判断された第1実施例〜第3実施例の色滲み除去処理のいずれかによって,色滲み除去処理が実行される。   In the fourth embodiment, it is determined which color blur removal process of the first to third embodiments described above is used to remove the color blur, and the determined first to third embodiments are determined. The color blur removal process is executed by one of the color blur removal processes.

図10を参照して,はじめにスルー画像(シャッタ・レリーズ・ボタンの2段階の押下前の撮像によって得られる画像)が用いられて,スルー画動体検出処理回路27によって動体検出処理が行われる(ステップ91)。   Referring to FIG. 10, first, a through image (an image obtained by imaging before pressing the shutter release button in two stages) is used, and a moving object detection process is performed by the through image detection circuit 27 (step 91).

動体が検出された状態でシャッタ・レリーズ・ボタンが押下された場合,第2実施例で説明した色滲み除去処理が実行される(ステップ92)。すなわち,3回の撮像が行われ,動体が存在する色滲み領域を除いて補完(置換)処理が行われる(図5)。   When the shutter release button is pressed while a moving object is detected, the color blur removal process described in the second embodiment is executed (step 92). That is, imaging is performed three times, and a complement (replacement) process is performed except for a color blur area where a moving object exists (FIG. 5).

動体が検出されない状態でシャッタ・レリーズ・ボタンが押下された場合,第1実施例または第3実施例のいずれかの処理によって色滲み除去処理が行われる。   When the shutter release button is pressed in a state where no moving object is detected, the color blur removal process is performed by the process of either the first embodiment or the third embodiment.

第3実施例で説明したように,撮影意図のズーム位置よりも色滲みの少ないズーム位置が広角側に存在するかどうかが判断される(ステップ81)。撮影意図のズーム位置よりも色滲みの少ないズーム位置が広角側に存在する場合(ステップ81でYES ),第3実施例の処理,すなわち撮影者の意図によるズーム位置よりも広角側のズーム位置であって,撮影者の意図によるズーム位置に対応する滲み量よりも少ない滲み量が得られるズーム位置の下で画像Bが撮像され,この画像Bが用いられて色滲み除去処理が行われる(図7)。   As described in the third embodiment, it is determined whether or not a zoom position with less color blur than the zoom position intended for shooting exists on the wide-angle side (step 81). If a zoom position with less color blur than the zoom position intended for shooting exists on the wide-angle side (YES in step 81), the processing of the third embodiment, that is, the zoom position on the wide-angle side than the zoom position intended by the photographer Thus, an image B is picked up at a zoom position where a blur amount smaller than the blur amount corresponding to the zoom position according to the photographer's intention is obtained, and color blur removal processing is performed using this image B (FIG. 7).

他方,撮影意図のズーム位置よりも色滲みの少ないズーム位置が広角側に存在しない場合(ステップ81でNO )(ズーム位置が最広角位置である場合を含む),第1実施例の処理,すなわち,ピント位置がずらされ,かつ絞りが絞られた状態で画像Bが撮像され,この画像Bが用いられて色滲み除去処理が行われる(図2)。   On the other hand, if there is no zoom position on the wide-angle side with less color blur than the zoom position intended for shooting (NO in step 81) (including the case where the zoom position is the widest-angle position), the processing of the first embodiment, The image B is picked up while the focus position is shifted and the aperture is reduced, and color blur removal processing is performed using the image B (FIG. 2).

第1実施例〜第3実施例で説明した3つの色滲み除去処理のうち,適切な色滲み除去処理が選択される。   Among the three color blur removal processes described in the first to third embodiments, an appropriate color blur removal process is selected.

上述した第1実施例〜第4実施例において,色滲み低減処理には,演算/処理ユニット20,20A,20Cの複数画像位置合わせ処理回路23,色滲み検出処理回路24,色滲み補完処理回路25等のハードウエア回路が用いられているが,これらのハードウエア回路の処理の一部または全部をプログラムによって実行するようにしてもよい。この場合には,これらのハードウエア回路の機能を実行するプログラムがROM44に記憶され,それがCPU21によって実行されることによって色滲み低減処理が行われる。   In the first to fourth embodiments described above, the color blur reduction processing includes multiple image alignment processing circuit 23, color blur detection processing circuit 24, and color blur complement processing circuit of arithmetic / processing units 20, 20A, 20C. Although hardware circuits such as 25 are used, some or all of the processing of these hardware circuits may be executed by a program. In this case, a program for executing the functions of these hardware circuits is stored in the ROM 44, and is executed by the CPU 21, whereby color blur reduction processing is performed.

1,1A,1B,1C ディジタル・スチル・カメラ
11 CCD
12 光学ユニット
15 デジタル信号処理装置
20 演算/処理ユニット
21 CPU
22 画像取得回路
23 複数画像位置合わせ処理回路
24 色滲み検出処理回路
25 色滲み補完回路
26 動体検出処理回路
47 撮影条件自動変更制御装置
48 色滲みズーム位置算出処理回路
51 記憶装置
1,1A, 1B, 1C Digital still camera
11 CCD
12 Optical unit
15 Digital signal processor
20 Arithmetic / Processing Unit
21 CPU
22 Image acquisition circuit
23 Multiple image alignment processing circuit
24 color blur detection processing circuit
25 color blur compensation circuit
26 Motion detection processing circuit
47 Shooting condition automatic change control device
48 color blur zoom position calculation processing circuit
51 Storage device

Claims (16)

それぞれ異なる撮影条件の下で同一の被写体を複数回撮像し,撮像によって得られる複数の画像データを出力する撮像手段,
上記撮像手段から出力される複数の画像データによって表される複数の画像の位置を合わせる位置合わせ手段,
上記撮像手段から出力される画像データによって表される画像に色滲み領域が含まれるかどうかを検出する色滲み領域検出手段,および
上記色滲み領域検出手段によって色滲み領域が検出された画像データ以外の画像データによって表される画像中の上記色滲み領域に対応する領域によって,上記色滲み領域が検出された画像データによって表される画像中の色滲み領域を置換する色滲み除去手段を備える,
撮像装置。
Imaging means for imaging the same subject multiple times under different shooting conditions and outputting a plurality of image data obtained by the imaging;
Positioning means for aligning positions of a plurality of images represented by a plurality of image data output from the imaging means;
Color blur area detection means for detecting whether or not a color blur area is included in an image represented by the image data output from the imaging means, and image data other than the image data in which the color blur area is detected by the color blur area detection means Color blur removing means for replacing the color blur area in the image represented by the image data in which the color blur area is detected with an area corresponding to the color blur area in the image represented by the image data;
Imaging device.
上記撮像手段から出力される複数の画像データを入力し,動き部分を検出する動き検出手段を備え,
色滲み除去手段は,上記色滲み領域検出手段によって検出された色滲み領域と上記動き検出手段によって検出された動き部分とが重複している場合に,その重複部分を除いた色滲み領域を置換する,
請求項1に記載の撮像装置。
A plurality of image data output from the imaging means, and a motion detection means for detecting a motion part;
The color blur removal means replaces the color blur area excluding the overlapping portion when the color blur area detected by the color blur area detection means overlaps with the motion part detected by the motion detection means. Do,
The imaging device according to claim 1.
光学的にズーム処理する光学ズーム手段,
上記光学ズーム手段における広角端から望遠端にかけてのそれぞれのズーム位置に対応する滲み量の大きさを表す滲み量データを記憶する滲み量データ記憶手段,
上記光学ズーム手段において設定されるズーム位置よりも滲み量が少ないズーム位置が存在するかどうかを,上記滲み量データ記憶手段に記憶されている滲み量データにしたがって判断する判断手段,
上記判断手段によって上記光学ズーム手段において設定されているズーム位置よりも滲み量が少ないズーム位置が存在する場合に,そのズーム位置となるように上記光学ズーム手段を制御する光学ズーム制御手段,および
上記光学ズーム制御手段によってズーム位置が変えられた後に撮像手段から出力されたズーム後画像データによって表されるズーム後画像を拡大または縮小することによって,上記光学ズーム制御手段によってズーム位置が変えられる前に撮像手段から出力されたズーム前画像データによって表されるズーム前画像と上記ズーム後画像の画角を合わせる画角合わせ手段をさらに備える,
請求項1または2に記載の撮像装置。
Optical zoom means for optically zooming,
Blur amount data storage means for storing blur amount data representing the amount of blur corresponding to each zoom position from the wide-angle end to the telephoto end in the optical zoom means;
Determining means for determining whether or not there is a zoom position where the amount of blur is smaller than the zoom position set in the optical zoom means, according to the blur amount data stored in the blur amount data storage means;
An optical zoom control means for controlling the optical zoom means so that the zoom position becomes the zoom position when there is a zoom position where the blur amount is smaller than the zoom position set in the optical zoom means by the judging means; Before the zoom position is changed by the optical zoom control means by enlarging or reducing the post-zoom image represented by the post-zoom image data output from the imaging means after the zoom position is changed by the optical zoom control means. An angle-of-view adjustment unit that matches the angle of view of the pre-zoom image represented by the pre-zoom image data output from the imaging unit and the post-zoom image;
The imaging device according to claim 1 or 2.
焦点距離の相違によって上記撮影条件が異なる,請求項1に記載の撮像装置。   The imaging apparatus according to claim 1, wherein the photographing condition varies depending on a difference in focal length. 絞り値の相違によって上記撮影条件が異なる,請求項1に記載の撮像装置。   The imaging apparatus according to claim 1, wherein the imaging condition varies depending on a difference in aperture value. 上記異なる撮影条件のうちの一つは撮影者による設定にしたがう撮影条件であり,残りの撮影条件は撮影者による設定と異なる撮影条件である,
請求項1に記載の撮像装置。
One of the different shooting conditions is a shooting condition according to the setting by the photographer, and the remaining shooting conditions are shooting conditions different from the setting by the photographer.
The imaging device according to claim 1.
撮影者による設定にしたがう第1撮影条件と,色滲みが低減されるように上記第1撮影条件が変更された,上記第1撮影条件とは異なる第2撮影条件の下で,同一の被写体を2回撮像し,撮像によって得られる第1および第2の画像データを出力する撮像手段,
上記撮像手段から出力される第1画像データによって表される第1画像と,第2画像データによって表される第2画像の位置を合わせる位置合わせ手段,
上記第1画像に色滲み領域が含まれるかどうかを検出する色滲み領域検出手段,および
上記色滲み領域検出手段によって色滲み領域が検出された場合に,上記第2画像中の上記色滲み領域に対応する領域によって,上記第1画像中の色滲み領域を置換する色滲み除去手段を備える,
撮像装置。
The same subject is captured under a first shooting condition according to the setting by the photographer and a second shooting condition that is different from the first shooting condition, and the first shooting condition is changed so that color blur is reduced. Imaging means for imaging twice and outputting first and second image data obtained by imaging;
Alignment means for aligning the positions of the first image represented by the first image data output from the imaging means and the second image represented by the second image data;
Color blur area detecting means for detecting whether or not the color blur area is included in the first image, and the color blur area in the second image when the color blur area is detected by the color blur area detecting means. Color blur removing means for replacing the color blur area in the first image by an area corresponding to
Imaging device.
撮影者による設定にしたがう第1撮影条件と,色滲みが低減されるように上記第1撮影条件が変更された,上記第1撮影条件とは異なる第2および第3撮影条件の下で,同一の被写体を3回撮像し,撮像によって得られる第1,第2および第3の画像データを出力する撮像手段,
上記撮像手段から出力される,第1画像データによって表される第1画像と,第2画像データによって表される第2画像と,第3画像データによって表される第3画像の位置を合わせる位置合わせ手段,
上記第1画像に色滲み領域が含まれるかどうかを検出する色滲み領域検出手段,
上記第1,第2および第3の画像データを用いて動き部分を検出する動き検出手段,
上記色滲み領域検出手段によって色滲み領域が検出された場合に,上記色滲み領域検出手段によって検出された色滲み領域と上記動き検出手段によって検出された動き部分とが重複しているときにはその重複部分を除いて,上記第2または第3画像中の上記色滲み領域に対応する領域によって,上記第1画像中の色滲み領域を置換する色滲み除去手段を備える,
撮像装置。
Same as the first shooting condition according to the setting by the photographer and the second and third shooting conditions different from the first shooting condition, wherein the first shooting condition is changed so as to reduce color blur. Imaging means for imaging the subject three times and outputting first, second and third image data obtained by imaging,
A position where the first image represented by the first image data, the second image represented by the second image data, and the third image represented by the third image data output from the imaging means are aligned. Matching means,
Color blur area detecting means for detecting whether the first image includes a color blur area;
Motion detection means for detecting a motion part using the first, second and third image data,
When the color blur area is detected by the color blur area detection means, the color blur area detected by the color blur area detection means and the motion part detected by the motion detection means overlap. Color blur removing means for replacing the color blur area in the first image with an area corresponding to the color blur area in the second or third image except for the portion;
Imaging device.
光学的にズーム処理する光学ズーム手段,
上記光学ズーム手段における広角端から望遠端にかけてのそれぞれのズーム位置に対応する滲み量の大きさを表す滲み量データを記憶する滲み量データ記憶手段,
撮影者による設定にしたがうズーム位置よりも滲み量が少ないズーム位置が存在するかどうかを,上記滲み量データ記憶手段に記憶されている滲み量データにしたがって判断する判断手段,
上記判断手段によって上記光学ズーム手段において設定されているズーム位置よりも滲み量が少ないズーム位置が存在する場合に,そのズーム位置となるように上記光学ズーム手段を制御する光学ズーム制御手段,
撮影者による設定にしたがうズーム位置と,上記光学ズーム制御手段による変更後のズーム位置の下で,同一の被写体を2回撮像し,撮像によって得られる第1および第2の画像データを出力する撮像手段,
上記撮像手段から出力される第1画像データによって表される第1画像と,第2画像データによって表される第2画像の画像の位置を合わせる位置合わせ手段,
上記第2画像を拡大または縮小することによって,第1画像と上記第2画像の画角を合わせる画角合わせ手段,
上記第1画像に色滲み領域が含まれるかどうかを検出する色滲み領域検出手段,および
上記色滲み領域検出手段によって色滲み領域が検出された場合に,上記第2画像中の上記色滲み領域に対応する領域によって,上記第1画像中の色滲み領域を置換する色滲み除去手段を備える,
撮像装置。
Optical zoom means for optically zooming,
Blur amount data storage means for storing blur amount data representing the amount of blur corresponding to each zoom position from the wide-angle end to the telephoto end in the optical zoom means;
Determining means for determining whether or not there is a zoom position having a smaller amount of blur than a zoom position according to a setting by the photographer, according to the blur amount data stored in the blur amount data storage means;
An optical zoom control means for controlling the optical zoom means so as to be the zoom position when there is a zoom position with less blurring than the zoom position set in the optical zoom means by the judging means;
Imaging that captures the same subject twice and outputs the first and second image data obtained by imaging under the zoom position according to the setting by the photographer and the zoom position after the change by the optical zoom control means means,
Alignment means for aligning the positions of the first image represented by the first image data output from the imaging means and the second image represented by the second image data;
An angle-of-view adjusting means for enlarging or reducing the second image to match the angle of view of the first image and the second image;
Color blur area detecting means for detecting whether or not the color blur area is included in the first image, and the color blur area in the second image when the color blur area is detected by the color blur area detecting means. Color blur removing means for replacing the color blur area in the first image by an area corresponding to
Imaging device.
撮像手段が,それぞれ異なる撮影条件の下で同一の被写体を複数回撮像し,撮像によって得られる複数の画像データを出力し,
位置合わせ手段が,上記撮像手段から出力される複数の画像データによって表される複数の画像の位置を合わせ,
色滲み領域検出手段が,上記撮像手段から出力される画像データによって表される画像に色滲み領域が含まれるかどうかを検出し,
色滲み除去手段が,上記色滲み領域検出手段によって色滲み領域が検出された画像データ以外の画像データによって表される画像中の上記色滲み領域に対応する領域によって,上記色滲み領域が検出された画像データによって表される画像中の色滲み領域を置換する,
撮像装置の制御方法。
The imaging means images the same subject multiple times under different shooting conditions, and outputs a plurality of image data obtained by the imaging,
The alignment means aligns the positions of a plurality of images represented by the plurality of image data output from the imaging means,
A color blur area detecting unit detects whether a color blur region is included in an image represented by the image data output from the imaging unit;
The color blur removal means detects the color blur area by an area corresponding to the color blur area in the image represented by image data other than the image data from which the color blur area is detected by the color blur area detection means. Replace the color blur area in the image represented by the image data
Control method of imaging apparatus.
撮像手段が,撮影者による設定にしたがう第1撮影条件と,色滲みが低減されるように上記第1撮影条件が変更された,上記第1撮影条件とは異なる第2撮影条件の下で,同一の被写体を2回撮像し,撮像によって得られる第1および第2の画像データを出力し,
位置合わせ手段が,上記撮像手段から出力される第1画像データによって表される第1画像と,第2画像データによって表される第2画像の位置を合わせ,
色滲み領域検出手段が,上記第1画像に色滲み領域が含まれるかどうかを検出し,
色滲み除去手段が,上記色滲み領域検出手段によって色滲み領域が検出された場合に,上記第2画像中の上記色滲み領域に対応する領域によって,上記第1画像中の色滲み領域を置換する,
撮像装置の制御方法。
Under the first shooting condition according to the setting by the photographer and the second shooting condition different from the first shooting condition in which the first shooting condition is changed so that color blur is reduced. Imaging the same subject twice, outputting first and second image data obtained by imaging,
The alignment means aligns the positions of the first image represented by the first image data output from the imaging means and the second image represented by the second image data,
A color blur area detecting means detects whether the first image includes a color blur area;
When the color blur area is detected by the color blur area detection unit, the color blur removal unit replaces the color blur region in the first image with a region corresponding to the color blur region in the second image. Do,
Control method of imaging apparatus.
撮像手段が,撮影者による設定にしたがう第1撮影条件と,色滲みが低減されるように上記第1撮影条件が変更された,上記第1撮影条件とは異なる第2および第3撮影条件の下で,同一の被写体を3回撮像し,撮像によって得られる第1,第2および第3の画像データを出力し,
位置合わせ手段が,上記撮像手段から出力される,第1画像データによって表される第1画像と,第2画像データによって表される第2画像と,第3画像データによって表される第3画像の位置を合わせ,
色滲み領域検出手段が,上記第1画像に色滲み領域が含まれるかどうかを検出し,
動き検出手段が,上記第1,第2および第3の画像データを用いて動き部分を検出し,
色滲み除去手段が,上記色滲み領域検出手段によって色滲み領域が検出された場合に,上記色滲み領域検出手段によって検出された色滲み領域と上記動き検出手段によって検出された動き部分とが重複しているときにはその重複部分を除いて,上記第2または第3画像中の上記色滲み領域に対応する領域によって,上記第1画像中の色滲み領域を置換する,
撮像装置の制御方法。
The imaging means has a first imaging condition according to a setting by a photographer, and a second and third imaging condition different from the first imaging condition, wherein the first imaging condition is changed so that color blur is reduced. Below, the same subject is imaged three times, and the first, second and third image data obtained by the imaging are output,
The alignment means outputs a first image represented by the first image data, a second image represented by the second image data, and a third image represented by the third image data, which are output from the imaging means. Align the position of
A color blur area detecting means detects whether the first image includes a color blur area;
A motion detecting means detects a motion part using the first, second and third image data;
When the color blur area is detected by the color blur area detection means, the color blur area detected by the color blur area detection means overlaps with the motion part detected by the motion detection means. The color blur area in the first image is replaced by an area corresponding to the color blur area in the second or third image, except for the overlapping portion.
Control method of imaging apparatus.
光学的にズーム処理する光学ズーム手段を備えた撮像装置の制御方法であって,
判断手段が,撮影者による設定にしたがうズーム位置よりも滲み量が少ないズーム位置が存在するかどうかを,滲み量データ記憶手段に記憶されている,上記光学ズーム手段における広角端から望遠端にかけてのそれぞれのズーム位置に対応する滲み量の大きさを表す滲み量データを記憶するしたがって判断し,
光学ズーム制御手段が,上記判断手段によって上記光学ズーム手段において設定されているズーム位置よりも滲み量が少ないズーム位置が存在する場合に,そのズーム位置となるように上記光学ズーム手段を制御し,
撮像手段が,撮影者による設定にしたがうズーム位置と,上記光学ズーム制御手段による変更後のズーム位置の下で,同一の被写体を2回撮像し,撮像によって得られる第1および第2の画像データを出力し,
位置合わせ手段が,上記撮像手段から出力される第1画像データによって表される第1画像と,第2画像データによって表される第2画像の画像の位置を合わせ,
画角合わせ手段が,上記第2画像を拡大または縮小することによって,第1画像と上記第2画像の画角を合わせ,
色滲み領域検出手段が,上記第1画像に色滲み領域が含まれるかどうかを検出し,
色滲み除去手段が,上記色滲み領域検出手段によって色滲み領域が検出された場合に,上記第2画像中の上記色滲み領域に対応する領域によって,上記第1画像中の色滲み領域を置換する,
撮像装置の制御方法。
A method for controlling an image pickup apparatus including an optical zoom means for optically zooming,
Whether or not there is a zoom position in which the blur amount is smaller than the zoom position according to the setting by the photographer is stored in the blur data storage unit from the wide-angle end to the telephoto end in the optical zoom unit. Therefore, it is determined to store blur amount data representing the amount of blur corresponding to each zoom position, and
The optical zoom control means controls the optical zoom means so as to be the zoom position when there is a zoom position where the blur amount is smaller than the zoom position set in the optical zoom means by the judging means,
First and second image data obtained by imaging the same subject twice, under the zoom position according to the setting by the photographer and the zoom position after the change by the optical zoom control means. Is output,
The alignment means aligns the positions of the first image represented by the first image data output from the imaging means and the second image represented by the second image data,
The angle of view matching means enlarges or reduces the second image to match the angles of view of the first image and the second image,
A color blur area detecting means detects whether the first image includes a color blur area;
When the color blur area is detected by the color blur area detection unit, the color blur removal unit replaces the color blur region in the first image with a region corresponding to the color blur region in the second image. Do,
Control method of imaging apparatus.
それぞれ異なる撮影条件の下で同一の被写体が複数回撮像されることによって得られた複数の画像データの入力を受付ける画像データ入力手段,
上記画像データ入力手段によって受付けられた複数の画像データによって表される複数の画像の位置を合わせる位置合わせ手段,
上記画像データによって表される画像に色滲み領域が含まれるかどうかを検出する色滲み領域検出手段,および
上記色滲み領域検出手段によって色滲み領域が検出された画像データ以外の画像データによって表される画像中の上記色滲み領域に対応する領域によって,上記色滲み領域が検出された画像データによって表される画像中の色滲み領域を置換する色滲み除去手段を備える,
画像処理装置。
Image data input means for receiving input of a plurality of image data obtained by imaging the same subject a plurality of times under different shooting conditions,
Positioning means for aligning positions of a plurality of images represented by a plurality of image data received by the image data input means;
Color blur area detecting means for detecting whether or not a color blur area is included in the image represented by the image data; and image data other than the image data in which the color blur area is detected by the color blur area detecting means. Color blur removing means for replacing the color blur area in the image represented by the image data in which the color blur area is detected by an area corresponding to the color blur area in the image.
Image processing device.
画像データ入力手段が,それぞれ異なる撮影条件の下で同一の被写体が複数回撮像されることによって得られた複数の画像データの入力を受付け,
位置合わせ手段が,上記画像データ入力手段によって受付けられた複数の画像データによって表される複数の画像の位置を合わせ,
色滲み領域検出手段が,上記画像データによって表される画像に色滲み領域が含まれるかどうかを検出し,
色滲み除去手段が,上記色滲み領域検出手段によって色滲み領域が検出された画像データ以外の画像データによって表される画像中の上記色滲み領域に対応する領域によって,上記色滲み領域が検出された画像データによって表される画像中の色滲み領域を置換する,
画像処理方法。
Image data input means accepts input of a plurality of image data obtained by imaging the same subject a plurality of times under different shooting conditions,
An alignment unit aligns a plurality of images represented by the plurality of image data received by the image data input unit;
A color blur area detecting means detects whether a color blur area is included in the image represented by the image data;
The color blur removal means detects the color blur area by an area corresponding to the color blur area in the image represented by image data other than the image data from which the color blur area is detected by the color blur area detection means. Replace the color blur area in the image represented by the image data
Image processing method.
コンピュータを,
それぞれ異なる撮影条件の下で同一の被写体が複数回撮像されることによって得られた複数の画像データの入力を受付ける画像データ入力手段,
上記画像データ入力手段によって受付けられた複数の画像データによって表される複数の画像の位置を合わせる位置合わせ手段,
上記画像データによって表される画像に色滲み領域が含まれるかどうかを検出する色滲み領域検出手段,および
上記色滲み領域検出手段によって色滲み領域が検出された画像データ以外の画像データによって表される画像中の上記色滲み領域に対応する領域によって,上記色滲み領域が検出された画像データによって表される画像中の色滲み領域を置換する色滲み除去手段,
として機能させるプログラム。
Computer
Image data input means for receiving input of a plurality of image data obtained by imaging the same subject a plurality of times under different shooting conditions,
Positioning means for aligning positions of a plurality of images represented by a plurality of image data received by the image data input means;
Color blur area detecting means for detecting whether or not a color blur area is included in the image represented by the image data; and image data other than the image data in which the color blur area is detected by the color blur area detecting means. Color blur removing means for replacing the color blur area in the image represented by the image data in which the color blur area is detected by an area corresponding to the color blur area in the image.
Program to function as.
JP2010074866A 2010-03-29 2010-03-29 Imaging apparatus and control method thereof Expired - Fee Related JP5378283B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010074866A JP5378283B2 (en) 2010-03-29 2010-03-29 Imaging apparatus and control method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010074866A JP5378283B2 (en) 2010-03-29 2010-03-29 Imaging apparatus and control method thereof

Publications (2)

Publication Number Publication Date
JP2011211329A true JP2011211329A (en) 2011-10-20
JP5378283B2 JP5378283B2 (en) 2013-12-25

Family

ID=44941965

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010074866A Expired - Fee Related JP5378283B2 (en) 2010-03-29 2010-03-29 Imaging apparatus and control method thereof

Country Status (1)

Country Link
JP (1) JP5378283B2 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017183813A (en) * 2016-03-28 2017-10-05 キヤノン株式会社 Image processing device, image processing method, and program
EP3474532A1 (en) 2017-10-17 2019-04-24 Canon Kabushiki Kaisha Image processing apparatus, image processing method, and program
EP3493527A1 (en) * 2017-11-30 2019-06-05 Axis AB Method, apparatus and system for detecting and reducing the effects of color fringing in digital video acquired by a camera
CN111199524A (en) * 2019-12-26 2020-05-26 浙江大学 Purple edge correction method for image of adjustable aperture optical system
CN112367465A (en) * 2020-10-30 2021-02-12 维沃移动通信有限公司 Image output method and device and electronic equipment
CN112887614A (en) * 2021-01-27 2021-06-01 维沃移动通信有限公司 Image processing method and device and electronic equipment

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007235466A (en) * 2006-02-28 2007-09-13 Fujifilm Corp Imaging apparatus and imaging method
JP2009284009A (en) * 2008-05-19 2009-12-03 Canon Inc Image processor, imaging device, and image processing method
JP2011109496A (en) * 2009-11-19 2011-06-02 Nikon Corp Imaging apparatus

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007235466A (en) * 2006-02-28 2007-09-13 Fujifilm Corp Imaging apparatus and imaging method
JP2009284009A (en) * 2008-05-19 2009-12-03 Canon Inc Image processor, imaging device, and image processing method
JP2011109496A (en) * 2009-11-19 2011-06-02 Nikon Corp Imaging apparatus

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017183813A (en) * 2016-03-28 2017-10-05 キヤノン株式会社 Image processing device, image processing method, and program
EP3474532A1 (en) 2017-10-17 2019-04-24 Canon Kabushiki Kaisha Image processing apparatus, image processing method, and program
US10861194B2 (en) 2017-10-17 2020-12-08 Canon Kabushiki Kaisha Image processing apparatus, image processing method, and storage medium
CN109862332A (en) * 2017-11-30 2019-06-07 安讯士有限公司 For detecting and reducing the methods, devices and systems of color fringe effect
KR20190064419A (en) * 2017-11-30 2019-06-10 엑시스 에이비 Method, apparatus and system for detecting and reducing the effects of color fringing in digital video acquired by a camera
KR102054596B1 (en) 2017-11-30 2020-01-22 엑시스 에이비 Method, apparatus and system for detecting and reducing the effects of color fringing in digital video acquired by a camera
TWI694725B (en) * 2017-11-30 2020-05-21 瑞典商安訊士有限公司 Method, apparatus and system for detecting and reducing the effects of color fringing in digital video acquired by a camera
US10687036B2 (en) 2017-11-30 2020-06-16 Axis Ab Method, apparatus and system for detecting and reducing the effects of color fringing in digital video acquired by a camera
EP3493527A1 (en) * 2017-11-30 2019-06-05 Axis AB Method, apparatus and system for detecting and reducing the effects of color fringing in digital video acquired by a camera
CN111199524A (en) * 2019-12-26 2020-05-26 浙江大学 Purple edge correction method for image of adjustable aperture optical system
CN111199524B (en) * 2019-12-26 2023-03-17 浙江大学 Purple edge correction method for image of adjustable aperture optical system
CN112367465A (en) * 2020-10-30 2021-02-12 维沃移动通信有限公司 Image output method and device and electronic equipment
CN112367465B (en) * 2020-10-30 2022-12-13 维沃移动通信有限公司 Image output method and device and electronic equipment
CN112887614A (en) * 2021-01-27 2021-06-01 维沃移动通信有限公司 Image processing method and device and electronic equipment
CN112887614B (en) * 2021-01-27 2022-05-17 维沃移动通信有限公司 Image processing method and device and electronic equipment

Also Published As

Publication number Publication date
JP5378283B2 (en) 2013-12-25

Similar Documents

Publication Publication Date Title
JP4528235B2 (en) Digital camera
US9258545B2 (en) Stereoscopic imaging apparatus
JP5243666B2 (en) Imaging apparatus, imaging apparatus main body, and shading correction method
JP5947601B2 (en) FOCUS DETECTION DEVICE, ITS CONTROL METHOD, AND IMAGING DEVICE
US20180182075A1 (en) Image processing apparatus, image capturing apparatus, method of image processing, and storage medium
JP5871989B2 (en) Imaging apparatus, imaging method, and program
JPWO2012073729A1 (en) Imaging apparatus and focus position detection method thereof
JP5378283B2 (en) Imaging apparatus and control method thereof
JP5572700B2 (en) Imaging apparatus and imaging method
JP5272699B2 (en) Image processing apparatus, imaging apparatus, program, and image processing method
JP2007102061A (en) Imaging apparatus
JP5092673B2 (en) Imaging apparatus and program thereof
WO2017086065A1 (en) Image-capturing device and method of controlling same
KR20070120012A (en) Photographing apparatus, and photographing method
JP5387341B2 (en) Imaging device
JP5318321B2 (en) Imaging device
JP2015220634A (en) Image processing system, image processing system control method, and imaging apparatus
JP6482247B2 (en) FOCUS ADJUSTMENT DEVICE, IMAGING DEVICE, FOCUS ADJUSTMENT DEVICE CONTROL METHOD, AND PROGRAM
JP2014130231A (en) Imaging apparatus, method for controlling the same, and control program
JP5597942B2 (en) Electronic camera
CN106464783B (en) Image pickup control apparatus, image pickup apparatus, and image pickup control method
JP2010204303A (en) Imaging apparatus
JP2014063190A (en) Imaging apparatus
JP2024004307A (en) Imaging device and control method thereof, program, and storage medium
JP2013149043A (en) Image processing device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120514

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130425

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130507

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130610

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130903

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130925

R150 Certificate of patent or registration of utility model

Ref document number: 5378283

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees