WO2014136703A1 - 撮像装置及び画像表示方法 - Google Patents

撮像装置及び画像表示方法 Download PDF

Info

Publication number
WO2014136703A1
WO2014136703A1 PCT/JP2014/055227 JP2014055227W WO2014136703A1 WO 2014136703 A1 WO2014136703 A1 WO 2014136703A1 JP 2014055227 W JP2014055227 W JP 2014055227W WO 2014136703 A1 WO2014136703 A1 WO 2014136703A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
subject
focus
captured image
correction
Prior art date
Application number
PCT/JP2014/055227
Other languages
English (en)
French (fr)
Inventor
山元康裕
Original Assignee
リコーイメージング株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by リコーイメージング株式会社 filed Critical リコーイメージング株式会社
Publication of WO2014136703A1 publication Critical patent/WO2014136703A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28—Systems for automatic generation of focusing signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"

Definitions

  • the present invention relates to an imaging apparatus having a display unit capable of displaying a captured image and a method for displaying the captured image.
  • Japanese Patent Application Laid-Open No. 2008-116663 discloses an imaging apparatus that continuously captures subject images via a lens and displays them on a display unit. Some of these lenses have aberrations. In order to correct this aberration, the image is subjected to mathematical processing.
  • the process of correcting the aberration places a certain load on the processing capability of the imaging apparatus. Therefore, there is a possibility that the processing capacity that is devoted to other processes must be devoted to the process of correcting aberrations.
  • this process when this process is applied to an imaging apparatus that continuously captures subject images and displays them on the display unit, the ability to reduce the number of pixels of the image displayed on the display unit, the update frequency, etc., is allocated to image display. This reduces the processing capacity for correcting the aberration.
  • the image quality of the displayed image is deteriorated and the appearance is deteriorated, and there is a possibility that it is difficult for the user to confirm whether or not the image is in focus.
  • An object of the present invention is to obtain an imaging apparatus and an image display method that allow a user to easily determine whether or not a subject is in focus while referring to an image displayed on a display unit.
  • An imaging device includes an imaging device that captures a subject image and outputs a captured image, an optical system that focuses the subject and forms the subject image on the imaging device, and a captured image from the imaging device.
  • An image correction unit that corrects aberration caused by the optical system included in the captured image and creates a corrected image, and a display unit that displays the captured image or the corrected image, and the optical system is used as a subject image.
  • the period during which the focusing operation is performed is a focusing operation period, and at least in the focusing operation period, the image correction unit does not correct aberration, and the display unit displays a captured image.
  • the camera further includes a focus determination unit that acquires a captured image from the image sensor and determines whether the optical system is focused on the subject based on the captured image, and the optical system responds to the determination of the focus determination unit.
  • the focusing operation period may be a period during which the focusing determination unit determines whether or not the subject is focused.
  • the image correction unit may correct the aberration to create a correction image, and the display unit may display the correction image.
  • the image processing apparatus further includes an image enlargement unit that acquires a captured image from the image sensor and creates a magnified image by enlarging a part of the captured image, and the display unit displays the enlarged image instead of the captured image.
  • the period during which the focus determination unit determines whether or not the subject is in focus and the period during which the display unit displays an enlarged image may be used.
  • the image enlargement unit may enlarge the photographed image around the center of the photographed image.
  • a face detection unit that detects a face included in the photographed image may be further provided, and the image enlargement unit may enlarge the photographed image centering on the face detected by the face detection unit.
  • the optical system may further include a focus adjustment ring that adjusts a focus state with respect to the subject, and the focusing operation period may be a period during which the focus adjustment ring is moving.
  • a shutter release button may be further provided, and when the shutter release button is pressed, the image correction unit may correct the aberration to create a correction image, and the display unit may display the correction image.
  • the image correction unit may correct the aberration to create a correction image, and the display unit may display the correction image.
  • the image display method includes a step of focusing the optical system on the subject, a step of capturing a subject image and outputting a captured image, and an operation of focusing the optical system on the subject.
  • an imaging apparatus and an image display method that allow a user to easily determine whether or not a subject is in focus while referring to an image displayed on a display unit.
  • FIG. 1 shows a digital camera 100 that is an embodiment of an imaging apparatus.
  • the configuration of the digital camera 100 will be described with reference to FIG.
  • the digital camera 100 mainly includes a DSP 110, a CMOS 121 that is an image sensor, a focusing lens (optical system) 131, and an LCD (display unit) 122.
  • the focusing lens 131 is composed of a plurality of lenses, is folded and stored in the body of the digital camera 100, and is extended from the body when the digital camera 100 is set to an operation mode for recording a captured image.
  • the focusing lens 131 that has been extended focuses on the subject and forms an object image on the CMOS 121.
  • a focus adjustment ring 132 and a drive motor 133 are provided on the outer peripheral surface of the focusing lens 131.
  • the drive motor 133 drives the focusing lens 131 to focus on the subject.
  • the focus adjustment ring 132 is rotated by the user to focus the focusing lens 131 on the subject.
  • a diaphragm blade 123 and a shutter curtain 124 are provided on the optical path between the focusing lens 131 and the CMOS 121.
  • the diaphragm blade 123 adjusts the amount of light reaching the CMOS 121, and the shutter curtain 124 opens and closes the optical path from the focusing lens 131 to the CMOS 121.
  • the CMOS 121 receives a synchronous clock signal generated by the DSP 110 and operates in synchronization with this. Then, the formed subject image is picked up, and photographed images are continuously output. The captured image is transmitted to the DSP 110.
  • the DSP 110 mainly includes an image correction unit 111 and a focus determination unit 112.
  • the image correction unit 111 acquires a captured image from the CMOS 121 and corrects the aberration caused by the focusing lens 131 to create a corrected image.
  • the aberration includes chromatic aberration, barrel aberration, and pincushion aberration.
  • the focus determination unit 112 acquires a captured image from the CMOS 121 and determines whether or not the focusing lens 131 is focused on the subject based on the captured image.
  • the DSP 110 transmits a signal corresponding to the determination result to the drive circuit 125.
  • the drive circuit 125 operates the drive motor 133 according to the received signal.
  • the focusing lens 131 focuses on the subject.
  • a period during which the focusing lens 131 is operated to focus on the subject image is referred to as a focusing operation period. Details of the focusing operation period will be described later.
  • the DSP 110 performs predetermined processing on the received captured image, and then continuously transmits the processed captured image to the LCD 122.
  • the LCD 122 displays the received captured image. Thereby, the captured image currently captured by the CMOS 121 is displayed on the LCD 122 as a moving image. This video is called live view.
  • the DSP 110 calculates an aperture value and a shutter speed according to the received captured image. The calculated aperture value and shutter speed are transmitted to the drive circuit 125.
  • the drive circuit 125 drives and controls the aperture blade 123 and the shutter curtain 124 according to the received aperture value and shutter speed.
  • the operation switch 126 is connected to the DSP 110.
  • the operation switch 126 includes a shutter release button.
  • the shutter release button is a two-stage switch that transmits a half-press signal to the DSP 110 when the user half-presses it, and transmits a full-press signal to the DSP 110 when the user fully presses it.
  • the DSP 110 continuously transmits the received captured image to the LCD 122, and the LCD 122 displays the captured image currently captured by the CMOS 121 as a moving image.
  • the function of the image correction unit 111 will be described.
  • the image correction unit 111 corrects aberrations using projection transformation such as affine transformation, and interpolates pixel loss caused by projection transformation. Thereby, the aberration caused by the focusing lens 131 is corrected.
  • the resolution of the image is reduced. When the resolution of the image is lowered, the sharpness of the image, for example, the contrast is lowered, so that it may be difficult for the user to manually focus while referring to such an image.
  • the digital camera 100 has an autofocus (AF) mode in which the focusing lens 131 is automatically focused on the subject image, and the user rotates the focus adjustment ring 132 with his / her hand to focus the focusing lens 131 on the subject image. It can operate in manual focus (MF) mode.
  • AF autofocus
  • MF manual focus
  • the focusing determination unit 112 determines whether or not the focusing lens 131 is focused on the subject based on the received captured image, and focuses the focusing lens 131 on the subject.
  • the determination as to whether or not the subject is in focus is referred to as in-focus determination, and the period during which the in-focus determination unit 112 determines in-focus is referred to as the in-focus operation period.
  • the image correction unit 111 does not correct the aberration caused by the focusing lens 131. Therefore, a corrected image is not created.
  • the LCD 122 receives the captured image from the DSP 110 and displays it.
  • the DSP 110 uses a calculation capability necessary for correcting the aberration for image processing. Thereby, the number of photographed images that can be processed per unit time and the resolution of the photographed images can be increased. That is, the resolution and frame rate of the image output from the DSP 110 are improved. Thereby, the LCD 122 can display a moving image having a high resolution and a high frame rate. That is, the user can refer to an image with a high resolution and a high frame rate.
  • the DSP 110 When the DSP 110 receives the half-press signal, the aperture value and the shutter speed are calculated according to the received captured image, and the focus determination unit 112 stops the focus determination and locks the position of the focus lens 131, The correction unit 111 corrects the aberration caused by the focusing lens 131.
  • the LCD 122 displays a corrected image. Thus, the user can observe an image in which the aberration is corrected and the subject is in focus.
  • the DSP 110 receives the half-press signal, the focusing operation period ends. Thereafter, when the DSP 110 receives the full-press signal, the diaphragm blade 123 and the shutter curtain 124 are driven with the calculated aperture value and shutter speed, and the CMOS 121 causes the subject image to be captured.
  • the captured image acquired from the CMOS 121 is subjected to predetermined image processing while using the memory 127 as a temporary storage device, and transmitted to the memory card 128.
  • the memory card 128 is an SD card provided so as to be detachable from the digital camera 100, for example, and stores received images.
  • the focusing operation period is a period during which the user moves the focus adjustment ring 132.
  • the period during which the user moves the focus adjustment ring 132 may include not only the period during which the focus adjustment ring 132 is moving, but also the period during which the focus adjustment ring 132 is temporarily stopped.
  • the image correction unit 111 does not correct the aberration caused by the focusing lens 131, and the focusing determination unit 112 does not perform the focusing determination. Therefore, the corrected image is not created, and the LCD 122 receives the captured image from the DSP 110 and displays it.
  • the DSP 110 uses the calculation capability necessary for aberration correction and focus determination for image processing. Thereby, the number of photographed images that can be processed per unit time and the resolution of the photographed images can be increased. That is, the resolution and frame rate of the image output from the DSP 110 are improved. Thereby, the LCD 122 can display a moving image having a high resolution and a high frame rate. Since the user can refer to an image with a high resolution and a high frame rate, the user can easily focus manually.
  • the DSP 110 When the DSP 110 receives the half-press signal, the aperture value and the shutter speed are calculated according to the received captured image, and the image correction unit 111 corrects the aberration caused by the focusing lens 131.
  • the LCD 122 displays a corrected image. Thereby, the user can observe the image in which the aberration is corrected.
  • the DSP 110 receives the half-press signal, the focusing operation period ends. After that, the DSP 110 that has received the full-press signal drives the aperture blade 123 and the shutter curtain 124 with the calculated aperture value and shutter speed, and causes the CMOS 121 to capture a subject image.
  • the captured image acquired from the CMOS 121 is subjected to predetermined image processing while using the memory 127 as a temporary storage device, and transmitted to the memory card 128.
  • the memory card 128 stores the received image.
  • an initial operation is performed.
  • the focusing lens 131 is extended from the body of the digital camera 100, the CMOS 121 starts imaging, and starts to transmit an image to the DSP 110.
  • the LCD 122 displays images continuously.
  • step S32 whether the digital camera 100 is currently performing autofocus, or whether the user is manually operating the focus of the focusing lens 131, that is, whether the digital camera 100 is in the focusing operation period. Determine whether. For example, when the focus determination unit 112 is performing the focus determination, it is determined that the autofocus is currently performed. When the digital camera 100 is in the focusing operation period, the process proceeds to step S34, and when not, the process proceeds to step S33.
  • step S33 the image correction unit 111 corrects the aberration caused by the focusing lens 131 and creates a corrected image.
  • step S34 the LCD 122 displays the captured image or the corrected image. That is, when the digital camera 100 is in the focusing operation period, the LCD 122 displays the captured images 21 and 22 (see FIG. 2), and when not in the focusing operation period, the LCD 122 displays the correction image 23 (see FIG. 2). To do.
  • the captured image 21 is an image including barrel aberration
  • the captured image 22 is an image including pincushion aberration.
  • step S35 it is determined whether or not other processing is performed.
  • the other processing includes, for example, calculation of the aperture value and shutter speed executed in response to half-pressing of the shutter release button, or driving of the aperture blade 123 and shutter curtain 124 executed in response to full-pressing to generate an image by the memory card 128. This is the process until saving. If no other process is performed, the process returns to step S32, and the processes from step S32 to S35 are repeated. In the case of performing other processing, the processing proceeds to step S36 and executes other processing. Then, the process ends.
  • the LCD 122 when the digital camera 100 is in the focusing operation period, the LCD 122 can display a moving image with a high resolution and a high frame rate.
  • the user can refer to the high-resolution and high-frame-rate images, and can easily focus manually.
  • the focus operation period may be ended when operating in the auto focus mode or when the focus determination unit 112 stops the focus determination.
  • the LCD 122 may stop displaying the captured image and display the corrected image.
  • the second embodiment is different from the first embodiment in that when the digital camera 100 is operating in the autofocus mode, the captured image is enlarged and displayed on the LCD 122.
  • the same components as those in the first embodiment are denoted by the same reference numerals and description thereof is omitted.
  • the DSP 110 further includes an image processing unit (image enlargement unit) 113 and a face detection unit 114.
  • the face detection unit 114 detects a face included in the image.
  • the image processing unit 113 calculates the sharpness of the captured image received from the CMOS 121 and enlarges a part of the captured image according to the sharpness to create an enlarged image.
  • the enlarged image is displayed on the LCD 122.
  • the process of enlarging the captured image is based on so-called electronic zoom.
  • the sharpness is, for example, the amount of a high-frequency component included in the entire captured image or a partial area, or the contrast value of the entire captured image or a partial area.
  • the contrast value is obtained by multiplying the luminance value of each pixel constituting the captured image by a predetermined value and summing the obtained values.
  • the captured image is composed of pixels of n rows ⁇ m columns and the luminance value is represented by Ln, m
  • the contrast value C is obtained by the following equation.
  • the focusing operation period in the present embodiment is a period during which the focusing determination unit 112 determines whether or not the subject is focused, and a period during which the display unit displays an enlarged image.
  • the digital camera 100 operating in the autofocus mode will be described with reference to FIG.
  • the focusing determination unit 112 determines whether or not the focusing lens 131 is focused on the subject based on the received captured image, and focuses the focusing lens 131 on the subject. As the focusing lens 131 focuses on the subject, the sharpness of the captured image increases. Therefore, the enlargement magnification of the enlarged image is gradually increased.
  • the enlarged image 51 is an image when the focus of the focusing lens 131 is closer to the digital camera 100 than the subject. In this case, since the subject is out of focus, the subject image is blurred, and the contrast value of the entire image is relatively low.
  • the image processing unit 113 enlarges the center of the captured image with a magnification corresponding to a low contrast value, for example, an enlargement magnification of 1.2.
  • the enlarged image 51 is obtained as a result.
  • the image correction unit 111 does not correct aberration during the focusing operation period. Therefore, a corrected image is not created.
  • the LCD 122 receives the enlarged image 51 from the DSP 110 and displays it.
  • the enlarged image 52 is an image when the focus is on the subject.
  • the subject image is not blurred, and the contrast value of the entire image is a relatively high value.
  • the image processing unit 113 creates an enlarged image 52 by enlarging the center of the captured image at a magnification according to the increased contrast value, for example, an enlargement magnification of 1.8 times. That is, since the contrast value of the magnified image 52 is larger than that of the magnified image 51, the size of the subject image included in the magnified image 52 is larger than the subject image in the magnified image 51.
  • the LCD 122 displays the enlarged image 52.
  • image distortion and blur due to aberrations such as barrel aberration, pincushion aberration, and chromatic aberration hardly occur at the center of a captured image. Therefore, if the image is enlarged around the center of the captured image, the enlarged image is less likely to include distortion and blur due to aberration.
  • the DSP 110 does not correct the aberration but uses the calculation capability necessary for correcting the aberration for the image processing. Thereby, the number of photographed images that can be processed per unit time and the resolution of the photographed images can be increased. That is, the resolution and frame rate of the image output from the DSP 110 are improved. Thereby, the LCD 122 can display a moving image having a high resolution and a high frame rate. That is, the user can refer to an image with a high resolution and a high frame rate.
  • a change in contrast value of the images shown in the enlarged images 51 and 52 is shown as a curve 54.
  • the relationship between the contrast value of the image and the enlargement magnification is stored in the memory 127 as a table.
  • the contrast value takes a value from 0 to 255
  • the enlargement magnification takes a value from 1 to 4 times.
  • the DSP 110 When the DSP 110 receives the half-press signal, the aperture value and the shutter speed are calculated according to the received captured image, and the focus determination unit 112 stops the focus determination and locks the position of the focus lens 131, The correction unit 111 corrects the aberration caused by the focusing lens 131. Then, the image enlargement unit stops creating the enlarged image, and the LCD 122 displays the corrected image 53. Thus, the user can observe an image in which the aberration is corrected and the subject is in focus.
  • the DSP 110 receives the half-press signal, the focusing operation period ends. After that, the DSP 110 that has received the full-press signal drives the aperture blade 123 and the shutter curtain 124 with the calculated aperture value and shutter speed, and causes the CMOS 121 to capture a subject image.
  • the captured image acquired from the CMOS 121 is subjected to predetermined image processing while using the memory 127 as a temporary storage device, and transmitted to the memory card 128.
  • the memory card 128 is an SD card provided so as to be detachable from the digital camera 100, for example, and stores received images.
  • the second display process will be described with reference to FIG.
  • the second display process is a process executed when the digital camera 100 is set to an operation mode for recording an image.
  • the digital camera 100 performs autofocus and enlarges a part of the image to the LCD 122. Aberration correction is stopped when this is displayed.
  • the contrast value of the entire image is used as the sharpness will be described.
  • an initial operation is performed.
  • the focusing lens 131 is extended from the body of the digital camera 100, the CMOS 121 starts imaging, and starts to transmit an image to the DSP 110.
  • the LCD 122 displays images continuously.
  • the DSP 110 reads a table indicating the relationship between the contrast value and the enlargement magnification from the memory 127.
  • step S62 it is determined whether or not the digital camera 100 is currently performing autofocus. For example, it is determined that autofocus is currently being performed when the focus determination unit 112 is performing focus determination.
  • the process proceeds to step S63, and when not, the process proceeds to step S66.
  • step S63 the contrast value of the image is calculated.
  • step S64 it is determined whether or not the captured image is enlarged according to the contrast.
  • the process proceeds to step S65, and when not enlarging, the process proceeds to step S66.
  • step S65 an enlargement magnification is obtained from the table read in step S61 and the contrast value calculated in step S63. Then, the image is enlarged around the center of the image to create an enlarged image. That is, the enlarged image is created during the period when the focus determination unit 112 determines whether or not the subject is in focus and the period during which the display unit displays the enlarged image, that is, the focusing operation period. .
  • step S66 the image correcting unit 111 corrects the aberration caused by the focusing lens 131 and creates a corrected image.
  • the LCD 122 displays the captured image or the corrected image. That is, when the digital camera 100 is in the focusing operation period, the LCD 122 displays the enlarged images 51 and 52 (see FIG. 5), and when not in the focusing operation period, the LCD 122 displays the correction image 53 (see FIG. 5). To do.
  • steps S35 and S36 are the same as the first display process, description thereof will be omitted.
  • the LCD 122 when the digital camera 100 is in the focusing operation period, the LCD 122 can display a moving image with a high resolution and a high frame rate. Further, the user can refer to an image with a high resolution and a high frame rate. Furthermore, since a lot of calculation ability can be used for the focus determination, the time required for the focus determination can be shortened. In addition, since it is possible to determine the focus using a high-resolution image, it is possible to determine the focus more accurately.
  • the image does not have to be enlarged around the center of the image, and the image may be enlarged around the center of the face detected by the face detection unit 114.
  • the number of pixels having a high-frequency component equal to or higher than a predetermined value can be used instead of the above-described contrast value.
  • CMOS 121 a solid-state image sensor such as a CCD may be used.
  • the contrast value may be obtained by a process other than the process described above.
  • the LCD 122 may stop displaying the captured image and display the corrected image.
  • the focus may be adjusted by using a switch such as a seesaw switch, dial, or lever instead of the focus adjustment ring 132.
  • the DSP 110 may not use the calculation capability necessary for correcting aberrations for image processing. By giving a margin to the processing capacity of the DSP 110, other processing can be executed quickly even when other processing is requested.
  • the digital camera 100 may be a so-called compact camera, single-lens reflex camera, or mirrorless single-lens camera.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Automatic Focus Adjustment (AREA)
  • Studio Devices (AREA)
  • Focusing (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)

Abstract

デジタルカメラ１００がオートフォーカスモードで動作しているとき、合焦判断部１１２は、撮影画像に基づいて合焦レンズ１３１が被写体に合焦しているか否かを判断し、合焦レンズ１３１を被写体に合焦させる。被写体に合焦しているか否かの判断を合焦判断と呼び、合焦判断部１１２が合焦判断している期間を合焦動作期間と呼ぶ。合焦動作期間において、画像補正部１１１は、補正画像を作成しない。ＬＣＤ１２２は、ＤＳＰ１１０から撮影画像を受信して表示する。このとき、ＤＳＰ１１０は、収差を補正するために必要な計算能力を画像処理に使用する。これにより、単位時間当たりに処理可能な撮影画像の数や、撮影画像の解像度を上げることができる。すなわちユーザは、高解像度及び高フレームレートの画像を参照できる。

Description

撮像装置及び画像表示方法
　本発明は、撮像した画像を表示可能な表示部を有する撮像装置、及び撮像した画像を表示する方法に関する。
　特開２００８－１１６６６３号公報は、レンズを介して連続的に被写体像を撮像して、表示部に表示する撮像装置を開示する。このようなレンズの中には収差を有するものがある。この収差を補正するため、画像に数学的な処理を施す。
　しかし収差を補正する処理は、撮像装置の処理能力に一定の負荷を与える。そのため、他の処理に割かれている処理能力を、収差を補正する処理に割かなければならなくなる可能性がある。すなわち、連続的に被写体像を撮像して表示部に表示する撮像装置にこの処理を適用すると、表示部に表示する画像の画素数や更新頻度等を下げて画像表示に割かれている能力を低減して、収差を補正する処理に処理能力を確保することになる。これにより表示される画像の画質が低下して見栄えが悪くなるとともに、ピントが合っているか否かをユーザが確認しづらくなるおそれが生じる。
　本願発明の課題は、表示部に表示された画像を参照しながら被写体にピントが合っているか否かをユーザが容易に判断できる撮像装置及び画像表示方法を得ることである。
　本願第１の発明による撮像装置は、被写体像を撮像して撮影画像を出力する撮像素子と、被写体に合焦して、撮像素子に被写体像を結像させる光学系と、撮像素子から撮影画像を取得して、撮影画像に含まれる光学系に起因する収差を補正して補正画像を作成する画像補正部と、撮影画像又は補正画像を表示する表示部とを備え、光学系を被写体像に合焦させる動作を行っている期間は合焦動作期間であって、少なくとも合焦動作期間において、画像補正部は収差を補正せず、表示部は撮影画像を表示することを特徴とする。
　撮像素子から撮影画像を取得して、撮影画像に基づいて光学系が被写体に合焦しているか否かを判断する合焦判断部をさらに備え、光学系は、合焦判断部の判断に応じて被写体に合焦し、合焦動作期間は、被写体に合焦しているか否かを合焦判断部が判断している期間であるとしてもよい。
　合焦動作期間が終了した場合、画像補正部は収差を補正して補正画像を作成し、表示部は補正画像を表示してもよい。
　撮像素子から撮影画像を取得し、撮影画像の一部を拡大して拡大画像を作成する画像拡大部をさらに備え、表示部は、撮影画像に代えて拡大画像を表示し、合焦動作期間は、被写体に合焦しているか否かを合焦判断部が判断している期間、かつ表示部が拡大画像を表示している期間であってもよい。
　画像拡大部は、撮影画像の中心を中心として撮影画像を拡大してもよい。
　撮影画像に含まれる顔を検出する顔検出部をさらに備え、画像拡大部は、顔検出部が検出した顔を中心として撮影画像を拡大してもよい。
　光学系は、被写体に対する合焦状態を調節するピント調整リングをさらに備え、合焦動作期間は、ピント調整リングが動いている期間であるとしてもよい。
　シャッターレリーズボタンをさらに備え、シャッターレリーズボタンが押圧された場合、画像補正部は収差を補正して補正画像を作成し、表示部は補正画像を表示してもよい。
　ピント調整リングが所定期間動かない場合、画像補正部は収差を補正して補正画像を作成し、表示部は補正画像を表示してもよい。
　本願第２の発明による画像表示方法は、被写体に光学系を合焦させるステップと、被写体像を撮像して撮影画像を出力するステップと、被写体に光学系を合焦させる動作を行っている合焦動作期間であるか否かを判断するステップと、合焦動作期間でない場合、撮影画像に含まれる光学系に起因する収差を補正して補正画像を作成し、補正画像を表示するステップと、合焦動作期間である場合、補正画像を作成せずに、撮影画像を表示するステップとを備えることを特徴とする。
　本発明によれば、表示部に表示された画像を参照しながら被写体にピントが合っているか否かをユーザが容易に判断できる撮像装置及び画像表示方法を得る。
第１の撮像装置を概略的に示したブロック図である。 撮影画像と補正画像とを示した図である。 第１の表示処理を示したフローチャートである。 第１の撮像装置を概略的に示したブロック図である。 撮影画像と補正画像とを示した図である。 第２の表示処理を示したフローチャートである。
　１００　デジタルカメラ
　１１０　ＤＳＰ
　１１１　画像補正部
　１１２　合焦判断部
　１１３　画像処理部
　１１４　顔検出部
　１２１　ＣＭＯＳ
　１２２　ＬＣＤ
　１２３　絞り羽根
　１２４　シャッター幕
　１２５　駆動回路
　１２６　操作スイッチ
　１２７　メモリ
　１２８　メモリカード
　１３１　合焦レンズ
　１３２　ピント調整リング
　１３３　駆動モータ
　本願発明の第１の実施形態による撮像装置について図１から３を用いて説明する。図１は、撮像装置の一実施形態であるデジタルカメラ１００を示す。図１を用いてデジタルカメラ１００の構成について説明する。
　デジタルカメラ１００は、ＤＳＰ１１０、撮像素子であるＣＭＯＳ１２１、合焦レンズ（光学系）１３１、ＬＣＤ（表示部）１２２を主に備える。
　合焦レンズ１３１は、複数のレンズにより構成され、デジタルカメラ１００のボディに畳まれて格納され、デジタルカメラ１００が撮影画像を記録する動作モードに設定されたとき、ボディから繰り出される。繰り出された合焦レンズ１３１は被写体に合焦して、ＣＭＯＳ１２１に被写体像を結像させる。合焦レンズ１３１の外周面にはピント調整リング１３２及び駆動モータ１３３が設けられる。駆動モータ１３３は合焦レンズ１３１を駆動して被写体に合焦させる。ピント調整リング１３２はユーザにより回転され、合焦レンズ１３１を被写体に合焦させる。
　合焦レンズ１３１とＣＭＯＳ１２１との間の光路上には絞り羽根１２３、シャッター幕１２４が設けられる。絞り羽根１２３はＣＭＯＳ１２１に到達する光量を調節し、シャッター幕１２４は、合焦レンズ１３１からＣＭＯＳ１２１までの光路を開閉する。
　ＣＭＯＳ１２１は、ＤＳＰ１１０が生成する同期クロック信号を受信し、これに同期して動作する。そして、結像した被写体像を撮像して撮影画像を連続的に出力する。撮影画像はＤＳＰ１１０に送信される。
　ＤＳＰ１１０は、画像補正部１１１及び合焦判断部１１２を主に備える。画像補正部１１１は、ＣＭＯＳ１２１から撮影画像を取得し、合焦レンズ１３１に起因する収差を補正して補正画像を作成する。ここで、収差とは、色収差、樽型収差、及び糸巻き型収差を含む。合焦判断部１１２は、ＣＭＯＳ１２１から撮影画像を取得して、撮影画像に基づいて合焦レンズ１３１が被写体に合焦しているか否かを判断する。ＤＳＰ１１０は、この判断結果に応じた信号を駆動回路１２５に送信する。駆動回路１２５は、受信した信号に応じて駆動モータ１３３を動作させる。これにより、合焦レンズ１３１が被写体に合焦する。合焦レンズ１３１を被写体像に合焦させる動作を行っている期間を合焦動作期間と呼ぶ。合焦動作期間の詳細については後述される。
　ＤＳＰ１１０は、受信した撮影画像に所定の処理を施した後、処理済みの撮影画像をＬＣＤ１２２に連続的に送信する。ＬＣＤ１２２は、受信した撮影画像を表示する。これにより、ＣＭＯＳ１２１が現在撮像している撮影画像が動画としてＬＣＤ１２２に表示される。この動画をライブビューと呼ぶ。またＤＳＰ１１０は、受信した撮影画像に応じて絞り値及びシャッター速度を算出する。算出された絞り値及びシャッター速度は駆動回路１２５に送信される。駆動回路１２５は受信した絞り値及びシャッター速度に応じて、絞り羽根１２３及びシャッター幕１２４を駆動制御する。
　ＤＳＰ１１０には、操作スイッチ１２６が接続される。操作スイッチ１２６は、シャッターレリーズボタンを備える。シャッターレリーズボタンは二段階スイッチであり、ユーザが半押しすると半押し信号をＤＳＰ１１０に送信し、全押しすると全押し信号をＤＳＰ１１０に送信する。シャッターレリーズボタンが操作されていないとき、ＤＳＰ１１０は、受信した撮影画像をＬＣＤ１２２に連続的に送信し、ＬＣＤ１２２は、ＣＭＯＳ１２１が現在撮像している撮影画像を動画として表示する。
　画像補正部１１１の機能について説明する。画像補正部１１１は、アフィン変換などの投影変換を用いて収差を修正し、そして投影変換に伴って生じる画素の欠落を補間する。これにより、合焦レンズ１３１によって生じる収差が補正される。しかし、画素の欠落を補間することにより、画像の解像度が低下する。画像の解像度が低下すると、画像の尖鋭度、例えばコントラストが低下するため、このような画像を参照しながらユーザが手動でピントを合わせることが難しくなるおそれがある。
　デジタルカメラ１００は、自動的に被写体像に合焦レンズ１３１を合焦させるオートフォーカス（ＡＦ）モードと、ユーザが自らの手でピント調整リング１３２を回転させて被写体像に合焦レンズ１３１を合焦させるマニュアルフォーカス（ＭＦ）モードで動作可能である。
　デジタルカメラ１００がオートフォーカスモードで動作しているときのＤＳＰ１１０の動作について説明する。合焦判断部１１２は、受信した撮影画像に基づいて合焦レンズ１３１が被写体に合焦しているか否かを判断し、合焦レンズ１３１を被写体に合焦させる。本実施形態では、被写体に合焦しているか否かの判断を合焦判断と呼び、合焦判断部１１２が合焦判断している期間を合焦動作期間と呼ぶ。合焦動作期間において、画像補正部１１１は、合焦レンズ１３１に起因する収差を補正しない。そのため、補正画像が作成されない。ＬＣＤ１２２は、ＤＳＰ１１０から撮影画像を受信して表示する。このとき、ＤＳＰ１１０は、収差を補正するために必要な計算能力を画像処理に使用する。これにより、単位時間当たりに処理可能な撮影画像の数や、撮影画像の解像度を上げることができる。すなわち、ＤＳＰ１１０が出力する画像の解像度及びフレームレートが向上することになる。これにより、ＬＣＤ１２２は高解像度及び高フレームレートの動画を表示することができる。すなわちユーザは、高解像度及び高フレームレートの画像を参照することができる。
　ＤＳＰ１１０が半押し信号を受信すると、受信した撮影画像に応じて、絞り値及びシャッター速度を算出し、合焦判断部１１２は合焦判断を中止して合焦レンズ１３１の位置をロックさせ、画像補正部１１１は合焦レンズ１３１に起因する収差を補正する。そしてＬＣＤ１２２は補正画像を表示する。これによりユーザは、収差が補正され、かつ被写体にピントが合った画像を観察することができる。ＤＳＰ１１０が半押し信号を受信したとき、合焦動作期間が終了する。その後ＤＳＰ１１０が全押し信号を受信すると、算出済みの絞り値及びシャッター速度で絞り羽根１２３及びシャッター幕１２４を駆動させ、ＣＭＯＳ１２１に被写体像を撮像させる。そしてＣＭＯＳ１２１から取得した撮影画像に対してメモリ１２７を一時記憶装置として用いながら所定の画像処理を施し、メモリカード１２８に送信する。メモリカード１２８は、デジタルカメラ１００に対して着脱自在となるように設けられる、例えばＳＤカードであって、受信した画像を保存する。
　デジタルカメラ１００がマニュアルフォーカスモードで動作しているときのＤＳＰ１１０の動作について説明する。
このとき、合焦動作期間は、ユーザがピント調整リング１３２を動かしている期間である。なお、ここでいうユーザがピント調整リング１３２を動かしている期間は、ピント調整リング１３２が動いている期間のみならず、一時的にピント調整リング１３２が止まっている期間も含んでも良い。合焦動作期間において、画像補正部１１１は合焦レンズ１３１に起因する収差を補正せず、合焦判断部１１２は合焦判断を行わない。そのため、補正画像が作成されず、ＬＣＤ１２２はＤＳＰ１１０から撮影画像を受信して表示する。このときＤＳＰ１１０は、収差の補正及び合焦判断に必要な計算能力を画像処理に使用する。これにより、単位時間当たりに処理可能な撮影画像の数や、撮影画像の解像度を上げることができる。すなわち、ＤＳＰ１１０が出力する画像の解像度及びフレームレートが向上することになる。これにより、ＬＣＤ１２２は高解像度及び高フレームレートの動画を表示することができる。ユーザは、高解像度及び高フレームレートの画像を参照することができるため、ピントを手動で容易に合わせることができる。
　ＤＳＰ１１０が半押し信号を受信すると、受信した撮影画像に応じて、絞り値及びシャッター速度を算出し、画像補正部１１１は合焦レンズ１３１に起因する収差を補正する。そしてＬＣＤ１２２は補正画像を表示する。これによりユーザは、収差が補正された画像を観察することができる。ＤＳＰ１１０が半押し信号を受信したとき、合焦動作期間が終了する。その後、全押し信号を受信したＤＳＰ１１０は、算出済みの絞り値及びシャッター速度で絞り羽根１２３及びシャッター幕１２４を駆動させ、ＣＭＯＳ１２１に被写体像を撮像させる。そしてＣＭＯＳ１２１から取得した撮影画像に対してメモリ１２７を一時記憶装置として用いながら所定の画像処理を施し、メモリカード１２８に送信する。メモリカード１２８は、受信した画像を保存する。
　次に、図２及び３を用いて第１の表示処理について説明する。
　始めのステップＳ３１では、初期動作を行う。初期動作では、デジタルカメラ１００のボディから合焦レンズ１３１を繰り出し、ＣＭＯＳ１２１が撮像を開始し、画像をＤＳＰ１１０に送信し始める。ＬＣＤ１２２は、画像を連続的に表示する。
　次のステップＳ３２では、デジタルカメラ１００がオートフォーカスを現在行っているか、又はユーザが手動で合焦レンズ１３１のピントを操作しているか否か、すなわちデジタルカメラ１００が合焦動作期間にあるか否かを判断する。例えば、合焦判断部１１２が合焦判断を行っているときに、オートフォーカスを現在行っていると判断する。デジタルカメラ１００が合焦動作期間にあるとき、処理はステップＳ３４に進み、そうでないとき、処理はステップＳ３３に進む。
　ステップＳ３３では、画像補正部１１１は合焦レンズ１３１に起因する収差を補正して、補正画像を作成する。
　ステップＳ３４では、ＬＣＤ１２２が撮影画像又は補正画像を表示する。つまり、デジタルカメラ１００が合焦動作期間にある場合、ＬＣＤ１２２は撮影画像２１、２２（図２参照）を表示し、合焦動作期間にない場合、ＬＣＤ１２２は補正画像２３（図２参照）を表示する。撮影画像２１は樽型収差を含む画像であり、撮影画像２２は糸巻き型収差を含む画像である。
　次のステップＳ３５では、他の処理を行うか否かを判断する。他の処理は、例えばシャッターレリーズボタンの半押しに応じて実行される絞り値及びシャッター速度の算出、あるいは全押しに応じて実行される絞り羽根１２３及びシャッター幕１２４の駆動からメモリカード１２８による画像の保存までの処理である。他の処理を行わない場合、処理はステップＳ３２に戻り、ステップＳ３２からＳ３５までの処理を繰り返す。他の処理を行う場合、処理はステップＳ３６に進み、他の処理を実行する。そして処理が終了する。
　本実施形態によれば、デジタルカメラ１００が合焦動作期間にある場合、ＬＣＤ１２２は高解像度及び高フレームレートの動画を表示することができる。ユーザは、高解像度及び高フレームレートの画像を参照することができ、さらにはピントを手動で容易に合わせることができる。
　なお、デジタルカメラ１００がマニュアルフォーカスモードにある場合、オートフォーカスモードで動作するとき、又は合焦判断部１１２が合焦判断を中止したときを合焦動作期間が終了するときとしてもよい。
　また、ピント調整リング１３２が所定期間以上動かない場合、合焦動作期間を終了し、ＬＣＤ１２２は撮影画像の表示を中止して補正画像を表示してもよい。
　次に図４－６を用いて第２の実施形態について説明する。第２の実施形態は、デジタルカメラ１００がオートフォーカスモードで動作しているとき、撮影画像を拡大してＬＣＤ１２２に表示する点が第１の実施形態と異なる。第１の実施形態と同様の構成については、同じ符号を付して説明を省略する。
　図４を参照すると、ＤＳＰ１１０は、画像処理部（画像拡大部）１１３及び顔検出部１１４をさらに備える。顔検出部１１４は、画像に含まれる顔を検出する。画像処理部１１３は、ＣＭＯＳ１２１から受信した撮影画像の尖鋭度を算出し、尖鋭度に応じて撮影画像の一部を拡大して拡大画像を作成する。拡大画像はＬＣＤ１２２に表示される。撮影画像を拡大する処理は、いわゆる電子ズームによるものである。尖鋭度は、例えば撮影画像全体若しくは一部の領域に含まれる高周波成分の量、又は撮影画像全体若しくは一部の領域のコントラスト値である。コントラスト値は、撮影画像を構成する各画素の輝度値に所定の値を乗じ、得られた値を合計することにより求められる。例えば、撮影画像がｎ行×ｍ列の画素によって構成され、輝度値がＬｎ，ｍで表されるとき、コントラスト値Ｃは、以下の式により求められる。
Figure JPOXMLDOC01-appb-M000001
 本実施形態における合焦動作期間は、被写体に合焦しているか否かを合焦判断部１１２が判断している期間、かつ表示部が拡大画像を表示している期間である。
　図５を用いてオートフォーカスモードで動作しているデジタルカメラ１００について説明する。合焦判断部１１２は、受信した撮影画像に基づいて合焦レンズ１３１が被写体に合焦しているか否かを判断し、合焦レンズ１３１を被写体に合焦させる。合焦レンズ１３１が被写体に合焦していくにつれて、撮影画像の尖鋭度が上昇する。そのため、拡大画像の拡大倍率が次第に大きくなる。拡大画像５１は、合焦レンズ１３１のピントが被写体よりもデジタルカメラ１００に近い位置に合っている場合の画像である。この場合、ピントがずれているため被写体像はぼけており、画像全体のコントラスト値は相対的に低い値になっている。画像処理部１１３は、低いコントラスト値に応じた倍率、例えば１．２倍の拡大倍率で撮影画像の中心を中心として拡大する。これにより得られたものが拡大画像５１である。他方、合焦動作期間において、画像補正部１１１は収差を補正しない。そのため、補正画像が作成されない。ＬＣＤ１２２は、ＤＳＰ１１０から拡大画像５１を受信して表示する。
　この状態において、合焦レンズ１３１を駆動してピントが合う位置をデジタルカメラ１００から遠ざけると、ピントが被写体に合焦する。拡大画像５２は、ピントが被写体に合焦している場合の画像である。この場合、被写体にピントが合っているため被写体像はぼけておらず、画像全体のコントラスト値は相対的に最も高い値になっている。画像処理部１１３は、高くなったコントラスト値に応じた倍率、例えば１．８倍の拡大倍率で撮影画像の中心を中心として拡大し、拡大画像５２を作成する。すなわち、拡大画像５２のコントラスト値は拡大画像５１よりも大きいため、拡大画像５２に含まれる被写体像の大きさは拡大画像５１における被写体像よりも大きくなる。ＬＣＤ１２２は拡大画像５２を表示する。一般に、樽型収差、糸巻き収差、及び色収差などといった収差による画像の歪み及び滲みは、撮影画像の中心においてあまり発生しない。そのため撮影画像の中心を中心として拡大すれば、収差による歪み及び滲みを拡大画像が含みにくくなる。
　合焦動作期間において、ＤＳＰ１１０は、収差を補正せずに、収差を補正するために必要な計算能力を画像処理に使用する。これにより、単位時間当たりに処理可能な撮影画像の数や、撮影画像の解像度を上げることができる。すなわち、ＤＳＰ１１０が出力する画像の解像度及びフレームレートが向上することになる。これにより、ＬＣＤ１２２は高解像度及び高フレームレートの動画を表示することができる。すなわちユーザは、高解像度及び高フレームレートの画像を参照することができる。
　拡大画像５１及び５２に示した画像のコントラスト値の変化を曲線５４として示す。画像のコントラスト値と拡大倍率との関係は、メモリ１２７にテーブルとして記憶される。ここで、コントラスト値は０から２５５までの値をとり、拡大倍率は１倍から４倍までの値をとる。
　ＤＳＰ１１０が半押し信号を受信すると、受信した撮影画像に応じて、絞り値及びシャッター速度を算出し、合焦判断部１１２は合焦判断を中止して合焦レンズ１３１の位置をロックさせ、画像補正部１１１は合焦レンズ１３１に起因する収差を補正する。そして画像拡大部は拡大画像を作成することを中止し、ＬＣＤ１２２は補正画像５３を表示する。これによりユーザは、収差が補正され、かつ被写体にピントが合った画像を観察することができる。ＤＳＰ１１０が半押し信号を受信したとき、合焦動作期間が終了する。その後、全押し信号を受信したＤＳＰ１１０は、算出済みの絞り値及びシャッター速度で絞り羽根１２３及びシャッター幕１２４を駆動させ、ＣＭＯＳ１２１に被写体像を撮像させる。そしてＣＭＯＳ１２１から取得した撮影画像に対してメモリ１２７を一時記憶装置として用いながら所定の画像処理を施し、メモリカード１２８に送信する。メモリカード１２８は、デジタルカメラ１００に対して着脱自在となるように設けられる、例えばＳＤカードであって、受信した画像を保存する。
　図６を用いて第２の表示処理について説明する。第２の表示処理は、デジタルカメラ１００が画像を記録する動作モードに設定されたときに実行される処理であり、デジタルカメラ１００がオートフォーカスを行い、かつ画像の一部を拡大してＬＣＤ１２２に表示しているときに、収差の補正を中止する。以下、画像全体のコントラスト値を尖鋭度として用いた場合について説明する。
　始めのステップＳ６１では、初期動作を行う。初期動作では、デジタルカメラ１００のボディから合焦レンズ１３１を繰り出し、ＣＭＯＳ１２１が撮像を開始し、画像をＤＳＰ１１０に送信し始める。ＬＣＤ１２２は、画像を連続的に表示する。そしてＤＳＰ１１０は、コントラスト値と拡大倍率との関係を示すテーブルをメモリ１２７から読み出す。
　次のステップＳ６２では、デジタルカメラ１００がオートフォーカスを現在行っているか否かを判断する。例えば、合焦判断部１１２が合焦判断を行っているときにオートフォーカスを現在行っていると判断する。デジタルカメラ１００がオートフォーカスを現在行っているとき、処理はステップＳ６３に進み、そうでないとき、処理はステップＳ６６に進む。
　ステップＳ６３では、画像のコントラスト値を算出する。
　ステップＳ６４では、撮影画像をコントラストに応じて拡大するか否かを判断する。拡大するとき、処理はステップＳ６５に進み、拡大しないとき、処理はステップＳ６６に進む。
　ステップＳ６５では、ステップＳ６１で読み出したテーブルと、ステップＳ６３で算出したコントラスト値とから、拡大倍率を求める。そして、画像の中心を中心に画像を拡大し、拡大画像を作成する。すなわち、被写体に合焦しているか否かを合焦判断部１１２が判断している期間、かつ表示部が拡大画像を表示している期間、つまり合焦動作期間に、拡大画像が作成される。
　他方、ステップＳ６６では、画像補正部１１１が合焦レンズ１３１に起因する収差を補正して、補正画像を作成する。
　次のステップＳ６７では、ＬＣＤ１２２が撮影画像又は補正画像を表示する。つまり、デジタルカメラ１００が合焦動作期間にある場合、ＬＣＤ１２２は拡大画像５１、５２（図５参照）を表示し、合焦動作期間にない場合、ＬＣＤ１２２は補正画像５３（図５参照）を表示する。
　以降のステップＳ３５及びＳ３６の処理は、第１の表示処理と同じ処理であるため、説明を省略する。
　本実施形態によれば、デジタルカメラ１００が合焦動作期間にある場合、ＬＣＤ１２２は高解像度及び高フレームレートの動画を表示することができる。また、ユーザは、高解像度及び高フレームレートの画像を参照することができる。さらに、合焦判断により多くの計算能力を割くことができるため、合焦判断に必要な時間を短縮できる。また、高解像度の画像を用いて合焦判断できるため、より精度よく合焦を判断できる。
　なお全ての実施形態において、画像の中心を中心として拡大しなくても良く、顔検出部１１４が検出した顔の中心を中心として画像を拡大しても良い。
　また、画像全体若しくは一部の領域に含まれる高周波成分の量を尖鋭度として用いる場合、所定値以上の高周波成分を有するピクセル数を、前述のコントラスト値の代わりに使用することができる。
　ＣＭＯＳ１２１の代わりにＣＣＤ等の固体撮像素子が用いられても良い。
　コントラスト値は、前述した処理以外の処理によって求められても良い。
　シャッターレリーズボタンが半押しされた場合、合焦動作期間を終了して、ＬＣＤ１２２は撮影画像の表示を中止して、補正画像を表示してもよい。
　ピント調整リング１３２の代わりに、シーソースイッチ、ダイヤル、及びレバー等のスイッチを用いてピントを調整してもよい。
　デジタルカメラ１００がオートフォーカスモードで動作しているとき、ＤＳＰ１１０は、収差を補正するために必要な計算能力を画像処理に使用しなくてもよい。ＤＳＰ１１０の処理能力に余裕を持たせておくことにより、他の処理を要求されたときてあっても迅速に他の処理を実行することができる。
　デジタルカメラ１００は、いわゆるコンパクトカメラ、一眼レフカメラ、ミラーレス一眼カメラであっても良い。
　ここに付随する図面を参照して本発明の複数の実施形態が説明されたが、記載された発明の範囲と精神から逸脱することなく、変形が各部の構造と関係に施されることは、当業者にとって自明である。

Claims (10)

  1. 　被写体像を撮像して撮影画像を出力する撮像素子と、
    　被写体に合焦して、前記撮像素子に被写体像を結像させる光学系と、
    　前記撮像素子から前記撮影画像を取得して、前記撮影画像に含まれる前記光学系に起因する収差を補正して補正画像を作成する画像補正部と、
    　前記撮影画像又は前記補正画像を表示する表示部とを備え、
    　前記光学系を被写体像に合焦させる動作を行っている期間は合焦動作期間であって、
    　少なくとも前記合焦動作期間において、前記画像補正部は前記収差を補正せず、前記表示部は前記撮影画像を表示する撮像装置。
  2. 　前記撮像素子から前記撮影画像を取得して、前記撮影画像に基づいて前記光学系が被写体に合焦しているか否かを判断する合焦判断部をさらに備え、
    　前記光学系は、前記合焦判断部の判断に応じて被写体に合焦し、
    　前記合焦動作期間は、被写体に合焦しているか否かを前記合焦判断部が判断している期間である請求項１に記載の撮像装置。
  3. 　前記合焦動作期間が終了した場合、前記画像補正部は前記収差を補正して前記補正画像を作成し、前記表示部は前記補正画像を表示する請求項２に記載の撮像装置。
  4. 　前記撮像素子から前記撮影画像を取得し、前記撮影画像の一部を拡大して拡大画像を作成する画像拡大部をさらに備え、
    　前記表示部は、前記撮影画像に代えて前記拡大画像を表示し、
    　前記合焦動作期間は、被写体に合焦しているか否かを前記合焦判断部が判断している期間、かつ前記表示部が前記拡大画像を表示している期間である請求項２又は３に記載の撮像装置。
  5. 　前記画像拡大部は、前記撮影画像の中心を中心として前記撮影画像を拡大する請求項４に記載の撮像装置。
  6. 　前記撮影画像に含まれる顔を検出する顔検出部をさらに備え、
    　前記画像拡大部は、前記顔検出部が検出した顔を中心として前記撮影画像を拡大する請求項４に記載の撮像装置。
  7. 　前記光学系は、被写体に対する合焦状態を調節するピント調整リングをさらに備え、
    　前記合焦動作期間は、前記ピント調整リングが動いている期間である請求項１に記載の撮像装置。
  8. 　シャッターレリーズボタンをさらに備え、
    　前記シャッターレリーズボタンが押圧された場合、前記画像補正部は前記収差を補正して前記補正画像を作成し、前記表示部は前記補正画像を表示する請求項７に記載の撮像装置。
  9. 　前記ピント調整リングが所定期間動かない場合、前記画像補正部は前記収差を補正して前記補正画像を作成し、前記表示部は前記補正画像を表示する請求項７に記載の撮像装置。
  10. 　被写体に光学系を合焦させるステップと、
    　被写体像を撮像して撮影画像を出力するステップと、
    　被写体に前記光学系を合焦させる動作を行っている合焦動作期間であるか否かを判断するステップと、
    　前記合焦動作期間でない場合、前記撮影画像に含まれる前記光学系に起因する収差を補正して補正画像を作成し、前記補正画像を表示するステップと、
    　前記合焦動作期間である場合、前記補正画像を作成せずに、前記撮影画像を表示するステップとを備える画像表示方法。
PCT/JP2014/055227 2013-03-05 2014-03-03 撮像装置及び画像表示方法 WO2014136703A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2013043387A JP2014171203A (ja) 2013-03-05 2013-03-05 撮像装置及び画像表示方法
JP2013-043387 2013-03-05

Publications (1)

Publication Number Publication Date
WO2014136703A1 true WO2014136703A1 (ja) 2014-09-12

Family

ID=51491221

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2014/055227 WO2014136703A1 (ja) 2013-03-05 2014-03-03 撮像装置及び画像表示方法

Country Status (2)

Country Link
JP (1) JP2014171203A (ja)
WO (1) WO2014136703A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111698414B (zh) * 2019-03-14 2021-11-16 北京小米移动软件有限公司 图像信号处理方法及装置、电子设备、可读存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11275444A (ja) * 1998-03-22 1999-10-08 Ricoh Co Ltd 電子カメラ
JP2012199690A (ja) * 2011-03-18 2012-10-18 Nikon Corp 撮像装置および撮像装置の制御プログラム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11275444A (ja) * 1998-03-22 1999-10-08 Ricoh Co Ltd 電子カメラ
JP2012199690A (ja) * 2011-03-18 2012-10-18 Nikon Corp 撮像装置および撮像装置の制御プログラム

Also Published As

Publication number Publication date
JP2014171203A (ja) 2014-09-18

Similar Documents

Publication Publication Date Title
US8823857B2 (en) Image apparatus
JP5851070B2 (ja) レンズ交換式デジタルカメラ
JP4528235B2 (ja) デジタルカメラ
JP5864938B2 (ja) 撮像装置及びその制御方法
US9241109B2 (en) Image capturing apparatus, control method, and recording medium for moving image generation
JP2010268388A (ja) 撮像装置
JP2004212556A (ja) 撮像装置
WO2017154366A1 (ja) ローパスフィルタ制御装置、およびローパスフィルタ制御方法、ならびに撮像装置
JP5436116B2 (ja) 画像処理装置、撮像装置、及び制御方法
JP7289055B2 (ja) 撮像装置
JP5257969B2 (ja) 合焦位置制御装置、及び合焦位置制御方法、合焦位置制御プログラム
JP2018011268A (ja) 撮像装置、画像合成方法、およびプログラム
WO2014136703A1 (ja) 撮像装置及び画像表示方法
JP2013198109A (ja) 撮像装置
JP2004145022A (ja) デジタルカメラ
JP5123010B2 (ja) 撮像装置、撮像方法及び撮像装置が備えるコンピュータに撮像方法を実行させるためのプログラム
JP2007316471A (ja) 撮像装置及びそのプログラム
JP6547742B2 (ja) 撮像制御装置、撮像装置および撮像制御方法
JP2014179782A (ja) 撮像装置及び画像表示方法
JP5664440B2 (ja) 撮像装置
JP5790011B2 (ja) 撮像装置
WO2012140919A1 (ja) ステレオ画像生成装置およびステレオ画像生成方法
JP2011133574A (ja) 撮像装置及びその制御方法、プログラム
JP2010197524A (ja) 撮像装置
JP2017058563A (ja) 自動焦点調節装置、撮像装置、および自動焦点調節方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14759630

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 14759630

Country of ref document: EP

Kind code of ref document: A1