JP6478504B2 - Imaging apparatus and control method thereof - Google Patents

Imaging apparatus and control method thereof Download PDF

Info

Publication number
JP6478504B2
JP6478504B2 JP2014146300A JP2014146300A JP6478504B2 JP 6478504 B2 JP6478504 B2 JP 6478504B2 JP 2014146300 A JP2014146300 A JP 2014146300A JP 2014146300 A JP2014146300 A JP 2014146300A JP 6478504 B2 JP6478504 B2 JP 6478504B2
Authority
JP
Japan
Prior art keywords
correction amount
correction
disturbance
angle
gain
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2014146300A
Other languages
Japanese (ja)
Other versions
JP2016024235A5 (en
JP2016024235A (en
Inventor
晋平 宮原
晋平 宮原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2014146300A priority Critical patent/JP6478504B2/en
Publication of JP2016024235A publication Critical patent/JP2016024235A/en
Publication of JP2016024235A5 publication Critical patent/JP2016024235A5/ja
Application granted granted Critical
Publication of JP6478504B2 publication Critical patent/JP6478504B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Adjustment Of Camera Lenses (AREA)
  • Studio Devices (AREA)

Description

本発明は、撮像装置およびその制御方法に関し、特には手ぶれ補正技術に関する。   The present invention relates to an imaging apparatus and a control method thereof, and more particularly to a camera shake correction technique.

撮像装置の振れを検出して、この振れに起因する画像ぶれを補正する手ぶれ補正技術が知られている。手ぶれ補正技術には、装置の振れをキャンセルするように、撮像レンズの一部や撮像素子を移動させる光学式手ぶれ補正と、画像の切り出し位置を移動させる電子式手ぶれ補正とがある。   There is known a camera shake correction technique for detecting a shake of an imaging apparatus and correcting an image shake caused by the shake. The camera shake correction technology includes optical camera shake correction for moving a part of an imaging lens and an image sensor so as to cancel a shake of the apparatus, and electronic camera shake correction for moving an image clipping position.

また、大きな手ぶれに対応できるよう、光学式手ぶれ補正と、電子式手ぶれ補正を併用することも知られている。特許文献1には、角速度センサや加速度センサで検出した像振れ信号を高周波成分と低周波成分に分離し、高周波成分に基づいて光学式手ぶれ補正を、低周波成分に基づいて電子式手ぶれ補正を行う方法が記載されている。   It is also known to use both optical image stabilization and electronic image stabilization so that large camera shake can be accommodated. In Patent Document 1, an image shake signal detected by an angular velocity sensor or an acceleration sensor is separated into a high frequency component and a low frequency component, optical camera shake correction is performed based on the high frequency component, and electronic camera shake correction is performed based on the low frequency component. The method of doing is described.

また、特許文献2では、装置の角速度が設定値以下の場合には電子式手ぶれ補正を、一定値以上の場合には光学式手ぶれ補正を選択的に用いて、補正範囲を拡大する方法が記載されている。   Patent Document 2 describes a method of selectively using electronic camera shake correction when the angular velocity of the apparatus is equal to or less than a set value, and optical camera shake correction when the angular velocity is equal to or greater than a certain value, and expanding the correction range. Has been.

特開2010−4370号公報JP 2010-4370 A 特許第2803072号公報(段落0057〜0060)Japanese Patent No. 2803072 (paragraphs 0057 to 0060)

光学式手ぶれ補正は常時実行可能であるのに対し、電子式手ぶれ補正は、画像の切り出しによるぶれ補正のため、露光中の手ぶれ補正ができない。そのため、特許文献1の方法では、動画撮影中の静止画撮影における露光中は光学式手ぶれ補正しか利用できず、手ぶれの高周波成分しか補正できない。また、上述した外力に起因する課題も存在する。   While optical camera shake correction can always be executed, electronic camera shake correction cannot correct camera shake during exposure because of camera shake correction by image clipping. Therefore, in the method of Patent Document 1, only optical camera shake correction can be used during exposure in still image shooting during moving image shooting, and only high-frequency components of camera shake can be corrected. There is also a problem caused by the external force described above.

また、特許文献2の方法では、電子式手ぶれ補正と光学式手ぶれ補正とが切り替わる境界において、光学式手ぶれ補正の駆動がオーバーシュートして画像が乱れるといった課題がある。   Further, the method of Patent Document 2 has a problem in that the image is disturbed due to overshooting of the optical image stabilization drive at the boundary where the electronic image stabilization and the optical image stabilization are switched.

本発明はこのような従来技術の課題に鑑みなされたものであり、光学式手ぶれ補正と電子式手ぶれ補正の併用が可能な撮像装置およびその制御方法において、外乱の影響を抑制した良好な補正効果を実現することを目的とする。   The present invention has been made in view of the above-described problems of the prior art, and in an imaging apparatus capable of using both optical camera shake correction and electronic camera shake correction, and a control method thereof, a favorable correction effect in which the influence of disturbance is suppressed. It aims at realizing.

上述の目的は、撮像装置であって、装置の動きによる像ぶれを補正するための第1の補正量を算出する第1の算出手段と、第1の補正量のうち予め定められた高周波成分に基づいて機械要素を駆動することにより、光学的に像ぶれを補正する第1の補正手段と、第1の補正量と機械要素の位置との差に基づいて得られる第2の補正量に基づいて画像の切り出し位置を変更することにより、電子的に像ぶれを補正する第2の補正手段と、第1の補正量の高周波成分を、撮像装置に加わる外乱に応じて補正した第3の補正量を算出する第2の算出手段と、撮像装置の加速度を検出する検出手段と、を有し、第1の補正手段は、第3の補正量に基づいて機械要素を駆動し、第2の算出手段が、加速度を外乱推力に変換する変換手段と、外乱推力にゲインを適用する増幅手段と、を有し、ゲインを適用した外乱推力を用いて第1の補正量の高周波成分を補正して第3の補正量を算出し、撮像装置の撮像光学系の画角が所定の第1の画角より大きい場合にはゲインを基準値より大きくし、第1の画角より小さい第2の画角より小さい場合にはゲインを基準値より小さくする、ことを特徴とする撮像装置によって達成される。 The above-described object is an imaging apparatus, and includes a first calculation unit that calculates a first correction amount for correcting image blur due to movement of the device, and a predetermined high-frequency component of the first correction amount. And a second correction amount obtained based on a difference between the first correction amount and the position of the machine element. A second correction unit that electronically corrects the image blur by changing the cutout position of the image on the basis thereof, and a third correction unit that corrects the high-frequency component of the first correction amount according to the disturbance applied to the imaging device. A second calculating unit that calculates a correction amount; and a detecting unit that detects an acceleration of the imaging apparatus. The first correcting unit drives the mechanical element based on the third correction amount, and Calculating means for converting acceleration into disturbance thrust, and And amplifying means for applying a gain, calculating a third correction amount by correcting a high-frequency component of the first correction amount using a disturbance thrust applied with a gain, and displaying an image of the imaging optical system of the imaging apparatus. When the angle is larger than the predetermined first field angle, the gain is made larger than the reference value, and when the angle is smaller than the second field angle smaller than the first field angle, the gain is made smaller than the reference value. This is achieved by the imaging device.

本発明によれば、光学式手ぶれ補正と電子式手ぶれ補正の併用が可能な撮像装置およびその制御方法において、外乱の影響を抑制した良好な補正効果を実現することができる。   According to the present invention, it is possible to realize a good correction effect in which the influence of disturbance is suppressed in an imaging apparatus capable of using both optical camera shake correction and electronic camera shake correction and a control method thereof.

実施形態に係る撮像装置の一例としてのデジタルカメラの機能構成例を示すブロック図1 is a block diagram showing a functional configuration example of a digital camera as an example of an imaging apparatus according to an embodiment 第1の実施形態における手ぶれ補正動作を説明するためのブロック図Block diagram for explaining a camera shake correction operation in the first embodiment 第2の実施形態における手ぶれ補正動作を説明するためのブロック図Block diagram for explaining a camera shake correction operation in the second embodiment 実施形態における光学的手ぶれ補正で制御する機械要素をモデル化した模式図Schematic diagram modeling machine elements controlled by optical image stabilization in the embodiment 第3の実施形態における外乱オブザーバの動作を説明するための図The figure for demonstrating operation | movement of the disturbance observer in 3rd Embodiment. 第3の実施形態における手ぶれ補正動作を説明するためのブロック図A block diagram for explaining a camera shake correction operation in the third embodiment

以下、本発明の例示的な実施形態を、添付図面に基づいて詳細に説明する。なお、以下では、本発明の実施形態に係る撮像装置の一例としてのデジタルカメラについて説明する。しかし、本発明はデジタルカメラのように撮影機能を主とする装置に限らず、光学式手ぶれ補正および電子式手ぶれ補正の両方を利用可能な撮像装置を有する任意の機器に適用可能である。このような機器の一部を例示すれば、携帯電話機(スマートフォン含む)、ゲーム機、パーソナルコンピュータ、タブレット端末、カーナビゲーションシステム、ドライブレコーダ、ロボットなどがある。   Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings. Hereinafter, a digital camera as an example of an imaging apparatus according to an embodiment of the present invention will be described. However, the present invention is not limited to an apparatus mainly having a photographing function such as a digital camera, but can be applied to any apparatus having an imaging apparatus that can use both optical camera shake correction and electronic camera shake correction. Examples of such devices include mobile phones (including smart phones), game machines, personal computers, tablet terminals, car navigation systems, drive recorders, robots, and the like.

図1は本発明の実施形態に係るデジタルカメラ100の機能構成例を示すブロック図である。デジタルカメラ100は、静止画像と動画像の撮影、記録が可能であり、光学式手ぶれ補正および電子式手ぶれ補正の両方を利用可能である。なお、本実施形態では光学式手ぶれ補正で駆動する機械部品が手ぶれ補正レンズ(シフトレンズまたはチルトレンズ)であるものとするが、撮像素子(もしくはレンズと撮像素子とを保持するモジュール)を駆動してもよい。   FIG. 1 is a block diagram illustrating a functional configuration example of a digital camera 100 according to an embodiment of the present invention. The digital camera 100 can capture and record still images and moving images, and can use both optical camera shake correction and electronic camera shake correction. In this embodiment, it is assumed that the mechanical component driven by optical image stabilization is an image stabilization lens (shift lens or tilt lens). However, the image sensor (or a module that holds the lens and the image sensor) is driven. May be.

図1において、撮像光学系120は、ズームユニット101、絞り・シャッタユニット103、手ぶれ補正ユニット105、およびフォーカスユニット107を有し、撮像部109が有する撮像素子の結像面に光学像を形成する。ズームユニット101は撮像光学系の焦点距離(画角)を変化させるための、光軸方向に移動可能なレンズ群である。絞り・シャッタユニット103は、絞り機能を有するメカニカルシャッタである。手ぶれ補正ユニット105は、像ぶれを光学的に補正するための、光路中で移動可能な機械要素を有する。機械要素は例えば、光軸に対して直交する方向もしくは光軸に対して傾く方向に移動可能な手ぶれ補正用レンズや撮像素子であってよい。フォーカスユニット107は、撮像光学系120が合焦する距離を調整するための、光軸方向に移動可能なフォーカスレンズを有する。なお、撮像光学系120には、図示していない固定レンズが含まれていてもよい。   In FIG. 1, the imaging optical system 120 includes a zoom unit 101, an aperture / shutter unit 103, a camera shake correction unit 105, and a focus unit 107, and forms an optical image on an imaging surface of an imaging element included in the imaging unit 109. . The zoom unit 101 is a lens group that is movable in the optical axis direction for changing the focal length (view angle) of the imaging optical system. The aperture / shutter unit 103 is a mechanical shutter having an aperture function. The camera shake correction unit 105 includes a mechanical element movable in the optical path for optically correcting image blur. The mechanical element may be, for example, a camera shake correction lens or an image sensor that can move in a direction orthogonal to the optical axis or in a direction inclined with respect to the optical axis. The focus unit 107 has a focus lens that is movable in the optical axis direction for adjusting the distance at which the imaging optical system 120 is focused. Note that the imaging optical system 120 may include a fixed lens (not shown).

ズームユニット101、絞り・シャッタユニット103、手ぶれ補正ユニット105、およびフォーカスユニット107は、それぞれ機械的な可動部材を有している。これらの可動部材は、ズーム駆動制御部102、絞り・シャッタ駆動制御部104、手ぶれ補正制御部106、フォーカス駆動制御部108が、システム制御部119の制御に従って駆動する。   The zoom unit 101, the aperture / shutter unit 103, the camera shake correction unit 105, and the focus unit 107 each have a mechanical movable member. These movable members are driven by the zoom drive control unit 102, the aperture / shutter drive control unit 104, the camera shake correction control unit 106, and the focus drive control unit 108 according to the control of the system control unit 119.

撮像部109は複数の画素が配列された撮像素子を有し、撮像光学系120が結像する被写体像を画素ごとに電気信号に変換する。撮像信号処理部110は、撮像部109から出力された電気信号に対してA/D変換、ホワイトバランス調整、色補間などの処理を適用して画像信号に変換処理する。撮像信号処理部110はさらに、手ぶれ補正ユニット105の駆動量に応じてシステム制御部119が算出する電子式手ぶれ補正量に基づいて画像信号の切り出し位置を変更することにより、電子式手ぶれ補正機能を実現する。   The imaging unit 109 includes an imaging device in which a plurality of pixels are arranged, and converts a subject image formed by the imaging optical system 120 into an electrical signal for each pixel. The imaging signal processing unit 110 converts the electrical signal output from the imaging unit 109 into an image signal by applying processing such as A / D conversion, white balance adjustment, and color interpolation. The imaging signal processing unit 110 further has an electronic image stabilization function by changing the cutout position of the image signal based on the electronic image stabilization amount calculated by the system control unit 119 according to the drive amount of the image stabilization unit 105. Realize.

画像信号処理部111は、撮像信号処理部110から出力された画像信号を用途に応じて加工する。画像信号処理部111は例えば画像信号を表示解像度に合わせてリサイズしたり、記録用に符号化したりする。   The image signal processing unit 111 processes the image signal output from the imaging signal processing unit 110 according to the application. For example, the image signal processing unit 111 resizes the image signal in accordance with the display resolution or encodes it for recording.

表示部112は、画像信号処理部111から出力された表示用の画像信号をシステム制御部119の制御に基づいて表示する。電源部113は、動作モードやユーザ指示に応じて、デジタルカメラ100の機能ブロックのうち必要なものに電源を供給する。外部入出力端子部114は、信号やデータなどを通信するために外部装置を接続するためのコネクタおよびインターフェース群である。なお、外部装置と無線通信を行う場合、外部入出力端子部114はアンテナを有してよい。   The display unit 112 displays the display image signal output from the image signal processing unit 111 based on the control of the system control unit 119. The power supply unit 113 supplies power to necessary ones of the functional blocks of the digital camera 100 according to an operation mode and a user instruction. The external input / output terminal unit 114 is a connector and interface group for connecting an external device to communicate signals and data. Note that in the case of performing wireless communication with an external device, the external input / output terminal unit 114 may include an antenna.

操作部115はユーザがデジタルカメラ100に指示や設定などを入力するために用いる入力デバイス群である。代表的にはボタン、スイッチ、タッチパネルなどであるが、音声や視線などを利用するものであってもよい。本実施形態では、手ぶれ補正機能のON/OFFをユーザが指示するための防振スイッチと、静止画の撮影準備開始および撮影開始を指示するためのレリーズボタンと、動画の撮影開始および停止を指示するための動画記録ボタンとが操作部115に含まれている。レリーズボタンは半押しでオンする第1スイッチSW1と、全押しでオンする第2スイッチSW2とを有し、第1スイッチSW1のオンが撮影準備開始を、第2スイッチSW2のオンが撮影開始をそれぞれシステム制御部119に指示する。動画記録スイッチは、動画記録されていない状態で押下されると動画撮影の開始を、動画記録中に押下されると記録停止(終了)を、それぞれシステム制御部119に指示する。なお、動画記録中にレリーズボタンが操作された場合には、動画記録中の静止画撮影が実行される。   The operation unit 115 is an input device group used by a user to input instructions and settings to the digital camera 100. Typically, a button, a switch, a touch panel, or the like is used, but a voice, line of sight, or the like may be used. In this embodiment, the image stabilization switch for instructing the user to turn on / off the camera shake correction function, the release button for instructing to start and start shooting of still images, and instructing to start and stop shooting of moving images The operation unit 115 includes a moving image recording button. The release button has a first switch SW1 that is turned on when pressed halfway and a second switch SW2 that is turned on when pressed fully. When the first switch SW1 is turned on, shooting preparation is started, and when the second switch SW2 is turned on, shooting is started. Each is instructed to the system control unit 119. The moving image recording switch instructs the system control unit 119 to start moving image shooting when pressed while no moving image is recorded, and to stop recording (end) when pressed during moving image recording. If the release button is operated during moving image recording, still image shooting during moving image recording is executed.

また、本実施形態のデジタルカメラ100は、撮影モードと再生モードを含む複数の動作モードを有し、操作部115を通じて動作モードを指定することができる。なお、再生モードが指定された場合にシステム制御部119は手ぶれ補正機能をOFFにする。
また操作部115には、撮像光学系120はの焦点距離(画角)を変更するためのズームスイッチが含まれ、システム制御部119は、ズーム駆動制御部102を通じて、ズームスイッチの操作方向に応じた方向にズームユニット101を駆動する。
In addition, the digital camera 100 according to the present embodiment has a plurality of operation modes including a shooting mode and a playback mode, and can specify an operation mode through the operation unit 115. When the reproduction mode is designated, the system control unit 119 turns off the camera shake correction function.
The operation unit 115 includes a zoom switch for changing the focal length (view angle) of the imaging optical system 120, and the system control unit 119 responds to the operation direction of the zoom switch through the zoom drive control unit 102. The zoom unit 101 is driven in the selected direction.

記憶部116は例えば着脱可能な半導体メモリカードであり、デジタルカメラ100で撮影した静止画、動画(音声を含む)などを記憶する。なお、記憶部116は不揮発性メモリ以外の記憶装置を用いてもよいし、デジタルカメラ100に固定された記憶装置を含んでもよい。   The storage unit 116 is, for example, a detachable semiconductor memory card, and stores still images, moving images (including sound) and the like taken with the digital camera 100. Note that the storage unit 116 may use a storage device other than the nonvolatile memory, or may include a storage device fixed to the digital camera 100.

角速度検出部117は角速度センサを有し、角速度センサの出力に基づいてデジタルカメラ100の動き(手ぶれ量)を検出する。加速度検出部118は加速度センサを有し、加速度センサの出力に基づいてデジタルカメラ100に加わる加速度を検出する。システム制御部119はCPUやMPUなどのプログラマブルプロセッサの1つ以上と、ROM、RAMを有し、ROMに記憶されたプログラムをRAMに展開して実行することによりデジタルカメラ100の機能ブロックの動作を制御する。   The angular velocity detection unit 117 includes an angular velocity sensor, and detects the movement (camera shake amount) of the digital camera 100 based on the output of the angular velocity sensor. The acceleration detection unit 118 includes an acceleration sensor, and detects acceleration applied to the digital camera 100 based on the output of the acceleration sensor. The system control unit 119 includes one or more programmable processors such as a CPU and an MPU, a ROM, and a RAM. The program stored in the ROM is expanded into the RAM and executed to execute the operation of the functional blocks of the digital camera 100. Control.

次に、デジタルカメラ100の動作について説明する。
操作部115の防振スイッチにより手ぶれ補正機能のONが指示されると、システム制御部119は手ぶれ補正制御部106に防振動作を指示し、これを受けた手ぶれ補正制御部106が防振OFFの指示がなされるまで防振動作を行う。また、操作部115には、光学式手ぶれ補正のみで防振するモードと、光学式手ぶれ補正と電子式手ぶれ補正の併用で防振するモードを選択できる手ぶれ補正モードスイッチが含まれる。光学式手ぶれ補正のみのモードの場合、撮像部109の読み出し位置は一定となり、その分読み出し範囲を広げることで、広角撮影に対応できる。一方、光学式手ぶれ補正と電子式手ぶれ補正の併用で防振するモードを選択した場合、撮像部109の切り出し範囲が狭まる代わりに、読み出し位置を手ぶれ補正量に応じて変更することで、より大きな手ぶれに対応できる。
Next, the operation of the digital camera 100 will be described.
When the camera shake correction function is instructed to be turned ON by the image stabilization switch of the operation unit 115, the system control unit 119 instructs the camera shake correction control unit 106 to perform the image stabilization operation, and the camera shake correction control unit 106 that has received this instruction is turned off. Anti-vibration operation is performed until the instruction is given. In addition, the operation unit 115 includes a camera shake correction mode switch that can select a mode for performing image stabilization only by optical camera shake correction and a mode for performing image stabilization by using both optical camera shake correction and electronic camera shake correction. In the case of only the optical camera shake correction mode, the reading position of the imaging unit 109 is constant, and widening shooting can be supported by widening the reading range accordingly. On the other hand, when the image stabilization mode is selected by the combination of optical image stabilization and electronic image stabilization, the readout position is changed in accordance with the image stabilization amount instead of the cutout range of the imaging unit 109. Can handle camera shake.

操作部115のレリーズボタンの第1スイッチSW1がオンすると、システム制御部119は、静止画の撮影準備動作を開始する。具体的には、システム制御部119が、AF枠などの焦点検出領域内の被写体に撮像光学系120が合焦するよう、フォーカス駆動制御部108を通じてフォーカスユニット107を移動させる。この自動焦点検出動作は、いわゆるライブビュー表示に用いられる画像データに基づいて、像面位相差検出方式やコントラスト検出方式など、公知の方法を用いて行うことができる。また、撮像素子の他に設けた位相差検出センサの出力に基づく位相差検出方式を用いてもよい。また、システム制御部119は、やはり公知の方法を用いた自動露出制御を実行し、適正露出を得るための撮影条件(絞り値、シャッタ速度、撮影感度など)を決定する。システム制御部119はこの時点で、決定した絞り値となるように絞り・シャッタ駆動制御部104を通じて絞り・シャッタユニット103を駆動してもよい。   When the first switch SW1 of the release button of the operation unit 115 is turned on, the system control unit 119 starts a still image shooting preparation operation. Specifically, the system control unit 119 moves the focus unit 107 through the focus drive control unit 108 so that the imaging optical system 120 is focused on a subject in a focus detection region such as an AF frame. This automatic focus detection operation can be performed using a known method such as an image plane phase difference detection method or a contrast detection method based on image data used for so-called live view display. Further, a phase difference detection method based on the output of a phase difference detection sensor provided in addition to the image sensor may be used. The system control unit 119 also performs automatic exposure control using a known method, and determines shooting conditions (aperture value, shutter speed, shooting sensitivity, etc.) for obtaining appropriate exposure. At this time, the system control unit 119 may drive the aperture / shutter unit 103 through the aperture / shutter drive control unit 104 so that the determined aperture value is obtained.

そして、第2スイッチSW2がオンになると、システム制御部119は静止画撮影動作を開始する。システム制御部119は、決定した撮影条件に基づき、絞り・シャッタ駆動制御部104を通じて絞り・シャッタユニット103を駆動する。また、システム制御部119は、撮像部109が生成した画像信号を、撮像信号処理部110および画像信号処理部111で処理させて記録用画像信号を取得する。システム制御部119は、記録用が像信号を予め定められたファイル形式で記憶部116に記憶する。   When the second switch SW2 is turned on, the system control unit 119 starts a still image shooting operation. The system control unit 119 drives the aperture / shutter unit 103 through the aperture / shutter drive control unit 104 based on the determined photographing condition. Further, the system control unit 119 acquires the image signal for recording by processing the image signal generated by the imaging unit 109 by the imaging signal processing unit 110 and the image signal processing unit 111. The system control unit 119 stores the image signal for recording in the storage unit 116 in a predetermined file format.

なお、動画記録スイッチが押下された場合には、所定のフレームレートでの動画撮影並びに記録を開始する。各フレームの撮影、記録動作は符号化形式などを除き、基本的に静止画撮影時と同様である。なお、動画撮影時に行われるAF動作についても、公知のTV−AF方式などを用いて実施すればよい。   When the moving image recording switch is pressed, moving image shooting and recording at a predetermined frame rate is started. The shooting and recording operations for each frame are basically the same as those for still image shooting except for the encoding format. Note that the AF operation performed during moving image shooting may be performed using a known TV-AF method or the like.

図2は、デジタルカメラ100の手ぶれ補正機能に関する機能構成をより詳細に示したブロック図である。なお、ピッチ(チルト)方向およびヨー(パン)方向のデータについて同じ動作を行うため、1方向に関してのみ説明する。また、図2においてシステム制御部119が有する機能ブロックは、システム制御部119が有するプログラマブルプロセッサがソフトウェアを実行することで実現されても、少なくとも一部がASICやPLDのようなハードウェアで実現されてもよい。   FIG. 2 is a block diagram showing in more detail the functional configuration related to the camera shake correction function of the digital camera 100. Since the same operation is performed on the data in the pitch (tilt) direction and the yaw (pan) direction, only one direction will be described. In addition, even if the functional blocks included in the system control unit 119 in FIG. 2 are realized by executing software by the programmable processor included in the system control unit 119, at least a part of the functional blocks is realized by hardware such as ASIC or PLD. May be.

角速度検出部117は、角速度センサとして例えばジャイロを用い、角速度を電圧として出力する。システム制御部119のAD変換部201は、角速度検出部117が出力する電圧を所定のサンプリングレートでデジタルデータに変換する。
第1のぶれ補正量演算部202は、AD変換部201が出力する角速度データから、像ぶれを補正するための補正量(第1の補正量)を算出する。具体的には、光学的手ぶれ補正量演算部202は、角速度データにハイパスフィルタを適用してオフセット成分を除去した後に積分して角度データに変換し、敏感度と呼ばれる係数を乗ずることで角度データをぶれ補正量に変換する。
The angular velocity detection unit 117 uses, for example, a gyro as an angular velocity sensor, and outputs the angular velocity as a voltage. The AD conversion unit 201 of the system control unit 119 converts the voltage output from the angular velocity detection unit 117 into digital data at a predetermined sampling rate.
The first blur correction amount calculation unit 202 calculates a correction amount (first correction amount) for correcting image blur from the angular velocity data output from the AD conversion unit 201. Specifically, the optical image stabilization amount calculation unit 202 applies a high-pass filter to the angular velocity data, removes the offset component, integrates and converts the angular data to angular data, and multiplies the coefficient by a coefficient called sensitivity. Is converted into a shake correction amount.

ローパスフィルタ(LPF)203は第1のぶれ補正量演算部202の出力するぶれ補正量の低周波成分のみを通過させる。LPF203の遮断周波数は可変であってよく、光学式手ぶれ補正に用いる機械要素(シフトレンズ)の可動範囲と、予め測定されたぶれの周波数成分と振幅との関係に応じて定めることができる。減算器211はローパスフィルタ203の出力をぶれ補正量から減じ、手ぶれ補正量の高周波成分を出力する。LPF203および減算器211は、手ぶれ補正量の高周波成分を抽出するフィルタ手段を構成する。   The low pass filter (LPF) 203 passes only the low frequency component of the shake correction amount output from the first shake correction amount calculation unit 202. The cutoff frequency of the LPF 203 may be variable, and can be determined according to the relationship between the movable range of a mechanical element (shift lens) used for optical camera shake correction and the frequency component and amplitude of the shake measured in advance. The subtractor 211 subtracts the output of the low-pass filter 203 from the shake correction amount and outputs a high frequency component of the camera shake correction amount. The LPF 203 and the subtractor 211 constitute filter means for extracting a high frequency component of the camera shake correction amount.

PID制御部204は、手ぶれ補正量の高周波成分と手ぶれ補正ユニット(手ぶれ補正レンズ)105の位置を入力として、公知のPID制御により手ぶれ補正量を生成する。そして、PID制御部204は、手ぶれ補正量を光学式手ぶれ補正制御部106に供給し、駆動部205を通じて手ぶれ補正レンズの位置を制御する。具体的には、PID制御部204は、駆動部205に与えた補正量によって実現されるべき補正レンズ位置と、AD変換部207から入力される補正レンズの位置との差を偏差としたPID制御を行う。また、駆動部205は手ぶれ補正量を、手ぶれ補正ユニット105を駆動する例えばアクチュエータを動作させる電流に変換する。PID制御部204および駆動部205は第1の補正手段を構成する。   The PID control unit 204 receives the high-frequency component of the camera shake correction amount and the position of the camera shake correction unit (camera shake correction lens) 105 as input, and generates a camera shake correction amount by known PID control. Then, the PID control unit 204 supplies the camera shake correction amount to the optical camera shake correction control unit 106 and controls the position of the camera shake correction lens through the drive unit 205. Specifically, the PID control unit 204 uses the difference between the correction lens position to be realized by the correction amount given to the drive unit 205 and the correction lens position input from the AD conversion unit 207 as a deviation. I do. In addition, the drive unit 205 converts the camera shake correction amount into a current that operates, for example, an actuator that drives the camera shake correction unit 105. The PID control unit 204 and the drive unit 205 constitute a first correction unit.

光学式手ぶれ補正制御部106が有する駆動部205は、PID制御部204の出力する手ぶれ補正量を電圧に変換し、手ぶれ補正ユニット105を駆動するための電流を供給する。位置検出部206は、手ぶれ補正ユニット105に含まれる手ぶれ補正レンズの位置を検出し、位置に応じた値を有するアナログ電圧信号(位置検出信号)として出力する。システム制御部119のAD変換部207は、手ぶれ補正レンズの位置を表すアナログ電圧をデジタルデータに変換し、PID制御部204に出力する。   A drive unit 205 included in the optical image stabilization control unit 106 converts the image stabilization amount output from the PID control unit 204 into a voltage, and supplies a current for driving the image stabilization unit 105. The position detection unit 206 detects the position of the camera shake correction lens included in the camera shake correction unit 105 and outputs it as an analog voltage signal (position detection signal) having a value corresponding to the position. The AD conversion unit 207 of the system control unit 119 converts an analog voltage representing the position of the camera shake correction lens into digital data, and outputs the digital data to the PID control unit 204.

このように、本実施形態では、検出した手ぶれ量の高周波成分に基づいて光学式手ぶれ補正を行う。なお、ローパスフィルタ203の遮断周波数は変更してもよい。例えば、光学式手ぶれ補正で駆動するレンズ等の可動範囲が変更された場合には、可動範囲が狭いほど遮断周波数を上げ、より小さい範囲の補正に特化するようにしてもよい。また、動画撮影時における1フレーム当たりの露光時間が変更された場合には、露光時間が長いほど光学式手ぶれ補正が必要となるため、ローパスフィルタ203の遮断周波数を下げるようにしてもよい。これは、上述の通り、露光中に発生する手ぶれは電子式手ぶれ補正では補正できないためである。   Thus, in this embodiment, optical camera shake correction is performed based on the detected high-frequency component of the camera shake amount. Note that the cutoff frequency of the low-pass filter 203 may be changed. For example, when the movable range of a lens or the like that is driven by optical camera shake correction is changed, the cut-off frequency may be increased as the movable range is narrowed, and the correction may be specialized for a smaller range. In addition, when the exposure time per frame at the time of moving image shooting is changed, the longer the exposure time, the more the optical camera shake correction is required. Therefore, the cutoff frequency of the low-pass filter 203 may be lowered. This is because, as described above, camera shake occurring during exposure cannot be corrected by electronic camera shake correction.

また、レリーズボタンが押下されて静止画撮影を行う場合(動画記録中の静止画撮影時を含む)、静止画露光中は電子式手ぶれ補正が実施できず、高周波成分のみの手ぶれ補正しかできない。そこで、システム制御部119は、静止画露光中のみ、減算器211の出力ではなく第1のぶれ補正量演算部202の出力を直接PID制御部204に供給する。あるいは、PID制御部204は、静止画露光中には減算器211の出力ではなく第1のぶれ補正量演算部202の出力を用いて補正量を生成する。これにより、検出された手ぶれの全周波数成分を光学式手ぶれ補正機能を用いて補正するための補正量が生成され、静止画露光中の手ぶれ補正能力を向上させることができる。   Further, when still image shooting is performed by pressing the release button (including still image shooting during moving image recording), electronic camera shake correction cannot be performed during still image exposure, and only camera shake correction of only high-frequency components can be performed. Therefore, the system control unit 119 supplies the output of the first blur correction amount calculation unit 202 directly to the PID control unit 204 instead of the output of the subtractor 211 only during still image exposure. Alternatively, the PID control unit 204 generates a correction amount using the output of the first blur correction amount calculation unit 202 instead of the output of the subtractor 211 during still image exposure. As a result, a correction amount for correcting all the frequency components of the detected camera shake using the optical camera shake correction function is generated, and the camera shake correction capability during still image exposure can be improved.

引き続き図2を参照して、電子式手ぶれ補正機能の動作について説明する。第1のぶれ補正量演算部202の出力するぶれ補正量は、減算器212にも入力される。減算器212は、第1のぶれ補正量演算部202の出力するぶれ補正量から、位置検出部206が出力する手ぶれ補正レンズの位置を減算する。第2のぶれ補正量演算部208は、減算器212の出力する、光学式手ぶれ補正機能によって補正されていない低周波成分のぶれ補正量(ぶれ残り量)に係数を乗じて、電子式手ぶれ補正に使用する画像切り出し位置の補正量(第2の補正量)に変換する。撮像信号処理部110において、画像処理部210は、撮像部109が出力するアナログ画像信号に対し、A/D変換、ホワイトバランス調整、色補間などの処理を適用してデジタル画像信号に変換処理する。電子式手ぶれ補正部209は、第2のぶれ補正量演算部208から供給される補正量に基づいた位置でデジタル画像信号を切り出し、画像信号処理部111に出力する。第2のぶれ補正量演算部208および電子式手ぶれ補正部209は第2の補正手段を構成する。   The operation of the electronic image stabilization function will be described with reference to FIG. The blur correction amount output from the first blur correction amount calculation unit 202 is also input to the subtractor 212. The subtractor 212 subtracts the position of the camera shake correction lens output from the position detection unit 206 from the camera shake correction amount output from the first camera shake correction amount calculation unit 202. The second shake correction amount calculation unit 208 multiplies the low-frequency component shake correction amount (blur remaining amount) output from the subtractor 212 and not corrected by the optical camera shake correction function by a coefficient, and performs electronic camera shake correction. Is converted into the correction amount (second correction amount) of the image cut-out position used in the above. In the imaging signal processing unit 110, the image processing unit 210 converts the analog image signal output from the imaging unit 109 into a digital image signal by applying processing such as A / D conversion, white balance adjustment, and color interpolation. . The electronic camera shake correction unit 209 cuts out a digital image signal at a position based on the correction amount supplied from the second camera shake correction amount calculation unit 208 and outputs the digital image signal to the image signal processing unit 111. The second shake correction amount calculation unit 208 and the electronic camera shake correction unit 209 constitute a second correction unit.

本実施形態によれば、検出された撮像装置のぶれを光学式手ぶれ補正機能で補正するための補正量の高周波成分を光学的手ぶれ補正機能により補正し、補正量と光学的手ぶれ補正に用いる機械要素の位置との差を電子式手ぶれ補正機能とを用いて補正する。検出されたぶれを高周波成分と低周波成分に分離し、光学式手ぶれ補正機能と電子式手ぶれ補正機能で独立して補正する構成の場合、光学式手ぶれ補正に用いる機械要素の駆動の応答遅れや外乱による位置の誤差が補正されずに残ってしまう。しかし、本実施形態の構成によれば、光学的手ぶれ補正でぶれで補正しきれなかった周波数成分を電子的手ぶれ補正で補正する構成としたため、外乱や応答遅れの影響を電子的手ぶれ補正でカバーすることができ、補正能力の向上が実現できる。   According to the present embodiment, a high-frequency component of a correction amount for correcting the detected shake of the imaging device by the optical camera shake correction function is corrected by the optical camera shake correction function, and the correction amount and the machine used for the optical camera shake correction are used. The difference from the position of the element is corrected using an electronic image stabilization function. In the case of a configuration in which the detected shake is separated into a high-frequency component and a low-frequency component and is corrected independently by the optical image stabilization function and the electronic image stabilization function, the response delay of driving the mechanical elements used for the optical image stabilization function The position error due to disturbance remains uncorrected. However, according to the configuration of the present embodiment, since the frequency components that could not be corrected by the shake due to the optical shake correction are corrected by the electronic shake correction, the influence of disturbance and response delay is covered by the electronic shake correction. The correction capability can be improved.

●(第2の実施形態)
次に、本発明の第2の実施形態について説明する。第1の実施形態においても、光学式手ぶれ補正機能に用いる機械要素の駆動における応答遅れや外乱による位置制御の精度低下を抑制できた。しかし、歩いたり走ったりしながら撮影した場合に生じるような大きな外乱に起因する精度低下を電子式手ぶれ補正でカバーするのは困難であり、像ぶれが補正しきれないことがある。なお、外乱とは制御を乱す外的な作用であり、本実施形態の光学式手ぶれ補正に対する外乱は、駆動部205が駆動する機械要素(手ぶれ補正レンズなど)の位置を乱すような外力である。
● (Second Embodiment)
Next, a second embodiment of the present invention will be described. Also in the first embodiment, it is possible to suppress a decrease in accuracy of position control due to a response delay or disturbance in driving of a mechanical element used for the optical camera shake correction function. However, it is difficult to cover the deterioration in accuracy caused by a large disturbance that occurs when shooting while walking or running with electronic camera shake correction, and image blur cannot be completely corrected. The disturbance is an external action that disturbs the control, and the disturbance to the optical camera shake correction of the present embodiment is an external force that disturbs the position of a mechanical element (such as a camera shake correction lens) driven by the drive unit 205. .

本実施形態では、外乱に対する光学式手ぶれ補正の耐性を強化することで、大きな外乱が加わった際の補正精度の低下を抑制するための構成を提供する。図3は、本実施形態に係るデジタルカメラの、手ぶれ補正機能に関する機能構成を示したブロック図であり、図2と同じ構成要素には同じ参照数字を付してある。   In the present embodiment, a configuration for suppressing a reduction in correction accuracy when a large disturbance is applied is provided by enhancing the resistance of optical camera shake correction to the disturbance. FIG. 3 is a block diagram showing a functional configuration related to the camera shake correction function of the digital camera according to the present embodiment, and the same reference numerals are assigned to the same components as those in FIG.

本実施形態では外乱の検知を加速度検出部118を用いて行う。デジタルカメラに加わる外乱(外力)には様々あるが、歩き撮りや走り撮りした際には大きな加速度外乱が発生する。この外乱は手ぶれ補正ユニット105(手ぶれ補正レンズ)を移動させ、像揺れとして記録されてしまう。本発明では光学式手ぶれ補正機能で補正しきれなかったぶれ成分は電子式手ぶれ補正機能で補正する構成であるが、電子式手ぶれ補正は画像の切り出し位置を変更することでぶれを補正するため、画像の1フレーム期間内に発生する高周波のぶれは補正できない。また、外乱補償は制御対象を数理モデル化して計算された外乱推力に基づいて行われるが、一般的に実制御対象は非線形要素を含むため、簡易的に線形化された数理モデルに基づく外乱推力を用いて完全に補償することはできない。   In the present embodiment, the disturbance is detected using the acceleration detection unit 118. There are various disturbances (external forces) applied to the digital camera, but a large acceleration disturbance occurs when shooting while walking or running. This disturbance moves as the camera shake correction unit 105 (camera shake correction lens) and is recorded as image shake. In the present invention, the blur component that could not be corrected by the optical camera shake correction function is a configuration that is corrected by the electronic camera shake correction function, but the electronic camera shake correction corrects the camera shake by changing the cutout position of the image. High-frequency blur occurring within one frame period of the image cannot be corrected. Disturbance compensation is performed based on the disturbance thrust calculated by mathematical modeling of the controlled object.However, since the actual controlled object generally includes nonlinear elements, the disturbance thrust based on the mathematical model that has been linearized easily. Cannot be fully compensated for.

そのため、本実施形態では電子式手ぶれ補正による外乱補償と光学式手ぶれ補正による外乱補償とを並列に実施することで、補償効果を高めるものである。図4は、手ぶれ補正ユニット105が有する制御対象の機械要素(手ぶれ補正レンズ)を2次系のバネマスダンパモデルで模式的に表した図である。レンズ可動部の重量をM [kg]、バネ定数をk [N/m]、減衰係数をD [N・s/m]、レンズ駆動変位量をx(t) [m]、レンズに加わる力をu(t) [N]とすると、運動方程式より以下の式が成り立つ。

Figure 0006478504
For this reason, in this embodiment, the compensation effect is enhanced by performing in parallel disturbance compensation by electronic camera shake correction and disturbance compensation by optical camera shake correction. FIG. 4 is a diagram schematically illustrating a mechanical element (camera correction lens) to be controlled included in the camera shake correction unit 105 using a secondary system spring mass damper model. The lens moving part weight is M [kg], the spring constant is k [N / m], the damping coefficient is D [N · s / m], the lens driving displacement is x (t) [m], and the force applied to the lens Let u (t) [N] be the following equation from the equation of motion.
Figure 0006478504

この式をラプラス変換し、制御対象を伝達関数H(s)で表現すると以下のようになる。ただしH(s)は制御対象である手ぶれ補正ユニット105の数理モデルの伝達関数とする。

Figure 0006478504
This formula is Laplace transformed and the controlled object is expressed by the transfer function H (s) as follows. However, H (s) is a transfer function of a mathematical model of the camera shake correction unit 105 to be controlled.
Figure 0006478504

これにより、手ぶれ補正レンズは2次系の制御対象として近似することができる。ここでのレンズに加わる力u(t)は、駆動部205から出力されるレンズ駆動指令信号(駆動電流)によってアクチュエータ等に印加される駆動力r(t) [N]と、加速度外乱などによる外力d [N]の合成であり、以下の式で表される。
u(t)=r(t)+d(t)
Thereby, the camera shake correction lens can be approximated as a control target of the secondary system. The force u (t) applied to the lens here depends on the driving force r (t) [N] applied to the actuator or the like by the lens driving command signal (driving current) output from the driving unit 205, acceleration disturbance, etc. This is a composition of external force d [N] and is expressed by the following equation.
u (t) = r (t) + d (t)

d(t)を加速度外乱に限定すれば、デジタルカメラ100の加速度が検知できれば補償することができる。従って、加速度検出部118を用いて、デジタルカメラ100の加速度を検出する。AD変換部311は加速度検出部118が検出した、アナログ信号で表される加速度をデジタルデータに変換する。   If d (t) is limited to acceleration disturbance, it can be compensated if the acceleration of the digital camera 100 can be detected. Therefore, the acceleration detection unit 118 is used to detect the acceleration of the digital camera 100. The AD conversion unit 311 converts the acceleration represented by the analog signal detected by the acceleration detection unit 118 into digital data.

外乱推力変換部312は検出した加速度を、デジタルカメラ100(手ぶれ補正ユニット105)に加わる外乱推力に変換する。バンドパスフィルタ(BPF)313は、歩き撮りや走り撮りの際に発生する外乱の所定の周波数成分を通過させる特性を有する。BPF313の出力は増幅器314に入力され、外乱補償ゲイン(増幅率)が適用される。外乱補償ゲインは、外乱補償によって過補正が生じないよう、外乱振幅の大きさなど、撮影時の状態に応じて動的に変更してもよい。   The disturbance thrust converting unit 312 converts the detected acceleration into a disturbance thrust applied to the digital camera 100 (camera shake correcting unit 105). The band-pass filter (BPF) 313 has a characteristic of passing a predetermined frequency component of disturbance generated during shooting while walking or running. The output of the BPF 313 is input to the amplifier 314, and a disturbance compensation gain (amplification factor) is applied. The disturbance compensation gain may be dynamically changed according to the state at the time of shooting, such as the magnitude of the disturbance amplitude, so that overcorrection does not occur due to disturbance compensation.

歩き撮りや走り撮りを想定した外乱補償を行う場合、撮像光学系120の画角が所定の第1の画角より大きい場合(広角側)では外乱補償ゲインを基準値より大きくし、第2の画角より小さい場合(望遠側)では外乱補償ゲインを基準値より小さくしてもよい。また、デジタルカメラ100の手ぶれ補正モードとして、撮影画角を狭くする代わりに電子式手ぶれ補正の補正範囲を広げるモードが設定されていれば、外乱補償ゲインを基準値よりも大きくしてもよい。最終的に外乱補償ゲインを適用して求めた外乱推力を、減算器315においてPID制御部204の出力から差し引くことで、外乱を補償した補正(第3の補正)を算出する。これにより、光学式手ぶれ補正が外乱によって受ける影響を補償し、外乱による光学式手ぶれ補正能力の低下を抑制できる。そのため、光学式手ぶれ補正で補正しきれないぶれ成分を電子式手ぶれ補正で補正することが可能になり、全体的な手ぶれ補正能力を向上させることができる。本実施形態において、外乱推力変換部312、BPF313、増幅器314、および減算器315は第2の算出手段を構成する。 When performing disturbance compensation assuming walking shooting and running shooting, when the angle of view of the imaging optical system 120 is larger than the predetermined first angle of view (wide angle side), the disturbance compensation gain is set larger than the reference value, and the second When the angle of view is smaller (telephoto side), the disturbance compensation gain may be smaller than the reference value. Further, as a camera shake correction mode of the digital camera 100, the disturbance compensation gain may be set larger than the reference value if a mode for expanding the correction range of the electronic camera shake correction instead of narrowing the shooting angle of view is set. The disturbance thrust finally obtained by applying the disturbance compensation gain is subtracted from the output of the PID control unit 204 in the subtractor 315, thereby calculating a correction amount (third correction amount ) that compensates for the disturbance. Thereby, it is possible to compensate for the influence of the optical camera shake correction due to the disturbance, and to suppress the decrease in the optical camera shake correction capability due to the disturbance. For this reason, it is possible to correct blur components that cannot be corrected by optical camera shake correction using electronic camera shake correction, and it is possible to improve the overall camera shake correction capability. In the present embodiment, the disturbance thrust conversion unit 312, the BPF 313, the amplifier 314, and the subtractor 315 constitute a second calculation unit.

なお、静止画撮影の場合の動作は第1の実施形態と同様であってよいが、BPF313の位相遅れや位相進みを補償するため、静止画撮影用の露光中のみBPF313の遮断周波数を変更する。また、静止画露光中は電子式手ぶれ補正が使用できないため、動画撮影中には過補正を防止するために外乱補償ゲインを小さくしていた場合であっても、静止画露光開始とともに露光期間中のみ大きい値に変更する。   The operation in the case of still image shooting may be the same as that of the first embodiment, but the cutoff frequency of the BPF 313 is changed only during exposure for still image shooting in order to compensate for the phase lag and phase advance of the BPF 313. . In addition, since electronic image stabilization cannot be used during still image exposure, even when the disturbance compensation gain is reduced to prevent overcorrection during movie shooting, the exposure period will be Only change to a larger value.

このように、本実施形態によれば、第1の実施形態の効果に加え、歩きながら、もしくは走りながら撮影がなされた場合のように大きな外乱が加わる場合においても、良好な手ぶれ補正を実現することができる。   As described above, according to the present embodiment, in addition to the effects of the first embodiment, even when a large disturbance is applied, such as when shooting is performed while walking or running, a favorable camera shake correction is realized. be able to.

●(第3の実施形態)
第2の実施形態においては、加速度検出部118(加速度センサ)を用いて外乱を測定し、外乱補償を行っていた。本実施形態では、加速度検出部118を用いずに外乱補償を実現する構成を提供する。
● (Third embodiment)
In the second embodiment, the disturbance is measured by using the acceleration detection unit 118 (acceleration sensor) to compensate for the disturbance. In the present embodiment, a configuration for realizing disturbance compensation without using the acceleration detection unit 118 is provided.

具体的には、制御対象の数理モデルの逆モデルを用いた外乱オブザーバを用いて推定した加速度を、第2の実施形態における加速度検出部の出力と同様に用いて、外乱補償を行う。   Specifically, the disturbance compensation is performed using the acceleration estimated using the disturbance observer using the inverse model of the mathematical model to be controlled in the same manner as the output of the acceleration detection unit in the second embodiment.

まず、図5を用いて、一般的な外乱オブザーバについて説明する。図5における値は以下の通りである。
・r :制御対象501への入力(外乱を受ける前)。
・x :制御対象501の出力。
・G(s) :制御対象501の伝達関数。
・d :制御対象501に加わる外乱。
・H(s) :理論的に求めた制御対象501の伝達関数。
・e :推定外乱。
First, a general disturbance observer will be described with reference to FIG. The values in FIG. 5 are as follows.
R: Input to the controlled object 501 (before receiving disturbance)
X: Output of the control target 501
G (s): Transfer function of the controlled object 501
D: Disturbance applied to the controlled object 501.
H (s): The transfer function of the controlled object 501 obtained theoretically.
E: Estimated disturbance.

一般的に制御対象が機械的構造をもつ場合、制御対象の伝達関数G(s)は非線形成分を有するので、理論的に求めた伝達関数H(s)をG(s)と一致させることは難しい。このため、G(s)≒H(s)ではあるが、厳密にはG(s)≠H(s)である。制御対象501への入力は、制御部からの入力rと外乱dが加算器503で加算されたものである。制御対象501では、この加算結果に従った出力xが得られる。その出力xを、理論的に求めた制御対象501の伝達関数H(s)の逆モデル502(1/H(s))に入力することによって、制御対象501に実際の入力信号の推定信号が得られる。   In general, when the controlled object has a mechanical structure, the transfer function G (s) of the controlled object has a nonlinear component, so it is not possible to match the theoretically calculated transfer function H (s) with G (s). difficult. Therefore, although G (s) ≈H (s), strictly speaking, G (s) ≠ H (s). The input to the control object 501 is obtained by adding the input r and disturbance d from the control unit by the adder 503. In the control object 501, an output x according to the addition result is obtained. By inputting the output x to the theoretically obtained inverse model 502 (1 / H (s)) of the transfer function H (s) of the controlled object 501, the estimated signal of the actual input signal is input to the controlled object 501. can get.

前述の通り、G(s)≒H(s)であるため、得られる推定信号は実際の入力信号と厳密には一致しないが、外乱の推定には有用である。推定入力信号は、制御部からの入力rと外乱dとの和の推定信号であるため、実際の制御部からの入力信号rを減算器505で減算することで、外乱dの推定信号が得られる。推定された外乱eを、制御部からの入力rが制御対象501に入力される前に減算器504で減算することで、実際の外乱dを補償することができる。図5において、外乱オブザーバは、伝達関数「1/H(s)」を有する逆モデル502および減算器505から構成される。外乱オブザーバの推定精度は、制御対象501の逆モデル502の伝達関数H(s)が制御対象の伝達関数G(s)をどれだけ精度良く近似できるかに大きくに依存する。   As described above, since G (s) ≈H (s), the estimated signal obtained does not exactly match the actual input signal, but is useful for estimating the disturbance. Since the estimated input signal is an estimated signal of the sum of the input r and the disturbance d from the control unit, the estimated signal of the disturbance d is obtained by subtracting the input signal r from the actual control unit by the subtractor 505. It is done. By subtracting the estimated disturbance e by the subtractor 504 before the input r from the control unit is input to the controlled object 501, the actual disturbance d can be compensated. In FIG. 5, the disturbance observer includes an inverse model 502 having a transfer function “1 / H (s)” and a subtracter 505. The estimation accuracy of the disturbance observer greatly depends on how accurately the transfer function H (s) of the inverse model 502 of the control target 501 can approximate the transfer function G (s) of the control target.

図6は、本実施形態に係るデジタルカメラの、手ぶれ補正機能に関する機能構成を示したブロック図であり、図2と同じ構成要素には同じ参照数字を付してある。図6は、図2の構成に対し、外乱オブザーバを追加して外乱補償を実現するものである。   FIG. 6 is a block diagram showing a functional configuration related to the camera shake correction function of the digital camera according to the present embodiment. The same reference numerals are given to the same components as those in FIG. FIG. 6 is a diagram that realizes disturbance compensation by adding a disturbance observer to the configuration of FIG.

駆動部205から出力される駆動信号(電流)によって、手ぶれ補正ユニット105が駆動される。この時、外乱(主に加速度外乱)が、デジタルカメラ100に加わると、制御対象である手ぶれ補正ユニット105の動きに外乱が加わる。制御信号による動きと外乱による動きが加算された手ぶれ補正ユニット105の動きは、位置検出部206により検出される。位置検出部206が出力する位置検出信号は、AD変換部207がデジタルデータに変換し、外乱オブザーバ611、PID制御部204に出力される。   The camera shake correction unit 105 is driven by a drive signal (current) output from the drive unit 205. At this time, when disturbance (mainly acceleration disturbance) is applied to the digital camera 100, the disturbance is added to the movement of the camera shake correction unit 105 that is the control target. The movement of the camera shake correction unit 105 in which the movement by the control signal and the movement by the disturbance are added is detected by the position detection unit 206. The position detection signal output from the position detection unit 206 is converted into digital data by the AD conversion unit 207 and output to the disturbance observer 611 and the PID control unit 204.

外乱オブザーバ611は、図5を用いて説明したように、AD変換された位置検出信号(外乱を反映した手ぶれ補正レンズの位置)と、手ぶれ補正レンズの位置制御に用いられた、推定外乱を除去した補正とから、外乱(加速度)を推定する。推定した外乱は、図3の外乱推力変換部312の出力と同様に、バンドパスフィルタ313および増幅器314を通じて減算器315に入力され、PID制御部204の出力する補正から減算されて外乱が補償される。本実施形態では、外乱オブザーバ611、BPF313、増幅器314、および減算器315が第2の算出手段を構成する。 As described with reference to FIG. 5, the disturbance observer 611 removes an AD-converted position detection signal (position of the camera shake correction lens reflecting the disturbance) and the estimated disturbance used for position control of the camera shake correction lens. The disturbance (acceleration) is estimated from the corrected amount . The estimated disturbance is input to the subtractor 315 through the bandpass filter 313 and the amplifier 314 and is subtracted from the correction amount output from the PID control unit 204 to compensate for the disturbance, similarly to the output of the disturbance thrust conversion unit 312 in FIG. Is done. In the present embodiment, the disturbance observer 611, the BPF 313, the amplifier 314, and the subtractor 315 constitute a second calculation unit.

なお、本実施形態では簡易的に確定システムにより外乱オブザーバによる補償を記述したが、観測ノイズを考慮した最適制御によるカルマンフィルタを用いて外乱を推定してもよい。   In the present embodiment, the compensation by the disturbance observer is described simply by a deterministic system. However, the disturbance may be estimated by using a Kalman filter by optimal control considering observation noise.

本実施形態によれば、加速度センサを有さない構成であっても、外乱を考慮した手ぶれ補正処理が可能であり、大きな外乱が加わった場合について、第1の実施形態よりも良好な補正効果が実現できる。   According to the present embodiment, even if the configuration does not include an acceleration sensor, it is possible to perform camera shake correction processing in consideration of disturbance, and in the case where a large disturbance is applied, a better correction effect than in the first embodiment. Can be realized.

(その他の実施形態)
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(またはCPUやMPU等)がプログラムを読み出して実行する処理である。
(Other embodiments)
The present invention can also be realized by executing the following processing. That is, software (program) that realizes the functions of the above-described embodiments is supplied to a system or apparatus via a network or various storage media, and a computer (or CPU, MPU, etc.) of the system or apparatus reads the program. It is a process to be executed.

105…補正レンズユニット,106…防振制御部,109…撮像部,110…撮像信号処理部,113…電源部,112…表示部,115…操作部,117…角速度検出部,118…加速度検出部,119…システム制御部 DESCRIPTION OF SYMBOLS 105 ... Correction lens unit, 106 ... Anti-vibration control part, 109 ... Imaging part, 110 ... Imaging signal processing part, 113 ... Power supply part, 112 ... Display part, 115 ... Operation part, 117 ... Angular velocity detection part, 118 ... Acceleration detection Part, 119 ... system control part

Claims (7)

撮像装置であって、
装置の動きによる像ぶれを補正するための第1の補正量を算出する第1の算出手段と、
前記第1の補正量のうち予め定められた高周波成分に基づいて機械要素を駆動することにより、光学的に像ぶれを補正する第1の補正手段と、
前記第1の補正量と前記機械要素の位置との差に基づいて得られる第2の補正量に基づいて画像の切り出し位置を変更することにより、電子的に像ぶれを補正する第2の補正手段と、
前記第1の補正量の前記高周波成分を、前記撮像装置に加わる外乱に応じて補正した第3の補正量を算出する第2の算出手段と、
前記撮像装置の加速度を検出する検出手段と、を有し、
前記第1の補正手段は、前記第3の補正量に基づいて前記機械要素を駆動し、
前記第2の算出手段が、
前記加速度を外乱推力に変換する変換手段と、
前記外乱推力にゲインを適用する増幅手段と、を有し、
前記ゲインを適用した前記外乱推力を用いて前記第1の補正量の前記高周波成分を補正して前記第3の補正量を算出し、
前記撮像装置の撮像光学系の画角が所定の第1の画角より大きい場合には前記ゲインを基準値より大きくし、前記第1の画角より小さい第2の画角より小さい場合には前記ゲインを前記基準値より小さくする、
ことを特徴とする撮像装置。
An imaging device,
First calculating means for calculating a first correction amount for correcting image blur due to movement of the apparatus;
First correction means for optically correcting image blur by driving a mechanical element based on a predetermined high-frequency component of the first correction amount;
A second correction that electronically corrects image blur by changing the cutout position of the image based on a second correction amount obtained based on the difference between the first correction amount and the position of the machine element. Means,
Second calculation means for calculating a third correction amount obtained by correcting the high-frequency component of the first correction amount according to a disturbance applied to the imaging device;
Detecting means for detecting acceleration of the imaging device;
The first correction means drives the mechanical element based on the third correction amount,
The second calculating means comprises:
Conversion means for converting the acceleration into a disturbance thrust;
Amplifying means for applying a gain to the disturbance thrust,
Calculating the third correction amount by correcting the high-frequency component of the first correction amount using the disturbance thrust applied with the gain;
When the angle of view of the image pickup optical system of the image pickup device is larger than the predetermined first angle of view, the gain is set larger than a reference value, and when the angle of view is smaller than the second angle of view smaller than the first angle of view. Making the gain smaller than the reference value;
An imaging apparatus characterized by that.
撮像装置であって、  An imaging device comprising:
装置の動きによる像ぶれを補正するための第1の補正量を算出する第1の算出手段と、  First calculating means for calculating a first correction amount for correcting image blur due to movement of the apparatus;
前記第1の補正量のうち予め定められた高周波成分に基づいて機械要素を駆動することにより、光学的に像ぶれを補正する第1の補正手段と、  First correction means for optically correcting image blur by driving a mechanical element based on a predetermined high-frequency component of the first correction amount;
前記第1の補正量と前記機械要素の位置との差に基づいて得られる第2の補正量に基づいて画像の切り出し位置を変更することにより、電子的に像ぶれを補正する第2の補正手段と、  A second correction that electronically corrects image blur by changing the cutout position of the image based on a second correction amount obtained based on the difference between the first correction amount and the position of the machine element. Means,
前記第1の補正量の前記高周波成分を、前記撮像装置に加わる外乱に応じて補正した第3の補正量を算出する第2の算出手段と、を有し、  Second calculating means for calculating a third correction amount obtained by correcting the high-frequency component of the first correction amount according to a disturbance applied to the imaging device;
前記第1の補正手段は、前記第3の補正量に基づいて前記機械要素を駆動し、  The first correction means drives the mechanical element based on the third correction amount,
前記第2の算出手段が、  The second calculating means comprises:
前記第3の補正量と前記機械要素の位置とから推定される加速度を外乱推力に変換する変換手段と、    Conversion means for converting acceleration estimated from the third correction amount and the position of the machine element into disturbance thrust;
前記外乱推力にゲインを適用する増幅手段と、を有し、    Amplifying means for applying a gain to the disturbance thrust,
前記ゲインを適用した前記外乱推力を用いて前記第1の補正量の前記高周波成分を補正して前記第3の補正量を算出し、    Calculating the third correction amount by correcting the high-frequency component of the first correction amount using the disturbance thrust applied with the gain;
前記撮像装置の撮像光学系の画角が所定の第1の画角より大きい場合には前記ゲインを基準値より大きくし、前記第1の画角より小さい第2の画角より小さい場合には前記ゲインを前記基準値より小さくする、    When the angle of view of the image pickup optical system of the image pickup device is larger than the predetermined first angle of view, the gain is set larger than a reference value, and when the angle of view is smaller than the second angle of view smaller than the first angle of view. Making the gain smaller than the reference value;
ことを特徴とする撮像装置。An imaging apparatus characterized by that.
前記第2の算出手段は、前記第2の補正手段の補正範囲を広げる設定がされている場合には、前記ゲインを前記基準値より大きくすることを特徴とする請求項1または2に記載の撮像装置。 Said second calculation means, said second if the setting to widen the correction range of the correction means is the according to the gain in claim 1 or 2, characterized in that greater than the reference value Imaging device. 前記第2の算出手段は、静止画露光中は動画撮影中よりも前記ゲインを大きくすることを特徴とする請求項1から3のいずれか1項に記載の撮像装置。 Said second calculating means, the image pickup apparatus according to any one of in the still image exposure of the gain than in the movie shooting claim 1, characterized in that the greatly 3. 前記第1の算出手段が出力する前記第1の補正量の低周波成分を除去することにより前記高周波成分を抽出し、前記第1の補正手段に供給するフィルタ手段をさらに有することを特徴とする請求項1からのいずれか1項に記載の撮像装置。 The apparatus further includes a filter unit that extracts the high-frequency component by removing the low-frequency component of the first correction amount output from the first calculation unit and supplies the high-frequency component to the first correction unit. The imaging device according to any one of claims 1 to 4 . 撮像装置の第1の算出手段が、装置の動きによる像ぶれを補正するための第1の補正量を算出する第1の算出工程と、
前記撮像装置の第1の補正手段が、前記第1の補正量のうち予め定められた高周波成分に基づいて機械要素を駆動することにより、光学的に像ぶれを補正する第1の補正工程と、
前記撮像装置の第2の補正手段が、前記第1の補正量と前記機械要素の位置との差に基づいて得られる第2の補正量に基づいて画像の切り出し位置を変更することにより、電子的に像ぶれを補正する第2の補正工程と、
前記撮像装置の第2の算出手段が、前記第1の補正量の前記高周波成分を、前記撮像装置に加わる外乱に応じて補正した第3の補正量を算出する第2の算出工程と、
前記撮像装置の検出手段が、前記撮像装置の加速度を検出する検出工程と、を有し、
前記第1の補正工程において前記第1の補正手段は、前記第3の補正量に基づいて前記機械要素を駆動し、
前記第2の算出工程が、
前記撮像装置の変換手段が、前記加速度を外乱推力に変換する変換工程と、
前記撮像装置の増幅手段が、前記外乱推力にゲインを適用する増幅工程と、を有し、
前記第2の算出工程において前記第2の補正手段は、
前記ゲインを適用した前記外乱推力を用いて前記第1の補正量の前記高周波成分を補正して前記第3の補正量を算出し、
前記撮像装置の撮像光学系の画角が所定の第1の画角より大きい場合には前記ゲインを基準値より大きくし、前記第1の画角より小さい第2の画角より小さい場合には前記ゲインを前記基準値より小さくする、
ことを特徴とする撮像装置の制御方法。
A first calculation step in which a first calculation unit of the imaging apparatus calculates a first correction amount for correcting image blur due to movement of the apparatus;
A first correction step in which a first correction unit of the imaging apparatus optically corrects image blur by driving a mechanical element based on a predetermined high-frequency component of the first correction amount; ,
By the second correcting means of the image pickup apparatus changes the cutout position of the image based on the second correction amount obtained based on the difference between the position of the machine element and the first correction amount, the electronic A second correction step for correcting image blur automatically,
A second calculation step in which a second calculation unit of the imaging device calculates a third correction amount obtained by correcting the high-frequency component of the first correction amount according to a disturbance applied to the imaging device;
A detecting step for detecting the acceleration of the imaging device, wherein the detection means of the imaging device comprises:
In the first correction step, the first correction means drives the mechanical element based on the third correction amount,
The second calculation step includes:
A converting step in which the converting means of the imaging device converts the acceleration into a disturbance thrust;
An amplification step of applying gain to the disturbance thrust, the amplification means of the imaging device,
In the second calculation step, the second correction unit includes:
Calculating the third correction amount by correcting the high-frequency component of the first correction amount using the disturbance thrust applied with the gain;
When the angle of view of the image pickup optical system of the image pickup device is larger than the predetermined first angle of view, the gain is set larger than a reference value, and when the angle of view is smaller than the second angle of view smaller than the first angle of view. Making the gain smaller than the reference value;
And a method of controlling the imaging apparatus.
撮像装置の第1の算出手段が、装置の動きによる像ぶれを補正するための第1の補正量を算出する第1の算出工程と、  A first calculation step in which a first calculation unit of the imaging apparatus calculates a first correction amount for correcting image blur due to movement of the apparatus;
前記撮像装置の第1の補正手段が、前記第1の補正量のうち予め定められた高周波成分に基づいて機械要素を駆動することにより、光学的に像ぶれを補正する第1の補正工程と、  A first correction step in which a first correction unit of the imaging apparatus optically corrects image blur by driving a mechanical element based on a predetermined high-frequency component of the first correction amount; ,
前記撮像装置の第2の補正手段が、前記第1の補正量と前記機械要素の位置との差に基づいて得られる第2の補正量に基づいて画像の切り出し位置を変更することにより、電子的に像ぶれを補正する第2の補正工程と、  The second correction unit of the imaging apparatus changes the cutout position of the image based on the second correction amount obtained based on the difference between the first correction amount and the position of the mechanical element, thereby A second correction step for correcting image blur automatically,
前記撮像装置の第2の算出手段が、前記第1の補正量の前記高周波成分を、前記撮像装置に加わる外乱に応じて補正した第3の補正量を算出する第2の算出工程と、を有し、  A second calculation step in which a second calculation unit of the imaging device calculates a third correction amount obtained by correcting the high-frequency component of the first correction amount according to a disturbance applied to the imaging device; Have
前記第1の補正工程において前記第1の補正手段は、前記第3の補正量に基づいて前記機械要素を駆動し、  In the first correction step, the first correction means drives the mechanical element based on the third correction amount,
前記第2の算出工程が、  The second calculation step includes:
前記撮像装置の変換手段が、前記第3の補正量と前記機械要素の位置とから推定される加速度を外乱推力に変換する変換工程と、    A conversion step in which the conversion means of the imaging apparatus converts the acceleration estimated from the third correction amount and the position of the mechanical element into a disturbance thrust;
前記撮像装置の増幅手段が、前記外乱推力にゲインを適用する増幅工程と、を有し、    An amplification step of applying gain to the disturbance thrust, the amplification means of the imaging device,
前記第2の算出工程において前記第2の補正手段は、  In the second calculation step, the second correction unit includes:
前記ゲインを適用した前記外乱推力を用いて前記第1の補正量の前記高周波成分を補正して前記第3の補正量を算出し、    Calculating the third correction amount by correcting the high-frequency component of the first correction amount using the disturbance thrust applied with the gain;
前記撮像装置の撮像光学系の画角が所定の第1の画角より大きい場合には前記ゲインを基準値より大きくし、前記第1の画角より小さい第2の画角より小さい場合には前記ゲインを前記基準値より小さくする、    When the angle of view of the image pickup optical system of the image pickup device is larger than the predetermined first angle of view, the gain is set larger than a reference value, and when the angle of view is smaller than the second angle of view smaller than the first angle of view. Making the gain smaller than the reference value;
ことを特徴とする撮像装置の制御方法。And a method of controlling the imaging apparatus.
JP2014146300A 2014-07-16 2014-07-16 Imaging apparatus and control method thereof Expired - Fee Related JP6478504B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014146300A JP6478504B2 (en) 2014-07-16 2014-07-16 Imaging apparatus and control method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014146300A JP6478504B2 (en) 2014-07-16 2014-07-16 Imaging apparatus and control method thereof

Publications (3)

Publication Number Publication Date
JP2016024235A JP2016024235A (en) 2016-02-08
JP2016024235A5 JP2016024235A5 (en) 2017-08-31
JP6478504B2 true JP6478504B2 (en) 2019-03-06

Family

ID=55271047

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014146300A Expired - Fee Related JP6478504B2 (en) 2014-07-16 2014-07-16 Imaging apparatus and control method thereof

Country Status (1)

Country Link
JP (1) JP6478504B2 (en)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6614810B2 (en) * 2015-05-29 2019-12-04 キヤノン株式会社 Blur correction device, imaging device, and blur correction method
US20170331998A1 (en) * 2016-05-11 2017-11-16 Htc Corporation Camera device, method for camera device, and non-transitory computer readable storage medium
JP7166920B2 (en) * 2016-08-05 2022-11-08 ソニーグループ株式会社 IMAGING DEVICE, SOLID-STATE IMAGE SENSOR, CAMERA MODULE, AND IMAGING METHOD
KR102608782B1 (en) 2016-12-30 2023-12-04 삼성전자주식회사 Device and Method for Compensating Motion Effect of an Electronic Device in an Image
JP2019135818A (en) * 2018-02-05 2019-08-15 ソニーセミコンダクタソリューションズ株式会社 Imaging apparatus, solid-state imaging device, camera module, drive control section, and imaging method
CN113170038B (en) 2018-11-29 2023-06-13 富士胶片株式会社 Jitter correction control device, method for operating jitter correction control device, storage medium, and image pickup device
WO2020111177A1 (en) 2018-11-29 2020-06-04 富士フイルム株式会社 Shake correction control device, imaging device, shake correction method for imaging device, and program
CN113170040B (en) 2018-11-29 2023-08-08 富士胶片株式会社 Jitter correction control device, method for operating jitter correction control device, storage medium, and image pickup device
JP7152588B2 (en) 2019-02-20 2022-10-12 富士フイルム株式会社 Image stabilization device, imaging device, monitoring system, and program
CN115131222A (en) * 2021-03-29 2022-09-30 华为技术有限公司 Image processing method and related equipment

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2803072B2 (en) * 1990-10-18 1998-09-24 富士写真フイルム株式会社 Image stabilization device
JPH07177418A (en) * 1993-12-20 1995-07-14 Canon Inc Image blur preventing device
JP2006074402A (en) * 2004-09-01 2006-03-16 Sony Corp Imaging apparatus
JP4518197B2 (en) * 2008-06-20 2010-08-04 ソニー株式会社 Imaging apparatus, image blur correction method, and program
KR101575626B1 (en) * 2008-11-26 2015-12-08 삼성전자주식회사 Digital camera and controlling method thereof
JP5003769B2 (en) * 2010-01-18 2012-08-15 株式会社Jvcケンウッド Imaging apparatus and image shake correction method
JP5778998B2 (en) * 2010-06-04 2015-09-16 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America Imaging apparatus, image generation method, and computer program
JP5868042B2 (en) * 2011-07-01 2016-02-24 キヤノン株式会社 Anti-shake control device, imaging device, and control method for anti-shake control device
JP5984467B2 (en) * 2012-04-09 2016-09-06 キヤノン株式会社 Image blur correction device, optical apparatus, imaging device, and image blur correction device control method
JP6004785B2 (en) * 2012-06-29 2016-10-12 キヤノン株式会社 Imaging apparatus, optical apparatus, imaging system, and control method
JP6097521B2 (en) * 2012-10-22 2017-03-15 キヤノン株式会社 Image blur correction apparatus, image blur correction method, and imaging apparatus

Also Published As

Publication number Publication date
JP2016024235A (en) 2016-02-08

Similar Documents

Publication Publication Date Title
JP6478504B2 (en) Imaging apparatus and control method thereof
JP6335058B2 (en) Imaging apparatus and imaging method
JP6214316B2 (en) Image blur correction device, lens device, imaging device, image blur correction device control method, program, and storage medium
JP6074298B2 (en) Imaging apparatus, image processing apparatus, and control method thereof
JP6124588B2 (en) Image blur correction apparatus, control method therefor, program, and storage medium
JP6150655B2 (en) Image shake correction apparatus and control method therefor, lens barrel, optical apparatus, and imaging apparatus
JP6530602B2 (en) Image pickup apparatus and control method thereof
JP7277513B2 (en) a lens device, a lens device control method, and a lens device control program;
JP6257207B2 (en) Image shake correction apparatus and control method therefor, lens barrel, and imaging apparatus
KR100987590B1 (en) Hand-shake correcting control method and image pickup apparatus thereof
US9626743B2 (en) Image stabilization apparatus, method of controlling the same, image capturing apparatus, lens apparatus, and storage medium
JP6423658B2 (en) Imaging apparatus, control method therefor, program, and storage medium
JP6302341B2 (en) Imaging apparatus, control method therefor, program, and storage medium
JP5930684B2 (en) Information processing apparatus and method, and program
JP6108940B2 (en) Image blur correction apparatus, control method therefor, program, and storage medium
JP2019145958A (en) Imaging apparatus, control method of the same, and program
JP6429500B2 (en) Optical apparatus, interchangeable lens, and image blur correction method
US9811891B2 (en) Image shake correction device, optical apparatus, imaging apparatus, and control method
JP6525800B2 (en) Image blurring correction apparatus, control method therefor, and imaging apparatus
JP2018072540A (en) Image processing device, image processing method, and optical apparatus
JP7071204B2 (en) Imaging system, lens device, imaging device, and its control method
JP2015049401A (en) Imaging device and control method of the same
JP2019124928A (en) Image blur correction device, interchangeable lens, camera body, image blur correction method, and program
JP2019145956A (en) Imaging apparatus, control method of the same, and program
JP2019125890A (en) Image shake correction device, camera body, image shake correction method, and program

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170714

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170714

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180523

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180601

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180725

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190108

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190205

R151 Written notification of patent or utility model registration

Ref document number: 6478504

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

LAPS Cancellation because of no payment of annual fees