JPH11146260A - Device and method for correcting oscillation and computer readable storage medium - Google Patents

Device and method for correcting oscillation and computer readable storage medium

Info

Publication number
JPH11146260A
JPH11146260A JP9311693A JP31169397A JPH11146260A JP H11146260 A JPH11146260 A JP H11146260A JP 9311693 A JP9311693 A JP 9311693A JP 31169397 A JP31169397 A JP 31169397A JP H11146260 A JPH11146260 A JP H11146260A
Authority
JP
Japan
Prior art keywords
image
shake
movement
detecting
image signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP9311693A
Other languages
Japanese (ja)
Inventor
Toshimichi Kudo
利道 工藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP9311693A priority Critical patent/JPH11146260A/en
Publication of JPH11146260A publication Critical patent/JPH11146260A/en
Pending legal-status Critical Current

Links

Landscapes

  • Adjustment Of Camera Lenses (AREA)
  • Studio Devices (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide an oscillation corrector which can remove the oscillation of a low frequency with high accuracy. SOLUTION: An angular velocity sensor 101 detects the shake of a camera having a solid-state imaging device 110 and by controlling a VAP unit 107 corresponding to the detected shake, the oscillation is optically corrected. On the other hand, an image signal picked-up by the solid-state imaging device 110 is stored in a field memory circuit 113, and the motion of an image is detected by an image motion detecting circuit 116. A field memory control circuit 117 controls the read of the field memory circuit 117 corresponding to the detected motion and a zoom magnification designated from a system control part 118 so as to perform the electronic oscillation correction and electronic zooming.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、ビデオカメラ等に
用いて好適な手振れ、振動等の振れ補正をする振れ補正
装置、振れ補正方法及びコンピュータ読み取り可能な記
憶媒体に関するものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a shake correction apparatus, a shake correction method, and a computer-readable storage medium suitable for use in a video camera or the like for correcting shake such as camera shake and vibration.

【0002】[0002]

【従来の技術】小型のビデオカメラ等では、手振れや振
動により被写体像がぶれてしまい、みづらい映像となっ
てしまうことがよくある。最近では高倍率のレンズが採
用されており、特にテレ側の時はぶれが大きく目立つ。
この手振れ等の振れ補正をするための光学式や電子式の
振れ補正装置が従来より数多く提案され、製品化されて
いる。
2. Description of the Related Art In a small video camera or the like, an image of a subject is often blurred due to camera shake or vibration, resulting in an image which is difficult to see. Recently, high-power lenses have been employed, and blurring is noticeable especially on the telephoto side.
Many optical and electronic image stabilizing devices for correcting such camera shake have been proposed and commercialized.

【0003】光学式による振れ補正装置として、振れ検
出手段に角速度センサを用いると共に、画像補正手段に
可変頂角プリズム(以下VAP:Variable Angle Prisu
m と呼ぶ)を用いた例がある。この例では、上記角速度
センサの信号をフィルタリングする際、まず直流遮断フ
ィルタにより直流成分を遮断し、手ぶれ補正をするのに
必要なだけ増幅した後、必要な信号処理をすることによ
り上記VAPの頂角の目標値を得、この目標値に応じて
VAPの頂角を可変させることにより、振れ補正を行う
ようにしている。
As an optical shake correction device, an angular velocity sensor is used for shake detection means, and a variable angle prism (VAP) is used for image correction means.
m). In this example, when filtering the signal of the angular velocity sensor, first, a DC component is cut off by a DC cutoff filter, and the signal is amplified as much as necessary for camera shake correction. The shake correction is performed by obtaining a target value of the angle and varying the apex angle of the VAP according to the target value.

【0004】また電子式振れ補正装置は、撮像した画像
の動きを検出し、この動きに応じて画像メモリの読み出
しを制御するものであり、一般に光学式に比べて低周波
特性に優れている。
An electronic image stabilizer corrects the movement of a picked-up image and controls reading of an image memory in accordance with the movement. Generally, the electronic image stabilizer has excellent low frequency characteristics as compared with the optical type.

【0005】[0005]

【発明が解決しようとする課題】上記従来例の光学式振
れ補正装置では、角速度センサの特性上、低域周波数の
感度が低いという欠点があった。現在の光学系技術の進
歩はめざましく、ズームレンズの高倍率化が進んでお
り、さらに光学テレ端を介して入力された画像を切り出
して電子的に拡大する電子ズーム領域では、角速度セン
サの低域周波数の感度が低いことにより、低域周波数帯
の振れ補正の精度が問題となっていた。
The above-mentioned conventional optical shake correcting apparatus has a drawback that the sensitivity at low frequencies is low due to the characteristics of the angular velocity sensor. The progress of the current optical system technology is remarkable, the magnification of the zoom lens is increasing, and furthermore, in the electronic zoom area where the image input through the optical tele end is cut out and electronically enlarged, the low frequency range of the angular velocity sensor Due to the low frequency sensitivity, accuracy of shake correction in a low frequency band has been a problem.

【0006】本発明は上記の問題を解決するためになさ
れたもので、低域周波数帯の振れを高精度に除去できる
振れ補正装置を得ることを目的とする。
SUMMARY OF THE INVENTION The present invention has been made to solve the above-mentioned problem, and has as its object to provide a shake correcting apparatus capable of removing a shake in a low frequency band with high accuracy.

【0007】[0007]

【課題を解決するための手段】本発明による振れ補正装
置においては、撮像手段から入力される画像信号を記憶
する記憶手段と、振れを検出する振れ検出手段と、上記
検出された振れに応じて上記撮像手段に対する被写体像
の振れを光学的に補正する光学補正手段と、上記画像信
号の動きを検出する動き検出手段と、指定されたズーム
倍率に応じて上記記憶手段からの画像信号の読み出し範
囲の大きさを制御すると共に、上記検出された動きに応
じて上記読み出し範囲の位置を制御する制御手段とを設
けている。
In a shake correcting apparatus according to the present invention, a storage means for storing an image signal input from an image pickup means, a shake detecting means for detecting a shake, and a shake detecting means for detecting the shake. An optical correction unit for optically correcting a shake of a subject image with respect to the imaging unit; a movement detection unit for detecting a movement of the image signal; and a reading range of the image signal from the storage unit according to a designated zoom magnification And control means for controlling the position of the readout range in accordance with the detected movement.

【0008】本発明による振れ補正方法においては、撮
像手段から入力される画像信号を記憶手段に記憶する手
順と、振れを検出する手順と、上記検出された振れに応
じて上記撮像手段に対する被写体像の振れを光学的に補
正する手順と、上記画像信号の動きを検出する手順と、
指定されたズーム倍率に応じて上記記憶手段からの画像
信号の読み出し範囲の大きさを制御すると共に、上記検
出された動きに応じて上記読み出し範囲の位置を制御す
る手順とを設けている。
In the shake correcting method according to the present invention, a procedure for storing an image signal input from the imaging means in the storage means, a procedure for detecting the shake, and an object image for the imaging means in accordance with the detected shake. Optically correcting the shake of the image, detecting the motion of the image signal,
Controlling the size of the read range of the image signal from the storage means in accordance with the designated zoom magnification, and controlling the position of the read range in accordance with the detected movement.

【0009】本発明によるコンピュータ読み取り可能な
記憶媒体においては、撮像手段から入力される画像信号
を記憶手段に記憶する処理と、振れを検出する処理と、
上記検出された振れに応じて上記撮像手段に対する被写
体像の振れを光学的に補正する処理と、上記画像信号の
動きを検出する処理と、指定されたズーム倍率に応じて
上記記憶手段からの画像信号の読み出し範囲の大きさを
制御すると共に、上記検出された動きに応じて上記読み
出し範囲の位置を制御する処理とを実行するためのプロ
グラムを記憶している。
In a computer-readable storage medium according to the present invention, a process of storing an image signal input from an imaging unit in a storage unit, a process of detecting a shake,
A process of optically correcting the shake of the subject image with respect to the imaging unit in accordance with the detected shake, a process of detecting the movement of the image signal, and an image from the storage unit in accordance with a specified zoom magnification A program for controlling the size of the signal readout range and controlling the position of the readout range in accordance with the detected movement is stored.

【0010】本発明による他の振れ補正装置において
は、振れによる画像の動きを光学的に補正する光学補正
手段と、振れによる画像の動きを電子的に補正する電子
補正手段と、画像を電子的に拡大する電子ズーム手段
と、上記電子ズーム手段の非動作時は、上記光学補正手
段によって画像の動きを補正し、上記電子ズーム手段の
動作時は、上記光学補正手段と上記電子補正手段の両方
を動作させて画像の動きを補正する制御手段とを設けて
いる。
In another shake correction apparatus according to the present invention, an optical correction means for optically correcting the movement of an image due to a shake, an electronic correction means for electronically correcting the movement of an image due to a shake, and When the electronic zoom unit is not operating, the motion of the image is corrected by the optical correction unit. When the electronic zoom unit is operating, both the optical correction unit and the electronic correction unit are used. And control means for correcting the movement of the image by operating the.

【0011】本発明による更に他の振れ補正装置におい
ては、振れを物理的に検出する振れ検出手段と、振れに
よる画像の動きを画像信号の時間的変化から検出する動
き検出手段と、振れによる画像の動きを光学的に補正す
る光学補正手段と、振れによる画像の動きを電子的に補
正する電子補正手段と、上記振れ検出手段の出力に基づ
いて上記光学補正手段を動作させ、上記動き検出手段の
出力に基づいて上記電子補正手段を動作させる制御手段
とを設けている。
In another shake correcting apparatus according to the present invention, shake detecting means for physically detecting a shake, motion detecting means for detecting a movement of an image due to the shake from a temporal change of an image signal, and an image based on the shake Optical correction means for optically correcting the motion of the image, electronic correction means for electronically correcting the motion of the image due to shake, and operating the optical correction means based on the output of the shake detection means, And control means for operating the electronic correction means based on the output of.

【0012】[0012]

【発明の実施の形態】以下、本発明の実施の形態を図面
と共に説明する。まず、本実施の形態で用いられる光学
補正手段としてのVAPについて図2と共に説明する。
図2に示すようにVAPは、対向した2枚のガラス板2
1、22と、この2枚のガラス板21、22をつなぐ蛇
腹23、24と、2枚のガラス板21、22と蛇腹2
3、24とで密閉される空間を満たす高屈折率液体25
とにより構成される。ガラス板21、22には、互いに
直交する回転軸26、27がそれぞれ設けられている。
Embodiments of the present invention will be described below with reference to the drawings. First, a VAP as an optical correction unit used in the present embodiment will be described with reference to FIG.
As shown in FIG. 2, the VAP is composed of two glass plates 2 facing each other.
1, 22; bellows 23, 24 connecting these two glass plates 21, 22; two glass plates 21, 22 and bellows 2
High refractive index liquid 25 filling space enclosed by 3 and 24
It is composed of The glass plates 21 and 22 are provided with rotating shafts 26 and 27 orthogonal to each other.

【0013】図2において、一方のガラス板21を回転
軸26を中心にσだけ回転させたときの入射光束28は
楔形プリズムと同じ原理によりφだけ偏向する。同じよ
うにもう一方のガラス板22は、回転軸27を中心に回
転し入射光束28を偏向させることができる。このよう
に、2枚のガラス板21、22を同時に制御することに
より、被写体像のぶれを除去することができる。
In FIG. 2, the incident light beam 28 when one glass plate 21 is rotated by σ around the rotation axis 26 is deflected by φ according to the same principle as the wedge prism. Similarly, the other glass plate 22 can rotate about the rotation axis 27 to deflect the incident light beam 28. In this way, by controlling the two glass plates 21 and 22 simultaneously, it is possible to remove the blur of the subject image.

【0014】次に本発明の実施の形態による上記VAP
を用いた手振れ補正装置について図1と共に説明する。
なお、本手振れ補正装置においては、図1の構成の内1
01から106、108、109、118の各ブロック
がピッチ(縦)方向、ヨー(横)方向に独立して2系統
を持つものとして、ここでは1系統のみ図示している。
Next, the VAP according to the embodiment of the present invention will be described.
A camera shake correction device using the method will be described with reference to FIG.
In addition, in this camera shake correction apparatus, one of the configurations shown in FIG.
Each block from 01 to 106, 108, 109, and 118 has two independent systems in the pitch (vertical) direction and the yaw (horizontal) direction, and only one system is illustrated here.

【0015】図1において、撮像部の振れを検出する振
れ検出手段としての角速度センサ101の出力を、DC
カットフィルタ102によって直流成分をカットして振
れ成分のみを抽出した後、アンプ103で必要なだけ増
幅する。この増幅された信号からVAP頂角の目標値を
生成するのに必要な信号処理を信号処理回路104で行
う。すなわち、振れ成分を相殺するのに必要なVAPの
駆動量が演算される。
In FIG. 1, an output of an angular velocity sensor 101 as a shake detecting means for detecting a shake of an image pickup unit is represented by a DC signal.
After the DC component is cut by the cut filter 102 to extract only the shake component, the amplifier 103 amplifies as much as necessary. The signal processing circuit 104 performs signal processing necessary to generate a target value of the VAP apex angle from the amplified signal. That is, the driving amount of the VAP required to cancel the shake component is calculated.

【0016】また、VAPユニット107には頂角を検
出する頂角センサ109があり、実際のVAPの駆動
量、すなわち傾き量を検出できる。そして、その出力を
アンプ108で必要なだけ増幅する。次に、減算器11
9で信号処理回路104とアンプ108の各出力の差を
取り、これを制御量として駆動回路105に出力する。
これにより駆動回路105が、VAPユニット107内
のVAPの頂角を可変させるアクチュエータ106を駆
動する。この一連の動作により、光学的に振れを補正す
る。
The VAP unit 107 has an apex angle sensor 109 for detecting an apex angle, and can detect an actual VAP drive amount, that is, an inclination amount. Then, the output is amplified by the amplifier 108 as needed. Next, the subtractor 11
In step 9, the difference between each output of the signal processing circuit 104 and the output of the amplifier 108 is obtained, and the difference is output to the drive circuit 105 as a control amount.
As a result, the drive circuit 105 drives the actuator 106 in the VAP unit 107 that changes the apex angle of VAP. With this series of operations, the shake is optically corrected.

【0017】また、システム制御部118は、手ぶれ補
正のON/OFF、パンニング時(撮影者が意図的にパ
ン又はチルトをしていると判断したとき)の制御、又は
三脚等の安定した場所に設置された時の制御のために信
号処理回路104の信号処理を最適化すべく、これを制
御する。なお、信号処理回路104はソフトウェアでも
良い。
The system control unit 118 controls ON / OFF of camera shake correction, control during panning (when it is determined that the photographer is intentionally panning or tilting), or in a stable place such as a tripod. This is controlled in order to optimize the signal processing of the signal processing circuit 104 for the control at the time of installation. Note that the signal processing circuit 104 may be software.

【0018】一方、固体撮像素子110は、光学系を介
した被写体像を電気信号(以下、画像信号と呼ぶ)に変
換する。この画像信号をアナログ信号処理回路111に
より信号処理を行い、さらにA/D変換回路112によ
りディジタル信号に変換する。このディジタル信号に変
換された画像信号をフィールドメモリ回路113に記憶
する。また、ディジタル信号に変換された上記画像信号
は動き検出手段としての画像動き検出回路116にも送
られ、ここでフィールド間又はフレーム間の画像の動き
を検出する。
On the other hand, the solid-state imaging device 110 converts a subject image via an optical system into an electric signal (hereinafter, referred to as an image signal). This image signal is subjected to signal processing by an analog signal processing circuit 111 and further converted to a digital signal by an A / D conversion circuit 112. The image signal converted to the digital signal is stored in the field memory circuit 113. The image signal converted into a digital signal is also sent to an image motion detection circuit 116 as motion detection means, where the motion of the image between fields or between frames is detected.

【0019】フィールドメモリ制御回路117は、シス
テム制御部118から電子ズーム(画像の電子的拡大)
処理の命令が来たとき、その命令の倍率に応じて画像を
拡大するようにフィールドメモリ回路113の読み出し
を制御する。この時、フィールドメモリ回路113に記
憶された画像から、フィールドメモリ制御回路117に
より読み出される画像を引いた残りの領域内で、読み出
す位置を検出された画像の動きを打ち消すように移動さ
せて電子的な振れ補正を行うことができる。
The field memory control circuit 117 receives an electronic zoom (electronic enlargement of an image) from the system control unit 118.
When a processing instruction is received, the reading of the field memory circuit 113 is controlled so that the image is enlarged according to the magnification of the instruction. At this time, in the remaining area obtained by subtracting the image read by the field memory control circuit 117 from the image stored in the field memory circuit 113, the read position is moved so as to cancel the motion of the detected image, and the electronic It is possible to perform an accurate shake correction.

【0020】この移動可能な範囲内で、システム制御部
118から振れ補正ONの命令が来ているとき、画像動
き検出回路116からの信号に応じてフィールドメモリ
制御回路117により読み出すアドレスを移動すること
により、電子式の振れ補正を行う。フィールドメモリ回
路113から読み出された画像はディジタル信号処理回
路114により放送方式に合わせた標準の画素数に補間
されて出力される。
When a shake correction ON command is received from the system control unit 118 within the movable range, an address read by the field memory control circuit 117 is moved in accordance with a signal from the image motion detection circuit 116. Performs electronic shake correction. The image read from the field memory circuit 113 is interpolated by the digital signal processing circuit 114 into a standard number of pixels according to the broadcasting system and output.

【0021】図3は、本発明の手振れ補正装置の動作を
示すフローチャートであり、システム制御部118によ
って実行される。制御をスタートすると、ステップS1
で、角速度センサ101で物理的に検出された振れに基
づいて、振れによる画像の動きを相殺する方向及び量を
演算し、ステップS2でVAP107を駆動する。これ
によって光学的振れ補正、すなわち光学防振動作が行わ
れる。防振動作が行われている間は、この光学防振動作
は常に行われている。
FIG. 3 is a flowchart showing the operation of the camera shake correction apparatus according to the present invention, which is executed by the system control unit 118. When control is started, step S1
Then, based on the shake physically detected by the angular velocity sensor 101, the direction and the amount for canceling the motion of the image due to the shake are calculated, and the VAP 107 is driven in step S2. As a result, optical shake correction, that is, an optical image stabilization operation is performed. This optical image stabilization operation is always performed while the image stabilization operation is being performed.

【0022】続いてステップS3で、フィールドメモリ
回路113からの画像の読み出し範囲を小さくすること
によって、電子的に画角を小さくする電子ズーム動作が
ONであるか否かを判定し、電子ズームがOFFであっ
たときには、そのままフローを抜けて、光学防振のみの
防振動作を続行する。ステップS3で電子ズームがON
であった場合には、ステップS4で、画像動き検出回路
116において、連続して生成されるフィールド画面間
の画像の変化から画像の動き情報を検出し、ステップS
5で電子ズームの倍率を設定し、ステップS6の処理に
移行する。
Subsequently, at step S3, it is determined whether or not the electronic zoom operation for electronically reducing the angle of view is ON by reducing the read range of the image from the field memory circuit 113. If it is OFF, the flow directly exits from the flow, and the image stabilization operation using only the optical image stabilization is continued. Electronic zoom ON in step S3
In step S4, in step S4, the image motion detection circuit 116 detects the motion information of the image from the change in the image between the continuously generated field screens.
In step 5, the magnification of the electronic zoom is set, and the process proceeds to step S6.

【0023】ステップS6では、まずステップS5の処
理で設定された電子ズーム倍率に応じて、フィールドメ
モリ回路113より画像を読み出す範囲を設定し、かつ
ステップS4の処理で検出した画像の動き情報に応じ
て、画像を読み出す範囲を、上記フィールドメモリ回路
の画像格納領域内において移動制御、すなわち画像の動
きを相殺する方向にシフトすることにより、画像の動き
(振れ)補正が行われる。この時、画像の動き補正可能
な補正量は、上記フィールドメモリ回路の画像格納領域
に相当する全画面領域と、読み出す範囲との差の領域の
範囲内ということになる。ステップS7では、ステップ
S6においてフィールドメモリ回路113より読み出さ
れた部分画像を通常の表示画面の大きさに電子的に拡大
する処理が行われる。この際に、画像拡大処理に伴う画
像情報の欠落部分は補間処理が行われ、電子的に拡大処
理された画像が出力される。以上のステップS1〜S7
の処理を繰り返し行う。
In step S6, first, an image reading range is set from the field memory circuit 113 in accordance with the electronic zoom magnification set in step S5, and in accordance with the motion information of the image detected in step S4. Then, by moving the image reading range within the image storage area of the field memory circuit in the direction of movement control, that is, by shifting the image reading in a direction to offset the image movement, the image movement (shake) is corrected. At this time, the correction amount in which the motion of the image can be corrected is within the range of the difference between the entire screen area corresponding to the image storage area of the field memory circuit and the reading range. In step S7, a process of electronically enlarging the partial image read from the field memory circuit 113 in step S6 to the size of a normal display screen is performed. At this time, interpolation processing is performed on the missing part of the image information accompanying the image enlargement processing, and an image that has been electronically enlarged is output. The above steps S1 to S7
Is repeated.

【0024】尚、上述の処理によれば、光学防振は常に
動作し、基本的には画像の劣化の少ない光学防振を用い
る。そして、電子ズームが動作しているときには、電子
ズームによって画像のメモリからの切り出し位置が縮小
されることによって生じる、画像読み出し部分以外の余
白の部分を画像読み出し範囲の移動可能範囲として、電
子的な動き補正を実行し、電子防振を併用する。但し、
振れ補正可能範囲は電子ズームの倍率によって変化す
る。これによって、拡大処理による移動制御、すなわち
画像の動きを相殺する方向にシフトすることにより、画
像の動き(振れ)補正が行われる。
According to the above-described processing, optical image stabilization always operates, and basically, optical image stabilization with little image deterioration is used. When the electronic zoom is operating, a margin portion other than the image reading portion, which is generated by reducing the cut-out position of the image from the memory by the electronic zoom, is set as an electronically movable range of the image reading range. Execute motion compensation and use electronic image stabilization together. However,
The shake correction possible range changes depending on the magnification of the electronic zoom. As a result, the movement (vibration) of the image is corrected by moving the image by the enlargement process, that is, by shifting the image in the direction to cancel the movement of the image.

【0025】すなわち、電子ズーム非動作時には、光学
防振のみで振れ補正を行い、電子ズーム動作時には、光
学防振と電子防振の両方を用いて振れ補正を行う。電子
防振を併用することによって、角速度センサによる低周
波域における感度低下を画像からの動き情報で電子防振
を行うことによって補償することができる。すなわち、
電子ズーム領域では、画像が拡大されているため、低域
の振れが画面上で大きく作用し、目立つ傾向にあるが、
角速度サンセは低周波域の感度が良くないので、電子ズ
ーム時は特に振れ補正能力の低下が目立っていたが、電
子ズーム時に上記の電子防振を併用することで、この問
題を解決することができる。
That is, when the electronic zoom is not operated, the shake correction is performed only by the optical image stabilization, and when the electronic zoom is operated, the shake correction is performed using both the optical image stabilization and the electronic image stabilization. By using the electronic image stabilization together, it is possible to compensate for the decrease in sensitivity in the low frequency range due to the angular velocity sensor by performing the electronic image stabilization using the motion information from the image. That is,
In the electronic zoom area, since the image is enlarged, the low-frequency shake has a large effect on the screen and tends to be noticeable,
Since the angular velocity sensor has poor sensitivity in the low frequency range, the deterioration of the shake correction capability was particularly noticeable at the time of electronic zoom, but this problem can be solved by using the above electronic image stabilization at the time of electronic zoom. it can.

【0026】このように、振れ検出手段として角速度セ
ンサと、画像検出を備え、補正手段にも光学補正手段
と、画像処理による電子防振を備え、これらの組み合わ
せによって、画質と振れ補正能力の両面において、最適
化を図ることができる。
As described above, the shake detecting means is provided with the angular velocity sensor and the image detection, and the correcting means is also provided with the optical correcting means and the electronic image stabilization by the image processing. , Optimization can be achieved.

【0027】尚、図1の各機能ブロックは、ハード的に
構成してもよく、また、CPUやメモリ等から成るマイ
クロコンピュータシステムに構成してもよい。マイクロ
コンピュータシステムに構成する場合、上記メモリは本
発明による記憶媒体を構成し、この記憶媒体には、上述
した動作を行うための処理を実行するためのプログラム
が記録される。また、この記録媒体としては、ROM、
RAM等の半導体メモリや、光ディスク、光磁気ディス
ク、磁気媒体等を用いてよく、これらをCD−ROM、
フロッピィディスク、磁気テープ、不揮発性のメモリカ
ード等として用いてよい。
Each functional block in FIG. 1 may be configured as hardware, or may be configured as a microcomputer system including a CPU, a memory, and the like. When configured in a microcomputer system, the memory constitutes a storage medium according to the present invention, and a program for executing a process for performing the above-described operation is recorded on the storage medium. In addition, as this recording medium, ROM,
A semiconductor memory such as a RAM, an optical disk, a magneto-optical disk, a magnetic medium, or the like may be used.
It may be used as a floppy disk, a magnetic tape, a nonvolatile memory card, or the like.

【0028】[0028]

【発明の効果】以上説明したように、本発明によれば、
電子ズーム中のみ光学式振れ補正と低周波数特性の良い
電子式振れ補正とを併用することにより、電子ズーム領
域において光学式振れ補正装置で問題となる低域周波数
帯の振れを高精度に除去して画質劣化のない振れ補正を
実現することができる。
As described above, according to the present invention,
By using both optical image stabilization and electronic image stabilization with good low-frequency characteristics only during electronic zoom, high-precision low-frequency shake that is a problem with the optical image stabilization device in the electronic zoom range is eliminated. Thus, it is possible to realize shake correction without image quality deterioration.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明による振れ補正装置の実施の形態を示す
ブロック図である。
FIG. 1 is a block diagram showing an embodiment of a shake correction apparatus according to the present invention.

【図2】可変頂角プリズムの構成図である。FIG. 2 is a configuration diagram of a variable apex angle prism.

【図3】システム制御部の処理を説明するためのフロー
チャートである。
FIG. 3 is a flowchart illustrating a process of a system control unit.

【符号の説明】[Explanation of symbols]

101 角速度センサ 106 アクチュエータ 107 VAPユニット 108 頂角センサ 110 固体撮像素子 113 フィールドメモリ回路 116 画像動き検出回路 117 フィールドメモリ制御回路 118 システム制御部 Reference Signs List 101 angular velocity sensor 106 actuator 107 VAP unit 108 vertex angle sensor 110 solid-state imaging device 113 field memory circuit 116 image motion detection circuit 117 field memory control circuit 118 system control unit

Claims (10)

【特許請求の範囲】[Claims] 【請求項1】 撮像手段から入力される画像信号を記憶
する記憶手段と、 振れを検出する振れ検出手段と、 上記検出された振れに応じて上記撮像手段に対する被写
体像の振れを光学的に補正する光学補正手段と、 上記画像信号の動きを検出する動き検出手段と、 指定されたズーム倍率に応じて上記記憶手段からの画像
信号の読み出し範囲の大きさを制御すると共に、上記検
出された動きに応じて上記読み出し範囲の位置を制御す
る制御手段とを備えた振れ補正装置。
1. A storage unit for storing an image signal input from an image pickup unit, a shake detection unit for detecting a shake, and an optical correction of a shake of a subject image with respect to the image pickup unit in accordance with the detected shake. Optical correction means for detecting the movement of the image signal; motion detection means for detecting the movement of the image signal; and controlling the size of the readout range of the image signal from the storage means according to a specified zoom magnification. And a control means for controlling the position of the readout range according to the above.
【請求項2】 上記制御手段は、上記記憶手段の上記読
み出し範囲を除く領域内において、上記読み出し範囲の
位置を上記動きを減少させる方向に移動することを特徴
とする請求項1記載の振れ補正装置。
2. The image stabilization apparatus according to claim 1, wherein the control unit moves the position of the read range in a direction excluding the read range in an area of the storage unit excluding the read range. apparatus.
【請求項3】 撮像手段から入力される画像信号を記憶
手段に記憶する手順と、 振れを検出する手順と、 上記検出された振れに応じて上記撮像手段に対する被写
体像の振れを光学的に補正する手順と、 上記画像信号の動きを検出する手順と、 指定されたズーム倍率に応じて上記記憶手段からの画像
信号の読み出し範囲の大きさを制御すると共に、上記検
出された動きに応じて上記読み出し範囲の位置を制御す
る手順とを備えた振れ補正方法。
3. A procedure for storing an image signal input from an imaging unit in a storage unit, a procedure for detecting a shake, and optically correcting a shake of a subject image with respect to the imaging unit in accordance with the detected shake. And a step of detecting the movement of the image signal, and controlling a size of a readout range of the image signal from the storage unit according to a designated zoom magnification, and controlling the size of the readout range according to the detected movement. Controlling the position of the readout range.
【請求項4】 上記制御する手順においては、上記記憶
手段の上記読み出し範囲を除く領域内において、上記読
み出し範囲の位置を上記動きを減少させる方向に移動す
ることを特徴とする請求項3記載の振れ補正方法。
4. The method according to claim 3, wherein, in the controlling step, the position of the read range is moved in a direction excluding the movement within an area excluding the read range of the storage means. Shake correction method.
【請求項5】 撮像手段から入力される画像信号を記憶
手段に記憶する処理と、 振れを検出する処理と、 上記検出された振れに応じて上記撮像手段に対する被写
体像の振れを光学的に補正する処理と、 上記画像信号の動きを検出する処理と、 指定されたズーム倍率に応じて上記記憶手段からの画像
信号の読み出し範囲の大きさを制御すると共に、上記検
出された動きに応じて上記読み出し範囲の位置を制御す
る処理とを実行するためのプログラムを記憶したコンピ
ュータ読み取り可能な記憶媒体。
5. A process of storing an image signal input from an imaging unit in a storage unit, a process of detecting a shake, and optically correcting a shake of a subject image with respect to the imaging unit according to the detected shake. Processing, detecting the movement of the image signal, controlling the size of the readout range of the image signal from the storage means in accordance with the designated zoom magnification, and controlling the size of the readout area in accordance with the detected movement. A computer-readable storage medium storing a program for executing a process of controlling a position of a read range.
【請求項6】 上記制御する処理においては、上記記憶
手段の上記読み出し範囲を除く領域内において、上記読
み出し範囲の位置を上記動きを減少させる方向に移動す
ることを特徴とする請求項5記載のコンピュータ読み取
り可能な記憶媒体。
6. The method according to claim 5, wherein in the control processing, the position of the read range is moved in a direction that reduces the movement in an area excluding the read range of the storage unit. Computer readable storage medium.
【請求項7】 振れによる画像の動きを光学的に補正す
る光学補正手段と、 振れによる画像の動きを電子的に補正する電子補正手段
と、 画像を電子的に拡大する電子ズーム手段と、 上記電子ズーム手段の非動作時は、上記光学補正手段に
よって画像の動きを補正し、上記電子ズーム手段の動作
時は、上記光学補正手段と上記電子補正手段の両方を動
作させて画像の動きを補正する制御手段とを備えたこと
を特徴とする振れ補正装置。
7. An optical correction means for optically correcting the movement of an image due to a shake, an electronic correction means for electronically correcting the movement of an image due to a shake, an electronic zoom means for electronically enlarging an image, When the electronic zoom means is not operating, the motion of the image is corrected by the optical correction means. When the electronic zoom means is operating, the motion of the image is corrected by operating both the optical correction means and the electronic correction means. And a control unit for performing the shake correction.
【請求項8】 上記制御手段は、上記電子補正手段の補
正可能範囲を、上記電子ズーム手段の倍率によって変化
させるようにしたことを特徴とする請求項7記載の振れ
補正装置。
8. The shake correction apparatus according to claim 7, wherein said control means changes a correction range of said electronic correction means according to a magnification of said electronic zoom means.
【請求項9】 振れを物理的に検出する振れ検出手段
と、 振れによる画像の動きを画像信号の時間的変化から検出
する動き検出手段と、 振れによる画像の動きを光学的に補正する光学補正手段
と、 振れによる画像の動きを電子的に補正する電子補正手段
と、 上記振れ検出手段の出力に基づいて上記光学補正手段を
動作させ、上記動き検出手段の出力に基づいて上記電子
補正手段を動作させる制御手段とを備えたことを特徴と
する振れ補正装置。
9. A shake detecting means for physically detecting a shake, a motion detecting means for detecting a movement of an image due to the shake from a temporal change of an image signal, and an optical correction for optically correcting the movement of the image due to the shake Means, electronic correction means for electronically correcting the movement of an image due to shake, and operating the optical correction means based on the output of the shake detection means, and controlling the electronic correction means based on the output of the movement detection means. A shake correction device comprising: a control unit that operates.
【請求項10】 画像信号を電子的に拡大する電子ズー
ム手段を備え、上記制御手段は、画像信号を記憶したメ
モリからの画像読み出し範囲を変化させて画像の拡大を
行い、かつ画像読み出し範囲以外のメモリ内の領域にお
いて、上記画像読み出し範囲を移動させることによって
電子ズームを行うことを特徴とする請求項9記載の振れ
補正装置。
10. An electronic zoom means for electronically enlarging an image signal, wherein said control means enlarges an image by changing an image reading range from a memory in which the image signal is stored. 10. The image stabilizing apparatus according to claim 9, wherein the electronic zoom is performed by moving the image reading range in an area in the memory.
JP9311693A 1997-11-13 1997-11-13 Device and method for correcting oscillation and computer readable storage medium Pending JPH11146260A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP9311693A JPH11146260A (en) 1997-11-13 1997-11-13 Device and method for correcting oscillation and computer readable storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP9311693A JPH11146260A (en) 1997-11-13 1997-11-13 Device and method for correcting oscillation and computer readable storage medium

Publications (1)

Publication Number Publication Date
JPH11146260A true JPH11146260A (en) 1999-05-28

Family

ID=18020337

Family Applications (1)

Application Number Title Priority Date Filing Date
JP9311693A Pending JPH11146260A (en) 1997-11-13 1997-11-13 Device and method for correcting oscillation and computer readable storage medium

Country Status (1)

Country Link
JP (1) JPH11146260A (en)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002027312A (en) * 2000-06-30 2002-01-25 Ricoh Co Ltd Image pickup device
WO2004059380A1 (en) * 2002-12-25 2004-07-15 Nikon Corporation Blur correction camera system
JP2006050457A (en) * 2004-08-06 2006-02-16 Canon Inc Imaging apparatus
WO2007023718A1 (en) * 2005-08-26 2007-03-01 Victor Company Of Japan, Limited Image shake correcting device
US7881596B2 (en) 2006-05-26 2011-02-01 Victor Company Of Japan, Limited Image fluctuation correction device
JP2011139167A (en) * 2009-12-25 2011-07-14 Canon Inc Image capturing apparatus and camera shake correcting method
JP2013135443A (en) * 2011-12-27 2013-07-08 Canon Inc Imaging apparatus and control method therefor
JP2013135442A (en) * 2011-12-27 2013-07-08 Canon Inc Imaging apparatus and control method therefor
US8681229B2 (en) 2008-06-20 2014-03-25 Sony Corporation Image pickup device, image blur correcting method, and program

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002027312A (en) * 2000-06-30 2002-01-25 Ricoh Co Ltd Image pickup device
US7711253B2 (en) 2002-12-25 2010-05-04 Nikon Corporation Blur correction camera system
WO2004059380A1 (en) * 2002-12-25 2004-07-15 Nikon Corporation Blur correction camera system
US7596307B2 (en) 2002-12-25 2009-09-29 Nikon Corporation Blur correction camera system
JP2006050457A (en) * 2004-08-06 2006-02-16 Canon Inc Imaging apparatus
US7688353B2 (en) 2004-08-06 2010-03-30 Canon Kabushiki Kaisha Image-taking apparatus and image-taking method
WO2007023718A1 (en) * 2005-08-26 2007-03-01 Victor Company Of Japan, Limited Image shake correcting device
US7881596B2 (en) 2006-05-26 2011-02-01 Victor Company Of Japan, Limited Image fluctuation correction device
US8681229B2 (en) 2008-06-20 2014-03-25 Sony Corporation Image pickup device, image blur correcting method, and program
JP2011139167A (en) * 2009-12-25 2011-07-14 Canon Inc Image capturing apparatus and camera shake correcting method
JP2013135443A (en) * 2011-12-27 2013-07-08 Canon Inc Imaging apparatus and control method therefor
JP2013135442A (en) * 2011-12-27 2013-07-08 Canon Inc Imaging apparatus and control method therefor
US9030566B2 (en) 2011-12-27 2015-05-12 Canon Kabushiki Kaisha Image capturing apparatus and control method of the same

Similar Documents

Publication Publication Date Title
US7672578B2 (en) Image capturing apparatus
JPH07123317A (en) Photographing device with vibration proofing function
JP4022595B2 (en) Imaging device
JP2015089108A (en) Imaging device and imaging method
JP2016118701A (en) Imaging device and control method thereof
JPH05199449A (en) Vibration proof camera
JPH11146260A (en) Device and method for correcting oscillation and computer readable storage medium
JP4536855B2 (en) Anti-vibration device, imaging device, and control method of anti-vibration device
JP4732148B2 (en) Optical apparatus and imaging system
JP4594004B2 (en) IMAGING DEVICE, ITS CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM
WO2017104102A1 (en) Imaging device
JPH1127573A (en) Image motion correcting device
JP4306438B2 (en) Imaging device
JP3592007B2 (en) Imaging device and lens unit
JP3548328B2 (en) Imaging device
EP3836540B1 (en) Image processing apparatus and image capturing apparatus
JPH09139881A (en) Camera-shake correction device
JPH11155096A (en) Image pickup device, computer readable storage medium and image processor
JPH07283999A (en) Image synthesizer and image photographing device
JPH07287268A (en) Image pickup device
JP2006203493A (en) Image movement correction device
JP2000217032A (en) Picture signal processor and its method
JP2735264B2 (en) Motion compensated imaging device
JPH08331440A (en) Hand shake correcting device
JPH10322585A (en) Device and system for picking up image

Legal Events

Date Code Title Description
A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20040309