JP4195950B2

JP4195950B2 - Image motion correction device

Info

Publication number: JP4195950B2
Application number: JP05821399A
Authority: JP
Inventors: 幸孝土田; 芳明杉谷
Original assignee: Panasonic Corp; Matsushita Electric Industrial Co Ltd
Current assignee: Panasonic Corp; Panasonic Holdings Corp
Priority date: 1999-03-05
Filing date: 1999-03-05
Publication date: 2008-12-17
Anticipated expiration: 2019-03-05
Also published as: JP2000261710A

Description

【０００１】
【発明の属する技術分野】
本発明は撮像装置の手振れ補正等に用いる画像動き補正装置に関し、特にその性能改善に関し提案するものである。
【０００２】
【従来の技術】
近年、民生用ビデオカメラ（以下、ビデオム−ビ−と称す）の小型化、軽量化、光学ズ−ムの高倍率化が進み、その使い勝手が格段に向上した結果、一般消費者にとってビデオム−ビ−はごく普通の家電製品の一つとなっている。しかしその反面、小型化、軽量化、光学ズ−ムの高倍率化、及び撮影に習熟していない消費者へのビデオム−ビ−の普及は、撮影時の手振れによる画面の不安定化という問題も発生させた。よって、この問題を解決するため、画像動き補正装置を搭載するビデオム−ビ−が今や多く開発、商品化されている。
【０００３】
撮像装置の画像動き補正装置としては、例えば、ジンバル機構により撮像光学系及び固体撮像素子を備えた撮像ユニットを支持し、これを角速度センサーから得られる撮像装置自体の動き情報に基づき駆動制御することで画像の動きを補正する方式（”ビデオカメラの画振れ防止技術の開発”テレビジョン学会技術報告Vol.11,No.28,pp19〜24（1987））がある。
【０００４】
上記方式は、撮像装置の撮像ユニットをジンバル機構によりその重心点において回動自在に支持し、角速度センサーから得られる撮像装置のピッチング、ヨ−イング２方向の動き情報に基づき、コイルとマグネットにより構成されたアクチエ−タによりこの撮像ユニットの姿勢制御を行うことで、撮影画像を安定化させるものである。
【０００５】
また、別の例としては、撮像光学系の前部に可変頂角プリズムを備え、これを同じく角速度センサーからの情報により駆動制御することで画像の動きを補正する方式（”光学式手振れ補正システム”テレビジョン学会技術報告Vol.17,No.5,pp15〜20（1993））がある。
【０００６】
上記方式は、２枚のガラス板を特殊なフィルムで作られた蛇腹のようなもので接続し、中を高屈折率の液体で満たした可変頂角プリズムを固体撮像素子の前段に設け、角速度センサーから得られるピッチング、ヨ−イング２方向の撮像装置の動きの情報に基づき、この可変頂角プリズムの２枚のガラス板を水平・垂直方向に各々傾けることにより、入射光の光軸を曲げ、撮影画像の動きを安定化させるものである。
【０００７】
また、別の例としては、固体撮像素子上の画像に対し、その一部分のみを出力画像として読み出すための枠を設け、固体撮像素子の駆動タイミングを変えることにより、この枠を移動させて画像の動きを補正する方式がある。
上記方式は、放送方式に合致した標準の固体撮像素子よりも画素数の多い固体撮像素子を用い、角速度センサーから得られるピッチング、ヨ−イング２方向の撮像装置の動きの情報を撮影レンズの焦点距離に基づき、固体撮像素子上の画像の移動量に換算し、この換算結果をもとに固体撮像素子の駆動タイミングを制御し、撮影画像の動きに応じて固体撮像素子からの画像の読み出し位置（枠）を変更することで、撮影画像の動きを安定化させるものである。
【０００８】
【発明が解決しようとする課題】
しかしながら上記従来の構成では、撮影画像の動きに応じて固体撮像素子からの画像の読み出し位置（枠）を変更する際の周辺光量に劣化が生じると、ズーム倍率可変のズームレンズを搭載するビデオカメラでは撮影時の画像の光量変化により撮影画像の見苦しさが増すという問題点があった。特にズーム倍率の高倍率化が進んだビデオカメラにおいては、ますます上記問題に対する解決が求められることになる。
【０００９】
本発明は以上の問題に鑑みてなされたものであり、周辺光量の劣化が目立つ被写体においては動き補正性能を制限し、特にズーム倍率が高い場合には更に補正性能を制限することで周辺光量の劣化に伴う見苦しさを抑制した撮影ができる画像動き補正装置を提供することを目的とする。
【００１０】
【課題を解決するための手段】
この課題を解決するために本発明は、撮像装置の動きを検出する動き検出手段と、複数のレンズ群から構成され焦点距離が可変可能な撮像光学系と、前記撮像光学系の焦点距離を検出する焦点距離検出手段と、前記撮像光学系の出力を光電変換するための撮像素子と、撮像装置の動きに起因して発生する撮影画像の動きを補正する動き補正手段と、前記撮像素子からの輝度信号を複数の領域に分けて均一度合いを判別する輝度信号判別手段と、前記輝度信号判別手段で判別した輝度信号の均一度合いが所定のしきい値以下の場合に、前記動き補正手段による動き補正を制限する振れ補正信号発生手段とを備えたものである。
【００１１】
このような構成により、周辺光量の劣化が目立つ被写体においては動き補正性能を制限し、周辺光量の劣化に伴う見苦しさを抑制した撮影ができる画像動き補正装置を提供することを目的とする。
【００１２】
【発明の実施の形態】
本発明の請求項１に記載の発明は、撮像装置の動きを検出する動き検出手段と、複数のレンズ群から構成され焦点距離が可変可能な撮像光学系と、前記撮像光学系の焦点距離を検出する焦点距離検出手段と、前記撮像光学系の出力を光電変換するための撮像素子と、撮像装置の動きに起因して発生する撮影画像の動きを補正する動き補正手段と、前記撮像素子からの輝度信号を複数の領域に分けて均一度合いを判別する輝度信号判別手段と、前記輝度信号判別手段で判別した輝度信号の均一度合いが所定のしきい値以下の場合に、前記動き補正手段による動き補正を制限する振れ補正信号発生手段とを備えたものであり、周辺光量の劣化に伴う見苦しさを抑制した撮影ができるという作用を有する。
【００１３】
以下、本発明の実施の形態について、図面を用いて説明する。
【００１４】
（実施の形態１）
図１は本発明の実施の形態１における画像動き補正装置のブロック図を示すものである。同図において、１は動き補正手段である補正レンズで、本装置の揺れにより生じる撮影画像の動きを、光軸を可変することで補正する手段である。２は輝度均一度合い判別部７からの判別結果と動き検出部８からの動き検出信号により補正レンズ１を制御する振れ補正信号発生手段である振れ補正信号発生部で、補正レンズ１を駆動及び制御するための手段である。３は補正レンズ１の近傍に複数配された撮像光学系である撮像レンズで、光学的ズ−ム動作及び合焦動作するレンズ系である。４は撮像レンズ３の位置から焦点距離を検出する焦点距離検出手段である焦点距離検出部であり、この動きから焦点距離情報を得る。５は撮像レンズ３の光軸方向端部に配された撮像素子で、補正レンズ１及び撮像レンズ３を介して入射する映像を光電変換するものであり、一般的には固体撮像素子（ＣＣＤ）などからなる。６は信号処理手段である信号処理部で、撮像素子５により得られた画像信号に対してガンマ処理等のアナログ信号処理と、Ａ／Ｄ変換処理と、ノイズ除去及び輪郭強調等のデジタル信号処理とを行う。７は信号処理部６で得られた輝度信号データを複数の領域に分けて均一度合いを判別する輝度信号判別手段である輝度均一度合い判別部、８は本装置を備えた撮像装置の動き検出手段である動き検出部で、動きを検出するためのセンサであり、静止状態での出力を基準に撮像装置または信号の動き量を検出して出力する。
【００１５】
図２は輝度均一度合い判別部７における輝度均一度合い判別を説明するための模式図である。信号処理部６の輝度データ出力から撮像信号のＹ０からＹｎの画面全体平均Ａを求め、個々のデータと差の絶対値の和を求めることで、撮像信号の輝度信号均一度合いＢを求める。この輝度信号の均一度合いＢを利用して、輝度信号の均一度合いＢが一定のしきい値以下であれば、撮像信号全体のコントラストが低く周辺光量の劣化が目立つと判断する。
【００１６】
以上のように構成された本実施の形態の画像動き補正装置について、以下手振れ補正の動きを制限するための処理として動き検出部８の出力に対し、積分処理を行うステップで積分定数を変更する処理に関し図３を用いて説明する。
【００１７】
まず、ステップ２０１にて動き検出部８からのデータの取り込みを行い、ステップ２０２で積分定数、ゲイン、クリップデータの初期化を行う。次に、ステップ２０３で、輝度信号のばらつき度合いがしきい値以上であると判断された場合（高コントラスト判別）は、ステップ２０２で設定された初期値に基づきステップ２０６〜２０８の処理が行われる。ステップ２０６〜２０８の動作については後述する。
【００１８】
ステップ２０３でしきい値以下であると判断された場合（低コントラスト判別）は、まずステップ２０４において焦点距離検出部４からの焦点距離情報に基づき検出した焦点距離情報を基に、撮像レンズ３のズーム倍率を求めることができる。
【００１９】
次のステップ２０５では、振れ補正信号発生部２に取り込んだ動き検出部８の出力から、撮像装置の移動量を求める際（ステップ２０６）の積分処理（積分フィルタ）の周波数特性を規定する積分定数Ｋを、撮像レンズ３の焦点距離により決定する。
【００２０】
本ステップは、内部に焦点距離から積分定数Ｋを計算する関数、もしくは焦点距離と積分定数Ｋの関係を規定するテーブルを有し、この関数またはテーブルにより積分定数Ｋを決定し、ステップ２０２で初期値に設定されていた積分定数Ｋの設定値を本ステップで決定された値に決定する。これにより、後に続くステップ２０６ではステップ２０２で設定された積分定数の初期値ではなく、ステップ２０５で再設定された積分定数により積分処理を行うこととなる。
【００２１】
このように、輝度信号の均一度合いがしきい値以下の時、つまり低コントラストの時には、積分処理（ステップ２０６）の積分定数を通常の手振れ補正時の積分定数の設定値に比べ小さく設定し、且つ焦点距離に応じて更に小さく設定すると、積分処理の時定数を短く設定でき、よって積分処理の低周波成分に対するゲインを小さくできる。
【００２２】
以上のように本実施の形態では、撮像信号が低コントラストであるとき、輝度信号の判別手段による判別結果と前記積分処理の両者に基づき振れ補正信号発生部２における積分手段の時定数を変化させて応答特性を変化させることで、振れ補正時の周辺光量の劣化を防止できる。
【００２３】
（実施の形態２）
以下、本発明の実施の形態２における画像動き補正装置について説明する。本実施の形態は、前述の実施の形態１に対し、振れ補正信号発生部２での処理内容のみが異なるため、以下その動作を動き補正信号発生部２での処理をもとに説明する。なお、基本的な構成は図１のブロック図に示されるものであるため、説明は省略する。図４のフローチャートにおいて図３と異なるのは、ステップ３０５であって、ステップ２０４で算出された焦点距離に応じたゲインを決定するステップである。
【００２４】
以上のように構成された本実施の形態の構成について、以下その動作について説明する。
【００２５】
まず、ステップ２０１にて動き検出部８からの動きデータの取り込みを行い、ステップ２０２で、積分定数、ゲイン、クリップの初期化を行う。次に、ステップ２０３で輝度信号のばらつき度合いを判別し、予め設定されたしきい値以上であると判断された場合（高コントラスト）は、ステップ２０２で設定された初期値に基づきステップ２０６〜２０８の処理が行われる。
【００２６】
ステップ２０３でしきい値以下であると判断された場合（低コントラスト）は、まずステップ２０４において、撮像レンズ３から得られる焦点距離情報４から検出した焦点距離情報を基に撮像レンズ３のズーム倍率を求める。
【００２７】
次のステップ３０５は、振れ補正信号発生部２に取り込んだ動き検出手段８の出力から求められた撮像装置の動きに対するゲイン調整を行う際の（ステップ２０７）のゲインＧを撮像レンズ３の焦点距離により決定する。
【００２８】
本ステップは、内部に焦点距離からゲインＧを計算する関数、もしくは焦点距離とゲインＧの関係を規定するテーブルを有し、この関数またはテーブルによりゲインＧを決定し、ステップ２０２で初期値に設定されていたゲインＧの設定値を本ステップで決定された値に決定する。
【００２９】
これにより、後に続くステップ２０７ではステップ２０２で設定されたゲインの初期値ではなく、ステップ３０５で再設定されたゲインによりゲイン調整を行うこととなる。
【００３０】
このように、輝度信号の均一度合いがしきい値以下の時にゲイン調整時の（ステップ２０７）のゲインを通常の手振れ補正時のゲインの設定値に比べ小さく設定し、且つ焦点距離に応じて更に小さく設定すると、振れ補正信号発生部２から補正レンズ１に送られる制御信号自体が小さくなり、全体の応答性を落とすことができる。
【００３１】
以上のように本実施の形態では、撮像信号が低コントラストであるとき、輝度信号の判別手段による判別結果と前記ゲイン調整の両者に基づき振れ補正信号発生部２の応答特性を変化させることで振れ補正時の周辺光量の劣化を防止できる。
【００３２】
（実施の形態３）
以下、本発明の実施の形態３における画像動き補正装置について説明する。本実施の形態では、本発明の実施の形態１に対し、振れ補正信号発生部２での処理内容のみが異なるため、以下その動作を動き補正信号発生手段２での処理をもとに説明する。なお、本発明の実施の形態１と同様の処理内容部分に関しては図３及び図４と同様の同一の符号を付して説明は省略する。前述の実施の形態と異なるステップとして、本実施の形態では図５のステップ４０５において、ステップ２０４で算出された焦点距離に基づき補正レンズ１の補正範囲を越えないように信号幅を制限するクリップ処理を行う際のクリップ値を決定している。
【００３３】
以上のように構成された本実施の形態の画像動き補正装置について、以下その動作について説明する。
【００３４】
まず、ステップ２０１にて動き検出部８からのデータの取り込みを行い、ステップ２０２で積分定数、ゲイン、クリップの初期化を行う。次に、ステップ２０３で輝度信号のばらつき度合いを判定し、ばらつき度合いがしきい値以上であると判断された場合（高コントラスト）はステップ２０２で設定された初期値に基づきステップ２０６〜２０８の処理が行われる。ステップ２０３でしきい値以下であると判断された場合（低コントラスト）は、まずステップ２０４において焦点距離情報４から検出した焦点距離情報を元に撮像レンズ３のズーム倍率を求めることができる。
【００３５】
次のステップ４０５は、ステップ２０８において振れ補正信号発生部２の出力が補正レンズ１の補正範囲を超えることがないようにクリップ処理を行う際のクリップ値Ｃを決定する。
【００３６】
本ステップは、内部に焦点距離からクリップ値Ｃを計算する関数、もしくは焦点距離とクリップ値Ｃの関係を規定するテーブルを有し、この関数またはテーブルによりクリップ値Ｃを決定し、ステップ２０２で初期値に設定されていたクリップ値Ｃの設定値を本ステップで決定された値に決定する。
【００３７】
これにより、後に続くステップ２０８ではステップ２０２で設定されたクリップ値の初期値ではなく、ステップ４０５で再設定されたクリップ値によりクリップ処理を行うこととなる。
【００３８】
このように、輝度信号の均一度合いがしきい値以下の時にクリップ処理のクリップ値を通常の手振れ補正時のクリップ値の設定値に比べ小さく設定し、且つ焦点距離に応じて更に小さく設定すると、振れ補正信号発生部２から補正レンズ１に送られる制御信号幅を小さく設定でき、つまり振れの補正範囲が狭められるため結果として輝度信号の均一度合いが小さいときの補正の度合いを少なくできる。
【００３９】
以上のように本実施の形態では、撮像信号が低コントラストであるとき、輝度信号の判別手段による判別結果と前記クリップ処理の両者に基づき制御信号の応答特性を変化させることで振れ補正時の周辺光量の劣化を防止できる。
【００４０】
【発明の効果】
以上のように本発明によれば、撮像信号が低コントラストの際における、振れ補正時の周辺光量の劣化を防止できるという優れた効果を奏するものである。
【図面の簡単な説明】
【図１】本発明の実施の形態１による画像動き補正装置を示すブロック図
【図２】本発明の実施の形態１における輝度均一度合い判別の処理内容を説明するための模式図
【図３】本発明の実施の形態１における振れ補正信号発生部２での処理内容を説明するためのフローチャート
【図４】本発明の実施の形態２における振れ補正信号発生部２での処理内容を説明するためのフローチャート
【図５】本発明の実施の形態３における振れ補正信号発生部２での処理内容を説明するためのフローチャート
【符号の説明】
１補正レンズ
２振れ補正信号発生部
３撮像レンズ
５撮像素子
６信号処理部
７輝度均一度合い判別部
８動き検出部[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image motion correction apparatus used for camera shake correction or the like of an image pickup apparatus, and more particularly to improve its performance.
[0002]
[Prior art]
In recent years, consumer video cameras (hereinafter referred to as “video movies”) have become smaller, lighter, and optical zooms have become higher in magnification. -Is one of the ordinary home appliances. However, on the other hand, downsizing, weight reduction, high zooming of optical zoom, and the spread of video movies to consumers who are not proficient in shooting are the problems of screen instability due to camera shake during shooting. Also generated. Therefore, in order to solve this problem, many video movies equipped with an image motion correction device have been developed and commercialized.
[0003]
As an image motion correction device of an imaging device, for example, an imaging unit including an imaging optical system and a solid-state imaging device is supported by a gimbal mechanism, and this is driven and controlled based on motion information of the imaging device itself obtained from an angular velocity sensor. There is a method of correcting the motion of the image ("Development of video camera image blur prevention technology" Television Society Technical Report Vol.11, No.28, pp19-24 (1987)).
[0004]
The above-described system is configured by a coil and a magnet based on motion information in the two directions of pitching and yawing obtained from an angular velocity sensor by rotatably supporting the imaging unit of the imaging device at the center of gravity by a gimbal mechanism. The captured image is stabilized by controlling the attitude of the imaging unit by the actuated actuator.
[0005]
As another example, a system that includes a variable apex prism in the front part of the image pickup optical system and that controls the movement of the image by information from the angular velocity sensor (“optical image stabilization system”). "The Institute of Television Engineers Technical Report Vol.17, No.5, pp15-20 (1993)).
[0006]
In the above method, two glass plates are connected with a bellows made of a special film, and a variable apex prism filled with a high refractive index liquid is provided in front of the solid-state image sensor. Based on the movement information of the image pickup device in the pitching and yawing directions obtained from the sensor, the optical axis of the incident light is bent by tilting the two glass plates of the variable apex prism in the horizontal and vertical directions, respectively. This stabilizes the movement of the captured image.
[0007]
As another example, a frame for reading out only a part of the image on the solid-state image sensor as an output image is provided, and this frame is moved by changing the drive timing of the solid-state image sensor. There is a method for correcting movement.
The above-mentioned method uses a solid-state image sensor having a larger number of pixels than a standard solid-state image sensor conforming to the broadcasting system, and uses information on the movement of the imaging device in the pitching and yawing two directions obtained from the angular velocity sensor as the focus of the photographing lens Based on the distance, it is converted into the amount of movement of the image on the solid-state image sensor, and the drive timing of the solid-state image sensor is controlled based on this conversion result. By changing the (frame), the movement of the captured image is stabilized.
[0008]
[Problems to be solved by the invention]
However, in the above-described conventional configuration, when the peripheral light amount when the reading position (frame) of the image from the solid-state image sensor is changed according to the movement of the captured image is deteriorated, a video camera equipped with a zoom lens having a variable zoom magnification However, there has been a problem that the unpleasantness of the photographed image increases due to a change in the light amount of the image at the time of photographing. In particular, in a video camera in which the zoom magnification has been increased, a solution to the above problem is increasingly required.
[0009]
The present invention has been made in view of the above problems, and restricts the motion correction performance for a subject in which the deterioration of the peripheral light amount is conspicuous, and further restricts the correction performance particularly when the zoom magnification is high, thereby reducing the peripheral light amount. It is an object of the present invention to provide an image motion correction apparatus that can perform shooting while suppressing the unsightly accompanying deterioration.
[0010]
[Means for Solving the Problems]
In order to solve this problem, the present invention detects a motion detection unit that detects a motion of an imaging device, an imaging optical system that includes a plurality of lens groups and has a variable focal length, and detects a focal length of the imaging optical system. A focal length detection unit that performs photoelectric conversion on an output of the imaging optical system, a motion correction unit that corrects a motion of a captured image caused by a motion of the imaging device, and A luminance signal discriminating means for discriminating the degree of uniformity by dividing the luminance signal into a plurality of areas; and a motion by the motion correcting means when the degree of uniformity of the luminance signal discriminated by the luminance signal discriminating means is a predetermined threshold value or less. And a shake correction signal generating means for limiting the correction.
[0011]
Such a configuration limits the motion compensation performance in the subject deterioration of peripheral light is conspicuous, and an object thereof is to provide an image motion compensation device capable of shooting with suppressed unsightly due to deterioration of the peripheral light amount.
[0012]
DETAILED DESCRIPTION OF THE INVENTION
According to a first aspect of the present invention, there is provided a motion detection means for detecting a motion of an imaging device, an imaging optical system that is configured by a plurality of lens groups and has a variable focal length, and a focal length of the imaging optical system. From the imaging device, a focal length detection unit for detecting, an imaging device for photoelectrically converting the output of the imaging optical system, a motion correction unit for correcting a motion of a captured image caused by a motion of the imaging device, and A luminance signal discriminating means for discriminating the luminance signal by dividing the luminance signal into a plurality of areas, and when the uniformity degree of the luminance signal discriminated by the luminance signal discriminating means is a predetermined threshold value or less, It has a shake correction signal generating means for restricting motion correction, and has an effect that it is possible to perform photographing while suppressing the unsightly accompanying deterioration of the peripheral light amount.
[0013]
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[0014]
(Embodiment 1)
FIG. 1 is a block diagram of an image motion correction apparatus according to Embodiment 1 of the present invention. In the figure, reference numeral 1 denotes a correction lens which is a motion correction unit, and is a unit which corrects the movement of a captured image caused by the shaking of the present apparatus by changing the optical axis. Reference numeral 2 denotes a shake correction signal generation unit which is a shake correction signal generation unit that controls the correction lens 1 based on the determination result from the luminance uniformity degree determination unit 7 and the motion detection signal from the motion detection unit 8. The correction lens 1 is driven and controlled. It is a means to do. Reference numeral 3 denotes an imaging lens which is an imaging optical system arranged in the vicinity of the correction lens 1, and is a lens system that performs an optical zoom operation and a focusing operation. A focal length detection unit 4 is a focal length detection unit that detects a focal length from the position of the imaging lens 3 and obtains focal length information from this movement. Reference numeral 5 denotes an image pickup device disposed at the end of the image pickup lens 3 in the optical axis direction. The image pickup device photoelectrically converts an image incident through the correction lens 1 and the image pickup lens 3, and is generally a solid-state image pickup device (CCD). Etc. A signal processing unit 6 is a signal processing unit, which performs analog signal processing such as gamma processing, A / D conversion processing, and digital signal processing such as noise removal and contour enhancement on the image signal obtained by the image sensor 5. And do. 7 is a luminance uniformity determination unit that is a luminance signal determination unit that determines luminance uniformity by dividing the luminance signal data obtained by the signal processing unit 6 into a plurality of regions, and 8 is a motion detection unit of an imaging apparatus equipped with this apparatus. The motion detection unit is a sensor for detecting motion, and detects and outputs the motion amount of the imaging device or signal based on the output in a stationary state.
[0015]
FIG. 2 is a schematic diagram for explaining the luminance uniformity degree determination in the luminance uniformity degree determination unit 7. The overall average A of the image signals Y0 to Yn is obtained from the luminance data output of the signal processing unit 6, and the luminance signal uniformity degree B of the image signals is obtained by obtaining the sum of the absolute values of the individual data and differences. Using the luminance signal uniformity degree B, if the luminance signal uniformity degree B is equal to or less than a certain threshold value, it is determined that the contrast of the entire imaging signal is low and the deterioration of the peripheral light quantity is conspicuous.
[0016]
Regarding the image motion correction apparatus of the present embodiment configured as described above, the integration constant is changed in the step of performing the integration process on the output of the motion detection unit 8 as a process for limiting the movement of the camera shake correction. Processing will be described with reference to FIG.
[0017]
First, in step 201, data is fetched from the motion detector 8, and in step 202, integration constants, gains, and clip data are initialized. Next, when it is determined in step 203 that the variation degree of the luminance signal is equal to or greater than the threshold value (high contrast determination), the processing in steps 206 to 208 is performed based on the initial value set in step 202. . The operation of steps 206 to 208 will be described later.
[0018]
If it is determined in step 203 that it is equal to or less than the threshold value (low contrast determination), first, based on the focal length information detected in step 204 based on the focal length information from the focal length detection unit 4, the imaging lens 3. The zoom magnification can be obtained.
[0019]
In the next step 205, an integration constant that defines the frequency characteristics of the integration process (integration filter) when obtaining the movement amount of the imaging device (step 206) from the output of the motion detection unit 8 fetched into the shake correction signal generation unit 2. K is determined by the focal length of the imaging lens 3.
[0020]
This step has a function for calculating the integral constant K from the focal length or a table for defining the relationship between the focal length and the integral constant K. The integral constant K is determined by this function or table. The set value of the integral constant K that has been set to the value is determined to be the value determined in this step. As a result, in the subsequent step 206, the integration process is performed using the integration constant reset in step 205 instead of the initial value of the integration constant set in step 202.
[0021]
Thus, when the uniformity of the luminance signal is below the threshold value, that is, when the contrast is low, the integration constant of the integration process (step 206) is set to be smaller than the set value of the integration constant during normal camera shake correction, If the time constant is further reduced according to the focal length, the time constant of the integration process can be set short, and thus the gain for the low frequency component of the integration process can be reduced.
[0022]
As described above, in the present embodiment, when the imaging signal has a low contrast, the time constant of the integration unit in the shake correction signal generation unit 2 is changed based on both the determination result by the determination unit of the luminance signal and the integration process. By changing the response characteristics, it is possible to prevent the deterioration of the peripheral light amount during shake correction.
[0023]
(Embodiment 2)
Hereinafter, an image motion correction apparatus according to Embodiment 2 of the present invention will be described. Since the present embodiment is different from the first embodiment only in the processing contents in the shake correction signal generation unit 2, the operation will be described below based on the processing in the motion correction signal generation unit 2. The basic configuration is shown in the block diagram of FIG. The flowchart of FIG. 4 differs from FIG. 3 in step 305 in which a gain corresponding to the focal length calculated in step 204 is determined.
[0024]
The operation of the configuration of the present embodiment configured as described above will be described below.
[0025]
First, in step 201, motion data is taken in from the motion detector 8, and in step 202, integration constants, gains, and clips are initialized. Next, the degree of variation of the luminance signal is determined in step 203, and if it is determined that it is equal to or higher than a preset threshold value (high contrast), steps 206 to 208 are performed based on the initial value set in step 202. Is performed.
[0026]
If it is determined in step 203 that it is equal to or less than the threshold value (low contrast), first, in step 204, the zoom magnification of the imaging lens 3 based on the focal length information detected from the focal length information 4 obtained from the imaging lens 3 Ask for.
[0027]
In the next step 305, the gain G in the gain adjustment for the movement of the image pickup apparatus obtained from the output of the movement detection means 8 taken in the shake correction signal generation unit 2 (step 207) is set as the focal length of the image pickup lens 3. Determined by
[0028]
This step has a function that calculates the gain G from the focal length or a table that defines the relationship between the focal length and the gain G. The gain G is determined by this function or table, and is set to the initial value in step 202. The set value of the gain G that has been set is determined to be the value determined in this step.
[0029]
As a result, in the subsequent step 207, the gain adjustment is performed using the gain reset in step 305 instead of the initial gain value set in step 202.
[0030]
As described above, when the uniformity degree of the luminance signal is equal to or smaller than the threshold value, the gain at the time of gain adjustment (step 207) is set smaller than the gain setting value at the time of normal camera shake correction, and further according to the focal length. When set to a small value, the control signal itself sent from the shake correction signal generator 2 to the correction lens 1 becomes small, and the overall response can be lowered.
[0031]
As described above, in the present embodiment, when the imaging signal has a low contrast, the shake correction signal generator 2 changes the response characteristics based on both the discrimination result by the brightness signal discrimination means and the gain adjustment. It is possible to prevent the peripheral light amount from deteriorating during correction.
[0032]
(Embodiment 3)
Hereinafter, an image motion correction apparatus according to Embodiment 3 of the present invention will be described. In the present embodiment, only the processing contents in the shake correction signal generation unit 2 are different from those in the first embodiment of the present invention. Therefore, the operation will be described below based on the processing in the motion correction signal generation means 2. . Note that the same processing contents as those in the first embodiment of the present invention are denoted by the same reference numerals as those in FIGS. 3 and 4 and description thereof is omitted. As a step different from the above-described embodiment, in this embodiment, in step 405 of FIG. 5, clip processing for limiting the signal width so as not to exceed the correction range of the correction lens 1 based on the focal length calculated in step 204. The clip value at the time of performing is determined.
[0033]
The operation of the image motion correction apparatus of the present embodiment configured as described above will be described below.
[0034]
First, in step 201, data is fetched from the motion detector 8, and in step 202, integration constants, gains, and clips are initialized. Next, the degree of variation of the luminance signal is determined in step 203, and if it is determined that the degree of variation is equal to or greater than the threshold value (high contrast), the processing in steps 206 to 208 is performed based on the initial value set in step 202. Is done. If it is determined in step 203 that the value is equal to or less than the threshold value (low contrast), first, the zoom magnification of the imaging lens 3 can be obtained based on the focal length information detected from the focal length information 4 in step 204.
[0035]
In the next step 405, a clip value C for performing the clip processing is determined so that the output of the shake correction signal generation unit 2 does not exceed the correction range of the correction lens 1 in step 208.
[0036]
This step has a function for calculating the clip value C from the focal length or a table for defining the relationship between the focal length and the clip value C. The clip value C is determined by this function or table. The set value of the clip value C that has been set to the value is determined to be the value determined in this step.
[0037]
As a result, in the subsequent step 208, the clip processing is performed using the clip value reset in step 405 instead of the initial value of the clip value set in step 202.
[0038]
As described above, when the luminance signal uniformity degree is equal to or lower than the threshold value, the clip value of the clip process is set smaller than the set value of the clip value at the time of normal camera shake correction, and is further reduced according to the focal length. The width of the control signal sent from the shake correction signal generator 2 to the correction lens 1 can be set small, that is, the shake correction range is narrowed. As a result, the degree of correction when the luminance signal uniformity is small can be reduced.
[0039]
As described above, in the present embodiment, when the imaging signal has a low contrast, the response characteristics of the control signal are changed based on both the determination result by the luminance signal determination unit and the clip processing, and the periphery at the time of shake correction Deterioration of the amount of light can be prevented.
[0040]
【The invention's effect】
As described above, according to the present invention, there is an excellent effect that it is possible to prevent the deterioration of the peripheral light amount at the time of shake correction when the imaging signal has a low contrast.
[Brief description of the drawings]
FIG. 1 is a block diagram illustrating an image motion correction apparatus according to a first embodiment of the present invention. FIG. 2 is a schematic diagram for explaining processing contents of a luminance uniformity degree determination according to the first embodiment of the present invention. FIG. 4 is a flowchart for explaining processing contents in shake correction signal generating unit 2 in Embodiment 1 of the present invention. FIG. 4 is a flowchart for explaining processing contents in shake correction signal generating unit 2 in Embodiment 2 of the present invention. FIG. 5 is a flowchart for explaining the processing contents in the shake correction signal generation unit 2 in Embodiment 3 of the present invention.
DESCRIPTION OF SYMBOLS 1 Correction lens 2 Shake correction signal generation part 3 Imaging lens 5 Imaging element 6 Signal processing part 7 Brightness uniformity degree determination part 8 Motion detection part

Claims

撮像装置の動きを検出する動き検出手段と、複数のレンズ群から構成され焦点距離が可変可能な撮像光学系と、前記撮像光学系の焦点距離を検出する焦点距離検出手段と、前記撮像光学系の出力を光電変換するための撮像素子と、撮像装置の動きに起因して発生する撮影画像の動きを補正する動き補正手段と、前記撮像素子からの輝度信号を複数の領域に分けて均一度合いを判別する輝度信号判別手段と、前記輝度信号判別手段で判別した輝度信号の均一度合いが所定のしきい値以下の場合に、前記動き補正手段による動き補正を制限する振れ補正信号発生手段を備えたことを特徴とする画像動き補正装置。Motion detection means for detecting the movement of the imaging device, an imaging optical system comprising a plurality of lens groups and having a variable focal length, a focal length detection means for detecting the focal length of the imaging optical system, and the imaging optical system An image sensor for photoelectrically converting the output of the image sensor, a motion correction means for correcting the motion of the captured image caused by the motion of the image capturing apparatus, and a uniformity degree by dividing the luminance signal from the image sensor into a plurality of regions And a shake correction signal generating means for limiting motion correction by the motion correction means when the degree of uniformity of the brightness signal determined by the brightness signal determination means is a predetermined threshold value or less. An image motion correction apparatus characterized by that.

前記振れ補正信号発生手段は、前記焦点距離検出手段で検出した焦点距離を基にズーム倍率を算出し、前記ズーム倍率が高い場合に前記動き補正手段による動き補正をさらに制限することを特徴とする請求項１記載の画像動き補正装置。The shake correction signal generation unit calculates a zoom magnification based on the focal length detected by the focal length detection unit, and further restricts the motion correction by the motion correction unit when the zoom magnification is high. The image motion correction apparatus according to claim 1.

撮像装置の動きを検出する動き検出手段と、複数のレンズ群から構成され焦点距離が可変可能な撮像光学系と、前記撮像光学系の焦点距離を検出する焦点距離検出手段と、前記撮像光学系の出力を光電変換するための撮像素子と、撮像装置の動きに起因して発生する撮影画像の動きを補正する動き補正手段と、前記撮像素子からの輝度信号を複数の領域に分けて均一度合いを判別する輝度信号判別手段と、前記輝度信号判別手段からの均一度合い判別結果と前記動き検出手段からの動き情報に基づき前記動き補正手段を制御する振れ補正信号発生手段とを備え、前記振れ補正信号発生手段は、前記動き検出手段の出力信号を積分するための積分手段を有し、前記輝度信号の判別手段による判別結果と前記焦点距離の両者に基づき前記積分の時定数を変えることで応答特性を変化させることを特徴とする画像動き補正装置。 Motion detection means for detecting the movement of the imaging device, an imaging optical system comprising a plurality of lens groups and having a variable focal length, a focal length detection means for detecting the focal length of the imaging optical system, and the imaging optical system An image sensor for photoelectrically converting the output of the image sensor, a motion correction means for correcting the motion of the captured image caused by the motion of the image capturing apparatus, and a uniformity degree by dividing the luminance signal from the image sensor into a plurality of regions And a shake correction signal generating means for controlling the motion correction means on the basis of the uniformity degree determination result from the brightness signal determination means and the motion information from the motion detection means. The signal generating means has integrating means for integrating the output signal of the motion detecting means, and based on both the determination result by the luminance signal determining means and the focal distance, Image motion compensation apparatus characterized by changing the response characteristics by changing the number.

振れ補正信号発生手段は、輝度信号判別手段で判別した輝度信号の均一度合いが小さい場合は積分の時定数を短く設定することを特徴とする請求項３記載の画像動き補正装置。4. The image motion correction apparatus according to claim 3, wherein the shake correction signal generation means sets the integration time constant to be short when the uniformity of the luminance signal determined by the luminance signal determination means is small.

撮像装置の動きを検出する動き検出手段と、複数のレンズ群から構成され焦点距離が可変可能な撮像光学系と、前記撮像光学系の焦点距離を検出する焦点距離検出手段と、前記撮像光学系の出力を光電変換するための撮像素子と、撮像装置の動きに起因して発生する撮影画像の動きを補正する動き補正手段と、前記撮像素子からの輝度信号を複数の領域に分けて均一度合いを判別する輝度信号判別手段と、前記輝度信号判別手段からの均一度合い判別結果と前記動き検出手段からの動き情報に基づき前記動き補正手段を制御する振れ補正信号発生手段とを備え、前記振れ補正信号発生手段は、その内部で発生する前記動き補正手段を制御するための制御信号のゲインを調整し、前記輝度信号判別手段による判別結果と前記焦点距離の両者に基づき前記制御信号のゲインを変えることで応答特性を変化させることを特徴とする画像動き補正装置。 Motion detection means for detecting the movement of the imaging device, an imaging optical system comprising a plurality of lens groups and having a variable focal length, a focal length detection means for detecting the focal length of the imaging optical system, and the imaging optical system An image sensor for photoelectrically converting the output of the image sensor, a motion correction means for correcting the motion of the captured image caused by the motion of the image capturing apparatus, and a uniformity degree by dividing the luminance signal from the image sensor into a plurality of regions And a shake correction signal generating means for controlling the motion correction means on the basis of the uniformity degree determination result from the brightness signal determination means and the motion information from the motion detection means. The signal generation means adjusts the gain of the control signal for controlling the motion correction means generated therein, and is based on both the determination result by the luminance signal determination means and the focal length. Image motion compensation apparatus characterized by changing the response characteristics by changing the gain of the feeder the control signal.

振れ補正信号発生手段は、輝度信号判別手段で判別した輝度信号の均一度合いが小さい場合は制御信号のゲインを小さく設定したことを特徴とする請求項５記載の画像動き補正装置。6. The image motion correcting apparatus according to claim 5, wherein the shake correction signal generating means sets the gain of the control signal to be small when the degree of uniformity of the luminance signal determined by the luminance signal determining means is small.

撮像装置の動きを検出する動き検出手段と、複数のレンズ群から構成され焦点距離が可変可能な撮像光学系と、前記撮像光学系の焦点距離を検出する焦点距離検出手段と、前記撮像光学系の出力を光電変換するための撮像素子と、撮像装置の動きに起因して発生する撮影画像の動きを補正する動き補正手段と、前記撮像素子からの輝度信号を複数の領域に分けて均一度合いを判別する輝度信号判別手段と、前記輝度信号判別手段からの均一度合い判別結果と前記動き検出手段からの動き情報に基づき前記動き補正手段を制御する振れ補正信号発生手段とを備え、前記振れ補正信号発生手段は、その内部で発生する前記動き補正手段を制御するための制御信号の信号幅を制限し、前記輝度信号判別手段による判別結果と前記焦点距離の両者に基づき前記信号幅を変えることで応答特性を変化させることを特徴とする画像動き補正装置。 Motion detection means for detecting the movement of the imaging device, an imaging optical system comprising a plurality of lens groups and having a variable focal length, a focal length detection means for detecting the focal length of the imaging optical system, and the imaging optical system An image sensor for photoelectrically converting the output of the image sensor, a motion correction means for correcting the motion of the captured image caused by the motion of the image capturing apparatus, and a uniformity degree by dividing the luminance signal from the image sensor into a plurality of regions And a shake correction signal generating means for controlling the motion correction means on the basis of the uniformity degree determination result from the brightness signal determination means and the motion information from the motion detection means. The signal generation means limits the signal width of the control signal for controlling the motion correction means generated therein, and is based on both the determination result by the luminance signal determination means and the focal length. Image motion compensation apparatus characterized by changing the response characteristics by changing the can the signal width.

振れ補正信号発生手段は、輝度信号判別手段で判別した輝度信号の均一度合いが小さい場合は制御信号の信号幅を小さく制限することを特徴とする請求項７記載の画像動き補正装置。8. The image motion correction apparatus according to claim 7, wherein the shake correction signal generation means limits the signal width of the control signal to be small when the uniformity of the luminance signal determined by the luminance signal determination means is small.