JPH07115583A - 手振れ補正装置を有するビデオカメラ - Google Patents
手振れ補正装置を有するビデオカメラInfo
- Publication number
- JPH07115583A JPH07115583A JP26226993A JP26226993A JPH07115583A JP H07115583 A JPH07115583 A JP H07115583A JP 26226993 A JP26226993 A JP 26226993A JP 26226993 A JP26226993 A JP 26226993A JP H07115583 A JPH07115583 A JP H07115583A
- Authority
- JP
- Japan
- Prior art keywords
- motion vector
- divergence
- average
- correlation value
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
(57)【要約】
【構成】 マイクロコンピュータ２６で、検出領域に有
効領域があると判断すれば、発散度を計算する。発散度
の大きさに応じて発散係数Ｈｋを段階的に設定し、有効
領域の部分動きベクトルの相加平均×Ｈｋを計算し、全
体動きベクトルを求める。発散度が所定値以上であれ
ば、４個の部分動きベクトルから最小のものを選択し、
それを全体動きベクトルとする。検出領域に有効領域が
なければ、前フィールドの全体動きベクトル×１以下の
係数を、現フィールドの全体動きベクトルとする。 【効果】 全体動きベクトルをより正確に求めることが
でき、手振れ量をより正確に検出できる。
効領域があると判断すれば、発散度を計算する。発散度
の大きさに応じて発散係数Ｈｋを段階的に設定し、有効
領域の部分動きベクトルの相加平均×Ｈｋを計算し、全
体動きベクトルを求める。発散度が所定値以上であれ
ば、４個の部分動きベクトルから最小のものを選択し、
それを全体動きベクトルとする。検出領域に有効領域が
なければ、前フィールドの全体動きベクトル×１以下の
係数を、現フィールドの全体動きベクトルとする。 【効果】 全体動きベクトルをより正確に求めることが
でき、手振れ量をより正確に検出できる。
Description
【０００１】
【産業上の利用分野】この発明は手振れ補正装置を有す
るビデオカメラに関し、特にたとえば民生用のカメラ一
体型ＶＴＲとして用いられる、手振れ補正装置を有する
ビデオカメラに関する。
るビデオカメラに関し、特にたとえば民生用のカメラ一
体型ＶＴＲとして用いられる、手振れ補正装置を有する
ビデオカメラに関する。
【０００２】
【従来の技術】撮像装置の振れ成分を検出する方法の一
例が、１９８９年の第２０回画像工学コンファレンスで
松下電器産業（株）から発表されている。この方法は、
特開昭６１−２０１５８１号〔Ｈ０４Ｎ ７／１３７〕
公報に記載されている代表点マッチング法から得られる
動きベクトルを使って、画像情報から撮像装置の振れ成
分を検出するものである。この発表では、画像情報から
得られる動きベクトルに基づいて手振れ補正をしてい
る。
例が、１９８９年の第２０回画像工学コンファレンスで
松下電器産業（株）から発表されている。この方法は、
特開昭６１−２０１５８１号〔Ｈ０４Ｎ ７／１３７〕
公報に記載されている代表点マッチング法から得られる
動きベクトルを使って、画像情報から撮像装置の振れ成
分を検出するものである。この発表では、画像情報から
得られる動きベクトルに基づいて手振れ補正をしてい
る。
【０００３】すなわち、この場合には、画面の４個の検
出領域を配置しており、１画面から４個の部分動きベク
トルを得る。そして、この４個の検出領域の部分動きベ
クトルの相加平均を画面の全体動きベクトルとしたり、
４個の部分動きベクトルのうち、中間の２個の部分動き
ベクトルの相加平均を画面の全体動きベクトルとしたり
して、手振れを補正している。
出領域を配置しており、１画面から４個の部分動きベク
トルを得る。そして、この４個の検出領域の部分動きベ
クトルの相加平均を画面の全体動きベクトルとしたり、
４個の部分動きベクトルのうち、中間の２個の部分動き
ベクトルの相加平均を画面の全体動きベクトルとしたり
して、手振れを補正している。
【０００４】
【発明が解決しようとする課題】しかし、たとえば画面
の左半分または右半分というように４個の検出領域内の
２領域に動く物体が存在するような場合、すなわち画面
内の一部分にのみ動く物体が存在するような場合には、
その動く物体に影響されて全体動きベクトルを正確に検
出することができず、手振れ量を誤検出する恐れがあっ
た。
の左半分または右半分というように４個の検出領域内の
２領域に動く物体が存在するような場合、すなわち画面
内の一部分にのみ動く物体が存在するような場合には、
その動く物体に影響されて全体動きベクトルを正確に検
出することができず、手振れ量を誤検出する恐れがあっ
た。
【０００５】それゆえに、この発明の主たる目的は、手
振れ量をより正確に検出できる、手振れ補正装置を有す
るビデオカメラを提供することである。
振れ量をより正確に検出できる、手振れ補正装置を有す
るビデオカメラを提供することである。
【０００６】
【課題を解決するための手段】この発明は、画面内に形
成された複数個の検出領域の各々の部分動きベクトルを
用いて全体動きベクトルを求める手振れ補正装置を有す
るビデオカメラであって、各部分動きベクトルの平均で
ある平均ベクトルを求める平均化手段、各部分動きベク
トルと平均ベクトルとの差の絶対値をそれぞれ加算しそ
の加算結果を加算した個数で除算して発散度を求める発
散度算出手段、発散度を閾値と比較する比較手段、およ
び比較手段での比較結果に応じて異なる方法で全体動き
ベクトルを検出する全体動きベクトル検出手段を備え
る、手振れ補正装置を有するビデオカメラである。
成された複数個の検出領域の各々の部分動きベクトルを
用いて全体動きベクトルを求める手振れ補正装置を有す
るビデオカメラであって、各部分動きベクトルの平均で
ある平均ベクトルを求める平均化手段、各部分動きベク
トルと平均ベクトルとの差の絶対値をそれぞれ加算しそ
の加算結果を加算した個数で除算して発散度を求める発
散度算出手段、発散度を閾値と比較する比較手段、およ
び比較手段での比較結果に応じて異なる方法で全体動き
ベクトルを検出する全体動きベクトル検出手段を備え
る、手振れ補正装置を有するビデオカメラである。
【０００７】
【作用】平均化手段で求めた平均ベクトルと各検出領域
の部分動きベクトルとを用いて、発散度算出手段で発散
度を求める。発散度が大きいということは各部分動きベ
クトルのばらつきが大きいことを示す。画面の一部分に
のみ動く物体が存在する場合にこの傾向がある。一方、
発散度が小さいということは各部分動きベクトルのばら
つきが小さいことを示す。画面内に動く物体が存在しな
い場合や、画面全体に動く物体が存在する場合にこの傾
向がある。
の部分動きベクトルとを用いて、発散度算出手段で発散
度を求める。発散度が大きいということは各部分動きベ
クトルのばらつきが大きいことを示す。画面の一部分に
のみ動く物体が存在する場合にこの傾向がある。一方、
発散度が小さいということは各部分動きベクトルのばら
つきが小さいことを示す。画面内に動く物体が存在しな
い場合や、画面全体に動く物体が存在する場合にこの傾
向がある。
【０００８】したがって、発散度が大きい場合の部分動
きベクトルを用いて全体動きベクトルを求めると、信頼
性の低い全体動きベクトルが得られる。一方、発散度が
小さい場合の部分動きベクトルを用いて全体動きベクト
ルを求めると、信頼性の高い全体動きベクトルが得られ
る。したがって、発散度が大きい場合には、たとえば部
分動きベクトルの平均に小さい係数を掛けて全体動きベ
クトルの値を小さくする。また、発散度が小さい場合に
は、たとえば部分動きベクトルの平均に大きい係数を掛
けて全体動きベクトルの値を大きくする。すなわち、発
散度が大きい場合の全体動きベクトルをできるだけ用い
ないようにし、反対に発散度が小さい場合の全体動きベ
クトルはできるだけ用いるようにする。なお、発散度の
大きさの程度は比較手段で決定され、その比較結果に応
じて全体動きベクトル検出手段で全体動きベクトルが検
出される。
きベクトルを用いて全体動きベクトルを求めると、信頼
性の低い全体動きベクトルが得られる。一方、発散度が
小さい場合の部分動きベクトルを用いて全体動きベクト
ルを求めると、信頼性の高い全体動きベクトルが得られ
る。したがって、発散度が大きい場合には、たとえば部
分動きベクトルの平均に小さい係数を掛けて全体動きベ
クトルの値を小さくする。また、発散度が小さい場合に
は、たとえば部分動きベクトルの平均に大きい係数を掛
けて全体動きベクトルの値を大きくする。すなわち、発
散度が大きい場合の全体動きベクトルをできるだけ用い
ないようにし、反対に発散度が小さい場合の全体動きベ
クトルはできるだけ用いるようにする。なお、発散度の
大きさの程度は比較手段で決定され、その比較結果に応
じて全体動きベクトル検出手段で全体動きベクトルが検
出される。
【０００９】
【発明の効果】この発明によれば、発散度を算出するこ
とで画面の状態を把握して発散度に応じた方法で全体動
きベクトルを検出するので、全体動きベクトルをより正
確に検出できる。したがって、手振れ量をより正確に検
出できる。この発明の上述の目的，その他の目的，特徴
および利点は、図面を参照して行う以下の実施例の詳細
な説明から一層明らかとなろう。
とで画面の状態を把握して発散度に応じた方法で全体動
きベクトルを検出するので、全体動きベクトルをより正
確に検出できる。したがって、手振れ量をより正確に検
出できる。この発明の上述の目的，その他の目的，特徴
および利点は、図面を参照して行う以下の実施例の詳細
な説明から一層明らかとなろう。
【００１０】
【実施例】図１に示すこの実施例のビデオカメラ１０
は、レンズ１４から入力される被写体（図示せず）から
の光信号を電気信号に変換するＣＣＤのような固体撮像
素子１２を含む。固体撮像素子１２からの電気信号はカ
メラ回路１６に入力される。カメラ回路１６は、周知の
ように、サンプルホールド回路を含み、固体撮像素子１
２からの電気信号をサンプルホールドする。サンプルホ
ールドされた電気信号のレベルがＡＧＣによって調整さ
れるとともに、さらに同期信号付加回路によって同期信
号が付加される。このようにして、カメラ回路１６は固
体撮像素子１２からのイメージ信号をアナログビデオ信
号に変換する。このアナログビデオ信号は、さらに、Ａ
／Ｄ変換器１８によってディジタルビデオ信号に変換さ
れる。ディジタルビデオ信号は動き検出回路２０に与え
られる。動き検出回路２０としては、たとえば三洋電機
株式会社製のＬＳＩ“Ｌ７Ａ０９４８”が利用される。
この動き検出回路２０を構成する同じＬＳＩに含まれる
メモリ制御回路２２の制御の下で、ディジタルビデオ信
号がフィールド順次にフィールドメモリ２４に書き込ま
れる。
は、レンズ１４から入力される被写体（図示せず）から
の光信号を電気信号に変換するＣＣＤのような固体撮像
素子１２を含む。固体撮像素子１２からの電気信号はカ
メラ回路１６に入力される。カメラ回路１６は、周知の
ように、サンプルホールド回路を含み、固体撮像素子１
２からの電気信号をサンプルホールドする。サンプルホ
ールドされた電気信号のレベルがＡＧＣによって調整さ
れるとともに、さらに同期信号付加回路によって同期信
号が付加される。このようにして、カメラ回路１６は固
体撮像素子１２からのイメージ信号をアナログビデオ信
号に変換する。このアナログビデオ信号は、さらに、Ａ
／Ｄ変換器１８によってディジタルビデオ信号に変換さ
れる。ディジタルビデオ信号は動き検出回路２０に与え
られる。動き検出回路２０としては、たとえば三洋電機
株式会社製のＬＳＩ“Ｌ７Ａ０９４８”が利用される。
この動き検出回路２０を構成する同じＬＳＩに含まれる
メモリ制御回路２２の制御の下で、ディジタルビデオ信
号がフィールド順次にフィールドメモリ２４に書き込ま
れる。
【００１１】動き検出回路２０は、たとえば周知の代表
点マッチング法を用いて図３に示す４個の各検出領域
Ａ，Ｂ，ＣおよびＤ毎に、最も高い相関度（相関値は最
小）を有する１点およびその周囲の４点の位置、ならび
に各相関値を算出する。動き検出回路２０からの位置デ
ータおよび相関値データは、マイクロコンピュータ２６
に与えられる。
点マッチング法を用いて図３に示す４個の各検出領域
Ａ，Ｂ，ＣおよびＤ毎に、最も高い相関度（相関値は最
小）を有する１点およびその周囲の４点の位置、ならび
に各相関値を算出する。動き検出回路２０からの位置デ
ータおよび相関値データは、マイクロコンピュータ２６
に与えられる。
【００１２】すなわち、図２を参照して、動き検出回路
２０は、Ａ／Ｄ変換器１８からのディジタルビデオ信号
を受ける入力端２８を含み、この入力端２８から入力さ
れたディジタルビデオ信号はフィルタ３０を通して代表
点メモリ３２および減算回路３４に与えられる。フィル
タ３０は、一種のディジタルローパスフィルタであり、
Ｓ／Ｎ比を改善し、少ない代表点で十分な検出精度を確
保するために用いられる。代表点メモリ３２は、図３に
示す各検出領域Ａ−Ｄの各々の範囲内で複数の代表点を
抽出（この実施例では、各検出領域Ａ−Ｄの各々を３０
分割し、したがって、３０個の代表点を抽出）し、その
位置データと輝度データとを記憶する。３０分割して形
成された各検出エリア４２（図４）は、たとえば３２画
素×１６行で構成される。
２０は、Ａ／Ｄ変換器１８からのディジタルビデオ信号
を受ける入力端２８を含み、この入力端２８から入力さ
れたディジタルビデオ信号はフィルタ３０を通して代表
点メモリ３２および減算回路３４に与えられる。フィル
タ３０は、一種のディジタルローパスフィルタであり、
Ｓ／Ｎ比を改善し、少ない代表点で十分な検出精度を確
保するために用いられる。代表点メモリ３２は、図３に
示す各検出領域Ａ−Ｄの各々の範囲内で複数の代表点を
抽出（この実施例では、各検出領域Ａ−Ｄの各々を３０
分割し、したがって、３０個の代表点を抽出）し、その
位置データと輝度データとを記憶する。３０分割して形
成された各検出エリア４２（図４）は、たとえば３２画
素×１６行で構成される。
【００１３】減算回路３４は、代表点メモリ３２から与
えられる前フィールドの代表点の輝度データと入力端２
８から与えられる現フィールドの全ての画素の輝度デー
タとを減算し、その絶対値をとる。すなわち、現フィー
ルドの輝度データと前フィールドの輝度データとの間で
輝度差を求める。求めた輝度差を累積加算回路３６に与
える。累積加算回路３６では、同じ検出領域内の各検出
エリア４２の同じ位置の画素について求めた輝度差を累
積加算（この実施例では３０個）し、相関値データとし
て出力する。相関値データは演算回路３８に与えられ、
この演算回路３８は最小相関値および平均相関値をそれ
ぞれ各検出領域Ａ−Ｄ毎に演算するとともに、最小相関
値を示す画素の位置データを各検出領域Ａ−Ｄ毎に求め
る。このようにして得られた最小相関値，平均相関値お
よび位置データが出力端４０から前述のマイクロコンピ
ュータ２６に与えられる。ただし、このような相関値の
計算は、先に述べたＬＳＩ“Ｌ７Ａ０９４８”によって
実行される。
えられる前フィールドの代表点の輝度データと入力端２
８から与えられる現フィールドの全ての画素の輝度デー
タとを減算し、その絶対値をとる。すなわち、現フィー
ルドの輝度データと前フィールドの輝度データとの間で
輝度差を求める。求めた輝度差を累積加算回路３６に与
える。累積加算回路３６では、同じ検出領域内の各検出
エリア４２の同じ位置の画素について求めた輝度差を累
積加算（この実施例では３０個）し、相関値データとし
て出力する。相関値データは演算回路３８に与えられ、
この演算回路３８は最小相関値および平均相関値をそれ
ぞれ各検出領域Ａ−Ｄ毎に演算するとともに、最小相関
値を示す画素の位置データを各検出領域Ａ−Ｄ毎に求め
る。このようにして得られた最小相関値，平均相関値お
よび位置データが出力端４０から前述のマイクロコンピ
ュータ２６に与えられる。ただし、このような相関値の
計算は、先に述べたＬＳＩ“Ｌ７Ａ０９４８”によって
実行される。
【００１４】そして、マイクロコンピュータ２６では、
位置データおよび相関値データに基づいて、画面すなわ
ちイメージフィールド４４（図３）全体の動きベクトル
（以下、単に「全体動きベクトル」という）を計算す
る。まず、最小相関値を示す画素の位置データに基づい
て、最小相関値を示す画素の、代表点に対する偏移を求
め、その偏移を部分動きベクトルとする。なお、部分動
きベクトルの検出精度をよくするために、最小相関値を
有する画素の周囲４画素の相関値を用いて内挿補間し、
最小相関値を有する画素の位置データを計算する。
位置データおよび相関値データに基づいて、画面すなわ
ちイメージフィールド４４（図３）全体の動きベクトル
（以下、単に「全体動きベクトル」という）を計算す
る。まず、最小相関値を示す画素の位置データに基づい
て、最小相関値を示す画素の、代表点に対する偏移を求
め、その偏移を部分動きベクトルとする。なお、部分動
きベクトルの検出精度をよくするために、最小相関値を
有する画素の周囲４画素の相関値を用いて内挿補間し、
最小相関値を有する画素の位置データを計算する。
【００１５】そして、マイクロコンピュータ２６は、平
均相関値を最小相関値で除算した値が一定の閾値より大
きいか否か，平均相関値が所定値以上であるか否か，お
よび後述の傾きＸが所定値Ｐ以上であるか否かを各検出
領域Ａ−Ｄ毎に検出し、各検出領域Ａ−Ｄからの部分動
きベクトルが手振れ以外の動く物体等によって誤検出さ
れずに信頼できるか否かすなわち各検出領域Ａ−Ｄが有
効領域か否かを判断する。ここで、マイクロコンピュー
タ２６は、後述の傾きＸが所定値Ｐ以上であるか否かを
各検出領域Ａ−Ｄ毎に検出することを、繰り返し模様の
被写体を検出する一方法とする。平均相関値を最小相関
値で除算した値が一定の閾値より大きく，平均相関値が
所定値以上でありかつ傾きＸが所定値Ｐ以上であれば、
その検出領域は有効領域と判断される。
均相関値を最小相関値で除算した値が一定の閾値より大
きいか否か，平均相関値が所定値以上であるか否か，お
よび後述の傾きＸが所定値Ｐ以上であるか否かを各検出
領域Ａ−Ｄ毎に検出し、各検出領域Ａ−Ｄからの部分動
きベクトルが手振れ以外の動く物体等によって誤検出さ
れずに信頼できるか否かすなわち各検出領域Ａ−Ｄが有
効領域か否かを判断する。ここで、マイクロコンピュー
タ２６は、後述の傾きＸが所定値Ｐ以上であるか否かを
各検出領域Ａ−Ｄ毎に検出することを、繰り返し模様の
被写体を検出する一方法とする。平均相関値を最小相関
値で除算した値が一定の閾値より大きく，平均相関値が
所定値以上でありかつ傾きＸが所定値Ｐ以上であれば、
その検出領域は有効領域と判断される。
【００１６】具体的には、有効領域か否かは以下のよう
に判断される。まず、画面のコントラストが低いときに
は、輝度差が小さいので、相関値が小さくなる。たとえ
ば、画面全体が白いときには相関値は小さくなる。この
ような場合には、信頼性がなくなるため、平均相関値≧
所定値のときに有効と判断される。なお、所定値は実験
により決定される。このようにして、平均相関値から低
コントラストか否かを判断する。
に判断される。まず、画面のコントラストが低いときに
は、輝度差が小さいので、相関値が小さくなる。たとえ
ば、画面全体が白いときには相関値は小さくなる。この
ような場合には、信頼性がなくなるため、平均相関値≧
所定値のときに有効と判断される。なお、所定値は実験
により決定される。このようにして、平均相関値から低
コントラストか否かを判断する。
【００１７】また、検出領域内に動く物体があるときに
は、動く物体の占める部分と占めない部分とで相関値が
異なり、かつ動く物体の占める部分は様々な相関値をと
り、その相関値は一般的に大きな値となる（相関度は低
い）。したがって、検出領域内に動く物体があるときに
は、最小相関値が大きくなる可能性が高く、検出領域内
の部分動きベクトルを誤検出する恐れがある。部分動き
ベクトルを誤検出すると、全体動きベクトルを誤検出し
てしまう。しかし、平均相関値が大きいときには最小相
関値がある程度大きくても信頼できる。一方、平均相関
値が小さいときには最小相関値はより小さくなければ信
頼できない。したがって、具体的には、（平均相関値）
／（最小相関値）＞７のときに有効と判断し、この条件
を満たさない検出領域の部分動きベクトルを用いないよ
うにして、上述の誤検出による弊害を防止する。このよ
うにして、（平均相関値）／（最小相関値）を求めて、
動く物体の有無を判断する。
は、動く物体の占める部分と占めない部分とで相関値が
異なり、かつ動く物体の占める部分は様々な相関値をと
り、その相関値は一般的に大きな値となる（相関度は低
い）。したがって、検出領域内に動く物体があるときに
は、最小相関値が大きくなる可能性が高く、検出領域内
の部分動きベクトルを誤検出する恐れがある。部分動き
ベクトルを誤検出すると、全体動きベクトルを誤検出し
てしまう。しかし、平均相関値が大きいときには最小相
関値がある程度大きくても信頼できる。一方、平均相関
値が小さいときには最小相関値はより小さくなければ信
頼できない。したがって、具体的には、（平均相関値）
／（最小相関値）＞７のときに有効と判断し、この条件
を満たさない検出領域の部分動きベクトルを用いないよ
うにして、上述の誤検出による弊害を防止する。このよ
うにして、（平均相関値）／（最小相関値）を求めて、
動く物体の有無を判断する。
【００１８】さらに、マイクロコンピュータ２６では、
繰り返し模様の被写体（たとえばストライプ画像等）を
検出するために、最小相関値を有する１点とその周囲の
４点の相関値を用いる。すなわち、図５に示すように、
最小相関値をＭ，その左右上下の４点の相関値をそれぞ
れＬ，Ｒ，Ｕ，Ｄとすると、それぞれの相関値の差，す
なわちＬ−Ｍ，Ｒ−Ｍ，Ｕ−ＭおよびＤ−Ｍを計算し、
そのうちの最小値を傾きＸとする。その傾きＸを、フィ
ールドテストによって求められた所定値Ｐ（この実施例
ではＰ＝４）と比較する。傾きＸが、所定値Ｐ以上であ
ればその検出領域は有効領域と判断し、所定値Ｐより小
さければその検出領域は無効領域と判断する。
繰り返し模様の被写体（たとえばストライプ画像等）を
検出するために、最小相関値を有する１点とその周囲の
４点の相関値を用いる。すなわち、図５に示すように、
最小相関値をＭ，その左右上下の４点の相関値をそれぞ
れＬ，Ｒ，Ｕ，Ｄとすると、それぞれの相関値の差，す
なわちＬ−Ｍ，Ｒ−Ｍ，Ｕ−ＭおよびＤ−Ｍを計算し、
そのうちの最小値を傾きＸとする。その傾きＸを、フィ
ールドテストによって求められた所定値Ｐ（この実施例
ではＰ＝４）と比較する。傾きＸが、所定値Ｐ以上であ
ればその検出領域は有効領域と判断し、所定値Ｐより小
さければその検出領域は無効領域と判断する。
【００１９】このような３つの条件によって、検出領域
が有効領域か否かは判断される。そして、マイクロコン
ピュータ２６で、４個の部分動きベクトルの平均（平均
ベクトル）および有効領域の部分動きベクトルの平均を
それぞれ求める。また、マイクロコンピュータ２６によ
って発散度が求められる。発散度によって、各検出領域
の部分動きベクトルのばらつきの程度が評価される。発
散度は数１によって表される。
が有効領域か否かは判断される。そして、マイクロコン
ピュータ２６で、４個の部分動きベクトルの平均（平均
ベクトル）および有効領域の部分動きベクトルの平均を
それぞれ求める。また、マイクロコンピュータ２６によ
って発散度が求められる。発散度によって、各検出領域
の部分動きベクトルのばらつきの程度が評価される。発
散度は数１によって表される。
【００２０】
【数１】Ｘ方向の発散度＝Σ（｜各検出領域のＸ方向部
分動きベクトル−Ｘ方向平均ベクトル｜）／領域数 Ｙ方向の発散度＝Σ（｜各検出領域のＹ方向部分動きベ
クトル−Ｙ方向平均ベクトル｜）／領域数 ここで、Ｘ方向部分動きベクトルとは部分動きベクトル
のＸ方向成分を、Ｙ方向部分動きベクトルとは部分動き
ベクトルのＹ方向成分をそれぞれ示す。また、Ｘ方向平
均ベクトルとは平均ベクトルのＸ方向成分を、Ｙ方向平
均ベクトルとは平均ベクトルのＹ方向成分をそれぞれ示
す。
分動きベクトル−Ｘ方向平均ベクトル｜）／領域数 Ｙ方向の発散度＝Σ（｜各検出領域のＹ方向部分動きベ
クトル−Ｙ方向平均ベクトル｜）／領域数 ここで、Ｘ方向部分動きベクトルとは部分動きベクトル
のＸ方向成分を、Ｙ方向部分動きベクトルとは部分動き
ベクトルのＹ方向成分をそれぞれ示す。また、Ｘ方向平
均ベクトルとは平均ベクトルのＸ方向成分を、Ｙ方向平
均ベクトルとは平均ベクトルのＹ方向成分をそれぞれ示
す。
【００２１】この発散度に応じて、数２に示すような発
散係数Ｈｋを有効領域の部分動きベクトルの平均に乗じ
たものを、画面の全体動きベクトルとする。全体動きベ
クトルは、フィールド間の動き量とその向きを表す。
散係数Ｈｋを有効領域の部分動きベクトルの平均に乗じ
たものを、画面の全体動きベクトルとする。全体動きベ
クトルは、フィールド間の動き量とその向きを表す。
【００２２】
【数２】1) ０≦発散度＜８の場合 Ｈｋ＝１ 2) ８≦発散度＜１６の場合 Ｈｋ＝０．７５ 3) １６≦発散度＜２４の場合 Ｈｋ＝０．５ 4) ２４≦発散度＜３２の場合 Ｈｋ＝０．２５ なお、発散度が３２以上の場合には、４個の部分動きベ
クトルのうち最小のものを全体動きベクトルとする。
クトルのうち最小のものを全体動きベクトルとする。
【００２３】このように、有効領域があるときには、全
体動きベクトルはたとえば有効領域の部分動きベクトル
の平均に発散係数Ｈｋを掛けたものを用いるが、有効領
域がないときには、全体動きベクトルはたとえば（現フ
ィールドの全体動きベクトル×１以下の係数）の値を用
い得る。ここで、１以下の係数としては、「０．９７」
が好ましい。
体動きベクトルはたとえば有効領域の部分動きベクトル
の平均に発散係数Ｈｋを掛けたものを用いるが、有効領
域がないときには、全体動きベクトルはたとえば（現フ
ィールドの全体動きベクトル×１以下の係数）の値を用
い得る。ここで、１以下の係数としては、「０．９７」
が好ましい。
【００２４】なお、発散度の大きさによって、発散係数
を段階的に設定するのは以下の理由による。発散度が大
きいということは各部分動きベクトルのばらつきが大き
いことを示す。画面の一部分にのみ動く物体が存在する
場合にこの傾向がある。一方、発散度が小さいというこ
とは各部分動きベクトルのばらつきが小さいことを示
す。画面内に動く物体が存在しない場合や、画面全体に
動く物体が存在する場合にこの傾向がある。
を段階的に設定するのは以下の理由による。発散度が大
きいということは各部分動きベクトルのばらつきが大き
いことを示す。画面の一部分にのみ動く物体が存在する
場合にこの傾向がある。一方、発散度が小さいというこ
とは各部分動きベクトルのばらつきが小さいことを示
す。画面内に動く物体が存在しない場合や、画面全体に
動く物体が存在する場合にこの傾向がある。
【００２５】したがって、発散度が大きい場合の部分動
きベクトルを用いて全体動きベクトルを求めると、信頼
性の低い全体動きベクトルが得られる。一方、発散度が
小さい場合の部分動きベクトルを用いて全体動きベクト
ルを求めると、信頼性の高い全体動きベクトルが得られ
る。したがって、発散度が大きい場合には、部分動きベ
クトルの平均に小さい発散係数Ｈｋを掛けて全体動きベ
クトルの値を小さくする。また、発散度が小さい場合に
は、たとえば部分動きベクトルの平均に大きい発散係数
Ｈｋを掛けて全体動きベクトルの値を大きくする。すな
わち、発散度が大きい場合の全体動きベクトルをできる
だけ用いないようにし、反対に発散度が小さい場合の全
体動きベクトルはできるだけ用いるようにすることで、
総じて、信頼性の高い全体動きベクトルが得られるから
である。
きベクトルを用いて全体動きベクトルを求めると、信頼
性の低い全体動きベクトルが得られる。一方、発散度が
小さい場合の部分動きベクトルを用いて全体動きベクト
ルを求めると、信頼性の高い全体動きベクトルが得られ
る。したがって、発散度が大きい場合には、部分動きベ
クトルの平均に小さい発散係数Ｈｋを掛けて全体動きベ
クトルの値を小さくする。また、発散度が小さい場合に
は、たとえば部分動きベクトルの平均に大きい発散係数
Ｈｋを掛けて全体動きベクトルの値を大きくする。すな
わち、発散度が大きい場合の全体動きベクトルをできる
だけ用いないようにし、反対に発散度が小さい場合の全
体動きベクトルはできるだけ用いるようにすることで、
総じて、信頼性の高い全体動きベクトルが得られるから
である。
【００２６】このようにして求められた全体動きベクト
ルはメモリ制御回路２２に与えられる。そして、メモリ
制御回路２２では、全体動きベクトルに基づいてフィー
ルドメモリ２４の読み出し開始アドレスを決定し、その
アドレスからフィールドメモリ２４に蓄えられたディジ
タルビデオ信号を読み出す。すなわち、メモリ制御回路
２２は、マイクロコンピュータ２６によって計算された
全体動きベクトルに従って、フィールドメモリ２４のデ
ィジタルビデオ信号によって形成される抽出エリア４６
（図６）を移動する。
ルはメモリ制御回路２２に与えられる。そして、メモリ
制御回路２２では、全体動きベクトルに基づいてフィー
ルドメモリ２４の読み出し開始アドレスを決定し、その
アドレスからフィールドメモリ２４に蓄えられたディジ
タルビデオ信号を読み出す。すなわち、メモリ制御回路
２２は、マイクロコンピュータ２６によって計算された
全体動きベクトルに従って、フィールドメモリ２４のデ
ィジタルビデオ信号によって形成される抽出エリア４６
（図６）を移動する。
【００２７】ただし、フィールドメモリ２４から読み出
されたディジタルビデオ信号そのままでは抽出エリア４
６を移動できないので、電子ズーム回路４８（図１）を
用いる。図６を参照して、電子ズーム回路４８はイメー
ジフィールド４４の大きさに対して、ズーム倍率に従っ
て画像が拡大された抽出エリア４６を設定する。この抽
出エリア４６の位置は、イメージフィールド４４の範囲
内では、フィールドメモリ２４の読み出し開始アドレス
を変更することによって、自由に移動できる。そして、
抽出ディジタルビデオ信号に基づいてイメージフィール
ド４４全体のビデオ信号を得るために、フィールドメモ
リ２４から読み出したディジタルビデオ信号に基づいて
内挿補間法を用いて画像を拡大する。
されたディジタルビデオ信号そのままでは抽出エリア４
６を移動できないので、電子ズーム回路４８（図１）を
用いる。図６を参照して、電子ズーム回路４８はイメー
ジフィールド４４の大きさに対して、ズーム倍率に従っ
て画像が拡大された抽出エリア４６を設定する。この抽
出エリア４６の位置は、イメージフィールド４４の範囲
内では、フィールドメモリ２４の読み出し開始アドレス
を変更することによって、自由に移動できる。そして、
抽出ディジタルビデオ信号に基づいてイメージフィール
ド４４全体のビデオ信号を得るために、フィールドメモ
リ２４から読み出したディジタルビデオ信号に基づいて
内挿補間法を用いて画像を拡大する。
【００２８】このようにして、イメージフィールド４４
内の任意の抽出エリア４６のイメージを電子ズーム回路
４８で電子的にズームすることによって、イメージフィ
ールド４４と抽出エリア４６との差に相当する補正可能
範囲５０が形成され得る。ビデオカメラ１０を操作する
人の手の振動に応じて、図７に示すようにビデオカメラ
１０に手振れが生じると、そのビデオカメラ１０からの
画像にぶれを生じ、結果的に、イメージフィールド４４
内の左下方に目的の人物が存在する場合（図７上）や、
イメージフィールド４４の右上方に目的の人物が存在す
る場合（図７下）などが生じる。したがって、各フィー
ルド毎に抽出エリア４６を、マイクロコンピュータ２６
によって計算した全体動きベクトルに応じて移動させる
ことによって、図７右に示すように、抽出エリア４６に
は目的の人物がちょうど収まることになる。
内の任意の抽出エリア４６のイメージを電子ズーム回路
４８で電子的にズームすることによって、イメージフィ
ールド４４と抽出エリア４６との差に相当する補正可能
範囲５０が形成され得る。ビデオカメラ１０を操作する
人の手の振動に応じて、図７に示すようにビデオカメラ
１０に手振れが生じると、そのビデオカメラ１０からの
画像にぶれを生じ、結果的に、イメージフィールド４４
内の左下方に目的の人物が存在する場合（図７上）や、
イメージフィールド４４の右上方に目的の人物が存在す
る場合（図７下）などが生じる。したがって、各フィー
ルド毎に抽出エリア４６を、マイクロコンピュータ２６
によって計算した全体動きベクトルに応じて移動させる
ことによって、図７右に示すように、抽出エリア４６に
は目的の人物がちょうど収まることになる。
【００２９】このようにして電子ズーム回路４８から出
力されるディジタルビデオ信号を、Ｄ／Ａ変換器５２に
よってアナログ信号に変換して出力端子５４から出力す
る。このようなビデオカメラ１０のマイクロコンピュー
タ２６での主要な動作を図８を参照して説明する。ま
ず、ステップＳ１において、４個の各検出領域（Ａ−
Ｄ）が有効領域か無効領域かを判断する。このとき上述
のように、平均相関値を最小相関値で除算した値が一定
の閾値より大きく、平均相関値が所定値以上でありかつ
傾きＸが所定Ｐ以上であれば、その検出領域を有効領域
と判断する。これらの条件のうち１つでも満たさない条
件があればその検出領域を無効領域と判断する。
力されるディジタルビデオ信号を、Ｄ／Ａ変換器５２に
よってアナログ信号に変換して出力端子５４から出力す
る。このようなビデオカメラ１０のマイクロコンピュー
タ２６での主要な動作を図８を参照して説明する。ま
ず、ステップＳ１において、４個の各検出領域（Ａ−
Ｄ）が有効領域か無効領域かを判断する。このとき上述
のように、平均相関値を最小相関値で除算した値が一定
の閾値より大きく、平均相関値が所定値以上でありかつ
傾きＸが所定Ｐ以上であれば、その検出領域を有効領域
と判断する。これらの条件のうち１つでも満たさない条
件があればその検出領域を無効領域と判断する。
【００３０】そして、ステップＳ３において、有効領域
があるか否かを判断し、有効領域が１つでもあればステ
ップＳ５に進む。ステップＳ５において、発散度を計算
する。発散度は、数１に示すように、Ｘ方向の発散度と
Ｙ方向の発散度とがそれぞれ独立して計算される。ステ
ップＳ７において０≦発散度＜８であれば、ステップＳ
９において発散係数Ｈｋ＝１とし、ステップＳ１１に進
む。ステップＳ７において０≦発散度＜８でなければ、
ステップＳ１３に進む。ステップＳ１３において８≦発
散度＜１６であれば、ステップＳ１５において発散係数
Ｈｋ＝０．７５とし、ステップＳ１１に進む。ステップ
Ｓ１３において８≦発散度＜１６でなければ、ステップ
Ｓ１７に進む。ステップＳ１７において１６≦発散度＜
２４であれば、ステップＳ１９において発散係数Ｈｋ＝
０．５とし、ステップＳ１１に進む。ステップＳ１９に
おいて１６≦発散度＜２４でなければ、ステップＳ２１
に進む。ステップＳ２１において２４≦発散度＜３２で
あれば、ステップＳ２３において発散係数Ｈｋ＝０．２
５とし、ステップＳ１１に進む。そして、ステップＳ１
１において、有効領域の部分動きベクトルの相加平均×
Ｈｋを求める。ステップＳ１１の処理を、Ｘ方向部分動
きベクトルおよびＹ方向部分動きベクトルのそれぞれに
ついて独立して行い、Ｘ方向について行ったステップＳ
１１の結果とＹ方向について行ったステップＳ１１の結
果とを合成して、全体動きベクトルが得られ、終了す
る。
があるか否かを判断し、有効領域が１つでもあればステ
ップＳ５に進む。ステップＳ５において、発散度を計算
する。発散度は、数１に示すように、Ｘ方向の発散度と
Ｙ方向の発散度とがそれぞれ独立して計算される。ステ
ップＳ７において０≦発散度＜８であれば、ステップＳ
９において発散係数Ｈｋ＝１とし、ステップＳ１１に進
む。ステップＳ７において０≦発散度＜８でなければ、
ステップＳ１３に進む。ステップＳ１３において８≦発
散度＜１６であれば、ステップＳ１５において発散係数
Ｈｋ＝０．７５とし、ステップＳ１１に進む。ステップ
Ｓ１３において８≦発散度＜１６でなければ、ステップ
Ｓ１７に進む。ステップＳ１７において１６≦発散度＜
２４であれば、ステップＳ１９において発散係数Ｈｋ＝
０．５とし、ステップＳ１１に進む。ステップＳ１９に
おいて１６≦発散度＜２４でなければ、ステップＳ２１
に進む。ステップＳ２１において２４≦発散度＜３２で
あれば、ステップＳ２３において発散係数Ｈｋ＝０．２
５とし、ステップＳ１１に進む。そして、ステップＳ１
１において、有効領域の部分動きベクトルの相加平均×
Ｈｋを求める。ステップＳ１１の処理を、Ｘ方向部分動
きベクトルおよびＹ方向部分動きベクトルのそれぞれに
ついて独立して行い、Ｘ方向について行ったステップＳ
１１の結果とＹ方向について行ったステップＳ１１の結
果とを合成して、全体動きベクトルが得られ、終了す
る。
【００３１】一方、ステップＳ２１において、２４≦発
散度＜３２でなければ、ステップＳ２５に進む。ステッ
プＳ２５において、４個の部分動きベクトルから最小の
ものを選択し、それを全体動きベクトルとして終了す
る。一方、ステップＳ３において、有効領域がない場合
には、ステップＳ２７に進む。ステップＳ２７におい
て、前フィールドの全体動きベクトルに１以下の係数を
掛けたものを、現フィールドの全体動きベクトルとして
終了する。ここで、１以下の係数としては、好ましくは
「０．９７」が用いられ得る。
散度＜３２でなければ、ステップＳ２５に進む。ステッ
プＳ２５において、４個の部分動きベクトルから最小の
ものを選択し、それを全体動きベクトルとして終了す
る。一方、ステップＳ３において、有効領域がない場合
には、ステップＳ２７に進む。ステップＳ２７におい
て、前フィールドの全体動きベクトルに１以下の係数を
掛けたものを、現フィールドの全体動きベクトルとして
終了する。ここで、１以下の係数としては、好ましくは
「０．９７」が用いられ得る。
【００３２】このようなビデオカメラ１０によれば、た
とえば４個の検出領域中２個の検出領域に動く物体が存
在した場合においても、動く物体の影響を受けにくくな
り、手振れ量をより正確に検出できる。なお、有効領域
か無効領域かに拘わらず、各検出領域の部分動きベクト
ルの平均に発散係数Ｈｋを掛けたものを全体動きベクト
ルとしてもよい。特に、有効領域か無効領域かを判断し
ない場合に有効となる。
とえば４個の検出領域中２個の検出領域に動く物体が存
在した場合においても、動く物体の影響を受けにくくな
り、手振れ量をより正確に検出できる。なお、有効領域
か無効領域かに拘わらず、各検出領域の部分動きベクト
ルの平均に発散係数Ｈｋを掛けたものを全体動きベクト
ルとしてもよい。特に、有効領域か無効領域かを判断し
ない場合に有効となる。
【００３３】また、発散度と比較される値は数２のもの
に限定されず、また、発散係数Ｈｋも数２のものに限定
されないことはいうまでもない。
に限定されず、また、発散係数Ｈｋも数２のものに限定
されないことはいうまでもない。
【図１】この発明の一実施例を示すブロック図である。
【図２】図１実施例の動き検出回路を示すブロック図で
ある。
ある。
【図３】電子ズームの原理を示し、イメージフィールド
内の検出領域を示す図解図である。
内の検出領域を示す図解図である。
【図４】電子ズームの原理を示し、検出領域内の代表点
およびサンプリング点を示す図解図である。
およびサンプリング点を示す図解図である。
【図５】最小相関値を有する画素とその周囲の４画素と
を用いて繰り返し模様の被写体を検出する方法を説明す
るための図解図である。
を用いて繰り返し模様の被写体を検出する方法を説明す
るための図解図である。
【図６】手振れ補正の原理を示す図解図である。
【図７】代表点マッチング法を適用するイメージフィー
ルド内の各ブロックを示す図解図である。
ルド内の各ブロックを示す図解図である。
【図８】この実施例の主要な動作を示すフロー図であ
る。
る。
１０ …ビデオカメラ ２０ …動き検出回路 ２２ …メモリ制御回路 ２４ …フィールドメモリ ２６ …マイクロコンピュータ ４４ …イメージフィールド ４６ …抽出エリア ４８ …電子ズーム回路
Claims (1)
- 【請求項１】画面内に形成された複数個の検出領域の各
々の部分動きベクトルを用いて全体動きベクトルを求め
る手振れ補正装置を有するビデオカメラであって、 前記各部分動きベクトルの平均である平均ベクトルを求
める平均化手段、 前記各部分動きベクトルと前記平均ベクトルとの差の絶
対値をそれぞれ加算しその加算結果を加算した個数で除
算して発散度を求める発散度算出手段、 前記発散度を閾値と比較する比較手段、および前記比較
手段での比較結果に応じて異なる方法で前記全体動きベ
クトルを検出する全体動きベクトル検出手段を備える、
手振れ補正装置を有するビデオカメラ。
Priority Applications (7)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP15675293A JP2940762B2 (ja) | 1993-06-28 | 1993-06-28 | 手振れ補正装置を有するビデオカメラ |
| JP26226993A JPH07115583A (ja) | 1993-10-20 | 1993-10-20 | 手振れ補正装置を有するビデオカメラ |
| KR1019940014786A KR100314104B1 (ko) | 1993-06-28 | 1994-06-27 | 비디오카메라 |
| US08/266,536 US5563652A (en) | 1993-06-28 | 1994-06-27 | Video camera with electronic picture stabilizer |
| DE69425785T DE69425785T2 (de) | 1993-06-28 | 1994-06-28 | Videokamera mit elektronischem Bildstabilisator |
| EP19940110045 EP0631432B1 (en) | 1993-06-28 | 1994-06-28 | Video camera with electronical picture stabilizer |
| US08/475,171 US5648815A (en) | 1993-06-28 | 1995-06-07 | Video camera with electronic picture stabilizer |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP26226993A JPH07115583A (ja) | 1993-10-20 | 1993-10-20 | 手振れ補正装置を有するビデオカメラ |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH07115583A true JPH07115583A (ja) | 1995-05-02 |
Family
ID=17373450
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP26226993A Withdrawn JPH07115583A (ja) | 1993-06-28 | 1993-10-20 | 手振れ補正装置を有するビデオカメラ |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH07115583A (ja) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006129375A (ja) * | 2004-11-01 | 2006-05-18 | Fujitsu Ltd | 動画データ生成装置及び動画データ生成方法 |
| JP2007049545A (ja) * | 2005-08-11 | 2007-02-22 | Casio Comput Co Ltd | 画像合成装置、画像合成方法及びプログラム |
| KR100775104B1 (ko) * | 2006-02-27 | 2007-11-08 | 삼성전자주식회사 | 영상 신호의 떨림 보정 장치와 그를 포함하는 영상 시스템및 그 방법 |
-
1993
- 1993-10-20 JP JP26226993A patent/JPH07115583A/ja not_active Withdrawn
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006129375A (ja) * | 2004-11-01 | 2006-05-18 | Fujitsu Ltd | 動画データ生成装置及び動画データ生成方法 |
| JP4533089B2 (ja) * | 2004-11-01 | 2010-08-25 | 富士通セミコンダクター株式会社 | 動画データ生成装置 |
| JP2007049545A (ja) * | 2005-08-11 | 2007-02-22 | Casio Comput Co Ltd | 画像合成装置、画像合成方法及びプログラム |
| JP4640032B2 (ja) * | 2005-08-11 | 2011-03-02 | カシオ計算機株式会社 | 画像合成装置、画像合成方法及びプログラム |
| KR100775104B1 (ko) * | 2006-02-27 | 2007-11-08 | 삼성전자주식회사 | 영상 신호의 떨림 보정 장치와 그를 포함하는 영상 시스템및 그 방법 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2940762B2 (ja) | 手振れ補正装置を有するビデオカメラ | |
| EP0632649B1 (en) | Video camera with electronic picture stabilizer and generation of addition data | |
| US6144405A (en) | Electronic picture stabilizer with movable detection areas and video camera utilizing the same | |
| US7633525B2 (en) | Unintentional hand movement canceling device and imaging apparatus | |
| US7502050B2 (en) | Unintentional hand movement canceling device | |
| KR19990031401A (ko) | 비트 플레인 정합을 이용한 입력영상의 움직임 보정을 통한 영상안정화 장치 및 그에 따른 영상 안정화방법 | |
| JPH0723276A (ja) | 手振れ補正方法 | |
| JPH0686149A (ja) | 動きベクトル検出装置及びビデオカメラ | |
| JP2003078808A (ja) | 動きベクトル検出装置および方法、手振れ補正装置および方法、並びに撮像装置 | |
| JPH07115583A (ja) | 手振れ補正装置を有するビデオカメラ | |
| JP2944369B2 (ja) | ビデオカメラの手振れ補正装置およびビデオカメラ | |
| JPH04309078A (ja) | ビデオデータの動き検出装置および方法 | |
| JPH0522645A (ja) | 動き検出回路 | |
| JP3213492B2 (ja) | 手振れ補正装置およびそれを用いたビデオカメラ | |
| JP2925890B2 (ja) | 手振れ補正装置を有するビデオカメラ | |
| JP3208264B2 (ja) | 手振れ補正装置およびそれを用いたビデオカメラ | |
| JPH05328201A (ja) | 画像の手振れ補正装置 | |
| JP3152574B2 (ja) | 手振れ補正装置およびそれを用いたビデオカメラ | |
| JPH0575913A (ja) | 動きベクトル検出回路及び手ぶれ補正回路 | |
| JP2506499B2 (ja) | 画像の動きベクトル検出装置及び揺れ補正装置 | |
| JPH07107367A (ja) | 画像処理装置 | |
| JP2669977B2 (ja) | 手ブレ補正機能付きビデオカメラの動きベクトル特定回路 | |
| JP3239051B2 (ja) | 手振れ補正装置を有するビデオカメラ | |
| JP3218615B2 (ja) | 移動物検出装置，画像の動きベクトル検出装置および搖れ補正装置 | |
| JPH05145828A (ja) | 画像の手振れ判定装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20001226 |