JP3395186B2 - ビデオカメラおよびビデオカメラの画像の振動表示方法 - Google Patents

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】この発明は、手振れ補正装置
を有するビデオカメラおよびビデオカメラの画像の振動
表示装置に関する。

【０００２】

【従来の技術】ハンディタイプのビデオカメラを使用し
て撮影を行う時に、手振れで再生画面が揺れる問題があ
る。この問題を解決するのに、動きベクトルを検出し、
この動きベクトルに基づいて、画像メモリに貯えられて
いるビデオデータを補正するものが提案されている（例
えば特開昭６３−１６６３７０号公報）。動きベクトル
の検出は、例えばブロックマッチングでなさる。すなわ
ち、画面を多数の領域（ブロックと称する）に分割し、
各ブロックの中心に位置する前フレームの代表点と現フ
レームのブロック内の画素データとのフレーム差の絶対
値を演算し、このフレーム差の絶対値を１画面に関して
積算し、積算フレーム差データの最小値の位置から動き
ベクトルを検出している。また、この文献に記載のよう
に、動き補正をした時に、ビデオデータが欠落すること
を防止するために、画像メモリの読み出しの制御と補間
回路とにより、例えば１５％程度、画像の拡大を行って
いる。かかる手振れ補正装置では、手振れの検出が正し
くなされることが必要である。

【０００３】

【発明が解決しようとする課題】従来の手振れ補正機能
を有するビデオカメラでは、撮影者にとっては、補正後
の画像をビューファインダで確認できるのみで、どのよ
うな手振れ補正がされているかを知ることができなかっ
た。従って、撮影者の視覚による補正が不可能であり、
手振れが補正範囲を超えると、撮影画面が急に動く問題
があった。従って、この発明の目的は、手振れ或いは手
振れ補正の方向および量を撮影者が知ることができ、撮
影者の視覚的なフィードバック補正を可能とするビデオ
カメラおよびビデオカメラの画像の振動表示装置を提供
することにある。

【０００４】

【課題を解決するための手段】請求項１の発明は、ビデ
オカメラで撮像されたビデオ信号で構成される画像の画
面全体の動きベクトルを検出する動きベクトル検出手段
と、画面全体の動きベクトルに応じた補正量で画像が補
正されることにより発生する当該画像の欠落部分の画像
データに対応する周辺画像データを記憶する周辺メモリ
と、画面全体の動きベクトルに応じた補正量で画像が補
正されることにより発生する当該画像の欠落部分を周辺
メモリからの周辺画像データで補間することにより生成
される補正画像を出力する補正手段とを備え、補正画像
の、補正量で移動された画像と周辺画像データとの境界
のエッジ部を示すマーカーをビューファインダに表示す
るようにしたことを特徴とするビデオカメラである。請
求項２の発明は、補正量で移動された画像と周辺画像デ
ータとの境界のエッジ部を示すマーカーをビューファイ
ンダに表示するビデオカメラの画像の振動表示方法であ
る。

【０００５】

【作用】ビデオカメラの撮影者は、手振れ或いは手振れ
補正の方向および量をリアルタイムで知ることができ、
手振れを抑える方向にビデオカメラを動かすことができ
る。従って、手振れ補正の範囲を超えて撮影画像が急に
動くおそれを低減することができる。

【０００６】

【実施例】以下、この発明の一実施例について図面を参
照して説明する。この実施例は、手振れがビデオカメラ
の動きであるため、画面全体が動き、一方、対象物の動
きは、画面のある部分が動くこと、すなわち、画面中に
静止している部分があることに着目して、両者の区別を
行うものである。図１において、１がディジタルビデオ
データの入力端子である。このビデオデータは、例えば
ビデオカメラのＣＣＤで撮影されたもので、インターレ
ス走査の順序の系列である。

【０００７】入力ビデオデータがフィールドメモリ２お
よび代表点メモリ３に供給される。フィールドメモリ２
の出力には、後述の補正信号により手振れ補正されたデ
ータが読み出される。１フレーム毎に処理を行う時に
は、フィールドメモリ２に代えてフレームメモリが使用
される。代表点メモリ３の出力が減算回路４および代表
点メモリ５に供給される。代表点メモリ５の出力が減算
回路６に供給される。減算回路４および６には、入力ビ
デオデータが供給される。代表点メモリ３は、１フィー
ルド前の代表点のデータを記憶し、代表点メモリ５が２
フィールド（すなわち、１フレーム）前の代表点のデー
タを記憶する。

【０００８】図２に示すように、１フィールドの画面が
ｍ画素×ｎラインのブロックに細分化され、各ブロック
の中心の画素が代表点とされる。代表点は、画面上で、
均一にばらまかれている。減算回路４は、現フィールド
のあるブロックのｍ×ｎの画素データのそれぞれと前フ
ィールドの同一位置のブロックの代表点のデータとのそ
れぞれの差（すなわち、フィールド間差）を検出する。
このフィールド間差が絶対値積分回路７に供給される。
同様に、減算回路６が現フィールドのブロックと２フィ
ールド前の代表点とのフレーム差を検出する。フレーム
差が絶対値積分回路８および度数表作成回路９に供給さ
れる。

【０００９】動きベクトルの検出は、絶対値積分回路８
でフレーム差を使用してなされる。フィールド間差から
絶対値積分回路７で得られたフィールド間の動きは、補
助手段として使用される。つまり、フィールド間の差
は、時間の精度が良いが、位置の精度が悪い特徴があ
り、フレーム間の差は、時間の精度が悪いが、位置の精
度が良い特徴がある。従って、フレーム差から動きベク
トルを検出する時に、フィールド間差も利用すること
で、検出精度を向上できる。

【００１０】図３に示すように、動きのサーチ領域がブ
ロックの大きさと同一とされる。ブロック毎に２フィー
ルド前の代表点と現フィールドのブロック内の画素デー
タとのｍ×ｎ個の差が減算回路６で発生する。絶対値積
分回路８では、ブロック内の各位置のフレーム差の絶対
値が１フレーム期間にわたって積算され、ｍ×ｎの積算
フレーム差データの分布が形成され、この分布の中の最
小値が動きベクトルとして検出される。この動きベクト
ルの検出は、従来と同様である。

【００１１】度数分布表作成回路９には、減算回路６か
らのフレーム差と、入力ビデオデータとが供給される。
度数分布表作成回路９は、図４に示すように、図３のブ
ロックの中心と一致する画素ｘの周辺の８画素ａ、ｂ、
ｃ、ｄ、ｅ、ｆ、ｇ、ｈと対応するアドレスを有するメ
モリが設けられている。これらの画素の中で、フレーム
差が０となる毎に、空間的に傾きを持つ位置（メモリの
アドレス）の度数を更新する。例えばフレーム差が略０
の時に、画素ｘの値と画素ｄの値との差分の絶対値がし
きい値より大きい時には、ｄの位置と対応するメモリの
アドレスの値を＋１とする。このブロック毎の処理が１
画面の全体で累算され、度数分布表が形成される。空間
的な傾きが例えば水平方向（画素ｘと画素ｅ又は画素ｄ
との間）にある時には、水平方向の動きの結果、必ずフ
レーム差が発生する。従って、上述の条件が成立する時
には、そのブロックがその方向に関しては、静止である
ことを意味する。

【００１２】動き量決定回路１０に対して、絶対値積分
回路８で検出された動きベクトルと度数分布表作成回路
９の出力とが供給される。動き量決定回路１０は、動き
ベクトルを手振れベクトルとして使用して良いかどうか
を検証する。すなわち、動きベクトルと対応する位置の
度数、すなわち、静止ブロックの割合が判定用のしきい
値より少ない時には、画面全体の動きからこの動きベク
トルが派生したものと判定し、動きベクトルを手振れベ
クトルと判定する。そうでない時には、画面内の静止ブ
ロックの個数が多いものと判定し、画面内の対象物の動
きからこの動きベクトルが派生したものと判定する。例
えば検出された動きベクトルが上へ向かう垂直方向であ
る時には、画素ｂの位置の度数が調べられる。この度数
がしきい値より多ければ、画面中で動いていない部分が
多いことが判り、この動きベクトルは、手振れベクトル
でないとされる。

【００１３】動き量決定回路１０に対して絶対値積分回
路７からのフィールド間の動きベクトルを供給している
のは、前述のように、検出された動きベクトルの定常性
をチェックし、精度の向上を図るためである。動き量決
定回路１０の出力（手振れベクトル）が補正量発生回路
１１に供給される。手振れベクトルは、フレーム間の動
きから検出されたもので、手振れの補正量と同一ではな
い。例えば連続する３フレームの期間で、第２番目およ
び第３番目のフレームの期間で、同一方向の手振れが生
じている時では、最初のフレームと次のフレームとの間
の手振れベクトルＶ１が検出され、第２番目と第３番目
のフレーム間の手振れベクトルＶ２が検出される。第２
番目のフレームに対する補正量は、Ｖ１で良いが、第３
番目のフレームに対する補正量は、（Ｖ１＋Ｖ２）の必
要がある。補正量発生回路１１は、手振れベクトルを積
分した補正量を発生する。また、この実施例のように、
手振れ補正がフィールド単位でなされる時には、フレー
ム間の動き量をフィールド間の動き量に変換するため
に、フィールドとフレームの時間差に対応するために動
きベクトルが１／２とされる。

【００１４】補正量発生回路１１からの手振れ補正信号
がアドレス制御回路１２およびセレクト信号発生回路１
３に供給される。アドレス制御回路１２は、フィールド
メモリ２および周辺メモリ１６に対するアドレス信号を
発生する。フィールドメモリ２には、１フィールドの画
像が書き込まれ、補正量に応じてその読み出しアドレス
が制御される。従ってフィールドメモリ２からは、１フ
ィールドの入力ビデオデータが補正量に応じて移動され
たビデオデータが得られる。フィールドメモリ２の出力
がセレクタ１４に供給され、セレクタ１４の出力が出力
端子１５に取り出されると共に、周辺メモリ１６に供給
される。周辺メモリ１６の出力である周辺データがセレ
クタ１４に供給される。セレクタ１４は、セレクト信号
発生回路１３からのセレクト信号に応答して、手振れ補
正されたフィールドメモリ２からのビデオデータと周辺
メモリ１６に記憶されている周辺データとを選択する。

【００１５】図５Ａに示すように、フィールドメモリ２
に取り込まれた１フィールドの画像（その画枠を２１で
表す）の周辺部（一点鎖線の外側の領域）２２が周辺メ
モリ１６に格納される。周辺部２２の幅は、手振れ補正
の範囲を考慮して設定され、例えば約１０〜２０％程度
の幅に設定される。図５Ｂにおいて、画枠２１ａで示す
ように、手振れにより図５Ａの位置であるべき画像が図
面に向かって例えば右方向へ動いた時では、手振れ補正
量Ｖにより画像の全体が破線で示す位置に補正される。
このような場合には、撮像された画像中には、元々存在
していないために、移動後の画像の左側の斜線で示す部
分２３の画像が欠落する。この欠落部分２３が周辺メモ
リ１６に貯えられている対応する位置の画像に置換され
る。この置換は、アドレス制御回路１２によるアドレス
制御と、セレクタ１４の切り換え動作で実行される。ま
た、周辺メモリ１６には、撮像されたビデオデータ中の
欠落部分２３以外の周辺の画像データが書き込まれ、周
辺メモリ１６の内容が更新される。

【００１６】この発明においては、ビデオカメラの撮像
出力の手振れ補正をリアルタイムで行っており、手振れ
が生じたことを示すマーカーをビューファインダの画面
内に表示している。

【００１７】図６Ａに示すように、破線で示す画枠２１
が実際に撮像された画像であって、上述の手振れ補正に
よって実線で示す画像２１ｂのように、補正されている
ものとする。この場合では、図６Ｂに示すように、ビデ
オカメラのビューファインダ２４の画面内で、実際に撮
像している画枠２１のエッジと対応する位置に縦線のマ
ーカー２５が表示される。このマーカー２５を撮影者が
見て、手振れの方向および量或いは手振れ補正の方向お
よび量が判り、この手振れを補正する方向にビデオカメ
ラを動かす。上述の手振れ補正に加えて、撮影者の視覚
に基づいたフィードバックがかかるので、手振れの範囲
が補正範囲を超えてしまうことを未然にかなり防止でき
る。若し、手振れの表示をビューファインダに行わない
時には、手振れを補正できなくなるある時点で、画面が
急に動くことが生じる。マーカー２５としては、縦線に
限らず、矢印等を使用しても良い。

【００１８】

【発明の効果】この発明は、手振れ或いは手振れ補正の
方向および量をビューファインダに表示しているので、
撮影者は、手振れを抑える方向にビデオカメラを操作す
る。従って、手振れが補正範囲を超えて、撮影画像が急
に動くおそれを低減できる。

【図面の簡単な説明】

【図１】この発明の一実施例のブロック図である。

【図２】この発明の一実施例のブロック分割を示す略線
図である。

【図３】この発明の一実施例の動きベクトルのサーチ範
囲を示す略線図である。

【図４】この発明の一実施例の度数分布表作成の説明に
用いる略線図である。

【図５】この発明の一実施例の手振れ補正の説明に用い
る略線図である。

【図６】ビデオカメラのビューファインダの画面になさ
れる手振れ表示の説明に用いる略線図である。

【符号の説明】

１ ビデオデータの入力端子 ２ フィールドメモリ ３ １フィールド前の代表点データを記憶する代表点
メモリ ５ ２フィールド前の代表点データを記憶する代表点
メモリ ９ 度数分布表作成回路 １０ 動き量決定回路

Claims (2)

(57)【特許請求の範囲】
1. 【請求項１】 ビデオカメラで撮像されたビデオ信号で
   構成される画像の画面全体の動きベクトルを検出する動
   きベクトル検出手段と、 上記画面全体の動きベクトルに応じた補正量で上記画像
   が補正されることにより発生する当該画像の欠落部分の
   画像データに対応する周辺画像データを記憶する周辺メ
   モリと、 上記画面全体の動きベクトルに応じた補正量で上記画像
   が補正されることにより発生する当該画像の欠落部分を
   上記周辺メモリからの周辺画像データで補間することに
   より生成される補正画像を出力する補正手段とを備え、 上記補正画像の、上記補正量で移動された画像と上記周
   辺画像データとの境界のエッジ部を示すマーカーをビュ
   ーファインダに表示するようにしたことを特徴とするビ
   デオカメラ。
2. 【請求項２】 ビデオカメラで撮像されたビデオ信号で
   構成される画像の画面全体の動きベクトルを検出するス
   テップと、 上記画面全体の動きベクトルに応じた補正量で上記画像
   が補正されることにより発生する当該画像の欠落部分の
   画像データに対応する周辺画像データを記憶するステッ
   プと、 上記画面全体の動きベクトルに応じた補正量で上記画像
   が移動されることにより発生する当該画像の欠落部分を
   上記周辺メモリからの周辺画像データで補間することに
   より生成される補正画像を出力するステップと、 上記補正画像の、上記補正量で移動された画像と上記周
   辺画像データとの境界のエッジ部を示すマーカーをビュ
   ーファインダに表示するステップと、を備えるビデオカ
   メラの画像の振動表示方法。