JPH08163573A - 動きベクトル検出装置、およびこの装置を用いた順次走査変換装置 - Google Patents
動きベクトル検出装置、およびこの装置を用いた順次走査変換装置Info
- Publication number
- JPH08163573A JPH08163573A JP30578694A JP30578694A JPH08163573A JP H08163573 A JPH08163573 A JP H08163573A JP 30578694 A JP30578694 A JP 30578694A JP 30578694 A JP30578694 A JP 30578694A JP H08163573 A JPH08163573 A JP H08163573A
- Authority
- JP
- Japan
- Prior art keywords
- motion vector
- correlation value
- reliability
- value
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Color Television Systems (AREA)
- Television Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
(57)【要約】
【目的】 画像間での動きを表す動きベクトルを検出す
る動きベクトル検出装置に関するもので、検出された動
きベクトルの信頼性判定の確度を向上する。 【構成】 分割された各画素ブロックに対して相関値算
出回路4で相関値を算出し、相関値から動きベクトル算
出回路5で動きベクトルを算出し、動きベクトル信頼性
判定回路6でその動きベクトルの第1の信頼性判定を行
い、その信頼性判定結果MFij(1) と、動きベクトル相
関値算出回路23で算出されるその動きベクトルと周辺ブ
ロックでの動きベクトルとの相関性を示す動きベクトル
相関値Mrijとから再度信頼性判定を行う。 【効果】 動きベクトル信頼性判定回路6で信頼性判定
を誤ったとしても、周辺のブロックで検出された動きベ
クトルとの相関性から再度信頼性判定を行うことで、信
頼性判定を補正することが可能となり、信頼性判定の確
度を向上できる。
る動きベクトル検出装置に関するもので、検出された動
きベクトルの信頼性判定の確度を向上する。 【構成】 分割された各画素ブロックに対して相関値算
出回路4で相関値を算出し、相関値から動きベクトル算
出回路5で動きベクトルを算出し、動きベクトル信頼性
判定回路6でその動きベクトルの第1の信頼性判定を行
い、その信頼性判定結果MFij(1) と、動きベクトル相
関値算出回路23で算出されるその動きベクトルと周辺ブ
ロックでの動きベクトルとの相関性を示す動きベクトル
相関値Mrijとから再度信頼性判定を行う。 【効果】 動きベクトル信頼性判定回路6で信頼性判定
を誤ったとしても、周辺のブロックで検出された動きベ
クトルとの相関性から再度信頼性判定を行うことで、信
頼性判定を補正することが可能となり、信頼性判定の確
度を向上できる。
Description
【0001】
【産業上の利用分野】本発明は、フレーム数変換を行う
方式変換装置に使用される、画像内の動きを表す動きベ
クトルを検出する動きベクトル検出装置、およびこの動
きベクトル検出装置を使用し、かつ飛び越し走査信号を
順次走査信号に変換する順次走査変換装置に関するもの
である。
方式変換装置に使用される、画像内の動きを表す動きベ
クトルを検出する動きベクトル検出装置、およびこの動
きベクトル検出装置を使用し、かつ飛び越し走査信号を
順次走査信号に変換する順次走査変換装置に関するもの
である。
【0002】
【従来の技術】従来の画像の動きベクトル検出装置とし
ては、たとえば特開昭61−269475号公報に示さ
れたものが知られている。
ては、たとえば特開昭61−269475号公報に示さ
れたものが知られている。
【0003】図8に、画面を複数の小さな画素ブロック
に分割し、各小ブロックで動きベクトルで検出するブロ
ックマッチング法を適用した、従来の動きベクトル検出
装置の要部構成図を示す。
に分割し、各小ブロックで動きベクトルで検出するブロ
ックマッチング法を適用した、従来の動きベクトル検出
装置の要部構成図を示す。
【0004】図8において、1はディジタル化された映
像信号aを入力する映像信号入力端子であり、従来の動
きベクトル検出装置は、この映像信号入力端子1から入
力された映像信号aを1フレーム分格納するフレームメ
モリ2と、フレームメモリ2のアドレスを制御するフレ
ームメモリアドレス制御回路3と、連続する2フレーム
における画面上の小さな画素ブロック間での相関値を算
出する相関値算出回路(詳細は後述する)4と、相関値
算出回路4で算出される相関値の値により動きベクトル
を算出する動きベクトル算出回路(詳細は後述する)5
と、相関値算出回路4で算出された相関値の値により動
きベクトル算出回路5で算出された動きベクトルの信頼
性を判定する動きベクトル信頼性判定回路(詳細は後述
する)6から構成されている。上記動きベクトルの信頼
性の信号は第1出力端子7から出力され、上記動きベク
トルの信号は第2出力端子8から出力される。
像信号aを入力する映像信号入力端子であり、従来の動
きベクトル検出装置は、この映像信号入力端子1から入
力された映像信号aを1フレーム分格納するフレームメ
モリ2と、フレームメモリ2のアドレスを制御するフレ
ームメモリアドレス制御回路3と、連続する2フレーム
における画面上の小さな画素ブロック間での相関値を算
出する相関値算出回路(詳細は後述する)4と、相関値
算出回路4で算出される相関値の値により動きベクトル
を算出する動きベクトル算出回路(詳細は後述する)5
と、相関値算出回路4で算出された相関値の値により動
きベクトル算出回路5で算出された動きベクトルの信頼
性を判定する動きベクトル信頼性判定回路(詳細は後述
する)6から構成されている。上記動きベクトルの信頼
性の信号は第1出力端子7から出力され、上記動きベク
トルの信号は第2出力端子8から出力される。
【0005】ブロックマッチング法による動きベクトル
検出について図9を参照しながら詳しく説明し、上記相
関値算出回路4と動きベクトル算出回路5について説明
する。
検出について図9を参照しながら詳しく説明し、上記相
関値算出回路4と動きベクトル算出回路5について説明
する。
【0006】図9に示すように、連続する2フレームに
おいて、前フレームの画面を水平M画素×垂直Nライン
の幾つかの小さな画素ブロック(以下、動きベクトル検
出ブロックと称す)Bijに分割する。そして、動きベク
トルの検出範囲を水平方向±K画素、垂直方向±Lライ
ンとする。動きベクトル検出ブロックBijとその動きベ
クトル検出ブロックBijを動きベクトルの検出範囲内で
ある偏移量(vx ,v y )で移動させた現フレーム上の
画素ブロックBij(vx ,vy )との相関性を表す相関
値Drij(vx ,vy )を下記の(1)式、または
(2)式を使用して算出する。
おいて、前フレームの画面を水平M画素×垂直Nライン
の幾つかの小さな画素ブロック(以下、動きベクトル検
出ブロックと称す)Bijに分割する。そして、動きベク
トルの検出範囲を水平方向±K画素、垂直方向±Lライ
ンとする。動きベクトル検出ブロックBijとその動きベ
クトル検出ブロックBijを動きベクトルの検出範囲内で
ある偏移量(vx ,v y )で移動させた現フレーム上の
画素ブロックBij(vx ,vy )との相関性を表す相関
値Drij(vx ,vy )を下記の(1)式、または
(2)式を使用して算出する。
【0007】
【数1】
【0008】ただし、 I(x+m,y+n) :前フレーム上の座標値(x+m,y+n)における輝
度値 I’(x+m+vx ,y+n+vy ) :現フレーム上の座標値(x+m+vx ,y+n+
vy )における輝度値 I(x+m,y+n)∈Bij, I’(x+m+vx ,y+n+vy )∈Bij(vx ,v
y ) −K≦vx ≦K,−L≦vy ≦L すなわち、相関値Drij(vx ,vy )は、前フレーム
上の動きベクトル検出ブロックBijに含まれる画素の輝
度値と偏移量(vx ,vy )で移動させた現フレーム上
の画素ブロックBij(vx ,vy )に含まれる画素の輝
度値との差の絶対値、またはその差の2乗をそれぞれの
画素で求め、その値をブロック内で累積加算して得られ
る。相関値算出回路4は、上記の(1)式、または
(2)式を使用して相関値Drij(vx ,vy )を算出
する。
度値 I’(x+m+vx ,y+n+vy ) :現フレーム上の座標値(x+m+vx ,y+n+
vy )における輝度値 I(x+m,y+n)∈Bij, I’(x+m+vx ,y+n+vy )∈Bij(vx ,v
y ) −K≦vx ≦K,−L≦vy ≦L すなわち、相関値Drij(vx ,vy )は、前フレーム
上の動きベクトル検出ブロックBijに含まれる画素の輝
度値と偏移量(vx ,vy )で移動させた現フレーム上
の画素ブロックBij(vx ,vy )に含まれる画素の輝
度値との差の絶対値、またはその差の2乗をそれぞれの
画素で求め、その値をブロック内で累積加算して得られ
る。相関値算出回路4は、上記の(1)式、または
(2)式を使用して相関値Drij(vx ,vy )を算出
する。
【0009】相関値Drij(vx ,vy )が最小となる
時の偏移量(vx ,vy )が、動きベクトル検出ブロッ
クBijにおける動きベクトルMVijとなる。上記動きベ
クトル算出回路5は、相関値Drij(vx ,vy )が最
小となる時の偏移量(vx ,vy )を算出し、動きベク
トル検出ブロックBijにおける動きベクトルMVijとし
て出力する。
時の偏移量(vx ,vy )が、動きベクトル検出ブロッ
クBijにおける動きベクトルMVijとなる。上記動きベ
クトル算出回路5は、相関値Drij(vx ,vy )が最
小となる時の偏移量(vx ,vy )を算出し、動きベク
トル検出ブロックBijにおける動きベクトルMVijとし
て出力する。
【0010】動きベクトル信頼性判定回路6の詳細構成
を図10、図11、図12、図13に示す。以下、それぞれの動
きベクトル信頼性判定回路について詳しく説明する。図
10に示す、動きベクトル信頼性判定回路6は、相関値D
rij(vx vy )の平均値Drijave を算出する平均値
算出回路11と、平均値算出回路7において算出された平
均値Drijave を閾値Cave と比較し、平均値Drijav
e が閾値Cave より小さければ、判定結果MFijとし
て、信頼性無を出力する比較回路12から構成されてい
る。
を図10、図11、図12、図13に示す。以下、それぞれの動
きベクトル信頼性判定回路について詳しく説明する。図
10に示す、動きベクトル信頼性判定回路6は、相関値D
rij(vx vy )の平均値Drijave を算出する平均値
算出回路11と、平均値算出回路7において算出された平
均値Drijave を閾値Cave と比較し、平均値Drijav
e が閾値Cave より小さければ、判定結果MFijとし
て、信頼性無を出力する比較回路12から構成されてい
る。
【0011】図11に示す、動きベクトル信頼性判定回路
6は、上記平均値算出回路11と、平均値算出回路11で算
出された平均値Drijave を定数倍(A倍、0<A<
1)する補正回路13と、相関値Drij(vx ,vy )の
最小値Drijmin を探索する最小値探索回路14と、定数
倍された平均値A・Drijave を相関値の最小値Drij
min と比較し、定数倍された平均値A・Drijave が相
関値の最小値Drijminより小さければ、判定結果MFi
jとして、信頼性無を出力する比較回路15から構成され
ている。
6は、上記平均値算出回路11と、平均値算出回路11で算
出された平均値Drijave を定数倍(A倍、0<A<
1)する補正回路13と、相関値Drij(vx ,vy )の
最小値Drijmin を探索する最小値探索回路14と、定数
倍された平均値A・Drijave を相関値の最小値Drij
min と比較し、定数倍された平均値A・Drijave が相
関値の最小値Drijminより小さければ、判定結果MFi
jとして、信頼性無を出力する比較回路15から構成され
ている。
【0012】図12に示す、動きベクトル信頼性判定回路
6は、上記最小値探索回路14と、相関値Drij(vx ,
vy )の最大値Drijmax を探索する最大値探索回路16
と、最大値に対する最小値の比Drijmin /Drijmax
を算出する比算出回路17と、算出された比Drijmin /
Drijmax を閾値Crat (0<Crat <1)と比較し、
比Drijmin /Drijmax が閾値Crat より大きけれ
ば、判定結果MFijとして、信頼性無を出力する比較回
路14から構成されている。
6は、上記最小値探索回路14と、相関値Drij(vx ,
vy )の最大値Drijmax を探索する最大値探索回路16
と、最大値に対する最小値の比Drijmin /Drijmax
を算出する比算出回路17と、算出された比Drijmin /
Drijmax を閾値Crat (0<Crat <1)と比較し、
比Drijmin /Drijmax が閾値Crat より大きけれ
ば、判定結果MFijとして、信頼性無を出力する比較回
路14から構成されている。
【0013】図13に示す、動きベクトル信頼性判定回路
6は、図10、図11、図12に示した回路を合成したものあ
り、図10における判定結果、図11における判定結果、図
12における判定結果のいづれかの判定結果が、信頼性無
であれば、オア回路19から、最終的な判定結果MFijと
して、信頼性無が出力される。
6は、図10、図11、図12に示した回路を合成したものあ
り、図10における判定結果、図11における判定結果、図
12における判定結果のいづれかの判定結果が、信頼性無
であれば、オア回路19から、最終的な判定結果MFijと
して、信頼性無が出力される。
【0014】以上のように構成された従来の動きベクト
ル検出装置において、以下その動作について説明する。
図8において、映像信号入力端子1に入力される映像信
号aの現フレームの画像データとフレームメモリ2から
出力される前フレームの画像データとからフレームメモ
リアドレス制御回路3によりフレームメモリ2からの出
力を制御することにより、動きベクトル検出ブロックB
ijに分割し、各動きベクトル検出ブロックBijにおける
相関値Drij(vx ,vy )を相関値算出回路4で算出
する。
ル検出装置において、以下その動作について説明する。
図8において、映像信号入力端子1に入力される映像信
号aの現フレームの画像データとフレームメモリ2から
出力される前フレームの画像データとからフレームメモ
リアドレス制御回路3によりフレームメモリ2からの出
力を制御することにより、動きベクトル検出ブロックB
ijに分割し、各動きベクトル検出ブロックBijにおける
相関値Drij(vx ,vy )を相関値算出回路4で算出
する。
【0015】動きベクトル算出回路5では、相関値算出
回路4で算出された相関値Drij(vx ,vy )が最小
となる時の偏移量(vx ,vy )を、動きベクトル検出
ブロックBijにおける動きベクトルMVijとして算出
し、また第2出力端子8より出力する。
回路4で算出された相関値Drij(vx ,vy )が最小
となる時の偏移量(vx ,vy )を、動きベクトル検出
ブロックBijにおける動きベクトルMVijとして算出
し、また第2出力端子8より出力する。
【0016】動きベクトル信頼性判定回路6では、動き
ベクトル算出回路5で算出された動きベクトルMVijの
信頼性を判定し、信頼性有、信頼性無いづれかを判定結
果MFijとして第1出力端子7より出力する。
ベクトル算出回路5で算出された動きベクトルMVijの
信頼性を判定し、信頼性有、信頼性無いづれかを判定結
果MFijとして第1出力端子7より出力する。
【0017】以上のように、ブロックマッチング法を用
いた動きベクトル検出において、動きベクトル検出ブロ
ックBij内に絵柄に変化があるような画像が含まれてい
る場合は、そのブロックで検出された動きベクトルMV
ijは信頼性が高く、動きベクトル検出ブロックBij内に
絵柄に変化がないような画像が含まれているような場合
は、そのブロックで検出された動きベクトルは信頼性が
低い傾向にある。絵柄の変化のない動きベクトル検出ブ
ロックBijでは、相関値Drij(vx ,vy )の平均値
は相対的に低く、相関値Drij(vx ,vy )の最小値
と最大値の差もそれほど大きくならない。そのようなこ
とから、前述した処理からは精度の高い信頼性判定結果
が得られる。
いた動きベクトル検出において、動きベクトル検出ブロ
ックBij内に絵柄に変化があるような画像が含まれてい
る場合は、そのブロックで検出された動きベクトルMV
ijは信頼性が高く、動きベクトル検出ブロックBij内に
絵柄に変化がないような画像が含まれているような場合
は、そのブロックで検出された動きベクトルは信頼性が
低い傾向にある。絵柄の変化のない動きベクトル検出ブ
ロックBijでは、相関値Drij(vx ,vy )の平均値
は相対的に低く、相関値Drij(vx ,vy )の最小値
と最大値の差もそれほど大きくならない。そのようなこ
とから、前述した処理からは精度の高い信頼性判定結果
が得られる。
【0018】
【発明が解決しようとする課題】しかしながら、相関値
Drij(vx ,vy )の平均値、最大値および最小値と
所定の閾値Cave 、Crat との大小比較により、検出さ
れた動きベクトルの信頼性を判定する場合、ノイズなど
の影響により相関値Drij(vx ,vy )は確率的に揺
らいだものとなる。そのため、あらゆる画像に対して
も、高精度な信頼性判定を行うためには、判定基準とな
る閾値Cave 、Crat を慎重に設定する必要がある。し
かしながら、入力される画像は一定ではないため、あら
ゆる画像に対して、一定の閾値Cave 、Crat のみで高
精度な信頼性判定を行うことには限界がある。誤判定と
しては、正しく検出された動きベクトルMVijを信頼性
無、誤って検出された動きベクトルMVijを信頼性有と
誤判定する2通りの場合がある。動きベクトルMVijを
用いてフレーム数変換や順次走査変換を行う場合、誤っ
て検出された動きベクトルMVijを信頼性有と誤判定し
た場合の方が、変換画像の画質劣化が大きい。よって、
閾値Cave 、Crat の設定を行う場合、いかなる画像に
対しても、誤って検出された動きベクトルMVijは完全
に排除する必要がある。そのため、判定基準を厳しくす
るような閾値Cave 、Crat に設定しなければならず、
正しく検出されていた動きベクトルMVijでさえ、信頼
性無と判定され排除されてしまう。
Drij(vx ,vy )の平均値、最大値および最小値と
所定の閾値Cave 、Crat との大小比較により、検出さ
れた動きベクトルの信頼性を判定する場合、ノイズなど
の影響により相関値Drij(vx ,vy )は確率的に揺
らいだものとなる。そのため、あらゆる画像に対して
も、高精度な信頼性判定を行うためには、判定基準とな
る閾値Cave 、Crat を慎重に設定する必要がある。し
かしながら、入力される画像は一定ではないため、あら
ゆる画像に対して、一定の閾値Cave 、Crat のみで高
精度な信頼性判定を行うことには限界がある。誤判定と
しては、正しく検出された動きベクトルMVijを信頼性
無、誤って検出された動きベクトルMVijを信頼性有と
誤判定する2通りの場合がある。動きベクトルMVijを
用いてフレーム数変換や順次走査変換を行う場合、誤っ
て検出された動きベクトルMVijを信頼性有と誤判定し
た場合の方が、変換画像の画質劣化が大きい。よって、
閾値Cave 、Crat の設定を行う場合、いかなる画像に
対しても、誤って検出された動きベクトルMVijは完全
に排除する必要がある。そのため、判定基準を厳しくす
るような閾値Cave 、Crat に設定しなければならず、
正しく検出されていた動きベクトルMVijでさえ、信頼
性無と判定され排除されてしまう。
【0019】動きベクトルMVijを検出する対象の動画
像として、カメラのパーニングによって発生する動きが
一様なパーニング画像のみを扱う場合は、検出すべき動
きベクトルMVijは1つであるため、正しく検出されて
いた動きベクトルMVijが、信頼性無と判定され排除さ
れたとしても、それほど問題にはならない。また、パー
ニング画像の場合は、検出すべき動きベクトルMVijは
1つであるため、動きベクトル検出ブロックBijを大き
くすることにより、ノイズなどの影響による相関値の確
率的な揺らぎを低く抑えることができる。しかしなが
ら、動きベクトルMVijを検出する対象の動画像とし
て、その画像中に含まれているいくつかの物体の動きが
一様ではなく、様々である動画像を扱う場合、検出すべ
き動きベクトルMVijは1つではなく、いくつか存在す
るため、その全ての動きベクトルMVijを検出するため
には、動きベクトル検出ブロックBijをそれ程大きくす
ることはできない。すなわち、様々な動きを含んだ動画
像において、その動画像に含まれた動き全てを表す動き
ベクトルMVijを検出するためには、動きベクトル検出
ブロックBijは、小さく、動きベクトル検出範囲(±
K,±L)は大きくする必要がある。しかしながら、相
関値Drij(vx ,vy )のノイズなどの影響による確
率的な揺らぎは、動きベクトル検出ブロックBijが小さ
ければ小さいほど、動きベクトルの検出範囲(±K,±
L)が大きければ大きいほど、大きくなる。
像として、カメラのパーニングによって発生する動きが
一様なパーニング画像のみを扱う場合は、検出すべき動
きベクトルMVijは1つであるため、正しく検出されて
いた動きベクトルMVijが、信頼性無と判定され排除さ
れたとしても、それほど問題にはならない。また、パー
ニング画像の場合は、検出すべき動きベクトルMVijは
1つであるため、動きベクトル検出ブロックBijを大き
くすることにより、ノイズなどの影響による相関値の確
率的な揺らぎを低く抑えることができる。しかしなが
ら、動きベクトルMVijを検出する対象の動画像とし
て、その画像中に含まれているいくつかの物体の動きが
一様ではなく、様々である動画像を扱う場合、検出すべ
き動きベクトルMVijは1つではなく、いくつか存在す
るため、その全ての動きベクトルMVijを検出するため
には、動きベクトル検出ブロックBijをそれ程大きくす
ることはできない。すなわち、様々な動きを含んだ動画
像において、その動画像に含まれた動き全てを表す動き
ベクトルMVijを検出するためには、動きベクトル検出
ブロックBijは、小さく、動きベクトル検出範囲(±
K,±L)は大きくする必要がある。しかしながら、相
関値Drij(vx ,vy )のノイズなどの影響による確
率的な揺らぎは、動きベクトル検出ブロックBijが小さ
ければ小さいほど、動きベクトルの検出範囲(±K,±
L)が大きければ大きいほど、大きくなる。
【0020】以上のような原因により、様々な動きを含
んだ動画像において、従来の構成による動きベクトル検
出装置によって動きベクトルMVijを検出し、検出され
た動きベクトルの信頼性を判定する場合、閾値Cave 、
Crat を厳しく設定するため、正しく検出されていた動
きベクトルを信頼性無と誤判定される場合が多かった。
んだ動画像において、従来の構成による動きベクトル検
出装置によって動きベクトルMVijを検出し、検出され
た動きベクトルの信頼性を判定する場合、閾値Cave 、
Crat を厳しく設定するため、正しく検出されていた動
きベクトルを信頼性無と誤判定される場合が多かった。
【0021】本発明は上記問題を解決するものであり、
動きベクトルの信頼性の判定の確度を向上させた動きベ
クトル検出装置を提供し、この動きベクトル検出装置を
使用した順次走査変換装置を提供することを目的とする
ものである。
動きベクトルの信頼性の判定の確度を向上させた動きベ
クトル検出装置を提供し、この動きベクトル検出装置を
使用した順次走査変換装置を提供することを目的とする
ものである。
【0022】
【課題を解決するための手段】上記問題を解決するため
に、第1発明の動きベクトル検出装置は、画面を複数の
画素ブロックに分割し、前記各画素ブロックについて所
定の偏移における相関値を算出する相関値算出手段と、
前記相関値より各画素ブロックにおける動きベクトルを
算出する動きベクトル算出手段と、前記動きベクトルを
格納する動きベクトル格納手段と、前記相関値をもとに
前記動きベクトル算出手段から算出される動きベクトル
の信頼性を判定する第1動きベクトル信頼性判定手段
と、前記動きベクトル格納手段に格納された、各画素ブ
ロックの動きベクトルと前記各画素ブロックの上下、左
右もしくは斜め方向の画素ブロックの動きベクトルとの
動きベクトル差分値から動きベクトル相関値を算出する
動きベクトル相関値算出手段と、前記第1動きベクトル
信頼性判定手段より得られる信頼性判定結果と前記動き
ベクトル相関値とから再度前記動きベクトルの信頼性を
判定する第2動きベクトル信頼性判定手段とを備えたこ
とを特徴とするものである。
に、第1発明の動きベクトル検出装置は、画面を複数の
画素ブロックに分割し、前記各画素ブロックについて所
定の偏移における相関値を算出する相関値算出手段と、
前記相関値より各画素ブロックにおける動きベクトルを
算出する動きベクトル算出手段と、前記動きベクトルを
格納する動きベクトル格納手段と、前記相関値をもとに
前記動きベクトル算出手段から算出される動きベクトル
の信頼性を判定する第1動きベクトル信頼性判定手段
と、前記動きベクトル格納手段に格納された、各画素ブ
ロックの動きベクトルと前記各画素ブロックの上下、左
右もしくは斜め方向の画素ブロックの動きベクトルとの
動きベクトル差分値から動きベクトル相関値を算出する
動きベクトル相関値算出手段と、前記第1動きベクトル
信頼性判定手段より得られる信頼性判定結果と前記動き
ベクトル相関値とから再度前記動きベクトルの信頼性を
判定する第2動きベクトル信頼性判定手段とを備えたこ
とを特徴とするものである。
【0023】また、第2発明の動きベクトル検出装置
は、上記第1発明の動きベクトル検出装置であって、動
きベクトル相関値算出手段は、動きベクトル差分値を、
各画素ブロックの動きベクトルと前記各画素ブロック上
下、左右もしくは斜め方向の画素ブロックの動きベクト
ルとのユークリッド距離とすることを特徴とするもので
ある。
は、上記第1発明の動きベクトル検出装置であって、動
きベクトル相関値算出手段は、動きベクトル差分値を、
各画素ブロックの動きベクトルと前記各画素ブロック上
下、左右もしくは斜め方向の画素ブロックの動きベクト
ルとのユークリッド距離とすることを特徴とするもので
ある。
【0024】また、第3発明の動きベクトル検出装置
は、上記第1発明の動きベクトル検出装置であって、動
きベクトル相関値算出手段は、動きベクトル差分値を、
各画素ブロックの動きベクトルと前記各画素ブロックの
上下、左右もしくは斜め方向の画素ブロックの動きベク
トルとの水平方向成分、垂直成分それぞれの差分の絶対
値和とすることを特徴とするものである。
は、上記第1発明の動きベクトル検出装置であって、動
きベクトル相関値算出手段は、動きベクトル差分値を、
各画素ブロックの動きベクトルと前記各画素ブロックの
上下、左右もしくは斜め方向の画素ブロックの動きベク
トルとの水平方向成分、垂直成分それぞれの差分の絶対
値和とすることを特徴とするものである。
【0025】また、第4発明の動きベクトル検出装置
は、上記第1発明の動きベクトル検出装置であって、動
きベクトル相関値算出手段は、動きベクトル相関値を、
動きベクトル差分値が所定の閾値より小さい上下、左右
もしくは斜め方向の画素ブロック数とすることを特徴と
するものである。
は、上記第1発明の動きベクトル検出装置であって、動
きベクトル相関値算出手段は、動きベクトル相関値を、
動きベクトル差分値が所定の閾値より小さい上下、左右
もしくは斜め方向の画素ブロック数とすることを特徴と
するものである。
【0026】また、第5発明の動きベクトル検出装置
は、上記第1発明の動きベクトル検出装置であって、動
きベクトル相関値算出手段は、動きベクトル相関値を、
上下、左右もしくは斜め方向の画素ブロックにおける動
きベクトル差分値の累積加算値とすることを特徴とする
ものである。
は、上記第1発明の動きベクトル検出装置であって、動
きベクトル相関値算出手段は、動きベクトル相関値を、
上下、左右もしくは斜め方向の画素ブロックにおける動
きベクトル差分値の累積加算値とすることを特徴とする
ものである。
【0027】また、第6発明の動きベクトル検出装置
は、上記第1発明の動きベクトル検出装置であって、第
2動きベクトル信頼性判定手段は、第1動きベクトル信
頼性判定手段より得られる信頼性判定結果をもとに所定
の閾値を選択する閾値選択手段と、動きベクトル相関値
と前記所定の閾値とを比較する比較手段を備えたことを
特徴とするものである。
は、上記第1発明の動きベクトル検出装置であって、第
2動きベクトル信頼性判定手段は、第1動きベクトル信
頼性判定手段より得られる信頼性判定結果をもとに所定
の閾値を選択する閾値選択手段と、動きベクトル相関値
と前記所定の閾値とを比較する比較手段を備えたことを
特徴とするものである。
【0028】また、第7発明の順次走査変換装置は、1
フィールド前の画像データを1フィールド分格納する第
1フィールドメモリと、2フィールド前の画像データを
1フィールド分格納する第2フィールドメモリと、現フ
ィールドの画像データと前記2フィールド前の画像デー
タとから動きベクトルを検出する動きベクトル検出手段
と、前記動きベクトルにより走査線の補間を行う動きベ
クトル補間手段と、前記1フィールド前の画像データか
ら走査線の補間を行うフィールド内補間手段と、前記動
きベクトル補間手段で作成された動きベクトル補間画像
と前記フィールド内補間手段で作成されたフィールド内
補間画像との選択を行う補間画像選択手段と、前記1フ
ィールド前の画像データと前記補間画像選択手段より得
られる補間画像とから順次走査変換化する走査線変換手
段とを具備し、前記動きベクトル検出手段を、第1発明
の動きベクトル検出装置とすることを特徴とするもので
ある。
フィールド前の画像データを1フィールド分格納する第
1フィールドメモリと、2フィールド前の画像データを
1フィールド分格納する第2フィールドメモリと、現フ
ィールドの画像データと前記2フィールド前の画像デー
タとから動きベクトルを検出する動きベクトル検出手段
と、前記動きベクトルにより走査線の補間を行う動きベ
クトル補間手段と、前記1フィールド前の画像データか
ら走査線の補間を行うフィールド内補間手段と、前記動
きベクトル補間手段で作成された動きベクトル補間画像
と前記フィールド内補間手段で作成されたフィールド内
補間画像との選択を行う補間画像選択手段と、前記1フ
ィールド前の画像データと前記補間画像選択手段より得
られる補間画像とから順次走査変換化する走査線変換手
段とを具備し、前記動きベクトル検出手段を、第1発明
の動きベクトル検出装置とすることを特徴とするもので
ある。
【0029】
【作用】上記第1発明の構成により、画面を複数の画素
ブロックに分割し、各画素ブロックについて所定の偏移
における相関値を算出し、相関値より各画素ブロックに
おける動きベクトルを算出し、相関値をもとに動きベク
トルの信頼性を第1判定し、各画素ブロックの動きベク
トルとその画素ブロックの上下、左右もしくは斜め方向
の画素ブロックの動きベクトルとの動きベクトル差分値
から動きベクトル相関値を算出し、動きベクトル相関値
と前記動きベクトルの信頼性判定結果をもとに、再度動
きベクトルの信頼性を第2判定することにより、第1信
頼性判定で、正しく検出された動きベクトルが信頼性無
と誤判定された場合においても、第2信頼性判定におけ
る救済措置により、信頼性有と正しく判定され、より多
くの正しく検出された動きベクトルが信頼性有、また、
より多くの誤って検出された動きベクトルが信頼性無と
判定される。それにより、第1判定で信頼性無と判定さ
れ、落とされた正しい動きベクトルをより多く救済する
ことが可能となる。
ブロックに分割し、各画素ブロックについて所定の偏移
における相関値を算出し、相関値より各画素ブロックに
おける動きベクトルを算出し、相関値をもとに動きベク
トルの信頼性を第1判定し、各画素ブロックの動きベク
トルとその画素ブロックの上下、左右もしくは斜め方向
の画素ブロックの動きベクトルとの動きベクトル差分値
から動きベクトル相関値を算出し、動きベクトル相関値
と前記動きベクトルの信頼性判定結果をもとに、再度動
きベクトルの信頼性を第2判定することにより、第1信
頼性判定で、正しく検出された動きベクトルが信頼性無
と誤判定された場合においても、第2信頼性判定におけ
る救済措置により、信頼性有と正しく判定され、より多
くの正しく検出された動きベクトルが信頼性有、また、
より多くの誤って検出された動きベクトルが信頼性無と
判定される。それにより、第1判定で信頼性無と判定さ
れ、落とされた正しい動きベクトルをより多く救済する
ことが可能となる。
【0030】また上記第2発明の構成により、上記動き
ベクトル差分値が、各画素ブロックの動きベクトルと前
記各画素ブロック上下、左右もしくは斜め方向の画素ブ
ロックの動きベクトルとのユークリッド距離として算出
される。
ベクトル差分値が、各画素ブロックの動きベクトルと前
記各画素ブロック上下、左右もしくは斜め方向の画素ブ
ロックの動きベクトルとのユークリッド距離として算出
される。
【0031】また上記第3発明の構成により、上記動き
ベクトル差分値が、各画素ブロックの動きベクトルと前
記各画素ブロックの上下、左右もしくは斜め方向の画素
ブロックの動きベクトルとの水平方向成分、垂直成分そ
れぞれの差分の絶対値和として算出される。
ベクトル差分値が、各画素ブロックの動きベクトルと前
記各画素ブロックの上下、左右もしくは斜め方向の画素
ブロックの動きベクトルとの水平方向成分、垂直成分そ
れぞれの差分の絶対値和として算出される。
【0032】さらに上記第4発明の構成により、上記動
きベクトル相関値が、動きベクトル差分値が所定の閾値
より小さい上下、左右もしくは斜め方向の画素ブロック
数として算出される。
きベクトル相関値が、動きベクトル差分値が所定の閾値
より小さい上下、左右もしくは斜め方向の画素ブロック
数として算出される。
【0033】また上記第5発明の構成により、上記動き
ベクトル相関値が、上下、左右もしくは斜め方向の画素
ブロックにおける動きベクトル差分値の累積加算値とし
て算出される。
ベクトル相関値が、上下、左右もしくは斜め方向の画素
ブロックにおける動きベクトル差分値の累積加算値とし
て算出される。
【0034】さらに上記第6発明の構成により、第2判
定は、第1動きベクトル信頼性判定手段より得られる信
頼性判定結果をもとに選択された所定の閾値と、動きベ
クトル相関値とを比較することにより行われる。
定は、第1動きベクトル信頼性判定手段より得られる信
頼性判定結果をもとに選択された所定の閾値と、動きベ
クトル相関値とを比較することにより行われる。
【0035】また上記第7発明の構成により、第nフィ
ールドの飛び越し走査の映像信号が入力されたとき、第
1フィールドメモリには第(n−1)フィールドの映像
信号が格納され、第2フィールドメモリには第(n−
2)フィールドの映像信号が格納されており、第nフィ
ールドと第(n−2)フィールドとの間の動きベクトル
とその動きベクトルの信頼性判定結果が動きベクトル検
出手段で検出され、動きベクトル補間手段では、検出さ
れた動きベクトルとその動きベクトルの信頼性判定結果
により、信頼性有と判定された動きベクトルのみを用い
て第(n−2)フィールドの画像と第nフィールドの画
像とから動きベクトル補間画像が作成され、一方、フィ
ールド内補間手段では、第(n−1)フィールドの画像
を用いてフィールド内でフィルタリングによりフィール
ド内補間画像が作成され、これら動きベクトル補間画像
とフィールド内補間画像とは補間画像選択手段において
画素ごとに選択され、走査線変換手段において、第(n
−1)フィールドの画像と補間画像選択手段より得られ
る補間画像とから順次走査線変換され、順次走査変換画
像が作成される。
ールドの飛び越し走査の映像信号が入力されたとき、第
1フィールドメモリには第(n−1)フィールドの映像
信号が格納され、第2フィールドメモリには第(n−
2)フィールドの映像信号が格納されており、第nフィ
ールドと第(n−2)フィールドとの間の動きベクトル
とその動きベクトルの信頼性判定結果が動きベクトル検
出手段で検出され、動きベクトル補間手段では、検出さ
れた動きベクトルとその動きベクトルの信頼性判定結果
により、信頼性有と判定された動きベクトルのみを用い
て第(n−2)フィールドの画像と第nフィールドの画
像とから動きベクトル補間画像が作成され、一方、フィ
ールド内補間手段では、第(n−1)フィールドの画像
を用いてフィールド内でフィルタリングによりフィール
ド内補間画像が作成され、これら動きベクトル補間画像
とフィールド内補間画像とは補間画像選択手段において
画素ごとに選択され、走査線変換手段において、第(n
−1)フィールドの画像と補間画像選択手段より得られ
る補間画像とから順次走査線変換され、順次走査変換画
像が作成される。
【0036】
【実施例】以下、本発明の一実施例を図面に基づいて説
明する。なお、従来例の図8,図10〜図13の構成と同一
の構成には同一の符号を付して説明を省略する。
明する。なお、従来例の図8,図10〜図13の構成と同一
の構成には同一の符号を付して説明を省略する。
【0037】図1に本発明の一実施例における動きベク
トル検出装置の要部構成図を示す。本発明の動きベクト
ル検出装置は、従来例の構成に、動きベクトル算出回路
5で算出された動きベクトルMVijを格納する動きベク
トルメモリ21と、動きベクトルメモリ21のアドレス制御
を行う動きベクトルメモリアドレス制御回路(詳細は後
述する)22と、着目ブロックの動きベクトルとそのブロ
ックの上下、左右もしくは斜め方向の周辺ブロックの動
きベクトルとの相関性を表す相関値を算出する動きベク
トル相関値算出回路(詳細は後述する)23と、動きベク
トル信頼性判定回路6の判定結果MFijにより閾値を選
択する閾値選択回路(詳細は後述する)24と、閾値選択
回路24から出力される閾値と動きベクトル相関値算出回
路23から出力される相関値の値とを比較する比較回路
(詳細は後述する)25を付加して、構成されている。
トル検出装置の要部構成図を示す。本発明の動きベクト
ル検出装置は、従来例の構成に、動きベクトル算出回路
5で算出された動きベクトルMVijを格納する動きベク
トルメモリ21と、動きベクトルメモリ21のアドレス制御
を行う動きベクトルメモリアドレス制御回路(詳細は後
述する)22と、着目ブロックの動きベクトルとそのブロ
ックの上下、左右もしくは斜め方向の周辺ブロックの動
きベクトルとの相関性を表す相関値を算出する動きベク
トル相関値算出回路(詳細は後述する)23と、動きベク
トル信頼性判定回路6の判定結果MFijにより閾値を選
択する閾値選択回路(詳細は後述する)24と、閾値選択
回路24から出力される閾値と動きベクトル相関値算出回
路23から出力される相関値の値とを比較する比較回路
(詳細は後述する)25を付加して、構成されている。
【0038】従来の相関値Drij(vx ,vy )のみを
用いた動きベクトルMVijの信頼性の判定は、図10〜図
13に示したように、相対値の平均値Drijave がある閾
値Cave より小さい場合、最小値Drijmin が平均値を
定数倍した値A・Drijaveより大きい場合、最大値と
最小値との比Drijmin /Drijmax (または最大値と
最小値の差)がある閾値Crat より小さい場合、前記3
つの場合のうちいづれかが成立する場合に、検出された
動きベクトル信頼性無であると判定するものである。
用いた動きベクトルMVijの信頼性の判定は、図10〜図
13に示したように、相対値の平均値Drijave がある閾
値Cave より小さい場合、最小値Drijmin が平均値を
定数倍した値A・Drijaveより大きい場合、最大値と
最小値との比Drijmin /Drijmax (または最大値と
最小値の差)がある閾値Crat より小さい場合、前記3
つの場合のうちいづれかが成立する場合に、検出された
動きベクトル信頼性無であると判定するものである。
【0039】しかしながら、本発明のように小さな画素
ブロックBijで、動きベクトルの検出範囲(±K,±
L)を大きくして動きベクトルMVijを検出する必要が
ある場合、エッジ部分における輝度差が小さい物体が移
動する画像、すなわちコントラストの低い動画像におい
ては、動きベクトル検出ブロックBijが図2に示すよう
に当てはめられた場合、相関値の平均値Drijave 、最
小値Drijmin および最大値Drijmax は相対的に小さ
くなり、従来の相関値Drij(vx ,vy )のみの判定
では、誤判定される可能性がある。動きベクトルの信頼
性判定において、正しく検出された動きベクトルMVij
については全て信頼性有、誤って検出された動きベクト
ルMVijについては全て信頼性無と判定されることが望
ましい。フレーム数の変換を行う方式変換装置に動きベ
クトルMVijを用いる場合、正しく検出された動きベク
トルを最大限利用することが画質の向上につながり、誤
検出された動きベクトルMVijを利用しないことが画質
劣化を最小限に抑えることになるため、動きベクトルの
信頼性判定の確度が画質向上の重要な要因となる。
ブロックBijで、動きベクトルの検出範囲(±K,±
L)を大きくして動きベクトルMVijを検出する必要が
ある場合、エッジ部分における輝度差が小さい物体が移
動する画像、すなわちコントラストの低い動画像におい
ては、動きベクトル検出ブロックBijが図2に示すよう
に当てはめられた場合、相関値の平均値Drijave 、最
小値Drijmin および最大値Drijmax は相対的に小さ
くなり、従来の相関値Drij(vx ,vy )のみの判定
では、誤判定される可能性がある。動きベクトルの信頼
性判定において、正しく検出された動きベクトルMVij
については全て信頼性有、誤って検出された動きベクト
ルMVijについては全て信頼性無と判定されることが望
ましい。フレーム数の変換を行う方式変換装置に動きベ
クトルMVijを用いる場合、正しく検出された動きベク
トルを最大限利用することが画質の向上につながり、誤
検出された動きベクトルMVijを利用しないことが画質
劣化を最小限に抑えることになるため、動きベクトルの
信頼性判定の確度が画質向上の重要な要因となる。
【0040】動きベクトルの信頼性判定の確度を向上す
るために、本発明の動きベクトル検出装置では、動きベ
クトル検出ブロックBijで検出された動きベクトルMV
ijが正しい動きベクトルであれば、そのブロックの周辺
のブロックで検出された動きベクトルMVijとの相関性
は高くなることに注目し、動きベクトル信頼性判定回路
6での判定結果をもとに周辺ブロックの動きベクトルを
参照することにより、もう一度動きベクトルの信頼性判
定を行う。
るために、本発明の動きベクトル検出装置では、動きベ
クトル検出ブロックBijで検出された動きベクトルMV
ijが正しい動きベクトルであれば、そのブロックの周辺
のブロックで検出された動きベクトルMVijとの相関性
は高くなることに注目し、動きベクトル信頼性判定回路
6での判定結果をもとに周辺ブロックの動きベクトルを
参照することにより、もう一度動きベクトルの信頼性判
定を行う。
【0041】以下、上記動きベクトルメモリアドレス制
御回路22、動きベクトル相関値算出回路23、閾値選択回
路24、および比較回路25について説明し、さらに信頼性
判定手順について説明する。
御回路22、動きベクトル相関値算出回路23、閾値選択回
路24、および比較回路25について説明し、さらに信頼性
判定手順について説明する。
【0042】動きベクトル信頼性判定回路6からは動き
ベクトル検出ブロックBijで検出された動きベクトルの
信頼性の判定結果MFijとして、信頼性有か信頼性無の
いづれかが出力される。その第1判定結果MFij(1) は
閾値選択回路24に入力される。閾値選択回路24では、判
定結果が信頼性有であれば、閾値C1が、信頼性無であ
れば、閾値C2が選択され、閾値Coとして出力され
る。
ベクトル検出ブロックBijで検出された動きベクトルの
信頼性の判定結果MFijとして、信頼性有か信頼性無の
いづれかが出力される。その第1判定結果MFij(1) は
閾値選択回路24に入力される。閾値選択回路24では、判
定結果が信頼性有であれば、閾値C1が、信頼性無であ
れば、閾値C2が選択され、閾値Coとして出力され
る。
【0043】動きベクトルメモリ21からは動きベクトル
メモリアドレス制御回路22でアドレスの制御を行うこと
により図3に示す動きベクトル検出ブロックBijで検出
された動きベクトルとそのブロックの周辺ブロックで検
出されたベクトルが出力される。
メモリアドレス制御回路22でアドレスの制御を行うこと
により図3に示す動きベクトル検出ブロックBijで検出
された動きベクトルとそのブロックの周辺ブロックで検
出されたベクトルが出力される。
【0044】動きベクトル相関値算出回路23は、動きベ
クトルメモリ21から出力されるブロックBijで検出され
た動きベクトルとそのブロックの周辺ブロックで検出さ
れた動きベクトルとの相関性を示す相関値Mrijを算出
する。ブロックBijにおける動きベクトル相関値Mrij
は、ブロックBijで検出された動きベクトルと周辺ブロ
ックにおける動きベクトルそれぞれについて差の大きさ
(以下、動きベクトル差分と示す)をユークリッド距離
として算出し、その距離が閾値Cn以下である周辺ブロ
ック数である。
クトルメモリ21から出力されるブロックBijで検出され
た動きベクトルとそのブロックの周辺ブロックで検出さ
れた動きベクトルとの相関性を示す相関値Mrijを算出
する。ブロックBijにおける動きベクトル相関値Mrij
は、ブロックBijで検出された動きベクトルと周辺ブロ
ックにおける動きベクトルそれぞれについて差の大きさ
(以下、動きベクトル差分と示す)をユークリッド距離
として算出し、その距離が閾値Cn以下である周辺ブロ
ック数である。
【0045】動きベクトル相関値算出回路23で算出され
た動きベクトル相関値Mrijと閾値選択回路24から出力
される閾値Coは比較回路25で比較され、動きベクトル
相関値Mrijが閾値Coより大きければブロックBijで
検出された動きベクトルは信頼性有、小さければ信頼性
無と判定され、第2信頼性判定結果MFij(2) として第
1出力端子7より出力される。また、ブロックBijで検
出された動きベクトルMVijは第2出力端子8より出力
される。
た動きベクトル相関値Mrijと閾値選択回路24から出力
される閾値Coは比較回路25で比較され、動きベクトル
相関値Mrijが閾値Coより大きければブロックBijで
検出された動きベクトルは信頼性有、小さければ信頼性
無と判定され、第2信頼性判定結果MFij(2) として第
1出力端子7より出力される。また、ブロックBijで検
出された動きベクトルMVijは第2出力端子8より出力
される。
【0046】それぞれの動きベクトル検出ブロックにお
いて図4に示すような動きベクトルが検出され、中央の
ブロックBijで検出された動きベクトルが動きベクトル
信頼性判定回路6で信頼性有と判定されたとする。中央
のブロックで検出された動きベクトルとその周辺のブロ
ックで検出された動きベクトルそれぞれとのユークリッ
ド距離を算出すると、ほとんどの周辺ブロックで閾値C
nより大きくなり、動きベクトル相関値Mrijは小さく
なり、相関性は低くなる。閾値選択回路24からは動きベ
クトル信頼性判定回路6の判定結果が信頼性有であるた
め、閾値Coとして閾値C1が出力される。動きベクト
ル相関値Mrijと閾値C1とは比較回路25で大小比較さ
れる。この場合、動きベクトル相関値Mrijは小さな値
であるため、閾値C1より小さくなり、最終的な第2信
頼性判定結果MFij(2) は、動きベクトル信頼性判定回
路6の第1判定結果MFij(1) とは反対に、信頼性無と
判定される。
いて図4に示すような動きベクトルが検出され、中央の
ブロックBijで検出された動きベクトルが動きベクトル
信頼性判定回路6で信頼性有と判定されたとする。中央
のブロックで検出された動きベクトルとその周辺のブロ
ックで検出された動きベクトルそれぞれとのユークリッ
ド距離を算出すると、ほとんどの周辺ブロックで閾値C
nより大きくなり、動きベクトル相関値Mrijは小さく
なり、相関性は低くなる。閾値選択回路24からは動きベ
クトル信頼性判定回路6の判定結果が信頼性有であるた
め、閾値Coとして閾値C1が出力される。動きベクト
ル相関値Mrijと閾値C1とは比較回路25で大小比較さ
れる。この場合、動きベクトル相関値Mrijは小さな値
であるため、閾値C1より小さくなり、最終的な第2信
頼性判定結果MFij(2) は、動きベクトル信頼性判定回
路6の第1判定結果MFij(1) とは反対に、信頼性無と
判定される。
【0047】また、図5に示すような動きベクトルが検
出され、中央のブロックBijで検出された動きベクトル
が動きベクトル信頼性判定回路6で信頼性無と判定され
たとする。中央のブロックBijで検出された動きベクト
ルとその周辺のブロックで検出された動きベクトルそれ
ぞれとのユークリッド距離を算出すると、ほとんどの周
辺ブロックで閾値Cnより小さくなり、動きベクトル相
関値Mrijは大きくなり、相関性は高くなる。閾値選択
回路24からは動きベクトル信頼性判定回路6の判定結果
が信頼性無である為、閾値Coとして閾値C2が出力さ
れる。動きベクトル相関値Mrijと閾値C2とは比較回
路25で大小比較される。この場合は、図4の場合とは異
なり、動きベクトル相関値Mrijは大きな値であるた
め、閾値C2より大きくなり、最終的な第2信頼性判定
結果MFij(2) は、動きベクトル信頼性判定回路6の第
1判定結果MFij(1) とは反対に、信頼性有と判定され
る。
出され、中央のブロックBijで検出された動きベクトル
が動きベクトル信頼性判定回路6で信頼性無と判定され
たとする。中央のブロックBijで検出された動きベクト
ルとその周辺のブロックで検出された動きベクトルそれ
ぞれとのユークリッド距離を算出すると、ほとんどの周
辺ブロックで閾値Cnより小さくなり、動きベクトル相
関値Mrijは大きくなり、相関性は高くなる。閾値選択
回路24からは動きベクトル信頼性判定回路6の判定結果
が信頼性無である為、閾値Coとして閾値C2が出力さ
れる。動きベクトル相関値Mrijと閾値C2とは比較回
路25で大小比較される。この場合は、図4の場合とは異
なり、動きベクトル相関値Mrijは大きな値であるた
め、閾値C2より大きくなり、最終的な第2信頼性判定
結果MFij(2) は、動きベクトル信頼性判定回路6の第
1判定結果MFij(1) とは反対に、信頼性有と判定され
る。
【0048】以上のように、本発明の動きベクトル検出
装置では、動きベクトル信頼性判定回路6で信頼性判定
を誤ったとしても、周辺のブロックで検出された動きベ
クトルとの相関性から再度信頼性判定を行うことで、信
頼性判定を補正することができる。ただし、動きベクト
ル信頼性判定回路6での信頼性判定結果MFij(1) も十
分考慮し、信頼性有と判定された場合は、周辺ブロック
での動きベクトルとの相関性判定基準を低く、信頼性無
と判定された場合は、相関性判定基準を高くする。その
ため、閾値C1は閾値C2より小さな値に設定する(C
1<C2)。このようにして得られた動きベクトルの第
2信頼性判定結果MFij(2) は非常に確度の高いもので
ある。そのため、本発明の動きベクトル検出装置をフレ
ーム数変換を行うような方式変換装置に適用した場合、
正しい動きベクトルMVijのみを用いてフレーム数変換
を行うことができるため、フレーム数変換画像の高画質
化を図ることができる。
装置では、動きベクトル信頼性判定回路6で信頼性判定
を誤ったとしても、周辺のブロックで検出された動きベ
クトルとの相関性から再度信頼性判定を行うことで、信
頼性判定を補正することができる。ただし、動きベクト
ル信頼性判定回路6での信頼性判定結果MFij(1) も十
分考慮し、信頼性有と判定された場合は、周辺ブロック
での動きベクトルとの相関性判定基準を低く、信頼性無
と判定された場合は、相関性判定基準を高くする。その
ため、閾値C1は閾値C2より小さな値に設定する(C
1<C2)。このようにして得られた動きベクトルの第
2信頼性判定結果MFij(2) は非常に確度の高いもので
ある。そのため、本発明の動きベクトル検出装置をフレ
ーム数変換を行うような方式変換装置に適用した場合、
正しい動きベクトルMVijのみを用いてフレーム数変換
を行うことができるため、フレーム数変換画像の高画質
化を図ることができる。
【0049】なお、本実施例では、動きベクトル差分値
をユークリッド距離としたが、動きベクトルの水平方向
成分の差の絶対値と垂直方向成分の差の絶対値の和でも
よい。また、動きベクトル相関値Mrijは、動きベクト
ル差分値を累積加算した値でもよい。ただし、累積加算
値の場合、閾値C1は閾値C2より大きな値に設定する
(C1>C2)。
をユークリッド距離としたが、動きベクトルの水平方向
成分の差の絶対値と垂直方向成分の差の絶対値の和でも
よい。また、動きベクトル相関値Mrijは、動きベクト
ル差分値を累積加算した値でもよい。ただし、累積加算
値の場合、閾値C1は閾値C2より大きな値に設定する
(C1>C2)。
【0050】次に、本発明の動きベクトル検出装置を使
用した順次走査変換装置について図面に基づいて説明す
る。図6は上述した本発明の順次走査変換置の一実施例
におけるブロック図である。図6において、31はディジ
タル化された飛び越し走査の映像信号bを入力する映像
信号入力端子であり、本発明の順次走査変換置は、映像
信号入力端子31より映像出力bを入力し1フィールド前
の画像データを1フィールド分格納する第1フィールド
メモリ32と、この第1フィルドメモリ32から出力された
映像信号を入力し2フィールド前の画像データを1フィ
ールド分格納する第2フィルドメモリ33と、上述した本
発明の動きベクトル検出装置を適用した動きベクトル検
出回路34と、動きベクトル検出回路34で検出された信頼
性判定MFij(2) 有の動きベクトルMVijを用いて補間
画像を作成し、また画素単位で動きベクトル補間画像が
作成されているかどうかを示す補間画像選択信号SIを
作成する動きベクトル補間回路35と、フィールド内でフ
ィルタリングにより補間画像を作成するフィールド内補
間回路36と、動きベクトル補間回路35で作成された補間
画像IMmvとフィールド内補間装回路36で作成された補
間画像IMfdとを画素ごとに選択を行う補間画像選択回
路37と、補間画像選択回路37で選択された補間画像IM
itr を用いて順次走査変換化する走査線変換回路38とか
ら構成されている。順次走査変換化された画像IMniは
出力端子39より出力される。
用した順次走査変換装置について図面に基づいて説明す
る。図6は上述した本発明の順次走査変換置の一実施例
におけるブロック図である。図6において、31はディジ
タル化された飛び越し走査の映像信号bを入力する映像
信号入力端子であり、本発明の順次走査変換置は、映像
信号入力端子31より映像出力bを入力し1フィールド前
の画像データを1フィールド分格納する第1フィールド
メモリ32と、この第1フィルドメモリ32から出力された
映像信号を入力し2フィールド前の画像データを1フィ
ールド分格納する第2フィルドメモリ33と、上述した本
発明の動きベクトル検出装置を適用した動きベクトル検
出回路34と、動きベクトル検出回路34で検出された信頼
性判定MFij(2) 有の動きベクトルMVijを用いて補間
画像を作成し、また画素単位で動きベクトル補間画像が
作成されているかどうかを示す補間画像選択信号SIを
作成する動きベクトル補間回路35と、フィールド内でフ
ィルタリングにより補間画像を作成するフィールド内補
間回路36と、動きベクトル補間回路35で作成された補間
画像IMmvとフィールド内補間装回路36で作成された補
間画像IMfdとを画素ごとに選択を行う補間画像選択回
路37と、補間画像選択回路37で選択された補間画像IM
itr を用いて順次走査変換化する走査線変換回路38とか
ら構成されている。順次走査変換化された画像IMniは
出力端子39より出力される。
【0051】以上のような順次走査変換装置について、
その動作について説明する。映像信号入力端子31に第n
フィールドの飛び越し走査の映像信号bが入力された
時、フィールドメモリ32には第(n−1)フィールドの
映像信号が格納され、フィールドメモリ33には第(n−
2)フィールドの映像信号が格納されている。第nフィ
ールドと第(n−2)フィールドとの間の動きベクトル
を動きベクトル検出回路34で検出する。動きベクトル検
出回路34では、フィールド間で、小さな画素ブロックご
とに動きベクトルMVijとその信頼性判定結果MFij
(2) が算出される。
その動作について説明する。映像信号入力端子31に第n
フィールドの飛び越し走査の映像信号bが入力された
時、フィールドメモリ32には第(n−1)フィールドの
映像信号が格納され、フィールドメモリ33には第(n−
2)フィールドの映像信号が格納されている。第nフィ
ールドと第(n−2)フィールドとの間の動きベクトル
を動きベクトル検出回路34で検出する。動きベクトル検
出回路34では、フィールド間で、小さな画素ブロックご
とに動きベクトルMVijとその信頼性判定結果MFij
(2) が算出される。
【0052】動きベクトル補間回路35では、動きベクト
ル検出回路34で算出された動きベクトルMVijとその動
きベクトルの信頼性判定結果MFij(2) により、信頼性
有と判定された動きベクトルのみを用いて第(n−2)
フィールドの画像と第nフィールドの画像とから動きベ
クトル補間画像IMmvを作成する。一方、フィールド内
補間回路36では、第(n−1)フィールドの画像を用い
てフィールド内でフィルタリングによりフィールド内補
間画像IMfdを作成する。
ル検出回路34で算出された動きベクトルMVijとその動
きベクトルの信頼性判定結果MFij(2) により、信頼性
有と判定された動きベクトルのみを用いて第(n−2)
フィールドの画像と第nフィールドの画像とから動きベ
クトル補間画像IMmvを作成する。一方、フィールド内
補間回路36では、第(n−1)フィールドの画像を用い
てフィールド内でフィルタリングによりフィールド内補
間画像IMfdを作成する。
【0053】補間画像選択回路37では、動きベクトル補
間回路35で作成された動きベクトル補間画像IMmvと、
フィールド内補間回路36で作成されたフィールド内補間
画像IMfdとを画素ごとに選択する。動きベクトル補間
画像IMmvでは、動きベクトル検出回路34で信頼性有と
判定された動きベクトルのみを用いて作成しているた
め、補間されていない画素が生じる。そのため、動きベ
クトル補間回路35からは、画素単位で動きベクトル補間
画像が作成されているかどうかを示す補間画像選択信号
SIが出力される。補間画像選択回路37では、動きベク
トル補間回路35から出力される補間画像選択信号SIに
よって、動きベクトル補間画像IMmvにおいて補間され
ていない画素をフィールド内補間画像IMfdで置き換え
るような選択が行われる。
間回路35で作成された動きベクトル補間画像IMmvと、
フィールド内補間回路36で作成されたフィールド内補間
画像IMfdとを画素ごとに選択する。動きベクトル補間
画像IMmvでは、動きベクトル検出回路34で信頼性有と
判定された動きベクトルのみを用いて作成しているた
め、補間されていない画素が生じる。そのため、動きベ
クトル補間回路35からは、画素単位で動きベクトル補間
画像が作成されているかどうかを示す補間画像選択信号
SIが出力される。補間画像選択回路37では、動きベク
トル補間回路35から出力される補間画像選択信号SIに
よって、動きベクトル補間画像IMmvにおいて補間され
ていない画素をフィールド内補間画像IMfdで置き換え
るような選択が行われる。
【0054】補間画像選択回路37で選択された補間画像
IMitr とフィールドメモリ32から出力される第(n−
1)フィールドの画像IMorg とから走査線変換回路38
により順次走査変換し、順次走査変換画像IMniを作成
する。
IMitr とフィールドメモリ32から出力される第(n−
1)フィールドの画像IMorg とから走査線変換回路38
により順次走査変換し、順次走査変換画像IMniを作成
する。
【0055】飛び越し走査の画像を表示する場合、1フ
ィールドに全走査線の半分を、残りの走査線は次のフィ
ールドで上下1ライン間隔ずらして表示する。そのた
め、図7に示すように、第(n−2)フィールドでは表
示されていた黒丸で示した走査線上の物体が上方に移動
し、第(n−1)フィールドでは表示されずに第nフィ
ールドでは表示されるような場合においてはインターラ
インフリッカーとなり、大きな画質劣化となる。この画
質劣化は飛び越し走査において原理的に発生するもので
あるため、この画質劣化を除去するためには、順次走査
変換化が必須となる。従来の飛び越し走査画像から順次
走査変換画像を作成する方法としては、動き適応型順次
走査変換がある。動き適応型順次走査変換では、動き検
出により動きの有無を判定し、動き有と判定された場合
は飛び越し走査の走査線間の補間ラインをフィールド内
処理によるフィールド内補間により作成し、動き無と判
定された場合は補間ラインを前後のフィールドによるフ
ィールド間補間により作成する。動き適応型順次走査変
換では、静止画の場合、フィールド間補間によりインタ
ーラインフリッカーは除去され、画質は向上する。しか
しながら、動画の場合、図7に示すような画像において
は、第(n−1)フィールド上には黒丸で示す物体は表
示されないため、フィールド内補間による処理では完全
にインターラインフリッカーを除去することができな
い。静止画だけではなく、動画においてもインターライ
ンフリッカーを除去するためには、フィールド間で動き
ベクトルを求め、その動きベクトルを用いてフィールド
間で補間を行うことである。しかしながら、動きベクト
ルを用いてフィールド間で補間を行う場合、正しい動き
ベクトルで補間された場合は、インターラインフリッカ
ーを完全に除去することができ、画質は向上するが、誤
った動きベクトルで補間された場合は、画像歪となり大
きな画質劣化となる。インターラインフリッカーや画像
歪の画質劣化は、絵柄の変化の激しい画像のエッジ部分
で顕著に見られ、絵柄の変化のない画像においてはほと
んど見られない。即ち、前述した画質劣化を除去し、変
換画像の画質を向上させるためには、絵柄の変化の激し
い画像の部分だけを正しい動きベクトルで補間を行い、
絵柄の変化のない画像の部分はフィールド内でのフィル
タリングによる補間処理を行うことで十分である。本発
明の順次走査変換装置は、動きベクトルを求めるための
相関値と検出された動きベクトルと周辺の動きベクトル
との相関性により検出された動きベクトルが正しいか正
しくないかの信頼性の判定を行うため、絵柄の変化の激
しい画像を含んだブロックで正しく動きベクトルが検出
された場合は、信頼性有という判定がなされ、絵柄の変
化のない画像を含んだブロックで正しくない動きベクト
ルが検出された場合は、信頼性無という判定がなされ
る。このうち信頼性有という判定がなされた動きベクト
ルのみを用いて補間画像を作成するため、絵柄の変化の
激しい画像部分では動きベクトルを用いた補間画像が作
成される。信頼性有と判定された動きベクトルのみを用
いて補間画像を作成するため、補間画像が作成されない
部分も発生する。そのような補間画像が作成されない部
分は絵柄の変化のない画像部分であるため、フィールド
内補間により補間画像が作成される。よって、走査線変
換回路38から出力される順次走査変換画像IMniはイン
ターラインフリッカーや画像歪が生じない高画質の画像
となる。
ィールドに全走査線の半分を、残りの走査線は次のフィ
ールドで上下1ライン間隔ずらして表示する。そのた
め、図7に示すように、第(n−2)フィールドでは表
示されていた黒丸で示した走査線上の物体が上方に移動
し、第(n−1)フィールドでは表示されずに第nフィ
ールドでは表示されるような場合においてはインターラ
インフリッカーとなり、大きな画質劣化となる。この画
質劣化は飛び越し走査において原理的に発生するもので
あるため、この画質劣化を除去するためには、順次走査
変換化が必須となる。従来の飛び越し走査画像から順次
走査変換画像を作成する方法としては、動き適応型順次
走査変換がある。動き適応型順次走査変換では、動き検
出により動きの有無を判定し、動き有と判定された場合
は飛び越し走査の走査線間の補間ラインをフィールド内
処理によるフィールド内補間により作成し、動き無と判
定された場合は補間ラインを前後のフィールドによるフ
ィールド間補間により作成する。動き適応型順次走査変
換では、静止画の場合、フィールド間補間によりインタ
ーラインフリッカーは除去され、画質は向上する。しか
しながら、動画の場合、図7に示すような画像において
は、第(n−1)フィールド上には黒丸で示す物体は表
示されないため、フィールド内補間による処理では完全
にインターラインフリッカーを除去することができな
い。静止画だけではなく、動画においてもインターライ
ンフリッカーを除去するためには、フィールド間で動き
ベクトルを求め、その動きベクトルを用いてフィールド
間で補間を行うことである。しかしながら、動きベクト
ルを用いてフィールド間で補間を行う場合、正しい動き
ベクトルで補間された場合は、インターラインフリッカ
ーを完全に除去することができ、画質は向上するが、誤
った動きベクトルで補間された場合は、画像歪となり大
きな画質劣化となる。インターラインフリッカーや画像
歪の画質劣化は、絵柄の変化の激しい画像のエッジ部分
で顕著に見られ、絵柄の変化のない画像においてはほと
んど見られない。即ち、前述した画質劣化を除去し、変
換画像の画質を向上させるためには、絵柄の変化の激し
い画像の部分だけを正しい動きベクトルで補間を行い、
絵柄の変化のない画像の部分はフィールド内でのフィル
タリングによる補間処理を行うことで十分である。本発
明の順次走査変換装置は、動きベクトルを求めるための
相関値と検出された動きベクトルと周辺の動きベクトル
との相関性により検出された動きベクトルが正しいか正
しくないかの信頼性の判定を行うため、絵柄の変化の激
しい画像を含んだブロックで正しく動きベクトルが検出
された場合は、信頼性有という判定がなされ、絵柄の変
化のない画像を含んだブロックで正しくない動きベクト
ルが検出された場合は、信頼性無という判定がなされ
る。このうち信頼性有という判定がなされた動きベクト
ルのみを用いて補間画像を作成するため、絵柄の変化の
激しい画像部分では動きベクトルを用いた補間画像が作
成される。信頼性有と判定された動きベクトルのみを用
いて補間画像を作成するため、補間画像が作成されない
部分も発生する。そのような補間画像が作成されない部
分は絵柄の変化のない画像部分であるため、フィールド
内補間により補間画像が作成される。よって、走査線変
換回路38から出力される順次走査変換画像IMniはイン
ターラインフリッカーや画像歪が生じない高画質の画像
となる。
【0056】
【発明の効果】以上のように、第1発明の動きベクトル
検出装置よれば、最初、着目ブロックで検出された動き
ベクトルの信頼性を相関値のみで厳しい判定を行い、再
度、着目ブロックの周辺ブロックで検出された動きベク
トルとの相関性をも考慮して判定するため、1度目の厳
しい信頼性判定で、正しく検出された動きベクトルが信
頼性無と誤判定された場合においても、2度目の信頼性
判定における救済措置により、信頼性有と正しく判定さ
れ、より多くの正しく検出された動きベクトルが信頼性
有、また、より多くの誤って検出された動きベクトルが
信頼性無と判定されることにより、信頼性判定を補正す
ることが可能となり、動きベクトルの信頼性判定結果を
非常に確度の高いものにすることができる。
検出装置よれば、最初、着目ブロックで検出された動き
ベクトルの信頼性を相関値のみで厳しい判定を行い、再
度、着目ブロックの周辺ブロックで検出された動きベク
トルとの相関性をも考慮して判定するため、1度目の厳
しい信頼性判定で、正しく検出された動きベクトルが信
頼性無と誤判定された場合においても、2度目の信頼性
判定における救済措置により、信頼性有と正しく判定さ
れ、より多くの正しく検出された動きベクトルが信頼性
有、また、より多くの誤って検出された動きベクトルが
信頼性無と判定されることにより、信頼性判定を補正す
ることが可能となり、動きベクトルの信頼性判定結果を
非常に確度の高いものにすることができる。
【0057】また第2発明によれば、各画素ブロックの
動きベクトルと前記各画素ブロック上下、左右もしくは
斜め方向の画素ブロックの動きベクトルとのユークリッ
ド距離により動きベクトル差分値が算出され、上記2度
目の信頼性判定に必要な、周囲のベクトルとの相関性を
示す動きベクトル相関値を求めることができる。
動きベクトルと前記各画素ブロック上下、左右もしくは
斜め方向の画素ブロックの動きベクトルとのユークリッ
ド距離により動きベクトル差分値が算出され、上記2度
目の信頼性判定に必要な、周囲のベクトルとの相関性を
示す動きベクトル相関値を求めることができる。
【0058】また第3発明によれば、各画素ブロックの
動きベクトルと前記各画素ブロックの上下、左右もしく
は斜め方向の画素ブロックの動きベクトルとの水平方向
成分、垂直成分それぞれの差分の絶対値和により動きベ
クトル差分値が算出され、上記2度目の信頼性判定に必
要な、周囲のベクトルとの相関性を示す動きベクトル相
関値を求めることができる。
動きベクトルと前記各画素ブロックの上下、左右もしく
は斜め方向の画素ブロックの動きベクトルとの水平方向
成分、垂直成分それぞれの差分の絶対値和により動きベ
クトル差分値が算出され、上記2度目の信頼性判定に必
要な、周囲のベクトルとの相関性を示す動きベクトル相
関値を求めることができる。
【0059】さらに第4発明によれば、上記動きベクト
ル相関値が、動きベクトル差分値が所定の閾値より小さ
い上下、左右もしくは斜め方向の画素ブロック数として
算出されることにより、上記2度目の信頼性判定を行う
ことができる。
ル相関値が、動きベクトル差分値が所定の閾値より小さ
い上下、左右もしくは斜め方向の画素ブロック数として
算出されることにより、上記2度目の信頼性判定を行う
ことができる。
【0060】また第5発明によれば、上記動きベクトル
相関値が、上下、左右もしくは斜め方向の画素ブロック
における動きベクトル差分値の累積加算値として算出さ
れることにより、上記2度目の信頼性判定を行うことが
できる。
相関値が、上下、左右もしくは斜め方向の画素ブロック
における動きベクトル差分値の累積加算値として算出さ
れることにより、上記2度目の信頼性判定を行うことが
できる。
【0061】さらに第6発明によれば、2度目の信頼性
判定は、第1動きベクトル信頼性判定手段より得られる
信頼性判定結果をもとに選択された所定の閾値と、動き
ベクトル相関値とを比較することにより行われることに
より、1度目の厳しい信頼性判定で、正しく検出された
動きベクトルが信頼性無と誤判定された場合において
も、2度目の信頼性判定における救済措置により、信頼
性有と正しく判定され、より多くの正しく検出された動
きベクトルが信頼性有、また、より多くの誤って検出さ
れた動きベクトルが信頼性無と判定されることにより、
信頼性判定を補正することが可能となり、動きベクトル
の信頼性判定結果を非常に確度の高いものにすることが
できる。
判定は、第1動きベクトル信頼性判定手段より得られる
信頼性判定結果をもとに選択された所定の閾値と、動き
ベクトル相関値とを比較することにより行われることに
より、1度目の厳しい信頼性判定で、正しく検出された
動きベクトルが信頼性無と誤判定された場合において
も、2度目の信頼性判定における救済措置により、信頼
性有と正しく判定され、より多くの正しく検出された動
きベクトルが信頼性有、また、より多くの誤って検出さ
れた動きベクトルが信頼性無と判定されることにより、
信頼性判定を補正することが可能となり、動きベクトル
の信頼性判定結果を非常に確度の高いものにすることが
できる。
【0062】また、第7発明の順次走査変換装置によれ
ば、動きベクトル検出装置を使用した、動きベクトル補
間画像を作成する動きベクトル補間画像回路と、フィー
ルド内でフィルタリングによる走査線補間画像を作成す
るフィールド内補間画像装置と、画素単位で、動きベク
トル補間画像とフィールド内補間画像との選択を行う補
間画像選択回路とにより構成することにより、得られる
順次走査変換画像は、インターラインフリッカーや画像
歪が発生しない高品質の画像となる。
ば、動きベクトル検出装置を使用した、動きベクトル補
間画像を作成する動きベクトル補間画像回路と、フィー
ルド内でフィルタリングによる走査線補間画像を作成す
るフィールド内補間画像装置と、画素単位で、動きベク
トル補間画像とフィールド内補間画像との選択を行う補
間画像選択回路とにより構成することにより、得られる
順次走査変換画像は、インターラインフリッカーや画像
歪が発生しない高品質の画像となる。
【図1】本発明の一実施例における動きベクトル検出装
置の要部構成図である。
置の要部構成図である。
【図2】同動きベクトル検出装置における従来の動きベ
クトル信頼性判定法の問題点の説明図である。
クトル信頼性判定法の問題点の説明図である。
【図3】同動きベクトル検出装置における着目画素ブロ
ックとその周辺ブロックとの関係を示した図である。
ックとその周辺ブロックとの関係を示した図である。
【図4】同動きベクトル検出装置における動きベクトル
信頼性判定の手順を説明するための一例を示した図であ
る。
信頼性判定の手順を説明するための一例を示した図であ
る。
【図5】同動きベクトル検出装置における動きベクトル
信頼性判定の手順を説明するための一例を示した図であ
る。
信頼性判定の手順を説明するための一例を示した図であ
る。
【図6】本発明の一実施例における順次走査変換装置の
要部構成図である。
要部構成図である。
【図7】同順次走査変換装置の走査線補間方法の説明図
である。
である。
【図8】従来の動きベクトル検出装置の要部構成図であ
る。
る。
【図9】動きベクトル検出装置に適用されるブロックマ
ッチング法の説明図である。
ッチング法の説明図である。
【図10】従来の動きベクトル検出装置における動きベク
トル信頼性判定回路の内部構成図である。
トル信頼性判定回路の内部構成図である。
【図11】従来の動きベクトル検出装置における動きベク
トル信頼性判定回路の内部構成図である。
トル信頼性判定回路の内部構成図である。
【図12】従来の動きベクトル検出装置における動きベク
トル信頼性判定回路の内部構成図である。
トル信頼性判定回路の内部構成図である。
【図13】従来の動きベクトル検出装置における動きベク
トル信頼性判定回路の内部構成図である。
トル信頼性判定回路の内部構成図である。
1,31 映像信号入力端子 2 フレームメモリ 3 フレームメモリアドレス制御回路 4 相関値算出回路 5 動きベクトル算出回路 6 動きベクトル信頼性判定回路 7,8, 出力端子 11 平均値算出回路 12,15,18 比較回路 13 補正回路 14 最小値探索回路 16 最大値探索回路 17 比算出回路 19 オア回路 21 動きベクトルメモリ 22 動きベクトルメモリアドレス制御回路 23 動きベクトル相関値算出回路 24 閾値選択回路 25 比較回路 32,33 フィールドメモリ 34 動きベクトル検出回路 35 動きベクトル補間回路 36 フィールド内補間回路 37 補間画像選択回路 38 走査線変換回路 39 画像出力端子 a,b 映像信号 Bij 動きベクトル検出ブロック Drij(vx ,vy ) 相関値 MVij 動きベクトル MFij 動きベクトル信頼性判定結果 Mrij 相関値 C0,C1,C2 閾値 IMmv,IMfd,IMitr 補間画像 IMni 順次走査変換画像 SI 補間画像選択信号
Claims (7)
- 【請求項1】 画面を複数の画素ブロックに分割し、前
記各画素ブロックについて所定の偏移における相関値を
算出する相関値算出手段と、前記相関値より各画素ブロ
ックにおける動きベクトルを算出する動きベクトル算出
手段と、前記動きベクトルを格納する動きベクトル格納
手段と、前記相関値をもとに前記動きベクトル算出手段
から算出される動きベクトルの信頼性を判定する第1動
きベクトル信頼性判定手段と、前記動きベクトル格納手
段に格納された、各画素ブロックの動きベクトルと前記
各画素ブロックの上下、左右もしくは斜め方向の画素ブ
ロックの動きベクトルとの動きベクトル差分値から動き
ベクトル相関値を算出する動きベクトル相関値算出手段
と、前記第1動きベクトル信頼性判定手段より得られる
信頼性判定結果と前記動きベクトル相関値とから再度前
記動きベクトルの信頼性を判定する第2動きベクトル信
頼性判定手段とを備えたことを特徴とする動きベクトル
検出装置。 - 【請求項2】 動きベクトル相関値算出手段は、動きベ
クトル差分値を、各画素ブロックの動きベクトルと前記
各画素ブロック上下、左右もしくは斜め方向の画素ブロ
ックの動きベクトルとのユークリッド距離とすることを
特徴とする請求項1記載の動きベクトル検出装置。 - 【請求項3】 動きベクトル相関値算出手段は、動きベ
クトル差分値を、各画素ブロックの動きベクトルと前記
各画素ブロックの上下、左右もしくは斜め方向の画素ブ
ロックの動きベクトルとの水平方向成分、垂直成分それ
ぞれの差分の絶対値和とすることを特徴とする請求項1
記載の動きベクトル検出装置。 - 【請求項4】 動きベクトル相関値算出手段は、動きベ
クトル相関値を、動きベクトル差分値が所定の閾値より
小さい上下、左右もしくは斜め方向の画素ブロック数と
することを特徴とする請求項1記載の動きベクトル検出
装置。 - 【請求項5】 動きベクトル相関値算出手段は、動きベ
クトル相関値を、上下、左右もしくは斜め方向の画素ブ
ロックにおける動きベクトル差分値の累積加算値とする
ことを特徴とする請求項1記載の動きベクトル検出装
置。 - 【請求項6】 第2動きベクトル信頼性判定手段は、第
1動きベクトル信頼性判定手段より得られる信頼性判定
結果をもとに所定の閾値を選択する閾値選択手段と、動
きベクトル相関値と前記所定の閾値とを比較する比較手
段を備えたことを特徴とする請求項1記載の動きベクト
ル検出装置 - 【請求項7】 1フィールド前の画像データを1フィー
ルド分格納する第1フィールドメモリと、2フィールド
前の画像データを1フィールド分格納する第2フィール
ドメモリと、現フィールドの画像データと前記2フィー
ルド前の画像データとから動きベクトルを検出する動き
ベクトル検出手段と、前記動きベクトルにより走査線の
補間を行う動きベクトル補間手段と、前記1フィールド
前の画像データから走査線の補間を行うフィールド内補
間手段と、前記動きベクトル補間手段で作成された動き
ベクトル補間画像と前記フィールド内補間手段で作成さ
れたフィールド内補間画像との選択を行う補間画像選択
手段と、前記1フィールド前の画像データと前記補間画
像選択手段より得られる補間画像とから順次走査線変換
化する走査線変換手段とを具備し、 前記動きベクトル検出手段を、請求項1記載の動きベク
トル検出装置とすることを特徴とする順次走査変換装
置。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP30578694A JPH08163573A (ja) | 1994-12-09 | 1994-12-09 | 動きベクトル検出装置、およびこの装置を用いた順次走査変換装置 |
US08/568,477 US5886745A (en) | 1994-12-09 | 1995-12-07 | Progressive scanning conversion apparatus |
US08/761,431 US5796437A (en) | 1994-12-09 | 1996-12-06 | Progressive scanning conversion apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP30578694A JPH08163573A (ja) | 1994-12-09 | 1994-12-09 | 動きベクトル検出装置、およびこの装置を用いた順次走査変換装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JPH08163573A true JPH08163573A (ja) | 1996-06-21 |
Family
ID=17949339
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP30578694A Pending JPH08163573A (ja) | 1994-12-09 | 1994-12-09 | 動きベクトル検出装置、およびこの装置を用いた順次走査変換装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JPH08163573A (ja) |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004215266A (ja) * | 2002-12-26 | 2004-07-29 | Samsung Electronics Co Ltd | 映像の再現品質の向上装置及びその方法 |
US7286187B2 (en) | 2003-08-04 | 2007-10-23 | Samsung Electronics Co., Ltd. | Adaptive de-interlacing method and apparatus based on phase corrected field, and recording medium storing programs for executing the adaptive de-interlacing method |
CN100440977C (zh) * | 2004-04-20 | 2008-12-03 | 索尼株式会社 | 图像处理设备和方法 |
JP2009188837A (ja) * | 2008-02-07 | 2009-08-20 | Olympus Corp | 撮像装置及び撮像方法 |
WO2010023982A1 (ja) * | 2008-08-27 | 2010-03-04 | 三菱電機株式会社 | 動きベクトル検出装置および画像処理装置 |
CN101990093A (zh) * | 2009-08-06 | 2011-03-23 | 索尼株式会社 | 检测视频中的重放片段的方法和设备 |
WO2011067870A1 (ja) * | 2009-12-01 | 2011-06-09 | パナソニック株式会社 | 画像処理装置および画像処理方法 |
US8111877B2 (en) | 2008-02-07 | 2012-02-07 | Olympus Corporation | Image processing device and storage medium storing image processing program |
US8164685B2 (en) | 2008-02-26 | 2012-04-24 | Olympus Corporation | Image pickup apparatus which performs aperture value control for a multiple exposure image, and recording medium |
US8199202B2 (en) | 2008-08-05 | 2012-06-12 | Olympus Corporation | Image processing device, storage medium storing image processing program, and image pickup apparatus |
US8319842B2 (en) * | 2007-12-13 | 2012-11-27 | Canon Kabushiki Kaisha | Image capturing apparatus to prevent image blurring and control method therefor |
US8379932B2 (en) | 2008-08-05 | 2013-02-19 | Olympus Corporation | Image processing apparatus, recording medium storing image processing program, and electronic apparatus |
-
1994
- 1994-12-09 JP JP30578694A patent/JPH08163573A/ja active Pending
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4524104B2 (ja) * | 2002-12-26 | 2010-08-11 | 三星電子株式会社 | 映像の再現品質の向上装置及びその方法 |
JP2004215266A (ja) * | 2002-12-26 | 2004-07-29 | Samsung Electronics Co Ltd | 映像の再現品質の向上装置及びその方法 |
US7697790B2 (en) | 2002-12-26 | 2010-04-13 | Samsung Electronics Co., Ltd. | Apparatus and method for enhancing quality of reproduced image |
US7286187B2 (en) | 2003-08-04 | 2007-10-23 | Samsung Electronics Co., Ltd. | Adaptive de-interlacing method and apparatus based on phase corrected field, and recording medium storing programs for executing the adaptive de-interlacing method |
CN100440977C (zh) * | 2004-04-20 | 2008-12-03 | 索尼株式会社 | 图像处理设备和方法 |
US8319842B2 (en) * | 2007-12-13 | 2012-11-27 | Canon Kabushiki Kaisha | Image capturing apparatus to prevent image blurring and control method therefor |
JP2009188837A (ja) * | 2008-02-07 | 2009-08-20 | Olympus Corp | 撮像装置及び撮像方法 |
US8111877B2 (en) | 2008-02-07 | 2012-02-07 | Olympus Corporation | Image processing device and storage medium storing image processing program |
US8164685B2 (en) | 2008-02-26 | 2012-04-24 | Olympus Corporation | Image pickup apparatus which performs aperture value control for a multiple exposure image, and recording medium |
US8199202B2 (en) | 2008-08-05 | 2012-06-12 | Olympus Corporation | Image processing device, storage medium storing image processing program, and image pickup apparatus |
US8379932B2 (en) | 2008-08-05 | 2013-02-19 | Olympus Corporation | Image processing apparatus, recording medium storing image processing program, and electronic apparatus |
WO2010023982A1 (ja) * | 2008-08-27 | 2010-03-04 | 三菱電機株式会社 | 動きベクトル検出装置および画像処理装置 |
CN101990093A (zh) * | 2009-08-06 | 2011-03-23 | 索尼株式会社 | 检测视频中的重放片段的方法和设备 |
WO2011067870A1 (ja) * | 2009-12-01 | 2011-06-09 | パナソニック株式会社 | 画像処理装置および画像処理方法 |
JPWO2011067870A1 (ja) * | 2009-12-01 | 2013-04-18 | パナソニック株式会社 | 画像処理装置および画像処理方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7057665B2 (en) | Deinterlacing apparatus and method | |
KR100561477B1 (ko) | 경계 방향에 기초한 영상 보간 방법 | |
KR100282397B1 (ko) | 디지탈 영상 데이터의 디인터레이싱 장치 | |
US6999128B2 (en) | Stillness judging device and scanning line interpolating device having it | |
JP3845456B2 (ja) | 動き補正ビデオ信号処理方式 | |
US20100271554A1 (en) | Method And Apparatus For Motion Estimation In Video Image Data | |
US20040125231A1 (en) | Method and apparatus for de-interlacing video signal | |
US8189105B2 (en) | Systems and methods of motion and edge adaptive processing including motion compensation features | |
CN101088290B (zh) | 用于时间-空间自适应视频去隔行扫描的方法、设备和*** | |
JPH0614305A (ja) | 映像信号のフィールド又はフレーム間の動きを表す運動ベクトルを導出する方法及びこれを使用する映像方式変換装置 | |
US20040246546A1 (en) | Scan line interpolation device, image processing device, image display device, and scan line interpolation method | |
US20130314595A1 (en) | Gradient adaptive video de-interlacing | |
JPH08163573A (ja) | 動きベクトル検出装置、およびこの装置を用いた順次走査変換装置 | |
KR100423504B1 (ko) | 영상신호의 라인보간 장치 및 방법 | |
US7023920B2 (en) | Facilitating motion estimation | |
US7460734B2 (en) | Method and apparatus of adaptive interpolation based on edge detection | |
US20040061803A1 (en) | Scan conversion apparatus | |
JP5139086B2 (ja) | インターレース方式から非インターレース方式へのビデオデータの変換 | |
US20120288001A1 (en) | Motion vector refining apparatus | |
US20060033839A1 (en) | De-interlacing method | |
JP3189292B2 (ja) | 走査線補間装置 | |
US20090046202A1 (en) | De-interlace method and apparatus | |
JPH11146346A (ja) | 順次走査変換方法及び順次走査変換装置 | |
AU2004200237B2 (en) | Image processing apparatus with frame-rate conversion and method thereof | |
US20080137750A1 (en) | Motion adaptive image processing |