JP4217543B2 - 動き情報処理装置及び方法 - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明は、撮像装置や表示装置などの映像情報を扱う映像情報処理装置に用いられる動き情報処理方法及び動き情報処理装置に関し、特に、飛び越し走査（インターレース走査）による映像情報を順次走査（プログレッシブ走査）による映像情報に変換する際に利用される画像の動き情報を処理する方法及び装置に関するものである。
【０００２】
【従来の技術】
１ライン毎の飛び越し走査による映像表示ではなく、順次走査による映像表示を行うため、入力された飛び越し走査による映像情報を順次走査による映像情報に変換するＩｎｔｅｒｌａｃｅ−Ｐｒｏｇｒｅｓｓｉｖｅ変換（以下、ＩＰ変換と呼ぶ）方法が知られている。
【０００３】
ＩＰ変換では、映像信号（画素信号）を補間すべき画素（補間画素）と画像上同一位置で隣接フィールドにある画素（参照画素）の映像信号から、補間画素の映像信号の値（補間値）を求めるフィールド間補間と、補間画素と同一フィールド内にあり隣接する上下のライン位置にある２つの参照画素の映像信号から補間値を求めるフィールド内補間と、を補間画素の動き情報に応じて、切り替える動き適応型のＩＰ変換が知られている。また、この動き適応型のＩＰ変換には、フィールド間補間値とフィールド内補間値との重み付けの割合を、補間画素の動き量に応じて変更して、補間値を算出する手法が採用されることもある。
【０００４】
従来のＩＰ変換では、動き情報の検出に、連続する奇数フィールド同士（又は偶数フィールド同士）の間での同一位置における画素の映像信号の差分値（フレーム間差分情報）を用いるため、奇数フィールド間にある偶数フイールドにおける動きのように、フレーム間でのフィールドで動きが生じた場合、動画であるにもかかわらず静止画であると判定されてしまい、結果として誤った補間値を算出してしまう。
【０００５】
特許文献１には、あるフィールドにおける動き情報に加え前フィールドにおける動き情報をも参照する方法が記載されている。
【０００６】
特許文献２には、前のフィールドで検出された動き情報に減衰係数を乗算し求められた値を、あるフィールドの動き情報に加算する方法が記載されており、これによれば、動画として検出された動き情報の効果を複数フィールドに渡って持続することが可能となる。
【０００７】
【特許文献１】
特開２０００−１７５１５９号公報
【特許文献２】
特公平８−３２０２５号公報
【０００８】
【発明が解決しようとする課題】
特許文献１に記載されているように、前フィールドにおける動き情報を参照するだけでは救済できないケースがある。
【０００９】
本発明者の知見によれば、このようなケースでは、過去のフィールドでの動き情報を蓄積しておくことが有効であるが、単に蓄積していったのでは、最終的に全ての画素での動き情報が動画を示す情報として処理されてしまうこととなる。そこで、特許文献２に記載されているような方法が有効であることが判った。
【００１０】
しかしながら、減衰係数が乗算されるものの、あるフィールドにおいて、入力された映像情報が静止画に切り替った場合にも、過去のフィールドにおいて検出された動画としての動き情報が影響を及ぼすため、あるフィールドにおいて静止画として補間値を算出すべきところ、動画として算出された補間値成分が加算されることとなり、動画としての補間値成分がほぼ零となるまで、正確な画像再生が困難となる。
本発明は上記課題に鑑みてなされたものであり、本発明の目的は、誤表示を抑制し正確な画像再生が可能となる動き情報処理装置及び方法を提供することにある。
本発明の別の目的は、動画と静止画が切り替った際の本来動画として処理されるべき補間画素での動き情報が静止画として処理されてしまうということを回避するとともに、動画から静止画に切り替った際に、速やかに静止画用の補間処理に移行することができる、動き適応型のＩＰ変換における動き情報処理装置及び方法を提供することにある。
【００１３】
【課題を解決するための手段】
本発明の動き情報処理方法は、飛び越し走査によるライン上の各画素が動画か静止画かを示す第１の動き情報を出力する出力工程、注目ｎフィールドよりも２フィールド前の過去ｎ−２フィールドにおける各画素の第１の動き情報を保持する保持工程、注目ｎフィールドと過去ｎ−２フィールドにおける同一位置の画素の画素信号の差分情報に基づいて、注目ｎフィールドにおける各画素が動画か静止画かを示す第２の動き情報を検出する検出工程、および注目ｎフィールドにおける、互いに隣接する複数の画素からなり注目画素を含む領域内に、第２の動き情報が動画を示す動画画素が所定数以上存在するか否かを判定する判定工程を有し、出力工程は、判定工程により動画画素が所定数以上は存在しないと判定された場合は、検出工程により検出された注目ｎフィールドにおける注目画素の第２の動き情報を該注目画素の第１の動き情報として出力し、判定工程により動画画素が所定数以上存在すると判定された場合は、検出工程により検出された注目ｎフィールドにおける注目画素の第２の動き情報と、保持工程により保持された過去ｎ−２フィールドにおける注目画素の第１の動き情報とに基づいて、注目ｎフィールドにおける注目画素の第１の動き情報を決定して出力することを特徴とする。
【００１４】
また、本発明の動き情報処理装置は、飛び越し走査によるライン上の各画素が動画か静止画かを示す第１の動き情報を出力する出力部と、注目ｎフィールドよりも２フィールド前の過去ｎ−２フィールドにおける各画素の第１の動き情報を保持する記憶部と、注目ｎフィールドと過去ｎ−２フィールドにおける同一位置の画素の画素信号の差分情報に基づいて、注目ｎフィールドにおける各画素が動画か静止画かを示す第２の動き情報を検出する検出部と、注目ｎフィールドにおける、互いに隣接する複数の画素からなり注目画素を含む領域内に、第２の動き情報が動画を示す動画画素が所定数以上存在するか否かを判定する判定部とを備え、出力部は、判定部により動画画素が所定数以上は存在しないと判定された場合は、検出部により検出された注目ｎフィールドにおける注目画素の第２の動き情報を該注目画素の第１の動き情報として出力し、判定部により動画画素が所定数以上存在すると判定された場合は、検出部により検出された注目ｎフィールドにおける注目画素の第２の動き情報と、記憶部により保持された過去ｎ−２フィールドにおける注目画素の第１の動き情報とに基づいて、注目ｎフィールドにおける注目画素の第１の動き情報を決定して出力することを特徴とする。
【００１５】
【発明の実施の形態】
図１、図２は本発明による動き情報処理装置の概要を説明するための図である。
【００１６】
図１の（ａ）、（ｂ）に示すように、本発明の動き情報処理装置は、入力された飛び越し走査による画素信号における動き情報を処理する。
【００１７】
注目画素の動き情報を検出するための動き情報検出部１４は、２つのフィールドそれぞれにおける同一位置の画素である画素（Ａ）、画素（Ｂ）それぞれの画素信号の差分情報（Ａ−Ｂ）に基づいて、画素（Ａ）の動き情報（α）を検出する。
【００１８】
動き情報決定／出力部１２は、検出部１４により検出された、注目（Ｎ）フィールドにおける注目画素（Ａ）の動き情報（α）と、注目フィールドより前の過去（Ｎ−２）フィールドにおける注目画素（Ｂ）の動き情報（β）と、に基づいて、注目画素（Ａ）の動き情報（α又はβ）を決定し出力する。
【００１９】
動き情報判定／管理部１１は、注目フィールド内における、複数の隣接画素からなり注目画素（Ａ）を含む領域（画素群）内に、該注目フィールドにおける画素の動き情報が動画を示す動画画素が所定数以上存在するか否かを判定する。
【００２０】
そして、動き情報判定／管理部１１は、領域内に前記動画画素が所定数以上存在しない場合には、動き情報決定／選択部１２において、過去フィールドの注目画素（Ｂ）の動き情報（β）を無視して、注目画素（Ａ）の動き情報をαに決定する。
【００２１】
逆に、動き情報判定／管理部１１は、領域内に前記動画画素が所定数以上存在する場合には、動き情報決定／選択部１２において、過去フィールドの注目画素（Ｂ）の動き情報（β）を無視することなく、これを参照して、注目画素（Ａ）の動き情報をα又はβに決定する。
【００２２】
動き情報決定／選択部１２により決定され出力された動き情報は、再び記憶部１３に入力され次の処理を待つ。
【００２３】
ここで、領域とは、１フィールド又は１フレームを構成している全ての画素のうちの一部の画素からなる群であり、水平ライン又は垂直ラインを構成する一部又は全ての画素からなるもの、或いは、隣接する複数の水平又は垂直ラインを構成する一部又は全ての画素からなるものである。具体的には、１水平走査ライン上の全ての有効画素の群、隣接する複数の水平走査ライン上の全ての有効画素の群、１列上の全ての有効画素の群、複数の隣接列上の全ての有効画素の群、或いは１６画素×１６画素のような一部の行列にのみ亘る２次元の隣接画素群などである。とりわけ、１又は複数の水平走査ライン上の画素群を管理することが好ましいものである。
【００２４】
領域の動画／静止画の判定においては、少なくとも１つの画素が動画画素と判定されれば、当該領域が動画であると判定することが好ましいが、動画画素が２つ或いは３つ以上の任意の数を閾値として動画か静止画かを判定してもよい。
【００２５】
このように、動き情報決定／選択部１２から出力された動き情報を過去フィールドの動き情報として、動き情報決定／選択部１２にフィードバックして、次回からの動き情報の決定の際に参照可能にするとともに、動き情報判定／管理部１１において判定された領域の動き情報に応じて、フィードバックされている過去の動き情報を参照するか否かを決定することにより、上述した課題を解決する。
【００２６】
図２は、本発明による動き情報検出方法の概要を示すフローチャートである。
【００２７】
検出工程Ｓ１では、２つのフィールドにおける同一位置の画素信号の差分情報に基づいて、各フィールド毎に注目フィールドにおける注目画素の動き情報を検出する。
判定工程Ｓ２では、注目フィールド内において、前述した領域内に、動画画素が所定数以上存在するか否かを判定する。
【００２８】
判定の結果、画素群が動画と判定された場合には、次の過去の動き情報参照工程Ｓ３において、先に決定し保持しておいた、注目フィールドより前の過去フィールドにおける注目画素の動き情報（β）を参照する。続いて、注目画素の動き情報参照工程Ｓ４において、検出された、注目フィールドにおける注目画素の動き情報（α）を参照する。
【００２９】
一方、判定の結果、画素群内に動画画素が所定数以上存在しない場合には、過去の動き情報参照工程Ｓ３をスキップすることにより、過去フィールドの注目画素の動き情報（β）を無視して、注目フィールドの注目画素の動き情報（α）のみを参照する。
【００３０】
そして、注目画素の動き情報決定・出力工程Ｓ５において、参照した動き情報に基づいて、注目フィールドにおける注目画素の動き情報を決定し出力する。
【００３１】
このように、注目画素とその周辺の周辺画素からなる領域が動画判定された場合には、結果的に過去の動き情報が採用されない場合もあるが、少なくとも過去の動き情報が参照されて動き情報が決定される。一方、その領域が静止画判定された場合には、過去の動き情報を参照することなく、注目フィールドの動き情報が参照されて、動き情報が決定される。
【００３２】
更に、次の動き情報処理に備えて、工程Ｓ５で決定された動き情報は、記憶部などに記憶され、次の処理の際に参照可能に提供され、この一連の処理が繰り返し行われる。
【００３３】
工程Ｓ３と工程Ｓ４の部分はこのフローに限定されることはなく、同等の処理が行われるものであればよい。
【００３４】
そして、ＩＰ変換において、補間される補間画素の動き情報は、上述した動き情報処理方法によって得られた画素の動き情報そのものであっても良いが、補間画素のあるフィールドの前後のフィールド内の同じフィールド内で補間画素と同じ位置にある２つの画素の動き情報、或いは補間画素のあるフィールドと同じフィールドで補間画素に隣接する少なくとも２つの画素の動き情報、の少なくとも４画素の動き情報のうち、少なくとも何れか１組を参照することにより、算出するこもとも好ましいものである。例えば、同じフィールド内での画像を反映させるために、補間画素（Ｘ）と同じフィールド内の隣接位置にある少なくとも２つの画素（Ｅ、Ａ）に注目して出力された前記注目画素の動き情報（ε、α）に基づいて、該補間画素の動き情報を提供することがより好ましいものである。そして、補間画素の動き情報に応じて、動き適応型のＩＰ変換を行って、補間画素の補間値（画素信号値）を算出すればよい。
【００３５】
または、動き適応型のＩＰ変換処理装置においては、補間画素（Ｘ）と同一位置で前フィールド及び後フィールドにある２つの画素（Ａ、Ｂ）の動き情報（α、β）と、補間画素と同一フィールド内にあり隣接位置にある２つの画素（Ｃ、Ｄ）の動き情報（γ、δ）と、に基づいて前記補間画素（Ｘ）の動き情報（χ）を求め、それに基づいて、前記補間画素（Ｘ）の補間値を計算することも好ましいものである。
【００３６】
図３は、動き適応型のＩＰ変換処理回路装置の構成を示すブロック図である。
【００３７】
飛び越し走査による映像信号（画素信号）は、フィールド単位で映像信号を記憶しておくためのフィールド信号記憶部１、２に順次記憶される。動き情報生成部３は、現在入力されているフィールドの映像信号と、フィールド信号記憶部２から出力される、現在入力されているフィールドよりも１フレーム（２フィールド）前に入力されたフィールドの映像信号との差分を検出することにより画素単位で動画情報であるか静止画情報であるかの判定を行い、その画素毎の動き情報から補間画素での動きを判定して出力する。前述した本発明の動き情報処理装置は、この動き情報生成部３に好適に用いられる。
【００３８】
入力される映像信号をライン単位で記憶しておくためのライン信号記憶部４から出力された映像信号と入力された映像信号とは、加算演算を行う加算器７により加算され、その値の半分の値を除算器８により求める。補間信号選択部９は、動き情報生成部３からの動き情報に応じ、フィールド信号記憶部１から出力される、現在入力されているフィールドよりも１フィールド前に入力された映像信号と、除算器８から出力される、補間画素の上下のラインに位置する画素値の平均値と、のいずれかを選択して補間画素値とする。入出力速度変換部５、６は、補間情報選択部９から出力される補間画素の映像信号と入力された映像信号とをそれぞれライン単位で記憶し、記憶された映像信号を入力された映像信号の２倍の速さで読み出す。表示信号選択部１０は、入出力速度変換部５、６から出力される映像信号を１ライン毎に切り替えて交互に出力する。
【００３９】
本発明に用いられる各信号記憶部や各動き情報記憶部は、遅延回路などでも実現可能である。
【００４０】
図４に、ＮＴＳＣ（National Television System Committee）信号を例に挙げて、飛び越し走査により画像が表示される様子を示す。ＮＴＳＣ信号の１フレームは、５２５本の水平ラインにより構成された１画面の単位であり、フレームは、飛び越し走査により、奇数ラインを表現する奇数フィールドと偶数ラインを表現する偶数フィールドとに分けられる。そして、ＮＴＳＣ信号ではこの奇数フィールドと偶数フィールドの映像を交互に表示することにより５２５ラインの映像信号による画像情報を表現している。即ち奇数フィールドと偶数フィールドは、お互いに不足しているライン情報を補完する関係にある。
【００４１】
図３のフィールド信号記憶部１からは、補間しようとする画素の位置に相当する前フィールドでの画素の映像信号が得られ、これが静止画の際の補間値とされる。一方、入力された映像信号とライン信号記憶部４からは、補間しようとする画素の上下のラインに位置する隣接画素の映像信号が得られ、更に加算器７及び除算器８により２つの隣接画素の映像信号の平均値が求められ、動画時の補間値とされる。
【００４２】
このように、補間画素の動き情報χが動画を示す場合には、補間画素と同一フィールド内にあり隣接位置にある２つの参照画素の画素信号から補間画素の画素信号の値を求め、補間画素の動き情報χが静止画を示す場合には、補間画素と同一位置で前フィールド及び後フィールドにある２つの参照画素の画素信号の少なくとも何れか一方から補間画素の画素信号の値を求めることが好ましいものである。
【００４３】
結局、入力された飛び越し走査による画素信号は、動き情報処理装置によって補間画素の動き情報が決定され、その動き情報を基にＩＰ変換処理装置によって各フィールドの欠損ラインの画素が補間されて順次走査の画素信号となり、これに対応して、表示器の走査線を順次選択することにより、映像情報は表示器において再生表示されることになる。
【００４４】
以下に、図面を参照して本発明のより具体的な実施形態を詳細に説明する。
【００４５】
（実施形態１）
図５は、本発明の一実施形態による動き情報処理装置のブロック図である。この装置は図３に示したＩＰ変換処理回路装置の動き情報生成部３として好適に用いられる。
【００４６】
図５において、減算器３１，絶対値回路３２，閾値フィルタ回路３３によって、前述した動き情報検出部が構成され、ライン動き情報記憶部４１を介して、動き情報選択部３９に供給される。また、動き情報選択部３９とＯＲ素子３８とが前述した動き情報決定／選択部１２に相当する役割を担う。４０は前述した動き情報判定／管理部１１に相当する動き情報管理部であり、３６、３７は前述した動き情報記憶部１３に相当するフィールド動き情報記憶部である。
【００４７】
ライン動き情報記憶部３４は、後述する動き情報選択部３９から出力される画素毎の動き情報をライン単位で記憶し、補間画素動き情報生成部３５は、後述する動き情報選択部３９から出力される動き情報と、ライン動き情報記憶部３４から出力される１ライン前の画素での動き情報とから、それらのライン間に生成する補間画素での動き情報を判断して出力する。補間画素動き情報生成部３５は、例えば、２入力のＯＲ素子などで構成できる。
【００４８】
４１は、閾値フィルタ回路３３から出力される画素毎の動き情報をライン単位で記憶しておくためのである。４０は、閾値フィルタ回路３３から出力される画素毎の動き情報を、互いに隣接する複数の隣接画素で構成される領域単位で管理するための動き情報管理部である。３９は、動き情報管理部４０から出力される領域単位で管理された動き情報に従い、ライン動き情報記憶部４１から出力される動き情報とＯＲ素子３８から出力される動き情報のいずれかを選択して出力する動き情報選択部である。３６、３７は、入力される動き情報をフィールド単位で記憶しておくためのフィールド動き情報記憶部であり、フィールド動き情報記憶部３６は、動き情報選択部３９から出力される動き情報を１フィールド期間記憶しておき、また、フィールド動き情報記憶部３７は、フィールド動き情報記憶部３６から出力される動き情報を１フィールド期間記憶する。これにより、フィールド動き情報記憶部３６からは、動き情報選択部３９から出力される動き情報を１フィールド期間遅延させた動き情報が出力され、フィールド動き情報記憶部３７からは、フィールド動き情報記憶部３６から出力される動き情報を１フィールド期間遅延させた動き情報、即ち動き情報選択部３９から出力される動き情報を１フレーム期間遅延させた動き情報が出力される。ＯＲ素子３８は、ライン動き情報記憶部４１から出力される動き情報とフィールド動き情報記憶部３７から出力される動き情報の論理和を求めて、動き情報選択部３９に出力する。
【００４９】
そして、補間画素動き情報生成部３５から出力された補間画素の動き情報が、図３に示したＩＰ変換処理回路装置の補間信号選択部９に供給されて、補間信号選択部９において、補間信号の選択が行われる。
【００５０】
次に、本実施形態における動き情報生成部３の動作について説明を行う。
【００５１】
減算器３１により、現在入力されているフィールドの映像信号と、フィールド信号記憶部２から出力される、現在入力されているフィールドよりも１フレーム前に入力されたフィールドの映像信号との差分値を求める。
【００５２】
絶対値回路３２は、減算器３１にて求まった差分値の絶対値を求め、閾値フィルタ回路３３に供給する。
【００５３】
閾値フィルタ回路３３は、絶対値と予め設定されている閾値とを比較し、絶対値が閾値よりも小さい場合にはその画素の映像信号が静止画であると判断して“０”を出力し、絶対値が閾値よりも大きい場合或いは等しい場合にはその画素の映像信号が動画であると判断して“１”を出力する。これにより、入力された映像信号にノイズのような不正な画素情報が加わっている場合でも、多少の変動範囲内であればその影響を取り除くことができる。
【００５４】
閾値フィルタ回路３３から出力される画素毎の動き情報は、画素毎の動き情報をライン単位で記憶しておくためのライン動き情報記憶部４１に記憶される。これによりライン動き情報記憶部４１からは、入力されている映像信号よりも１ライン前の画素での動き情報を得ることができる。
【００５５】
図６は、本発明に用いられる動き情報管理部４０の一構成例を示したブロック図である。ここでは、閾値フィルタ回路３３から出力される画素毎の動き情報をライン単位（領域単位）で管理する構成例について示している。
【００５６】
図６において、４０１は、入力される２つの信号の論理和を求めるためのＯＲ素子、４０２、４０３は入力された状態を保持しておくためのフリップフロップ（Ｆｌｉｐ−Ｆｌｏｐ）である。ＯＲ素子４０１では、閾値フィルタ回路３３から出力される画素毎の動き情報とフリップフロップ４０２からの出力信号との論理和が求められ、フリップフロップ４０２の入力信号として出力される。フリップフロップ４０２では、入力される画素のタイミングで変化するピクセルクロック信号ＰＣＬＫに同期して、ＯＲ素子４０１から出力される信号を保持する。即ちフリップフロップ４０２では、閾値フィルタ回路３３から一度“１”が出力されるとその状態を保持し常に“１”を出力することとなる。フリップフロップ４０２で保持されている状態はラインの先頭で出力される水平同期信号ＨＤにより初期化され、初期化される直前の状態はフリップフロップ４０３にて保持される。即ちフリップフロップ４０３からは、入力されている映像信号の前のラインにおいて、動画としての画素が存在するかどうかを示す信号を出力することとなる。もし、１ラインを２等分した半ライン単位で動き情報を管理する場合には、水平同期信号ＨＤに代えて、その倍の周波数のクロックを用いればよく、そのようなクロックは位相ロックループのような同期信号生成回路を用いて水平同期信号ＨＤに位相ロックさせて生成すればよい。
【００５７】
図７は、動き情報管理部４０においてライン単位で画素毎の動き情報が管理される様子を示したものである。即ち図７では、‘Ｈ’という文字に相当する画素での動き情報が動画として検出された様子を示しており、動き情報管理部４０では、‘Ｈ’という文字に相当する動画としての動き情報が検出された画素が存在するラインに対しては‘１’を出力し、それ以外のラインに対しては‘０’を出力することとなる。
【００５８】
図８は、各画素とその動き情報の関係を説明するための模式図である。ここでは、連続する３フィールドにおける、隣接５ライン上の画素の一部が示されている。
【００５９】
Ａ〜Ｆ、Ｘ、Ｙは画素を示しており、本実施形態においては、このうち画素Ａ、Ｂは画素Ａの動き情報を決定するために参照される参照画素、Ｙは現在の入力画素である。画素Ａ、Ｅは補間画素Ｘにおける動き情報を決定するために参照される参照画素となっており、画素Ｅの動き情報は、画素Ａの動き情報と同様の方法により画素Ｆの動き情報ζをも参照して決定される。
【００６０】
そして、補間画素Ｘが動画画素と判定された場合には、画素Ａと画素Ｅの映像信号の平均値が補間画素Ｘの映像信号値となり、補間画素Ｘが静止画画素と判定された場合には、画素Ｄの映像信号値が補間画素Ｘの映像信号値となる。
【００６１】
図５を参照するに、動き情報管理部４０からは、入力されている画素Ｙの映像信号よりも１ライン前のラインでの状態が出力されるため、動き情報選択部３９の一方には、ライン動き情報記憶部４１を介することによって、閾値フィルタ回路３３から出力される画素毎の動き情報を１ライン分遅延させた画素Ａの動き情報αが入力される。更に動き情報選択部３９には、ＯＲ素子３８から出力される動き情報が入力され、これらの動き情報が、動き情報管理部４０から出力される領域単位で管理された動き情報に応じて選択されて出力される。即ち、動き情報管理部４０から‘０’が出力された場合には、ライン動き情報記憶部４１から出力される動き情報が選択され、動き情報管理部４０から‘１’が出力された場合にはＯＲ素子３８から出力される動き情報が選択され、動き情報選択部３９から出力される。
【００６２】
動き情報選択部３９から出力される動き情報は、フィールド動き情報記憶部３６に入力され、更にフィールド動き情報記憶部３７を経て、動き情報選択部３９から出力される動き情報よりも１フレーム期間前のフィールドにおける画素Ｂの動き情報βとして出力される。これによりＯＲ素子３８では、閾値フィルタ回路３３から出力される画素毎の動き情報と、フィールド動き情報記憶部３７から出力される、１フレーム期間前のフィールドにおける動き情報との論理和が求められることとなり、即ちＯＲ素子３８からは、入力されているフィールドにおける動き情報α、或いは１フレーム期間前のフィールドでの動き情報βのいずれかで動画が検出された場合には、その画素での動き情報は動画として出力される。
【００６３】
そして、動き情報選択部３９では、動き情報管理部４０にて処理する画素と同一ライン上に動画画素が存在すると判断された場合には、ＯＲ素子３８から出力される動き情報、即ち、フレーム間差分情報から得られた動き情報αと１フレーム期間前のフィールドでの動き情報βとから求められた動き情報が選択され、同一ライン上に動画画素が存在しないと判断された場合には、ライン動き情報記憶部４１から出力される動き情報、即ち、フレーム間差分情報から得られた動き情報αが選択されて出力される。これにより動き情報選択部３９からは、動き情報管理部４０にて管理する領域において動画画素が検出され続けた場合には、過去のフィールドでの動画としての動き情報が複数のフレーム期間に渡り保持されることとなり、また、動き情報管理部４０にて管理する領域において動画画素が検出されない場合、つまり、ライン上の全ての画素が静止画画素である場合には、瞬時に過去のフレームでの動き情報は無視され、現フィールドにおけるフレーム間差分情報から得られた動き情報αが出力される。
【００６４】
動き情報選択部３９から出力される動き情報は、更にライン動き情報記憶部３４と補間画素動き情報生成部３５に入力され、ライン動き情報記憶部３４からは１ライン期間遅延した画素Ｅの動き情報（ε又はζ）が得られ、また補間画素動き情報生成部３５では、動き情報選択部３９から出力される動き情報（α又はβ）とライン動き情報記憶部３４から出力される１ライン前の画素での動き情報（ε又はζ）とから、それらのライン間に位置する補間画素での動き情報が判断されて出力されることとなる。
【００６５】
以下、本実施形態による作用効果を参考例を挙げて説明する。
【００６６】
（参考例）
図９は参考例による動き情報処理装置の構成を示すブロック図である。
【００６７】
図９において、３５は、閾値フィルタ回路３３から出力される動き情報と、ライン動き情報記憶部３４から出力される１ライン前の画素での動き情報とから、それらのライン間に新しく生成する補間画素での動き情報を得るための補間画素動き情報生成部である。
【００６８】
この装置を用いた場合の動き情報について、図１０〜図１２を参照して説明する。
【００６９】
図３のＩＰ変換方式では、補間信号選択部９において、動き情報生成部３から出力される動き情報が“０”である場合にはフィールド信号記憶１から出力される画素の映像信号を選択して出力し、“１”である場合には除算器８から出力される画素の映像信号を選択して出力する。
【００７０】
ここでは、動き情報の検出にフレーム間での差分情報を用いるため、そのフレーム間にあるフィールドで動きが生じた場合、動画であるにもかかわらず静止画であると判定される。しかし、前又は後のフィールドにおける動き情報を参照することにより、フレーム間にあるフィールドでの動きの検出を行うことができる。それでも、図１０に示すような、映像の場合には、誤検出が生じる。図１０は、“Ｈ”という文字が等間隔で連続して右方向から左方向に水平に移動する映像を説明するための模式図である。
【００７１】
即ち、図１０において、（ａ）は注目するｎフィールドでの表示状態、（ｂ）はその１つ前のｎ−１フィールドでの表示状態、（ｃ）、（ｄ）はそれぞれ更に１フィールド過去に溯った表示状態を示している。
【００７２】
ここでフレーム間差分情報から動き情報を求めると、ｎフィールドの画像の動き情報は図１０（ａ）の状態と図１０（ｃ）の状態を比較することによって得られ、その結果、図１１の（ａ）に示すように、図１０（ａ）での左端に位置する“Ｈ”の状態だけが動画としての動き情報として求まる。ｎ−１フィールドからｎ−３フィールドの画像の動き情報も同様に、図１１の（ｂ）、（ｃ）、（ｄ）に示すように、それぞれの画面で左端に位置する“Ｈ”の状態だけが動き情報として求まる。その結果、本来注目するｎフィールドにおいては図１０（ａ）で示した状態を表示するべきところが、図１２（ａ）に示すように、動画としての動き情報が求められた左端に位置する“Ｈ”の文字だけがフィールド内補間が選択されて正常に表示され、それ以外のところはフィールド間補間が選択されて図１０（ａ）の状態と図１０（ｂ）の状態とが混合された表示となってしまう。
【００７３】
これに対して、本実施形態によれば、図１０で示したような入力映像情報の場合において、各実施形態の動き情報選択部３９から出力される各フィールドにおける動き情報は、図１３に示すような動き情報として求まる。即ち、‘Ｈ’という文字が動いている限り、過去のフレームでの動画としての動き情報が複数フレーム期間に渡り保持されることとなり、これにより図１１に示した動き情報に比べて、より正確な動き情報が検出されることとなる。
【００７４】
また、このように、過去のフィールドでの動き情報を蓄積しておく場合には、過去のフィールドでの動き情報の影響が引きずられていまい、最終的に全ての画素での動き情報が動画として処理されてしまうこととなる。
【００７５】
これに対して、本実施形態では、動き情報管理部４０により予め定められた領域内で動きのある画素が全く検出されず、該領域の画像が静止していると判定された場合には、注目フィールドの注目画素での動き情報は、それ自身となり、過去のフィールドにおける動き情報の影響が遮断され、静止画を示す動き情報が得られる。即ち、動画の表示から静止画の表示に切り替わった時には、瞬時に、静止画として補間画素値が生成されることとなる。
【００７６】
また、過去の動きを考慮した画素の動き情報は、複数ビットで管理する必要もない。
【００７７】
ここで図５の動き情報管理部４０においては、閾値フィルタ回路３３から出力される画素毎の動き情報をライン単位で管理する例について示したが、閾値フィルタ回路３３から出力される画素毎の動き情報をライン単位で記憶しておくためのライン動き情報記憶部を複数組設けることにより、複数ライン単位で管理することも容易に実現可能である。
【００７８】
以上詳述した、本発明の実施形態によれば、前記動き情報管理部により予め定められた領域（画素群）内で動きのある画素が検出された場合には、注目しているフィールド内の注目画素の動き情報は１フレーム遅延した同一位置の画素の映像信号との差分情報から生成され、この動き情報と、過去のフィールドにおいて、同様に求めた注目画素の動き情報とを参照して決定される。
【００７９】
更に、このようにして求められた注目画素の動き情報を１フレーム期間に渡り保持しておき、再び、注目画素での動き情報を求める際に、その動き情報が用いられる。こうして、過去のフィールドにおける動き情報が複数フィールド期間に渡り保持される。
【００８０】
また、前記動き情報管理部により予め定められた領域内で動きのある画素が検出されなければ、注目フィールドの注目画素での動き情報は、注目フィールドとそれから１フレーム期間遅延したフィールドと間の映像信号の差分情報に基づくものとなり、過去のフィールドにおける動き情報の影響が遮断され、静止画を示す動き情報が得られる。即ち、動画の表示から静止画の表示に切り替わった時には、瞬時に、静止画として補間画素値が生成されることとなる。
【００８１】
また本実施形態によれば、過去のフィールドにおける動き情報を反映した入力画素での動き情報を１ビットで管理できる。
【００８２】
（実施形態２）
図１４は、本発明の一実施形態による動き情報処理装置のブロック図である。この装置は図３に示したＩＰ変換処理回路装置の動き情報生成部３として好適に用いられる。
【００８３】
図１４では、図５で示した動き情報生成部３の構成例に対し、ライン動き情報記憶部４１から出力される動き情報を更に１ライン期間保持するためのライン動き情報記憶部４２が付加され、動き情報管理部４０には閾値フィルタ回路３３から出力される動き情報以外に、ライン動き情報記憶部４１から出力される動き情報とライン動き情報記憶部４２から出力される動き情報とが入力され、動き情報管理部４０ではこれら隣接３ラインに渡る動き情報から予め定められた領域（隣接３ライン上の画素群）での動き情報を判断することとなる。
【００８４】
また、本発明においては、ライン上で参照する画素数も１ライン分全ての画素での動き情報を参照することに限ったものではなく、図６で示した動き情報管理部４０の構成において閾値フィルタ回路３３から出力される画素毎の動き情報を保持しておくためのフリップフロップを参照する画素数分設けることにより限定された画素のみを参照するようにすることは容易に実現可能であり、動き情報管理部４０にて管理する領域は各実施形態にて示したものに限るものではない。
【００８５】
そして、動き情報管理部４０にて管理される領域内で動画と判断された画素が検出されない場合には、フレーム間差分情報から得られた動き情報がそのまま用いられ、また、動き情報管理部４０にて管理される領域内で動画と判断された画素が検出された場合には、フレーム間差分情報から得られた動き情報以外に、１フレーム期間前の過去フィールドでの動き情報も参照されて画素毎の動き情報が求められる。
【００８６】
更に、このようにして求められた画素毎の動き情報を、フィールド動き情報記憶部３６、３７により１フレーム期間に渡り記憶しておき、フィールド動き情報記憶部３７から出力される動き情報を、動き情報管理部４０にて管理される領域内で動画と判断された画素が検出された場合に参照されるところの、１フレーム期間前の過去フィールドでの動き情報として用いる。これにより、注目している画素において、動き情報管理部４０にて管理される領域内で複数フレームに渡って動画と判断された画素が検出された場合には、その期間内に一度でもその画素での動き情報が動画として判断されれば、動き情報管理部４０にて管理される領域内で動画と判断された画素が検出されている間、その画素での動き情報は動画として出力されることとなる。
【００８７】
具体的には、図１０で示した入力映像情報において、動き情報選択部３９から出力される各フィールドにおける動き情報は、図１３に示すような動き情報として求まることとなる。即ち、‘Ｈ’という文字が動いている限り、過去のフレームでの動画としての動き情報が複数フレーム期間に渡り保持されることとなり、これにより図１１に示した動き情報に比べて、より正確な動き情報が検出されることとなる。
【００８８】
そして、動き情報管理部４０により予め定められた領域内が静止画であると判定された場合には、過去のフィールドにおける動き情報の影響が遮断され、静止画を示す動き情報が得られる。即ち、動画の表示から静止画の表示に切り替わった時には、瞬時に、静止画として補間画素値が生成されることとなる。
【００８９】
（実施形態３）
図１５は本発明の一実施形態による動き情報処理装置のブロック図である。この装置は図３に示したＩＰ変換処理回路装置の動き情報生成部３として好適に用いられる。
【００９０】
前述した実施形態１、２では、フレーム間でのフィールドでの動きが検出できない。その動きを検出する場合には、現フィールドの動き情報に加えて、隣接前フィールドにおける動き情報を参照すればよく、こうすれば、隣接フィールドにおける動き情報も反映させることができる。但し、ここで参照される動き情報に関しても、単純なフレーム間差分情報から得られた動き情報ではなく、図１３にて示したような動き情報となるように、動き情報選択部３９から出力される動き情報を記憶するために設けたフィールド動き情報記憶部３６及びフィールド動き情報記憶部３７から出力される動き情報を利用する。前述したように、フィールド動き情報記憶部３６及びフィールド動き情報記憶部３７から出力される動き情報は、図１３にて示したように動き情報選択部３９から出力される動き情報をフィールド単位で記憶しているため、フィールド動き情報記憶部３６、３７から出力される動き情報は、過去のフレームで得られた動画としての動き情報の影響を受けた動き情報となっている。
【００９１】
図１５の装置は、前後のフィールドにおける動き情報を参照することで前フィールドにおける動き情報を反映するという手段を、フィールド動き情報記憶部３６及びフィールド動き情報記憶部３７から出力される動き情報を用いることで具現化している。
【００９２】
図１５では、図５で示した動き情報生成部３の構成例に対し、ライン動き情報記憶部３４には、フィールド動き情報記憶部３６から出力される動き情報が入力され、更に補間動き情報生成部３５には、動き情報選択部３９とライン動き情報記憶部３４から出力される動き情報、及びフィールド動き情報記憶部３６とフィールド動き情報記憶部３７から出力される動き情報とが入力され、補間動き情報生成部３５ではこれらの画素での動き情報から注目している補間画素での動き情報を求めることとなる。このため、例えば、補間画素動き情報生成部３５、単純なＯＲ素子ではなく、ＡＮＤ素子とＯＲ素子の組み合わせを採用する。つまり、フィールド動き情報記憶部３７と動き情報選択部３９からの出力を２入力のＡＮＤ素子に入力し、このＡＮＤ素子の出力とフィールド動き情報記憶部３６及びライン動き情報記憶部３４の出力とを３入力のＯＲ素子に入力し、このＯＲ素子からの出力を補間画素動き情報生成部３５からの出力とする構成を採用するとよい。
【００９３】
図１６は、補間動き情報生成部３５において補間画素Ｘでの動き情報が求められる様子を示したものである。
【００９４】
入力されるｎフィールドの画素Ｙの映像信号よりも１フィールド期間前に入力されたｎ−１フィールドでの補間画素Ｘの動き情報χを求めることとなり、ｎ−１フィールドでの画素Ｃ、Ｄの動き情報γ、δはフィールド動き情報記憶部３６から出力され、その前後のｎフィールド及びｎ−２フィールドでの画素Ａ、Ｂの動き情報α、βはフィールド動き情報記憶部３７及び動き情報選択部３９から出力される。即ち入力されている画素の映像信号がｍ＋２ラインの画素Ｙの映像信号である場合、インタ−レースによる１ライン飛び越し走査であるため、ライン動き情報記憶部４１から出力される動き情報はｍラインの画素Ａでの動き情報αとなる。また、フィールド動き情報記憶部３７から出力される動き情報は、入力されている画素よりも２フィールド期間遅延した画素Ｂでの動き情報βであり、これにより動き情報選択部３９から出力される動き情報は、ライン動き情報記憶部４１から出力されるｎフィールドにおけるｍラインの画素Ａでの動き情報αと、フィールド動き情報記憶部３７から出力されるｎ−２フィールドにおけるｍラインの画素Ｂでの動き情報βとを参照して求められた、ｍラインの画素での動き情報となる。
【００９５】
動き情報選択部３９から出力される動き情報は、フィールド動き情報記憶部３６に入力されて１フィールド期間遅延させら、更にフィールド動き情報記憶部３７により１フィールド期間遅延させられて出力される。即ちフィールド動き情報記憶部３６からはｎ−１フィールドでの動き情報が出力され、フィールド動き情報記憶部３７からは、先に述べたようにｎ−２フィールドでの動き情報が出力される。ここでフィールド動き情報記憶部３６からは、ｎ−１フィールドにおけるｍ＋１ラインの画素Ｃでの動き情報γが出力されるものとすると、ライン動き情報記憶部３４からは、フィールド動き情報記憶部３６から出力される動き情報γよりも１ライン期間遅延した画素での動き情報、即ちｎ−１フィールドにおけるｍ−１ラインの画素Ｄでの動き情報δが出力される。
【００９６】
補間動き情報生成部３５では、動き情報選択部３９から出力される画素Ａでの動き情報αと、フィールド動き情報記憶部３７から出力される画素Ｂでの動き情報βと、フィールド動き情報記憶部３６から出力される画素Ｃでの動き情報γと、ライン動き情報記憶部３４から出力される画素Ｄでの動き情報δとが入力され、これらの動き情報からｎ−１フィールドにおけるｍラインに位置する補間画素Ｘでの動き情報χを求めることとなる。
【００９７】
これにより、補間動き情報生成部３５から出力される補間画素Ｘでの動き情報χは前フィールドにおける動き情報βを反映したものとして得られることとなり、その結果、図１０で示した映像に対して図１７に示すような動き情報が得られることとなり、これにより図１２で示したような誤表示を回避することができ、図１０で示した本来の表示状態を得ることができる。
【００９８】
また、本実施形態のように、補間画素Ｘとは別の隣接フィールド内の同位置にある画素Ａ、Ｂに注目して出力された注目画素の動き情報α、βに基づいて、補間画素の動き情報χを提供することも好ましいものである。
【００９９】
（実施形態４）
図１８は、本発明の一実施形態としての動き情報処理装置を示すブロック図である。この装置は図３に示したＩＰ変換処理回路装置の動き情報生成部３として好適に用いられる。
【０１００】
本実施形態では、予め定めた領域内に動画としての動き情報が検出された際に、前のフレームで求められた動き情報を参照する以外に前のフィールドで求められた動き情報を参照して画素毎の動き情報を求めるようにする。そして、このようにして求められた画素毎の動き情報を１フレーム期間に渡り記憶しておく手段を設け、前述した領域内に動画としての動き情報が検出された際に、前のフィールドで求められた動き情報及び前のフレームで求められた動き情報として参照する。これにより、別途前フィールドにおける動き情報を反映させる手段を講じることなく補間画素での動き情報を求めることが可能となる。
【０１０１】
図１８の構成は、図５で示した動き情報生成部３の構成に対し、フィールド動き情報記憶部３６から出力される動き情報をライン単位で記憶しておくためのライン動き情報記憶部４２と、動き情報選択部３９から出力される動き情報とフィールド動き情報記憶部３６及びライン動き情報記憶部４２から出力される動き情報とから入力された画素での動き情報を求めるための入力画素動き情報生成部４３が付加されている。また、フィールド動き情報記憶部３６及びライン動き情報記憶部３４には入力画素動き情報生成部４３から出力される動き情報が入力され、補間画素動き情報生成部３５には、入力画素動き情報生成部４３とライン動き情報記憶部３４から出力される動き情報とが入力される。
【０１０２】
動き情報選択部３９からは、動き情報管理部４０にて管理される領域内で動画と判断された画素が検出されない場合には、フレーム間差分情報から求められた動き情報がそのまま出力され、動き情報管理部４０にて管理される領域内で動画と判断された画素が検出された場合にはフレーム間差分情報から求められた動き情報以外にフィールド動き情報記憶部３７から出力される１フレーム期間前の過去フィールドでの動き情報を参照して求められた動き情報が出力される。ここで入力画素動き情報生成部４３には、動き情報選択部３９から出力される動き情報と、フィールド動き情報記憶部３６から出力される、動き情報選択部３９から出力される動き情報よりも１フィールド期間過去のフィールドでの動き情報、更に、ライン動き情報記憶部４２から出力される、フィールド動き情報記憶部３６から出力される動き情報よりも１ライン前のラインでの動き情報が入力され、これらの動き情報から、入力された画素での動き情報を求めることとなる。
【０１０３】
図１９は、入力画素動き情報生成部４３にて入力された画素での動き情報が求められる様子を示したものである。入力画素動き情報生成部４３は３入力のＯＲ素子などで構成できる。
【０１０４】
動き情報選択部３９からは、動き情報管理部４０にて管理される領域内で動画と判断された画素が検出された場合には、ＯＲ素子３８から出力される動き情報が選択されて出力されることとなるが、ここでＯＲ素子３８から出力される動き情報は、ライン動き情報記憶部４１から出力される動き情報と、フィールド動き情報記憶部３７から出力される動き情報との論理和されたものである。即ち、図１９に示した例では、入力されている画素がｎフィールドのｍ＋２ライン上の画素Ｙであるとした場合、入力される映像信号はインタ−レースによる１ライン飛び越し走査での映像信号であるため、ライン動き情報記憶部４１から出力される動き情報はｎフィールドのｍライン上の画素Ａでの動き情報αとなる。また、フィールド動き情報記憶部３７から出力される動き情報は、入力されている画素よりも２フィールド期間遅延した画素での動き情報であり、ｎ−２フィールドにおけるｍラインの画素Ｂでの動き情報βとなる。これにより動き情報選択部３９から出力される動き情報は、ライン動き情報記憶部４１から出力されるｎフィールドにおけるｍラインの画素Ａでの動き情報αと、フィールド動き情報記憶部３７から出力されるｎ−２フィールドにおけるｍラインの画素Ｂでの動き情報βとを参照して求められた、ｎフィールドにおけるｍラインの画素Ａでの動き情報（α、又はβ）となる。
【０１０５】
入力画素動き情報生成部４３では、動き情報選択部３９から出力される動き情報以外に、フィールド動き情報記憶部３６から出力される動き情報とライン動き情報記憶部４２から出力される動き情報とを参照して最終的に入力された画素での動き情報を決定することとなる。フィールド動き情報記憶部３６から出力される動き情報は、入力されている画素よりも１フィールド期間遅延した画素での動き情報であり、つまり、図１１のｎ−１フィールドにおけるｍ＋１ラインの画素Ｃでの動き情報γである。また、ライン動き情報記憶部４２から出力される動き情報は、フィールド動き情報記憶部３６から出力される動き情報よりも１ライン期間遅延した画素での動き情報であり、図１１のｎ−１フィールドにおけるｍ−１ラインの画素Ｄでの動き情報δとなる。
【０１０６】
即ち入力画素動き情報生成部４３では、ライン動き情報記憶部４１から出力されるｎフィールドにおけるｍラインの画素Ａでの動き情報αと、フィールド動き情報記憶部３７から出力されるｎ−２フィールドにおけるｍラインの画素Ｂでの動き情報βと、フィールド動き情報記憶部３６から出力されるｎ−１フィールドにおけるｍ＋１ラインの画素Ｃでの動き情報γと、ライン動き情報記憶部４２から出力されるｎ−１フィールドにおけるｍ−１ラインの画素Ｄでの動き情報δとが参照されて、ｎフィールドにおけるｍラインの画素Ａでの動き情報（α、β、γ、又はδ）が求められることとなる。
【０１０７】
ここで入力画素動き情報生成部４３は、各入力信号の論理和を求めるＯＲ素子のような、簡単な組み合わせ回路にて構成することができるが、フィールド動き情報記憶部３６或いはライン動き情報記憶部４２から出力される動き情報を複数画素分参照することにより入力された画素での動き情報を求めるとすることもできる。
【０１０８】
本実施形態によれば、入力画素動き情報生成部４３から出力される動き情報は、図１７にて示したように前フィールドにおける動き情報をも反映したものと同じである。
【０１０９】
更に、入力画素動き情報生成部４３から出力される動き情報をフィールド動き情報記憶部３６及びフィールド動き情報記憶部３７に記憶し、前述したように入力されている画素よりも１フィールド期間遅延した画素での動き情報、或いは入力されている画素よりも２フィールド期間遅延した画素での動き情報を参照可能にしている。これにより、動き情報管理部４０にて管理される領域内で動画と判断された画素が複数フレームに渡って存在する場合には、その領域を参照する画素での動き情報は、動き情報管理部４０にて管理される領域内で動画と判断された画素が検出される限り、過去のフィールドで動画として検出された動き情報は複数フィールドに渡って保持されることとなる。
【０１１０】
補間画素動き情報生成部３５では、入力画素動き情報生成部４３から出力される動き情報と、ライン動き情報記憶部３４から出力される１ライン前の画素Ｅでの動き情報εとから、それらのライン間に生成する補間画素Ｘでの動き情報χを判断して出力することとなる。
【０１１１】
このように、注目画素Ａとは別の隣接フィールド内の隣接位置にある別の２つの画素Ｃ、Ｄに注目して出力された注目画素の動き情報γ、δに基づいて、注目画素の動き情報αを決定し出力することも好ましいものである。
【０１１２】
（実施形態５）
図２０に本発明の実施形態５による動き情報処理装置の構成を示すブロック図を示す。
【０１１３】
実施形態４においては、前述したように動き情報管理部４０にて管理される領域内で動画と判断された画素が検出された場合には、動き情報選択部３９からは、ＯＲ素子３８から出力される、ライン動き情報記憶部４１から出力される動き情報とフィールド動き情報記憶部３７から出力される動き情報との論理和された動き情報が選択されて出力される。そのため、結果として動き情報管理部４０にて管理される領域内で動画と判断された画素が検出された場合での入力された画素での動き情報は、図１９で示したように、ライン動き情報記憶部４１とライン動き情報記憶部４２から出力される動き情報（α、δ）、及びフィールド動き情報記憶部３６とフィールド動き情報記憶部３７から出力される動き情報（γ、β）とを参照することにより求められていることとなる。
【０１１４】
本実施形態では、図１８に示した構成のうち、機能ブロックである、ＯＲ素子３８と入力画素動き情報生成部４３に代えて、ライン動き情報記憶部４１とライン動き情報記憶部４２とフィールド動き情報記憶部３６とフィールド動き情報記憶部３７からそれぞれ出力される動き情報を並行に入力し、それらを参照することにより動き情報を生成する機能ブロックを動き情報選択部３９の前段に設けている。これにより、実施形態４と同様の作用効果を奏する動き情報処理装置を得ることができる。
【０１１５】
（実施形態６）
図２１は、本実施形態による動き情報処理装置の構成を示すブロック図である。この装置は図３に示したＩＰ変換処理回路装置の動き情報生成部３として好適に用いられる。
【０１１６】
図２１の構成は、図１８で示した動き情報生成部３の構成に対し、ＯＲ素子３８と入力画素動き情報生成部４３を省き、代わりに、蓄積動き情報生成部４４を動き情報選択部３９の前段に設けられている。また、フィールド動き情報記憶部３６及びライン動き情報記憶部３４には動き情報選択部３９から出力される動き情報が入力され、補間画素動き情報生成部３５には、動き情報選択部３９とライン動き情報記憶部３４から出力される動き情報とが入力される。
【０１１７】
蓄積動き情報生成部４４には、ライン動き情報記憶部４１から出力される動き情報とフィールド動き情報記憶部３７から出力される動き情報、及びフィールド動き情報記憶部３６から出力される動き情報とライン動き情報記憶部４２から出力される動き情報とが入力され、蓄積動き情報生成部４４では、図１９に示したようにこれらの動き情報を参照してｎフィールドにおけるｍラインの画素Ａでの動き情報αを求めることとなる。蓄積動き情報生成部４４は４入力のＯＲ素子などで構成できる。動き情報選択部３９では、動き情報管理部４０にて管理される領域内で動画と判断された画素が検出された場合には蓄積動き情報生成部４４から出力される動き情報を選択して出力し、また、動き情報管理部４０にて管理される領域内で動画と判断された画素が検出されない場合にはライン動き情報記憶部４１から出力される、フレーム間差分情報から求めた動き情報を選択して出力する。
【０１１８】
これにより図２１で示した構成においても、動き情報選択部３９から出力される動き情報は図１７で示したように前フィールドにおける動き情報を反映した、より正確なものとなる。
【０１１９】
図１８の動き情報処理装置と図２１の動き情報処理装置との動作上の相違点は、次のとおりである。即ち、画素での動き情報が、動き情報管理部４０にて管理される領域内において動画と判断された画素が検出されなかった際に、図１８においては、フィールド動き情報記憶部３６及びライン動き情報記憶部４２から出力される前フィールドにおける動き情報を反映したものとして求められることとなるが、図２１においては、前フィールドにおける動き情報が反映されないという点である。
【０１２０】
しかしながら、動き情報管理部４０が、４つの画素Ａ、Ｂ、Ｃ、Ｄでの動き情報を参照することで最終的に画素Ａの動き情報を判断しており、動き情報管理部４０にて管理される領域内において動画画素が検出されないようなケースでは、動き情報を求めようとする画素Ａの周囲の画素も動画画素で無い確率が高く、図１８と図２１の間に表示動作上の違いは殆ど無い。
【０１２１】
本実施形態のように、注目フィールドの画素Ａに注目して出力された注目画素の動き情報αと、該注目フィールドより２フィールド前の同位置の画素Ｂに注目して出力された注目画素の動き情報βと、該注目フィールドより１フィールド前の隣接位置の画素Ｃ、Ｄに注目して出力された注目画素の動き情報γ、δと、に基づいて、生成された動き情報（α、β、γ又はδ）と、注目フィールドの画素Ａに注目して出力された注目画素の動き情報αと、のいずれかを前記注目フィールドの前記注目画素の動き情報αとして決定すべきかを判定する工程を含むことも好ましいものである。
【０１２２】
図２２は、本発明による、入力された飛び越し走査による画素信号を順次走査により表示器に表示する映像表示装置を示すブロック図である。
【０１２３】
２１は、インターネットやＬＡＮなどのネットワーク、ＣＳデジタル放送やＢＳデジタル放送やアナログ放送などに用いられる放送波、メモリーカードやハードディスクやＤＶＤのような情報提供媒体のうち、少なくとも何れか１つの媒体を介して受信した情報を適宜処理して、ＩＰ変換装置に供給される飛び越し走査による画素信号を提供する映像情報（輝度／色差信号、ＲＧＢ信号など）を出力する映像情報出力装置である。
【０１２４】
２２は、動き情報処理回路を有するＩＰ変換回路２０や解像度変換回路などを含む映像情報処理回路２３や、γ補正回路や色調整回路などを含む画素信号処理回路２４や、それらを制御する制御回路２５を含む映像信号処理装置である。
【０１２５】
２６は、走査線駆動回路２７や変調信号線駆動回路２８や固定画素のフラットパネル表示器２９を含む表示装置である。
【０１２６】
また、本発明の動き情報処理装置及び方法やそれを利用したＩＰ変換装置及び方法は、マイクロプロセッサ等で実行されるソフトウエア、或いは電子回路装置のようなハードウエアで実現され、後者の場合には、設計資産として知られるように、他の機能ブロックと論理合成可能なハードウエア記述言語で記述されたデータの形態で流通する。
【０１２７】
本発明は、上述した各実施形態に限定されるものではなく、本発明の目的を達成する範囲内で、各構成要素が適宜、代替物や均等物への置換されたものも本発明の範囲内である。
【０１２８】
【発明の効果】
本発明によれば、動画の表示から静止画の表示に切り替わったときには瞬時に静止画としての動き情報を得ることができるので、過去のフィールドにおける参照画素の動き情報を反映させることにより動き情報検出の精度を高めた場合に生じる誤表示という課題を、良好に解決することができる。
【図面の簡単な説明】
【図１】本発明の動き情報処理装置の概要を説明するための模式図である。
【図２】本発明の動き情報処理方法の概要を説明するためのフローチャートである。
【図３】本発明のＩＰ変換処理装置の構成を示すブロック図である。
【図４】インターレース走査方式の映像情報を説明するための模式図である。
【図５】本発明の実施形態１による動き情報処理装置の構成を示すブロック図である。
【図６】本発明に用いられる動き情報管理部の構成を示すブロック図である。
【図７】動き情報管理部の動作を説明するための模式図である。
【図８】画素とその画素の動き情報との関係を説明するための模式図である。
【図９】参考例による動き情報処理装置の構成を示すブロック図である。
【図１０】飛び越し走査による動きのある映像情報を示す模式図である。
【図１１】図１０に示した映像情報から得られる参考例による動き情報を示す模式図である。
【図１２】図１１に示した動き情報からＩＰ変換され順次走査により再生表示された映像情報を示す模式図である。
【図１３】図１０に示した映像情報から得られる本発明の一実施形態による動き情報を示す模式図である。
【図１４】本発明の実施形態２による動き情報処理装置の構成を示すブロック図である。
【図１５】本発明の実施形態３による動き情報処理装置の構成を示すブロック図である。
【図１６】画素とその画素の動き情報との関係を説明するための模式図である。
【図１７】図１０に示した映像情報から得られる本発明の実施形態３による動き情報を示す模式図である。
【図１８】本発明の実施形態４による動き情報処理装置の構成を示すブロック図である。
【図１９】画素とその画素の動き情報との関係を説明するための模式図である。
【図２０】本発明の実施形態５による動き情報処理装置の構成を示すブロック図である。
【図２１】本発明の実施形態６による動き情報処理装置の構成を示すブロック図である。
【図２２】本発明の一実施形態による映像情報表示装置の構成を示すブロック図である。
【符号の説明】
１、２ フィールド信号記憶部
３ 動き情報生成部
４ ライン信号記憶部
５、６ 入出力速度変換部
７ 加算器
８ 除算器
９ 補間信号選択部
１０ 表示信号選択部
１１ 動き情報判定／管理部
１２ 動き情報決定／選択部
１３ 動き情報記憶部
１４ 動き情報検出部
３１ 減算器
３２ 絶対値回路
３３ 閾値フィルタ回路
３４、４１、４２ ライン動き情報記憶部
３６、３７ フィールド動き情報記憶部
３８、４０１ ＯＲ素子
３９ 動き情報選択部
４０ 動き情報管理部
４３ 入力画素動き情報生成部
４４ 蓄積動き情報生成部
４０２、４０３ フリップフロップ

Claims (8)

1. 入力された飛び越し走査による画素信号における動き情報を処理する動き情報処理方法であって、
   飛び越し走査によるライン上の各画素が動画か静止画かを示す第１の動き情報を出力する出力工程、
   注目ｎフィールドよりも２フィールド前の過去ｎ−２フィールドにおける各画素の前記第１の動き情報を保持する保持工程、
   前記注目ｎフィールドと前記過去ｎ−２フィールドにおける同一位置の画素の画素信号の差分情報に基づいて、前記注目ｎフィールドにおける各画素が動画か静止画かを示す第２の動き情報を検出する検出工程、および
   前記注目ｎフィールドにおける、互いに隣接する複数の画素からなり注目画素を含む領域内に、前記第２の動き情報が動画を示す動画画素が所定数以上存在するか否かを判定する判定工程を有し、
   前記出力工程は、前記判定工程により動画画素が所定数以上は存在しないと判定された場合は、前記検出工程により検出された前記注目ｎフィールドにおける前記注目画素の前記第２の動き情報を該注目画素の前記第１の動き情報として出力し、前記判定工程により動画画素が所定数以上存在すると判定された場合は、前記検出工程により検出された前記注目ｎフィールドにおける前記注目画素の前記第２の動き情報と、前記保持工程により保持された前記過去ｎ−２フィールドにおける前記注目画素の前記第１の動き情報とに基づいて、前記注目ｎフィールドにおける前記注目画素の前記第１の動き情報を決定して出力することを特徴とする動き情報処理方法。
2. 前記互いに隣接する複数の画素は、水平ライン又は垂直ラインを構成する一部又は全ての画素からなる請求項１記載の動き情報処理方法。
3. 前記互いに隣接する複数の画素は、隣接する複数の水平ライン又は垂直ラインを構成する一部又は全ての画素からなる請求項１記載の動き情報処理方法。
4. さらに、前記出力工程により出力された、前記注目ｎフィールドにおける飛び越し走査によるライン上の画素の前記第１の動き情報に基づいて、前記注目ｎフィールドにおける飛び越し走査によるラインの間に位置する補間画素の動き情報を生成する補間画素動き情報決定工程を有する請求項１記載の動き情報処理方法。
5. 飛び越し走査による映像情報を順次走査による映像情報に変換する動き適応型のＩＰ変換方法であって、
   さらに、請求項４に記載の動き情報処理方法の前記補間画素動き情報決定工程において生成された前記注目ｎフィールドにおける前記補間画素の動き情報に基づいて、該補間画素の画素信号の補間値を決定する補間値決定工程を有することを特徴とする動き適応型のＩＰ変換方法。
6. 前記補間値決定工程において、前記補間画素の動き情報が動画を示す場合には、少なくとも前記注目ｎフィールドにおける前記補間画素に隣接する、前記飛び越し走査によるライン上の画素の画素信号に基づいて、前記注目ｎフィールドにおける前記補間画素の画素信号の補間値を求め、前記補間画素の動き情報が静止画を示す場合には、少なくとも前記注目ｎフィールドよりも１フィールド前の過去ｎ−１フィールドにおける前記補間画素と同一位置にある画素の画素信号に基づいて、前記注目ｎフィールドにおける前記補間画素の画素信号の補間値を求める請求項５記載の動き適応型のＩＰ変換方法。
7. 入力された飛び越し走査による画素信号における動き情報を処理するための動き情報処理装置であって、
   飛び越し走査によるライン上の各画素が動画か静止画かを示す第１の動き情報を出力する出力部と、
   注目ｎフィールドよりも２フィールド前の過去ｎ−２フィールドにおける各画素の前記第１の動き情報を保持する記憶部と、
   前記注目ｎフィールドと前記過去ｎ−２フィールドにおける同一位置の画素の画素信号の差分情報に基づいて、前記注目ｎフィールドにおける各画素が動画か静止画かを示す第２の動き情報を検出する検出部と、
   前記注目ｎフィールドにおける、互いに隣接する複数の画素からなり注目画素を含む領域内に、前記第２の動き情報が動画を示す動画画素が所定数以上存在するか否かを判定する判定部とを備え、
   前記出力部は、前記判定部により動画画素が所定数以上は存在しないと判定された場合は、前記検出部により検出された前記注目ｎフィールドにおける前記注目画素の前記第２の動き情報を該注目画素の前記第１の動き情報として出力し、前記判定部により動画画素が所定数以上存在すると判定された場合は、前記検出部により検出された前記注目ｎフィールドにおける前記注目画素の前記第２の動き情報と、前記記憶部により保持された前記過去ｎ−２フィールドにおける前記注目画素の前記第１の動き情報とに基づいて、前記注目ｎフィールドにおける前記注目画素の前記第１の動き情報を決定して出力することを特徴とする動き情報処理装置。
8. 飛び越し走査による映像情報を順次走査による映像情報に変換する動き適応型のＩＰ変換装置であって、
   請求項７に記載の動き情報処理装置と、
   前記出力部から出力された前記第１の動き情報に基づいて、前記注目ｎフィールドにおける飛び越し走査によるラインの間に位置する補間画素の動き情報を生成する補間画素動き情報決定部と、
   前記動き情報決定部において生成された前記注目ｎフィールドにおける前記補間画素の動き情報に基づいて、該補間画素の画素信号の補間値を決定する補間値決定部とを備えることを特徴とする動き適応型のＩＰ変換装置。

Images