JP2003179886A - 画像処理装置および方法、記録媒体、並びにプログラム - Google Patents
画像処理装置および方法、記録媒体、並びにプログラムInfo
- Publication number
- JP2003179886A JP2003179886A JP2001379798A JP2001379798A JP2003179886A JP 2003179886 A JP2003179886 A JP 2003179886A JP 2001379798 A JP2001379798 A JP 2001379798A JP 2001379798 A JP2001379798 A JP 2001379798A JP 2003179886 A JP2003179886 A JP 2003179886A
- Authority
- JP
- Japan
- Prior art keywords
- pixel
- field
- motion vector
- field image
- video signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Television Systems (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
(57)【要約】
【課題】 フィールド画像の画素が、静止している部分
の属するのか、または動きのある部分に属するのかを高
い精度で判別する。 【解決手段】 動き検出確定部３８は、フレーム間差分
算出部３１から入力されるフレーム間差分、およびフィ
ールド間差分算出部３２から入力されるフィールド間差
分に基づき、動き検出の対象となる画素の評価値を決定
する。また、動き検出確定部３８は、エッジ検出部３４
の検出結果、全画面静止判定部３５の判定結果、繰り返
し模様検出部３６の検出結果、および静止判定部３７の
判定結果に基づき、動き検出に用いる閾値を調整する。
さらに、動き検出確定部３８は、動きベクトル検出部１
３から入力される動きベクトル検出情報に基づき、動き
検出に用いる閾値を調整する。
の属するのか、または動きのある部分に属するのかを高
い精度で判別する。 【解決手段】 動き検出確定部３８は、フレーム間差分
算出部３１から入力されるフレーム間差分、およびフィ
ールド間差分算出部３２から入力されるフィールド間差
分に基づき、動き検出の対象となる画素の評価値を決定
する。また、動き検出確定部３８は、エッジ検出部３４
の検出結果、全画面静止判定部３５の判定結果、繰り返
し模様検出部３６の検出結果、および静止判定部３７の
判定結果に基づき、動き検出に用いる閾値を調整する。
さらに、動き検出確定部３８は、動きベクトル検出部１
３から入力される動きベクトル検出情報に基づき、動き
検出に用いる閾値を調整する。
Description
【０００１】
【発明の属する技術分野】本発明は、画像処理装置およ
び方法、記録媒体、並びにプログラムに関し、例えば、
インタレース方式の映像信号をプログレッシブ方式の映
像信号に変換する一連の処理のうち、フィールド画像内
の各画素の動きを検出する場合に用いて好適な画像処理
装置および方法、記録媒体、並びにプログラムに関す
る。
び方法、記録媒体、並びにプログラムに関し、例えば、
インタレース方式の映像信号をプログレッシブ方式の映
像信号に変換する一連の処理のうち、フィールド画像内
の各画素の動きを検出する場合に用いて好適な画像処理
装置および方法、記録媒体、並びにプログラムに関す
る。
【０００２】
【従来の技術】テレビジョン放送による映像信号、ビデ
オカセットやDVD(Digital VersatileDisc)などの記録メ
ディアに録画されている映像信号などは、ODDフィール
ド画像とEVENフィールド画像が交互に配置されたインタ
レース方式である。
オカセットやDVD(Digital VersatileDisc)などの記録メ
ディアに録画されている映像信号などは、ODDフィール
ド画像とEVENフィールド画像が交互に配置されたインタ
レース方式である。
【０００３】インタレース方式に対し、フィールド画像
の２倍の垂直解像度を有するフレーム画像が連続的に配
置された映像信号は、プログレッシブ方式と称される。
の２倍の垂直解像度を有するフレーム画像が連続的に配
置された映像信号は、プログレッシブ方式と称される。
【０００４】従来、より垂直解像度が高い高画質な映像
を表示することを目的として、インタレース方式の映像
信号（以下、インタレース映像信号と記述する）をプロ
グレッシブ方式の映像信号（以下、プログレッシブ映像
信号と記述する）に変換してから表示させるテレビジョ
ン受像機、DVDプレーヤなどが存在する。
を表示することを目的として、インタレース方式の映像
信号（以下、インタレース映像信号と記述する）をプロ
グレッシブ方式の映像信号（以下、プログレッシブ映像
信号と記述する）に変換してから表示させるテレビジョ
ン受像機、DVDプレーヤなどが存在する。
【０００５】インタレース映像信号をプログレッシブ映
像信号に変換する場合、画像内の静止している部分は前
後する２枚のフィールド画像が用いられ、動きのある部
分は１枚のフィールド画像が用いられる。このような処
理の前処理として、フィールド画像内の動きある部分を
検出する（すなわち、フィールド画像内の静止している
部分と動きのある部分とを判別する）動き検出処理が行
われる。
像信号に変換する場合、画像内の静止している部分は前
後する２枚のフィールド画像が用いられ、動きのある部
分は１枚のフィールド画像が用いられる。このような処
理の前処理として、フィールド画像内の動きある部分を
検出する（すなわち、フィールド画像内の静止している
部分と動きのある部分とを判別する）動き検出処理が行
われる。
【０００６】
【発明が解決しようとする課題】ところで、従来の動き
検出処理では、その検出精度が十分ではないので、実際
には動きのある部分を、静止している部分であると誤判
別してしまうことがある。
検出処理では、その検出精度が十分ではないので、実際
には動きのある部分を、静止している部分であると誤判
別してしまうことがある。
【０００７】このような場合、プログレッシブ映像信号
に変換する処理において、静止している部分と誤判定さ
れた部分に対して、実際には動きのある２枚のフィール
ド画像（すなわち、同一の物体の位置がずれてしまって
いる２枚の画像）が用いられてしまうので、変換された
プログレッシブ映像信号の対応する部分が、ぶれが生じ
た不自然な映像となってしまう課題があった。
に変換する処理において、静止している部分と誤判定さ
れた部分に対して、実際には動きのある２枚のフィール
ド画像（すなわち、同一の物体の位置がずれてしまって
いる２枚の画像）が用いられてしまうので、変換された
プログレッシブ映像信号の対応する部分が、ぶれが生じ
た不自然な映像となってしまう課題があった。
【０００８】逆に、実際には静止している部分を動きの
ある部分と誤判別することもある。このような場合、プ
ログレッシブ映像信号に変換する処理において、実際に
は静止している部分に対して、１枚のフィールド画像だ
けしか用いられてないので情報量が不足し、変換された
プログレッシブ映像信号の対応する部分の解像度が低下
した映像となってしまう課題があった。
ある部分と誤判別することもある。このような場合、プ
ログレッシブ映像信号に変換する処理において、実際に
は静止している部分に対して、１枚のフィールド画像だ
けしか用いられてないので情報量が不足し、変換された
プログレッシブ映像信号の対応する部分の解像度が低下
した映像となってしまう課題があった。
【０００９】本発明はこのような状況に鑑みてなされた
ものであり、フィールド画像の画素が、静止している部
分の属するのか、または動きのある部分に属するのかを
高い精度で判別できるようにすることを目的とする。
ものであり、フィールド画像の画素が、静止している部
分の属するのか、または動きのある部分に属するのかを
高い精度で判別できるようにすることを目的とする。
【００１０】
【課題を解決するための手段】本発明の画像処理装置
は、インタレース方式の映像信号を構成する複数のフィ
ールド画像を用いて、フィールド画像上の画素に対応す
る動きベクトルを算出する算出手段と、フィールド画像
上の画素に対して、動きのある部分に属するか否かを判
定する判定手段とを含み、判定手段は、算出手段から供
給される動きベクトル検出情報に基づき、フィールド画
像上の画素に対して、動きのある部分に属するか否かを
判定するための閾値を調整することを特徴とする。
は、インタレース方式の映像信号を構成する複数のフィ
ールド画像を用いて、フィールド画像上の画素に対応す
る動きベクトルを算出する算出手段と、フィールド画像
上の画素に対して、動きのある部分に属するか否かを判
定する判定手段とを含み、判定手段は、算出手段から供
給される動きベクトル検出情報に基づき、フィールド画
像上の画素に対して、動きのある部分に属するか否かを
判定するための閾値を調整することを特徴とする。
【００１１】本発明の画像処理装置は、判定手段の判定
結果に対応し、インタレース方式の映像信号を構成する
１または２枚のフィールド画像を用いて、プログレッシ
ブ方式の映像信号を構成するフレーム画像を生成する生
成手段をさらに含むことができる。
結果に対応し、インタレース方式の映像信号を構成する
１または２枚のフィールド画像を用いて、プログレッシ
ブ方式の映像信号を構成するフレーム画像を生成する生
成手段をさらに含むことができる。
【００１２】本発明の画像処理装置は、フィールド画像
上のエッジを検出するエッジ検出手段をさらに含むこと
ができ、前記判定手段は、エッジ検出手段の検出結果に
も基づき、フィールド画像上の画素に対して、動きのあ
る部分に属するか否かを判定するための閾値を調整する
ようにすることができる。
上のエッジを検出するエッジ検出手段をさらに含むこと
ができ、前記判定手段は、エッジ検出手段の検出結果に
も基づき、フィールド画像上の画素に対して、動きのあ
る部分に属するか否かを判定するための閾値を調整する
ようにすることができる。
【００１３】本発明の画像処理装置は、フィールド画像
の全画面が静止しているか否かを判定する全画面静止判
定手段をさらに含むことができ、前記判定手段は、全画
面静止判定手段の判定結果にも基づき、フィールド画像
上の画素に対して、動きのある部分に属するか否かを判
定するための閾値を調整するようにすることができる。
の全画面が静止しているか否かを判定する全画面静止判
定手段をさらに含むことができ、前記判定手段は、全画
面静止判定手段の判定結果にも基づき、フィールド画像
上の画素に対して、動きのある部分に属するか否かを判
定するための閾値を調整するようにすることができる。
【００１４】本発明の画像処理装置は、フィールド画像
上に繰り返し模様が存在するか否かを検出する繰り返し
模様検出手段をさらに含むことができ、前記判定手段
は、繰り返し模様検出手段の検出結果にも基づき、フィ
ールド画像上の画素に対して、動きのある部分に属する
か否かを判定するための閾値を調整するようにすること
ができる。
上に繰り返し模様が存在するか否かを検出する繰り返し
模様検出手段をさらに含むことができ、前記判定手段
は、繰り返し模様検出手段の検出結果にも基づき、フィ
ールド画像上の画素に対して、動きのある部分に属する
か否かを判定するための閾値を調整するようにすること
ができる。
【００１５】本発明の画像処理方法は、インタレース方
式の映像信号を構成する複数のフィールド画像を用い
て、フィールド画像上の画素に対応する動きベクトルを
算出する算出ステップと、フィールド画像上の画素に対
して、動きのある部分に属するか否かを判定する判定ス
テップとを含み、判定ステップの処理は、算出ステップ
の処理から供給される動きベクトル検出情報に基づき、
フィールド画像上の画素に対して、動きのある部分に属
するか否かを判定するための閾値を調整することを特徴
とする。
式の映像信号を構成する複数のフィールド画像を用い
て、フィールド画像上の画素に対応する動きベクトルを
算出する算出ステップと、フィールド画像上の画素に対
して、動きのある部分に属するか否かを判定する判定ス
テップとを含み、判定ステップの処理は、算出ステップ
の処理から供給される動きベクトル検出情報に基づき、
フィールド画像上の画素に対して、動きのある部分に属
するか否かを判定するための閾値を調整することを特徴
とする。
【００１６】本発明の記録媒体のプログラムは、インタ
レース方式の映像信号を構成する複数のフィールド画像
を用いて、フィールド画像上の画素に対応する動きベク
トルを算出する算出ステップと、フィールド画像上の画
素に対して、動きのある部分に属するか否かを判定する
判定ステップとを含み、判定ステップの処理は、算出ス
テップの処理から供給される動きベクトル検出情報に基
づき、フィールド画像上の画素に対して、動きのある部
分に属するか否かを判定するための閾値を調整すること
を特徴とする。
レース方式の映像信号を構成する複数のフィールド画像
を用いて、フィールド画像上の画素に対応する動きベク
トルを算出する算出ステップと、フィールド画像上の画
素に対して、動きのある部分に属するか否かを判定する
判定ステップとを含み、判定ステップの処理は、算出ス
テップの処理から供給される動きベクトル検出情報に基
づき、フィールド画像上の画素に対して、動きのある部
分に属するか否かを判定するための閾値を調整すること
を特徴とする。
【００１７】本発明のプログラムは、インタレース方式
の映像信号を構成する複数のフィールド画像を用いて、
フィールド画像上の画素に対応する動きベクトルを算出
する算出ステップと、フィールド画像上の画素に対し
て、動きのある部分に属するか否かを判定する判定ステ
ップとをコンピュータに実行させ、判定ステップの処理
は、算出ステップの処理から供給される動きベクトル検
出情報に基づき、フィールド画像上の画素に対して、動
きのある部分に属するか否かを判定するための閾値を調
整することを特徴とする。
の映像信号を構成する複数のフィールド画像を用いて、
フィールド画像上の画素に対応する動きベクトルを算出
する算出ステップと、フィールド画像上の画素に対し
て、動きのある部分に属するか否かを判定する判定ステ
ップとをコンピュータに実行させ、判定ステップの処理
は、算出ステップの処理から供給される動きベクトル検
出情報に基づき、フィールド画像上の画素に対して、動
きのある部分に属するか否かを判定するための閾値を調
整することを特徴とする。
【００１８】本発明の画像処理装置および方法、並びに
プログラムにおいては、インタレース方式の映像信号を
構成する複数のフィールド画像を用いて、フィールド画
像上の画素に対応する動きベクトルが算出され、フィー
ルド画像上の画素に対して、動きのある部分に属するか
否かが判定される。なお、判定の処理では、算出の処理
から供給される動きベクトル検出情報に基づき、フィー
ルド画像上の画素に対して、動きのある部分に属するか
否かを判定するための閾値が調整される。
プログラムにおいては、インタレース方式の映像信号を
構成する複数のフィールド画像を用いて、フィールド画
像上の画素に対応する動きベクトルが算出され、フィー
ルド画像上の画素に対して、動きのある部分に属するか
否かが判定される。なお、判定の処理では、算出の処理
から供給される動きベクトル検出情報に基づき、フィー
ルド画像上の画素に対して、動きのある部分に属するか
否かを判定するための閾値が調整される。
【００１９】
【発明の実施の形態】本発明を適用したDVDプレーヤの
構成例について、図１を参照して説明する。このDVDプ
レーヤ１は、DVD２に記録されているインタレース映像
信号を読み出し、プログレッシブ映像信号に変換して、
ディスプレイ３に出力するものである。なお、以下にお
いては、DVD２に記録されている音声に関するデータに
ついては言及せず、映像に関するデータにだけ言及す
る。
構成例について、図１を参照して説明する。このDVDプ
レーヤ１は、DVD２に記録されているインタレース映像
信号を読み出し、プログレッシブ映像信号に変換して、
ディスプレイ３に出力するものである。なお、以下にお
いては、DVD２に記録されている音声に関するデータに
ついては言及せず、映像に関するデータにだけ言及す
る。
【００２０】DVDプレーヤ１は、DVD２に記録されてい
る、例えばMPEG２方式で符号化された符号化データを読
み出す読み出し部１１、読み出された符号化データをデ
コードしてインタレース映像信号を生成するMPEGデコー
ド部１２、例えばブロックマッチング法を適用して、イ
ンタレース映像信号のフィールド画像を構成する各画素
のフィールド間動きベクトルを検出する動きベクトル検
出部１３、検出されたフィールド間動きベクトルを含む
動きベクトル検出情報を用いてフィールド画像内の各画
素の動きを検出し、動きのある部分の画素は１枚のフィ
ールド画像を用いて補間する動き検出部１４、画像内の
静止している部分の画素を、前後する２枚のフィールド
画像を用いて補間し、動き検出部１４が出力する動きの
ある部分が補間された画像と組み合わせてフレーム画像
を生成するプログレッシブ変換部１５、および生成され
たフレーム画像からなるプログレッシブ映像信号をディ
スプレイ３に出力する信号出力部１６から構成される。
る、例えばMPEG２方式で符号化された符号化データを読
み出す読み出し部１１、読み出された符号化データをデ
コードしてインタレース映像信号を生成するMPEGデコー
ド部１２、例えばブロックマッチング法を適用して、イ
ンタレース映像信号のフィールド画像を構成する各画素
のフィールド間動きベクトルを検出する動きベクトル検
出部１３、検出されたフィールド間動きベクトルを含む
動きベクトル検出情報を用いてフィールド画像内の各画
素の動きを検出し、動きのある部分の画素は１枚のフィ
ールド画像を用いて補間する動き検出部１４、画像内の
静止している部分の画素を、前後する２枚のフィールド
画像を用いて補間し、動き検出部１４が出力する動きの
ある部分が補間された画像と組み合わせてフレーム画像
を生成するプログレッシブ変換部１５、および生成され
たフレーム画像からなるプログレッシブ映像信号をディ
スプレイ３に出力する信号出力部１６から構成される。
【００２１】動きベクトル検出部１３が動き検出部１４
に対して出力する動きベクトル検出情報には、フィール
ド間動きベクトルの他、フレーム間動きベクトル、動き
ベクトルを検出した時の評価値、前記評価値の平均値、
前記評価値を算出したときの画素の差分演算結果などが
含まれる。
に対して出力する動きベクトル検出情報には、フィール
ド間動きベクトルの他、フレーム間動きベクトル、動き
ベクトルを検出した時の評価値、前記評価値の平均値、
前記評価値を算出したときの画素の差分演算結果などが
含まれる。
【００２２】なお、動きベクトル検出部１３には、本出
願人が特願２００１−３７８８８４号として先に提案し
た発明を適用することができる。
願人が特願２００１−３７８８８４号として先に提案し
た発明を適用することができる。
【００２３】ディスプレイ３は、入力されるプログレッ
シブ映像信号に対応する映像を表示する。
シブ映像信号に対応する映像を表示する。
【００２４】次に、動きベクトル検出部１３乃至プログ
レッシブ変換部１５に入力されるインタレース映像信号
について、図２を参照して説明する。以下、インタレー
ス映像信号を構成する連続する３枚のフィールド画像の
うち、基準とするフィールド画像をＦtと記述し、フィ
ールド画像Ｆtの１フィールド前のフィールド画像をＦ
t-1と記述し、フィールド画像Ｆt-1の１フィールド前の
フィールド画像をＦt-2と記述する。フィールド画像Ｆt
とフィールド画像Ｆt-2は同位相であり、フィールド画
像Ｆt-1とフィールド画像Ｆt-2は異位相である。
レッシブ変換部１５に入力されるインタレース映像信号
について、図２を参照して説明する。以下、インタレー
ス映像信号を構成する連続する３枚のフィールド画像の
うち、基準とするフィールド画像をＦtと記述し、フィ
ールド画像Ｆtの１フィールド前のフィールド画像をＦ
t-1と記述し、フィールド画像Ｆt-1の１フィールド前の
フィールド画像をＦt-2と記述する。フィールド画像Ｆt
とフィールド画像Ｆt-2は同位相であり、フィールド画
像Ｆt-1とフィールド画像Ｆt-2は異位相である。
【００２５】MPEGデコード部１２から順次出力されるフ
ィールド画像Ｆtは、動きベクトル検出部１３、動き検
出部１４、およびフィールドメモリ２１に入力される。
フィールドメモリ２１は、入力されるフィールド画像Ｆ
tを１フィールド周期だけ遅延し、フィールド画像Ｆt-1
として、動きベクトル検出部１３、動き判定部１４、プ
ログレッシブ変換部１５、およびフィールドメモリ２２
に出力する。フィールドメモリ２２は、入力されるフィ
ールド画像Ｆt-1を１フィールド周期だけ遅延し、フィ
ールド画像Ｆt-2として、動きベクトル検出部１３、お
よび動き判定部１４に出力する。
ィールド画像Ｆtは、動きベクトル検出部１３、動き検
出部１４、およびフィールドメモリ２１に入力される。
フィールドメモリ２１は、入力されるフィールド画像Ｆ
tを１フィールド周期だけ遅延し、フィールド画像Ｆt-1
として、動きベクトル検出部１３、動き判定部１４、プ
ログレッシブ変換部１５、およびフィールドメモリ２２
に出力する。フィールドメモリ２２は、入力されるフィ
ールド画像Ｆt-1を１フィールド周期だけ遅延し、フィ
ールド画像Ｆt-2として、動きベクトル検出部１３、お
よび動き判定部１４に出力する。
【００２６】したがって、動きベクトル検出部１３およ
び動き検出部１４には、連続する３枚のフィールド画像
Ｆt乃至Ｆt-2の全てが供給されことになる。プログレッ
シブ変換部１５には、連続する３枚のフィールド画像Ｆ
t乃至Ｆt-2のうちのフィールド画像Ｆt-2と動き検出部
１４の出力が供給されることになる。
び動き検出部１４には、連続する３枚のフィールド画像
Ｆt乃至Ｆt-2の全てが供給されことになる。プログレッ
シブ変換部１５には、連続する３枚のフィールド画像Ｆ
t乃至Ｆt-2のうちのフィールド画像Ｆt-2と動き検出部
１４の出力が供給されることになる。
【００２７】なお、図２のフィールドメモリ２１，２２
は、MPEGデコード部１２と動きベクトル検出部１３の間
に設けてもよいし、MPEGデコード部１２に内蔵するよう
にしてもよい。
は、MPEGデコード部１２と動きベクトル検出部１３の間
に設けてもよいし、MPEGデコード部１２に内蔵するよう
にしてもよい。
【００２８】図３は、動き検出部１４の構成例を示して
いる。フレーム間差分算出部３１は、上段から入力され
る１フィールドだけ間隔が空いた同位相のフィールド画
像Ｆ tとフィールド画像Ｆt-2の対応する画素同士の差分
を演算し、全画面静止判定部３５、および動き検出確定
部３８に出力する。また、フレーム間差分算出部３１
は、算出した画素の差分をメモリ３３に記録し、１フィ
ールド周期後に読み出して、全画面静止判定部３５、お
よび動き検出確定部３８に出力する。さらに、フレーム
間差分算出部３１は、フィールド画像Ｆtとフィールド
画像Ｆt-2の画素をエッジ検出部３４に出力する。
いる。フレーム間差分算出部３１は、上段から入力され
る１フィールドだけ間隔が空いた同位相のフィールド画
像Ｆ tとフィールド画像Ｆt-2の対応する画素同士の差分
を演算し、全画面静止判定部３５、および動き検出確定
部３８に出力する。また、フレーム間差分算出部３１
は、算出した画素の差分をメモリ３３に記録し、１フィ
ールド周期後に読み出して、全画面静止判定部３５、お
よび動き検出確定部３８に出力する。さらに、フレーム
間差分算出部３１は、フィールド画像Ｆtとフィールド
画像Ｆt-2の画素をエッジ検出部３４に出力する。
【００２９】フィールド間差分算出部３２は、上段から
入力される、連続した異位相のフィールド画像Ｆt-1と
フィールド画像Ｆt-2の一方または両方に垂直方向の補
正フィルタなどを用いた補間処理を施した後、対応する
画素同士の差分を演算し、繰り返し模様検出部３６、お
よび動き検出確定部３８に出力する。さらに、フィール
ド間差分算出部３２は、フィールド画像Ｆt-1とフィー
ルド画像Ｆt-2の画素をエッジ検出部３４に出力する。
なお、フィールド画像に対する補間処理には、垂直方向
の補正フィルタの他、線形補間、キュービック補間等を
用いてもよい。
入力される、連続した異位相のフィールド画像Ｆt-1と
フィールド画像Ｆt-2の一方または両方に垂直方向の補
正フィルタなどを用いた補間処理を施した後、対応する
画素同士の差分を演算し、繰り返し模様検出部３６、お
よび動き検出確定部３８に出力する。さらに、フィール
ド間差分算出部３２は、フィールド画像Ｆt-1とフィー
ルド画像Ｆt-2の画素をエッジ検出部３４に出力する。
なお、フィールド画像に対する補間処理には、垂直方向
の補正フィルタの他、線形補間、キュービック補間等を
用いてもよい。
【００３０】以下、１フィールド間隔が空いた同位相の
フィールド画像Ｆtとフィールド画像Ｆt-2との関係をフ
レーム間とも記述する。また、連続した異位相のフィー
ルド画像Ｆt-1とフィールド画像Ｆt-2との関係をフィー
ルド間とも記述する。
フィールド画像Ｆtとフィールド画像Ｆt-2との関係をフ
レーム間とも記述する。また、連続した異位相のフィー
ルド画像Ｆt-1とフィールド画像Ｆt-2との関係をフィー
ルド間とも記述する。
【００３１】エッジ検出部３４は、フレーム間差分算出
部３１およびフィールド間差分算出部３２から入力され
るフィールド画像の画素に基づき、動き検出の対象とな
る画素の近傍（例えば、当該画素と、上下する画素との
間）に、画像内の物体のエッジが存在するか否かを判定
し、判定結果を動き検出確定部３８に出力する。図４を
参照して、具体的に説明する。
部３１およびフィールド間差分算出部３２から入力され
るフィールド画像の画素に基づき、動き検出の対象とな
る画素の近傍（例えば、当該画素と、上下する画素との
間）に、画像内の物体のエッジが存在するか否かを判定
し、判定結果を動き検出確定部３８に出力する。図４を
参照して、具体的に説明する。
【００３２】フィールド画像Ｆt上の実際には存在して
いない、補間される画素Ｐ’7が動き検出の対象となる
場合、フィールド画像Ｆtの画素Ｐ6とフィールド画像Ｆ
t-1の画素Ｐ4との差分と、フィールド画像Ｆtの画素Ｐ8
とフィールド画像Ｆt-1の画素Ｐ4との差分とを比較し、
大きい方の差分が十分に大きい場合、エッジが存在する
と判定する。
いない、補間される画素Ｐ’7が動き検出の対象となる
場合、フィールド画像Ｆtの画素Ｐ6とフィールド画像Ｆ
t-1の画素Ｐ4との差分と、フィールド画像Ｆtの画素Ｐ8
とフィールド画像Ｆt-1の画素Ｐ4との差分とを比較し、
大きい方の差分が十分に大きい場合、エッジが存在する
と判定する。
【００３３】なお、フィールド画像Ｆtの画素Ｐ6とフィ
ールド画像Ｆt-1の画素Ｐ4との差分と、フィールド画像
Ｆt-1の画素Ｐ3，Ｐ4の差分との小さい方と、フィール
ド画像Ｆtの画素Ｐ8とフィールド画像Ｆt-1の画素Ｐ4と
の差分とを比較し、大きい方の差分が十分に大きい場
合、エッジが存在すると判定するようにしてもよい。こ
のようにした場合、より高精度にエッジを検出すること
が可能である。
ールド画像Ｆt-1の画素Ｐ4との差分と、フィールド画像
Ｆt-1の画素Ｐ3，Ｐ4の差分との小さい方と、フィール
ド画像Ｆtの画素Ｐ8とフィールド画像Ｆt-1の画素Ｐ4と
の差分とを比較し、大きい方の差分が十分に大きい場
合、エッジが存在すると判定するようにしてもよい。こ
のようにした場合、より高精度にエッジを検出すること
が可能である。
【００３４】さらに、画素Ｐ3，Ｐ4，Ｐ6それぞれの水
平方向に隣接する画素に対して同様の処理を行い、エッ
ジ判定に用いるようにしてもよい。
平方向に隣接する画素に対して同様の処理を行い、エッ
ジ判定に用いるようにしてもよい。
【００３５】図３に戻る。全画面静止判定部３５は、動
きベクトル検出部１３から入力されるフィールド画像内
の動きベクトル、およびフレーム間差分算出部３１から
入力されるフレーム間の対応する画素同士の差分を、所
定数のフレーム間に亘って比較することにより、画面全
体が静止しているか否かを判定し、判定結果を動き検出
確定部３８に出力する。
きベクトル検出部１３から入力されるフィールド画像内
の動きベクトル、およびフレーム間差分算出部３１から
入力されるフレーム間の対応する画素同士の差分を、所
定数のフレーム間に亘って比較することにより、画面全
体が静止しているか否かを判定し、判定結果を動き検出
確定部３８に出力する。
【００３６】具体的には、例えば、動きベクトル検出部
１３から入力されるフィールド画像内の動きベクトルが
０である画素の数や、フレーム間差分算出部３１から入
力されるフレーム間の対応する画素同士の差分が所定の
大きさを下回っている画素の数をカウントし、そのカウ
ント値が所定の数以下であった場合、画面全体が静止し
ていると判定するようにする。
１３から入力されるフィールド画像内の動きベクトルが
０である画素の数や、フレーム間差分算出部３１から入
力されるフレーム間の対応する画素同士の差分が所定の
大きさを下回っている画素の数をカウントし、そのカウ
ント値が所定の数以下であった場合、画面全体が静止し
ていると判定するようにする。
【００３７】なお、全画面静止判定部３５は、全画面内
のうちの所定の領域が静止しているか否かを判定し、判
定結果を動き検出確定部３８に出力することもできる。
のうちの所定の領域が静止しているか否かを判定し、判
定結果を動き検出確定部３８に出力することもできる。
【００３８】繰り返し模様検出部３６は、フィールド間
差分算出部３２から入力されるフィールド間の対応する
画素同士の差分に基づき、動き検出の対象となる画素の
周囲に繰り返し模様（例えば、縞模様など）が存在する
か否かを判定し、判定結果を動き検出確定部３８に出力
する。
差分算出部３２から入力されるフィールド間の対応する
画素同士の差分に基づき、動き検出の対象となる画素の
周囲に繰り返し模様（例えば、縞模様など）が存在する
か否かを判定し、判定結果を動き検出確定部３８に出力
する。
【００３９】なお、繰り返し模様検出部３６では、例え
ば、フィールド画像中に、その水平走査線と等間隔であ
る静止している横線の画像が含まれている場合、それを
動きがある部分の繰り返し模様であると誤判定してしま
うことがある。この誤判定を補償するために、上述した
全画面静止判定部３５が設けられている。
ば、フィールド画像中に、その水平走査線と等間隔であ
る静止している横線の画像が含まれている場合、それを
動きがある部分の繰り返し模様であると誤判定してしま
うことがある。この誤判定を補償するために、上述した
全画面静止判定部３５が設けられている。
【００４０】静止判定部３７は、動きベクトル検出部１
３から入力されるフィールド画像内の動きベクトルに基
づき、動き検出の対象となる画素が静止画素であるか否
かを判定し、判定結果を動き検出確定部３８に出力す
る。
３から入力されるフィールド画像内の動きベクトルに基
づき、動き検出の対象となる画素が静止画素であるか否
かを判定し、判定結果を動き検出確定部３８に出力す
る。
【００４１】動き検出確定部３８は、フレーム間差分算
出部３１から入力されるフレーム間の対応する画素同士
の差分、およびフィールド間差分算出部３２から入力さ
れるフィールド間の対応する画素同士の差分に基づき、
動き検出の対象となる画素の評価値を決定する。
出部３１から入力されるフレーム間の対応する画素同士
の差分、およびフィールド間差分算出部３２から入力さ
れるフィールド間の対応する画素同士の差分に基づき、
動き検出の対象となる画素の評価値を決定する。
【００４２】図４を参照して、具体的に説明する。フィ
ールド画像Ｆt上の実際には存在しておらず、インタレ
ース映像信号をプログレッシブ映像信号に変換するとき
に補間される画素Ｐ’7の評価値を決定する場合、フレ
ーム間差分算出部３１から供給されるフィールド画像Ｆ
t+1の画素Ｐ9とフィールド画像Ｆt-1の画素Ｐ4との差
分、フィールド画像Ｆtの画素Ｐ6とフィールド画像Ｆ
t-2の画素Ｐ1との差分、および、フィールド画像Ｆtの
画素Ｐ8とフィールド画像Ｆt-2の画素Ｐ2の差分に注目
する。
ールド画像Ｆt上の実際には存在しておらず、インタレ
ース映像信号をプログレッシブ映像信号に変換するとき
に補間される画素Ｐ’7の評価値を決定する場合、フレ
ーム間差分算出部３１から供給されるフィールド画像Ｆ
t+1の画素Ｐ9とフィールド画像Ｆt-1の画素Ｐ4との差
分、フィールド画像Ｆtの画素Ｐ6とフィールド画像Ｆ
t-2の画素Ｐ1との差分、および、フィールド画像Ｆtの
画素Ｐ8とフィールド画像Ｆt-2の画素Ｐ2の差分に注目
する。
【００４３】なお、フレーム間差分算出部３１におい
て、フィールド画像Ｆt+1の画素Ｐ9とフィールド画像Ｆ
t-1の画素Ｐ4との差分（以下、フレーム間差分Ｐ9Ｐ4と
記述する。他も同様である）が算出されたとき、既にメ
モリ３３には１フィールド周期前に算出されたフレーム
間差分Ｐ6Ｐ1とフレーム間差分Ｐ8Ｐ2が記録されている
のでそれを利用する。
て、フィールド画像Ｆt+1の画素Ｐ9とフィールド画像Ｆ
t-1の画素Ｐ4との差分（以下、フレーム間差分Ｐ9Ｐ4と
記述する。他も同様である）が算出されたとき、既にメ
モリ３３には１フィールド周期前に算出されたフレーム
間差分Ｐ6Ｐ1とフレーム間差分Ｐ8Ｐ2が記録されている
のでそれを利用する。
【００４４】続いて、フレーム間差分Ｐ9Ｐ4とフレーム
間差分Ｐ6Ｐ1の大きい方と、フレーム間差分Ｐ9Ｐ4とフ
レーム間差分Ｐ8Ｐ2の大きい方とを比較し、その小さい
方をフレーム間差分評価値に決定する。
間差分Ｐ6Ｐ1の大きい方と、フレーム間差分Ｐ9Ｐ4とフ
レーム間差分Ｐ8Ｐ2の大きい方とを比較し、その小さい
方をフレーム間差分評価値に決定する。
【００４５】また、フィールド間差分算出部３２から供
給されるフィールド画像Ｆtの補間された画素Ｐ’7とフ
ィールド画像Ｆt-1の画素Ｐ4との差分（以下、フィール
ド間差分Ｐ’7Ｐ4と記述する。）に注目し、フィールド
間差分評価値に決定する。
給されるフィールド画像Ｆtの補間された画素Ｐ’7とフ
ィールド画像Ｆt-1の画素Ｐ4との差分（以下、フィール
ド間差分Ｐ’7Ｐ4と記述する。）に注目し、フィールド
間差分評価値に決定する。
【００４６】さらに、フレーム間差分評価値とフィール
ド間差分評価値を比較し、大きい方を動き検出の評価値
に決定する。
ド間差分評価値を比較し、大きい方を動き検出の評価値
に決定する。
【００４７】図３に戻る。また、動き検出確定部３８
は、エッジ検出部３４の検出結果、全画面静止判定部３
５の判定結果、繰り返し模様検出部３６の検出結果、お
よび静止判定部３７の判定結果に基づき、動き検出に用
いる閾値を調整する。
は、エッジ検出部３４の検出結果、全画面静止判定部３
５の判定結果、繰り返し模様検出部３６の検出結果、お
よび静止判定部３７の判定結果に基づき、動き検出に用
いる閾値を調整する。
【００４８】すなわち、エッジの付近では、実際には静
止している部分を、動きのある部分と誤判別することが
多いので、エッジが検出された場合、および、全画面が
静止であると判定された場合、動き検出用の閾値を、静
止している部分と判定し易い方向に調整する。また、さ
らに、静止判定部３７の判定結果が静止である場合に
も、動き検出用の閾値を、静止している部分と判定し易
い方向に調整する。
止している部分を、動きのある部分と誤判別することが
多いので、エッジが検出された場合、および、全画面が
静止であると判定された場合、動き検出用の閾値を、静
止している部分と判定し易い方向に調整する。また、さ
らに、静止判定部３７の判定結果が静止である場合に
も、動き検出用の閾値を、静止している部分と判定し易
い方向に調整する。
【００４９】反対に、繰り返し模様の物体が移動してい
ても静止していると誤判定されることが多いので、繰り
返し模様が検出された場合には、動き検出用の閾値を、
動きのある部分と判定し易い方向に調整する。ただし、
全画面が静止であると判定され、かつ、繰り返し模様が
検出された場合には、全画面が静止であると判定された
ことを優先して、動き検出用の閾値を、動きのある部分
と判定し易い方向に調整することは行わない。
ても静止していると誤判定されることが多いので、繰り
返し模様が検出された場合には、動き検出用の閾値を、
動きのある部分と判定し易い方向に調整する。ただし、
全画面が静止であると判定され、かつ、繰り返し模様が
検出された場合には、全画面が静止であると判定された
ことを優先して、動き検出用の閾値を、動きのある部分
と判定し易い方向に調整することは行わない。
【００５０】さらに、動き検出確定部３８は、動きベク
トル検出部１３から入力される動きベクトル検出情報に
基づき、動き検出に用いる閾値を調整する。
トル検出部１３から入力される動きベクトル検出情報に
基づき、動き検出に用いる閾値を調整する。
【００５１】例えば、動きベクトル検出情報に基づき、
動きベクトル検出用の評価値の平均値、探索範囲内での
分布、検出された動きベクトルの周辺の評価値との差分
を算出し、それらに基づき、動き検出の対象となる画素
の動きベクトルの評価値が他のものよりも突出してお
り、かつ、得られた動きベクトルが静止でないことを示
している場合、動き検出に用いる閾値を、動きのある部
分と判定し易い方向に調整する。
動きベクトル検出用の評価値の平均値、探索範囲内での
分布、検出された動きベクトルの周辺の評価値との差分
を算出し、それらに基づき、動き検出の対象となる画素
の動きベクトルの評価値が他のものよりも突出してお
り、かつ、得られた動きベクトルが静止でないことを示
している場合、動き検出に用いる閾値を、動きのある部
分と判定し易い方向に調整する。
【００５２】また、フィールド画像内の他の動きベクト
ルに対応する動きベクトル検出情報、並びに以前の数フ
ィールド分の動きベクトルに対応する動きベクトル検出
情報に基づき、画像内に含まれるノイズ量を判定し、こ
のノイズ量が多い場合には動きのある部分と誤判定する
ことが多いので、動き検出に用いる閾値を、静止してい
る部分であると判定し易い方向に調整する。
ルに対応する動きベクトル検出情報、並びに以前の数フ
ィールド分の動きベクトルに対応する動きベクトル検出
情報に基づき、画像内に含まれるノイズ量を判定し、こ
のノイズ量が多い場合には動きのある部分と誤判定する
ことが多いので、動き検出に用いる閾値を、静止してい
る部分であると判定し易い方向に調整する。
【００５３】またフィールド間動きベクトルだけでな
く、フレーム間動きベクトルも０である場合、動き検出
に用いる閾値を、静止している部分であると判定し易い
方向に調整する。
く、フレーム間動きベクトルも０である場合、動き検出
に用いる閾値を、静止している部分であると判定し易い
方向に調整する。
【００５４】動き検出確定部３８は、さらに、決定した
画素の評価値を設定した閾値と比較することによって、
動き検出の対象となる画素が動きのある部分に属するの
か、静止している部分に属するのかを判定し、判定結果
を補間処理部３９に出力する。
画素の評価値を設定した閾値と比較することによって、
動き検出の対象となる画素が動きのある部分に属するの
か、静止している部分に属するのかを判定し、判定結果
を補間処理部３９に出力する。
【００５５】図３に戻る。補間処理部３９は、動き検出
確定部３８から入力される、各画素の動き検出の結果に
基づき、動きのある部分に属する画素を１枚のフィール
ド画像を用いて補間して、プログレッシブ変換部１５に
出力する。
確定部３８から入力される、各画素の動き検出の結果に
基づき、動きのある部分に属する画素を１枚のフィール
ド画像を用いて補間して、プログレッシブ変換部１５に
出力する。
【００５６】制御部４０は、磁気ディスク、光ディス
ク、光磁気ディスク、または半導体メモリなどからなる
記録媒体４１に記録されている制御用プログラムを読み
出し、読み出した制御用プログラムに基づいて、動き検
出部１４の各部を制御する。なお、図３においては、制
御部４０から各部に対する制御線の図示を省略してい
る。
ク、光磁気ディスク、または半導体メモリなどからなる
記録媒体４１に記録されている制御用プログラムを読み
出し、読み出した制御用プログラムに基づいて、動き検
出部１４の各部を制御する。なお、図３においては、制
御部４０から各部に対する制御線の図示を省略してい
る。
【００５７】次に、動き検出部１４による動き検出処理
について、図５のフローチャートを参照して説明する。
この動き検出処理は、後段のプログレッシブ変換部１５
で生成されるフレーム画像上の画素に対応する、フィー
ルド画像Ｆt-2上の画素（図４の画素Ｐ’7のような補間
される画素も含む）に対して実行される。
について、図５のフローチャートを参照して説明する。
この動き検出処理は、後段のプログレッシブ変換部１５
で生成されるフレーム画像上の画素に対応する、フィー
ルド画像Ｆt-2上の画素（図４の画素Ｐ’7のような補間
される画素も含む）に対して実行される。
【００５８】ステップＳ１において、フィールド間差分
算出部３２は、上段から入力されたフィールド画像Ｆ
t-1とフィールド画像Ｆt-2の一方または両方に垂直方向
の補正フィルタなどを用いた補間処理を施した後、対応
する画素同士の差分を演算し、繰り返し模様検出部３
６、および動き検出確定部３８に出力する。また、フィ
ールド間差分算出部３２は、フィールド画像Ｆt-1とフ
ィールド画像Ｆt-2の画素をエッジ検出部３４に出力す
る。
算出部３２は、上段から入力されたフィールド画像Ｆ
t-1とフィールド画像Ｆt-2の一方または両方に垂直方向
の補正フィルタなどを用いた補間処理を施した後、対応
する画素同士の差分を演算し、繰り返し模様検出部３
６、および動き検出確定部３８に出力する。また、フィ
ールド間差分算出部３２は、フィールド画像Ｆt-1とフ
ィールド画像Ｆt-2の画素をエッジ検出部３４に出力す
る。
【００５９】ステップＳ２において、フレーム間差分算
出部３１は、上段から入力されたフィールド画像Ｆtと
フィールド画像Ｆt-2の対応する画素同士の差分を演算
し、全画面静止判定部３５、および動き検出確定部３８
に出力する。また、さらに、フレーム間差分算出部３１
は、フィールド画像Ｆtとフィールド画像Ｆt-2の画素を
エッジ検出部３４に出力する。
出部３１は、上段から入力されたフィールド画像Ｆtと
フィールド画像Ｆt-2の対応する画素同士の差分を演算
し、全画面静止判定部３５、および動き検出確定部３８
に出力する。また、さらに、フレーム間差分算出部３１
は、フィールド画像Ｆtとフィールド画像Ｆt-2の画素を
エッジ検出部３４に出力する。
【００６０】なお、ステップＳ１の処理と、ステップＳ
２の処理は、実際には平行して同時に実行するようにし
てもよい。
２の処理は、実際には平行して同時に実行するようにし
てもよい。
【００６１】ステップＳ３において、エッジ検出部３４
は、フレーム間差分算出部３１およびフィールド間差分
算出部３２から入力されたフィールド画像の画素に基づ
き、処理対象の画素の近傍にエッジが存在するか否かを
判定し、判定結果を動き検出確定部３８に出力する。全
画面静止判定部３５は、動きベクトル検出部１３から入
力されたフィールド画像内の動きベクトル、およびフレ
ーム間差分算出部３１から入力されたフレーム間の対応
する画素同士の差分に基づき、画面全体が静止している
か否かを判定し、判定結果を動き検出確定部３８に出力
する。繰り返し模様検出部３６は、フィールド間差分算
出部３２から入力されたフィールド間の対応する画素同
士の差分に基づき、処理対象の画素の周囲に繰り返し模
様が存在するか否かを判定し、判定結果を動き検出確定
部３８に出力する。
は、フレーム間差分算出部３１およびフィールド間差分
算出部３２から入力されたフィールド画像の画素に基づ
き、処理対象の画素の近傍にエッジが存在するか否かを
判定し、判定結果を動き検出確定部３８に出力する。全
画面静止判定部３５は、動きベクトル検出部１３から入
力されたフィールド画像内の動きベクトル、およびフレ
ーム間差分算出部３１から入力されたフレーム間の対応
する画素同士の差分に基づき、画面全体が静止している
か否かを判定し、判定結果を動き検出確定部３８に出力
する。繰り返し模様検出部３６は、フィールド間差分算
出部３２から入力されたフィールド間の対応する画素同
士の差分に基づき、処理対象の画素の周囲に繰り返し模
様が存在するか否かを判定し、判定結果を動き検出確定
部３８に出力する。
【００６２】ステップＳ４において、動き検出確定部３
８は、エッジ検出部３４の検出結果が、「エッジが存在
する」を示すか否かを判定する。「エッジが存在する」
を示すと判定された場合、処理はステップＳ５に進む。
ステップＳ５において、動き検出確定部３８は、全画面
静止判定部３５の判定結果が、「全画面が静止である」
を示すか否かを判定する。「全画面が静止である」を示
すと判定された場合、処理はステップＳ６に進む。ステ
ップＳ６において、動き検出確定部３８は、動き検出用
の閾値を、静止している部分と判定し易い方向に調整す
る。
８は、エッジ検出部３４の検出結果が、「エッジが存在
する」を示すか否かを判定する。「エッジが存在する」
を示すと判定された場合、処理はステップＳ５に進む。
ステップＳ５において、動き検出確定部３８は、全画面
静止判定部３５の判定結果が、「全画面が静止である」
を示すか否かを判定する。「全画面が静止である」を示
すと判定された場合、処理はステップＳ６に進む。ステ
ップＳ６において、動き検出確定部３８は、動き検出用
の閾値を、静止している部分と判定し易い方向に調整す
る。
【００６３】なお、ステップＳ５において、全画面静止
判定部３５の判定結果が、「全画面が静止である」を示
すと判定されない場合、処理はステップＳ７に進む。ス
テップＳ７において、動き検出確定部３８は、繰り返し
模様検出部３６の検出結果が、「繰り返し模様である」
を示すか否かを判定する。「繰り返し模様である」を示
すと判定された場合、処理はステップＳ８に進む。ステ
ップＳ８において、動き検出確定部３８は、動き検出用
の閾値を、動きのある部分と判定し易い方向に調整す
る。
判定部３５の判定結果が、「全画面が静止である」を示
すと判定されない場合、処理はステップＳ７に進む。ス
テップＳ７において、動き検出確定部３８は、繰り返し
模様検出部３６の検出結果が、「繰り返し模様である」
を示すか否かを判定する。「繰り返し模様である」を示
すと判定された場合、処理はステップＳ８に進む。ステ
ップＳ８において、動き検出確定部３８は、動き検出用
の閾値を、動きのある部分と判定し易い方向に調整す
る。
【００６４】なお、ステップＳ４において、エッジ検出
部３４の検出結果が、「エッジが存在する」を示さない
と判定された場合、ステップＳ５乃至ステップＳ８の処
理はスキップされる。また、ステップＳ７において、繰
り返し模様検出部３６の検出結果が、「繰り返し模様で
ある」を示さないと判定された場合、ステップＳ８の処
理はスキップされる。
部３４の検出結果が、「エッジが存在する」を示さない
と判定された場合、ステップＳ５乃至ステップＳ８の処
理はスキップされる。また、ステップＳ７において、繰
り返し模様検出部３６の検出結果が、「繰り返し模様で
ある」を示さないと判定された場合、ステップＳ８の処
理はスキップされる。
【００６５】ステップＳ９において、動き検出確定部３
８は、フレーム間差分算出部３１から入力されたフレー
ム間の対応する画素同士の差分、およびフィールド間差
分算出部３２から入力されたフィールド間の対応する画
素同士の差分に基づき、処理対象の画素の評価値を算出
する。
８は、フレーム間差分算出部３１から入力されたフレー
ム間の対応する画素同士の差分、およびフィールド間差
分算出部３２から入力されたフィールド間の対応する画
素同士の差分に基づき、処理対象の画素の評価値を算出
する。
【００６６】ステップＳ１０においては、静止判定部３
７は、動きベクトル検出部１３から入力されたフィール
ド画像内の動きベクトルに基づき、処理対象の画素が静
止しているか否かを判定し、判定結果を動き検出確定部
３８に出力する。動き検出確定部３８は、静止判定部３
７の判定結果が、「静止画素である」を示すか否かを判
定する。「静止画素である」を示すと判定された場合、
処理はステップＳ１１に進む。
７は、動きベクトル検出部１３から入力されたフィール
ド画像内の動きベクトルに基づき、処理対象の画素が静
止しているか否かを判定し、判定結果を動き検出確定部
３８に出力する。動き検出確定部３８は、静止判定部３
７の判定結果が、「静止画素である」を示すか否かを判
定する。「静止画素である」を示すと判定された場合、
処理はステップＳ１１に進む。
【００６７】ステップＳ１１において、動き検出確定部
３８は、動き検出用の閾値を、静止している部分と判定
し易い方向に調整する。また、動き検出確定部３８は、
動きベクトル検出部１３から入力された動きベクトル検
出情報に基づき、動き検出に用いる閾値を調整する。な
お、ステップＳ１０において、静止判定部３７の判定結
果が、「静止画素である」を示さないと判定された場
合、ステップＳ１１の処理はスキップされる。
３８は、動き検出用の閾値を、静止している部分と判定
し易い方向に調整する。また、動き検出確定部３８は、
動きベクトル検出部１３から入力された動きベクトル検
出情報に基づき、動き検出に用いる閾値を調整する。な
お、ステップＳ１０において、静止判定部３７の判定結
果が、「静止画素である」を示さないと判定された場
合、ステップＳ１１の処理はスキップされる。
【００６８】ステップＳ１２において、動き検出確定部
３８は、上述したステップＳ６，Ｓ８，Ｓ１１などの処
理による調整を反映して、動き検出に用いる閾値を決定
する。ステップＳ１３において、動き検出確定部３８
は、ステップＳ９で算出した処理対象の画素の評価値
が、ステップＳ１２で決定した閾値を上回るか否かを判
定し、評価値が閾値を上回ると判定した場合、処理対象
の画素を動きのある部分に属すると判定する。反対に、
評価値が閾値を上回らないと判定した場合、処理対象の
画素を静止している部分に属すると判定する。さらに、
動き検出確定部３８は、処理対象の画素が動きのある部
分に属するか否かの判定結果と、その評価値を補間処理
部３９に出力する。
３８は、上述したステップＳ６，Ｓ８，Ｓ１１などの処
理による調整を反映して、動き検出に用いる閾値を決定
する。ステップＳ１３において、動き検出確定部３８
は、ステップＳ９で算出した処理対象の画素の評価値
が、ステップＳ１２で決定した閾値を上回るか否かを判
定し、評価値が閾値を上回ると判定した場合、処理対象
の画素を動きのある部分に属すると判定する。反対に、
評価値が閾値を上回らないと判定した場合、処理対象の
画素を静止している部分に属すると判定する。さらに、
動き検出確定部３８は、処理対象の画素が動きのある部
分に属するか否かの判定結果と、その評価値を補間処理
部３９に出力する。
【００６９】ステップＳ１４において、補間処理部３９
は、動きのある部分に属すると判定されたフィールド画
像Ｆt-2上の画素を、同じフィールド画像Ｆt-2上の近傍
の画素を用いて補間し、プログレッシブ変換部１５に出
力する。
は、動きのある部分に属すると判定されたフィールド画
像Ｆt-2上の画素を、同じフィールド画像Ｆt-2上の近傍
の画素を用いて補間し、プログレッシブ変換部１５に出
力する。
【００７０】以上、現在処理対象とされている画素に対
する動き検出処理は終了される。なお、次に処理対象と
されている画素に対する動き検出処理においては、ステ
ップＳ１の処理、ステップＳ２の処理、およびステップ
Ｓ３のうちの全画面静止判定処理は、既に実行されてい
るので、その結果を流用すればよい。以上、動き検出部
１４による動き検出処理の説明を終了する。
する動き検出処理は終了される。なお、次に処理対象と
されている画素に対する動き検出処理においては、ステ
ップＳ１の処理、ステップＳ２の処理、およびステップ
Ｓ３のうちの全画面静止判定処理は、既に実行されてい
るので、その結果を流用すればよい。以上、動き検出部
１４による動き検出処理の説明を終了する。
【００７１】以上説明したように、動き検出部１４にお
いては、検出されたフィールド間動きベクトルを含む動
きベクトル検出情報も用いるので、フィールド画像内の
各画素の動きを高い精度で検出することができる。
いては、検出されたフィールド間動きベクトルを含む動
きベクトル検出情報も用いるので、フィールド画像内の
各画素の動きを高い精度で検出することができる。
【００７２】なお、本発明は、DVDプレーヤに限らず、
例えば、テレビジョン受像機、ビデオテープレコーダ、
ハードディスクレコーダなどの、インタレース方式の映
像信号をプログレッシブ方式の映像信号に変換する映像
関連機器に適用することが可能である。
例えば、テレビジョン受像機、ビデオテープレコーダ、
ハードディスクレコーダなどの、インタレース方式の映
像信号をプログレッシブ方式の映像信号に変換する映像
関連機器に適用することが可能である。
【００７３】ところで、上述した一連の処理は、ハード
ウェアにより実行させることもできるが、ソフトウェア
により実行させることもできる。一連の処理をソフトウ
ェアにより実行させる場合には、そのソフトウェアを構
成するプログラムが、専用のハードウェアに組み込まれ
ているコンピュータ、または、各種のプログラムをイン
ストールすることで、各種の機能を実行することが可能
な、例えば汎用のパーソナルコンピュータなどに、図３
の記録媒体４１などからインストールされる。
ウェアにより実行させることもできるが、ソフトウェア
により実行させることもできる。一連の処理をソフトウ
ェアにより実行させる場合には、そのソフトウェアを構
成するプログラムが、専用のハードウェアに組み込まれ
ているコンピュータ、または、各種のプログラムをイン
ストールすることで、各種の機能を実行することが可能
な、例えば汎用のパーソナルコンピュータなどに、図３
の記録媒体４１などからインストールされる。
【００７４】なお、本明細書において、記録媒体に記録
されるプログラムを記述するステップは、記載された順
序に従って時系列的に行われる処理はもちろん、必ずし
も時系列的に処理されなくとも、並列的あるいは個別に
実行される処理をも含むものである。
されるプログラムを記述するステップは、記載された順
序に従って時系列的に行われる処理はもちろん、必ずし
も時系列的に処理されなくとも、並列的あるいは個別に
実行される処理をも含むものである。
【００７５】
【発明の効果】以上のように、本発明の画像処理装置お
よび方法、並びにプログラムによれば、インタレース方
式の映像信号を構成する複数のフィールド画像を用い
て、フィールド画像上の画素に対応する動きベクトルを
算出し、フィールド画像上の画素に対して、動きのある
部分に属するか否かを判定し、判定の処理では、算出の
処理から供給される動きベクトル検出情報に基づき、フ
ィールド画像上の画素に対して、動きのある部分に属す
るか否かを判定するための閾値を調整するようにしたの
で、フィールド画像の画素が、静止している部分の属す
るのか、または動きのある部分に属するのかを高い精度
で判別することが可能となる。
よび方法、並びにプログラムによれば、インタレース方
式の映像信号を構成する複数のフィールド画像を用い
て、フィールド画像上の画素に対応する動きベクトルを
算出し、フィールド画像上の画素に対して、動きのある
部分に属するか否かを判定し、判定の処理では、算出の
処理から供給される動きベクトル検出情報に基づき、フ
ィールド画像上の画素に対して、動きのある部分に属す
るか否かを判定するための閾値を調整するようにしたの
で、フィールド画像の画素が、静止している部分の属す
るのか、または動きのある部分に属するのかを高い精度
で判別することが可能となる。
【図１】本発明を適用したDVDプレーヤの構成例を示す
ブロック図である。
ブロック図である。
【図２】図１の動きベクトル検出部１３乃至プログレッ
シブ変換部１５に入力されるインタレース映像信号につ
いて説明するためのブロック図である。
シブ変換部１５に入力されるインタレース映像信号につ
いて説明するためのブロック図である。
【図３】動きベクトル検出部１３の構成例を示すブロッ
ク図である。
ク図である。
【図４】フィールド画像Ｆt+1乃至Ｆt-2の対応する画素
を示す図である。
を示す図である。
【図５】動きベクトル検出部１３による動きベクトル検
出処理を説明するフローチャートである。
出処理を説明するフローチャートである。
１ DVDプレーヤ， １３ 動きベクトル検出部， １
４ 動き検出部， １５ プログレッシブ変換部， ３
１ フレーム間差分算出部， ３２ フィールド間差分
算出部， ３４ エッジ検出部， ３５ 全画面静止判
定部， ３６繰り返し模様検出部， ３７ 静止判定
部， ３８ 動き検出確定部， ３９補間処理部， ４
０ 制御部， ４１ 記録媒体
４ 動き検出部， １５ プログレッシブ変換部， ３
１ フレーム間差分算出部， ３２ フィールド間差分
算出部， ３４ エッジ検出部， ３５ 全画面静止判
定部， ３６繰り返し模様検出部， ３７ 静止判定
部， ３８ 動き検出確定部， ３９補間処理部， ４
０ 制御部， ４１ 記録媒体
─────────────────────────────────────────────────────
フロントページの続き
(72)発明者 宮田 勝成
東京都品川区北品川６丁目７番35号 ソニ
ー株式会社内
(72)発明者 太田 正志
東京都品川区北品川６丁目７番35号 ソニ
ー株式会社内
Ｆターム(参考） 5C063 AB03 AC01 BA04 BA12 CA07
CA09 CA34 CA38
5C082 AA02 BA12 BA41 BB03 BB22
BC03 BC05 CA81 CA84 CB01
DA86 MM10
Claims (10)
- 【請求項１】 インタレース方式の映像信号をプログレ
ッシブ方式の映像信号に変換する画像処理装置におい
て、 前記インタレース方式の映像信号を構成する複数のフィ
ールド画像を用いて、前記フィールド画像上の画素に対
応する動きベクトルを算出する算出手段と、 前記フィールド画像上の画素に対して、動きのある部分
に属するか否かを判定する判定手段とを含み、 前記判定手段は、前記算出手段から供給される動きベク
トル検出情報に基づき、前記フィールド画像上の画素に
対して、動きのある部分に属するか否かを判定するため
の閾値を調整することを特徴とする画像処理装置。 - 【請求項２】 前記判定手段の判定結果に対応し、前記
インタレース方式の映像信号を構成する１または２枚の
フィールド画像を用いて、前記プログレッシブ方式の映
像信号を構成するフレーム画像を生成する生成手段をさ
らに含むことを特徴とする請求項１に記載の画像処理装
置。 - 【請求項３】 前記動きベクトル検出情報には、画素に
対応するフィールド間動きベクトルが含まれることを特
徴とする請求項１に記載の画像処理装置。 - 【請求項４】 前記動きベクトル検出情報には、前記フ
ィールド間動きベクトルに対応する評価値、前記評価値
を算出したときの画素の差分演算結果、前記フィールド
間動きベクトルの候補に対応する評価値、およびフレー
ム間動きベクトルのうちの少なくとも１つがさらに含ま
れることを特徴とする請求項３に記載の画像処理装置。 - 【請求項５】 前記フィールド画像上のエッジを検出す
るエッジ検出手段をさらに含み、 前記判定手段は、前記エッジ検出手段の検出結果にも基
づき、前記フィールド画像上の画素に対して、動きのあ
る部分に属するか否かを判定するための閾値を調整する
ことを特徴とする請求項１に記載の画像処理装置。 - 【請求項６】 前記フィールド画像の全画面が静止して
いるか否かを判定する全画面静止判定手段をさらに含
み、 前記判定手段は、前記全画面静止判定手段の判定結果に
も基づき、前記フィールド画像上の画素に対して、動き
のある部分に属するか否かを判定するための閾値を調整
することを特徴とする請求項５に記載の画像処理装置。 - 【請求項７】 前記フィールド画像上に繰り返し模様が
存在するか否かを検出する繰り返し模様検出手段をさら
に含み、 前記判定手段は、前記繰り返し模様検出手段の検出結果
にも基づき、前記フィールド画像上の画素に対して、動
きのある部分に属するか否かを判定するための閾値を調
整することを特徴とする請求項５に記載の画像処理装
置。 - 【請求項８】 インタレース方式の映像信号をプログレ
ッシブ方式の映像信号に変換する画像処理装置の画像処
理方法において、 前記インタレース方式の映像信号を構成する複数のフィ
ールド画像を用いて、前記フィールド画像上の画素に対
応する動きベクトルを算出する算出ステップと、 前記フィールド画像上の画素に対して、動きのある部分
に属するか否かを判定する判定ステップとを含み、 前記判定ステップの処理は、前記算出ステップの処理か
ら供給される動きベクトル検出情報に基づき、前記フィ
ールド画像上の画素に対して、動きのある部分に属する
か否かを判定するための閾値を調整することを特徴とす
る画像処理方法。 - 【請求項９】 インタレース方式の映像信号をプログレ
ッシブ方式の映像信号に変換するためのプログラムであ
って、 前記インタレース方式の映像信号を構成する複数のフィ
ールド画像を用いて、前記フィールド画像上の画素に対
応する動きベクトルを算出する算出ステップと、 前記フィールド画像上の画素に対して、動きのある部分
に属するか否かを判定する判定ステップとを含み、 前記判定ステップの処理は、前記算出ステップの処理か
ら供給される動きベクトル検出情報に基づき、前記フィ
ールド画像上の画素に対して、動きのある部分に属する
か否かを判定するための閾値を調整することを特徴とす
るコンピュータが読み取り可能なプログラムが記録され
ている記録媒体。 - 【請求項１０】 インタレース方式の映像信号をプログ
レッシブ方式の映像信号に変換するコンピュータに、 前記インタレース方式の映像信号を構成する複数のフィ
ールド画像を用いて、前記フィールド画像上の画素に対
応する動きベクトルを算出する算出ステップと、 前記フィールド画像上の画素に対して、動きのある部分
に属するか否かを判定する判定ステップとを実行させ、 前記判定ステップの処理は、前記算出ステップの処理か
ら供給される動きベクトル検出情報に基づき、前記フィ
ールド画像上の画素に対して、動きのある部分に属する
か否かを判定するための閾値を調整することを特徴とす
るプログラム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001379798A JP2003179886A (ja) | 2001-12-13 | 2001-12-13 | 画像処理装置および方法、記録媒体、並びにプログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001379798A JP2003179886A (ja) | 2001-12-13 | 2001-12-13 | 画像処理装置および方法、記録媒体、並びにプログラム |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2003179886A true JP2003179886A (ja) | 2003-06-27 |
Family
ID=19186984
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001379798A Pending JP2003179886A (ja) | 2001-12-13 | 2001-12-13 | 画像処理装置および方法、記録媒体、並びにプログラム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2003179886A (ja) |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006303797A (ja) * | 2005-04-19 | 2006-11-02 | Matsushita Electric Ind Co Ltd | 画像処理装置及び画像処理プログラム |
| JP2008160773A (ja) * | 2006-12-26 | 2008-07-10 | Toshiba Corp | 順次走査変換装置及び順次走査変換方法 |
| JP2008252594A (ja) * | 2007-03-30 | 2008-10-16 | Toshiba Corp | 順次走査変換装置及び順次走査変換方法 |
| US7714891B2 (en) | 2004-08-24 | 2010-05-11 | Canon Kabushiki Kaisha | Imaging apparatus |
| WO2010061664A1 (ja) * | 2008-11-28 | 2010-06-03 | 日本ビクター株式会社 | 繰り返しオブジェクト検出装置及び方法 |
| JP2010283655A (ja) * | 2009-06-05 | 2010-12-16 | Canon Inc | 映像処理装置及びその制御方法 |
| US7881500B2 (en) | 2004-06-30 | 2011-02-01 | Trident Microsystems (Far East) Ltd. | Motion estimation with video mode detection |
| JP2013120369A (ja) * | 2011-12-09 | 2013-06-17 | Hitachi Consumer Electronics Co Ltd | 表示装置および映像処理方法 |
-
2001
- 2001-12-13 JP JP2001379798A patent/JP2003179886A/ja active Pending
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7881500B2 (en) | 2004-06-30 | 2011-02-01 | Trident Microsystems (Far East) Ltd. | Motion estimation with video mode detection |
| US7714891B2 (en) | 2004-08-24 | 2010-05-11 | Canon Kabushiki Kaisha | Imaging apparatus |
| JP2006303797A (ja) * | 2005-04-19 | 2006-11-02 | Matsushita Electric Ind Co Ltd | 画像処理装置及び画像処理プログラム |
| WO2006114951A1 (ja) * | 2005-04-19 | 2006-11-02 | Matsushita Electric Industrial Co., Ltd. | 画像処理装置及び画像処理プログラム |
| JP2008160773A (ja) * | 2006-12-26 | 2008-07-10 | Toshiba Corp | 順次走査変換装置及び順次走査変換方法 |
| US8345156B2 (en) | 2006-12-26 | 2013-01-01 | Kabushiki Kaisha Toshiba | Progressive scanning conversion apparatus and progressive scanning conversion method |
| JP2008252594A (ja) * | 2007-03-30 | 2008-10-16 | Toshiba Corp | 順次走査変換装置及び順次走査変換方法 |
| WO2010061664A1 (ja) * | 2008-11-28 | 2010-06-03 | 日本ビクター株式会社 | 繰り返しオブジェクト検出装置及び方法 |
| US8243161B2 (en) | 2008-11-28 | 2012-08-14 | JVC Kenwood Corporation | Repetitive object detecting device and method |
| JP2010283655A (ja) * | 2009-06-05 | 2010-12-16 | Canon Inc | 映像処理装置及びその制御方法 |
| JP2013120369A (ja) * | 2011-12-09 | 2013-06-17 | Hitachi Consumer Electronics Co Ltd | 表示装置および映像処理方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7265791B2 (en) | Method and apparatus for de-interlacing video signal | |
| JP4280614B2 (ja) | ノイズ低減回路及び方法 | |
| US6118488A (en) | Method and apparatus for adaptive edge-based scan line interpolation using 1-D pixel array motion detection | |
| US8175163B2 (en) | System and method for motion compensation using a set of candidate motion vectors obtained from digital video | |
| US20060209957A1 (en) | Motion sequence pattern detection | |
| US7961253B2 (en) | Method of processing fields of images and related device for data lines similarity detection | |
| US7218354B2 (en) | Image processing device and method, video display device, and recorded information reproduction device | |
| JP2005318621A (ja) | ビデオシーケンスでのティッカー処理 | |
| US20100309372A1 (en) | Method And System For Motion Compensated Video De-Interlacing | |
| US7499102B2 (en) | Image processing apparatus using judder-map and method thereof | |
| KR20050089886A (ko) | 배경 움직임 벡터 검출 | |
| JPH0884293A (ja) | 変換アーチファクトの減少方法及び装置 | |
| JP3893227B2 (ja) | 走査線補間装置、及び走査線補間方法 | |
| JP2000341648A (ja) | 映像信号変換装置 | |
| US20050018767A1 (en) | Apparatus and method for detecting film mode | |
| JP4510874B2 (ja) | 合成映像検出装置 | |
| US20060072035A1 (en) | Image processing device capable of selecting field and method thereof | |
| JP2003179886A (ja) | 画像処理装置および方法、記録媒体、並びにプログラム | |
| US7593059B2 (en) | Image conversion device and method | |
| US20060033839A1 (en) | De-interlacing method | |
| JP2004015700A (ja) | プログレッシブ変換方法、プログレッシブ変換装置、シーケンス検出方法、シーケンス検出装置および映像データ処理装置 | |
| JP4117527B2 (ja) | 画像処理装置 | |
| JP2005045700A (ja) | 動画像補間用動き推定方法及び動画像補間用動き推定装置 | |
| JP2006303910A (ja) | フィルムモード検出装置 | |
| JP4032785B2 (ja) | 画像処理装置および方法、記録媒体、並びにプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20041207 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20070613 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070618 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070810 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20070830 |