JP4743912B2

JP4743912B2 - 画像表示システム、画像表示装置、および、画像表示装置の制御方法

Info

Publication number: JP4743912B2
Application number: JP2009039033A
Authority: JP
Inventors: 泉金井
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2009-02-23
Filing date: 2009-02-23
Publication date: 2011-08-10
Anticipated expiration: 2029-02-23
Also published as: JP2010199674A; US20100214473A1; CN101815197A; CN101815197B; US8531599B2

Description

本発明は、映像信号のフレームレートを変換して表示する画像表示システム、画像表示装置、および、画像表示装置の制御方法に関する。

デジタルカメラで撮影された画像（撮影画像）をテレビで鑑賞する際、撮影画像の一部の領域（切り出し領域）を切り出して、テレビの画面全体に表示する場合がある。このとき、デジタルカメラ本体のカーソルキーなどにより切り出し位置（撮影画像から切り出す領域の位置）を移動させ、撮影画像内の様々な領域を鑑賞することがある。

また、撮影画像の一部の領域を切り出して、紙などに印刷する場合がある。このとき、切り出し領域を確認するために、プリンタとテレビを接続し、切り出し領域をテレビの画面全体に表示する場合がある。このような場合でも、プリンタのカーソルキーなどにより切り出し位置を移動させ、印刷する領域を決定することがある。

一方、テレビには、フリッカ対策や動画応答性の改善のために、フレームレート変換（ＦＲＣ）を行うものがある。ＦＲＣは、例えば、入力されるフレーム画像から動きベクトルを検出して、検出した動きベクトルを用いて補間フレームを作成し、フレームレートを６０Ｈｚから１２０Ｈｚに変換するものである。

デジタルカメラとテレビを接続した場合や、プリンタとテレビを接続した場合に、撮影画像の映像信号は、６０Ｈｚのフレームレートでテレビに入力される。テレビは、６０Ｈｚで入力される映像信号から補間フレームを作成し、映像信号を１２０Ｈｚのフレームレートで表示する。ユーザーがカーソルキーなどにより切り出し領域の位置の移動を行うと、一般的に切り出し位置の移動速度（テレビに表示される映像内の動き）は速いため、動きベクトル検出が困難となる。このとき、誤った動きベクトルを用いて補間フレームを作成すると、補間フレームの画像が乱れてしまう（鑑賞している映像中にノイズのような妨害が生じる）という問題があった。なお、切り出し領域の位置の移動とは、切り出す領域の変更と等しい。

このような問題に鑑みた従来技術は、例えば、特許文献１に開示されている。具体的には、特許文献１に開示の方法では、表示される映像の移動速度が速いために動きベクトル検出が困難な領域についてはオリジナルのフレームと同じ画像を補間フレームに使用する。そして、そのように作成した補間フレームにＬＰＦ（ロー・パス・フィルタ）をかけて、画像の乱れをぼかす。

特開平７−１６２８１１号公報

上述したように、特許文献１の方法は、ＦＲＣによる映像の乱れを低減するために、補間フレームにＬＰＦをかけて、補間フレームの画像の乱れをぼかすものである。しかし、補間フレームにＬＰＦをかけてぼかした表示を行うことで、映像の精細感が低下してしまう。従って、特許文献１の方法では補間フレーム自体に生じる妨害は抑制できても、表示映像の品質は低下してしまう。つまり、補間フレームを生成してフレームレートを向上さ
せることで、より精細かつ動きに強い映像を表示するというフレームレート変換のメリットを低減させてしまうことになる。

本発明は、上記実情に鑑みてなされたものであって、その目的とするところは、画像の一部を切り出し、切り出した領域の画像を映像信号として表示装置に入力する構成において、切り出し領域の位置を移動する操作中に生成される映像に対して、動きベクトルを用いて補間フレームを生成し、フレームレート変換しても、表示映像の品質低下を極力抑制する技術を提供することにある。

上述した課題を解決するために、本発明の画像表示システムは、
画像の一部の領域を切り出した部分画像をフレームとする映像信号を生成する生成手段と、
前記生成手段により生成された映像信号を用いて計算を行い、第１の動きベクトルを生成する手段と、
前記部分画像の切り出し位置を移動させる移動手段と、
前記移動手段により前記切り出し位置が移動されたことに応じて、前記映像信号と共に、前記切り出し位置の移動方向と移動量の情報を含む移動情報を出力する出力手段と、
前記出力手段により出力された前記移動情報における移動方向と移動量の情報に基づいて、第２の動きベクトルを生成する手段と、
前記出力手段により出力された前記移動情報に基づいて、前記切り出し位置が移動したか否かを判定する判定手段と、
前記判定手段の判定結果に基づいて、前記第１の動きベクトルと前記第２の動きベクトルの一方を選択する選択手段と、
前記選択手段により選択された動きベクトルに基づいて補間フレームを生成し、前記生成手段により生成された映像信号を、前記補間フレームを用いて、該映像信号のフレームレートよりも高いフレームレートで表示する表示手段と、
を有し、
前記選択手段は、前記判定手段により前記切り出し位置が移動したと判定された場合には前記第２の動きベクトルを選択し、前記判定手段により前記切り出し位置が移動していないと判定された場合には前記第１の動きベクトルを選択する
ことを特徴とする。

また、本発明の画像表示装置は、
映像信号を出力する映像出力装置に接続可能な画像表示装置において、
前記映像出力装置から、画像の一部の領域を切り出した部分画像をフレームとする映像信号と共に、前記部分画像の切り出し位置の移動方向と移動量の情報を含む移動情報を取得する取得手段と、
前記取得手段により取得された映像信号を用いて計算を行い、第１の動きベクトルを生成する手段と、
前記取得手段により取得された前記移動情報における移動方向と移動量の情報に基づいて、第２の動きベクトルを生成する手段と、
前記取得手段により取得された前記移動情報に基づいて、前記切り出し位置が移動したか否かを判定する判定手段と、
前記判定手段の判定結果に基づいて、前記第１の動きベクトルと前記第２の動きベクトルの一方を選択する選択手段と、
前記選択手段により選択された動きベクトルに基づいて補間フレームを生成し、前記取得手段により取得された映像信号を、前記補間フレームを用いて、該映像信号のフレームレートよりも高いフレームレートで表示する表示手段と、
を有し、
前記選択手段は、前記判定手段により前記切り出し位置が移動したと判定された場合には前記第２の動きベクトルを選択し、前記判定手段により前記切り出し位置が移動していないと判定された場合には前記第１の動きベクトルを選択する
ことを特徴とする。

また、本発明の画像表示装置の制御方法は、
映像信号を出力する映像出力装置に接続可能な画像表示装置の制御方法において、
前記映像出力装置から、画像の一部の領域を切り出した部分画像をフレームとする映像信号と共に、前記部分画像の切り出し位置の移動方向と移動量の情報を含む移動情報を取得する取得ステップと、
前記取得ステップにおいて取得された映像信号を用いて計算を行い、第１の動きベクトルを生成するステップと、
前記取得ステップにおいて取得された前記移動情報における移動方向と移動量の情報に基づいて、第２の動きベクトルを生成するステップと、
前記取得ステップにおいて取得された前記移動情報に基づいて、前記切り出し位置が移動したか否かを判定する判定ステップと、
前記判定ステップでの判定結果に基づいて、前記第１の動きベクトルと前記第２の動き
ベクトルの一方を選択する選択ステップと、
前記選択ステップにおいて選択された動きベクトルに基づいて補間フレームを生成し、前記取得ステップにおいて取得された映像信号を、前記補間フレームを用いて、該映像信号のフレームレートよりも高いフレームレートで表示する表示ステップと、
を有し、
前記選択ステップでは、前記判定ステップにおいて前記切り出し位置が移動したと判定された場合には前記第２の動きベクトルが選択され、前記判定ステップにおいて前記切り出し位置が移動していないと判定された場合には前記第１の動きベクトルが選択される
ことを特徴とする。

本発明によれば、画像の一部を切り出し、切り出した領域の画像を映像信号として表示装置に入力する構成において、切り出し領域の位置を移動する操作中に生成される映像に対して、動きベクトルを用いて補間フレームを生成し、フレームレート変換しても、表示映像の品質低下を極力抑制する技術を提供することができる。

図１は、実施例１に係る画像表示システムのブロック図である。図２は、実施例１に係るベクトル検出部の詳細図である。図３は、信号Ｔ２の一例を示す図である。図４は、実施例１において動きベクトルＶ１を設定する過程を説明する図である。図５は、実施例２に係る画像表示システムのブロック図である。図６は、切り出し領域においてＯＳＤ情報が重畳されている領域を示す図である。図７は、実施例２に係るベクトル検出部の詳細図である。

以下、本発明の具体的な実施例について説明する。

＜実施例１＞
図１は実施例１に係る画像表示システムのブロック図である。本実施例に係る画像表示システムは、デジタルカメラ１（映像出力装置）と映像出力装置に接続可能なテレビ２（画像表示装置）とから構成される。デジタルカメラ１は、撮影画像（静止画像）から切り出した部分画像（撮影画像の一部の画像）で構成される映像信号を生成し出力する。テレビ２は、入力された映像信号を解析して生成した動きベクトルに基づいて補間フレームを作成することにより、デジタルカメラ１から入力された映像信号を、入力される映像信号のフレームレートよりも高いフレームレートで表示する。図１に示すように、テレビ２は、入力部３、ＦＲＣ部４、ベクトル設定部７、表示パネル８を有する。また、デジタルカメラ１は不図示の移動操作部と出力部を有する。

なお、本実施例では、デジタルカメラ１とテレビ２は映像信号と付加情報を伝送できる接続系により接続されているものとする。なお、デジタルカメラ１とテレビ２の接続は、メタルケーブルや光ファイバケーブルなどを用いた接続であってもよいし、ＺｉｇＢｅｅ（商標）、ブルートゥース（商標）、ＩＥＥＥ８０２．１１系の無線ＬＡＮなどを用いたワイヤレス接続であってもよい。映像信号と付加情報を伝送できればよい（映像信号と付加情報は個別のケーブル（伝送手段）で伝送されてもよい）。また、上述したように、本実施例では、一枚の撮影画像（静止画像）の一部の領域（切り出し領域；部分画像）を切り出し、テレビ２の全画面に表示する状況を想定する。そして、ユーザーが、デジタルカメラ１が有する不図示の移動操作部（例えば、カーソルキー）で、部分画像の切り出し位置を移動させ、撮影画像内の様々な領域を鑑賞しているものとする。デジタルカメラ１は、映像信号を６０Ｈｚのフレームレートで出力しているものとする。

（デジタルカメラ１の）出力部は、映像信号と共に、付加情報Ｔとして、切り出し位置の移動に関する移動情報を出力する。

移動情報Ｔは少なくとも切り出し位置の移動方向を表す情報を含み、本実施例では、移動情報Ｔは以下の３種類の情報（信号）を含み、映像信号とともに入力部３に伝送されるものとする。
（１）切り出し位置の移動が指示されているか否かを表す指示情報（信号Ｔ１）
（２）切り出し位置の移動方向を表す方向情報（信号Ｔ２）
（３）切り出し位置の移動速度を表す速度情報（信号Ｔ３）

本実施例では、信号Ｔ１は、ユーザーがデジタルカメラ１に付属するカーソルキーなどにより切り出し位置の移動を指示しているときＴ１＝１となり、切り出し位置の移動を指示していないときＴ１＝０となるものとする。

信号Ｔ２は、「上」、「下」、「右」、「左」の４種類の方向を示す信号とする。具体的には、切り出し位置が「上」に移動している場合、信号Ｔ２＝０、「下」に移動している場合、信号Ｔ２＝１、「右」に移動している場合、信号Ｔ２＝２、「左」に移動している場合、信号Ｔ２＝３とする（図３）。

信号Ｔ３は、１フレーム（１／６０秒）の間に切り出し位置が移動する画素数を表す数値（スカラー値）とする。

入力部３は、デジタルカメラ１から映像信号Ｓと共に移動情報Ｔを取得する。そして、映像信号ＳをＦＲＣ部４へ、移動情報Ｔをベクトル設定部７へそれぞれ出力する。本実施例では、入力部３にフレームレートが６０Ｈｚの映像信号が入力されるため、入力部３から出力される映像信号のフレームレートも６０Ｈｚである。フレームレートはＦＲＣ部４で６０Ｈｚから１２０Ｈｚに変換される。

ＦＲＣ部４は、ベクトル検出部５、補間フレーム作成部６から構成される。本実施例では、補間フレーム作成部６が、ベクトル検出部５から出力された動きベクトルに基づいて、補間フレームとして、時間的に連続する２つのフレームの間を補う画像（中間画像）を作成する。それにより、フレームレートが６０Ｈｚから１２０Ｈｚに変換される。

ベクトル検出部５の詳細図を図２に示す。ベクトル検出部５は、ベクトル計算部５１、ベクトル選択部５２から構成される。

ベクトル計算部５１は、時間的に連続する２つのフレームを用いて、ブロックマッチング法により動きベクトルを計算する。具体的には、入力された１フレーム分の画像（入力画像）を複数のブロック（基準ブロック）に分割し、ブロック毎に、時間的に連続する１／６０秒前のフレームの画像（前フレーム画像）とパターンマッチングを行う。換言すれば、基準ブロックの画素値と一致度の高いブロック（対応ブロック）を前フレーム画像から探索する（一致度は類似しているほど高い値を示すものとする）。そして、各基準ブロックについて、基準ブロックから対応ブロックまでのベクトルを動きベクトルとして検出する。次に、中間画像である補間フレームの画像を入力画像と同様に複数のブロックに分割し、各基準ブロックについて検出された動きベクトルから、補間フレームの各ブロックにおける動きベクトルＶ０を求める。例えば、検出された動きベクトルの大きさを１／２にする。なお、本実施例では、ブロックのサイズを１６画素×１６画素としたが、ブロックサイズはこれに限るものではない。例えば、８画素×８画素であってもよいし、３２画素×３２画素であってもよい。

また、ベクトル検出部５（具体的には、ベクトル選択部５２）には、ベクトル設定部７から動きベクトルＶ１及びフラグＦが入力される。動きベクトルＶ１は、補間フレームを作成する際に、全てのブロックにおいて共通に用いられる動きベクトルである。具体的には、動きベクトルＶ１は、動きベクトル設定部７が移動情報を用いて設定する動きベクトルである。また、フラグＦは、切り出し位置の移動が指示されているか否かを表す。動きベクトルＶ１及びフラグＦの詳細は後述する。

動きベクトル選択部５２は、補間フレームの作成に用いる動きベクトルとして、ベクト
ル計算部５１で計算される動きベクトルとベクトル設定部７で設定される動きベクトルのいずれかを選択する。具体的には、移動情報によって、入力される映像信号が切り出し位置を移動された映像信号であると判断した場合には、ベクトル設定部７で設定される動きベクトルを選択する。本実施例では、動きベクトル選択部５２は、フラグＦに応じて動きベクトルＶ０とＶ１を切り換えて出力する。フラグＦは１フレームに一度伝送される信号であり、０または１の１ｂｉｔの信号である。ベクトル選択部５２は、フラグＦ＝０のときは動きベクトルＶ０を出力（選択）し、フラグＦ＝１のときは動きベクトルＶ１を出力（選択）する。

ベクトル選択部５２から出力された動きベクトルＶ（Ｖ０またはＶ１）は、補間フレーム作成部６に入力される。補間フレーム作成部６では、時間的に連続する２枚のフレームと動きベクトルＶから補間フレームを作成し、映像信号を１２０Ｈｚのフレームレートで出力する。

補間フレーム作成部６から出力された映像信号は表示パネル８に表示される。本実施例では、表示パネル８には１２０Ｈｚのフレームレートの映像が表示される。本実施形態では、デジタルカメラ１から出力される映像信号は静止画である。従って、静止画の一部を切り出した部分画像を映像信号として出力している場合、その切り出し領域を変更しない限り、テレビ２に入力される映像信号は常に同じ画像となる。これらの画像間には変化が無いので、理論上、動きベクトルはゼロである。

次に、本実施例に係る画像表示システムの動作（画像表示装置の制御方法）の一例について説明する。

ユーザーが、デジタルカメラ１が有するカーソルキーなどにより、切り出し位置の移動を指示すると、移動情報Ｔに含まれる信号Ｔ１は、Ｔ１＝１となる。

そして、ユーザーが切り出し位置を上に移動することを指示しており、切り出し位置が１フレームあたり１０画素移動している場合には、信号Ｔ２＝０、信号Ｔ３＝１０となる。

ベクトル設定部７は、信号Ｔ１が１であることを検出すると、方向情報（信号Ｔ２）及び速度情報（信号Ｔ３）を用いて動きベクトルＶ１を決定（設定）する。

図４は、動きベクトルＶ１を設定する過程を説明する図である。図４において、１００は撮影画像である。また、破線で表した領域１０２、１０３は、撮影画像１００内の切り出し領域（部分画像）である。具体的には、領域１０３は、領域１０２の１／６０秒後の切り出し領域である。デジタルカメラ１は、領域１０２，１０３をそれぞれ１フレームとして含む映像信号をテレビ２に出力する

信号Ｔ２＝０のときは切り出し位置が上に移動しているため、表示パネル８に表示される映像は下に移動することになる。従って信号Ｔ３＝１０の場合、動きベクトルＶ１は、
Ｖ１＝（０，１０）（式１）
となる。

ベクトル設定部７は動きベクトルＶ１と、フラグＦをベクトル検出部５内のベクトル選択部５２に出力する。入力される映像信号が切り出し位置を移動された映像信号である場合、つまり信号Ｔ１＝１の場合にはＦ＝１となる。また、入力される映像信号が切り出し位置を移動された映像信号でない場合、つまり信号Ｔ１＝０の場合にはＦ＝０となる。動きベクトルＶ１とフラグＦは、１フレームに一度出力される信号である。なお、Ｆ＝０の
場合には、Ｖ１は出力されなくてもよいし、Ｖ１＝（０，０）が出力されてもよい。

ベクトル選択部５２はフラグＦに応じて以下のように選択して動きベクトルＶを出力する。
Ｆ＝０の場合：Ｖ＝Ｖ０
Ｆ＝１の場合：Ｖ＝Ｖ１

補間フレーム作成部６は、ベクトル検出部５から出力される動きベクトルＶを用いて補間フレームを作成する。本実施例では、入力される映像信号が切り出し位置を移動された映像信号である場合に、動きベクトルＶが１フレームの全てのブロックにおいてＶ１となる。従って、フレーム画像を分析して動きベクトルを求める場合に比べて、全てのブロックにおいて正しい動きベクトルが設定される。そのため、切り出し位置の移動に基づく映像の変化が発生した場合でも、フレームレートを変換した映像において表示映像の品質低下を極力抑制することができる。

＜実施例２＞
実施例２として、部分画像の一部に日付などのＯＳＤ（オン・スクリーン・ディスプレイ）情報が重畳される場合（部分画像が、部分画像内の所定の位置に重畳される重畳画像を含む場合）について説明する。

ＯＳＤ情報が重畳されている場合、切り出し位置が移動してもＯＳＤ情報は移動しないのが一般的である。切り出し位置が移動している場合に、実施例１のようにＯＳＤ情報が重畳されている領域に対しても方向情報と速度情報を用いて設定された動きベクトルを割り当てると、ＯＳＤ情報（文字など）が二重像になってしまう。コントラストの高い文字のようなＯＳＤ情報が二重像となると非常に見難い映像となるため好ましくない。そこで、本実施例では、ＦＲＣ部４は、ＯＳＤ情報が重畳されている領域（ＯＳＤ領域）に対して、入力画像と同じ画像を出力する（二度出し処理）。それにより、上述したような見難い映像表示となることを抑制する。

図５は本実施例に係る画像表示システムのブロック図である。図５は実施例１のブロック図（図１）と基本的に同じであるが、ベクトル設定部７からベクトル検出部５に出力される信号に情報Ｃが追加されている点が異なる。情報Ｃは補間フレームを作成する際に大きさ０の動きベクトルを用いる領域（０ベクトル領域）を表す情報である。

本実施例に係る画像表示システムの動作（画像表示装置の制御方法）で、実施例１と異なる点について説明する。

本実施例の付加情報Ｔは、実施例１で説明した移動情報（信号Ｔ１〜Ｔ３）の他に、
（４）重畳画像が重畳されている領域を表す領域情報（信号Ｔ４）
を更に含むものとする。本実施例では、信号Ｔ４はＯＳＤ領域の始点、終点座標を表すものとする。座標は、例えば、切り出し領域の左上を原点（０，０）とした場合の座標である。

図６は切り出し領域においてＯＳＤ情報が重畳されている領域を示す図である。図６において、破線で囲まれた領域２００は信号Ｔ４により規定されるＯＳＤ領域を示している。細線で囲まれた領域２０１は補間フレームのブロックを示している。太線で囲まれた領域２０２はＯＳＤ情報が重畳されているため二度出しにする（動きベクトルの大きさを０にする）ブロックを示している。

ベクトル設定部７は、移動情報を用いて補間フレームの作成に用いられる動きベクトル
を設定すると共に、領域情報を用いて、０ベクトル領域を設定する。具体的には、ベクトル設定部７は、信号Ｔ４を用いて重畳画像を含む領域（０ベクトル領域）を検出し、０ベクトル領域を表す情報Ｃをベクトル検出部５に出力する。本実施例では、０ベクトル領域として、ＯＳＤ領域の少なくとも一部を含むブロックを検出する。図６の場合、領域２０２で示した１０個のブロックが検出される。そして、ベクトル設定部７は、検出された１０個のブロックの位置情報（それぞれのブロックの位置座標や識別子など）を情報Ｃとしてベクトル検出部５に出力する。情報Ｃは、１フレームに一回出力される信号である。移動情報を用いた動きベクトルの設定方法の説明は、実施例１と同様のため省略する。

ベクトル検出部５の詳細図を図７に示す。実施例１のベクトル検出部５（図２）と異なるのは、ベクトル選択部５２に情報Ｃが入力される点である。

ベクトル選択部５２は、フラグＦ＝１である場合に、情報Ｃにより指定されたブロックの動きベクトルＶを０ベクトル（二度出しになるようなベクトル）として出力する。それ以外のブロックに対しては、Ｖ１を出力する。また、Ｆ＝０の場合は実施例１と同様である。ベクトル選択部５２から出力される動きベクトルをまとめると、以下のようになる。
Ｆ＝０の場合：Ｖ＝Ｖ０
Ｆ＝１の場合：
情報Ｃにより指定されたブロック：Ｖ＝（０，０）
情報Ｃにより指定されていないブロック：Ｖ＝Ｖ１

このように、本実施例では、ベクトル設定部７により設定される動きベクトルが選択された場合には、補間フレームの作成する際に、０ベクトル領域内では大きさが０の動きベクトルが用いられる。そして、０ベクトル領域以外の領域ではベクトル設定部７で設定された動きベクトルが用いられる。それにより、重畳画像が表示される部分は二度出しとなり、重畳画像の二重像を抑制することができる。二度出しとは、ＦＲＣにおいて同じ映像を２回続けて表示する手法である。また、０ベクトル領域以外の領域ではベクトル設定部７で設定された動きベクトルＶ１が用いられるため、実施例１による効果と同様の効果を得ることができる

以上述べたように、上述した２つの実施例によれば、切り出し位置の移動に関する情報を用いて動きベクトルを設定することにより、画像の一部を切り出し、切り出した領域の画像を映像信号として表示装置に入力する構成において、切り出し領域の位置を移動する操作中に生成される映像に対してフレームレートを変換しても、表示映像の品質低下を極力抑制することができる。

また、上記効果を得るためには、切り出し位置の移動が指示されている場合にＶ１を選択すればよい。上記実施例では、切り出し位置の移動が指示されていない場合にＶ０を選択するため、状況に応じた適切な動きベクトルで補間フレームを作成することができる。例えば、部分画像でないムービー（動画）などの映像信号を表示・確認する場合には、一般的な方法で得られた動きベクトルで補間フレームが作成される。

なお、上記実施例では、映像出力装置がデジタルカメラである場合について説明したが、映像出力装置はデジタルカメラに限らない。上記実施例に係る映像出力装置は画像表示装置に映像信号を出力する装置（例えば、プリンタなど）に適応可能である。映像出力装置としてプリンタを用いた場合には、ユーザーがプリンタのカーソルキーにより切り出し位置の移動を指示することが考えられる。

また、テレビ２に設けられているカードスロットに画像データが格納されたメディアを差込み、メディアから画像データを取得する場合にも本実施例は適用できる。この場合に
は、テレビ２内に映像出力装置が存在し、ユーザーがテレビのリモコンに付属するカーソルキーにより切り出し位置の移動を指示することが考えられる。

なお、上記実施例では、映像信号のフレームレートを６０Ｈｚから１２０Ｈｚに変換する構成について説明したが、入力される映像信号および出力する（表示パネルで表示する）映像信号のフレームレートはこれらに限らない。例えば、入力される映像信号のフレームレートは４０Ｈｚであってもよいし、８０Ｈｚであってもよい。出力する映像信号のフレームレートは８０Ｈｚであってもよいし、１６０Ｈｚであってもよい。時間的に隣り合う２つのフレーム間に２つの補間フレームを作成すれば、フレームレート３倍にすることもできる。

なお、上記実施例では、ユーザーが切り出し位置の移動を指示する場合について説明したが、切り出し位置の移動の指示は映像出力装置内で生成されてもよい。例えば、映像出力装置が、部分画像で構成される映像信号を画像表示装置に出力した場合に、自動的に切り出し位置を移動させる機能を有していてもよい。

なお、上記実施例では、移動情報がＴ１〜Ｔ３を含む構成について説明したが、移動情報はこれに限らない。例えば、移動方向や移動速度を含んでいれば、切り出し位置の移動が指示されているか否かを把握することができる。また、切り出し位置を表す情報を含んでいれば、２つのフレーム間の位置の差から、切り出し位置の移動が指示されているか否か、移動方向、移動速度を把握することができる。

また、上記実施例では、ベクトル設定部７がベクトル選択部５２へ信号Ｔ１に応じたフラグＦを出力するものとしたが、入力部３がベクトル選択部５２へ信号Ｔ１としてフラグＦを出力してもよい。また、上述したように、切り出し位置の移動が指示されているか否かは、移動方向、移動速度、切り出し位置を表す情報などから把握することができるため、それらの情報からフラグＦを生成してもよい。

また、上記実施例では、信号Ｔ２が「上」、「下」、「右」、「左」の４種類の方向を示す信号であるものとしたが、信号Ｔ２が示す方向の数は、これより多くてもよいし、少なくてもよい。例えば、「右上」、「右下」、「左上」、「左下」を含む８種類の方向を示す信号であってもよいし、「上下」、「左右」の２種類の方向を示す信号であってもよい。

なお、上記実施例では、画像表示装置がベクトル検出部を有する構成としたが、静止画像から生成された映像信号を表示する場合、切り出し位置の移動が指示されていなければ、映像内に動きはない。そのため、切り出し位置の移動が指示されていない場合には、ベクトル設定部がＶ１として０ベクトルを出力し、補間フレーム作成部がＶ１を用いて補間フレームを作成すればよい。

なお、上記実施例では、ベクトル計算部において、基準ブロックから対応ブロックまでのベクトルを動きベクトルとして検出する構成としたが、対応ブロックから基準ブロックまでのベクトルを動きベクトルとしてもよい。その場合には、Ｔ２＝０、Ｔ３＝１０のときにＶ１＝（０，−１０）とすればよい。

１デジタルカメラ
２テレビ
３入力部
４ＦＲＣ部
５ベクトル検出部
６補間フレーム作成部
７ベクトル設定部
８表示パネル
５１ベクトル計算部
５２ベクトル選択部

Claims

画像の一部の領域を切り出した部分画像をフレームとする映像信号を生成する生成手段と、
前記生成手段により生成された映像信号を用いて計算を行い、第１の動きベクトルを生成する手段と、
前記部分画像の切り出し位置を移動させる移動手段と、
前記移動手段により前記切り出し位置が移動されたことに応じて、前記映像信号と共に、前記切り出し位置の移動方向と移動量の情報を含む移動情報を出力する出力手段と、
前記出力手段により出力された前記移動情報における移動方向と移動量の情報に基づいて、第２の動きベクトルを生成する手段と、
前記出力手段により出力された前記移動情報に基づいて、前記切り出し位置が移動したか否かを判定する判定手段と、
前記判定手段の判定結果に基づいて、前記第１の動きベクトルと前記第２の動きベクトルの一方を選択する選択手段と、
前記選択手段により選択された動きベクトルに基づいて補間フレームを生成し、前記生成手段により生成された映像信号を、前記補間フレームを用いて、該映像信号のフレームレートよりも高いフレームレートで表示する表示手段と、
を有し、
前記選択手段は、前記判定手段により前記切り出し位置が移動したと判定された場合には前記第２の動きベクトルを選択し、前記判定手段により前記切り出し位置が移動していないと判定された場合には前記第１の動きベクトルを選択する
ことを特徴とする画像表示システム。
前記部分画像は、前記部分画像内の所定の位置に重畳される重畳画像を含み、
前記出力手段は、前記映像信号及び前記移動情報と共に、前記重畳画像が重畳されている領域を表す領域情報を更に出力し、
前記表示手段は、前記補間フレームを生成する際に、前記選択手段により前記第２の動きベクトルが選択された場合には、前記領域情報が示す前記重畳画像が重畳されている領域を含む領域内では大きさが０の動きベクトルを用いるとともに、当該大きさが０の動きベクトルを用いる領域以外の領域では前記第２の動きベクトルを用いて、前記補間フレー
ムを生成する
ことを特徴とする請求項１に記載の画像表示システム。
映像信号を出力する映像出力装置に接続可能な画像表示装置において、
前記映像出力装置から、画像の一部の領域を切り出した部分画像をフレームとする映像信号と共に、前記部分画像の切り出し位置の移動方向と移動量の情報を含む移動情報を取得する取得手段と、
前記取得手段により取得された映像信号を用いて計算を行い、第１の動きベクトルを生成する手段と、
前記取得手段により取得された前記移動情報における移動方向と移動量の情報に基づいて、第２の動きベクトルを生成する手段と、
前記取得手段により取得された前記移動情報に基づいて、前記切り出し位置が移動したか否かを判定する判定手段と、
前記判定手段の判定結果に基づいて、前記第１の動きベクトルと前記第２の動きベクトルの一方を選択する選択手段と、
前記選択手段により選択された動きベクトルに基づいて補間フレームを生成し、前記取得手段により取得された映像信号を、前記補間フレームを用いて、該映像信号のフレームレートよりも高いフレームレートで表示する表示手段と、
を有し、
前記選択手段は、前記判定手段により前記切り出し位置が移動したと判定された場合には前記第２の動きベクトルを選択し、前記判定手段により前記切り出し位置が移動していないと判定された場合には前記第１の動きベクトルを選択する
ことを特徴とする画像表示装置。
映像信号を出力する映像出力装置に接続可能な画像表示装置の制御方法において、
前記映像出力装置から、画像の一部の領域を切り出した部分画像をフレームとする映像信号と共に、前記部分画像の切り出し位置の移動方向と移動量の情報を含む移動情報を取得する取得ステップと、
前記取得ステップにおいて取得された映像信号を用いて計算を行い、第１の動きベクトルを生成するステップと、
前記取得ステップにおいて取得された前記移動情報における移動方向と移動量の情報に基づいて、第２の動きベクトルを生成するステップと、
前記取得ステップにおいて取得された前記移動情報に基づいて、前記切り出し位置が移動したか否かを判定する判定ステップと、
前記判定ステップでの判定結果に基づいて、前記第１の動きベクトルと前記第２の動きベクトルの一方を選択する選択ステップと、
前記選択ステップにおいて選択された動きベクトルに基づいて補間フレームを生成し、前記取得ステップにおいて取得された映像信号を、前記補間フレームを用いて、該映像信号のフレームレートよりも高いフレームレートで表示する表示ステップと、
を有し、
前記選択ステップでは、前記判定ステップにおいて前記切り出し位置が移動したと判定された場合には前記第２の動きベクトルが選択され、前記判定ステップにおいて前記切り出し位置が移動していないと判定された場合には前記第１の動きベクトルが選択される
ことを特徴とする画像表示装置の制御方法。
画像の一部の領域を切り出した部分画像をフレームとする映像信号を生成する生成ステップと、
前記生成ステップにおいて生成された映像信号を用いて計算を行い、第１の動きベクトルを生成するステップと、
前記部分画像の切り出し位置を移動させる移動ステップと、
前記移動ステップにおいて前記切り出し位置が移動されたことに応じて、前記映像信号と共に、前記切り出し位置の移動方向と移動量の情報を含む移動情報を出力する出力ステップと、
前記出力ステップにおいて出力された前記移動情報における移動方向と移動量の情報に基づいて、第２の動きベクトルを生成するステップと、
前記出力ステップにおいて出力された前記移動情報に基づいて、前記切り出し位置が移動したか否かを判定する判定ステップと、
前記判定ステップでの判定結果に基づいて、前記第１の動きベクトルと前記第２の動きベクトルの一方を選択する選択ステップと、
前記選択ステップにおいて選択された動きベクトルに基づいて補間フレームを生成し、前記生成ステップにおいて生成された映像信号を、前記補間フレームを用いて、該映像信号のフレームレートよりも高いフレームレートで表示する表示ステップと、
を有し、
前記選択ステップでは、前記判定ステップにおいて前記切り出し位置が移動したと判定された場合には前記第２の動きベクトルが選択され、前記判定ステップにおいて前記切り出し位置が移動していないと判定された場合には前記第１の動きベクトルが選択される
ことを特徴とする画像表示システムの制御方法。
前記部分画像は、前記部分画像内の所定の位置に重畳される重畳画像を含み、
前記出力ステップでは、前記映像信号及び前記移動情報と共に、前記重畳画像が重畳されている領域を表す領域情報が更に出力され、
前記表示ステップでは、前記補間フレームを生成する際に、前記選択ステップにおいて前記第２の動きベクトルが選択された場合には、前記領域情報が示す前記重畳画像が重畳されている領域を含む領域内では大きさが０の動きベクトルが用いられるとともに、当該大きさが０の動きベクトルを用いる領域以外の領域では前記第２の動きベクトルが用いられて、前記補間フレームが生成される
ことを特徴とする請求項５に記載の画像表示システムの制御方法。