JP2005234904A - 画像信号処理装置、画像信号処理方法、並びにプログラムおよびそれを記録した媒体 - Google Patents
画像信号処理装置、画像信号処理方法、並びにプログラムおよびそれを記録した媒体 Download PDFInfo
- Publication number
- JP2005234904A JP2005234904A JP2004043489A JP2004043489A JP2005234904A JP 2005234904 A JP2005234904 A JP 2005234904A JP 2004043489 A JP2004043489 A JP 2004043489A JP 2004043489 A JP2004043489 A JP 2004043489A JP 2005234904 A JP2005234904 A JP 2005234904A
- Authority
- JP
- Japan
- Prior art keywords
- image signal
- signal processing
- motion vector
- input
- pixel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Image Analysis (AREA)
Abstract
【解決手段】画像信号処理装置100は、オブジェクト抽出処理部110と、フレーム間画像生成処理部130とを有している。処理部110は、画像に含まれるオブジェクトの領域を示すオブジェクト領域データOADを取得する。この処理部110は、オブジェクト抽出処理を行う際に、処理部130からの、補助信号としての各画素の動きベクトルMVgを利用し、処理性能を上げる。処理部130は、入力画像信号Saのフレーム間に位置する新たなフレームの画像信号を生成し、出力画像信号Sbを取得する。この処理部130は、フレーム間画像生成処理を行う際に、処理部110からの、補助信号としてのオブジェクト領域データOADを利用し、処理性能を上げる。
【選択図】 図1
Description
Δd=√{(hg−hb)2+(vg−vb)2} ・・・(1)
qi=[(ki−MIN+0.5)*2P/DR] ・・・(2)
入力端子131に入力される入力画像信号Saは、動きベクトル検出部133に供給される。この動きベクトル検出部133では、入力画像信号Saに基づいて、フレーム毎に、各画素の動きベクトルMVgが、勾配法により検出される。そして、オブジェクト境界ノイズ低減処理部134では、補助信号入力端子142に入力されたオブジェクト領域データOADを利用して、オブジェクト境界付近で間違って検出された動きベクトル(ノイズ)が低減される。この場合例えば、オブジェクト領域データOADを利用してオブジェクトの境界が把握され、オブジェクト境界付近の画素の動きベクトルが、それぞれの画素が属するオブジェクト内の大多数を占める画素の動きベクトルで置き換えられることで補正される。
yk=W1×xk1+W2×xk2+‥‥+Wn×xkn ・・・(5)
(k=1,2,‥‥,m)
ek=yk−{W1×xk1+W2×xk2+‥‥+Wn×xkn} ・・・(6)
(k=1,2,‥‥m)
この係数データ生成装置350は、上述した画像信号Sbに対応した教師信号としての525p/60フレームの画像信号が入力される入力端子351と、上述した画像信号Sbに対応した生徒信号としての525p/24フレームの画像信号が入力される入力端子352とを有している。
時間モードがモード0の係数データWiを生成する動作を説明する。この場合、時間モード指定部353からは、モード0を示すモード信号MODが出力される。このモード信号MODは、タップ中心位置決定部355、教師タップ選択部359および正規方程式生成部360に供給される。
Claims (18)
- 入力画像信号が入力される入力手段と、
上記入力手段に入力される入力画像信号に対して第1の画像信号処理を行う第1の画像信号処理手段と、
上記第1の画像信号処理手段で得られる処理結果を出力する出力手段と、
上記第1の画像信号処理の際に利用することによって、より高品質な上記第1の画像信号処理を行うことが可能となる補助信号が入力される補助信号入力手段とを備え、
上記補助信号入力手段に上記補助信号が入力されるとき、上記第1の画像信号処理手段は、上記補助信号を利用して、上記第1の画像信号処理を行う
ことを特徴とする画像信号処理装置。 - 上記補助信号は、
上記入力画像信号が入力される入力手段と、
上記入力手段に入力される入力画像信号に対して上記第1の画像信号処理とは異なる第2の画像信号処理を行う第2の画像信号処理手段と、
上記第2の画像信号処理手段で得られる処理結果を出力する出力手段と、を備える他の画像信号処理装置からの信号であって、
上記第2の画像信号処理の過程で生成される信号である
ことを特徴とする請求項1に記載の画像信号処理装置。 - 上記第1の画像信号処理は、上記入力画像信号に基づいて画像に含まれるオブジェクトの領域を示すオブジェクト領域データを得るオブジェクト抽出処理である
ことを特徴とする請求項1に記載の画像信号処理装置。 - 上記第1の画像信号処理手段は、
上記入力画像信号に基づいてフレーム毎に各画素の動きベクトルを検出する動きベクトル検出手段と、
上記動きベクトル検出手段で検出された各画素の動きベクトルから、信頼度が高い動きベクトルを抽出する動きベクトル抽出手段と、
上記動きベクトル抽出手段で抽出された信頼度の高い動きベクトルに基づいて、類似した動きベクトルの画素が含まれる領域を抽出する領域抽出手段と、
上記領域抽出手段で抽出された領域に基づいて、上記オブジェクトの領域を判定する領域判定手段とを有し、
上記補助信号は、上記動きベクトル検出手段で検出される動きベクトルとは異なる方法でフレーム毎に検出される各画素の動きベクトルであり、
上記動きベクトル抽出手段は、
上記動きベクトル検出手段で検出された各画素の動きベクトルと上記補助信号としての各画素の動きベクトルとの差分データに基づいて、上記信頼度の高い動きベクトルを抽出する
ことを特徴とする請求項3に記載の画像信号処理装置。 - 上記第1の画像信号処理手段で得られる処理結果としてのオブジェクト領域データを補助信号として出力する補助信号出力手段をさらに備える
ことを特徴とする請求項3に記載の画像信号処理装置。 - 上記第1の画像信号処理は、上記入力画像信号に基づいてフレーム毎に各画素の動きベクトルを検出し、該検出された動きベクトルを用いて上記入力画像信号のフレーム間に位置する新たなフレームの画像信号を生成するフレーム間画像生成処理である
ことを特徴とする請求項1に記載の画像信号処理装置。 - 上記第1の画像信号処理手段は、
上記入力画像信号に基づいてフレーム毎に各画素の動きベクトルを検出する動きベクトル検出手段と、
上記動きベクトル検出手段で検出された各画素の動きベクトルのうち、オブジェクト境界付近で間違って検出された動きベクトルをノイズとし、該ノイズを低減するノイズ低減処理手段と、
上記ノイズ低減処理手段でノイズが低減された動きベクトルに基づいて、上記入力画像信号のフレーム間に位置する新たなフレームの画像信号を生成するフレーム間画像生成手段とを有し、
上記補助信号は、上記入力画像信号の各フレームで抽出された、画像に含まれるオブジェクトの領域を示すオブジェクト領域データであり、
上記ノイズ低減処理手段は、
上記オブジェクト領域データに基づいてオブジェクト境界を把握し、上記ノイズを低減する
ことを特徴とする請求項6に記載の画像信号処理装置。 - 上記ノイズ低減処理手段は、上記オブジェクト境界付近の画素の動きベクトルを、それぞれの画素が属するオブジェクト内の大多数を占める画素の動きベクトルで置き換えることで補正し、上記ノイズを低減する
ことを特徴とする請求項7に記載の画像信号処理装置。 - 上記動きベクトル検出手段で検出される動きベクトルを補助信号として出力する補助信号出力手段をさらに備える
ことを特徴とする請求項7に記載の画像信号処理装置。 - 入力画像信号を入力するステップと、
上記入力される入力画像信号に対して第1の画像信号処理を行うステップと、
上記第1の画像信号処理で得られる処理結果を出力するステップと、
上記第1の画像信号処理の際に利用することによって、より高品質な上記第1の画像信号処理を行うことが可能となる補助信号を入力するステップとを備え、
上記第1の画像信号処理を行うステップでは、上記補助信号を入力するステップで該補助信号が入力されるとき、該補助信号を利用して上記第1の画像信号処理を行う
ことを特徴とする画像信号処理方法。 - 入力画像信号を入力するステップと、
上記入力される入力画像信号に対して第1の画像信号処理を行うステップと、
上記第1の画像信号処理で得られる処理結果を出力するステップと、
上記第1の画像信号処理の際に利用することによって、より高品質な上記第1の画像信号処理を行うことが可能となる補助信号を入力するステップとを備え、
上記第1の画像信号処理を行うステップでは、上記補助信号を入力するステップで該補助信号が入力されるとき、該補助信号を利用して上記第1の画像信号処理を行う画像信号処理方法をコンピュータに実行させるためのプログラムが記録されたコンピュータ読み取り可能な媒体。 - 入力画像信号を入力するステップと、
上記入力される入力画像信号に対して第1の画像信号処理を行うステップと、
上記第1の画像信号処理で得られる処理結果を出力するステップと、
上記第1の画像信号処理の際に利用することによって、より高品質な上記第1の画像信号処理を行うことが可能となる補助信号を入力するステップとを備え、
上記第1の画像信号処理を行うステップでは、上記補助信号を入力するステップで該補助信号が入力されるとき、該補助信号を利用して上記第1の画像信号処理を行う画像信号処理方法をコンピュータに実行させるためのプログラム。 - 入力画像信号に対してそれぞれ異なる画像信号処理を行う複数の画像信号処理部を備え、
上記複数の画像信号処理部に含まれる第1の画像信号処理部は、
上記入力画像信号が入力される入力手段と、
上記入力手段に入力される入力画像信号に対して第1の画像信号処理を行う第1の画像信号処理手段と、
上記第1の画像信号処理手段で得られる処理結果を出力する出力手段と、
上記第1の画像信号処理の際に利用することによって、より高品質な上記第1の画像信号処理を行うことが可能となる、上記複数の画像信号処理部に含まれる第2の画像信号処理部からの補助信号が入力される補助信号入力手段とを有し、
上記第1の画像信号処理手段は、上記補助信号入力手段に入力される補助信号を利用して上記第1の画像信号処理を行う
ことを特徴とする画像信号処理装置。 - 上記第2の画像信号処理部は、
上記入力画像信号が入力される入力手段と、
上記入力手段に入力される上記入力画像信号に対して上記第1の画像信号処理とは異なる第2の画像信号処理を行う第2の画像信号処理手段と、
上記第2の画像信号処理手段で得られる処理結果を出力する出力手段とを有し、
上記補助信号は上記第2の画像信号処理の過程で生成される信号である
ことを特徴とする請求項13に記載の画像信号処理装置。 - 入力画像信号に対してオブジェクト抽出処理を行って画像に含まれるオブジェクトの領域を示すオブジェクト領域データを得る第1の画像信号処理部と、
上記入力画像信号に基づいてフレーム毎に各画素の動きベクトルを検出し、上記入力画像信号に対して該検出された動きベクトルを用いたフレーム間画像生成処理を行って、上記入力画像信号のフレーム間に位置する新たなフレームの画像信号を生成する第2の画像信号処理部とを備え、
第1の画像信号処理部は、上記オブジェクト抽出処理を行う際に、上記第2の画像信号処理部からの上記動きベクトルを利用し、
上記第2の画像信号処理部は、上記フレーム間画像生成処理を行う際に、上記第1の画像信号処理部からの上記オブジェクト領域データを利用する
ことを特徴とする画像信号処理装置。 - 上記第1の画像信号処理部は、
上記入力画像信号に基づいてフレーム毎に各画素の動きベクトルを、上記第2の画像信号処理部からの上記動きベクトルとは異なる方法で検出する動きベクトル検出手段と、
上記動きベクトル検出手段で検出された各画素の動きベクトルから、上記第2の画像信号処理部からの上記各画素の動きベクトルに基づいて、信頼度が高い動きベクトルを抽出する動きベクトル抽出手段と、
上記動きベクトル抽出手段で抽出された信頼度の高い動きベクトルに基づいて、類似した動きベクトルの画素が含まれる領域を抽出する領域抽出手段と、
上記領域抽出手段で抽出された領域に基づいて、上記オブジェクトの領域を判定する領域判定手段とを有し、
上記動きベクトル抽出手段は、
上記動きベクトル検出手段で検出された各画素の動きベクトルと上記第2の画像信号処理部からの上記各画素の動きベクトルとの差分データに基づいて、上記信頼度の高い動きベクトルを抽出する
ことを特徴とする請求項15に記載の画像信号処理装置。 - 上記第2の画像信号処理部は、
上記入力画像信号に基づいてフレーム毎に各画素の動きベクトルを検出する動きベクトル検出手段と、
上記第1の画像信号処理部からの上記オブジェクト領域データに基づいて、上記動きベクトル検出手段で検出された各画素の動きベクトルのうち、オブジェクト境界付近で間違って検出された動きベクトルをノイズとし、該ノイズを低減するノイズ低減処理手段と、
上記ノイズ低減処理手段で上記ノイズが低減された動きベクトルに基づいて、上記入力画像信号のフレーム間に位置する新たなフレームの画像信号を生成するフレーム間画像生成手段とを有する
ことを特徴とする請求項15に記載の画像信号処理装置。 - 上記ノイズ低減処理手段は、上記オブジェクト境界付近の画素の動きベクトルを、それぞれの画素が属するオブジェクト内の大多数を占める画素の動きベクトルで置き換えることで補正し、上記ノイズを低減する
ことを特徴とする請求項17に記載の画像信号処理装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004043489A JP4534518B2 (ja) | 2004-02-19 | 2004-02-19 | 画像信号処理装置、画像信号処理方法、並びにプログラムおよびそれを記録した媒体 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004043489A JP4534518B2 (ja) | 2004-02-19 | 2004-02-19 | 画像信号処理装置、画像信号処理方法、並びにプログラムおよびそれを記録した媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005234904A true JP2005234904A (ja) | 2005-09-02 |
JP4534518B2 JP4534518B2 (ja) | 2010-09-01 |
Family
ID=35017801
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004043489A Expired - Fee Related JP4534518B2 (ja) | 2004-02-19 | 2004-02-19 | 画像信号処理装置、画像信号処理方法、並びにプログラムおよびそれを記録した媒体 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4534518B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009134587A (ja) * | 2007-11-30 | 2009-06-18 | Toyota Motor Corp | 画像処理装置 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002074369A (ja) * | 2000-08-28 | 2002-03-15 | Ntt Data Corp | 動画像による監視システム、方法及びコンピュータ読み取り可能な記録媒体 |
JP2003299035A (ja) * | 2002-04-03 | 2003-10-17 | Sony Corp | 画素補間処理装置及び方法 |
JP2004032374A (ja) * | 2002-06-26 | 2004-01-29 | Fuji Photo Film Co Ltd | シャープネス処理方法および装置並びにプログラム |
-
2004
- 2004-02-19 JP JP2004043489A patent/JP4534518B2/ja not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002074369A (ja) * | 2000-08-28 | 2002-03-15 | Ntt Data Corp | 動画像による監視システム、方法及びコンピュータ読み取り可能な記録媒体 |
JP2003299035A (ja) * | 2002-04-03 | 2003-10-17 | Sony Corp | 画素補間処理装置及び方法 |
JP2004032374A (ja) * | 2002-06-26 | 2004-01-29 | Fuji Photo Film Co Ltd | シャープネス処理方法および装置並びにプログラム |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009134587A (ja) * | 2007-11-30 | 2009-06-18 | Toyota Motor Corp | 画像処理装置 |
JP4518139B2 (ja) * | 2007-11-30 | 2010-08-04 | トヨタ自動車株式会社 | 画像処理装置 |
US8107725B2 (en) | 2007-11-30 | 2012-01-31 | Toyota Jidosha Kabushiki Kaisha | Image processor and image processing method |
Also Published As
Publication number | Publication date |
---|---|
JP4534518B2 (ja) | 2010-09-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4504230B2 (ja) | 動画像処理装置、動画像処理方法、及び動画像処理プログラム | |
JP4696388B2 (ja) | 情報信号処理装置、情報信号処理方法、画像信号処理装置およびそれを使用した画像表示装置、それに使用される係数種データ生成装置、係数データ生成装置、並びに情報記録媒体 | |
US20100080299A1 (en) | Frame frequency conversion apparatus, frame frequency conversion method, program for achieving the method, computer readable recording medium recording the program, motion vector detection apparatus, and prediction coefficient generation apparatus | |
JP4277446B2 (ja) | 情報信号処理装置、情報信号処理方法、画像信号処理装置およびそれを使用した画像表示装置、それに使用される係数種データ生成装置および生成方法、並びに記録媒体 | |
JP4534518B2 (ja) | 画像信号処理装置、画像信号処理方法、並びにプログラムおよびそれを記録した媒体 | |
KR101089853B1 (ko) | 계수 데이터의 생성 장치 및 생성 방법, 계수종 데이터의 생성 장치 및 생성 방법, 정보 신호 처리 장치, 및 프로그램을 기록한 매체 | |
JP4310689B2 (ja) | 信号処理装置および方法、記録媒体、並びにプログラム | |
JP4622264B2 (ja) | 動きベクトル検出装置、および動きベクトル検出方法、並びにコンピュータ・プログラム | |
US6975770B2 (en) | Image compression and decompression with predictor selection based on embedding data | |
US9277213B2 (en) | Video encoding device | |
JP4622265B2 (ja) | 動きベクトル検出装置、および動きベクトル検出方法、並びにプログラム | |
JP4507639B2 (ja) | 画像信号処理装置 | |
JP4441860B2 (ja) | 情報信号の処理装置および処理方法、並びにプログラムおよびそれを記録した媒体 | |
JP4770711B2 (ja) | 画像処理装置、画像処理方法、およびプログラム | |
JP4265291B2 (ja) | 情報信号の処理装置および処理方法、並びに情報信号の処理方法を実行するためのプログラム | |
JP2017143425A (ja) | 画像特徴記述子符号化装置、画像特徴記述子復号装置、画像特徴記述子符号化方法及び画像特徴記述子復号方法 | |
JP2005260928A (ja) | 画像処理装置と画像処理方法およびプログラム | |
JPH0851598A (ja) | 画像情報変換装置 | |
JP4501217B2 (ja) | 画像信号変換装置、画像信号変換方法、およびそれを使用した画像表示装置 | |
JP2003271970A (ja) | テロップ領域抽出回路、テロップ領域抽出方法、その方法を実行するためのプログラムおよびそのプログラムを記録したコンピュータ読み取り可能な媒体、並びに画像信号処理回路 | |
JP2011166266A (ja) | 情報処理装置と情報処理方法およびプログラム | |
JP5305822B2 (ja) | 映像信号処理装置、及び方法、プログラム | |
JP4207763B2 (ja) | 動きベクトル検出装置、および動きベクトル検出方法、並びにコンピュータ・プログラム | |
JP2005260929A (ja) | 画像処理装置と画像処理方法およびプログラム | |
JP4099554B2 (ja) | 画像情報変換装置および画像情報変換方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20060606 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070202 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20090918 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20091104 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20091221 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20091224 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100212 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100316 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100510 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100525 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100607 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130625 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |