JP2009232402A - Noise reduction circuit and method - Google Patents
Noise reduction circuit and method Download PDFInfo
- Publication number
- JP2009232402A JP2009232402A JP2008078370A JP2008078370A JP2009232402A JP 2009232402 A JP2009232402 A JP 2009232402A JP 2008078370 A JP2008078370 A JP 2008078370A JP 2008078370 A JP2008078370 A JP 2008078370A JP 2009232402 A JP2009232402 A JP 2009232402A
- Authority
- JP
- Japan
- Prior art keywords
- noise reduction
- data
- difference
- moving image
- output
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Picture Signal Circuits (AREA)
Abstract
Description
本発明は、ノイズ低減回路及び方法に関し、例えば、映像表示装置や映像記録再生装置などにおける映像データのノイズ低減に適用し得るものである。 The present invention relates to a noise reduction circuit and method, and can be applied, for example, to noise reduction of video data in a video display device, a video recording / playback device, and the like.
従来、映像データのノイズ低減回路として、特許文献1に開示されるものがある。特許文献1における図1の符号を適用して、この従来のノイズ低減回路の構成を簡単に説明すると、以下の通りである。
Conventionally, there is a circuit disclosed in
この従来のノイズ低減回路は、直前所定期間(例えば1フレーム)のノイズ低減後の映像データを記憶している映像データ記憶手段1と、ノイズ低減対象の画素に対し、時間方向又は空間方向に所定量ずれた画素の映像データ記憶手段1から与えられたデータと、入力映像データにおけるノイズ低減対象の画素のデータとの差分から、2つのデータの相関を利用してノイズ低減データを形成して出力すると共に、差分がノイズのために生じたか画像の有効な変化のために生じたかを示す差分原因判定信号を差分の時間変化に基づいて形成して出力する、時間方向及び空間方向のずれ量(例えば、1フレーム、1フィールド弱、1フィールド強、若しくは、1ライン)の組み合わせが異なる複数の相関利用ノイズ低減手段2〜5と、各相関利用ノイズ低減手段2〜5からの差分原因判定信号に基づき、最終的なノイズ低減後の映像データの決定方法を表す選択/合成制御信号を出力する選択/合成制御信号作成手段6と、選択/合成制御信号に基づき、各相関利用ノイズ低減手段2〜5からのノイズ低減データを選択、又は、合成して最終的なノイズ低減後の映像データを得る選択/合成手段7とを有する。
従来のノイズ低減回路は、テレビジョン放送による映像データのような常時動きが発生している映像データを対象としている。ノイズ低減回路は、空間的及び又は時間的に異なる、相関が高いと思われる2つのデータの差分をとって、それをノイズ成分として除去するものであるが、2つのデータが移動体の移動によっても異なること(残像)もある。すなわち、2つのデータの差分がノイズのためではなく、移動によるため(残像)のこともある。一般には、ノイズの場合の方が、移動による場合より差分は小さく、そのため、閾値との比較により、ノイズか移動によるためかを切り分けて異なる対応をとるようにしている。移動による場合をノイズと判断した方が悪影響が大きく、そのため、閾値を小さく設定し、ノイズが大きい場合でも、移動による場合と判断し易くしている。そのため、監視カメラが撮影したような動きがほとんどない映像データに対しても、残像を抑制する動作を行ってしまい、ノイズを効果的に低減することができない。 The conventional noise reduction circuit is intended for video data that is constantly moving, such as video data by television broadcasting. The noise reduction circuit takes a difference between two data which are spatially and / or temporally different and seem to have a high correlation and removes the difference as a noise component. There are also differences (afterimages). That is, the difference between the two data may be due to movement (afterimage) instead of noise. In general, the difference in the case of noise is smaller than that in the case of movement. Therefore, by comparing with the threshold value, whether the noise is due to movement or not is separated. If the movement is judged as noise, the adverse effect is larger. Therefore, the threshold value is set to be small so that even if the noise is large, it is easy to judge that the movement is caused. For this reason, an operation for suppressing afterimages is performed even on video data with little movement as taken by the surveillance camera, and noise cannot be effectively reduced.
また、動きがない映像データの場合、ノイズ相殺に供する2つのデータの位置が空間的に一致しているフレーム間差分データが、一番ノイズ低減効果が高いと推測できる。そのため、動きがない映像データを取り扱う際において、フレーム間差分データが選択されやすいようにパラメータ(フレーム間差分絶対値用の閾値等)を設定した場合、動きがある映像データに対して、フレーム間で移動体の位置が異なり、空間的に同じ位置に移動体が存在しないため、残像が大きく発生してしまうこともあり得る。 In addition, in the case of video data that does not move, it can be estimated that the inter-frame difference data in which the positions of the two data for noise cancellation are spatially coincident has the highest noise reduction effect. For this reason, when handling video data that does not move, if parameters (such as a threshold for absolute difference between frames) are set so that difference data between frames can be easily selected, Since the position of the moving body is different and the moving body does not exist at the same spatial position, a large afterimage may occur.
さらに、監視カメラ等のシステムでは、データ圧縮技術を用いてノイズ低減後の映像データを記録しているが、動きがない映像データでノイズを効果的に低減できないままであると、相関性などを利用したデータ圧縮技術では、低減できていないノイズ部分で相関性が低くなり圧縮効率が下がるため、記録データ量が大きくなってしまうという問題も有する。 Furthermore, in surveillance cameras and other systems, video data after noise reduction is recorded using data compression technology, but if the noise cannot be effectively reduced with motionless video data, correlation and the like The data compression technique used also has a problem that the amount of recorded data increases because the correlation is lowered in the noise portion that cannot be reduced and the compression efficiency is lowered.
そのため、映像データの動きの有り/無しに関わらず、残像を抑制しつつノイズを適切に低減することができるノイズ低減回路及び方法が望まれている。 Therefore, there is a demand for a noise reduction circuit and method that can appropriately reduce noise while suppressing afterimages regardless of presence / absence of motion of video data.
第1の本発明のノイズ低減回路は、(1)直前所定期間のノイズ低減後の映像データを記憶している映像データ記憶手段と、(2)ノイズ低減対象の画素に対し、時間方向及び又は空間方向に所定量ずれた画素の上記映像データ記憶手段から与えられたデータと、入力映像データにおける上記ノイズ低減対象の画素のデータとの差分から、2つのデータの相関を利用してノイズ低減データを形成して出力すると共に、上記差分がノイズのために生じたか画像の有効な変化のために生じたかを示す差分原因判定信号を上記差分の時間変化に基づいて形成して出力する、上記時間方向及び又は空間方向のずれ量の組み合わせが異なる、動画用の複数の相関利用ノイズ低減手段と、(3)ノイズ低減対象の画素に対し、時間方向及び又は空間方向に所定量ずれた画素の上記映像データ記憶手段から与えられたデータと、入力映像データにおける上記ノイズ低減対象の画素のデータとの差分から、2つのデータの相関を利用してノイズ低減データを形成して出力する、静止画用の相関利用ノイズ低減手段と、(4)入力映像データにおける画面全体、若しくは、画面を複数に分割した分割画面が、動画か静止画かを判定する動画/静止画判定手段と、(5)上記動画/静止画判定手段の判定結果が静止画である画面全体若しくは画面部分については、上記静止画用の相関利用ノイズ低減手段からのノイズ低減データを選択して出力し、上記動画/静止画判定手段の判定結果が動画である画面全体若しくは画面部分については、上記動画用の各相関利用ノイズ低減手段からの差分原因判定信号に基づき、動画用のノイズ低減データの決定方法を定め、上記動画用の各相関利用ノイズ低減手段からのノイズ低減データを選択、又は、合成して、出力するノイズ低減データを得る出力データ選択手段とを有することを特徴とする。 The noise reduction circuit according to the first aspect of the present invention includes: (1) video data storage means storing video data after noise reduction for a predetermined period immediately before; and (2) a time direction and / or a noise reduction target pixel. Based on the difference between the data given from the video data storage means of the pixel shifted by a predetermined amount in the spatial direction and the data of the pixel targeted for noise reduction in the input video data, the noise reduction data using the correlation of the two data The time for forming and outputting a difference cause determination signal indicating whether the difference has occurred due to noise or due to an effective change in the image is formed and output based on the time change of the difference. A plurality of correlation use noise reduction means for moving images having different combinations of shift amounts in the direction and / or the spatial direction, and (3) the temporal and / or spatial direction with respect to the noise reduction target pixel Based on the difference between the data given from the video data storage means of the pixel with a fixed deviation and the data of the pixel targeted for noise reduction in the input video data, noise reduction data is formed using the correlation of the two data. Correlated use noise reduction means for output, and (4) moving image / still image determination means for determining whether the entire screen in the input video data or the divided screen obtained by dividing the screen into a plurality of moving images or still images. And (5) for the entire screen or screen portion where the determination result of the moving image / still image determination means is a still image, select and output the noise reduction data from the correlation use noise reduction means for the still image, For the entire screen or screen portion in which the determination result of the moving image / still image determination means is a moving image, a difference cause determination signal from each correlation use noise reduction means for the moving image An output data selection means for determining noise reduction data for moving images and selecting or synthesizing noise reduction data from each correlation use noise reduction means for moving images to obtain noise reduction data to be output; It is characterized by having.
第2の本発明は、入力映像データのノイズを低減したノイズ低減データを得て出力するノイズ低減方法において、映像データ記憶手段と、動画用の複数の相関利用ノイズ低減手段と、静止画用の相関利用ノイズ低減手段と、動画/静止画判定手段と、出力データ選択手段とを備え、(1)上記映像データ記憶手段は、直前所定期間のノイズ低減後の映像データを記憶しており、(2)上記時間方向及び又は空間方向のずれ量の組み合わせが異なる、上記動画用の複数の相関利用ノイズ低減手段はそれぞれ、ノイズ低減対象の画素に対し、時間方向及び又は空間方向に所定量ずれた画素の上記映像データ記憶手段から与えられたデータと、入力映像データにおける上記ノイズ低減対象の画素のデータとの差分から、2つのデータの相関を利用してノイズ低減データを形成して出力すると共に、上記差分がノイズのために生じたか画像の有効な変化のために生じたかを示す差分原因判定信号を上記差分の時間変化に基づいて形成して出力し、(3)上記静止画用の相関利用ノイズ低減手段は、ノイズ低減対象の画素に対し、時間方向及び又は空間方向に所定量ずれた画素の上記映像データ記憶手段から与えられたデータと、入力映像データにおける上記ノイズ低減対象の画素のデータとの差分から、2つのデータの相関を利用してノイズ低減データを形成して出力し、(4)上記動画/静止画判定手段は、入力映像データにおける画面全体、若しくは、画面を複数に分割した分割画面が、動画か静止画かを判定し、(5)上記出力データ選択手段は、上記動画/静止画判定手段の判定結果が静止画である画面全体若しくは画面部分については、上記静止画用の相関利用ノイズ低減手段からのノイズ低減データを選択して出力し、上記動画/静止画判定手段の判定結果が動画である画面全体若しくは画面部分については、上記動画用の各相関利用ノイズ低減手段からの差分原因判定信号に基づき、動画用のノイズ低減データの決定方法を定め、上記動画用の各相関利用ノイズ低減手段からのノイズ低減データを選択、又は、合成して、出力するノイズ低減データを得ることを特徴とする。 According to a second aspect of the present invention, there is provided a noise reduction method for obtaining and outputting noise reduction data obtained by reducing noise of input video data, video data storage means, a plurality of correlation use noise reduction means for moving pictures, A correlation use noise reduction unit, a moving image / still image determination unit, and an output data selection unit. (1) The video data storage unit stores video data after noise reduction for a predetermined period immediately before, ( 2) The plurality of correlation use noise reduction means for moving images having different combinations of shift amounts in the time direction and / or the spatial direction are each shifted by a predetermined amount in the time direction and / or the spatial direction with respect to the noise reduction target pixels. Based on the difference between the data given from the video data storage means of the pixel and the data of the pixel targeted for noise reduction in the input video data, the correlation between the two data is used. Form and output noise reduction data, and form and output a difference cause determination signal indicating whether the difference is caused by noise or an effective change in the image based on the temporal change of the difference. (3) The correlation-use noise reduction means for the still image is supplied with data provided from the video data storage means for pixels that are shifted by a predetermined amount in the time direction and / or the spatial direction with respect to the noise reduction target pixel. Based on the difference between the pixel data of the noise reduction target in the video data and using the correlation between the two data, noise reduction data is formed and output. (4) The moving image / still image determination means is configured to input video data. (5) The output data selection means determines whether the moving picture / still picture determination means determines whether the entire screen in FIG. For the entire screen or screen portion in which is a still image, the noise reduction data from the correlation use noise reduction means for the still image is selected and output, and the determination result of the moving image / still image determination means is a moving image. For the whole or the screen portion, based on the difference cause determination signal from each correlation use noise reduction means for the moving picture, a method for determining the noise reduction data for the moving picture is determined, and from each correlation use noise reduction means for the moving picture, Noise reduction data to be output is obtained by selecting or synthesizing noise reduction data.
本発明によれば、映像データの動きの有り/無しに関わらず、残像を抑制しつつノイズを適切に低減することができるノイズ低減回路及び方法を提供できる。 According to the present invention, it is possible to provide a noise reduction circuit and method capable of appropriately reducing noise while suppressing afterimages regardless of presence / absence of motion of video data.
(A)第1の実施形態
以下、本発明によるノイズ低減回路及び方法の第1の実施形態を、図面を参照しながら詳述する。
(A) First Embodiment A noise reduction circuit and method according to a first embodiment of the present invention will be described in detail below with reference to the drawings.
第1の実施形態のノイズ低減回路が扱う映像信号(映像データ)は、コンポジットビデオ信号であっても良く、輝度信号や色信号や色差信号などのコンポーネント信号であっても良い。但し、インターレース信号になっていることを要するが、1フレーム当たりのライン数は問われない。また、第1の実施形態のノイズ低減回路へは、デジタル信号(映像データ)として入力され、その画素データのビット数は問われない。また、デジタル信号のサンプリング周波数も問われない。さらに、第1の実施形態のノイズ低減回路は、記録媒体から再生された映像信号(映像データ)を処理する装置に設けられていても良く、ネットワーク側から受信した映像信号(映像データ)を処理する装置に設けられていても良く、放送映像信号(映像データ)を処理する装置に設けられていても良く、撮影による映像信号(映像データ)を処理する装置に設けられていても良い。 The video signal (video data) handled by the noise reduction circuit of the first embodiment may be a composite video signal or a component signal such as a luminance signal, a color signal, or a color difference signal. However, although it is necessary to be an interlace signal, the number of lines per frame is not limited. Further, the noise reduction circuit of the first embodiment is inputted as a digital signal (video data), and the number of bits of the pixel data is not limited. Also, the sampling frequency of the digital signal is not questioned. Furthermore, the noise reduction circuit of the first embodiment may be provided in a device that processes a video signal (video data) reproduced from a recording medium, and processes a video signal (video data) received from the network side. May be provided in a device that processes a broadcast video signal (video data), or may be provided in a device that processes a video signal (video data) obtained by shooting.
(A−1)第1の実施形態の構成
図1は、第1の実施形態のノイズ低減回路の構成を示すブロック図である。
(A-1) Configuration of the First Embodiment FIG. 1 is a block diagram showing the configuration of the noise reduction circuit of the first embodiment.
第1の実施形態のノイズ低減回路は、フレームメモリ1と、2個のフレーム間ノイズ低減手段2及び9と、2個のフィールド間ノイズ低減手段3及び4と、ライン間ノイズ低減手段5と、動き/エッジ検出補正信号作成手段6と、選択/合成手段7と、動画/静止画判定手段8と、選択手段10とを有する。
The noise reduction circuit of the first embodiment includes a
なお、以下では、フレーム間ノイズ低減手段2をフレーム間第1ノイズ低減手段と呼び、フレーム間ノイズ低減手段9をフレーム間第2ノイズ低減手段と呼び、フィールド間ノイズ低減手段3をフィールド間第1ノイズ低減手段と呼び、フィールド間ノイズ低減手段4をフィールド間第2ノイズ低減手段と呼ぶ。 In the following, the inter-frame noise reduction means 2 is referred to as an inter-frame first noise reduction means, the inter-frame noise reduction means 9 is referred to as an inter-frame second noise reduction means, and the inter-field noise reduction means 3 is referred to as an inter-field first noise reduction means. This is called noise reduction means, and the inter-field noise reduction means 4 is called inter-field second noise reduction means.
フレームメモリ1は、選択手段10から出力されたノイズ低減後の映像データを少なくとも1フレーム分だけ記憶するものである。フレームメモリ1は、現時点でのノイズ低減対象の画素データ(入力映像データ)に対し、1フレーム前の画素データをフレーム間第1ノイズ低減手段2、フレーム間第2ノイズ低減手段9に出力し、1フィールド前の2つの画素データをそれぞれフィールド間第1ノイズ低減手段3、フィールド間第2ノイズ低減手段4に出力し、1ライン(1水平走査ライン)前の画素データをライン間ノイズ低減手段5に出力するものである。
The
図2は、ノイズ低減対象の画素データとノイズ低減に利用する過去の画素データとの、時間軸方向及び垂直方向(V方向)の関係を示した説明図である。画素データP1は、ノイズ低減対象の画素データP0に対し、1フレーム(期間)前(すなわち2フィールド(期間)前;2V前)の画素データであり、フレーム間第1ノイズ低減手段2及びフレーム間第2ノイズ低減手段9に出力される。1フレーム前の画素データP1は、垂直方向及び水平方向には、ノイズ低減対象の画素データP0と同一位置である。画素データP2、P3はそれぞれ、ノイズ低減対象の画素データP0に対し、1フィールド(期間)(1V)前の画素データであり、フィールド間第1ノイズ低減手段3、フィールド間第2ノイズ低減手段4に出力される。フィールド間第1ノイズ低減手段3に出力される画素データP2は、水平方向には、ノイズ低減対象の画素データP0と同一位置(1/2画素ピッチだけずれていても良い)であるが、垂直方向には、1/2ライン分だけ上に位置している。フィールド間第2ノイズ低減手段4に出力される画素データP3は、水平方向には、ノイズ低減対象の画素データP0と同一位置(1/2画素ピッチだけずれていても良い)であるが、垂直方向には、1/2ライン分だけ下に位置している。画素データP4は、ノイズ低減対象の画素データP0に対し、1ライン(1水平走査期間;1H)前の画素データであり、ライン間ノイズ低減手段5に出力される。画素データP4は、水平方向には、ノイズ低減対象の画素データP0と同一位置であるが、垂直方向には、1ライン分だけ上に位置している。
FIG. 2 is an explanatory diagram showing the relationship between the time axis direction and the vertical direction (V direction) between pixel data targeted for noise reduction and past pixel data used for noise reduction. The pixel data P1 is pixel data one frame (period) before (that is, two fields (period) before; 2V before) with respect to the pixel data P0 targeted for noise reduction. The inter-frame first noise reduction means 2 and the inter-frame It is output to the second noise reduction means 9. The pixel data P1 one frame before is in the same position as the pixel data P0 to be reduced in the vertical and horizontal directions. The pixel data P2 and P3 are pixel data one field (period) (1V) before the noise reduction target pixel data P0. The inter-field first noise reduction means 3 and the inter-field second noise reduction means 4 respectively. Is output. The pixel data P2 output to the first inter-field noise reduction means 3 is at the same position as the pixel data P0 subject to noise reduction (may be shifted by 1/2 pixel pitch) in the horizontal direction, but is vertical. In the direction, it is located above the half line. The pixel data P3 output to the inter-field second
フレーム間第1ノイズ低減手段2は、入力映像データとフレームメモリ1からの1フレーム遅延データとから、フレーム間ノイズ低減データA及びフレーム間動き検出信号を形成し(形成方法は動作の項で明らかにする)、フレーム間ノイズ低減データAを選択/合成手段7及び動画/静止画判定手段8に出力し、フレーム間動き検出信号を動き/エッジ検出補正信号作成手段6に出力するものである。 The first inter-frame noise reduction means 2 forms the inter-frame noise reduction data A and the inter-frame motion detection signal from the input video data and the one-frame delay data from the frame memory 1 (the forming method is apparent in the operation section). The inter-frame noise reduction data A is output to the selection / combination means 7 and the moving image / still image determination means 8, and the inter-frame motion detection signal is output to the motion / edge detection correction signal creation means 6.
フィールド間第1ノイズ低減手段3は、入力映像データとフレームメモリ1からの1フィールド遅延データA(図2の画素データP2参照)とから、フィールド間ノイズ低減データA及びフィールド間動き/エッジ検出信号Aを形成し(形成方法は動作の項で明らかにする)、フィールド間ノイズ低減データAを選択/合成手段7に出力し、フィールド間動き/エッジ検出信号Aを動き/エッジ検出補正信号作成手段6に出力するものである。
The first inter-field noise reduction means 3 uses the inter-field noise reduction data A and the inter-field motion / edge detection signal from the input video data and the one-field delay data A (see pixel data P2 in FIG. 2) from the
フィールド間第2ノイズ低減手段4は、入力映像データとフレームメモリ1からの1フィールド遅延データB(図2の画素データP3参照)とから、フィールド間ノイズ低減データB及びフィールド間動き/エッジ検出信号Bを形成し(形成方法は動作の項で明らかにする)、フィールド間ノイズ低減データBを選択/合成手段7に出力し、フィールド間動き/エッジ検出信号Bを動き/エッジ検出補正信号作成手段6に出力するものである。 The inter-field second noise reduction means 4 uses the inter-field noise reduction data B and the inter-field motion / edge detection signal from the input video data and the one-field delay data B from the frame memory 1 (see pixel data P3 in FIG. 2). B is formed (the forming method is clarified in the operation section), the inter-field noise reduction data B is output to the selection / combination means 7, and the inter-field motion / edge detection signal B is generated as the motion / edge detection correction signal creation means. 6 is output.
ライン間ノイズ低減手段5は、入力映像データとフレームメモリ1からの1ライン遅延データとから、ライン間ノイズ低減データ及びライン間エッジ検出信号を形成し(形成方法は動作の項で明らかにする)、ライン間ノイズ低減データを選択/合成手段7に出力し、ライン間エッジ検出信号を動き/エッジ検出補正信号作成手段に出力するものである。 The inter-line noise reduction means 5 forms inter-line noise reduction data and inter-line edge detection signals from the input video data and the one-line delay data from the frame memory 1 (the forming method will be clarified in the operation section). The inter-line noise reduction data is output to the selection / combination means 7, and the inter-line edge detection signal is output to the motion / edge detection correction signal creation means.
動き/エッジ検出補正信号作成手段6は、フレーム間動き検出信号、フィールド間動き/エッジ検出信号A、フィールド間動き/エッジ検出信号B及びライン間エッジ検出信号から、動き/エッジ検出補正信号を形成して選択/合成手段7に制御信号として出力するものである。 The motion / edge detection correction signal generating means 6 forms a motion / edge detection correction signal from the inter-frame motion detection signal, the inter-field motion / edge detection signal A, the inter-field motion / edge detection signal B, and the inter-line edge detection signal. Then, it is output as a control signal to the selection / synthesis means 7.
選択/合成手段7は、4種類のノイズ低減手段2、3、4、5からのフレーム間ノイズ低減データA、フィールド間ノイズ低減データA、フィールド間ノイズ低減データB、ライン間ノイズ低減データを、動き/エッジ検出補正信号作成手段6からの動き/エッジ検出補正信号に応じて、選択及び又は合成し、ノイズが低減された動画用の映像データ(動画用ノイズ低減データ)として選択手段10に出力するものである。
The selecting / synthesizing
動画/静止画判定手段8は、入力映像データと、フレーム間ノイズ低減手段2から出力されたフレーム間ノイズ低減データAとから、対象となっている入力映像データの画面全体が、動きがある映像(動画)であるか動きがない映像(静止画)であるかを判定し(判定方法は動作の項で明らかにする)、動画/静止画判定信号を作成して選択手段10に出力するものである。 The moving image / still image determination means 8 is an image in which the entire screen of the target input video data is moving from the input video data and the interframe noise reduction data A output from the interframe noise reduction means 2. (Moving image) or moving image (still image) is determined (the determination method will be clarified in the operation section), and a moving image / still image determination signal is generated and output to the selection means 10 It is.
フレーム間第2ノイズ低減手段9は、入力映像データとフレームメモリ1からの1フレーム遅延データとから、フレーム間ノイズ低減データB(静止画用ノイズ低減データ)を形成して(形成方法は動作の項で明らかにする)選択手段10に出力するものである。 The inter-frame second noise reduction means 9 forms inter-frame noise reduction data B (still image noise reduction data) from the input video data and the 1-frame delay data from the frame memory 1 (the forming method is an operation method). Output to the selection means 10.
ここで、上述したフレーム間第1ノイズ低減手段2が動画を考慮した所定パラメータの値(後述するノイズ/動き判定用閾値)を適用しているのに対して、フレーム間第2ノイズ低減手段9が静止画を考慮した所定パラメータの値を適用している点が異なっている。 Here, the interframe first noise reduction means 2 applies a value of a predetermined parameter (noise / motion determination threshold described later) in consideration of a moving image, whereas the interframe second noise reduction means 9. Is different in that a predetermined parameter value considering a still image is applied.
選択手段10は、動画/静止画判定手段8から与えられた動画/静止画判定信号に従い、選択/合成手段7から与えられた動画用ノイズ低減データ、又は、フレーム間第2ノイズ低減手段9から与えられた静止画用ノイズ低減データを選択し、ノイズが低減された映像データとして出力するものである。ノイズ低減後の映像データは、次段に出力されると共に、フレームメモリ1にも与えられる。
The selection means 10 follows the moving image / still image determination signal supplied from the moving image / still image determination means 8 or the moving image noise reduction data provided from the selection / synthesis means 7 or the inter-frame second noise reduction means 9. The given still image noise reduction data is selected and output as video data with reduced noise. The video data after noise reduction is output to the next stage and is also given to the
(A−2)第1の実施形態の動作
次に、以上の構成を有する第1の実施形態のノイズ低減回路の動作(ノイズ低減方法)を説明する。
(A-2) Operation of the First Embodiment Next, the operation (noise reduction method) of the noise reduction circuit of the first embodiment having the above configuration will be described.
第1の実施形態のノイズ低減回路において、入力映像データに関し、新たな画素が、ノイズ低減対象の画素(図2の符号P0参照)になると、各ノイズ低減手段2、…、5、9はそれぞれ、以下のような、そのノイズ低減対象の画素についてのノイズ低減データ等の形成処理を行う。 In the noise reduction circuit according to the first embodiment, when a new pixel becomes a noise reduction target pixel (see symbol P0 in FIG. 2) with respect to input video data, each noise reduction means 2,... Then, the following processing for forming noise reduction data or the like is performed on the noise reduction target pixel.
フレーム間第1ノイズ低減手段2は、まず、ノイズ低減対象の画素の入力映像データ(画素データ)P0とフレームメモリ1から出力された1フレーム遅延データ(1フレーム前の画素データ)P1との差分の絶対値(又は差分二乗;以下、同様である)を求める。その後、フレーム間ノイズ低減手段2は、その差分絶対値を、ノイズ/動きの切り分け用の閾値(ノイズ/動き判定用閾値)と比較し、差分絶対値が閾値より小さい場合には差分はノイズによるものと判定し、差分絶対値が閾値以上の場合には差分は画像部分の動きによるものと判定する。周知のように、画像の静止部分では、相前後するフレームの同一位置の画素データは本来同一の値であって(非常に相関が高い)、それに差があったとしてもその差は小さく、一方、画像の動き部分では、相前後するフレームの同一位置の画素データはその動きの影響を受けて異なる値になることが多く、その差も大きい。フレーム間第1ノイズ低減手段2は、このような画像の性質を利用している。
First, the inter-frame first noise reduction means 2 first calculates the difference between the input video data (pixel data) P0 of the pixel targeted for noise reduction and the 1-frame delay data (pixel data one frame before) P1 output from the
フレーム間第1ノイズ低減手段2は、差分絶対値に基づいてノイズと判定したときには、入力映像データ(画素データ)P0からノイズ成分を除去したフレーム間ノイズ低減データAを出力し、一方、差分絶対値に基づいて動きと判定したときには、入力映像データ(画素データ)P0をそのままフレーム間ノイズ低減データAとして出力する。なお、入力映像データ(画素データ)P0から除去するノイズ成分は、上述した差分そのものであっても良く、上述した差分に所定の重み係数を乗算したものであっても良く、直前のノイズと判定された複数画素の差分の重み付け平均等であっても良い。 When the first inter-frame noise reduction means 2 determines that the noise is based on the difference absolute value, the first inter-frame noise reduction means 2 outputs the inter-frame noise reduction data A from which the noise component is removed from the input video data (pixel data) P0. When it is determined that the movement is based on the value, the input video data (pixel data) P0 is output as it is as inter-frame noise reduction data A. Note that the noise component to be removed from the input video data (pixel data) P0 may be the above-described difference itself, or may be obtained by multiplying the above-described difference by a predetermined weighting factor, and is determined as the immediately preceding noise. It may be a weighted average of the differences between the plurality of pixels.
また、フレーム間第1ノイズ低減手段2は、差分絶対値に基づいて動きと判定したときには、差分絶対値をローパスフィルタに通して差分量レベル(平滑値)を得、動きと判定されたデータ差分量と、差分量レベルと差分符号から判定される動き判定信号(動き有り無し)とからなるフレーム間動き検出信号を形成して出力する。なお、単に、差分絶対値に基づいて動きと判定した場合でも、フレーム間動き検出信号の動き判定信号を動き有りとせず、ローパスフィルタを通して得た差分量レベルの正負も含めた変化から、動き判定信号の内容(動きの有無)を定めるようにしている。ノイズはランダムであるが、動きの場合には、同一画素の映像データの変化に一定の傾向があり、そのため、ローパスフィルタを通して得た差分量レベルに基づいて、フレーム間動き検出信号に含める動き判定信号の内容を定めることとしている。
Further, when the first inter-frame
フレーム間第2ノイズ低減手段9も、フレーム間第1ノイズ低減手段2とほぼ同様な動作により、フレーム間ノイズ低減データBを形成する。 The inter-frame second noise reduction means 9 also forms the inter-frame noise reduction data B by substantially the same operation as the inter-frame first noise reduction means 2.
ここで、フレーム間第2ノイズ低減手段9は、フレーム間第1ノイズ低減手段2で設定したノイズ/動き判定用閾値より大きい、静止画専用のノイズ/動き判定用閾値を用いている。上述したような構成のフレーム間ノイズ低減手段(2、9)において、ノイズレベルが大きい場合にも対応できるように閾値を大きく設定してしまっていると、動きがある映像データの入力時に、移動体の移動のため、相前後するフレームで画素値が異なっていてもノイズと判定されて残像が発生してしまうことがある。静止画用のノイズ低減を対象としているフレーム間第2ノイズ低減手段9においては、残像を気にする必要はない。フレーム間第2ノイズ低減手段9では、静止画を処理対象としていて残像を気にしなくても良いため、映像データに存在している最大のノイズレベルをノイズと判定できるようなノイズ/動き判定用閾値を設定することができる。 Here, the inter-frame second noise reduction means 9 uses a noise / motion determination threshold dedicated to still images that is larger than the noise / motion determination threshold set by the inter-frame first noise reduction means 2. In the inter-frame noise reduction means (2, 9) configured as described above, if the threshold value is set large so as to be able to cope with the case where the noise level is high, the movement is performed when moving image data is input. Due to the movement of the body, even if the pixel values are different in successive frames, it may be determined as noise and an afterimage may occur. In the inter-frame second noise reduction means 9 intended for noise reduction for still images, there is no need to worry about afterimages. Since the second inter-frame noise reduction means 9 is intended for processing still images and does not have to worry about afterimages, it is for noise / motion determination that can determine the maximum noise level existing in the video data as noise. A threshold can be set.
フレーム間第2ノイズ低減手段9は、フレーム間第1ノイズ低減手段2とは異なり、フレーム間動き検出信号を形成することは行っていない。
Unlike the inter-frame first
フィールド間第1ノイズ低減手段3は、まず、ノイズ低減対象の画素の入力映像データ(画素データ)P0とフレームメモリ1から出力された1フィールド遅延データP2との差分の絶対値を求める。その後、フィールド間第1ノイズ低減手段3は、その差分絶対値を、ノイズと、動き/エッジの切り分け用の閾値と比較し、差分絶対値が閾値より小さい場合には差分はノイズによるものと判定し、差分絶対値が閾値以上の場合には差分は画像部分の動き又はエッジによるものと判定する。閾値との比較により、ノイズと動きとを切り分けようとする技術思想は、フレーム間ノイズ低減手段2と同様である。しかし、フィールド間第1ノイズ低減手段3が差分絶対値を求めている2個のデータ、すなわち、入力映像データ(画素データ)P0とフレームメモリ1から出力された1フィールド遅延データP2の画素は、水平方向には一致しているが、垂直方向には1/2ライン分だけずれている。そのため、画像における静止物体等のエッジがその画素位置間のずれの幅内にあっても差分絶対値は大きくなる。従って、差分絶対値が閾値以上になる原因は、動きだけでなく、エッジの存在によっても生じる。
The first inter-field noise reduction means 3 first obtains the absolute value of the difference between the input video data (pixel data) P0 of the pixel targeted for noise reduction and the 1-field delay data P2 output from the
フィールド間第1ノイズ低減手段3は、差分絶対値に基づいてノイズと判定したときには、入力映像データ(画素データ)P0からノイズ成分を除去したフィールド間ノイズ低減データAを出力し、一方、差分絶対値に基づいて動き又はエッジと判定したときには、入力映像データ(画素データ)P0をそのままフィールド間ノイズ低減データAとして出力する。なお、入力映像データ(画素データ)P0から除去するノイズ成分は、上述した差分そのものであっても良く、上述した差分に所定の重み係数を乗算したものであっても良く、直前のノイズと判定された複数画素の差分の重み付け平均等であっても良い。 When the first inter-field noise reduction means 3 determines that the noise is based on the absolute difference value, the first inter-field noise reduction means 3 outputs the inter-field noise reduction data A from which the noise component is removed from the input video data (pixel data) P0. When it is determined that the movement or the edge is based on the value, the input video data (pixel data) P0 is output as it is as the inter-field noise reduction data A. Note that the noise component to be removed from the input video data (pixel data) P0 may be the above-described difference itself, or may be obtained by multiplying the above-described difference by a predetermined weighting factor, and is determined as the immediately preceding noise. It may be a weighted average of the differences between the plurality of pixels.
また、フィールド間第1ノイズ低減手段3は、差分絶対値に基づいて動き又はエッジと判定したときには、差分絶対値をローパスフィルタに通して差分量レベル(平滑値)を得、動き又はエッジと判定されたデータ差分量と、差分量レベルと差分符号から判定される動き/エッジ判定信号(動き/エッジ有り無し)とからなるフィールド間動き/エッジ検出信号を形成して出力する。
Further, when the first inter-field
フィールド間第2ノイズ低減手段4は、ノイズ低減対象の画素の入力映像データ(画素データ)P0とフレームメモリ1から出力された1フィールド遅延データP3とに基づいて、フィールド間第1ノイズ低減手段3と同様な処理を行なう。
The inter-field second noise reduction means 4 is based on the input video data (pixel data) P0 of the pixel to be reduced in noise and the 1-field delay data P3 output from the
ライン間ノイズ低減手段5は、まず、ノイズ低減対象の画素の入力映像データ(画素データ)P0とフレームメモリ1から出力された1ライン遅延データP4との差分の絶対値を求める。その後、ライン間ノイズ低減手段5は、その差分絶対値を、ノイズとエッジとの切り分け用の閾値と比較し、差分絶対値が閾値より小さい場合には差分はノイズによるものと判定し、差分絶対値が閾値以上の場合には差分は画像部分のエッジによるものと判定する。閾値との比較により、ノイズとエッジとを切り分けようとする技術思想は、フィールド間第1ノイズ低減手段3やフィールド間第2ノイズ低減手段4と同様である。なお、ライン間ノイズ低減手段5が差分絶対値を求めている2個のデータ、すなわち、入力映像データ(画素データ)P0とフレームメモリ1から出力された1ライン遅延データP4の画素は、同一フレーム同一フィールドに属しているので、動きを捉えることができず、エッジのみを捉えることができる。
The inter-line noise reduction means 5 first obtains the absolute value of the difference between the input video data (pixel data) P0 of the pixel targeted for noise reduction and the 1-line delay data P4 output from the
ライン間ノイズ低減手段5は、差分絶対値に基づいてノイズと判定したときには、入力映像データ(画素データ)P0からノイズ成分を除去したライン間ノイズ低減データを出力し、一方、差分絶対値に基づいてエッジと判定したときには、入力映像データ(画素データ)P0をそのままライン間ノイズ低減データとして出力する。なお、入力映像データ(画素データ)P0から除去するノイズ成分は、上述した差分そのものであっても良く、上述した差分に所定の重み係数を乗算したものであっても良く、直前のノイズと判定された複数画素の差分の重み付け平均等であっても良い。
When it is determined that the noise is based on the absolute difference value, the interline
また、ライン間ノイズ低減手段5は、差分絶対値に基づいてエッジと判定したときには、差分絶対値をローパスフィルタに通して差分量レベル(平滑値)を得、エッジと判定されたデータ差分量と、差分量レベルと差分符号から判定されるエッジ判定信号(エッジ有り無し)とからなるライン間エッジ検出信号を形成して出力する。 Further, when the interline noise reduction means 5 determines an edge based on the difference absolute value, the difference absolute value is passed through a low-pass filter to obtain a difference amount level (smooth value), and the data difference amount determined to be an edge Then, an edge detection signal between lines composed of an edge determination signal (edge presence / absence) determined from the difference level and the difference code is formed and output.
図3は、上述した5種類のノイズ低減手段2〜5、9への2個の入力データ間の時間方向及び垂直方向のずれの有無と大きさを整理して示す図表である。なお、図3は、いずれの場合にも、水平方向の位置ずれはないとしている。また、図4は、動き/エッジ検出補正信号作成手段6からの、選択/合成手段7への制御信号の意味合いの説明図、言い換えると、選択/合成手段7による選択又は合成論理の説明図である。
FIG. 3 is a chart in which the presence / absence and size of the deviation in the time direction and the vertical direction between the two input data to the five types of noise reduction means 2 to 5 and 9 are arranged. Note that FIG. 3 assumes that there is no horizontal displacement in any case. FIG. 4 is an explanatory diagram of the meaning of the control signal from the motion / edge detection correction signal creation unit 6 to the selection /
フレーム間第1ノイズ低減手段2(及びフレーム間第2ノイズ低減手段9)に関係する1フレーム遅延データP1は、ノイズ低減対象の画素データP0に対して、時間方向のずれが2V(Vは1フィールド期間)と大きいが、V方向(垂直方向)の位置ずれがないため、図4に示すようにフレーム間で動きがない場合だけ、1フレーム遅延データP1とノイズ低減対象の画素データP0の差分の絶対値をとることにより、ノイズ成分を抽出することができるが、フレーム間で動きがある場合には、時間によるデータの相関が取れなくなるため、差分データを使用してノイズ低減データを作成すると位置的残像が発生してしまう。 The one-frame delay data P1 related to the interframe first noise reduction means 2 (and the interframe second noise reduction means 9) is 2V (V is 1) with respect to the pixel data P0 targeted for noise reduction. Since there is no position shift in the V direction (vertical direction), the difference between the 1-frame delay data P1 and the noise reduction target pixel data P0 only when there is no movement between frames as shown in FIG. The noise component can be extracted by taking the absolute value of, but if there is movement between frames, the correlation of the data over time will not be possible, so creating noise reduction data using difference data A positional afterimage is generated.
また、ライン間ノイズ低減手段5に関係する1ライン遅延データP4は、ノイズ低減対象の画素データP0に対して、図3に示すように、時間のずれはないがV方向に1ラインのずれがあるため、図4に示すように、ライン間でエッジがない場合には1ライン遅延データP4とノイズ低減対象の画素データP0の差分の絶対値をとることにより、ノイズ成分を抽出することができるが、ライン間にエッジがある場合にはV方向によるデータの相関が取れなくなるため、差分データを使用してノイズ低減データを作成すると位置的残像が発生してしまう。 Further, as shown in FIG. 3, the 1-line delay data P4 related to the inter-line noise reduction means 5 is not shifted in time but shifted in 1 line in the V direction with respect to the pixel data P0 to be reduced in noise. Therefore, as shown in FIG. 4, when there is no edge between lines, the noise component can be extracted by taking the absolute value of the difference between the one-line delay data P4 and the pixel data P0 to be reduced in noise. However, if there is an edge between the lines, the data cannot be correlated in the V direction. Therefore, when the noise reduction data is generated using the difference data, a positional afterimage is generated.
さらに、フィールド間第1ノイズ低減手段3又はフィールド間第2ノイズ低減手段4に関係する1フィールド遅延データA(P2)、1フィールド遅延データB(P3)は、ノイズ低減対象の画素データP0に対して、図3に示すように、時間方向ではフレーム間の1/2時間にあたる1V、V方向ではライン間の1/2ラインにあたる0.5H(Hは1水平走査期間)のずれがあるため、図4に示すように、1フィールド遅延データA(P2)と1フィールド遅延データB(P3)の両方で動き又はエッジがない場合には、1フィールド遅延データA(P2)と1フィールド遅延データB(P3)の平均データを作成し、その平均化したデータとノイズ低減対象画素データP0の差分の絶対値をとることによりノイズ成分を抽出することができ、また、1フィールド遅延データA(P2)と1フィールド遅延データB(P3)の一方のデータに動き又はエッジがない場合には、動きがない方のデータとノイズ低減対象の画素データP0の差分の絶対値をとることによりノイズ成分を抽出することができるが、1フィールド遅延データA(P2)と1フィールド遅延データB(P3)の両方で動き又はエッジがある場合には時間方向及びV方向によるデータの相関が取れなくなるため差分データを使用してノイズ低減データを作成すると時間的残像若しくは位置的残像が発生してしまう。 Further, 1-field delay data A (P2) and 1-field delay data B (P3) related to the first inter-field noise reduction means 3 or the second inter-field noise reduction means 4 are compared with the pixel data P0 to be reduced in noise. As shown in FIG. 3, there is a shift of 1V corresponding to ½ hour between frames in the time direction and 0.5H (H is one horizontal scanning period) corresponding to ½ line between lines in the V direction. As shown in FIG. 4, when there is no motion or edge in both 1-field delay data A (P2) and 1-field delay data B (P3), 1-field delay data A (P2) and 1-field delay data B It is possible to extract the noise component by creating the average data of (P3) and taking the absolute value of the difference between the averaged data and the noise reduction target pixel data P0. In addition, when one of the 1-field delay data A (P2) and the 1-field delay data B (P3) has no motion or edge, the data without motion and the pixel data P0 of the noise reduction target The noise component can be extracted by taking the absolute value of the difference. However, when there is a motion or an edge in both the 1-field delay data A (P2) and the 1-field delay data B (P3), the time direction and V Since it becomes impossible to correlate the data depending on the direction, a temporal afterimage or a positional afterimage is generated when the noise reduction data is created using the difference data.
そこで、動き/エッジ検出補正信号作成手段6が、常に時間方向及びV方向共に残像が少なくなるようにノイズ低減データを選択又は合成させるための制御信号を形成し、選択/合成手段7がその制御信号に応じて、4種類のノイズ低減手段2〜5からのノイズ低減データを選択又は合成して、動画用のノイズ低減後の映像データ(動画用ノイズ低減データ)を得る。 Therefore, the motion / edge detection correction signal creation means 6 forms a control signal for selecting or synthesizing the noise reduction data so that the afterimage is always reduced in both the time direction and the V direction, and the selection / synthesis means 7 controls the control signal. Depending on the signal, the noise reduction data from the four types of noise reduction means 2 to 5 are selected or synthesized to obtain video data (moving image noise reduction data) after noise reduction for the moving image.
図5は、動き/エッジ検出補正信号作成手段6の制御信号の形成処理例を示すフローチャートである。 FIG. 5 is a flowchart showing an example of control signal formation processing of the movement / edge detection correction signal creating means 6.
動き/エッジ検出補正信号作成手段6は、まず、フレーム間動き検出信号がフレーム間の動きがないことを表しているか否かを判別する(S100)。そして、フレーム間の動きがない場合には、フレーム間ノイズ低減データAを動画用ノイズ低減データとして選択/合成手段7によって選択させる(S101)。 The motion / edge detection correction signal creating means 6 first determines whether or not the inter-frame motion detection signal indicates that there is no motion between frames (S100). When there is no motion between frames, the interframe noise reduction data A is selected by the selection / combination means 7 as moving image noise reduction data (S101).
これに対して、動き/エッジ検出補正信号作成手段6は、フレーム間の動きがある場合には、フィールド間動き/エッジ検出信号A及びフィールド間動き/エッジ検出信号Bの内容の組み合わせを判別する(S102〜S104)。フィールド間動き/エッジ検出信号A及びフィールド間動き/エッジ検出信号Bの両方が、動きがないことを表している場合は、動き/エッジ検出補正信号作成手段6は、選択/合成手段7によって、フィールド間ノイズ低減データAとフィールド間ノイズ低減データBの平均化したフィールド間ノイズ低減データを動画用ノイズ低減データとして出力させる(S104)。また、フィールド間動き/エッジ検出信号Aに動きがなくフィールド間動き/エッジ検出信号Bに動きがある場合には、動き/エッジ検出補正信号作成手段6は、選択/合成手段7によって、フィールド間ノイズ低減データAを動画用ノイズ低減データとして選択させる(S106)。さらに、フィールド間動き/エッジ検出信号Bに動きがなくフィールド間動き/エッジ検出信号Aに動きがある場合には、動き/エッジ検出補正信号作成手段6は、選択/合成手段7によって、フィールド間ノイズ低減データBを動画用ノイズ低減データとして選択させる(S107)。 On the other hand, the motion / edge detection correction signal creating means 6 determines the combination of the contents of the inter-field motion / edge detection signal A and the inter-field motion / edge detection signal B when there is a motion between frames. (S102 to S104). When both the inter-field motion / edge detection signal A and the inter-field motion / edge detection signal B indicate no motion, the motion / edge detection correction signal creating means 6 The inter-field noise reduction data obtained by averaging the inter-field noise reduction data A and the inter-field noise reduction data B is output as moving image noise reduction data (S104). When there is no motion in the inter-field motion / edge detection signal A and there is a motion in the inter-field motion / edge detection signal B, the motion / edge detection correction signal creation means 6 uses the selection / synthesis means 7 to The noise reduction data A is selected as moving image noise reduction data (S106). Further, when there is no motion in the inter-field motion / edge detection signal B and there is a motion in the inter-field motion / edge detection signal A, the motion / edge detection correction signal creating means 6 performs the inter-field motion by the selection / synthesis means 7. The noise reduction data B is selected as moving image noise reduction data (S107).
また、フィールド間動き/エッジ検出信号A及びフィールド間動き/エッジ検出信号Bの両方が、動き又はエッジが有るという内容の場合には、動き/エッジ検出補正信号作成手段6は、ライン間エッジ検出信号の内容を判別する(S108)。エッジでない場合には、動き/エッジ検出補正信号作成手段6は、選択/合成手段7によって、ライン間ノイズ低減データを動画用ノイズ低減データとして選択させる(S109)。エッジである場合には、動き/エッジ検出補正信号作成手段6は、動き又はエッジの差分量レベルが最も少ないノイズ低減データを、選択/合成手段7によって、動画用ノイズ低減データとして選択させる(S110)。 When both the inter-field motion / edge detection signal A and the inter-field motion / edge detection signal B have a motion or an edge, the motion / edge detection correction signal creating means 6 detects the inter-line edge detection. The content of the signal is determined (S108). If it is not an edge, the motion / edge detection correction signal creation means 6 causes the selection / synthesis means 7 to select the inter-line noise reduction data as the moving image noise reduction data (S109). If it is an edge, the motion / edge detection correction signal creation means 6 causes the selection / synthesis means 7 to select the noise reduction data with the smallest difference level of motion or edge as the moving image noise reduction data (S110). ).
なお、ライン間エッジ検出信号がエッジであることを表している場合には、動き/エッジ検出補正信号作成手段6は、選択/合成手段7によって、フレーム間ノイズ低減データを選択させるようにしても良く(S110−1)、また、4つの動き/エッジ判定信号から4つのノイズ低減データの重み付け方法を決定し、選択/合成手段7によって、4つのノイズ低減データを重み付け合成させて動画用ノイズ低減データを形成させるようにしても良い(S110−2)。後者の場合、差分量レベルが小さい判定信号に対応するノイズ低減データほど、その重みを大きくするようにする。 When the inter-line edge detection signal indicates an edge, the motion / edge detection correction signal creation means 6 may cause the selection / synthesis means 7 to select the inter-frame noise reduction data. Well (S110-1), the weighting method of the four noise reduction data is determined from the four motion / edge determination signals, and the noise reduction for moving image is performed by the selection / synthesis means 7 by weighting and synthesizing the four noise reduction data. Data may be formed (S110-2). In the latter case, the weight of the noise reduction data corresponding to the determination signal having a smaller difference level is increased.
動画/静止画判定手段8には、入力映像データとフレーム間第1ノイズ低減手段2から出力されたフレーム間ノイズ低減データAが入力され、動画/静止画判定手段8は、残像の存在有無を検出して、入力映像データに係る画面全体が、動画か静止画かを判定する。動画/静止画の判定方法は任意であり、既存の方法を適用しても良い。 The moving image / still image determination means 8 receives the input video data and the inter-frame noise reduction data A output from the first inter-frame noise reduction means 2, and the moving image / still image determination means 8 determines whether there is an afterimage. It is determined whether the entire screen related to the input video data is a moving image or a still image. The moving image / still image determination method is arbitrary, and an existing method may be applied.
例えば、入力映像データとフレーム間ノイズ低減データAの差分絶対値を求め(なお、フレーム間第1ノイズ低減手段2から、その内部で求めている差分データを取り込むようにしても良い)、この差分絶対値が所定の閾値を超えている1画面当たりの画素数をカウントし、そのカウント数が、カウント数に係る閾値(カウント数閾値)より多いときに動画と判定し、カウント数閾値以下のときに静止画と判定するようにしても良い。また、カウント結果を数フレーム保持し、数フレームのカウント結果を総合的に判断して動画/静止画を判定するようにしても良い。例えば、数フレームのカウント結果の分散(ばらつき)が所定値以下であることを条件として静止画と判定するようにしても良い。ノイズはランダムであるので閾値を超える画素数(カウント値)はフレーム毎に変動する。一方、移動体の速度が一定と見なせる数フレームの間は、残像の大きさ(言い換えると画素数)はどのフレームでも同じ程度であり、そのため、閾値を超える画素数(カウント値)の変動は小さい。従って、数フレームのカウント結果のばらつきに基づいて、残像が存在するか否か、言い換えると、動画か否かを判定することができる。 For example, the absolute value of the difference between the input video data and the interframe noise reduction data A is obtained (the difference data obtained internally from the interframe first noise reduction means 2 may be taken in), and this difference The number of pixels per screen whose absolute value exceeds a predetermined threshold is counted, and when the count is greater than the threshold related to the count (count threshold), the video is determined. When the count is less than the count threshold Alternatively, a still image may be determined. Further, the counting result may be held for several frames, and the moving image / still image may be determined by comprehensively determining the counting result of several frames. For example, a still image may be determined on condition that the variance (variation) of the count results of several frames is not more than a predetermined value. Since the noise is random, the number of pixels exceeding the threshold (count value) varies from frame to frame. On the other hand, the size of the afterimage (in other words, the number of pixels) is the same in every frame during several frames in which the speed of the moving body can be regarded as constant, and therefore the variation in the number of pixels (count value) exceeding the threshold is small. . Therefore, it is possible to determine whether there is an afterimage, in other words, whether it is a moving image, based on the variation in the count results of several frames.
選択/合成手段7から出力されたノイズ低減データは、動画用のノイズ低減データとして選択手段10に入力される。また、フレーム間第2ノイズ低減手段9から出力されたフレーム間ノイズ低減データBは、静止画用のノイズ低減データとして選択手段10に入力される。選択手段10は、動画/静止画判定手段8から出力された動画/静止画判定信号が動画を指示している場合には、動画用ノイズ低減データを選択してノイズ低減後の映像データとして次段及びフレームメモリ1に出力する。一方、選択手段10は、動画/静止画判定手段8から出力された動画/静止画判定信号が静止画を指示している場合には、フレーム間第2ノイズ低減手段9から出力された静止画用ノイズ低減データを選択してノイズ低減後の映像データとして次段及びフレームメモリ1に出力する。
The noise reduction data output from the selection /
ここで、動画/静止画判定手段8が、上述したように画面(フレーム)毎に動画、静止画を判定しているので、選択手段10による静止画用ノイズ低減データ又は動画用ノイズ低減データの選択は、フレーム毎に見直され、各フレームの期間では同一の選択状態となっている。
Here, since the moving image / still
従って、動き/エッジ検出補正信号作成手段6による信号の作成論理を示す図5のフローチャートに対し、仮に、選択手段10の選択も考慮したステップを追加すると、図6のフローチャートのようになる。
Therefore, if a step taking into account the selection of the
ステップS100の前に、動画/静止画判定信号が動画、静止画のいずれを指示しているかの判別ステップS150が設けられ、静止画の場合には静止画用ノイズ低減データを選択する新たなステップS151に移行し、動画の場合には、ステップS100に移行することになる。 Before step S100, a determination step S150 is provided for determining whether the moving image / still image determination signal indicates a moving image or a still image. In the case of a still image, a new step of selecting still image noise reduction data is provided. The process proceeds to S151, and in the case of a moving image, the process proceeds to Step S100.
(A−3)第1の実施形態の効果
以上のように、第1の実施形態によれば、静止画専用のフレーム間第2ノイズ低減手段を設け、動画/静止画判定手段が動画と判定した場合には、選択/合成手段から出力された動画用ノイズ低減データを選択し、動画/静止画判定手段が静止画と判定した場合には、フレーム間第2ノイズ低減手段から出力された静止画用ノイズ低減データを選択して出力するようにしたので、動画の場合には残像を抑制したノイズ低減データを出力することができ、静止画の場合にはノイズを適切に除去したノイズ低減データを出力することができる。
(A-3) Effects of the First Embodiment As described above, according to the first embodiment, the inter-frame second noise reduction unit dedicated to still images is provided, and the moving image / still image determination unit determines that the moving image is a moving image. In this case, when the moving image noise reduction data output from the selection / synthesis unit is selected and the moving image / still image determination unit determines that the image is a still image, the still image output from the inter-frame second noise reduction unit is selected. Since image noise reduction data is selected and output, noise reduction data with reduced afterimages can be output for moving images, and noise reduction data with noise removed appropriately for still images. Can be output.
例えば、監視カメラ等のシステムでは、データ圧縮技術を用いてノイズ低減後の映像データを記録しているが、監視カメラ等からの映像データは大半が静止画である。そのため、第1の実施形態のノイズ低減回路を適用すれば、記録に供するノイズ低減後の映像データは、ノイズが適切に除去されたものとなり、相関性などを利用したデータ圧縮技術での圧縮効率が高く、記録データ量を抑えることができる。 For example, in a system such as a surveillance camera, video data after noise reduction is recorded using a data compression technique, but most of the video data from the surveillance camera or the like is a still image. For this reason, if the noise reduction circuit of the first embodiment is applied, the noise-reduced video data used for recording is appropriately noise-removed, and the compression efficiency in the data compression technique using the correlation or the like. The amount of recorded data can be reduced.
(B)第2の実施形態
次に、本発明によるノイズ低減回路及び方法の第2の実施形態を、図面を参照しながら詳述する。
(B) Second Embodiment Next, a second embodiment of the noise reduction circuit and method according to the present invention will be described in detail with reference to the drawings.
図7は、第2の実施形態のノイズ低減回路の構成を示すブロック図であり、上述した第1の実施形態に係る図1との同一、対応部分には同一符号を付して示している。 FIG. 7 is a block diagram showing the configuration of the noise reduction circuit of the second embodiment, and the same reference numerals are given to the same and corresponding parts as in FIG. 1 according to the first embodiment described above. .
図7において、第2の実施形態のノイズ低減回路は、フレームメモリ1、フレーム間第1ノイズ低減手段2、フィールド間第1ノイズ低減手段3、フィールド間第2ノイズ低減手段4、ライン間ノイズ低減手段5、動き/エッジ検出補正信号作成手段6、選択/合成手段7及び動画/静止画判定手段8を有する。すなわち、第1の実施形態におけるフレーム間第2ノイズ低減手段9や選択手段10は設けられていない。
In FIG. 7, the noise reduction circuit of the second embodiment includes a
第2の実施形態におけるフレームメモリ1、フレーム間第1ノイズ低減手段2、フィールド間第1ノイズ低減手段3、フィールド間第2ノイズ低減手段4、ライン間ノイズ低減手段5、動き/エッジ検出補正信号作成手段6、選択/合成手段7及び動画/静止画判定手段8は、第1の実施形態のものと同様である。
但し、選択/合成手段7から出力されたノイズ低減データが、ノイズ低減後の映像データとして次段及びフレームメモリ1に出力されている点は、第1の実施形態と異なっている。また、動画/静止画判定手段8から出力された動画/静止画判定信号が選択/合成手段7に与えられている点は、第1の実施形態と異なっている。
However, it differs from the first embodiment in that the noise reduction data output from the selection /
第2の実施形態の選択/合成手段7は、動画/静止画判定手段8から出力された動画/静止画判定信号が静止画を指示している場合には(1フレーム期間継続して指示している)、動き/エッジ検出補正信号作成手段6からの動き/エッジ検出補正信号を無視し、フレーム間第1ノイズ低減手段2から出力されたフレーム間ノイズ低減データAを選択する。すなわち、静止画では、ノイズ低減に利用する2つの画素データが時間的に一番離れているフレーム間ノイズ低減データAを選択しても残像が発生しないため、全画素データでノイズ低減効果が一番高いフレーム間ノイズ低減データAのみを強制的に選択する。 The selection / combination means 7 of the second embodiment indicates that the moving picture / still picture determination signal output from the moving picture / still picture determination means 8 indicates a still picture (instructed continuously for one frame period). The motion / edge detection correction signal from the motion / edge detection correction signal creation means 6 is ignored, and the inter-frame noise reduction data A output from the first inter-frame noise reduction means 2 is selected. That is, in a still image, no residual image is generated even if the inter-frame noise reduction data A, in which the two pixel data used for noise reduction are farthest in time, does not generate a noise reduction effect for all pixel data. Only the highest inter-frame noise reduction data A is forcibly selected.
第2の実施形態の選択/合成手段7は、動画/静止画判定手段8から出力された動画/静止画判定信号が動画を指示している場合には(1フレーム期間継続して指示している)、動き/エッジ検出補正信号作成手段6からの動き/エッジ検出補正信号に従って、フレーム間ノイズ低減データA、フィールド間ノイズ低減データA、フィールド間ノイズ低減データB、ライン間ノイズ低減データの中からデータを選択し、又は、合成してノイズ低減後の映像データとする。 The selection / combination means 7 of the second embodiment, when the moving picture / still picture determination signal output from the moving picture / still picture determination means 8 indicates a moving picture (instructed continuously for one frame period). In accordance with the motion / edge detection correction signal from the motion / edge detection correction signal creating means 6, among the inter-frame noise reduction data A, the inter-field noise reduction data A, the inter-field noise reduction data B, and the inter-line noise reduction data. The data is selected from the above or synthesized to obtain video data after noise reduction.
動き/エッジ検出補正信号作成手段6による信号の作成論理を示す、上述した図5のフローチャートに対し、仮に、動画/静止画判定手段8による判定結果を考慮したステップを追加すると、図8のフローチャートのようになる。
If a step in consideration of the determination result by the moving image / still
ステップS100の前に、動画/静止画判定信号が動画、静止画のいずれを指示しているかの判別ステップS200が設けられ、静止画の場合にはフレーム間ノイズ低減データAを出力するステップS101に移行し、動画の場合には、ステップS100に移行することになる。 Before step S100, a determination step S200 for determining whether the moving image / still image determination signal indicates a moving image or a still image is provided, and in the case of a still image, the inter-frame noise reduction data A is output to step S101. In the case of a moving image, the process proceeds to step S100.
以上のように、第2の実施形態によれば、静止画の場合には、強制的にフレーム間ノイズ低減データを出力し、動画の場合には、動き/エッジ検出補正信号に応じ、フレーム間ノイズ低減データA、フィールド間ノイズ低減データA、フィールド間ノイズ低減データB、ライン間ノイズ低減データを選択/合成して出力するようにしたので、静止画では、フィールド間ノイズ低減データやライン間ノイズ低減データよりノイズ低減効果が高いフレーム間ノイズ低減データを常に出力でき、動画では、残像を抑制したノイズ低減データを出力することができる。 As described above, according to the second embodiment, in the case of a still image, the inter-frame noise reduction data is forcibly output, and in the case of a moving image, according to the motion / edge detection correction signal, the inter-frame noise reduction data is output. Since the noise reduction data A, the inter-field noise reduction data A, the inter-field noise reduction data B, and the inter-line noise reduction data are selected / synthesized and output, in the still image, the inter-field noise reduction data and the inter-line noise are output. Inter-frame noise reduction data, which has a higher noise reduction effect than reduced data, can always be output, and noise reduction data with reduced afterimages can be output for moving images.
例えば、監視カメラ等のシステムに適用した場合に、記録データの圧縮率をあげることができることは、第1の実施形態の場合と同様である。 For example, when applied to a system such as a surveillance camera, the recording data compression rate can be increased as in the case of the first embodiment.
(C)他の実施形態
上記各実施形態では、画面全体が動画であるか静止画であるかを判定するものを示したが、1画面をn分割した領域毎に動画であるか静止画であるかを判定し、領域毎に上述した各実施形態のような選択、若しくは、合成処理するようにしても良い。領域毎の判定方法としては、画面全体の判定方法と同様な方法を適用すれば良い。
(C) Other Embodiments In the above embodiments, the whole screen is determined to be a moving image or a still image. However, it is a moving image or a still image for each n-divided area of one screen. It may be determined whether or not there is a selection, or a combination process as in the above-described embodiments for each region. As a determination method for each region, a method similar to the determination method for the entire screen may be applied.
また、上記実施形態においては、動画/静止画判定手段8が、入力映像データと、フレーム間第1ノイズ低減手段2からのフレーム間ノイズ低減データAとから、動画であるか静止画であるかを判定するものを示したが、他の信号から、動画であるか静止画であるかを判定するようにしても良い。例えば、入力映像データと、フレームメモリ1からの1フレーム遅延データとから、動画であるか静止画であるかを判定するようにしても良い。この場合において、領域毎に判定する方法を適用するとしたら、いわゆる動きベクトルの検出方法を適用し、動きベクトルの大きさが閾値以下か否かにより、動画/静止画を判定するようにしても良い。
In the above embodiment, whether the moving image / still
第1の実施形態においては、選択手段10を、選択/合成手段7の他に設けたものを示したが、選択/合成手段7が選択手段10の機能を兼ねるようにしても良い。例えば、フレーム間第2ノイズ低減手段9からのフレーム間ノイズ低減データBを選択/合成手段7に入力させると共に、動画/静止画判定手段8から出力された動画/静止画判定信号も選択/合成手段7に入力させ、選択/合成手段7が、動画/静止画判定信号が静止画を指示しているときにはフレーム間ノイズ低減データBを選択するようにしても良い(第2の実施形態に係る図7参照)。
In the first embodiment, the
逆に、第2の実施形態に係る選択/合成手段7の後段に選択手段を設け、フレーム間第1ノイズ低減手段2からのフレーム間ノイズ低減データAと、選択/合成手段7からの出力データとを選択手段に入力し、この選択手段が、動画/静止画判定手段8から出力された動画/静止画判定信号に応じて選択動作するようにしても良い(第1の実施形態に係る図1参照)。 Conversely, selection means is provided at the subsequent stage of the selection / combination means 7 according to the second embodiment, and the interframe noise reduction data A from the interframe first noise reduction means 2 and the output data from the selection / synthesis means 7 are provided. May be input to the selection unit, and the selection unit may perform a selection operation according to the moving image / still image determination signal output from the moving image / still image determination unit 8 (a diagram according to the first embodiment). 1).
上記各実施形態においては、動画/静止画判定手段8から出力された動画/静止画判定信号を、選択手段10又は選択/合成手段7に入力して選択を切り替えるものを示したが、動画/静止画判定手段8から出力された動画/静止画判定信号を、動き/エッジ検出補正信号作成手段6に与えて、動き/エッジ検出補正信号作成手段6が、動画/静止画判定信号に応じた所望する選択動作を実行できるような動き/エッジ検出補正信号を作成するようにしても良い。
In each of the above embodiments, the video / still image determination signal output from the video / still
第1の実施形態においては5種類のノイズ低減手段を備え、第2の実施形態においては4種類のノイズ低減手段を備えたものを示したが、ノイズ低減手段の種類数はこれら実施形態に限定されない。 Although the first embodiment includes five types of noise reduction means and the second embodiment includes four types of noise reduction means, the number of types of noise reduction means is limited to these embodiments. Not.
例えば、ノイズ低減手段として、フレーム間及びフィールド間を有するものであっても良く、フレーム間及びライン間を有するものであっても良く、フィールド間及びライン間を有するものであっても良い。また、2フレーム以上離れたフレーム間の相関を利用したノイズ低減手段があっても良い。フィールド間ノイズ低減手段として、フィールド間第1ノイズ低減手段又はフィールド間第2ノイズ低減手段の一方だけを備えるものであっても良い。逆に、ライン間ノイズ低減手段として、ノイズ低減対象の画素より垂直方向に1ライン分だけ上の画素データを利用したライン間第1ノイズ低減手段及びノイズ低減対象の画素より垂直方向に1ライン分だけ下の画素データを利用したライン間第2ノイズ低減手段の双方を備えるものであっても良い。以上のような組み合わせに、さらに、ローパスフィルタノイズ低減手段を備えても良い。但し、相関を利用したノイズ低減手段を、相関の種類が異なる2種類以上備えていることが好ましい。 For example, the noise reducing means may be between frames and between fields, may be between frames and between lines, or may be between fields and between lines. There may also be noise reduction means using the correlation between frames that are two or more frames apart. As the inter-field noise reduction means, only one of the first inter-field noise reduction means or the second inter-field noise reduction means may be provided. On the other hand, as the interline noise reduction means, the first interline noise reduction means using pixel data that is one line in the vertical direction above the noise reduction target pixel and one line in the vertical direction from the noise reduction target pixel. It is also possible to provide both of the inter-line second noise reducing means using the lower pixel data. In addition to the above combinations, low-pass filter noise reduction means may be further provided. However, it is preferable to provide two or more types of noise reduction means using correlation that differ in the type of correlation.
なお、ローパスフィルタノイズ低減手段は、入力映像データから高域成分のノイズを除去するためローパスフィルタを通してノイズ低減を行なうものであり、その処理後のデータ(ローパスフィルタノイズ低減データ)を出力するものである。 The low-pass filter noise reduction means performs noise reduction through a low-pass filter to remove high-frequency component noise from the input video data, and outputs the processed data (low-pass filter noise reduction data). is there.
但し、静止画用のノイズ低減手段としては、フレーム間の相関を利用したもの、2フレーム以上離れたフレーム間の相関を利用したものが好ましい。 However, the noise reduction means for still images is preferably one that uses correlation between frames and one that uses correlation between two or more frames apart.
動画用のノイズ低減手段として、複数種類のノイズ低減手段を有する場合において、ディップスイッチなどで、利用するノイズ低減手段をユーザなどが設定し得るようにしても良い。 When there are a plurality of types of noise reduction means as the noise reduction means for moving images, the user or the like may be able to set the noise reduction means to be used with a dip switch or the like.
上記各実施形態では、映像信号がインターレース方式に従う場合を説明したが、映像信号がノンインターレース方式に従う場合にも本発明を適用することができる。例えば、インターレース方式の映像信号をノンインターレース化した映像信号が入力信号の場合には、フィールド概念が存在する。また、フレーム間及びライン間のノイズ低減手段を備えることでノンインターレース方式の映像信号に対応できる。 In each of the above embodiments, the case where the video signal conforms to the interlace system has been described. However, the present invention can also be applied to the case where the video signal conforms to the non-interlace system. For example, a field concept exists when a video signal obtained by non-interlacing an interlace video signal is an input signal. In addition, it is possible to deal with non-interlace video signals by providing noise reduction means between frames and between lines.
1…フレームメモリ、2…フレーム間第1ノイズ低減手段、3…フィールド間第1ノイズ低減手段、4…フィールド間第2ノイズ低減手段、5…ライン間ノイズ低減手段、6…動き/エッジ検出補正信号作成手段、7…選択/合成手段、8…動画/静止画判定手段、9…フレーム間第2ノイズ低減手段、10…選択手段。
DESCRIPTION OF
Claims (5)
ノイズ低減対象の画素に対し、時間方向及び又は空間方向に所定量ずれた画素の上記映像データ記憶手段から与えられたデータと、入力映像データにおける上記ノイズ低減対象の画素のデータとの差分から、2つのデータの相関を利用してノイズ低減データを形成して出力すると共に、上記差分がノイズのために生じたか画像の有効な変化のために生じたかを示す差分原因判定信号を上記差分の時間変化に基づいて形成して出力する、上記時間方向及び又は空間方向のずれ量の組み合わせが異なる、動画用の複数の相関利用ノイズ低減手段と、
ノイズ低減対象の画素に対し、時間方向及び又は空間方向に所定量ずれた画素の上記映像データ記憶手段から与えられたデータと、入力映像データにおける上記ノイズ低減対象の画素のデータとの差分から、2つのデータの相関を利用してノイズ低減データを形成して出力する、静止画用の相関利用ノイズ低減手段と、
入力映像データにおける画面全体、若しくは、画面を複数に分割した分割画面が、動画か静止画かを判定する動画/静止画判定手段と、
上記動画/静止画判定手段の判定結果が静止画である画面全体若しくは画面部分については、上記静止画用の相関利用ノイズ低減手段からのノイズ低減データを選択して出力し、上記動画/静止画判定手段の判定結果が動画である画面全体若しくは画面部分については、上記動画用の各相関利用ノイズ低減手段からの差分原因判定信号に基づき、動画用のノイズ低減データの決定方法を定め、上記動画用の各相関利用ノイズ低減手段からのノイズ低減データを選択、又は、合成して、出力するノイズ低減データを得る出力データ選択手段と
を有することを特徴とするノイズ低減回路。 Video data storage means for storing video data after noise reduction for a predetermined period immediately before;
From the difference between the data given from the video data storage means of the pixel shifted by a predetermined amount in the time direction and / or the spatial direction with respect to the noise reduction target pixel, and the data of the noise reduction target pixel in the input video data, The noise reduction data is formed and output using the correlation between the two data, and a difference cause determination signal indicating whether the difference is caused by noise or an effective change in the image is displayed as the difference time. A plurality of correlation use noise reduction means for moving images, which are formed and output based on changes, and have different combinations of shift amounts in the time direction and / or the spatial direction,
From the difference between the data given from the video data storage means of the pixel shifted by a predetermined amount in the time direction and / or the spatial direction with respect to the noise reduction target pixel, and the data of the noise reduction target pixel in the input video data, Correlation use noise reduction means for still images, which generates and outputs noise reduction data using the correlation of two data;
A moving image / still image determining means for determining whether the entire screen in the input video data or the divided screen obtained by dividing the screen into a moving image or a still image;
For the entire screen or screen portion in which the determination result of the moving image / still image determining means is a still image, the noise reduction data from the correlation use noise reducing means for the still image is selected and output, and the moving image / still image is output. For the entire screen or screen portion in which the determination result of the determination means is a moving image, the determination method of the noise reduction data for moving image is determined based on the difference cause determination signal from each correlation use noise reducing means for moving image, and the moving image A noise reduction circuit comprising: output data selection means for selecting or synthesizing noise reduction data from each correlation use noise reduction means for obtaining noise reduction data to be output.
映像データ記憶手段と、動画用の複数の相関利用ノイズ低減手段と、静止画用の相関利用ノイズ低減手段と、動画/静止画判定手段と、出力データ選択手段とを備え、
上記映像データ記憶手段は、直前所定期間のノイズ低減後の映像データを記憶しており、
上記時間方向及び又は空間方向のずれ量の組み合わせが異なる、上記動画用の複数の相関利用ノイズ低減手段はそれぞれ、ノイズ低減対象の画素に対し、時間方向及び又は空間方向に所定量ずれた画素の上記映像データ記憶手段から与えられたデータと、入力映像データにおける上記ノイズ低減対象の画素のデータとの差分から、2つのデータの相関を利用してノイズ低減データを形成して出力すると共に、上記差分がノイズのために生じたか画像の有効な変化のために生じたかを示す差分原因判定信号を上記差分の時間変化に基づいて形成して出力し、
上記静止画用の相関利用ノイズ低減手段は、ノイズ低減対象の画素に対し、時間方向及び又は空間方向に所定量ずれた画素の上記映像データ記憶手段から与えられたデータと、入力映像データにおける上記ノイズ低減対象の画素のデータとの差分から、2つのデータの相関を利用してノイズ低減データを形成して出力し、
上記動画/静止画判定手段は、入力映像データにおける画面全体、若しくは、画面を複数に分割した分割画面が、動画か静止画かを判定し、
上記出力データ選択手段は、上記動画/静止画判定手段の判定結果が静止画である画面全体若しくは画面部分については、上記静止画用の相関利用ノイズ低減手段からのノイズ低減データを選択して出力し、上記動画/静止画判定手段の判定結果が動画である画面全体若しくは画面部分については、上記動画用の各相関利用ノイズ低減手段からの差分原因判定信号に基づき、動画用のノイズ低減データの決定方法を定め、上記動画用の各相関利用ノイズ低減手段からのノイズ低減データを選択、又は、合成して、出力するノイズ低減データを得る
ことを特徴とするノイズ低減方法。 In the noise reduction method of obtaining and outputting noise reduction data that reduces the noise of the input video data,
Video data storage means, a plurality of correlation use noise reduction means for video, correlation use noise reduction means for still images, video / still image determination means, and output data selection means,
The video data storage means stores video data after noise reduction for a predetermined period immediately before,
The plurality of correlation-use noise reduction means for moving images having different combinations of shift amounts in the time direction and / or the spatial direction each of pixels that are shifted by a predetermined amount in the time direction and / or the spatial direction with respect to the noise reduction target pixels. From the difference between the data provided from the video data storage means and the pixel data of the noise reduction target in the input video data, noise reduction data is formed and output using the correlation of the two data, and A difference cause determination signal indicating whether the difference has occurred due to noise or due to an effective change in the image is formed and output based on the time change of the difference, and is output.
The still image correlation use noise reduction means includes the data given from the video data storage means of the pixel shifted by a predetermined amount in the time direction and / or the spatial direction with respect to the noise reduction target pixel, and the input video data From the difference from the pixel data of the noise reduction target, use the correlation between the two data to form and output noise reduction data,
The moving image / still image determining means determines whether the entire screen in the input video data or the divided screen obtained by dividing the screen into a moving image or a still image,
The output data selection means selects and outputs the noise reduction data from the correlation use noise reduction means for the still image for the entire screen or the screen portion in which the determination result of the moving image / still image determination means is a still image. For the entire screen or screen portion in which the determination result of the moving image / still image determination means is a moving image, the noise reduction data for the moving image is determined based on the difference cause determination signal from each correlation use noise reducing means for the moving image. A noise reduction method characterized by determining a determination method and selecting or synthesizing noise reduction data from each of the correlation use noise reduction means for moving images to obtain output noise reduction data.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008078370A JP2009232402A (en) | 2008-03-25 | 2008-03-25 | Noise reduction circuit and method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008078370A JP2009232402A (en) | 2008-03-25 | 2008-03-25 | Noise reduction circuit and method |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2009232402A true JP2009232402A (en) | 2009-10-08 |
Family
ID=41247239
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008078370A Pending JP2009232402A (en) | 2008-03-25 | 2008-03-25 | Noise reduction circuit and method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2009232402A (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8982198B2 (en) | 2011-10-21 | 2015-03-17 | Kabushiki Kaisha Toshiba | Image signal correction apparatus, imaging apparatus, endoscopic apparatus |
CN112313935A (en) * | 2018-06-29 | 2021-02-02 | 三菱电机株式会社 | Image pickup apparatus and line-variation noise reduction apparatus |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH01143583A (en) * | 1987-11-30 | 1989-06-06 | Nec Corp | Method for eliminating noise of picture signal |
JPH05236304A (en) * | 1991-10-31 | 1993-09-10 | Philips Gloeilampenfab:Nv | Artifact reduction device for video signal |
JPH0662283A (en) * | 1992-08-07 | 1994-03-04 | Sharp Corp | Noise reduction system for video signal |
JPH0818829A (en) * | 1994-06-27 | 1996-01-19 | Matsushita Electric Ind Co Ltd | Noise eliminating device |
JP2002051234A (en) * | 2000-08-01 | 2002-02-15 | Sony Corp | Apparatus and method for processing video signal and recording medium |
JP2005175671A (en) * | 2003-12-09 | 2005-06-30 | Oki Electric Ind Co Ltd | Noise reduction circuit and method |
JP2007060636A (en) * | 2005-07-29 | 2007-03-08 | Victor Co Of Japan Ltd | Noise detection apparatus and method, and noise reduction apparatus and method |
JP2007274067A (en) * | 2006-03-30 | 2007-10-18 | Mitsubishi Electric Corp | Noise eliminating apparatus, noise eliminating method, and video signal display |
-
2008
- 2008-03-25 JP JP2008078370A patent/JP2009232402A/en active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH01143583A (en) * | 1987-11-30 | 1989-06-06 | Nec Corp | Method for eliminating noise of picture signal |
JPH05236304A (en) * | 1991-10-31 | 1993-09-10 | Philips Gloeilampenfab:Nv | Artifact reduction device for video signal |
JPH0662283A (en) * | 1992-08-07 | 1994-03-04 | Sharp Corp | Noise reduction system for video signal |
JPH0818829A (en) * | 1994-06-27 | 1996-01-19 | Matsushita Electric Ind Co Ltd | Noise eliminating device |
JP2002051234A (en) * | 2000-08-01 | 2002-02-15 | Sony Corp | Apparatus and method for processing video signal and recording medium |
JP2005175671A (en) * | 2003-12-09 | 2005-06-30 | Oki Electric Ind Co Ltd | Noise reduction circuit and method |
JP2007060636A (en) * | 2005-07-29 | 2007-03-08 | Victor Co Of Japan Ltd | Noise detection apparatus and method, and noise reduction apparatus and method |
JP2007274067A (en) * | 2006-03-30 | 2007-10-18 | Mitsubishi Electric Corp | Noise eliminating apparatus, noise eliminating method, and video signal display |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8982198B2 (en) | 2011-10-21 | 2015-03-17 | Kabushiki Kaisha Toshiba | Image signal correction apparatus, imaging apparatus, endoscopic apparatus |
CN112313935A (en) * | 2018-06-29 | 2021-02-02 | 三菱电机株式会社 | Image pickup apparatus and line-variation noise reduction apparatus |
CN112313935B (en) * | 2018-06-29 | 2023-04-04 | 三菱电机株式会社 | Image pickup apparatus and line-variation noise reduction apparatus |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4280614B2 (en) | Noise reduction circuit and method | |
JP4253327B2 (en) | Subtitle detection apparatus, subtitle detection method, and pull-down signal detection apparatus | |
US8218083B2 (en) | Noise reducer, noise reducing method, and video signal display apparatus that distinguishes between motion and noise | |
US8503820B2 (en) | Method and apparatus for removing image noise | |
KR20060047556A (en) | Film-mode detection in video sequences | |
US10440318B2 (en) | Motion adaptive de-interlacing and advanced film mode detection | |
US8503814B2 (en) | Method and apparatus for spectrum estimation | |
US8305489B2 (en) | Video conversion apparatus and method, and program | |
KR100722773B1 (en) | Method and apparatus for detecting graphic region in moving picture | |
JP2005527050A (en) | Unit and method for sharpness enhancement | |
JP4861636B2 (en) | Image processing apparatus and image processing program | |
JP2009212609A (en) | Video image signal processor and processing method | |
US7443448B2 (en) | Apparatus to suppress artifacts of an image signal and method thereof | |
US7868948B2 (en) | Mage signal processing apparatus, image signal processing method and program for converting an interlaced signal into a progressive signal | |
JP2009260930A (en) | Method of determining field dominance in video frame sequence | |
US8391372B2 (en) | Method of doubling frame rate of video signals | |
US20080100745A1 (en) | Pull-down signal detecting apparatus, pull-down signal detecting method, and video-signal converting apparatus | |
JP2009232402A (en) | Noise reduction circuit and method | |
JP2003153077A (en) | Video signal processor | |
JP4679501B2 (en) | Noise removing device, noise removing method, and video signal display device | |
JP2008252561A (en) | Caption area detector, its detecting method and image processor | |
Lee et al. | A motion-adaptive deinterlacer via hybrid motion detection and edge-pattern recognition | |
JP2004320279A (en) | Dynamic image time axis interpolation method and dynamic image time axis interpolation apparatus | |
KR20060047491A (en) | Processing auxiliary data of video sequences | |
KR101513395B1 (en) | A motion adaptive deinterlacing system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110221 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120615 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120717 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20121113 |