JP2009232402A - Noise reduction circuit and method - Google Patents

Noise reduction circuit and method Download PDF

Info

Publication number
JP2009232402A
JP2009232402A JP2008078370A JP2008078370A JP2009232402A JP 2009232402 A JP2009232402 A JP 2009232402A JP 2008078370 A JP2008078370 A JP 2008078370A JP 2008078370 A JP2008078370 A JP 2008078370A JP 2009232402 A JP2009232402 A JP 2009232402A
Authority
JP
Japan
Prior art keywords
noise reduction
data
difference
moving image
output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2008078370A
Other languages
Japanese (ja)
Inventor
Takayuki Sato
貴之 佐藤
秀次 ▲高▼橋
Hideji Takahashi
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lapis Semiconductor Co Ltd
Original Assignee
Oki Semiconductor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Oki Semiconductor Co Ltd filed Critical Oki Semiconductor Co Ltd
Priority to JP2008078370A priority Critical patent/JP2009232402A/en
Publication of JP2009232402A publication Critical patent/JP2009232402A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Picture Signal Circuits (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a noise reduction circuit which suitably reduces noise while eliminating an afterimage regardless movement of afterimage data. <P>SOLUTION: The noise reduction circuit forms a plurality of noise reduction data for video data from a data difference between two pixels deviated by a predetermined amount in a time direction or in a space direction using a correlation, forms a difference cause determination signal which shows whether the difference is caused by the noise, and forms the noise reduction data for a static image from the data difference between the two pixels displaced by a predetermined amount in a time direction or in a space direction. Then, the input image data are determined whether they are a moving picture or static picture. When it is a static picture, the noise reduction data for the static picture are selected to be output. When it is the moving picture, a decision method of the noise reduction data for the moving picture is determined based on the plurality of difference cause determination signals, and noise reduction data to be output is selected or combined among the noise reduction data for moving picture. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、ノイズ低減回路及び方法に関し、例えば、映像表示装置や映像記録再生装置などにおける映像データのノイズ低減に適用し得るものである。   The present invention relates to a noise reduction circuit and method, and can be applied, for example, to noise reduction of video data in a video display device, a video recording / playback device, and the like.

従来、映像データのノイズ低減回路として、特許文献1に開示されるものがある。特許文献1における図1の符号を適用して、この従来のノイズ低減回路の構成を簡単に説明すると、以下の通りである。   Conventionally, there is a circuit disclosed in Patent Document 1 as a noise reduction circuit for video data. The configuration of the conventional noise reduction circuit will be briefly described as follows by applying the reference numeral of FIG. 1 in Patent Document 1.

この従来のノイズ低減回路は、直前所定期間(例えば1フレーム)のノイズ低減後の映像データを記憶している映像データ記憶手段1と、ノイズ低減対象の画素に対し、時間方向又は空間方向に所定量ずれた画素の映像データ記憶手段1から与えられたデータと、入力映像データにおけるノイズ低減対象の画素のデータとの差分から、2つのデータの相関を利用してノイズ低減データを形成して出力すると共に、差分がノイズのために生じたか画像の有効な変化のために生じたかを示す差分原因判定信号を差分の時間変化に基づいて形成して出力する、時間方向及び空間方向のずれ量(例えば、1フレーム、1フィールド弱、1フィールド強、若しくは、1ライン)の組み合わせが異なる複数の相関利用ノイズ低減手段2〜5と、各相関利用ノイズ低減手段2〜5からの差分原因判定信号に基づき、最終的なノイズ低減後の映像データの決定方法を表す選択/合成制御信号を出力する選択/合成制御信号作成手段6と、選択/合成制御信号に基づき、各相関利用ノイズ低減手段2〜5からのノイズ低減データを選択、又は、合成して最終的なノイズ低減後の映像データを得る選択/合成手段7とを有する。
特開2005−175671号公報
This conventional noise reduction circuit includes a video data storage unit 1 storing video data after noise reduction for a predetermined period (for example, one frame) immediately before and a pixel to be reduced in time or space. Based on the difference between the data given from the video data storage means 1 of the pixel with the fixed deviation and the data of the pixel for noise reduction in the input video data, noise reduction data is formed and output using the correlation of the two data In addition, a difference cause determination signal indicating whether the difference is generated due to noise or due to an effective change in the image is formed and output based on the temporal change of the difference, and the amount of deviation in the time direction and the spatial direction ( For example, a plurality of correlation use noise reduction means 2 to 5 having different combinations of one frame, less than one field, more than one field, or one line, and use of each correlation A selection / synthesis control signal creating means 6 for outputting a selection / synthesis control signal representing a method of determining the final video data after noise reduction based on the difference cause determination signals from the noise reduction means 2 to 5, and a selection / synthesis A selection / combination unit 7 that selects or synthesizes noise reduction data from each of the correlation-use noise reduction units 2 to 5 based on the control signal to obtain final video data after noise reduction.
JP 2005-175671 A

従来のノイズ低減回路は、テレビジョン放送による映像データのような常時動きが発生している映像データを対象としている。ノイズ低減回路は、空間的及び又は時間的に異なる、相関が高いと思われる2つのデータの差分をとって、それをノイズ成分として除去するものであるが、2つのデータが移動体の移動によっても異なること(残像)もある。すなわち、2つのデータの差分がノイズのためではなく、移動によるため(残像)のこともある。一般には、ノイズの場合の方が、移動による場合より差分は小さく、そのため、閾値との比較により、ノイズか移動によるためかを切り分けて異なる対応をとるようにしている。移動による場合をノイズと判断した方が悪影響が大きく、そのため、閾値を小さく設定し、ノイズが大きい場合でも、移動による場合と判断し易くしている。そのため、監視カメラが撮影したような動きがほとんどない映像データに対しても、残像を抑制する動作を行ってしまい、ノイズを効果的に低減することができない。   The conventional noise reduction circuit is intended for video data that is constantly moving, such as video data by television broadcasting. The noise reduction circuit takes a difference between two data which are spatially and / or temporally different and seem to have a high correlation and removes the difference as a noise component. There are also differences (afterimages). That is, the difference between the two data may be due to movement (afterimage) instead of noise. In general, the difference in the case of noise is smaller than that in the case of movement. Therefore, by comparing with the threshold value, whether the noise is due to movement or not is separated. If the movement is judged as noise, the adverse effect is larger. Therefore, the threshold value is set to be small so that even if the noise is large, it is easy to judge that the movement is caused. For this reason, an operation for suppressing afterimages is performed even on video data with little movement as taken by the surveillance camera, and noise cannot be effectively reduced.

また、動きがない映像データの場合、ノイズ相殺に供する2つのデータの位置が空間的に一致しているフレーム間差分データが、一番ノイズ低減効果が高いと推測できる。そのため、動きがない映像データを取り扱う際において、フレーム間差分データが選択されやすいようにパラメータ(フレーム間差分絶対値用の閾値等)を設定した場合、動きがある映像データに対して、フレーム間で移動体の位置が異なり、空間的に同じ位置に移動体が存在しないため、残像が大きく発生してしまうこともあり得る。   In addition, in the case of video data that does not move, it can be estimated that the inter-frame difference data in which the positions of the two data for noise cancellation are spatially coincident has the highest noise reduction effect. For this reason, when handling video data that does not move, if parameters (such as a threshold for absolute difference between frames) are set so that difference data between frames can be easily selected, Since the position of the moving body is different and the moving body does not exist at the same spatial position, a large afterimage may occur.

さらに、監視カメラ等のシステムでは、データ圧縮技術を用いてノイズ低減後の映像データを記録しているが、動きがない映像データでノイズを効果的に低減できないままであると、相関性などを利用したデータ圧縮技術では、低減できていないノイズ部分で相関性が低くなり圧縮効率が下がるため、記録データ量が大きくなってしまうという問題も有する。   Furthermore, in surveillance cameras and other systems, video data after noise reduction is recorded using data compression technology, but if the noise cannot be effectively reduced with motionless video data, correlation and the like The data compression technique used also has a problem that the amount of recorded data increases because the correlation is lowered in the noise portion that cannot be reduced and the compression efficiency is lowered.

そのため、映像データの動きの有り/無しに関わらず、残像を抑制しつつノイズを適切に低減することができるノイズ低減回路及び方法が望まれている。   Therefore, there is a demand for a noise reduction circuit and method that can appropriately reduce noise while suppressing afterimages regardless of presence / absence of motion of video data.

第1の本発明のノイズ低減回路は、(1)直前所定期間のノイズ低減後の映像データを記憶している映像データ記憶手段と、(2)ノイズ低減対象の画素に対し、時間方向及び又は空間方向に所定量ずれた画素の上記映像データ記憶手段から与えられたデータと、入力映像データにおける上記ノイズ低減対象の画素のデータとの差分から、2つのデータの相関を利用してノイズ低減データを形成して出力すると共に、上記差分がノイズのために生じたか画像の有効な変化のために生じたかを示す差分原因判定信号を上記差分の時間変化に基づいて形成して出力する、上記時間方向及び又は空間方向のずれ量の組み合わせが異なる、動画用の複数の相関利用ノイズ低減手段と、(3)ノイズ低減対象の画素に対し、時間方向及び又は空間方向に所定量ずれた画素の上記映像データ記憶手段から与えられたデータと、入力映像データにおける上記ノイズ低減対象の画素のデータとの差分から、2つのデータの相関を利用してノイズ低減データを形成して出力する、静止画用の相関利用ノイズ低減手段と、(4)入力映像データにおける画面全体、若しくは、画面を複数に分割した分割画面が、動画か静止画かを判定する動画/静止画判定手段と、(5)上記動画/静止画判定手段の判定結果が静止画である画面全体若しくは画面部分については、上記静止画用の相関利用ノイズ低減手段からのノイズ低減データを選択して出力し、上記動画/静止画判定手段の判定結果が動画である画面全体若しくは画面部分については、上記動画用の各相関利用ノイズ低減手段からの差分原因判定信号に基づき、動画用のノイズ低減データの決定方法を定め、上記動画用の各相関利用ノイズ低減手段からのノイズ低減データを選択、又は、合成して、出力するノイズ低減データを得る出力データ選択手段とを有することを特徴とする。   The noise reduction circuit according to the first aspect of the present invention includes: (1) video data storage means storing video data after noise reduction for a predetermined period immediately before; and (2) a time direction and / or a noise reduction target pixel. Based on the difference between the data given from the video data storage means of the pixel shifted by a predetermined amount in the spatial direction and the data of the pixel targeted for noise reduction in the input video data, the noise reduction data using the correlation of the two data The time for forming and outputting a difference cause determination signal indicating whether the difference has occurred due to noise or due to an effective change in the image is formed and output based on the time change of the difference. A plurality of correlation use noise reduction means for moving images having different combinations of shift amounts in the direction and / or the spatial direction, and (3) the temporal and / or spatial direction with respect to the noise reduction target pixel Based on the difference between the data given from the video data storage means of the pixel with a fixed deviation and the data of the pixel targeted for noise reduction in the input video data, noise reduction data is formed using the correlation of the two data. Correlated use noise reduction means for output, and (4) moving image / still image determination means for determining whether the entire screen in the input video data or the divided screen obtained by dividing the screen into a plurality of moving images or still images. And (5) for the entire screen or screen portion where the determination result of the moving image / still image determination means is a still image, select and output the noise reduction data from the correlation use noise reduction means for the still image, For the entire screen or screen portion in which the determination result of the moving image / still image determination means is a moving image, a difference cause determination signal from each correlation use noise reduction means for the moving image An output data selection means for determining noise reduction data for moving images and selecting or synthesizing noise reduction data from each correlation use noise reduction means for moving images to obtain noise reduction data to be output; It is characterized by having.

第2の本発明は、入力映像データのノイズを低減したノイズ低減データを得て出力するノイズ低減方法において、映像データ記憶手段と、動画用の複数の相関利用ノイズ低減手段と、静止画用の相関利用ノイズ低減手段と、動画/静止画判定手段と、出力データ選択手段とを備え、(1)上記映像データ記憶手段は、直前所定期間のノイズ低減後の映像データを記憶しており、(2)上記時間方向及び又は空間方向のずれ量の組み合わせが異なる、上記動画用の複数の相関利用ノイズ低減手段はそれぞれ、ノイズ低減対象の画素に対し、時間方向及び又は空間方向に所定量ずれた画素の上記映像データ記憶手段から与えられたデータと、入力映像データにおける上記ノイズ低減対象の画素のデータとの差分から、2つのデータの相関を利用してノイズ低減データを形成して出力すると共に、上記差分がノイズのために生じたか画像の有効な変化のために生じたかを示す差分原因判定信号を上記差分の時間変化に基づいて形成して出力し、(3)上記静止画用の相関利用ノイズ低減手段は、ノイズ低減対象の画素に対し、時間方向及び又は空間方向に所定量ずれた画素の上記映像データ記憶手段から与えられたデータと、入力映像データにおける上記ノイズ低減対象の画素のデータとの差分から、2つのデータの相関を利用してノイズ低減データを形成して出力し、(4)上記動画/静止画判定手段は、入力映像データにおける画面全体、若しくは、画面を複数に分割した分割画面が、動画か静止画かを判定し、(5)上記出力データ選択手段は、上記動画/静止画判定手段の判定結果が静止画である画面全体若しくは画面部分については、上記静止画用の相関利用ノイズ低減手段からのノイズ低減データを選択して出力し、上記動画/静止画判定手段の判定結果が動画である画面全体若しくは画面部分については、上記動画用の各相関利用ノイズ低減手段からの差分原因判定信号に基づき、動画用のノイズ低減データの決定方法を定め、上記動画用の各相関利用ノイズ低減手段からのノイズ低減データを選択、又は、合成して、出力するノイズ低減データを得ることを特徴とする。   According to a second aspect of the present invention, there is provided a noise reduction method for obtaining and outputting noise reduction data obtained by reducing noise of input video data, video data storage means, a plurality of correlation use noise reduction means for moving pictures, A correlation use noise reduction unit, a moving image / still image determination unit, and an output data selection unit. (1) The video data storage unit stores video data after noise reduction for a predetermined period immediately before, ( 2) The plurality of correlation use noise reduction means for moving images having different combinations of shift amounts in the time direction and / or the spatial direction are each shifted by a predetermined amount in the time direction and / or the spatial direction with respect to the noise reduction target pixels. Based on the difference between the data given from the video data storage means of the pixel and the data of the pixel targeted for noise reduction in the input video data, the correlation between the two data is used. Form and output noise reduction data, and form and output a difference cause determination signal indicating whether the difference is caused by noise or an effective change in the image based on the temporal change of the difference. (3) The correlation-use noise reduction means for the still image is supplied with data provided from the video data storage means for pixels that are shifted by a predetermined amount in the time direction and / or the spatial direction with respect to the noise reduction target pixel. Based on the difference between the pixel data of the noise reduction target in the video data and using the correlation between the two data, noise reduction data is formed and output. (4) The moving image / still image determination means is configured to input video data. (5) The output data selection means determines whether the moving picture / still picture determination means determines whether the entire screen in FIG. For the entire screen or screen portion in which is a still image, the noise reduction data from the correlation use noise reduction means for the still image is selected and output, and the determination result of the moving image / still image determination means is a moving image. For the whole or the screen portion, based on the difference cause determination signal from each correlation use noise reduction means for the moving picture, a method for determining the noise reduction data for the moving picture is determined, and from each correlation use noise reduction means for the moving picture, Noise reduction data to be output is obtained by selecting or synthesizing noise reduction data.

本発明によれば、映像データの動きの有り/無しに関わらず、残像を抑制しつつノイズを適切に低減することができるノイズ低減回路及び方法を提供できる。   According to the present invention, it is possible to provide a noise reduction circuit and method capable of appropriately reducing noise while suppressing afterimages regardless of presence / absence of motion of video data.

(A)第1の実施形態
以下、本発明によるノイズ低減回路及び方法の第1の実施形態を、図面を参照しながら詳述する。
(A) First Embodiment A noise reduction circuit and method according to a first embodiment of the present invention will be described in detail below with reference to the drawings.

第1の実施形態のノイズ低減回路が扱う映像信号(映像データ)は、コンポジットビデオ信号であっても良く、輝度信号や色信号や色差信号などのコンポーネント信号であっても良い。但し、インターレース信号になっていることを要するが、1フレーム当たりのライン数は問われない。また、第1の実施形態のノイズ低減回路へは、デジタル信号(映像データ)として入力され、その画素データのビット数は問われない。また、デジタル信号のサンプリング周波数も問われない。さらに、第1の実施形態のノイズ低減回路は、記録媒体から再生された映像信号(映像データ)を処理する装置に設けられていても良く、ネットワーク側から受信した映像信号(映像データ)を処理する装置に設けられていても良く、放送映像信号(映像データ)を処理する装置に設けられていても良く、撮影による映像信号(映像データ)を処理する装置に設けられていても良い。   The video signal (video data) handled by the noise reduction circuit of the first embodiment may be a composite video signal or a component signal such as a luminance signal, a color signal, or a color difference signal. However, although it is necessary to be an interlace signal, the number of lines per frame is not limited. Further, the noise reduction circuit of the first embodiment is inputted as a digital signal (video data), and the number of bits of the pixel data is not limited. Also, the sampling frequency of the digital signal is not questioned. Furthermore, the noise reduction circuit of the first embodiment may be provided in a device that processes a video signal (video data) reproduced from a recording medium, and processes a video signal (video data) received from the network side. May be provided in a device that processes a broadcast video signal (video data), or may be provided in a device that processes a video signal (video data) obtained by shooting.

(A−1)第1の実施形態の構成
図1は、第1の実施形態のノイズ低減回路の構成を示すブロック図である。
(A-1) Configuration of the First Embodiment FIG. 1 is a block diagram showing the configuration of the noise reduction circuit of the first embodiment.

第1の実施形態のノイズ低減回路は、フレームメモリ1と、2個のフレーム間ノイズ低減手段2及び9と、2個のフィールド間ノイズ低減手段3及び4と、ライン間ノイズ低減手段5と、動き/エッジ検出補正信号作成手段6と、選択/合成手段7と、動画/静止画判定手段8と、選択手段10とを有する。   The noise reduction circuit of the first embodiment includes a frame memory 1, two interframe noise reduction means 2 and 9, two interfield noise reduction means 3 and 4, an interline noise reduction means 5, It has a motion / edge detection correction signal creation means 6, a selection / synthesis means 7, a moving image / still image determination means 8, and a selection means 10.

なお、以下では、フレーム間ノイズ低減手段2をフレーム間第1ノイズ低減手段と呼び、フレーム間ノイズ低減手段9をフレーム間第2ノイズ低減手段と呼び、フィールド間ノイズ低減手段3をフィールド間第1ノイズ低減手段と呼び、フィールド間ノイズ低減手段4をフィールド間第2ノイズ低減手段と呼ぶ。   In the following, the inter-frame noise reduction means 2 is referred to as an inter-frame first noise reduction means, the inter-frame noise reduction means 9 is referred to as an inter-frame second noise reduction means, and the inter-field noise reduction means 3 is referred to as an inter-field first noise reduction means. This is called noise reduction means, and the inter-field noise reduction means 4 is called inter-field second noise reduction means.

フレームメモリ1は、選択手段10から出力されたノイズ低減後の映像データを少なくとも1フレーム分だけ記憶するものである。フレームメモリ1は、現時点でのノイズ低減対象の画素データ(入力映像データ)に対し、1フレーム前の画素データをフレーム間第1ノイズ低減手段2、フレーム間第2ノイズ低減手段9に出力し、1フィールド前の2つの画素データをそれぞれフィールド間第1ノイズ低減手段3、フィールド間第2ノイズ低減手段4に出力し、1ライン(1水平走査ライン)前の画素データをライン間ノイズ低減手段5に出力するものである。   The frame memory 1 stores at least one frame of the video data after noise reduction output from the selection means 10. The frame memory 1 outputs pixel data of the previous frame to the first noise reduction means 2 between frames and the second noise reduction means 9 between frames with respect to the current pixel data (input video data) for noise reduction. Two pixel data before one field are output to the first inter-field noise reduction means 3 and the second inter-field noise reduction means 4, respectively, and the pixel data one line (one horizontal scanning line) are converted into the inter-line noise reduction means 5 respectively. Is output.

図2は、ノイズ低減対象の画素データとノイズ低減に利用する過去の画素データとの、時間軸方向及び垂直方向(V方向)の関係を示した説明図である。画素データP1は、ノイズ低減対象の画素データP0に対し、1フレーム(期間)前(すなわち2フィールド(期間)前;2V前)の画素データであり、フレーム間第1ノイズ低減手段2及びフレーム間第2ノイズ低減手段9に出力される。1フレーム前の画素データP1は、垂直方向及び水平方向には、ノイズ低減対象の画素データP0と同一位置である。画素データP2、P3はそれぞれ、ノイズ低減対象の画素データP0に対し、1フィールド(期間)(1V)前の画素データであり、フィールド間第1ノイズ低減手段3、フィールド間第2ノイズ低減手段4に出力される。フィールド間第1ノイズ低減手段3に出力される画素データP2は、水平方向には、ノイズ低減対象の画素データP0と同一位置(1/2画素ピッチだけずれていても良い)であるが、垂直方向には、1/2ライン分だけ上に位置している。フィールド間第2ノイズ低減手段4に出力される画素データP3は、水平方向には、ノイズ低減対象の画素データP0と同一位置(1/2画素ピッチだけずれていても良い)であるが、垂直方向には、1/2ライン分だけ下に位置している。画素データP4は、ノイズ低減対象の画素データP0に対し、1ライン(1水平走査期間;1H)前の画素データであり、ライン間ノイズ低減手段5に出力される。画素データP4は、水平方向には、ノイズ低減対象の画素データP0と同一位置であるが、垂直方向には、1ライン分だけ上に位置している。   FIG. 2 is an explanatory diagram showing the relationship between the time axis direction and the vertical direction (V direction) between pixel data targeted for noise reduction and past pixel data used for noise reduction. The pixel data P1 is pixel data one frame (period) before (that is, two fields (period) before; 2V before) with respect to the pixel data P0 targeted for noise reduction. The inter-frame first noise reduction means 2 and the inter-frame It is output to the second noise reduction means 9. The pixel data P1 one frame before is in the same position as the pixel data P0 to be reduced in the vertical and horizontal directions. The pixel data P2 and P3 are pixel data one field (period) (1V) before the noise reduction target pixel data P0. The inter-field first noise reduction means 3 and the inter-field second noise reduction means 4 respectively. Is output. The pixel data P2 output to the first inter-field noise reduction means 3 is at the same position as the pixel data P0 subject to noise reduction (may be shifted by 1/2 pixel pitch) in the horizontal direction, but is vertical. In the direction, it is located above the half line. The pixel data P3 output to the inter-field second noise reduction unit 4 is at the same position as the noise reduction target pixel data P0 in the horizontal direction (may be shifted by 1/2 pixel pitch), but is vertical. In the direction, it is positioned lower by 1/2 line. The pixel data P4 is pixel data one line (one horizontal scanning period; 1H) before the pixel data P0 targeted for noise reduction, and is output to the interline noise reduction means 5. The pixel data P4 is in the same position as the pixel data P0 to be noise-reduced in the horizontal direction, but is positioned one line up in the vertical direction.

フレーム間第1ノイズ低減手段2は、入力映像データとフレームメモリ1からの1フレーム遅延データとから、フレーム間ノイズ低減データA及びフレーム間動き検出信号を形成し(形成方法は動作の項で明らかにする)、フレーム間ノイズ低減データAを選択/合成手段7及び動画/静止画判定手段8に出力し、フレーム間動き検出信号を動き/エッジ検出補正信号作成手段6に出力するものである。   The first inter-frame noise reduction means 2 forms the inter-frame noise reduction data A and the inter-frame motion detection signal from the input video data and the one-frame delay data from the frame memory 1 (the forming method is apparent in the operation section). The inter-frame noise reduction data A is output to the selection / combination means 7 and the moving image / still image determination means 8, and the inter-frame motion detection signal is output to the motion / edge detection correction signal creation means 6.

フィールド間第1ノイズ低減手段3は、入力映像データとフレームメモリ1からの1フィールド遅延データA(図2の画素データP2参照)とから、フィールド間ノイズ低減データA及びフィールド間動き/エッジ検出信号Aを形成し(形成方法は動作の項で明らかにする)、フィールド間ノイズ低減データAを選択/合成手段7に出力し、フィールド間動き/エッジ検出信号Aを動き/エッジ検出補正信号作成手段6に出力するものである。   The first inter-field noise reduction means 3 uses the inter-field noise reduction data A and the inter-field motion / edge detection signal from the input video data and the one-field delay data A (see pixel data P2 in FIG. 2) from the frame memory 1. A is formed (the forming method is clarified in the operation section), the inter-field noise reduction data A is output to the selection / combination means 7, and the inter-field motion / edge detection signal A is generated as the motion / edge detection correction signal creation means. 6 is output.

フィールド間第2ノイズ低減手段4は、入力映像データとフレームメモリ1からの1フィールド遅延データB(図2の画素データP3参照)とから、フィールド間ノイズ低減データB及びフィールド間動き/エッジ検出信号Bを形成し(形成方法は動作の項で明らかにする)、フィールド間ノイズ低減データBを選択/合成手段7に出力し、フィールド間動き/エッジ検出信号Bを動き/エッジ検出補正信号作成手段6に出力するものである。   The inter-field second noise reduction means 4 uses the inter-field noise reduction data B and the inter-field motion / edge detection signal from the input video data and the one-field delay data B from the frame memory 1 (see pixel data P3 in FIG. 2). B is formed (the forming method is clarified in the operation section), the inter-field noise reduction data B is output to the selection / combination means 7, and the inter-field motion / edge detection signal B is generated as the motion / edge detection correction signal creation means. 6 is output.

ライン間ノイズ低減手段5は、入力映像データとフレームメモリ1からの1ライン遅延データとから、ライン間ノイズ低減データ及びライン間エッジ検出信号を形成し(形成方法は動作の項で明らかにする)、ライン間ノイズ低減データを選択/合成手段7に出力し、ライン間エッジ検出信号を動き/エッジ検出補正信号作成手段に出力するものである。   The inter-line noise reduction means 5 forms inter-line noise reduction data and inter-line edge detection signals from the input video data and the one-line delay data from the frame memory 1 (the forming method will be clarified in the operation section). The inter-line noise reduction data is output to the selection / combination means 7, and the inter-line edge detection signal is output to the motion / edge detection correction signal creation means.

動き/エッジ検出補正信号作成手段6は、フレーム間動き検出信号、フィールド間動き/エッジ検出信号A、フィールド間動き/エッジ検出信号B及びライン間エッジ検出信号から、動き/エッジ検出補正信号を形成して選択/合成手段7に制御信号として出力するものである。   The motion / edge detection correction signal generating means 6 forms a motion / edge detection correction signal from the inter-frame motion detection signal, the inter-field motion / edge detection signal A, the inter-field motion / edge detection signal B, and the inter-line edge detection signal. Then, it is output as a control signal to the selection / synthesis means 7.

選択/合成手段7は、4種類のノイズ低減手段2、3、4、5からのフレーム間ノイズ低減データA、フィールド間ノイズ低減データA、フィールド間ノイズ低減データB、ライン間ノイズ低減データを、動き/エッジ検出補正信号作成手段6からの動き/エッジ検出補正信号に応じて、選択及び又は合成し、ノイズが低減された動画用の映像データ(動画用ノイズ低減データ)として選択手段10に出力するものである。   The selecting / synthesizing unit 7 receives the inter-frame noise reduction data A, the inter-field noise reduction data A, the inter-field noise reduction data B, and the inter-line noise reduction data from the four types of noise reduction units 2, 3, 4, and 5. According to the motion / edge detection correction signal from the motion / edge detection correction signal creation means 6, selection and / or synthesis are performed, and output to the selection means 10 as video data (moving noise reduction data) with reduced noise. To do.

動画/静止画判定手段8は、入力映像データと、フレーム間ノイズ低減手段2から出力されたフレーム間ノイズ低減データAとから、対象となっている入力映像データの画面全体が、動きがある映像(動画)であるか動きがない映像(静止画)であるかを判定し(判定方法は動作の項で明らかにする)、動画/静止画判定信号を作成して選択手段10に出力するものである。   The moving image / still image determination means 8 is an image in which the entire screen of the target input video data is moving from the input video data and the interframe noise reduction data A output from the interframe noise reduction means 2. (Moving image) or moving image (still image) is determined (the determination method will be clarified in the operation section), and a moving image / still image determination signal is generated and output to the selection means 10 It is.

フレーム間第2ノイズ低減手段9は、入力映像データとフレームメモリ1からの1フレーム遅延データとから、フレーム間ノイズ低減データB(静止画用ノイズ低減データ)を形成して(形成方法は動作の項で明らかにする)選択手段10に出力するものである。   The inter-frame second noise reduction means 9 forms inter-frame noise reduction data B (still image noise reduction data) from the input video data and the 1-frame delay data from the frame memory 1 (the forming method is an operation method). Output to the selection means 10.

ここで、上述したフレーム間第1ノイズ低減手段2が動画を考慮した所定パラメータの値(後述するノイズ/動き判定用閾値)を適用しているのに対して、フレーム間第2ノイズ低減手段9が静止画を考慮した所定パラメータの値を適用している点が異なっている。   Here, the interframe first noise reduction means 2 applies a value of a predetermined parameter (noise / motion determination threshold described later) in consideration of a moving image, whereas the interframe second noise reduction means 9. Is different in that a predetermined parameter value considering a still image is applied.

選択手段10は、動画/静止画判定手段8から与えられた動画/静止画判定信号に従い、選択/合成手段7から与えられた動画用ノイズ低減データ、又は、フレーム間第2ノイズ低減手段9から与えられた静止画用ノイズ低減データを選択し、ノイズが低減された映像データとして出力するものである。ノイズ低減後の映像データは、次段に出力されると共に、フレームメモリ1にも与えられる。   The selection means 10 follows the moving image / still image determination signal supplied from the moving image / still image determination means 8 or the moving image noise reduction data provided from the selection / synthesis means 7 or the inter-frame second noise reduction means 9. The given still image noise reduction data is selected and output as video data with reduced noise. The video data after noise reduction is output to the next stage and is also given to the frame memory 1.

(A−2)第1の実施形態の動作
次に、以上の構成を有する第1の実施形態のノイズ低減回路の動作(ノイズ低減方法)を説明する。
(A-2) Operation of the First Embodiment Next, the operation (noise reduction method) of the noise reduction circuit of the first embodiment having the above configuration will be described.

第1の実施形態のノイズ低減回路において、入力映像データに関し、新たな画素が、ノイズ低減対象の画素(図2の符号P0参照)になると、各ノイズ低減手段2、…、5、9はそれぞれ、以下のような、そのノイズ低減対象の画素についてのノイズ低減データ等の形成処理を行う。   In the noise reduction circuit according to the first embodiment, when a new pixel becomes a noise reduction target pixel (see symbol P0 in FIG. 2) with respect to input video data, each noise reduction means 2,... Then, the following processing for forming noise reduction data or the like is performed on the noise reduction target pixel.

フレーム間第1ノイズ低減手段2は、まず、ノイズ低減対象の画素の入力映像データ(画素データ)P0とフレームメモリ1から出力された1フレーム遅延データ(1フレーム前の画素データ)P1との差分の絶対値(又は差分二乗;以下、同様である)を求める。その後、フレーム間ノイズ低減手段2は、その差分絶対値を、ノイズ/動きの切り分け用の閾値(ノイズ/動き判定用閾値)と比較し、差分絶対値が閾値より小さい場合には差分はノイズによるものと判定し、差分絶対値が閾値以上の場合には差分は画像部分の動きによるものと判定する。周知のように、画像の静止部分では、相前後するフレームの同一位置の画素データは本来同一の値であって(非常に相関が高い)、それに差があったとしてもその差は小さく、一方、画像の動き部分では、相前後するフレームの同一位置の画素データはその動きの影響を受けて異なる値になることが多く、その差も大きい。フレーム間第1ノイズ低減手段2は、このような画像の性質を利用している。   First, the inter-frame first noise reduction means 2 first calculates the difference between the input video data (pixel data) P0 of the pixel targeted for noise reduction and the 1-frame delay data (pixel data one frame before) P1 output from the frame memory 1. Is obtained (or the square of the difference; the same applies hereinafter). After that, the inter-frame noise reduction means 2 compares the difference absolute value with a noise / motion segmentation threshold (noise / motion determination threshold), and if the difference absolute value is smaller than the threshold, the difference is due to noise. If the difference absolute value is greater than or equal to the threshold value, it is determined that the difference is due to the movement of the image portion. As is well known, in the still part of an image, the pixel data at the same position in successive frames are originally the same value (very high correlation), and even if there is a difference, the difference is small. In the moving part of an image, pixel data at the same position in successive frames often has different values due to the influence of the movement, and the difference is also large. The inter-frame first noise reduction means 2 utilizes such image properties.

フレーム間第1ノイズ低減手段2は、差分絶対値に基づいてノイズと判定したときには、入力映像データ(画素データ)P0からノイズ成分を除去したフレーム間ノイズ低減データAを出力し、一方、差分絶対値に基づいて動きと判定したときには、入力映像データ(画素データ)P0をそのままフレーム間ノイズ低減データAとして出力する。なお、入力映像データ(画素データ)P0から除去するノイズ成分は、上述した差分そのものであっても良く、上述した差分に所定の重み係数を乗算したものであっても良く、直前のノイズと判定された複数画素の差分の重み付け平均等であっても良い。   When the first inter-frame noise reduction means 2 determines that the noise is based on the difference absolute value, the first inter-frame noise reduction means 2 outputs the inter-frame noise reduction data A from which the noise component is removed from the input video data (pixel data) P0. When it is determined that the movement is based on the value, the input video data (pixel data) P0 is output as it is as inter-frame noise reduction data A. Note that the noise component to be removed from the input video data (pixel data) P0 may be the above-described difference itself, or may be obtained by multiplying the above-described difference by a predetermined weighting factor, and is determined as the immediately preceding noise. It may be a weighted average of the differences between the plurality of pixels.

また、フレーム間第1ノイズ低減手段2は、差分絶対値に基づいて動きと判定したときには、差分絶対値をローパスフィルタに通して差分量レベル(平滑値)を得、動きと判定されたデータ差分量と、差分量レベルと差分符号から判定される動き判定信号(動き有り無し)とからなるフレーム間動き検出信号を形成して出力する。なお、単に、差分絶対値に基づいて動きと判定した場合でも、フレーム間動き検出信号の動き判定信号を動き有りとせず、ローパスフィルタを通して得た差分量レベルの正負も含めた変化から、動き判定信号の内容(動きの有無)を定めるようにしている。ノイズはランダムであるが、動きの場合には、同一画素の映像データの変化に一定の傾向があり、そのため、ローパスフィルタを通して得た差分量レベルに基づいて、フレーム間動き検出信号に含める動き判定信号の内容を定めることとしている。   Further, when the first inter-frame noise reduction unit 2 determines that the motion is based on the absolute difference value, the differential absolute value is passed through a low-pass filter to obtain a difference amount level (smooth value), and the data difference determined to be the motion An inter-frame motion detection signal composed of a quantity, a motion determination signal (with or without motion) determined from the difference level and the difference code is formed and output. Even if it is determined that the motion is based on the absolute difference value, the motion determination signal of the inter-frame motion detection signal does not have motion, and the motion determination is performed based on the change including the positive / negative of the difference amount level obtained through the low-pass filter. The content of the signal (presence / absence of movement) is determined. Noise is random, but in the case of motion, there is a certain tendency for changes in video data of the same pixel, and therefore motion determination included in the inter-frame motion detection signal based on the difference level obtained through the low-pass filter The content of the signal is determined.

フレーム間第2ノイズ低減手段9も、フレーム間第1ノイズ低減手段2とほぼ同様な動作により、フレーム間ノイズ低減データBを形成する。   The inter-frame second noise reduction means 9 also forms the inter-frame noise reduction data B by substantially the same operation as the inter-frame first noise reduction means 2.

ここで、フレーム間第2ノイズ低減手段9は、フレーム間第1ノイズ低減手段2で設定したノイズ/動き判定用閾値より大きい、静止画専用のノイズ/動き判定用閾値を用いている。上述したような構成のフレーム間ノイズ低減手段(2、9)において、ノイズレベルが大きい場合にも対応できるように閾値を大きく設定してしまっていると、動きがある映像データの入力時に、移動体の移動のため、相前後するフレームで画素値が異なっていてもノイズと判定されて残像が発生してしまうことがある。静止画用のノイズ低減を対象としているフレーム間第2ノイズ低減手段9においては、残像を気にする必要はない。フレーム間第2ノイズ低減手段9では、静止画を処理対象としていて残像を気にしなくても良いため、映像データに存在している最大のノイズレベルをノイズと判定できるようなノイズ/動き判定用閾値を設定することができる。   Here, the inter-frame second noise reduction means 9 uses a noise / motion determination threshold dedicated to still images that is larger than the noise / motion determination threshold set by the inter-frame first noise reduction means 2. In the inter-frame noise reduction means (2, 9) configured as described above, if the threshold value is set large so as to be able to cope with the case where the noise level is high, the movement is performed when moving image data is input. Due to the movement of the body, even if the pixel values are different in successive frames, it may be determined as noise and an afterimage may occur. In the inter-frame second noise reduction means 9 intended for noise reduction for still images, there is no need to worry about afterimages. Since the second inter-frame noise reduction means 9 is intended for processing still images and does not have to worry about afterimages, it is for noise / motion determination that can determine the maximum noise level existing in the video data as noise. A threshold can be set.

フレーム間第2ノイズ低減手段9は、フレーム間第1ノイズ低減手段2とは異なり、フレーム間動き検出信号を形成することは行っていない。   Unlike the inter-frame first noise reduction unit 2, the inter-frame second noise reduction unit 9 does not form an inter-frame motion detection signal.

フィールド間第1ノイズ低減手段3は、まず、ノイズ低減対象の画素の入力映像データ(画素データ)P0とフレームメモリ1から出力された1フィールド遅延データP2との差分の絶対値を求める。その後、フィールド間第1ノイズ低減手段3は、その差分絶対値を、ノイズと、動き/エッジの切り分け用の閾値と比較し、差分絶対値が閾値より小さい場合には差分はノイズによるものと判定し、差分絶対値が閾値以上の場合には差分は画像部分の動き又はエッジによるものと判定する。閾値との比較により、ノイズと動きとを切り分けようとする技術思想は、フレーム間ノイズ低減手段2と同様である。しかし、フィールド間第1ノイズ低減手段3が差分絶対値を求めている2個のデータ、すなわち、入力映像データ(画素データ)P0とフレームメモリ1から出力された1フィールド遅延データP2の画素は、水平方向には一致しているが、垂直方向には1/2ライン分だけずれている。そのため、画像における静止物体等のエッジがその画素位置間のずれの幅内にあっても差分絶対値は大きくなる。従って、差分絶対値が閾値以上になる原因は、動きだけでなく、エッジの存在によっても生じる。   The first inter-field noise reduction means 3 first obtains the absolute value of the difference between the input video data (pixel data) P0 of the pixel targeted for noise reduction and the 1-field delay data P2 output from the frame memory 1. Thereafter, the first inter-field noise reduction means 3 compares the difference absolute value with noise and a threshold value for motion / edge separation, and if the difference absolute value is smaller than the threshold value, the difference is determined to be due to noise. When the difference absolute value is greater than or equal to the threshold value, it is determined that the difference is due to the movement or edge of the image portion. The technical idea of separating noise and motion by comparison with the threshold is the same as that of the inter-frame noise reduction means 2. However, the two pieces of data for which the first inter-field noise reduction means 3 obtains the absolute difference value, that is, the pixels of the input video data (pixel data) P0 and the 1-field delay data P2 output from the frame memory 1, are: Although they match in the horizontal direction, they are shifted by 1/2 line in the vertical direction. For this reason, the absolute value of the difference becomes large even if the edge of a still object or the like in the image is within the width of the shift between the pixel positions. Therefore, the cause that the difference absolute value becomes equal to or greater than the threshold value is caused not only by the movement but also by the presence of an edge.

フィールド間第1ノイズ低減手段3は、差分絶対値に基づいてノイズと判定したときには、入力映像データ(画素データ)P0からノイズ成分を除去したフィールド間ノイズ低減データAを出力し、一方、差分絶対値に基づいて動き又はエッジと判定したときには、入力映像データ(画素データ)P0をそのままフィールド間ノイズ低減データAとして出力する。なお、入力映像データ(画素データ)P0から除去するノイズ成分は、上述した差分そのものであっても良く、上述した差分に所定の重み係数を乗算したものであっても良く、直前のノイズと判定された複数画素の差分の重み付け平均等であっても良い。   When the first inter-field noise reduction means 3 determines that the noise is based on the absolute difference value, the first inter-field noise reduction means 3 outputs the inter-field noise reduction data A from which the noise component is removed from the input video data (pixel data) P0. When it is determined that the movement or the edge is based on the value, the input video data (pixel data) P0 is output as it is as the inter-field noise reduction data A. Note that the noise component to be removed from the input video data (pixel data) P0 may be the above-described difference itself, or may be obtained by multiplying the above-described difference by a predetermined weighting factor, and is determined as the immediately preceding noise. It may be a weighted average of the differences between the plurality of pixels.

また、フィールド間第1ノイズ低減手段3は、差分絶対値に基づいて動き又はエッジと判定したときには、差分絶対値をローパスフィルタに通して差分量レベル(平滑値)を得、動き又はエッジと判定されたデータ差分量と、差分量レベルと差分符号から判定される動き/エッジ判定信号(動き/エッジ有り無し)とからなるフィールド間動き/エッジ検出信号を形成して出力する。   Further, when the first inter-field noise reducing unit 3 determines that the movement or the edge is based on the absolute difference value, it passes the absolute difference value through a low-pass filter to obtain a difference level (smooth value), and determines that the movement or the edge is detected. An inter-field motion / edge detection signal is formed and output, which is composed of the data difference amount, the motion / edge determination signal (motion / edge presence / absence) determined from the difference level and the difference code.

フィールド間第2ノイズ低減手段4は、ノイズ低減対象の画素の入力映像データ(画素データ)P0とフレームメモリ1から出力された1フィールド遅延データP3とに基づいて、フィールド間第1ノイズ低減手段3と同様な処理を行なう。   The inter-field second noise reduction means 4 is based on the input video data (pixel data) P0 of the pixel to be reduced in noise and the 1-field delay data P3 output from the frame memory 1, and the inter-field first noise reduction means 3 The same process is performed.

ライン間ノイズ低減手段5は、まず、ノイズ低減対象の画素の入力映像データ(画素データ)P0とフレームメモリ1から出力された1ライン遅延データP4との差分の絶対値を求める。その後、ライン間ノイズ低減手段5は、その差分絶対値を、ノイズとエッジとの切り分け用の閾値と比較し、差分絶対値が閾値より小さい場合には差分はノイズによるものと判定し、差分絶対値が閾値以上の場合には差分は画像部分のエッジによるものと判定する。閾値との比較により、ノイズとエッジとを切り分けようとする技術思想は、フィールド間第1ノイズ低減手段3やフィールド間第2ノイズ低減手段4と同様である。なお、ライン間ノイズ低減手段5が差分絶対値を求めている2個のデータ、すなわち、入力映像データ(画素データ)P0とフレームメモリ1から出力された1ライン遅延データP4の画素は、同一フレーム同一フィールドに属しているので、動きを捉えることができず、エッジのみを捉えることができる。   The inter-line noise reduction means 5 first obtains the absolute value of the difference between the input video data (pixel data) P0 of the pixel targeted for noise reduction and the 1-line delay data P4 output from the frame memory 1. Thereafter, the noise reduction means 5 between the lines compares the absolute value of the difference with a threshold for separating the noise and the edge. If the absolute value of the difference is smaller than the threshold, the difference is determined to be due to noise. If the value is greater than or equal to the threshold value, the difference is determined to be due to the edge of the image portion. The technical idea of separating the noise and the edge by comparison with the threshold is the same as that of the first inter-field noise reducing unit 3 and the second inter-field second noise reducing unit 4. It should be noted that the two pieces of data for which the interline noise reduction means 5 obtains the absolute difference value, that is, the pixels of the input video data (pixel data) P0 and the 1-line delay data P4 output from the frame memory 1 are in the same frame. Since they belong to the same field, it is not possible to capture movement and only edges can be captured.

ライン間ノイズ低減手段5は、差分絶対値に基づいてノイズと判定したときには、入力映像データ(画素データ)P0からノイズ成分を除去したライン間ノイズ低減データを出力し、一方、差分絶対値に基づいてエッジと判定したときには、入力映像データ(画素データ)P0をそのままライン間ノイズ低減データとして出力する。なお、入力映像データ(画素データ)P0から除去するノイズ成分は、上述した差分そのものであっても良く、上述した差分に所定の重み係数を乗算したものであっても良く、直前のノイズと判定された複数画素の差分の重み付け平均等であっても良い。   When it is determined that the noise is based on the absolute difference value, the interline noise reducing means 5 outputs the interline noise reduction data obtained by removing the noise component from the input video data (pixel data) P0, and on the other hand, based on the absolute difference value. If it is determined that the edge is detected, the input video data (pixel data) P0 is output as it is as the noise reduction between lines. Note that the noise component to be removed from the input video data (pixel data) P0 may be the above-described difference itself, or may be obtained by multiplying the above-described difference by a predetermined weighting factor, and is determined as the immediately preceding noise. It may be a weighted average of the differences between the plurality of pixels.

また、ライン間ノイズ低減手段5は、差分絶対値に基づいてエッジと判定したときには、差分絶対値をローパスフィルタに通して差分量レベル(平滑値)を得、エッジと判定されたデータ差分量と、差分量レベルと差分符号から判定されるエッジ判定信号(エッジ有り無し)とからなるライン間エッジ検出信号を形成して出力する。   Further, when the interline noise reduction means 5 determines an edge based on the difference absolute value, the difference absolute value is passed through a low-pass filter to obtain a difference amount level (smooth value), and the data difference amount determined to be an edge Then, an edge detection signal between lines composed of an edge determination signal (edge presence / absence) determined from the difference level and the difference code is formed and output.

図3は、上述した5種類のノイズ低減手段2〜5、9への2個の入力データ間の時間方向及び垂直方向のずれの有無と大きさを整理して示す図表である。なお、図3は、いずれの場合にも、水平方向の位置ずれはないとしている。また、図4は、動き/エッジ検出補正信号作成手段6からの、選択/合成手段7への制御信号の意味合いの説明図、言い換えると、選択/合成手段7による選択又は合成論理の説明図である。   FIG. 3 is a chart in which the presence / absence and size of the deviation in the time direction and the vertical direction between the two input data to the five types of noise reduction means 2 to 5 and 9 are arranged. Note that FIG. 3 assumes that there is no horizontal displacement in any case. FIG. 4 is an explanatory diagram of the meaning of the control signal from the motion / edge detection correction signal creation unit 6 to the selection / combination unit 7, in other words, an explanatory diagram of selection or synthesis logic by the selection / synthesis unit 7. is there.

フレーム間第1ノイズ低減手段2(及びフレーム間第2ノイズ低減手段9)に関係する1フレーム遅延データP1は、ノイズ低減対象の画素データP0に対して、時間方向のずれが2V(Vは1フィールド期間)と大きいが、V方向(垂直方向)の位置ずれがないため、図4に示すようにフレーム間で動きがない場合だけ、1フレーム遅延データP1とノイズ低減対象の画素データP0の差分の絶対値をとることにより、ノイズ成分を抽出することができるが、フレーム間で動きがある場合には、時間によるデータの相関が取れなくなるため、差分データを使用してノイズ低減データを作成すると位置的残像が発生してしまう。   The one-frame delay data P1 related to the interframe first noise reduction means 2 (and the interframe second noise reduction means 9) is 2V (V is 1) with respect to the pixel data P0 targeted for noise reduction. Since there is no position shift in the V direction (vertical direction), the difference between the 1-frame delay data P1 and the noise reduction target pixel data P0 only when there is no movement between frames as shown in FIG. The noise component can be extracted by taking the absolute value of, but if there is movement between frames, the correlation of the data over time will not be possible, so creating noise reduction data using difference data A positional afterimage is generated.

また、ライン間ノイズ低減手段5に関係する1ライン遅延データP4は、ノイズ低減対象の画素データP0に対して、図3に示すように、時間のずれはないがV方向に1ラインのずれがあるため、図4に示すように、ライン間でエッジがない場合には1ライン遅延データP4とノイズ低減対象の画素データP0の差分の絶対値をとることにより、ノイズ成分を抽出することができるが、ライン間にエッジがある場合にはV方向によるデータの相関が取れなくなるため、差分データを使用してノイズ低減データを作成すると位置的残像が発生してしまう。   Further, as shown in FIG. 3, the 1-line delay data P4 related to the inter-line noise reduction means 5 is not shifted in time but shifted in 1 line in the V direction with respect to the pixel data P0 to be reduced in noise. Therefore, as shown in FIG. 4, when there is no edge between lines, the noise component can be extracted by taking the absolute value of the difference between the one-line delay data P4 and the pixel data P0 to be reduced in noise. However, if there is an edge between the lines, the data cannot be correlated in the V direction. Therefore, when the noise reduction data is generated using the difference data, a positional afterimage is generated.

さらに、フィールド間第1ノイズ低減手段3又はフィールド間第2ノイズ低減手段4に関係する1フィールド遅延データA(P2)、1フィールド遅延データB(P3)は、ノイズ低減対象の画素データP0に対して、図3に示すように、時間方向ではフレーム間の1/2時間にあたる1V、V方向ではライン間の1/2ラインにあたる0.5H(Hは1水平走査期間)のずれがあるため、図4に示すように、1フィールド遅延データA(P2)と1フィールド遅延データB(P3)の両方で動き又はエッジがない場合には、1フィールド遅延データA(P2)と1フィールド遅延データB(P3)の平均データを作成し、その平均化したデータとノイズ低減対象画素データP0の差分の絶対値をとることによりノイズ成分を抽出することができ、また、1フィールド遅延データA(P2)と1フィールド遅延データB(P3)の一方のデータに動き又はエッジがない場合には、動きがない方のデータとノイズ低減対象の画素データP0の差分の絶対値をとることによりノイズ成分を抽出することができるが、1フィールド遅延データA(P2)と1フィールド遅延データB(P3)の両方で動き又はエッジがある場合には時間方向及びV方向によるデータの相関が取れなくなるため差分データを使用してノイズ低減データを作成すると時間的残像若しくは位置的残像が発生してしまう。   Further, 1-field delay data A (P2) and 1-field delay data B (P3) related to the first inter-field noise reduction means 3 or the second inter-field noise reduction means 4 are compared with the pixel data P0 to be reduced in noise. As shown in FIG. 3, there is a shift of 1V corresponding to ½ hour between frames in the time direction and 0.5H (H is one horizontal scanning period) corresponding to ½ line between lines in the V direction. As shown in FIG. 4, when there is no motion or edge in both 1-field delay data A (P2) and 1-field delay data B (P3), 1-field delay data A (P2) and 1-field delay data B It is possible to extract the noise component by creating the average data of (P3) and taking the absolute value of the difference between the averaged data and the noise reduction target pixel data P0. In addition, when one of the 1-field delay data A (P2) and the 1-field delay data B (P3) has no motion or edge, the data without motion and the pixel data P0 of the noise reduction target The noise component can be extracted by taking the absolute value of the difference. However, when there is a motion or an edge in both the 1-field delay data A (P2) and the 1-field delay data B (P3), the time direction and V Since it becomes impossible to correlate the data depending on the direction, a temporal afterimage or a positional afterimage is generated when the noise reduction data is created using the difference data.

そこで、動き/エッジ検出補正信号作成手段6が、常に時間方向及びV方向共に残像が少なくなるようにノイズ低減データを選択又は合成させるための制御信号を形成し、選択/合成手段7がその制御信号に応じて、4種類のノイズ低減手段2〜5からのノイズ低減データを選択又は合成して、動画用のノイズ低減後の映像データ(動画用ノイズ低減データ)を得る。   Therefore, the motion / edge detection correction signal creation means 6 forms a control signal for selecting or synthesizing the noise reduction data so that the afterimage is always reduced in both the time direction and the V direction, and the selection / synthesis means 7 controls the control signal. Depending on the signal, the noise reduction data from the four types of noise reduction means 2 to 5 are selected or synthesized to obtain video data (moving image noise reduction data) after noise reduction for the moving image.

図5は、動き/エッジ検出補正信号作成手段6の制御信号の形成処理例を示すフローチャートである。   FIG. 5 is a flowchart showing an example of control signal formation processing of the movement / edge detection correction signal creating means 6.

動き/エッジ検出補正信号作成手段6は、まず、フレーム間動き検出信号がフレーム間の動きがないことを表しているか否かを判別する(S100)。そして、フレーム間の動きがない場合には、フレーム間ノイズ低減データAを動画用ノイズ低減データとして選択/合成手段7によって選択させる(S101)。   The motion / edge detection correction signal creating means 6 first determines whether or not the inter-frame motion detection signal indicates that there is no motion between frames (S100). When there is no motion between frames, the interframe noise reduction data A is selected by the selection / combination means 7 as moving image noise reduction data (S101).

これに対して、動き/エッジ検出補正信号作成手段6は、フレーム間の動きがある場合には、フィールド間動き/エッジ検出信号A及びフィールド間動き/エッジ検出信号Bの内容の組み合わせを判別する(S102〜S104)。フィールド間動き/エッジ検出信号A及びフィールド間動き/エッジ検出信号Bの両方が、動きがないことを表している場合は、動き/エッジ検出補正信号作成手段6は、選択/合成手段7によって、フィールド間ノイズ低減データAとフィールド間ノイズ低減データBの平均化したフィールド間ノイズ低減データを動画用ノイズ低減データとして出力させる(S104)。また、フィールド間動き/エッジ検出信号Aに動きがなくフィールド間動き/エッジ検出信号Bに動きがある場合には、動き/エッジ検出補正信号作成手段6は、選択/合成手段7によって、フィールド間ノイズ低減データAを動画用ノイズ低減データとして選択させる(S106)。さらに、フィールド間動き/エッジ検出信号Bに動きがなくフィールド間動き/エッジ検出信号Aに動きがある場合には、動き/エッジ検出補正信号作成手段6は、選択/合成手段7によって、フィールド間ノイズ低減データBを動画用ノイズ低減データとして選択させる(S107)。   On the other hand, the motion / edge detection correction signal creating means 6 determines the combination of the contents of the inter-field motion / edge detection signal A and the inter-field motion / edge detection signal B when there is a motion between frames. (S102 to S104). When both the inter-field motion / edge detection signal A and the inter-field motion / edge detection signal B indicate no motion, the motion / edge detection correction signal creating means 6 The inter-field noise reduction data obtained by averaging the inter-field noise reduction data A and the inter-field noise reduction data B is output as moving image noise reduction data (S104). When there is no motion in the inter-field motion / edge detection signal A and there is a motion in the inter-field motion / edge detection signal B, the motion / edge detection correction signal creation means 6 uses the selection / synthesis means 7 to The noise reduction data A is selected as moving image noise reduction data (S106). Further, when there is no motion in the inter-field motion / edge detection signal B and there is a motion in the inter-field motion / edge detection signal A, the motion / edge detection correction signal creating means 6 performs the inter-field motion by the selection / synthesis means 7. The noise reduction data B is selected as moving image noise reduction data (S107).

また、フィールド間動き/エッジ検出信号A及びフィールド間動き/エッジ検出信号Bの両方が、動き又はエッジが有るという内容の場合には、動き/エッジ検出補正信号作成手段6は、ライン間エッジ検出信号の内容を判別する(S108)。エッジでない場合には、動き/エッジ検出補正信号作成手段6は、選択/合成手段7によって、ライン間ノイズ低減データを動画用ノイズ低減データとして選択させる(S109)。エッジである場合には、動き/エッジ検出補正信号作成手段6は、動き又はエッジの差分量レベルが最も少ないノイズ低減データを、選択/合成手段7によって、動画用ノイズ低減データとして選択させる(S110)。   When both the inter-field motion / edge detection signal A and the inter-field motion / edge detection signal B have a motion or an edge, the motion / edge detection correction signal creating means 6 detects the inter-line edge detection. The content of the signal is determined (S108). If it is not an edge, the motion / edge detection correction signal creation means 6 causes the selection / synthesis means 7 to select the inter-line noise reduction data as the moving image noise reduction data (S109). If it is an edge, the motion / edge detection correction signal creation means 6 causes the selection / synthesis means 7 to select the noise reduction data with the smallest difference level of motion or edge as the moving image noise reduction data (S110). ).

なお、ライン間エッジ検出信号がエッジであることを表している場合には、動き/エッジ検出補正信号作成手段6は、選択/合成手段7によって、フレーム間ノイズ低減データを選択させるようにしても良く(S110−1)、また、4つの動き/エッジ判定信号から4つのノイズ低減データの重み付け方法を決定し、選択/合成手段7によって、4つのノイズ低減データを重み付け合成させて動画用ノイズ低減データを形成させるようにしても良い(S110−2)。後者の場合、差分量レベルが小さい判定信号に対応するノイズ低減データほど、その重みを大きくするようにする。   When the inter-line edge detection signal indicates an edge, the motion / edge detection correction signal creation means 6 may cause the selection / synthesis means 7 to select the inter-frame noise reduction data. Well (S110-1), the weighting method of the four noise reduction data is determined from the four motion / edge determination signals, and the noise reduction for moving image is performed by the selection / synthesis means 7 by weighting and synthesizing the four noise reduction data. Data may be formed (S110-2). In the latter case, the weight of the noise reduction data corresponding to the determination signal having a smaller difference level is increased.

動画/静止画判定手段8には、入力映像データとフレーム間第1ノイズ低減手段2から出力されたフレーム間ノイズ低減データAが入力され、動画/静止画判定手段8は、残像の存在有無を検出して、入力映像データに係る画面全体が、動画か静止画かを判定する。動画/静止画の判定方法は任意であり、既存の方法を適用しても良い。   The moving image / still image determination means 8 receives the input video data and the inter-frame noise reduction data A output from the first inter-frame noise reduction means 2, and the moving image / still image determination means 8 determines whether there is an afterimage. It is determined whether the entire screen related to the input video data is a moving image or a still image. The moving image / still image determination method is arbitrary, and an existing method may be applied.

例えば、入力映像データとフレーム間ノイズ低減データAの差分絶対値を求め(なお、フレーム間第1ノイズ低減手段2から、その内部で求めている差分データを取り込むようにしても良い)、この差分絶対値が所定の閾値を超えている1画面当たりの画素数をカウントし、そのカウント数が、カウント数に係る閾値(カウント数閾値)より多いときに動画と判定し、カウント数閾値以下のときに静止画と判定するようにしても良い。また、カウント結果を数フレーム保持し、数フレームのカウント結果を総合的に判断して動画/静止画を判定するようにしても良い。例えば、数フレームのカウント結果の分散(ばらつき)が所定値以下であることを条件として静止画と判定するようにしても良い。ノイズはランダムであるので閾値を超える画素数(カウント値)はフレーム毎に変動する。一方、移動体の速度が一定と見なせる数フレームの間は、残像の大きさ(言い換えると画素数)はどのフレームでも同じ程度であり、そのため、閾値を超える画素数(カウント値)の変動は小さい。従って、数フレームのカウント結果のばらつきに基づいて、残像が存在するか否か、言い換えると、動画か否かを判定することができる。   For example, the absolute value of the difference between the input video data and the interframe noise reduction data A is obtained (the difference data obtained internally from the interframe first noise reduction means 2 may be taken in), and this difference The number of pixels per screen whose absolute value exceeds a predetermined threshold is counted, and when the count is greater than the threshold related to the count (count threshold), the video is determined. When the count is less than the count threshold Alternatively, a still image may be determined. Further, the counting result may be held for several frames, and the moving image / still image may be determined by comprehensively determining the counting result of several frames. For example, a still image may be determined on condition that the variance (variation) of the count results of several frames is not more than a predetermined value. Since the noise is random, the number of pixels exceeding the threshold (count value) varies from frame to frame. On the other hand, the size of the afterimage (in other words, the number of pixels) is the same in every frame during several frames in which the speed of the moving body can be regarded as constant, and therefore the variation in the number of pixels (count value) exceeding the threshold is small. . Therefore, it is possible to determine whether there is an afterimage, in other words, whether it is a moving image, based on the variation in the count results of several frames.

選択/合成手段7から出力されたノイズ低減データは、動画用のノイズ低減データとして選択手段10に入力される。また、フレーム間第2ノイズ低減手段9から出力されたフレーム間ノイズ低減データBは、静止画用のノイズ低減データとして選択手段10に入力される。選択手段10は、動画/静止画判定手段8から出力された動画/静止画判定信号が動画を指示している場合には、動画用ノイズ低減データを選択してノイズ低減後の映像データとして次段及びフレームメモリ1に出力する。一方、選択手段10は、動画/静止画判定手段8から出力された動画/静止画判定信号が静止画を指示している場合には、フレーム間第2ノイズ低減手段9から出力された静止画用ノイズ低減データを選択してノイズ低減後の映像データとして次段及びフレームメモリ1に出力する。   The noise reduction data output from the selection / synthesis unit 7 is input to the selection unit 10 as noise reduction data for moving images. The interframe noise reduction data B output from the interframe second noise reduction means 9 is input to the selection means 10 as noise reduction data for still images. When the moving image / still image determination signal output from the moving image / still image determination unit 8 indicates a moving image, the selecting unit 10 selects the moving image noise reduction data, and next selects the video data after the noise reduction. Output to stage and frame memory 1. On the other hand, when the moving image / still image determination signal output from the moving image / still image determination unit 8 indicates a still image, the selection unit 10 outputs the still image output from the inter-frame second noise reduction unit 9. Noise reduction data is selected and output to the next stage and frame memory 1 as video data after noise reduction.

ここで、動画/静止画判定手段8が、上述したように画面(フレーム)毎に動画、静止画を判定しているので、選択手段10による静止画用ノイズ低減データ又は動画用ノイズ低減データの選択は、フレーム毎に見直され、各フレームの期間では同一の選択状態となっている。   Here, since the moving image / still image determination unit 8 determines the moving image and the still image for each screen (frame) as described above, the still image noise reduction data or the moving image noise reduction data by the selection unit 10 is determined. The selection is reviewed for each frame, and the same selection state is maintained during the period of each frame.

従って、動き/エッジ検出補正信号作成手段6による信号の作成論理を示す図5のフローチャートに対し、仮に、選択手段10の選択も考慮したステップを追加すると、図6のフローチャートのようになる。   Therefore, if a step taking into account the selection of the selection unit 10 is added to the flowchart of FIG. 5 showing the signal generation logic by the motion / edge detection correction signal generation unit 6, the flow chart of FIG. 6 is obtained.

ステップS100の前に、動画/静止画判定信号が動画、静止画のいずれを指示しているかの判別ステップS150が設けられ、静止画の場合には静止画用ノイズ低減データを選択する新たなステップS151に移行し、動画の場合には、ステップS100に移行することになる。   Before step S100, a determination step S150 is provided for determining whether the moving image / still image determination signal indicates a moving image or a still image. In the case of a still image, a new step of selecting still image noise reduction data is provided. The process proceeds to S151, and in the case of a moving image, the process proceeds to Step S100.

(A−3)第1の実施形態の効果
以上のように、第1の実施形態によれば、静止画専用のフレーム間第2ノイズ低減手段を設け、動画/静止画判定手段が動画と判定した場合には、選択/合成手段から出力された動画用ノイズ低減データを選択し、動画/静止画判定手段が静止画と判定した場合には、フレーム間第2ノイズ低減手段から出力された静止画用ノイズ低減データを選択して出力するようにしたので、動画の場合には残像を抑制したノイズ低減データを出力することができ、静止画の場合にはノイズを適切に除去したノイズ低減データを出力することができる。
(A-3) Effects of the First Embodiment As described above, according to the first embodiment, the inter-frame second noise reduction unit dedicated to still images is provided, and the moving image / still image determination unit determines that the moving image is a moving image. In this case, when the moving image noise reduction data output from the selection / synthesis unit is selected and the moving image / still image determination unit determines that the image is a still image, the still image output from the inter-frame second noise reduction unit is selected. Since image noise reduction data is selected and output, noise reduction data with reduced afterimages can be output for moving images, and noise reduction data with noise removed appropriately for still images. Can be output.

例えば、監視カメラ等のシステムでは、データ圧縮技術を用いてノイズ低減後の映像データを記録しているが、監視カメラ等からの映像データは大半が静止画である。そのため、第1の実施形態のノイズ低減回路を適用すれば、記録に供するノイズ低減後の映像データは、ノイズが適切に除去されたものとなり、相関性などを利用したデータ圧縮技術での圧縮効率が高く、記録データ量を抑えることができる。   For example, in a system such as a surveillance camera, video data after noise reduction is recorded using a data compression technique, but most of the video data from the surveillance camera or the like is a still image. For this reason, if the noise reduction circuit of the first embodiment is applied, the noise-reduced video data used for recording is appropriately noise-removed, and the compression efficiency in the data compression technique using the correlation or the like. The amount of recorded data can be reduced.

(B)第2の実施形態
次に、本発明によるノイズ低減回路及び方法の第2の実施形態を、図面を参照しながら詳述する。
(B) Second Embodiment Next, a second embodiment of the noise reduction circuit and method according to the present invention will be described in detail with reference to the drawings.

図7は、第2の実施形態のノイズ低減回路の構成を示すブロック図であり、上述した第1の実施形態に係る図1との同一、対応部分には同一符号を付して示している。   FIG. 7 is a block diagram showing the configuration of the noise reduction circuit of the second embodiment, and the same reference numerals are given to the same and corresponding parts as in FIG. 1 according to the first embodiment described above. .

図7において、第2の実施形態のノイズ低減回路は、フレームメモリ1、フレーム間第1ノイズ低減手段2、フィールド間第1ノイズ低減手段3、フィールド間第2ノイズ低減手段4、ライン間ノイズ低減手段5、動き/エッジ検出補正信号作成手段6、選択/合成手段7及び動画/静止画判定手段8を有する。すなわち、第1の実施形態におけるフレーム間第2ノイズ低減手段9や選択手段10は設けられていない。   In FIG. 7, the noise reduction circuit of the second embodiment includes a frame memory 1, an interframe first noise reduction means 2, an interfield first noise reduction means 3, an interfield second noise reduction means 4, and an interline noise reduction. Means 5, motion / edge detection correction signal creation means 6, selection / combination means 7, and moving image / still image determination means 8. That is, the inter-frame second noise reduction means 9 and the selection means 10 in the first embodiment are not provided.

第2の実施形態におけるフレームメモリ1、フレーム間第1ノイズ低減手段2、フィールド間第1ノイズ低減手段3、フィールド間第2ノイズ低減手段4、ライン間ノイズ低減手段5、動き/エッジ検出補正信号作成手段6、選択/合成手段7及び動画/静止画判定手段8は、第1の実施形態のものと同様である。   Frame memory 1, inter-frame first noise reduction means 2, inter-field first noise reduction means 3, inter-field second noise reduction means 4, inter-line noise reduction means 5, motion / edge detection correction signal in the second embodiment The creation unit 6, the selection / combination unit 7, and the moving image / still image determination unit 8 are the same as those in the first embodiment.

但し、選択/合成手段7から出力されたノイズ低減データが、ノイズ低減後の映像データとして次段及びフレームメモリ1に出力されている点は、第1の実施形態と異なっている。また、動画/静止画判定手段8から出力された動画/静止画判定信号が選択/合成手段7に与えられている点は、第1の実施形態と異なっている。   However, it differs from the first embodiment in that the noise reduction data output from the selection / synthesis unit 7 is output to the next stage and the frame memory 1 as video data after noise reduction. Further, the point that the moving image / still image determination signal output from the moving image / still image determination means 8 is given to the selection / synthesis means 7 is different from the first embodiment.

第2の実施形態の選択/合成手段7は、動画/静止画判定手段8から出力された動画/静止画判定信号が静止画を指示している場合には(1フレーム期間継続して指示している)、動き/エッジ検出補正信号作成手段6からの動き/エッジ検出補正信号を無視し、フレーム間第1ノイズ低減手段2から出力されたフレーム間ノイズ低減データAを選択する。すなわち、静止画では、ノイズ低減に利用する2つの画素データが時間的に一番離れているフレーム間ノイズ低減データAを選択しても残像が発生しないため、全画素データでノイズ低減効果が一番高いフレーム間ノイズ低減データAのみを強制的に選択する。   The selection / combination means 7 of the second embodiment indicates that the moving picture / still picture determination signal output from the moving picture / still picture determination means 8 indicates a still picture (instructed continuously for one frame period). The motion / edge detection correction signal from the motion / edge detection correction signal creation means 6 is ignored, and the inter-frame noise reduction data A output from the first inter-frame noise reduction means 2 is selected. That is, in a still image, no residual image is generated even if the inter-frame noise reduction data A, in which the two pixel data used for noise reduction are farthest in time, does not generate a noise reduction effect for all pixel data. Only the highest inter-frame noise reduction data A is forcibly selected.

第2の実施形態の選択/合成手段7は、動画/静止画判定手段8から出力された動画/静止画判定信号が動画を指示している場合には(1フレーム期間継続して指示している)、動き/エッジ検出補正信号作成手段6からの動き/エッジ検出補正信号に従って、フレーム間ノイズ低減データA、フィールド間ノイズ低減データA、フィールド間ノイズ低減データB、ライン間ノイズ低減データの中からデータを選択し、又は、合成してノイズ低減後の映像データとする。   The selection / combination means 7 of the second embodiment, when the moving picture / still picture determination signal output from the moving picture / still picture determination means 8 indicates a moving picture (instructed continuously for one frame period). In accordance with the motion / edge detection correction signal from the motion / edge detection correction signal creating means 6, among the inter-frame noise reduction data A, the inter-field noise reduction data A, the inter-field noise reduction data B, and the inter-line noise reduction data. The data is selected from the above or synthesized to obtain video data after noise reduction.

動き/エッジ検出補正信号作成手段6による信号の作成論理を示す、上述した図5のフローチャートに対し、仮に、動画/静止画判定手段8による判定結果を考慮したステップを追加すると、図8のフローチャートのようになる。   If a step in consideration of the determination result by the moving image / still image determination unit 8 is added to the flowchart of FIG. 5 showing the signal generation logic by the movement / edge detection correction signal generation unit 6, the flowchart of FIG. become that way.

ステップS100の前に、動画/静止画判定信号が動画、静止画のいずれを指示しているかの判別ステップS200が設けられ、静止画の場合にはフレーム間ノイズ低減データAを出力するステップS101に移行し、動画の場合には、ステップS100に移行することになる。   Before step S100, a determination step S200 for determining whether the moving image / still image determination signal indicates a moving image or a still image is provided, and in the case of a still image, the inter-frame noise reduction data A is output to step S101. In the case of a moving image, the process proceeds to step S100.

以上のように、第2の実施形態によれば、静止画の場合には、強制的にフレーム間ノイズ低減データを出力し、動画の場合には、動き/エッジ検出補正信号に応じ、フレーム間ノイズ低減データA、フィールド間ノイズ低減データA、フィールド間ノイズ低減データB、ライン間ノイズ低減データを選択/合成して出力するようにしたので、静止画では、フィールド間ノイズ低減データやライン間ノイズ低減データよりノイズ低減効果が高いフレーム間ノイズ低減データを常に出力でき、動画では、残像を抑制したノイズ低減データを出力することができる。   As described above, according to the second embodiment, in the case of a still image, the inter-frame noise reduction data is forcibly output, and in the case of a moving image, according to the motion / edge detection correction signal, the inter-frame noise reduction data is output. Since the noise reduction data A, the inter-field noise reduction data A, the inter-field noise reduction data B, and the inter-line noise reduction data are selected / synthesized and output, in the still image, the inter-field noise reduction data and the inter-line noise are output. Inter-frame noise reduction data, which has a higher noise reduction effect than reduced data, can always be output, and noise reduction data with reduced afterimages can be output for moving images.

例えば、監視カメラ等のシステムに適用した場合に、記録データの圧縮率をあげることができることは、第1の実施形態の場合と同様である。   For example, when applied to a system such as a surveillance camera, the recording data compression rate can be increased as in the case of the first embodiment.

(C)他の実施形態
上記各実施形態では、画面全体が動画であるか静止画であるかを判定するものを示したが、1画面をn分割した領域毎に動画であるか静止画であるかを判定し、領域毎に上述した各実施形態のような選択、若しくは、合成処理するようにしても良い。領域毎の判定方法としては、画面全体の判定方法と同様な方法を適用すれば良い。
(C) Other Embodiments In the above embodiments, the whole screen is determined to be a moving image or a still image. However, it is a moving image or a still image for each n-divided area of one screen. It may be determined whether or not there is a selection, or a combination process as in the above-described embodiments for each region. As a determination method for each region, a method similar to the determination method for the entire screen may be applied.

また、上記実施形態においては、動画/静止画判定手段8が、入力映像データと、フレーム間第1ノイズ低減手段2からのフレーム間ノイズ低減データAとから、動画であるか静止画であるかを判定するものを示したが、他の信号から、動画であるか静止画であるかを判定するようにしても良い。例えば、入力映像データと、フレームメモリ1からの1フレーム遅延データとから、動画であるか静止画であるかを判定するようにしても良い。この場合において、領域毎に判定する方法を適用するとしたら、いわゆる動きベクトルの検出方法を適用し、動きベクトルの大きさが閾値以下か否かにより、動画/静止画を判定するようにしても良い。   In the above embodiment, whether the moving image / still image determination unit 8 is a moving image or a still image from the input video data and the inter-frame noise reduction data A from the first inter-frame noise reduction unit 2. However, it may be determined from another signal whether it is a moving image or a still image. For example, it may be determined whether the image is a moving image or a still image from the input video data and the 1-frame delay data from the frame memory 1. In this case, if a method for determining each region is applied, a so-called motion vector detection method may be applied to determine a moving image / still image depending on whether the magnitude of the motion vector is equal to or less than a threshold value. .

第1の実施形態においては、選択手段10を、選択/合成手段7の他に設けたものを示したが、選択/合成手段7が選択手段10の機能を兼ねるようにしても良い。例えば、フレーム間第2ノイズ低減手段9からのフレーム間ノイズ低減データBを選択/合成手段7に入力させると共に、動画/静止画判定手段8から出力された動画/静止画判定信号も選択/合成手段7に入力させ、選択/合成手段7が、動画/静止画判定信号が静止画を指示しているときにはフレーム間ノイズ低減データBを選択するようにしても良い(第2の実施形態に係る図7参照)。   In the first embodiment, the selection unit 10 is provided in addition to the selection / synthesis unit 7. However, the selection / synthesis unit 7 may also function as the selection unit 10. For example, the inter-frame noise reduction data B from the inter-frame second noise reduction unit 9 is input to the selection / combination unit 7 and the moving image / still image determination signal output from the moving image / still image determination unit 8 is also selected / combined. The selection / synthesis unit 7 may select the inter-frame noise reduction data B when the moving image / still image determination signal indicates a still image (according to the second embodiment). (See FIG. 7).

逆に、第2の実施形態に係る選択/合成手段7の後段に選択手段を設け、フレーム間第1ノイズ低減手段2からのフレーム間ノイズ低減データAと、選択/合成手段7からの出力データとを選択手段に入力し、この選択手段が、動画/静止画判定手段8から出力された動画/静止画判定信号に応じて選択動作するようにしても良い(第1の実施形態に係る図1参照)。   Conversely, selection means is provided at the subsequent stage of the selection / combination means 7 according to the second embodiment, and the interframe noise reduction data A from the interframe first noise reduction means 2 and the output data from the selection / synthesis means 7 are provided. May be input to the selection unit, and the selection unit may perform a selection operation according to the moving image / still image determination signal output from the moving image / still image determination unit 8 (a diagram according to the first embodiment). 1).

上記各実施形態においては、動画/静止画判定手段8から出力された動画/静止画判定信号を、選択手段10又は選択/合成手段7に入力して選択を切り替えるものを示したが、動画/静止画判定手段8から出力された動画/静止画判定信号を、動き/エッジ検出補正信号作成手段6に与えて、動き/エッジ検出補正信号作成手段6が、動画/静止画判定信号に応じた所望する選択動作を実行できるような動き/エッジ検出補正信号を作成するようにしても良い。   In each of the above embodiments, the video / still image determination signal output from the video / still image determination unit 8 is input to the selection unit 10 or the selection / synthesis unit 7 to switch the selection. The moving image / still image determination signal output from the still image determining means 8 is given to the motion / edge detection correction signal creating means 6, and the motion / edge detection correction signal creating means 6 responds to the moving image / still image determination signal. A motion / edge detection correction signal may be generated so that a desired selection operation can be executed.

第1の実施形態においては5種類のノイズ低減手段を備え、第2の実施形態においては4種類のノイズ低減手段を備えたものを示したが、ノイズ低減手段の種類数はこれら実施形態に限定されない。   Although the first embodiment includes five types of noise reduction means and the second embodiment includes four types of noise reduction means, the number of types of noise reduction means is limited to these embodiments. Not.

例えば、ノイズ低減手段として、フレーム間及びフィールド間を有するものであっても良く、フレーム間及びライン間を有するものであっても良く、フィールド間及びライン間を有するものであっても良い。また、2フレーム以上離れたフレーム間の相関を利用したノイズ低減手段があっても良い。フィールド間ノイズ低減手段として、フィールド間第1ノイズ低減手段又はフィールド間第2ノイズ低減手段の一方だけを備えるものであっても良い。逆に、ライン間ノイズ低減手段として、ノイズ低減対象の画素より垂直方向に1ライン分だけ上の画素データを利用したライン間第1ノイズ低減手段及びノイズ低減対象の画素より垂直方向に1ライン分だけ下の画素データを利用したライン間第2ノイズ低減手段の双方を備えるものであっても良い。以上のような組み合わせに、さらに、ローパスフィルタノイズ低減手段を備えても良い。但し、相関を利用したノイズ低減手段を、相関の種類が異なる2種類以上備えていることが好ましい。   For example, the noise reducing means may be between frames and between fields, may be between frames and between lines, or may be between fields and between lines. There may also be noise reduction means using the correlation between frames that are two or more frames apart. As the inter-field noise reduction means, only one of the first inter-field noise reduction means or the second inter-field noise reduction means may be provided. On the other hand, as the interline noise reduction means, the first interline noise reduction means using pixel data that is one line in the vertical direction above the noise reduction target pixel and one line in the vertical direction from the noise reduction target pixel. It is also possible to provide both of the inter-line second noise reducing means using the lower pixel data. In addition to the above combinations, low-pass filter noise reduction means may be further provided. However, it is preferable to provide two or more types of noise reduction means using correlation that differ in the type of correlation.

なお、ローパスフィルタノイズ低減手段は、入力映像データから高域成分のノイズを除去するためローパスフィルタを通してノイズ低減を行なうものであり、その処理後のデータ(ローパスフィルタノイズ低減データ)を出力するものである。   The low-pass filter noise reduction means performs noise reduction through a low-pass filter to remove high-frequency component noise from the input video data, and outputs the processed data (low-pass filter noise reduction data). is there.

但し、静止画用のノイズ低減手段としては、フレーム間の相関を利用したもの、2フレーム以上離れたフレーム間の相関を利用したものが好ましい。   However, the noise reduction means for still images is preferably one that uses correlation between frames and one that uses correlation between two or more frames apart.

動画用のノイズ低減手段として、複数種類のノイズ低減手段を有する場合において、ディップスイッチなどで、利用するノイズ低減手段をユーザなどが設定し得るようにしても良い。   When there are a plurality of types of noise reduction means as the noise reduction means for moving images, the user or the like may be able to set the noise reduction means to be used with a dip switch or the like.

上記各実施形態では、映像信号がインターレース方式に従う場合を説明したが、映像信号がノンインターレース方式に従う場合にも本発明を適用することができる。例えば、インターレース方式の映像信号をノンインターレース化した映像信号が入力信号の場合には、フィールド概念が存在する。また、フレーム間及びライン間のノイズ低減手段を備えることでノンインターレース方式の映像信号に対応できる。   In each of the above embodiments, the case where the video signal conforms to the interlace system has been described. However, the present invention can also be applied to the case where the video signal conforms to the non-interlace system. For example, a field concept exists when a video signal obtained by non-interlacing an interlace video signal is an input signal. In addition, it is possible to deal with non-interlace video signals by providing noise reduction means between frames and between lines.

第1の実施形態に係るノイズ低減回路の構成を示すブロック図である。It is a block diagram which shows the structure of the noise reduction circuit which concerns on 1st Embodiment. 第1の実施形態に係るノイズ低減対象の画素データとノイズ低減に利用する過去の画素データとの、時間軸方向及び垂直方向の関係を示した説明図である。It is explanatory drawing which showed the relationship of the time-axis direction and the orthogonal | vertical direction of the pixel data of noise reduction object which concern on 1st Embodiment, and the past pixel data utilized for noise reduction. 第1の実施形態における5種類のノイズ低減手段への2個の入力データ間の時間方向及び垂直方向のずれの有無と大きさを整理して示す図表である。It is a chart which arranges and shows the existence and size of the shift in the time direction and the vertical direction between two input data to the five types of noise reduction means in the first embodiment. 第1の実施形態の選択/合成手段によるノイズ低減データの選択又は合成論理の説明図である。It is explanatory drawing of the selection or synthetic | combination logic of the noise reduction data by the selection / combination means of 1st Embodiment. 第1の実施形態の動き/エッジ検出補正信号作成手段における選択/合成制御信号の形成処理を示すフローチャートである。It is a flowchart which shows the formation process of the selection / synthesis control signal in the movement / edge detection correction signal preparation means of 1st Embodiment. 第1の実施形態におけるノイズ低減データの選択方法を説明する仮想的なフローチャートである。It is a hypothetical | virtual flowchart explaining the selection method of the noise reduction data in 1st Embodiment. 第2の実施形態のノイズ低減回路の構成を示すブロック図である。It is a block diagram which shows the structure of the noise reduction circuit of 2nd Embodiment. 第2の実施形態におけるノイズ低減データの選択方法を説明する仮想的なフローチャートである。It is a virtual flowchart explaining the selection method of the noise reduction data in 2nd Embodiment.

符号の説明Explanation of symbols

1…フレームメモリ、2…フレーム間第1ノイズ低減手段、3…フィールド間第1ノイズ低減手段、4…フィールド間第2ノイズ低減手段、5…ライン間ノイズ低減手段、6…動き/エッジ検出補正信号作成手段、7…選択/合成手段、8…動画/静止画判定手段、9…フレーム間第2ノイズ低減手段、10…選択手段。   DESCRIPTION OF SYMBOLS 1 ... Frame memory, 2 ... 1st noise reduction means between frames, 3 ... 1st noise reduction means between fields, 4 ... 2nd noise reduction means between fields, 5 ... Noise reduction means between lines, 6 ... Motion / edge detection correction Signal generating means, 7... Selection / combination means, 8... Moving image / still picture determination means, 9.

Claims (5)

直前所定期間のノイズ低減後の映像データを記憶している映像データ記憶手段と、
ノイズ低減対象の画素に対し、時間方向及び又は空間方向に所定量ずれた画素の上記映像データ記憶手段から与えられたデータと、入力映像データにおける上記ノイズ低減対象の画素のデータとの差分から、2つのデータの相関を利用してノイズ低減データを形成して出力すると共に、上記差分がノイズのために生じたか画像の有効な変化のために生じたかを示す差分原因判定信号を上記差分の時間変化に基づいて形成して出力する、上記時間方向及び又は空間方向のずれ量の組み合わせが異なる、動画用の複数の相関利用ノイズ低減手段と、
ノイズ低減対象の画素に対し、時間方向及び又は空間方向に所定量ずれた画素の上記映像データ記憶手段から与えられたデータと、入力映像データにおける上記ノイズ低減対象の画素のデータとの差分から、2つのデータの相関を利用してノイズ低減データを形成して出力する、静止画用の相関利用ノイズ低減手段と、
入力映像データにおける画面全体、若しくは、画面を複数に分割した分割画面が、動画か静止画かを判定する動画/静止画判定手段と、
上記動画/静止画判定手段の判定結果が静止画である画面全体若しくは画面部分については、上記静止画用の相関利用ノイズ低減手段からのノイズ低減データを選択して出力し、上記動画/静止画判定手段の判定結果が動画である画面全体若しくは画面部分については、上記動画用の各相関利用ノイズ低減手段からの差分原因判定信号に基づき、動画用のノイズ低減データの決定方法を定め、上記動画用の各相関利用ノイズ低減手段からのノイズ低減データを選択、又は、合成して、出力するノイズ低減データを得る出力データ選択手段と
を有することを特徴とするノイズ低減回路。
Video data storage means for storing video data after noise reduction for a predetermined period immediately before;
From the difference between the data given from the video data storage means of the pixel shifted by a predetermined amount in the time direction and / or the spatial direction with respect to the noise reduction target pixel, and the data of the noise reduction target pixel in the input video data, The noise reduction data is formed and output using the correlation between the two data, and a difference cause determination signal indicating whether the difference is caused by noise or an effective change in the image is displayed as the difference time. A plurality of correlation use noise reduction means for moving images, which are formed and output based on changes, and have different combinations of shift amounts in the time direction and / or the spatial direction,
From the difference between the data given from the video data storage means of the pixel shifted by a predetermined amount in the time direction and / or the spatial direction with respect to the noise reduction target pixel, and the data of the noise reduction target pixel in the input video data, Correlation use noise reduction means for still images, which generates and outputs noise reduction data using the correlation of two data;
A moving image / still image determining means for determining whether the entire screen in the input video data or the divided screen obtained by dividing the screen into a moving image or a still image;
For the entire screen or screen portion in which the determination result of the moving image / still image determining means is a still image, the noise reduction data from the correlation use noise reducing means for the still image is selected and output, and the moving image / still image is output. For the entire screen or screen portion in which the determination result of the determination means is a moving image, the determination method of the noise reduction data for moving image is determined based on the difference cause determination signal from each correlation use noise reducing means for moving image, and the moving image A noise reduction circuit comprising: output data selection means for selecting or synthesizing noise reduction data from each correlation use noise reduction means for obtaining noise reduction data to be output.
上記入力映像データをローパスフィルタに通して高域成分のノイズを除去したローパスフィルタノイズ低減データを出力するローパスフィルタノイズ低減手段を動画用のノイズ低減手段として備え、上記出力データ選択手段が、上記動画/静止画判定手段の判定結果が動画である画面全体若しくは画面部分については、ローパスフィルタノイズ低減データも候補として選択動作することを特徴とする請求項1に記載のノイズ低減回路。   Low-pass filter noise reduction means for outputting low-pass filter noise reduction data obtained by removing the high-frequency component noise by passing the input video data through a low-pass filter, and the output data selection means includes the moving picture noise reduction means. 2. The noise reduction circuit according to claim 1, wherein the low-pass filter noise reduction data is also selected as candidates for the entire screen or screen portion in which the determination result of the still image determination means is a moving image. ある相関利用ノイズ低減手段を、上記静止画用の相関利用ノイズ低減手段、及び、上記動画用の1つの相関利用ノイズ低減手段として兼用していることを特徴とする請求項1又は2に記載のノイズ低減回路。   The correlation use noise reduction means is also used as the correlation use noise reduction means for the still image and one correlation use noise reduction means for the moving image. Noise reduction circuit. 上記静止画用の相関利用ノイズ低減手段と、ある1つの上記動画用の1つの相関利用ノイズ低減手段とは、利用する2つのデータの時間方向及び又は空間方向のずれが同一であるが、上記2つのデータの差分がノイズのために生じたか画像の有効な変化のために生じたかを切り分ける閾値が異なっていることを特徴とする請求項1又は2に記載のノイズ低減回路。   The correlation use noise reduction means for the still image and one correlation use noise reduction means for a certain one moving image have the same time direction and / or spatial direction deviation of the two data to be used. 3. The noise reduction circuit according to claim 1, wherein thresholds for distinguishing whether a difference between two data is generated due to noise or due to an effective change of an image are different. 入力映像データのノイズを低減したノイズ低減データを得て出力するノイズ低減方法において、
映像データ記憶手段と、動画用の複数の相関利用ノイズ低減手段と、静止画用の相関利用ノイズ低減手段と、動画/静止画判定手段と、出力データ選択手段とを備え、
上記映像データ記憶手段は、直前所定期間のノイズ低減後の映像データを記憶しており、
上記時間方向及び又は空間方向のずれ量の組み合わせが異なる、上記動画用の複数の相関利用ノイズ低減手段はそれぞれ、ノイズ低減対象の画素に対し、時間方向及び又は空間方向に所定量ずれた画素の上記映像データ記憶手段から与えられたデータと、入力映像データにおける上記ノイズ低減対象の画素のデータとの差分から、2つのデータの相関を利用してノイズ低減データを形成して出力すると共に、上記差分がノイズのために生じたか画像の有効な変化のために生じたかを示す差分原因判定信号を上記差分の時間変化に基づいて形成して出力し、
上記静止画用の相関利用ノイズ低減手段は、ノイズ低減対象の画素に対し、時間方向及び又は空間方向に所定量ずれた画素の上記映像データ記憶手段から与えられたデータと、入力映像データにおける上記ノイズ低減対象の画素のデータとの差分から、2つのデータの相関を利用してノイズ低減データを形成して出力し、
上記動画/静止画判定手段は、入力映像データにおける画面全体、若しくは、画面を複数に分割した分割画面が、動画か静止画かを判定し、
上記出力データ選択手段は、上記動画/静止画判定手段の判定結果が静止画である画面全体若しくは画面部分については、上記静止画用の相関利用ノイズ低減手段からのノイズ低減データを選択して出力し、上記動画/静止画判定手段の判定結果が動画である画面全体若しくは画面部分については、上記動画用の各相関利用ノイズ低減手段からの差分原因判定信号に基づき、動画用のノイズ低減データの決定方法を定め、上記動画用の各相関利用ノイズ低減手段からのノイズ低減データを選択、又は、合成して、出力するノイズ低減データを得る
ことを特徴とするノイズ低減方法。
In the noise reduction method of obtaining and outputting noise reduction data that reduces the noise of the input video data,
Video data storage means, a plurality of correlation use noise reduction means for video, correlation use noise reduction means for still images, video / still image determination means, and output data selection means,
The video data storage means stores video data after noise reduction for a predetermined period immediately before,
The plurality of correlation-use noise reduction means for moving images having different combinations of shift amounts in the time direction and / or the spatial direction each of pixels that are shifted by a predetermined amount in the time direction and / or the spatial direction with respect to the noise reduction target pixels. From the difference between the data provided from the video data storage means and the pixel data of the noise reduction target in the input video data, noise reduction data is formed and output using the correlation of the two data, and A difference cause determination signal indicating whether the difference has occurred due to noise or due to an effective change in the image is formed and output based on the time change of the difference, and is output.
The still image correlation use noise reduction means includes the data given from the video data storage means of the pixel shifted by a predetermined amount in the time direction and / or the spatial direction with respect to the noise reduction target pixel, and the input video data From the difference from the pixel data of the noise reduction target, use the correlation between the two data to form and output noise reduction data,
The moving image / still image determining means determines whether the entire screen in the input video data or the divided screen obtained by dividing the screen into a moving image or a still image,
The output data selection means selects and outputs the noise reduction data from the correlation use noise reduction means for the still image for the entire screen or the screen portion in which the determination result of the moving image / still image determination means is a still image. For the entire screen or screen portion in which the determination result of the moving image / still image determination means is a moving image, the noise reduction data for the moving image is determined based on the difference cause determination signal from each correlation use noise reducing means for the moving image. A noise reduction method characterized by determining a determination method and selecting or synthesizing noise reduction data from each of the correlation use noise reduction means for moving images to obtain output noise reduction data.
JP2008078370A 2008-03-25 2008-03-25 Noise reduction circuit and method Pending JP2009232402A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008078370A JP2009232402A (en) 2008-03-25 2008-03-25 Noise reduction circuit and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008078370A JP2009232402A (en) 2008-03-25 2008-03-25 Noise reduction circuit and method

Publications (1)

Publication Number Publication Date
JP2009232402A true JP2009232402A (en) 2009-10-08

Family

ID=41247239

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008078370A Pending JP2009232402A (en) 2008-03-25 2008-03-25 Noise reduction circuit and method

Country Status (1)

Country Link
JP (1) JP2009232402A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8982198B2 (en) 2011-10-21 2015-03-17 Kabushiki Kaisha Toshiba Image signal correction apparatus, imaging apparatus, endoscopic apparatus
CN112313935A (en) * 2018-06-29 2021-02-02 三菱电机株式会社 Image pickup apparatus and line-variation noise reduction apparatus

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01143583A (en) * 1987-11-30 1989-06-06 Nec Corp Method for eliminating noise of picture signal
JPH05236304A (en) * 1991-10-31 1993-09-10 Philips Gloeilampenfab:Nv Artifact reduction device for video signal
JPH0662283A (en) * 1992-08-07 1994-03-04 Sharp Corp Noise reduction system for video signal
JPH0818829A (en) * 1994-06-27 1996-01-19 Matsushita Electric Ind Co Ltd Noise eliminating device
JP2002051234A (en) * 2000-08-01 2002-02-15 Sony Corp Apparatus and method for processing video signal and recording medium
JP2005175671A (en) * 2003-12-09 2005-06-30 Oki Electric Ind Co Ltd Noise reduction circuit and method
JP2007060636A (en) * 2005-07-29 2007-03-08 Victor Co Of Japan Ltd Noise detection apparatus and method, and noise reduction apparatus and method
JP2007274067A (en) * 2006-03-30 2007-10-18 Mitsubishi Electric Corp Noise eliminating apparatus, noise eliminating method, and video signal display

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01143583A (en) * 1987-11-30 1989-06-06 Nec Corp Method for eliminating noise of picture signal
JPH05236304A (en) * 1991-10-31 1993-09-10 Philips Gloeilampenfab:Nv Artifact reduction device for video signal
JPH0662283A (en) * 1992-08-07 1994-03-04 Sharp Corp Noise reduction system for video signal
JPH0818829A (en) * 1994-06-27 1996-01-19 Matsushita Electric Ind Co Ltd Noise eliminating device
JP2002051234A (en) * 2000-08-01 2002-02-15 Sony Corp Apparatus and method for processing video signal and recording medium
JP2005175671A (en) * 2003-12-09 2005-06-30 Oki Electric Ind Co Ltd Noise reduction circuit and method
JP2007060636A (en) * 2005-07-29 2007-03-08 Victor Co Of Japan Ltd Noise detection apparatus and method, and noise reduction apparatus and method
JP2007274067A (en) * 2006-03-30 2007-10-18 Mitsubishi Electric Corp Noise eliminating apparatus, noise eliminating method, and video signal display

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8982198B2 (en) 2011-10-21 2015-03-17 Kabushiki Kaisha Toshiba Image signal correction apparatus, imaging apparatus, endoscopic apparatus
CN112313935A (en) * 2018-06-29 2021-02-02 三菱电机株式会社 Image pickup apparatus and line-variation noise reduction apparatus
CN112313935B (en) * 2018-06-29 2023-04-04 三菱电机株式会社 Image pickup apparatus and line-variation noise reduction apparatus

Similar Documents

Publication Publication Date Title
JP4280614B2 (en) Noise reduction circuit and method
JP4253327B2 (en) Subtitle detection apparatus, subtitle detection method, and pull-down signal detection apparatus
US8218083B2 (en) Noise reducer, noise reducing method, and video signal display apparatus that distinguishes between motion and noise
US8503820B2 (en) Method and apparatus for removing image noise
KR20060047556A (en) Film-mode detection in video sequences
US10440318B2 (en) Motion adaptive de-interlacing and advanced film mode detection
US8503814B2 (en) Method and apparatus for spectrum estimation
US8305489B2 (en) Video conversion apparatus and method, and program
KR100722773B1 (en) Method and apparatus for detecting graphic region in moving picture
JP2005527050A (en) Unit and method for sharpness enhancement
JP4861636B2 (en) Image processing apparatus and image processing program
JP2009212609A (en) Video image signal processor and processing method
US7443448B2 (en) Apparatus to suppress artifacts of an image signal and method thereof
US7868948B2 (en) Mage signal processing apparatus, image signal processing method and program for converting an interlaced signal into a progressive signal
JP2009260930A (en) Method of determining field dominance in video frame sequence
US8391372B2 (en) Method of doubling frame rate of video signals
US20080100745A1 (en) Pull-down signal detecting apparatus, pull-down signal detecting method, and video-signal converting apparatus
JP2009232402A (en) Noise reduction circuit and method
JP2003153077A (en) Video signal processor
JP4679501B2 (en) Noise removing device, noise removing method, and video signal display device
JP2008252561A (en) Caption area detector, its detecting method and image processor
Lee et al. A motion-adaptive deinterlacer via hybrid motion detection and edge-pattern recognition
JP2004320279A (en) Dynamic image time axis interpolation method and dynamic image time axis interpolation apparatus
KR20060047491A (en) Processing auxiliary data of video sequences
KR101513395B1 (en) A motion adaptive deinterlacing system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110221

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120615

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120717

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20121113