JP2011086976A - Image processor and image processing method - Google Patents
Image processor and image processing method Download PDFInfo
- Publication number
- JP2011086976A JP2011086976A JP2009235896A JP2009235896A JP2011086976A JP 2011086976 A JP2011086976 A JP 2011086976A JP 2009235896 A JP2009235896 A JP 2009235896A JP 2009235896 A JP2009235896 A JP 2009235896A JP 2011086976 A JP2011086976 A JP 2011086976A
- Authority
- JP
- Japan
- Prior art keywords
- component
- image data
- correction parameter
- input image
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims description 7
- 238000004364 calculation method Methods 0.000 claims abstract description 53
- 238000005286 illumination Methods 0.000 claims abstract description 46
- 238000001914 filtration Methods 0.000 claims abstract description 28
- 239000000284 extract Substances 0.000 claims abstract description 7
- 238000009499 grossing Methods 0.000 claims description 8
- 230000002596 correlated effect Effects 0.000 claims 2
- 238000000034 method Methods 0.000 description 14
- 238000000605 extraction Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 10
- 230000002093 peripheral effect Effects 0.000 description 10
- 238000010586 diagram Methods 0.000 description 8
- 230000000694 effects Effects 0.000 description 5
- 230000010354 integration Effects 0.000 description 2
- 230000007423 decrease Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 239000011435 rock Substances 0.000 description 1
Landscapes
- Image Processing (AREA)
- Color Television Image Signal Generators (AREA)
- Facsimile Image Signal Circuits (AREA)
- Color Image Communication Systems (AREA)
- Studio Devices (AREA)
Abstract
Description
本発明は、コントラストを補正する画像処理技術に係り、特に、レチネックス理論（Ｒｅｔｉｎｅｘ理論）を適用したコントラスト補正画像処理技術に関する。 The present invention relates to an image processing technique for correcting contrast, and more particularly, to a contrast-corrected image processing technique to which Retinex theory is applied.
コントラストを補正する画像処理として、入力階調に対する出力階調の変化を表したカーブであるトーンカーブを調整する方法が広く用いられている。例えば、図９に示すようなＳ字形状のトーンカーブを用いて、図１０（ａ）に示した原画像の補正を行なうと、明るい部分はより明るく、暗い部分はより暗くなる補正結果となり、図１０（ｂ）に示すようなコントラストが強調された補正画像を得ることができる。 As image processing for correcting contrast, a method of adjusting a tone curve, which is a curve representing a change in output tone with respect to an input tone, is widely used. For example, when the original image shown in FIG. 10A is corrected using an S-shaped tone curve as shown in FIG. 9, the bright part becomes brighter and the dark part becomes darker. A corrected image with enhanced contrast as shown in FIG. 10B can be obtained.
トーンカーブをＳ字型に調整することで、明暗差の少ない画像のコントラストを強調する補正を行なうことができるが、この方法では、単一のトーンカーブを用いて画像全体が一律に補正されることになるため、同じ明るさの画素であれば周囲の明るさに関わらず同じ明るさに補正されることになる。 By adjusting the tone curve to be S-shaped, it is possible to perform correction that enhances the contrast of an image with little difference between light and dark, but with this method, the entire image is uniformly corrected using a single tone curve. Therefore, pixels having the same brightness are corrected to the same brightness regardless of the surrounding brightness.
このため、周囲とのバランスから明るくする必要のない部分が明るくなったり、暗くする必要のない部分が暗くなったりすることがあり、補正結果が不自然で見栄えが悪化する場合がある。また、コントラストが強くなりすぎて滑らかな階調変化が失われることもあり、この場合も、補正結果が不自然で見栄えが悪化することになる。 For this reason, a portion that does not need to be brightened from the balance with the surroundings may become bright, or a portion that does not need to be darkened may darken, and the correction result may be unnatural and the appearance may deteriorate. In addition, the contrast becomes too strong and the smooth gradation change may be lost. In this case, the correction result is unnatural and the appearance is deteriorated.
例えば、図１０（ａ）の領域Ａ０と領域Ｂ０とは、ほぼ同じ明るさであるため、図１０（ｂ）の領域Ａ１と領域Ｂ１のように同じ明るさの補正結果となる。しかし、岩肌が写っている領域Ｂ０は、周囲に比べて明るい部分であるのにも関わらず、領域Ｂ１は暗く補正されすぎて不自然な補正結果となっている。これを避けるために、領域Ｂ１が明るくなるようなトーンカーブを用いると、領域Ａ１と周囲の空との明るさの差が不明瞭になってしまう。また、補正後の図１０（ｂ）では、灯台の白色が過剰に明るく補正され、階調変化が失われており、不自然なコントラスト補正結果となっている。 For example, since the area A0 and the area B0 in FIG. 10A have substantially the same brightness, the same brightness correction results are obtained as in the areas A1 and B1 in FIG. 10B. However, although the area B0 in which the rock surface is reflected is a bright part compared with the surrounding area, the area B1 is corrected too darkly, resulting in an unnatural correction result. To avoid this, if a tone curve that brightens the area B1 is used, the difference in brightness between the area A1 and the surrounding sky becomes unclear. Further, in FIG. 10B after correction, the lighthouse white color is corrected to be excessively bright, and the gradation change is lost, resulting in an unnatural contrast correction result.
そこで、本発明は、補正後の画像が自然で違和感のないコントラスト補正を行なう画像処理装置および画像処理方法を提供することを目的とする。 Therefore, an object of the present invention is to provide an image processing apparatus and an image processing method for performing contrast correction with a natural and uncomfortable image after correction.
上記課題を解決するため、本発明の第１の態様である画像処理装置は、入力画像データの照明光成分を抽出するフィルタリング手段と、前記入力画像データを抽出された前記照明光成分で除算することにより入力画像データの反射率成分を算出する反射率成分算出処理手段と、算出された前記反射率成分に基づいて補正パラメータを算出する補正パラメータ算出手段と、算出された前記補正パラメータと前記入力画像データとを乗算することにより補正画像データを生成する乗算手段とを備えたことを特徴とする。 In order to solve the above problems, an image processing apparatus according to a first aspect of the present invention divides the input image data by the extracted illumination light component, filtering means for extracting the illumination light component of the input image data, and A reflectance component calculation processing unit that calculates a reflectance component of the input image data, a correction parameter calculation unit that calculates a correction parameter based on the calculated reflectance component, the calculated correction parameter, and the input Multiplying means for generating corrected image data by multiplying image data is provided.
ここで、前記補正パラメータ算出手段は、前記反射率成分と定数とを乗じることで前記補正パラメータを算出することができる。 Here, the correction parameter calculation means can calculate the correction parameter by multiplying the reflectance component and a constant.
上記課題を解決するため、本発明の第２の態様である画像処理装置は、入力画像データの照明光成分を抽出するフィルタリング手段と、前記入力画像データを抽出された前記照明光成分で除算することにより入力画像データの反射率成分を算出する反射率成分算出処理手段と、前記入力画像データの彩度成分と輝度成分との比と負の相関関係にある彩度ゲインを算出する彩度ゲイン算出手段と、算出された前記反射率成分および前記彩度ゲインに基づいて補正パラメータを算出する補正パラメータ算出手段と、算出された前記補正パラメータと前記入力画像データとを乗算することにより補正画像データを生成する乗算手段とを備えたことを特徴とする。 In order to solve the above problems, an image processing apparatus according to a second aspect of the present invention divides the input image data by the extracted illumination light component, filtering means for extracting the illumination light component of the input image data, and A reflectance component calculation processing means for calculating a reflectance component of the input image data, and a saturation gain for calculating a saturation gain having a negative correlation with a ratio between the saturation component and the luminance component of the input image data Correction image data by multiplying the calculation means, correction parameter calculation means for calculating a correction parameter based on the calculated reflectance component and the saturation gain, and the calculated correction parameter and the input image data And multiplication means for generating.
ここで、前記補正パラメータ算出手段は、前記反射率成分と前記彩度ゲインとを乗じることで前記補正パラメータを算出することができる。 Here, the correction parameter calculation means can calculate the correction parameter by multiplying the reflectance component and the saturation gain.
いずれの態様においても、前記反射率成分算出処理手段は、前記入力画像データの各画素についてＲＧＢ成分毎に反射率成分を算出し、前記補正パラメータ算出手段は、前記入力画像データの各画素についてＲＧＢ成分毎に補正パラメータを算出することができる。 In any aspect, the reflectance component calculation processing means calculates a reflectance component for each RGB component for each pixel of the input image data, and the correction parameter calculation means for RGB for each pixel of the input image data. A correction parameter can be calculated for each component.
また、前記フィルタリング手段は、前記入力画像データの輝度成分に対して平滑化フィルタを施すことで前記照明光成分を抽出することができる。 The filtering means can extract the illumination light component by applying a smoothing filter to the luminance component of the input image data.
上記課題を解決するため、本発明の第３の態様である画像処理方法は、入力画像データの照明光成分を抽出するフィルタリングステップと、前記入力画像データを抽出された前記照明光成分で除算することにより入力画像データの反射率成分を算出する反射率成分算出ステップと、算出された前記反射率成分に基づいて補正パラメータを算出する補正パラメータ算出ステップと、算出された前記補正パラメータと前記入力画像データとを乗算することにより補正画像データを生成する乗算ステップとを含むことを特徴とする。 In order to solve the above-described problem, an image processing method according to a third aspect of the present invention includes a filtering step of extracting an illumination light component of input image data, and dividing the input image data by the extracted illumination light component. A reflectance component calculating step for calculating a reflectance component of the input image data, a correction parameter calculating step for calculating a correction parameter based on the calculated reflectance component, the calculated correction parameter, and the input image And a multiplication step of generating corrected image data by multiplying the data.
上記課題を解決するため、本発明の第４の態様である画像処理方法は、入力画像データの照明光成分を抽出するフィルタリングステップと、前記入力画像データを抽出された前記照明光成分で除算することにより入力画像データの反射率成分を算出する反射率成分算出ステップと、前記入力画像データの彩度成分と輝度成分との比と負の相関関係にある彩度ゲインを算出する彩度ゲイン算出ステップと、算出された前記反射率成分および前記彩度ゲインに基づいて補正パラメータを算出する補正パラメータ算出ステップと、算出された前記補正パラメータと前記入力画像データとを乗算することにより補正画像データを生成する乗算ステップとを含むことを特徴とする。 In order to solve the above-described problem, an image processing method according to a fourth aspect of the present invention includes a filtering step of extracting an illumination light component of input image data, and dividing the input image data by the extracted illumination light component. A reflectance component calculating step for calculating a reflectance component of the input image data, and a saturation gain calculation for calculating a saturation gain having a negative correlation with a ratio between the saturation component and the luminance component of the input image data. A correction parameter calculation step for calculating a correction parameter based on the calculated reflectance component and the saturation gain, and multiplying the calculated correction parameter by the input image data to obtain corrected image data. A multiplication step to be generated.
本発明によれば、補正後の画像が自然で違和感のないコントラスト補正を行なう画像処理装置および画像処理方法が提供される。 According to the present invention, there are provided an image processing apparatus and an image processing method for performing contrast correction in which a corrected image is natural and uncomfortable.
本発明の実施の形態について図面を参照して詳細に説明する。図１は、本実施形態に係る画像処理装置の構成を示すブロック図である。本図に示すように、画像処理装置１００は、画像入力部１１０とコントラスト補正部１２０と画像出力部１３０とを備えている。 Embodiments of the present invention will be described in detail with reference to the drawings. FIG. 1 is a block diagram showing the configuration of the image processing apparatus according to this embodiment. As shown in the figure, the image processing apparatus 100 includes an image input unit 110, a contrast correction unit 120, and an image output unit 130.
画像入力部１１０は、補正前の画像が入力され、ＲＧＢ成分毎の画像データである原画像Ｉ（Ｉｒ，Ｉｇ，Ｉｂ）をコントラスト補正部１２０に出力する。コントラスト補正部１２０は、原画像Ｉに対してコントラスト補正処理を行ない、補正後の画像データである補正画像Ｏ（Ｏｒ，Ｏｇ，Ｏｂ）を画像出力部１３０に出力する。画像出力部１３０は、補正後の画像を外部装置等に出力する。 The image input unit 110 receives an uncorrected image and outputs an original image I (Ir, Ig, Ib), which is image data for each RGB component, to the contrast correction unit 120. The contrast correction unit 120 performs a contrast correction process on the original image I, and outputs a corrected image O (Or, Og, Ob), which is corrected image data, to the image output unit 130. The image output unit 130 outputs the corrected image to an external device or the like.
画像処理装置１００は、例えば、ＣＰＵ、メモリ、インタフェース等を備えたＰＣ等の汎用的な情報処理装置や、画像処理専用装置等を用いて構成することができる。また、デジタルスチールカメラ装置、デジタルビデオカメラ装置、監視カメラ装置等の映像機器の一部としてハードウェア的あるいはソフトウェア的に構成するようにしてもよい。 The image processing apparatus 100 can be configured using, for example, a general-purpose information processing apparatus such as a PC having a CPU, a memory, an interface, and the like, an image processing dedicated apparatus, and the like. Further, it may be configured in hardware or software as part of video equipment such as a digital still camera device, a digital video camera device, and a surveillance camera device.
ここで、本実施形態で行なうコントラスト補正について説明する。上述のように、従来から広く行なわれているトーンカーブを用いたコントラスト補正では、同じ値の画素であれば周囲の明るさに関わらず同じ値に補正される結果、補正結果が不自然で見栄えが悪化する場合がある。 Here, the contrast correction performed in the present embodiment will be described. As described above, in the conventional contrast correction using the tone curve, if the pixels have the same value, the correction result is unnatural and looks good as a result of correcting to the same value regardless of the surrounding brightness. May get worse.
この不自然さを防いで違和感のない補正画像を得るために、コントラスト補正を行なう際に、明るい領域の暗い部分はより暗く、暗い領域の明るい部分はより明るくなるようにして明るさの差を拡大することが考えられる。 In order to prevent this unnaturalness and obtain a corrected image with no sense of incongruity, when performing contrast correction, the dark part of the bright area becomes darker and the bright part of the dark area becomes brighter to reduce the difference in brightness. It is possible to expand.
この点に着目して、本実施形態では、注目画素の明るさと周囲の明るさとの関係を評価して注目画素の補正を行なうようにする。具体的には、
出力階調＝補正パラメータ×入力階調
としたとき、注目画素が周囲の明るさよりも明るければ、補正パラメータ＞１となるようにし、注目画素が周囲の明るさより暗ければ、補正パラメータ＜１となるようにする。ここで、補正パラメータは、注目画素の階調を補正するためのパラメータであり、補正パラメータ＞１であれば明るく補正され、補正パラメータ＜１であれば暗く補正される。
Focusing on this point, in the present embodiment, the relationship between the brightness of the target pixel and the surrounding brightness is evaluated to correct the target pixel. In particular,
When output gradation = correction parameter × input gradation, if the pixel of interest is brighter than the surrounding brightness, the correction parameter is set to 1, and if the pixel of interest is darker than the ambient brightness, the correction parameter is set to <1. To be. Here, the correction parameter is a parameter for correcting the gradation of the target pixel, and is corrected brightly if the correction parameter> 1, and darkly corrected if the correction parameter <1.
本実施形態では、注目画素が周囲の明るさよりも明るければ１より大きくなり、注目画素が周囲の明るさより暗ければ１より小さくなる補正パラメータとして、Ｒｅｔｉｎｅｘ理論（レチネックス理論）によって導かれる反射率成分Ｒから得られる値を用いるものとする。反射率成分Ｒは、原画像Ｉを照明光成分Ｌで割った値であり、Ｒ＝Ｉ／Ｌとなる。 In the present embodiment, the reflectance component derived by the Retinex theory (Retinex theory) is used as a correction parameter that is larger than 1 if the pixel of interest is brighter than the surrounding brightness, and smaller than 1 if the pixel of interest is darker than the surrounding brightness. The value obtained from R shall be used. The reflectance component R is a value obtained by dividing the original image I by the illumination light component L, and R = I / L.
後述するように、照明光成分Ｌは、原画像Ｉの輝度成分Ｙを平滑化したものであるため、着目画素と周囲の明るさとの差がない場合には、Ｉ＝Ｌ（∴Ｒ＝１）となり、着目画素が周囲よりも明るい場合には、Ｉ＞Ｌ（∴Ｒ＞１）となり、着目画素が周囲よりも暗い場合には、Ｉ＜Ｌ（∴Ｒ＜１）となる。 As will be described later, the illumination light component L is obtained by smoothing the luminance component Y of the original image I. Therefore, when there is no difference between the pixel of interest and the surrounding brightness, I = L (∴R = 1) When the pixel of interest is brighter than the surroundings, I> L (∴R> 1), and when the pixel of interest is darker than the surroundings, I <L (∴R <1).
ここで、人の視覚は照明光を除去して外界を見る、明暗恒常性や色恒常性を備えているというレチネックス理論について簡単に説明する。レチネックス理論によると人間の視覚は各物体の反射率成分Ｒの比によって色を知覚する。反射率成分Ｒは、照明に依存しない被写体の画像成分である。これに対し、映像機器等に撮像された原画像Ｉは受光した物理的な光量によって各画素の値が決定されており、反射率成分Ｒと照明光成分Ｌとの積で表わされる。 Here, the Retinex theory that human vision has light / darkness constancy and color constancy that removes illumination light and looks at the outside world will be briefly described. According to Retinex theory, human vision perceives color by the ratio of the reflectance component R of each object. The reflectance component R is an image component of a subject that does not depend on illumination. On the other hand, the value of each pixel is determined by the received physical quantity of light in the original image I captured by a video device or the like, and is represented by the product of the reflectance component R and the illumination light component L.
したがって、原画像Ｉから照明光成分Ｌを分離して反射率成分Ｒを得ることによって、照明光成分Ｌに依存しない適切な画像を得ることができ、画像のコントラストの補正が可能になると考えられる。 Therefore, by separating the illumination light component L from the original image I and obtaining the reflectance component R, it is possible to obtain an appropriate image that does not depend on the illumination light component L, and to correct the contrast of the image. .
レチネックス理論を用いた代表的な画像処理アルゴリズムの一つにＣｅｎｔｅｒ／Ｓｕｒｒｏｕｎｄ Ｒｅｔｉｎｅｘ（以下、Ｃ／Ｓ Ｒｅｔｉｎｅｘ）がある。このアルゴリズムを［数１］、［数２］を用いて説明する。
ここで、（ｘ，ｙ）は二次元画像の座標を表し、Ｉ（ｘ，ｙ）は座標（ｘ，ｙ）の画素値を示す。［数２］における添え字ｉは原画像Ｉの各色成分を表し、原画像ＩがＲＧＢ画像である場合、ｉ＝Ｒ，Ｇ，Ｂである。また、Ａはゲイン定数である。 Here, (x, y) represents the coordinates of the two-dimensional image, and I (x, y) represents the pixel value of the coordinates (x, y). The subscript i in [Expression 2] represents each color component of the original image I. When the original image I is an RGB image, i = R, G, B. A is a gain constant.
Ｃ／Ｓ Ｒｅｔｉｎｅｘでは、レチネックス出力画像Ｒは、［数２］によって算出される。［数２］において照明光成分Ｌは、原画像Ｉを平滑化してぼかしたぼけ画像とし、原画像Ｉｉ（ｘ，ｙ）と周辺関数Ｆ（ｘ，ｙ）との畳み込み積分により求めることができる。周辺関数Ｆ（ｘ，ｙ）にはガウス関数などが用いられる。周辺関数をガウス関数とした場合の、Ｆ（ｘ，ｙ）を［数３］、［数４］に示す。
一般的なＣ／Ｓ Ｒｅｔｉｎｅｘ［数２］において、［数１］の逆算から割り算を行なう、［数５］に示すＬｉｎｅａｒ Ｒｅｔｉｎｅｘ（以下、ＬＲ）というアルゴリズムが提案されている。
本実施形態のコントラスト補正部１２０では、このようなレチネックス理論を適用して、原画像Ｉのコントラスト補整処理を行なう。なお、レチネックス理論によって得られる反射率成分Ｒ自体が原画像Ｉのコントラストを改善した画像であるが、レチネックス処理後の値を出力階調範囲内（例えば８ビット階調であれば０〜２５５）に調整する際に必要なゲイン設定、クリップ設定が一般に複雑である。 The contrast correction unit 120 of the present embodiment performs the contrast correction processing of the original image I by applying such Retinex theory. Note that the reflectance component R itself obtained by the Retinex theory is an image in which the contrast of the original image I is improved, but the value after Retinex processing is within the output gradation range (for example, 0 to 255 for 8-bit gradation). In general, the gain setting and clip setting required for adjustment are complicated.
すなわち、クリップ、ゲインの値の選定は、原画像、フィルタサイズなどの条件によって異なり、設定値によっては、白飛び、黒潰れなどが起こる場合もある。また、白飛び、黒潰れを起こさない値であっても、画像全体が、本来の輝度と大幅に異なる輝度となり、グレー化することもある。 That is, the selection of the clip and gain values varies depending on conditions such as the original image and the filter size, and depending on the set value, whiteout or blackout may occur. Even if the value does not cause overexposure or blackout, the entire image has a luminance that is significantly different from the original luminance and may be grayed out.
また、Ｒ，Ｇ，Ｂ各成分のバランスも考慮しなくてはならない。特に、コントラスト強調を重視してゲイン設定を行なった場合、特定色成分を過強調してしまうことが起こり得る。静止画の処理の場合、適宜、値を入力して調整することも可能だが、動画の場合は、動的に値を制御する必要もある。 In addition, the balance of R, G, and B components must be taken into consideration. In particular, when gain setting is performed with emphasis on contrast enhancement, a specific color component may be overemphasized. In the case of still image processing, it is possible to input and adjust values as appropriate, but in the case of moving images, it is also necessary to dynamically control the values.
そこで、本実施形態では、レチネックス処理結果である反射率成分Ｒを補正画像とするのではなく、反射率成分Ｒを、
出力階調＝補正パラメータ×入力階調
における補正パラメータの算出に用いることにより、補正後の画像が自然で違和感のないコントラスト補正を行なうようにする。
Therefore, in this embodiment, instead of using the reflectance component R, which is the Retinex processing result, as a corrected image, the reflectance component R is
By using it for calculation of the correction parameter of output gradation = correction parameter × input gradation, the corrected image is subjected to contrast correction that is natural and does not cause a sense of incongruity.
図２は、コントラスト補正部１２０の構成の第１実施例を示すブロック図である。本図に示すように、コントラスト補正部１２０は、画像抽出部１２１と、フィルタリング部１２２と、レチネックス処理部１２３と、補正パラメータ算出部１２４と、乗算部１２５とを備えている。 FIG. 2 is a block diagram showing a first embodiment of the configuration of the contrast correction unit 120. As shown in the figure, the contrast correction unit 120 includes an image extraction unit 121, a filtering unit 122, a Retinex processing unit 123, a correction parameter calculation unit 124, and a multiplication unit 125.
画像抽出部１２１は、ＲＧＢで表わされた原画像Ｉから輝度成分Ｙを抽出する。ＲＧＢ形式から輝度成分Ｙの抽出は、例えば、［数６］にしたがって行なうことができる。
このフィルタのサイズ、すなわち、参照する周辺画素の数によって、ぼかしの効果が変化し、レチネックス処理効果も変化する。一例として、６４０×４８０［ピクセル］の画像の輝度成分に対し、平均フィルタによってフィルタリングを行なった結果を図３に示す。図３（ａ）はフィルタサイズを３２×３２［ピクセル］とし、図３（ｂ）は６４×６４［ピクセル］としたものである。 The blurring effect changes and the Retinex processing effect also changes depending on the size of the filter, that is, the number of surrounding pixels to be referred to. As an example, FIG. 3 shows a result of filtering the luminance component of an image of 640 × 480 [pixels] using an average filter. FIG. 3A shows a filter size of 32 × 32 [pixels], and FIG. 3B shows 64 × 64 [pixels].
本図から分かるように、図３（ｂ）に示したフィルタサイズが大きいフィルタリング結果の方が、ぼかしが強くなっている。フィルタＦのスケール（フィルタの面積）は、［数３］の定数ｃの大きさによって周辺情報量が変化するため、処理効果が異なった画像が得られる。例えば、フィルタスケールが小さい（定数ｃが小さい）場合、参照される周辺情報量は少ないため、エッジ再現が良好であるが、局所的な情報を参照するため、補正にムラが生じ、全体としての色再現性に乏しくなる。また、フィルタスケールが大きい（定数ｃが大きい）場合、広範囲での周辺情報を参照するため、画像全体のコントラスト補正および色再現性は良好ではあるが、細部の明暗の再現性に乏しく、ｈａｌｏと呼ばれるエッジぼけなどが生じる。 As can be seen from this figure, the filtering result having a larger filter size shown in FIG. Since the scale of the filter F (area of the filter) changes the amount of peripheral information depending on the size of the constant c in [Equation 3], images with different processing effects can be obtained. For example, when the filter scale is small (the constant c is small), the peripheral information amount to be referred to is small, so that the edge reproduction is good. Color reproduction is poor. In addition, when the filter scale is large (constant c is large), the peripheral information in a wide range is referred to, so the contrast correction and color reproducibility of the entire image are good, but the reproducibility of light and dark details is poor. An edge blur is called.
そこで、複数の大きさの周辺関数Ｆの合成による補正を以下に示す。合成するフィルタリング画像の数をｎとした周辺関数Ｆｎを［数７］に示し、合成された周辺関数Ｆを［数８］に示す。
レチネックス処理部１２３は、レチネックス処理部Ｒ１２３ｒ、レチネックス処理部Ｇ１２３ｇ、レチネックス処理部Ｂ１２３ｂを含み、それぞれＲ成分、Ｇ成分、Ｂ成分について、原画像Ｉを照明光成分Ｌで除算してレチネックス処理結果である反射率成分Ｒｉ、すなわち、Ｉｉ／Ｌを得る。このように、レチネックス処理部１２３は、反射率成分算出処理部として機能する。この除算処理では、１画素毎に、ＲＧＢそれぞれについて、対応する照明光成分Ｌの値で除算を行なう。 The Retinex processing unit 123 includes a Retinex processing unit R123r, a Retinex processing unit G123g, and a Retinex processing unit B123b. For each of the R component, the G component, and the B component, the original image I is divided by the illumination light component L, and the Retinex processing result is obtained. A certain reflectance component R i , that is, I i / L is obtained. Thus, the Retinex processing unit 123 functions as a reflectance component calculation processing unit. In this division processing, division is performed for each RGB by the value of the corresponding illumination light component L for each pixel.
補正パラメータ算出部１２４は、補正パラメータ算出部Ｒ１２４ｒ、補正パラメータ算出部Ｇ１２４ｇ、補正パラメータ算出部Ｂ１２４ｂを含み、それぞれＲ成分、Ｇ成分、Ｂ成分について、レチネックス処理結果Ｉｉ／Ｌを用いて補正パラメータＰｉを算出する。 The correction parameter calculation unit 124 includes a correction parameter calculation unit R124r, a correction parameter calculation unit G124g, and a correction parameter calculation unit B124b. For each of the R component, the G component, and the B component, the correction parameter is calculated using the Retinex processing result I i / L. Pi is calculated.
補正パラメータＰｉは、例えば、［数９］にしたがってＲ成分、Ｇ成分、Ｂ成分毎に算出することができる。ここで、Ｋｉは定数であり、例えば、過補正を防ぐために、ＫＲ＝ＫＧ＝ＫＢ＝０．８とすることができる。
次に、上記構成の画像処理装置１００の第１実施例におけるコントラスト補正処理の手順について図４のフローチャートを参照して説明する。 Next, the procedure of contrast correction processing in the first embodiment of the image processing apparatus 100 having the above configuration will be described with reference to the flowchart of FIG.
まず、画像入力部１１０が外部装置等から補正前の画像を入力され、ＲＧＢ成分毎の画像データである原画像Ｉ（Ｉｒ，Ｉｇ，Ｉｂ）をコントラスト補正部１２０に出力する（Ｓ１０１）。次いで、画像抽出部１２１が、ＲＧＢ成分に基づいて輝度成分Ｙを抽出する（Ｓ１０２）。抽出された輝度成分Ｙを、フィルタリング部１２２においてフィルタＦでフィルタリングすることにより、照明光成分Ｌが得られる（Ｓ１０３）。 First, the image input unit 110 receives an uncorrected image from an external device or the like, and outputs an original image I (Ir, Ig, Ib), which is image data for each RGB component, to the contrast correction unit 120 (S101). Next, the image extraction unit 121 extracts the luminance component Y based on the RGB components (S102). By filtering the extracted luminance component Y with the filter F in the filtering unit 122, an illumination light component L is obtained (S103).
そして、レチネックス処理部１２３が、原画像ＩのＲＧＢ各成分を照明光成分Ｌで除算するレチネックス処理を行なう（Ｓ１０４）。レチネックス処理結果Ｉｉ／Ｌが得られると、補正パラメータ算出部１２４が、［数９］あるいは［数１０］にしたがって補正パラメータＰｉを算出する（Ｓ１０５）。 Then, the Retinex processing unit 123 performs Retinex processing for dividing the RGB components of the original image I by the illumination light component L (S104). When the Retinex processing result I i / L is obtained, the correction parameter calculation unit 124 calculates the correction parameter P i according to [Equation 9] or [Equation 10] (S105).
次いで、乗算部１２５が補正パラメータＰｉと原画像Ｉｉとを乗算することで補正画像Ｏｉを生成する（Ｓ１０６）。補正画像Ｏｉは、画像出力部１３０によって、補正後の画像として外部装置等に出力される（Ｓ１０７）。 Then, to generate a corrected image O i by multiplying unit 125 multiplies the correction parameter P i and the original image I i (S106). The corrected image O i is output to the external device or the like as a corrected image by the image output unit 130 (S107).
レチネックス処理で用いられる照明光成分Ｌは輝度成分Ｙをフィルタリングによりぼかした値であるため、周辺画素の値を平滑化した値である。本実施形態では、照明光成分Ｌと原画像Ｉとの関係に基づいて補正パラメータを定めているため、元の画素値に関わらず、周辺の明るさによって補正がなされることになる。このため、明るい領域の暗い部分はより暗く、暗い領域の明るい部分はより明るく補正されることになり、自然で違和感のないコントラスト補正結果を得ることができる。 Since the illumination light component L used in the Retinex process is a value obtained by blurring the luminance component Y by filtering, it is a value obtained by smoothing the values of surrounding pixels. In the present embodiment, since the correction parameter is determined based on the relationship between the illumination light component L and the original image I, the correction is performed based on the brightness of the surroundings regardless of the original pixel value. For this reason, the dark portion of the bright region is darker and the bright portion of the dark region is corrected brighter, and a natural and uncontrast contrast correction result can be obtained.
上記の手順でコントラスト補正された画像の例を図５に示す。ここで、図５（ａ）は、補正前の画像を示し、図５（ｂ）は、コントラスト補正後の画像を示している。図１０（ｂ）に示した従来のコントラスト補正後の画像と比べて、図５（ｂ）に示した画像は、明るい領域の暗い部分はより暗く、暗い領域の明るい部分はより明るく補正されており、また、明るい部分の階調変化が保たれており、自然で違和感のないコントラスト補正結果が得られている。 FIG. 5 shows an example of an image whose contrast has been corrected by the above procedure. Here, FIG. 5A shows an image before correction, and FIG. 5B shows an image after contrast correction. Compared with the conventional image after contrast correction shown in FIG. 10B, the image shown in FIG. 5B is corrected so that the dark part of the bright region is darker and the bright part of the dark region is corrected brighter. In addition, the gradation change in the bright part is maintained, and a natural and comfortable contrast correction result is obtained.
次に、コントラスト補正部１２０の構成の第２実施例について説明する。第１実施例では、自然で違和感のないコントラスト補正結果を得ることができるが、画像によっては、特定の色に対して過補正となる補正結果が得られる場合がある。これは、原画像ＩとしてＲＧＢ信号を用い、照明光成分Ｌが輝度信号Ｙに基づくことから発生すると考えられる。 Next, a second embodiment of the configuration of the contrast correction unit 120 will be described. In the first embodiment, a natural and comfortable contrast correction result can be obtained, but depending on the image, a correction result that is overcorrected for a specific color may be obtained. This is considered to occur because an RGB signal is used as the original image I and the illumination light component L is based on the luminance signal Y.
すなわち、上述のようにＲＧＢ信号から［数６］にしたがって輝度成分Ｙを得ることができる。ここで、原画像Ｉが白黒画像の場合は、
Ｙ＝Ｒ＝Ｇ＝Ｂ
となり、なおかつ平坦で一様な画像であれば、平滑化しても値が変わらないため、Ｙ＝Ｌであり、
Ｒ／Ｌ＝Ｇ／Ｌ＝Ｂ／Ｌ＝１
となる。この場合、［数９］の補正パラメータは、定数Ｋとなる。簡単のため、定数Ｋを１とすると、補正パラメータは１となり、補正は行なわれないことになる。
That is, the luminance component Y can be obtained from the RGB signal according to [Equation 6] as described above. Here, when the original image I is a black and white image,
Y = R = G = B
If the image is flat and uniform, the value does not change even after smoothing, so Y = L,
R / L = G / L = B / L = 1
It becomes. In this case, the correction parameter of [Equation 9] is a constant K. For simplicity, if the constant K is 1, the correction parameter is 1, and no correction is performed.
これに対し、例えば、赤一色の平坦な画像の場合、
Ｙ＝０．３０＊Ｒ
となるため、
Ｒ／Ｌ＝３．３３
となり、平坦な画像にもかかわらず、補正パラメータは約３．３となり、過補正となる。
On the other hand, for example, in the case of a flat image of one red color,
Y = 0.30 * R
So that
R / L = 3.33
Even though the image is flat, the correction parameter is about 3.3, which is overcorrection.
そこで、第２実施例では、色の濃い部分は色を抑えるように処理を行なうことで過補正を防ぐようにする。 Therefore, in the second embodiment, overcorrection is prevented by performing processing so as to suppress the color in dark portions.
ＹＣｂＣｒ色空間で用いられる色差成分Ｃｒ、Ｃｂは、それぞれ、Ｒ−Ｙ、Ｇ−Ｙに比例するため、輝度成分Ｙによって、見た目の色の濃さが変化し、色差信号が同じ値でも、暗くなるほど、色が濃く見えることになる。したがって、第２実施例では、見た目の色の濃さを表す彩度Ｓを考慮し、Ｓ／Ｙにより、輝度成分Ｙに関わらない色の濃さを基準として、色の濃い部分は色を抑えるよう処理を行なうものとする。 Since the color difference components Cr and Cb used in the YCbCr color space are proportional to R-Y and G-Y, respectively, the darkness of the apparent color changes depending on the luminance component Y, and even if the color difference signal has the same value, it is dark. I see, the color looks darker. Therefore, in the second embodiment, the saturation S representing the color density of the appearance is taken into consideration, and the color is suppressed in S / Y based on the color density that is not related to the luminance component Y. It is assumed that processing is performed.
図６は、コントラスト補正部の構成の第２実施例であるコントラスト補正部１２０ａを示すブロック図である。第１実施例と同じ機能ブロックについては同じ符号を付し、説明を簡略化する。 FIG. 6 is a block diagram showing a contrast correction unit 120a which is a second embodiment of the configuration of the contrast correction unit. The same functional blocks as those in the first embodiment are denoted by the same reference numerals, and the description is simplified.
本図に示すようにコントラスト補正部１２０ａは、画像抽出部１２１ａと、フィルタリング部１２２と、レチネックス処理部１２３と、補正パラメータ算出部１２４ａと、乗算部１２５と、彩度算出部１２６と、彩度ゲイン算出部１２７とを備えている。第１実施例であるコントラスト補正部１２０とは、画像抽出部１２１ａと補正パラメータ算出部１２４ａとが異なる。 As shown in the figure, the contrast correction unit 120a includes an image extraction unit 121a, a filtering unit 122, a Retinex processing unit 123, a correction parameter calculation unit 124a, a multiplication unit 125, a saturation calculation unit 126, and a saturation. A gain calculation unit 127. The image extraction unit 121a and the correction parameter calculation unit 124a are different from the contrast correction unit 120 according to the first embodiment.
画像抽出部１２１ａは、ＲＧＢで表わされた原画像Ｉから輝度成分Ｙ、色差成分Ｃｒ、Ｃｂを抽出する。ＲＧＢ形式から色差成分Ｃｒ、Ｃｂの抽出は、例えば、［数１１］にしたがって行なうことができる。
彩度ゲイン算出部１２７は、彩度Ｓおよび輝度成分Ｙに基づいて彩度ゲインＧｓを算出する。図７は、彩度ゲイン算出部１２７の構成を示すブロック図である。本図に示すように、彩度ゲイン算出部１２７は、色濃度算出部１２７１と、減算部１２７２と、彩度ゲイン制御部１２７３と、リミット処理部１２７４とを備えている。 The saturation gain calculation unit 127 calculates a saturation gain Gs based on the saturation S and the luminance component Y. FIG. 7 is a block diagram illustrating a configuration of the saturation gain calculation unit 127. As shown in the figure, the saturation gain calculation unit 127 includes a color density calculation unit 1271, a subtraction unit 1272, a saturation gain control unit 1273, and a limit processing unit 1274.
色濃度算出部１２７１は、彩度Ｓと輝度成分Ｙとから、Ｓ／Ｙを算出する。ここでは、Ｓ／Ｙを色の濃さとし、Ｓ／Ｙが大きいほど色が濃いものとする。減算部１２７２は、定数ＴからＳ／Ｙを減算して第１色濃度指標値Ｓ１を算出する。すなわち、Ｓ１＝Ｔ−Ｓ／Ｙであり、第１色濃度指標値Ｓ１は、Ｓ／Ｙと負の相関関係となり、第１色濃度指標値Ｓ１は、色が濃いほど小さな値となる。したがって、色が濃いほど彩度ゲインＧｓが小さくなり、色が抑えられることになり、過補正を防ぐことができる。なお、定数Ｔは、Ｓ／Ｙの最大値をＳｍａｘとした場合、Ｔ≦Ｓｍａｘを満たす値とする。 The color density calculation unit 1271 calculates S / Y from the saturation S and the luminance component Y. Here, it is assumed that S / Y is the color density, and that the color is darker as S / Y is larger. The subtractor 1272 calculates the first color density index value S1 by subtracting S / Y from the constant T. That is, S1 = TS / Y, the first color density index value S1 has a negative correlation with S / Y, and the first color density index value S1 becomes smaller as the color is darker. Therefore, as the color is darker, the saturation gain Gs becomes smaller, the color is suppressed, and overcorrection can be prevented. The constant T is a value satisfying T ≦ Smax when the maximum value of S / Y is Smax.
彩度ゲイン制御部１２７３は、第１色濃度指標値Ｓ１の値を係数Ｓａｔによって制御する。具体的には、
Ｓ２＝Ｓ１＊Ｓａｔ
によって、第２色濃度指標値Ｓ２を算出する。係数Ｓａｔは彩度ゲインＧｓの効果を制御する値であり、例えば、０〜１の範囲で１０段階の値とすることができるが、さらに詳細に設定することも可能である。また、原画像Ｉの情報により、係数Ｓａｔの値を動的に制御してもよい。
The saturation gain control unit 1273 controls the value of the first color density index value S1 by the coefficient Sat. In particular,
S2 = S1 * Sat
Thus, the second color density index value S2 is calculated. The coefficient Sat is a value that controls the effect of the saturation gain Gs. For example, the coefficient Sat can be set to 10 levels in the range of 0 to 1, but can also be set in more detail. Further, the value of the coefficient Sat may be dynamically controlled based on the information of the original image I.
リミット処理部１２７４は、彩度ゲイン制御部１２７３によって算出された第２色濃度指標値Ｓ２に対して、リミット値Ｌｍｔにより、リミット処理を行ない、その結果を彩度ゲインＧｓとして出力する。 The limit processing unit 1274 performs limit processing on the second color density index value S2 calculated by the saturation gain control unit 1273 using the limit value Lmt, and outputs the result as the saturation gain Gs.
図６の説明に戻って、補正パラメータ算出部１２４ａは、補正パラメータ算出部Ｒ１２４ａｒ、補正パラメータ算出部Ｇ１２４ａｇ、補正パラメータ算出部Ｂ１２４ａｂを含み、それぞれＲ成分、Ｇ成分、Ｂ成分について、レチネックス処理結果Ｉｉ／Ｌと、彩度ゲインＧｓを用いて補正パラメータＰｉを算出する。 Returning to the description of FIG. 6, the correction parameter calculation unit 124a includes a correction parameter calculation unit R124ar, a correction parameter calculation unit G124ag, and a correction parameter calculation unit B124ab, and the Retinex processing result I for R component, G component, and B component, respectively. and i / L, and calculates a correction parameter P i using the saturation gain Gs.
補正パラメータＰｉは、例えば、［数１２］にしたがってＲ成分、Ｇ成分、Ｂ成分毎に算出することができる。
このように、第２実施例では、原画像Ｉと乗算する補正パラメータＰの算出に、彩度Ｓおよび輝度成分Ｙによって算出される色の濃さを反映させた値を用いることにより、コントラストのみだけではなく、カラーも強調され、かつ過補正のない補正画像を得ることが可能となる。 As described above, in the second embodiment, only the contrast is obtained by using the value reflecting the color density calculated by the saturation S and the luminance component Y in the calculation of the correction parameter P to be multiplied with the original image I. In addition to this, it is possible to obtain a corrected image in which color is emphasized and no overcorrection is performed.
次に、上記構成の画像処理装置１００の第２実施例におけるコントラスト補正処理の手順について図８のフローチャートを参照して説明する。 Next, the procedure of contrast correction processing in the second embodiment of the image processing apparatus 100 having the above configuration will be described with reference to the flowchart of FIG.
まず、画像入力部１１０が、外部装置等から原画像を入力され、ＲＧＢ成分毎の画像データである原画像Ｉ（Ｉｒ，Ｉｇ，Ｉｂ）をコントラスト補正部１２０ａに出力する（Ｓ２０１）。次いで、画像抽出部１２１ａが、ＲＧＢ成分に基づいて輝度成分Ｙ、色差成分Ｃｒ、Ｃｂを抽出する（Ｓ２０２）。 First, the image input unit 110 receives an original image from an external device or the like, and outputs an original image I (Ir, Ig, Ib), which is image data for each RGB component, to the contrast correction unit 120a (S201). Next, the image extraction unit 121a extracts the luminance component Y and the color difference components Cr and Cb based on the RGB components (S202).
抽出された輝度成分Ｙを、フィルタリング部１２２においてフィルタＦでフィルタリングすることにより、照明光成分Ｌが得られる（Ｓ２０３）。そして、レチネックス処理部１２３が、原画像ＩのＲＧＢ各成分を照明光成分Ｌで除算するレチネックス処理を行なう（Ｓ２０４）。 By filtering the extracted luminance component Y with the filter F in the filtering unit 122, an illumination light component L is obtained (S203). Then, the Retinex processing unit 123 performs Retinex processing for dividing the RGB components of the original image I by the illumination light component L (S204).
この処理とは別に、彩度算出部１２６が、色差成分Ｃｒ、Ｃｂから彩度Ｓを算出する（Ｓ２０５）。そして、彩度ゲイン算出部１２７が、彩度Ｓと輝度成分Ｙとから彩度ゲインＧｓを算出する（Ｓ２０６）。 Separately from this processing, the saturation calculation unit 126 calculates the saturation S from the color difference components Cr and Cb (S205). Then, the saturation gain calculator 127 calculates the saturation gain Gs from the saturation S and the luminance component Y (S206).
レチネックス処理結果Ｉｉ／Ｌおよび彩度ゲインＧｓが得られると、補正パラメータ算出部１２４ａが、［数１２］あるいは［数１３］にしたがって補正パラメータＰｉを算出する（Ｓ２０７）。 When Retinex processing result I i / L and saturation gain Gs is obtained, the correction parameter calculating unit 124a calculates the correction parameter P i in accordance with Equation 12] or [Formula 13] (S207).
次いで、乗算部１２５が補正パラメータＰｉと原画像Ｉｉとを乗算することで補正画像Ｏｉを生成する（Ｓ２０８）。補正画像Ｏｉは、画像出力部１３０によって、補正後の画像として外部装置等に出力される（Ｓ２０９）。 Then, to generate a corrected image O i by multiplying unit 125 multiplies the correction parameter P i and the original image I i (S208). The corrected image O i is output to the external device or the like as a corrected image by the image output unit 130 (S209).
第２実施例においても、レチネックス処理で用いられる照明光成分Ｌは輝度成分Ｙをフィルタリングによりぼかした値であるため、周辺画素の値を平滑化した値である。本実施形態では、照明光成分Ｌと原画像Ｉとの関係に基づいて補正パラメータを定めているため、元の画素値に関わらず、周辺の明るさによって補正がなされることになる。 Also in the second embodiment, since the illumination light component L used in the Retinex process is a value obtained by blurring the luminance component Y by filtering, it is a value obtained by smoothing the values of surrounding pixels. In the present embodiment, since the correction parameter is determined based on the relationship between the illumination light component L and the original image I, the correction is performed based on the brightness of the surroundings regardless of the original pixel value.
さらに、第２実施例では、原画像Ｉと乗算する補正パラメータＰの算出に、彩度Ｓおよび輝度成分Ｙによって算出される色の濃さを反映させた値を用いている。これにより、明るい領域の暗い部分はより暗く、暗い領域の明るい部分はより明るく補正されることになり、自然で違和感のないコントラスト補正結果を得るとともに、カラーも強調され、かつ過補正のない補正画像を得ることができる。 Further, in the second embodiment, a value reflecting the color intensity calculated by the saturation S and the luminance component Y is used for calculating the correction parameter P to be multiplied with the original image I. As a result, the dark part of the bright area is darker and the bright part of the dark area is corrected more brightly, so that a natural and uncomfortable contrast correction result is obtained, the color is also emphasized, and there is no overcorrection. An image can be obtained.
１００…画像処理装置
１１０…画像入力部
１２０、１２０ａ…コントラスト補正部
１２１、１２１ａ…画像抽出部
１２２…フィルタリング部
１２３…レチネックス処理部
１２４、１２４ａ…補正パラメータ算出部
１２５…乗算部
１２６…彩度算出部
１２７…彩度ゲイン算出部
１３０…画像出力部
１２７１…色濃度算出部
１２７２…減算部
１２７３…彩度ゲイン制御部
１２７４…リミット処理部
DESCRIPTION OF SYMBOLS 100 ... Image processing apparatus 110 ... Image input part 120, 120a ... Contrast correction part 121, 121a ... Image extraction part 122 ... Filtering part 123 ... Retinex processing part 124, 124a ... Correction parameter calculation part 125 ... Multiplication part 126 ... Saturation calculation Unit 127 ... saturation gain calculation unit 130 ... image output unit 1271 ... color density calculation unit 1272 ... subtraction unit 1273 ... saturation gain control unit 1274 ... limit processing unit
Claims (8)
前記入力画像データを抽出された前記照明光成分で除算することにより入力画像データの反射率成分を算出する反射率成分算出処理手段と、
算出された前記反射率成分に基づいて補正パラメータを算出する補正パラメータ算出手段と、
算出された前記補正パラメータと前記入力画像データとを乗算することにより補正画像データを生成する乗算手段とを備えたことを特徴とする画像処理装置。 Filtering means for extracting the illumination light component of the input image data;
A reflectance component calculation processing means for calculating a reflectance component of the input image data by dividing the input image data by the extracted illumination light component;
Correction parameter calculation means for calculating a correction parameter based on the calculated reflectance component;
An image processing apparatus comprising: a multiplying unit configured to generate corrected image data by multiplying the calculated correction parameter and the input image data.
前記補正パラメータ算出手段は、前記反射率成分と定数とを乗じることで前記補正パラメータを算出することを特徴とする画像処理装置。 The image processing apparatus according to claim 1,
The image processing apparatus, wherein the correction parameter calculation means calculates the correction parameter by multiplying the reflectance component and a constant.
前記入力画像データを抽出された前記照明光成分で除算することにより入力画像データの反射率成分を算出する反射率成分算出処理手段と、
前記入力画像データの彩度成分と輝度成分との比と負の相関関係にある彩度ゲインを算出する彩度ゲイン算出手段と、
算出された前記反射率成分および前記彩度ゲインに基づいて補正パラメータを算出する補正パラメータ算出手段と、
算出された前記補正パラメータと前記入力画像データとを乗算することにより補正画像データを生成する乗算手段とを備えたことを特徴とする画像処理装置。 Filtering means for extracting the illumination light component of the input image data;
A reflectance component calculation processing means for calculating a reflectance component of the input image data by dividing the input image data by the extracted illumination light component;
A saturation gain calculating means for calculating a saturation gain that is negatively correlated with the ratio between the saturation component and the luminance component of the input image data;
Correction parameter calculation means for calculating a correction parameter based on the calculated reflectance component and the saturation gain;
An image processing apparatus comprising: a multiplying unit configured to generate corrected image data by multiplying the calculated correction parameter and the input image data.
前記補正パラメータ算出手段は、前記反射率成分と前記彩度ゲインとを乗じることで前記補正パラメータを算出することを特徴とする画像処理装置。 The image processing apparatus according to claim 3,
The image processing apparatus, wherein the correction parameter calculation means calculates the correction parameter by multiplying the reflectance component and the saturation gain.
前記反射率成分算出処理手段は、前記入力画像データの各画素についてＲＧＢ成分毎に反射率成分を算出し、
前記補正パラメータ算出手段は、前記入力画像データの各画素についてＲＧＢ成分毎に補正パラメータを算出することを特徴とする画像処理装置。 The image processing apparatus according to any one of claims 1 to 4,
The reflectance component calculation processing means calculates a reflectance component for each RGB component for each pixel of the input image data,
The image processing apparatus, wherein the correction parameter calculation means calculates a correction parameter for each RGB component for each pixel of the input image data.
前記フィルタリング手段は、前記入力画像データの輝度成分に対して平滑化フィルタを施すことで前記照明光成分を抽出することを特徴とする画像処理装置。 An image processing apparatus according to any one of claims 1 to 5,
The image processing apparatus, wherein the filtering means extracts the illumination light component by applying a smoothing filter to a luminance component of the input image data.
前記入力画像データを抽出された前記照明光成分で除算することにより入力画像データの反射率成分を算出する反射率成分算出ステップと、
算出された前記反射率成分に基づいて補正パラメータを算出する補正パラメータ算出ステップと、
算出された前記補正パラメータと前記入力画像データとを乗算することにより補正画像データを生成する乗算ステップとを含むことを特徴とする画像処理方法。 A filtering step for extracting the illumination light component of the input image data;
A reflectance component calculating step of calculating a reflectance component of the input image data by dividing the input image data by the extracted illumination light component;
A correction parameter calculating step for calculating a correction parameter based on the calculated reflectance component;
An image processing method comprising: a multiplication step of generating corrected image data by multiplying the calculated correction parameter and the input image data.
前記入力画像データを抽出された前記照明光成分で除算することにより入力画像データの反射率成分を算出する反射率成分算出ステップと、
前記入力画像データの彩度成分と輝度成分との比と負の相関関係にある彩度ゲインを算出する彩度ゲイン算出ステップと、
算出された前記反射率成分および前記彩度ゲインに基づいて補正パラメータを算出する補正パラメータ算出ステップと、
算出された前記補正パラメータと前記入力画像データとを乗算することにより補正画像データを生成する乗算ステップとを含むことを特徴とする画像処理方法。 A filtering step for extracting the illumination light component of the input image data;
A reflectance component calculating step of calculating a reflectance component of the input image data by dividing the input image data by the extracted illumination light component;
A saturation gain calculating step for calculating a saturation gain that is negatively correlated with the ratio between the saturation component and the luminance component of the input image data;
A correction parameter calculating step for calculating a correction parameter based on the calculated reflectance component and the saturation gain;
An image processing method comprising: a multiplication step of generating corrected image data by multiplying the calculated correction parameter and the input image data.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2009235896A JP5392560B2 (en) | 2009-10-13 | 2009-10-13 | Image processing apparatus and image processing method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2009235896A JP5392560B2 (en) | 2009-10-13 | 2009-10-13 | Image processing apparatus and image processing method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2011086976A true JP2011086976A (en) | 2011-04-28 |
| JP5392560B2 JP5392560B2 (en) | 2014-01-22 |
Family
ID=44079636
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2009235896A Active JP5392560B2 (en) | 2009-10-13 | 2009-10-13 | Image processing apparatus and image processing method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5392560B2 (en) |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101241347B1 (en) | 2011-08-19 | 2013-03-11 | 전남대학교산학협력단 | Device and method for correcting contrast of image using weighted value of luminance and Illumination mask |
| KR101389932B1 (en) | 2011-11-29 | 2014-04-29 | 연세대학교 산학협력단 | Apparatus and method for performing tone mapping for image |
| WO2014162533A1 (en) * | 2013-04-03 | 2014-10-09 | 日立マクセル株式会社 | Video display device |
| JP2015517167A (en) * | 2013-04-19 | 2015-06-18 | 華為技術有限公司Ｈｕａｗｅｉ Ｔｅｃｈｎｏｌｏｇｉｅｓ Ｃｏ．，Ｌｔｄ． | Method and apparatus for enhancing color |
| JP2015192203A (en) * | 2014-03-27 | 2015-11-02 | 日立マクセル株式会社 | Video processing apparatus and projector using the same |
| JP2017037622A (en) * | 2015-08-10 | 2017-02-16 | 富士ゼロックス株式会社 | Image processing device and program |
| US10026152B2 (en) | 2016-01-18 | 2018-07-17 | Fuji Xerox Co., Ltd. | Image processing apparatus for providing visibility of an image while maintaining color in a natural state |
| EP3588930A1 (en) | 2018-06-29 | 2020-01-01 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and program |
| US10848644B2 (en) | 2018-06-29 | 2020-11-24 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and non-transitory computer-readable storage medium |
| US11108999B2 (en) | 2019-02-27 | 2021-08-31 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and non-transitory computer-readable storage medium |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005039456A (en) * | 2003-07-18 | 2005-02-10 | Canon Inc | Image processing method and apparatus |
| JP2006115444A (en) * | 2004-09-17 | 2006-04-27 | Nikon Corp | Method, device, program for image processing, and electronic camera |
| JP2007174482A (en) * | 2005-12-26 | 2007-07-05 | Konica Minolta Holdings Inc | Imaging apparatus, image processing method, and image processing program |
| JP2008118182A (en) * | 2006-10-31 | 2008-05-22 | Brother Ind Ltd | Image processing program and image processing apparatus |
-
2009
- 2009-10-13 JP JP2009235896A patent/JP5392560B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005039456A (en) * | 2003-07-18 | 2005-02-10 | Canon Inc | Image processing method and apparatus |
| JP2006115444A (en) * | 2004-09-17 | 2006-04-27 | Nikon Corp | Method, device, program for image processing, and electronic camera |
| JP2007174482A (en) * | 2005-12-26 | 2007-07-05 | Konica Minolta Holdings Inc | Imaging apparatus, image processing method, and image processing program |
| JP2008118182A (en) * | 2006-10-31 | 2008-05-22 | Brother Ind Ltd | Image processing program and image processing apparatus |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101241347B1 (en) | 2011-08-19 | 2013-03-11 | 전남대학교산학협력단 | Device and method for correcting contrast of image using weighted value of luminance and Illumination mask |
| KR101389932B1 (en) | 2011-11-29 | 2014-04-29 | 연세대학교 산학협력단 | Apparatus and method for performing tone mapping for image |
| WO2014162533A1 (en) * | 2013-04-03 | 2014-10-09 | 日立マクセル株式会社 | Video display device |
| US9565388B2 (en) | 2013-04-03 | 2017-02-07 | Hitachi Maxell, Ltd. | Video display device |
| JP2015517167A (en) * | 2013-04-19 | 2015-06-18 | 華為技術有限公司Ｈｕａｗｅｉ Ｔｅｃｈｎｏｌｏｇｉｅｓ Ｃｏ．，Ｌｔｄ． | Method and apparatus for enhancing color |
| JP2015192203A (en) * | 2014-03-27 | 2015-11-02 | 日立マクセル株式会社 | Video processing apparatus and projector using the same |
| JP2017037622A (en) * | 2015-08-10 | 2017-02-16 | 富士ゼロックス株式会社 | Image processing device and program |
| US10026152B2 (en) | 2016-01-18 | 2018-07-17 | Fuji Xerox Co., Ltd. | Image processing apparatus for providing visibility of an image while maintaining color in a natural state |
| EP3588930A1 (en) | 2018-06-29 | 2020-01-01 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and program |
| US10848644B2 (en) | 2018-06-29 | 2020-11-24 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and non-transitory computer-readable storage medium |
| US11323576B2 (en) | 2018-06-29 | 2022-05-03 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and non-transitory computer-readable medium |
| US11108999B2 (en) | 2019-02-27 | 2021-08-31 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and non-transitory computer-readable storage medium |
Also Published As
| Publication number | Publication date |
|---|---|
| JP5392560B2 (en) | 2014-01-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5392560B2 (en) | Image processing apparatus and image processing method | |
| JP5157753B2 (en) | Image processing apparatus, image processing method, and image processing program | |
| US8154628B2 (en) | Image processing apparatus and imaging apparatus and method | |
| KR101099401B1 (en) | Image processing apparatus and computer-readable medium | |
| JP4894595B2 (en) | Image processing apparatus and method, and program | |
| JP5901667B2 (en) | Image processing apparatus and method, image processing program, and imaging apparatus | |
| JP2010039758A (en) | Image processor and image processing method | |
| JP4111980B2 (en) | Image processing apparatus and image processing method | |
| WO2018159162A1 (en) | Image processing device, control method therefor, and program | |
| JP2006114005A (en) | Gradation conversion apparatus, program, electronic camera, and method therefor | |
| US8648937B2 (en) | Image processing apparatus, image processing method, and camera module | |
| KR101113483B1 (en) | Apparatus for enhancing visibility of color image | |
| JP2011228807A (en) | Image processing program, image processing apparatus, and image processing method | |
| JP5410378B2 (en) | Video signal correction apparatus and video signal correction program | |
| JP5365881B2 (en) | Image processing apparatus and image processing method | |
| JP5142833B2 (en) | Image processing apparatus and image processing method | |
| JP2006114006A (en) | Gradation conversion apparatus, program, electronic camera, and method therefor | |
| JP2011120299A (en) | Gradation conversion apparatus, program, electronic camera, and method therefor | |
| JP2015211320A (en) | Image processing apparatus, control method thereof and program | |
| JP5561389B2 (en) | Image processing program, image processing apparatus, electronic camera, and image processing method | |
| JP2008227959A (en) | Image processing device, image processing method and image processing system | |
| JP2002262130A (en) | Image processor | |
| CN116939374B (en) | Lens shading correction method and device and electronic equipment | |
| JP2009044628A (en) | Image processing apparatus and image processing method | |
| JP2005004582A (en) | Image processing apparatus, image processing program, and electronic camera |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20111012 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120329 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130214 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130826 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130919 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20131002 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 5392560 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |