JP2009188744A - Image processor - Google Patents

Image processor Download PDF

Info

Publication number
JP2009188744A
JP2009188744A JP2008026654A JP2008026654A JP2009188744A JP 2009188744 A JP2009188744 A JP 2009188744A JP 2008026654 A JP2008026654 A JP 2008026654A JP 2008026654 A JP2008026654 A JP 2008026654A JP 2009188744 A JP2009188744 A JP 2009188744A
Authority
JP
Japan
Prior art keywords
color
image
signal
color space
image signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008026654A
Other languages
Japanese (ja)
Other versions
JP5063394B2 (en
Inventor
Masahiko Takiguchi
昌彦 瀧口
Akira Koike
晃 小池
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2008026654A priority Critical patent/JP5063394B2/en
Publication of JP2009188744A publication Critical patent/JP2009188744A/en
Application granted granted Critical
Publication of JP5063394B2 publication Critical patent/JP5063394B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Color Image Communication Systems (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Image Processing (AREA)
  • Processing Of Color Television Signals (AREA)
  • Facsimile Image Signal Circuits (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To perform color representation processing according to a detected color region included in an image signal acquired from the outside. <P>SOLUTION: When acquiring an image signal from the outside, a television device 1 detects if a value belonging to the region of an xvYCC color space extended from an sRGB color space is included in YCbCr signals concerning the acquired image signal. The television device 1 also detects if a negative value as a RGB value, and a value larger than 1 as the RGB value are included in the RGB values RGB-converted from the acquired image signal. When the detection result is YES, the television device 1 performs a color representation processing conforming to the xvYCC color space, and on the other hand, if the detection results are all NO, it performs the color representation processing conforming to the sRGB space. Thereby, the television device 1 automatically and suitably switches to the optimal color representation processing even if a user does not designate the processing concerning color representation. <P>COPYRIGHT: (C)2009,JPO&INPIT

Description

本発明は、外部から取得した画像信号に係る色信号に含まれる値に応じて、最適な色表現処理を自動で適宜切り替えられるようにした画像処理装置に関する。   The present invention relates to an image processing apparatus capable of automatically and appropriately switching an optimal color expression process according to a value included in a color signal related to an image signal acquired from the outside.

画像の色域を規定する色空間の1つとしてRGB系の色空間が存在し、その中にはsRGB(standard RGB)色空間が、国際電気標準会議(IEC)で規定されており、従来の一般的な表示装置、プリンタ装置、およびデジタルカメラ等の色再現を行う各種機器は、sRGB色空間に係るsRGB信号に準拠していることが多い。このsRGB信号に応じた画像信号に基づく表示処理を行う従来の一般的な表示装置では、表示対象となる画像のsRGB信号に負の値または1以上の値が含まれていれば、通常、これらの値をクリッピング(負の値は0として処理し、1以上の値は1として処理すること)する。それから、クリッピングした信号値を含む画像を、表示装置の表示デバイス(例えば、表示パネル)のRGB値に応じた色表現範囲のビット数(一般には8ビットの256階調)へ割り当て(マッピング)、sRGB信号に応じた色表現処理を行う。   There is an RGB color space as one of the color spaces that define the color gamut of an image. Among them, the sRGB (standard RGB) color space is defined by the International Electrotechnical Commission (IEC). Various devices that perform color reproduction, such as general display devices, printer devices, and digital cameras, often conform to sRGB signals in the sRGB color space. In a conventional general display device that performs display processing based on an image signal corresponding to the sRGB signal, if the sRGB signal of the image to be displayed contains a negative value or one or more values, these are usually Is clipped (a negative value is treated as 0 and a value greater than 1 is treated as 1). Then, an image including the clipped signal value is assigned (mapped) to the number of bits of the color expression range (generally 256 tones of 8 bits) according to the RGB value of the display device (for example, display panel) of the display device, Color expression processing according to the sRGB signal is performed.

また、RGB系の色空間と異なる他の色空間としては、YCbCr(YUVまたはYCCと称される場合もある)色空間が用いられる場合もある。このYCbCr色空間に係るYCbCr信号は、画像の色域を、色差(青色の色差と赤色の色差)および輝度によって規定しており、YCbCr信号に応じた画像の従来の一般的な表示処理では、256段階(8ビット)で分けられる色差値の範囲の中で、1以上15以下の範囲と、241以上254以下の範囲に属する色差値がクリッピングされる。   As another color space different from the RGB color space, a YCbCr (sometimes referred to as YUV or YCC) color space may be used. The YCbCr signal related to this YCbCr color space defines the color gamut of the image by the color difference (blue color difference and red color difference) and luminance. In the conventional general display processing of an image according to the YCbCr signal, Among the color difference value ranges divided in 256 steps (8 bits), color difference values belonging to a range of 1 to 15 and a range of 241 to 254 are clipped.

さらに、昨今では、上述したsRGB色空間を包含する色域としてxvYCC色空間が規定されている。このxvYCC色空間に応じたxvYCC信号の画像を表示する際には、上述したsRGB信号およびYCbCr信号の表示処理で、クリッピングされていた範囲も、クリッピングすることなく表示デバイスの色表現範囲へマッピングすると云うxvYCC信号に応じた色表現処理を行えば、それにより、高い色表現性で、より鮮やかな色、深みのある色を再現することが可能となる。なお、xvYCC色空間は、sRGB信号およびYCbCr信号の表示処理でクリッピングされていた色空間の範囲を含んでおり、このような色空間の範囲は、一般に「拡張された色空間」と称されることが多い。   Furthermore, in recent years, the xvYCC color space is defined as a color gamut including the sRGB color space described above. When displaying an image of an xvYCC signal corresponding to this xvYCC color space, if the range clipped in the display processing of the sRGB signal and YCbCr signal described above is mapped to the color expression range of the display device without clipping. If color expression processing according to the xvYCC signal is performed, it is possible to reproduce more vivid colors and deep colors with high color expression. Note that the xvYCC color space includes the range of the color space clipped by the display processing of the sRGB signal and the YCbCr signal, and such a color space range is generally referred to as an “extended color space”. There are many cases.

また、色空間に応じた画像の表示処理を行う装置の形態としては、テレビジョン装置のように表示デバイスを有する表示装置の形態と、録画装置またはセットトップボックス等のように表示デバイスを有しない装置の形態が考えられる。後者の場合、画像の表示処理を行う装置は、外部の表示装置と接続される共に、表示処理を行った画像信号を外部の表示装置へ出力することで、外部の表示装置に画像を表示させることになる。   In addition, as a form of an apparatus that performs an image display process according to a color space, a form of a display apparatus having a display device such as a television apparatus and a display apparatus such as a recording apparatus or a set top box are not provided. Device configurations are possible. In the latter case, a device that performs image display processing is connected to an external display device and outputs an image signal subjected to display processing to the external display device, thereby displaying the image on the external display device. It will be.

一方、下記の特許文献1では、表示パネル等の表示デバイスの色再現特性に関係なく、良好な色再現特性を発揮できるようにするため、複数種類の色変換特性データに基づき、表示対象となる画像データに対して複数回の色変換処理を、ユーザの操作に従って行う画像表示装置が開示されている。
特開2007−17862号公報
On the other hand, in Patent Document 1 below, in order to be able to exhibit good color reproduction characteristics regardless of the color reproduction characteristics of a display device such as a display panel, the display target is based on a plurality of types of color conversion characteristic data. An image display apparatus that performs color conversion processing a plurality of times on image data in accordance with a user operation is disclosed.
JP 2007-17862 A

近時、sRGB信号に応じた色表現処理に加えて、xvYCC信号に応じた色表現処理にも対応可能な表示装置(xvYCC信号に対応可能なテレビジョン装置)が登場している。このテレビジョン装置では、ユーザの操作により、sRGB信号に応じた色表現処理またはxvYCC信号に応じた色表現処理の実行を切り替えるようになっている。そのため、仮に、テレビジョン放送で送られてくる画像が、sRGB信号に応じたものと、xvYCC信号に応じたものが放送時間帯によって切り替わるような状況になると、色表現処理の切替に係るユーザの操作負担が多大になると云う問題が生じる。より具体的な状況を想定すると、たとえば、xvYCC信号に応じた番組コンテンツ(例えば、映画番組)が放送される合間に、sRGB信号に応じたコマーシャル映像が放送されると、上述したテレビジョン装置のユーザは、放送内容がコマーシャル映像から番組コンテンツへ切り替わるたびに、画像の色表示処理を切り替える操作を行う必要が生じ、リラックスしてテレビジョン放送を楽しむことが妨げられる。なお、対象となるテレビジョン放送としては、放送電波で送られてくるもの、ケーブルテレビのようにケーブルを通じて送られてくるもの、ネットワークを通じて送られてくるものなどがある。   Recently, in addition to color representation processing according to sRGB signals, display devices (television devices capable of handling xvYCC signals) that can cope with color representation processing according to xvYCC signals have appeared. In this television apparatus, execution of color expression processing according to the sRGB signal or color expression processing according to the xvYCC signal is switched by a user operation. For this reason, if an image transmitted by television broadcasting is in a situation where the image corresponding to the sRGB signal and the image corresponding to the xvYCC signal are switched depending on the broadcast time zone, the user involved in switching the color expression processing There arises a problem that the operation burden becomes large. Assuming a more specific situation, for example, when a commercial video corresponding to an sRGB signal is broadcasted while a program content (for example, a movie program) corresponding to an xvYCC signal is broadcast, Each time the broadcast content is switched from commercial video to program content, the user needs to perform an operation of switching the color display processing of the image, and is prevented from relaxing and enjoying television broadcasting. Note that the target television broadcasts include those sent by broadcast radio waves, those sent via a cable like cable television, and those sent via a network.

また、上述したようなテレビジョン装置は通常、外部入力端子を有しており、この外部入力端子を介して録画装置、デジタルビデオカメラ、デジタルカメラ等の画像出力が可能な外部機器と接続が可能になっている。これらの外部機器が、sRGB信号に応じた画像またはxvYCC信号に応じた画像の両方を出力可能であれば、上述したテレビジョン放送の場合と同様な問題が生じる。すなわち、外部機器が出力する画像に係る色信号の種類が、sRGB信号であるか、またはxvYCC信号であるかをユーザが随時確認し、確認結果に応じた色表示処理に切り替える操作を行わねばならず、ユーザの操作負担が大きいと云う問題がある。さらに、このような問題は、テレビジョン装置が有線を通じて取得した画像だけでなく、赤外線通信(例えば、IrSS)のような無線通信で取得した画像に対する色表示処理を行う場合でも同様に生じる。   In addition, a television device as described above usually has an external input terminal, and can be connected to an external device capable of outputting an image such as a recording device, a digital video camera, or a digital camera via the external input terminal. It has become. If these external devices can output both an image corresponding to the sRGB signal or an image corresponding to the xvYCC signal, the same problem as in the case of television broadcasting described above occurs. That is, it is necessary for the user to check at any time whether the type of the color signal related to the image output from the external device is an sRGB signal or an xvYCC signal, and to perform an operation of switching to a color display process according to the confirmation result. However, there is a problem that the operation burden on the user is large. Furthermore, such a problem similarly occurs when performing color display processing on an image acquired by wireless communication such as infrared communication (for example, IrSS) as well as an image acquired by a television device via a wire.

なお、外部入力端子として、HDMI(High Definition
Multimedia Interface)端子を用いて画像を取得する場合、または無線HDMIで画像を取得する場合は、HDMI規格に係るインフォフレームに、取得対象になる画像がsRGB信号またはxvYCC信号によるものかを示す識別符号が含まれるときがある。そのため、このようなときでは、インフォフレームに含まれる識別符号を参照することで、取得した画像に応じた色信号を、画像の表示処理を行う装置側で判別することができる。
As an external input terminal, HDMI (High Definition
When an image is acquired using a (Multimedia Interface) terminal or an image is acquired by wireless HDMI, an identification code indicating whether the image to be acquired is an sRGB signal or an xvYCC signal is included in an info frame according to the HDMI standard Is sometimes included. Therefore, in such a case, by referring to the identification code included in the info frame, the color signal corresponding to the acquired image can be determined on the device side that performs the image display processing.

また、上述した特許文献1でも、ユーザの操作により、複数回の色変換処理を行うので、ユーザは表示対象の画像信号が、どのような色空間に基づくものであるかを確認した上で、色変換処理に係る操作指示を行う必要があるので、ユーザに対する負担は大きいと云う問題がある。   Further, in Patent Document 1 described above, since the color conversion process is performed a plurality of times by the user's operation, the user confirms what color space the image signal to be displayed is based on, Since it is necessary to give an operation instruction related to the color conversion process, there is a problem that the burden on the user is heavy.

本発明は、斯かる問題に鑑みてなされたものであり、HDMI規格に係るインフォフレームに含まれることがある識別符号を利用しなくても、外部から取得する画像信号に含まれる色域を表す信号値に基づいて、自動で適切な色表現処理に切り替えられるようにした画像処理装置を提供することを目的とする。   The present invention has been made in view of such a problem, and represents a color gamut included in an image signal acquired from the outside without using an identification code that may be included in an info frame according to the HDMI standard. An object of the present invention is to provide an image processing apparatus that can automatically switch to an appropriate color expression process based on a signal value.

上記課題を解決するために本発明に係る画像処理装置は、sRGB色空間と、sRGB色空間から拡張された拡張色空間とを含むxvYCC色空間に係るxvYCC色信号値に応じた画像信号を、画像表示に係る色表示域に応じた階調へ割り当てる処理を行う画像処理装置において、外部から取得した画像信号に係る信号値の中に、前記拡張色空間に属する値が含まれるか否かを検出する検出手段と、前記検出手段が前記拡張色空間に属する値が含まれることを検出した場合、前記拡張色空間に属する値を含んだ画像信号を、画像表示に係る色表示域に応じた階調へ割り当てる処理を行う手段とを備えることを特徴とする。   In order to solve the above problems, an image processing apparatus according to the present invention provides an image signal corresponding to an xvYCC color signal value in an xvYCC color space including an sRGB color space and an extended color space expanded from the sRGB color space. In an image processing apparatus that performs a process of assigning to gradations according to a color display area related to image display, whether or not a value belonging to the extended color space is included in a signal value related to an image signal acquired from the outside A detecting means for detecting, and when the detecting means detects that a value belonging to the extended color space is included, an image signal including the value belonging to the extended color space is determined in accordance with a color display area related to image display. Means for performing a process of assigning to gradations.

本発明にあっては、外部から取得した画像信号に応じた色信号値の中に、拡張色空間に属する値が含まれることを検出すると、拡張色空間に属する値も含めて、外部から取得した画像信号を画像表示に係る色表示域に応じた階調へ割り当てるので、従来のxvYCC信号に対応可能なテレビジョン装置のように、ユーザが切替操作を行わなくても、xvYCC色空間にマッチした画像信号のマッピング処理を自動で行えるようになる。その結果、従来のxvYCC信号に対応可能なテレビジョン装置で要求されていた切替操作の負担からユーザは解放され、リラックスして、色再現性に優れた画像品質を楽しめるようになる。   In the present invention, when it is detected that a value belonging to the extended color space is included in the color signal value according to the image signal acquired from the outside, the value including the value belonging to the extended color space is acquired from the outside. Since the assigned image signal is assigned to the gradation corresponding to the color display area related to the image display, it matches the xvYCC color space without the user performing a switching operation as in the case of a television apparatus that can handle the conventional xvYCC signal. The image signal mapping process can be automatically performed. As a result, the user is relieved from the burden of the switching operation required in the television apparatus that can handle the conventional xvYCC signal, and can relax and enjoy image quality with excellent color reproducibility.

また、本発明に係る画像処理装置は、輝度および色差を規定し、少なくとも色差範囲が拡張された第1拡張色空間を含む第1色空間に係る第1色信号値に応じた画像信号を取得する画像取得手段を備え、前記画像取得手段で取得した画像信号を、画像表示に係る色表示域に応じた階調へ割り当てる処理を行う画像処理装置において、前記画像取得手段で取得した画像信号に係る第1色信号値の中に、前記第1拡張色空間に属する値が含まれるか否かを検出する第1検出手段と、前記第1検出手段が前記第1拡張色空間に属する値が含まれることを検出した場合、前記第1拡張色空間に属する値を含んだ画像信号を、画像表示に係る色表示域に応じた階調へ割り当てる処理を行う第1割当手段とを備えることを特徴とする。   The image processing apparatus according to the present invention obtains an image signal corresponding to a first color signal value relating to a first color space including a first extended color space that defines a luminance and a color difference and at least a color difference range is extended. In an image processing apparatus that performs processing for assigning an image signal acquired by the image acquisition unit to a gradation corresponding to a color display area related to image display, the image signal acquired by the image acquisition unit First detection means for detecting whether or not the first color signal value includes a value belonging to the first extended color space, and a value to which the first detection means belongs to the first extended color space. A first allocating unit configured to perform a process of allocating an image signal including a value belonging to the first extended color space to a gradation corresponding to a color display area related to image display when the inclusion is detected. Features.

本発明にあっては、外部から取得した画像信号に応じた第1色信号値の中に、第1拡張色空間に属する値が含まれることを検出すると、第1拡張色空間に属する値も含めて、外部から取得した画像信号を画像表示に係る色表示域に応じた階調へ割り当てるので、第1拡張色空間に値が属するか否かで、広域の色信号に応じたマッピング処理が自動で行われるようになる。そのため、取得した画像信号の中に第1拡張色空間に属する値が含まれていれば、広域の色信号に応じたマッピング処理を通じて、優れた色再現性で画像を表示できる色表現処理が自動で行われ、従来の表示装置等で要求されていた切替操作の負担からユーザは解放され、リラックスして、色再現性に優れた画像品質を楽しめるようになる。   In the present invention, when it is detected that a value belonging to the first extended color space is included in the first color signal value corresponding to the image signal acquired from the outside, the value belonging to the first extended color space is also detected. In addition, since the image signal acquired from the outside is assigned to the gradation corresponding to the color display area related to the image display, the mapping process corresponding to the wide color signal is performed depending on whether or not the value belongs to the first extended color space. It will be done automatically. Therefore, if the acquired image signal includes a value belonging to the first extended color space, color expression processing that can display an image with excellent color reproducibility is automatically performed through mapping processing according to a wide color signal. The user is relieved from the burden of the switching operation required by the conventional display device and the like, and can relax and enjoy image quality with excellent color reproducibility.

なお、第1色信号値としては、たとえば、YCbCr信号の値を適用することが可能である。この場合、第1拡張色空間に対応した範囲としては、YCbCr信号に係る画像表示処理で従来、クリッピングされていた数値範囲(たとえば、色差に関する256段階の全範囲において1以上15以下の範囲、または241以上254以下の範囲の少なくとも一方の範囲)を適用させることが、xvYCC信号として扱われる領域を有効に活用できる点で好ましい。   As the first color signal value, for example, the value of the YCbCr signal can be applied. In this case, the range corresponding to the first extended color space is a numerical range that has been clipped in the image display processing related to the YCbCr signal (for example, a range of 1 to 15 in the entire 256-step range regarding color difference, or It is preferable to apply at least one of the range of 241 to 254) in that the region treated as the xvYCC signal can be used effectively.

また、外部から取得する画像信号は、アナログ信号またはデジタル信号のいずれでも適用可能であり、画像信号の取得経路としては、アナログテレビジョン放送またはデジタルテレビジョン放送を通じて取得する場合(なお、テレビジョン放送は、放送電波、ケーブルテレビジョン網、ネットワーク網のいずれかを介して伝達される)、各種接続規格(IEEE1394,USB等)に応じた接続ケーブルを通じて取得する場合、または、赤外線通信(IrSS)のような無線で取得する場合等が適用可能である。さらに、HDMI系の接続規格または無線通信規格を用いる場合でも、HDMI規格に係るインフォフレームに色域を示す識別符号が含まれないときに対しても、本発明は有用になる。   In addition, the image signal acquired from the outside can be applied to either an analog signal or a digital signal, and the image signal acquisition path is acquired through analog television broadcasting or digital television broadcasting (in addition, television broadcasting) Is transmitted via broadcast radio waves, cable television networks, or network networks), when acquired through connection cables according to various connection standards (IEEE 1394, USB, etc.), or for infrared communication (IrSS) The case where it acquires by radio | wireless etc. is applicable. Furthermore, even when the HDMI connection standard or the wireless communication standard is used, the present invention is useful even when the identification code indicating the color gamut is not included in the info frame according to the HDMI standard.

本発明に係る画像処理装置は、前記第1検出手段が前記第1拡張色空間に属する値が含まれないことを検出した場合、前記画像取得手段が取得した画像信号を、複数色の割合を規定し、色信号値が負となる範囲または基準値を超える範囲まで拡張された第2拡張色空間を含む第2色空間に係る第2色信号値に応じた画像信号へ変換する変換手段と、前記変換手段が変換した画像信号に係る第2色信号値の中に、前記第2拡張色空間に属する値が含まれるか否かを検出する第2検出手段とを備え、前記第2検出手段が前記第2拡張色空間に属する値が含まれることを検出した場合、前記第1割当手段は、前記第2拡張色空間に属する値を含んだ画像信号を、画像表示に係る色表示域に応じた階調へ割り当てる処理を行うことを特徴とする。   In the image processing apparatus according to the present invention, when the first detection unit detects that a value belonging to the first extended color space is not included, the image signal acquired by the image acquisition unit is converted to a ratio of a plurality of colors. Conversion means for converting into an image signal in accordance with a second color signal value relating to a second color space including a second extended color space that is defined and extended to a range in which the color signal value is negative or exceeds a reference value Second detection means for detecting whether or not a value belonging to the second extended color space is included in the second color signal value related to the image signal converted by the conversion means, and the second detection When the means detects that a value belonging to the second extended color space is included, the first assigning means outputs an image signal including the value belonging to the second extended color space to a color display area related to image display. According to the present invention, a process of assigning to gradations according to the above is performed.

本発明にあっては、外部から取得した画像信号に係る第1色信号値の中に、第1拡張色空間に属する値が含まれない場合、取得した画像信号を第2色空間に係る第2色信号値に応じた画像信号へ変換すると共に、変換した画像信号に係る第2色信号値の中に、第2拡張色空間に属する値が含まれるか否かを検出するので、取得した画像信号に応じた色域を、画像の色表示処理に対して有効に活用できないかを二段階で判別できるようになる。また、第2拡張色空間に属する値が含まれていれば、これらの範囲に属する値も含めて、取得した画像信号を色表示域に応じた階調へ自動で割り当てるので、従来、クリッピング対象範囲となっていた色信号の値がマッピングされるようになり、それにより、取得した画像信号にマッチした色表現処理が自動で行われるようになる。   In the present invention, when the value belonging to the first extended color space is not included in the first color signal value related to the image signal acquired from the outside, the acquired image signal is related to the second color space related to the second color space. Obtained because it is converted into an image signal corresponding to the two-color signal value, and it is detected whether or not a value belonging to the second extended color space is included in the second color signal value related to the converted image signal. Whether the color gamut corresponding to the image signal can be effectively used for the color display processing of the image can be determined in two stages. If the values belonging to the second extended color space are included, the acquired image signal including the values belonging to these ranges is automatically assigned to the gradation corresponding to the color display area. The value of the color signal in the range is mapped, so that the color expression process matching the acquired image signal is automatically performed.

なお、第2色空間としては、RGB系の色空間(たとえば、sRGB色空間)を適用することが考えられる(第2色信号値としては、たとえば、sRGB信号の値)。この場合、第2拡張色空間の範囲としては、sRGB信号に係る画像表示処理で従来、クリッピングされていた数値範囲(マイナスの範囲、または1以上の範囲)を適用させることが、xvYCC信号として扱える領域を有効に活用すると云う点で好適となる。   Note that an RGB color space (for example, sRGB color space) may be applied as the second color space (for example, the value of the sRGB signal as the second color signal value). In this case, as the range of the second extended color space, it is possible to treat the xvYCC signal by applying a numerical range (negative range or one or more ranges) that has been conventionally clipped in the image display processing related to the sRGB signal. This is preferable in that the area is effectively used.

本発明に係る画像処理装置は、前記第2検出手段が前記第2拡張色空間に属する値が含まれないことを検出した場合、前記変換手段で変換した画像信号を、画像表示に係る色表示域に応じた階調へ割り当てる処理を行う第2割当手段を備えることを特徴とする。   In the image processing apparatus according to the present invention, when the second detection unit detects that the value belonging to the second extended color space is not included, the image signal converted by the conversion unit is displayed as a color display for image display. A second allocating unit that performs a process of allocating to the gradation corresponding to the area is provided.

本発明にあっては、変換した画像信号に係る第2色信号値の中に、上述した各拡張色空間の範囲に属する値が含まれないことを検出した場合、変換した画像信号を、色表示域に応じた階調へ割り当てるので、取得した画像信号に応じた色再現性が確保された画像が表示されるようになる。そのため、広域の色空間に対応した値が二段階の検出処理を経ても、見つからない場合は、自動的に通常の色表現処理が行われるので、取得した画像信号に応じた色域に応じた表示処理を指定する切替操作をユーザは行わなくても済む。   In the present invention, when it is detected that the second color signal value related to the converted image signal does not include a value belonging to the range of each extended color space, the converted image signal is Since the gradation is assigned according to the display area, an image in which color reproducibility is ensured according to the acquired image signal is displayed. Therefore, if a value corresponding to a wide color space is not found even after two-step detection processing, normal color expression processing is automatically performed, so that the color gamut corresponding to the acquired image signal is used. The user does not have to perform a switching operation for designating display processing.

本発明に係る画像処理装置は、外部の表示装置と接続を行う接続手段と、前記接続手段から、画像表示に係る色表示域に応じた階調へ割り当てられた画像信号を出力する手段とを備えることを特徴とする。   An image processing apparatus according to the present invention includes: a connection unit that connects to an external display device; and a unit that outputs an image signal assigned to a gradation corresponding to a color display area related to image display from the connection unit. It is characterized by providing.

本発明にあっては、外部の表示装置と接続を行う接続手段から、色表現処理に係る画像信号を出力するので、録画装置またはセットトップボックスのような表示デバイスを有しない装置形態であっても、本発明を適切に利用できるようになる。なお、外部の表示装置としては、液晶パネルまたは有機EL(Electro-Luminescence)のような表示パネルを備えた表示装置、ブラウン管(受像管)を備えた表示装置、プラズマディスプレイパネル(PDP)を備えた表示装置、リアプロジェクション式またはフロントプロジェクション方式の表示装置などを適用することが可能である。   In the present invention, since an image signal related to color expression processing is output from a connecting means for connecting to an external display device, the image forming apparatus does not have a display device such as a recording device or a set-top box. However, the present invention can be appropriately used. As an external display device, a display device provided with a display panel such as a liquid crystal panel or organic EL (Electro-Luminescence), a display device provided with a cathode ray tube (picture tube), and a plasma display panel (PDP) were provided. A display device, a rear projection type or a front projection type display device, or the like can be applied.

本発明に係る画像表示装置は、表示部と、前記表示部へ、画像表示に係る色表示域に応じた階調へ割り当てられた画像信号を供給する手段とを備えることを特徴とする。
本発明にあっては、表示デバイスに相当する表示部へ、色表現処理に係る画像信号を供給するので、テレビジョン装置のような表示デバイスを有する装置形態に対して、本発明を適切に利用できるようになる。なお、表示部としては、液晶パネル、有機ELパネル、SED(Surface-conduction Electron-emitter Display)等を含む電界放出ディスプレイ(FED)用パネル、プラズマディスプレイパネル、プロジェクション方式に適用される表示モジュール等を適用できる。
The image display apparatus according to the present invention includes a display unit and means for supplying the display unit with an image signal assigned to a gradation corresponding to a color display area related to image display.
In the present invention, since an image signal related to color expression processing is supplied to a display unit corresponding to a display device, the present invention is appropriately used for an apparatus having a display device such as a television apparatus. become able to. The display unit includes a liquid crystal panel, an organic EL panel, a field emission display (FED) panel including a surface-conduction electron-emitter display (SED), a plasma display panel, a display module applied to a projection system, and the like. Applicable.

本発明に係る画像表示装置は、前記表示部は、表示パネルであり、前記表示パネルの照射を行う照射手段と、前記第1割当手段が、画像信号を階調へ割り当てる処理を行った場合、前記照射手段の照射量を基準量より高める調整を行う照射量調整手段とを備えることを特徴とする。   In the image display device according to the present invention, the display unit is a display panel, and when the irradiation unit that irradiates the display panel and the first allocation unit perform a process of allocating an image signal to a gradation, And an irradiation amount adjusting unit for adjusting the irradiation amount of the irradiation unit to be higher than a reference amount.

本発明にあって、第1割当手段が割当処理を行うと、第1色空間に応じた広い色域に係る色味が再現されるため、濃い色などは一段と深い色味になり、それに伴い、照射手段で照射される光が画面上で表示された深い色味で遮られる程度が増し、画面上での輝度が幾分低下することになる。しかし、本発明にあっては、第1割当手段の割当処理に連動して、照射量を高めるので、輝度の低下分を補って適切な輝度を確保でき、色の鮮やかさ及び深い色味の表現を維持しながら、画像の明るさの低下を防止できるようになる。   In the present invention, when the first assigning unit performs the assigning process, the color tone relating to the wide color gamut corresponding to the first color space is reproduced, so that the dark color becomes a deeper tone, and accordingly. The degree to which the light emitted from the irradiating means is blocked by the deep color displayed on the screen increases, and the luminance on the screen decreases somewhat. However, in the present invention, the irradiation amount is increased in conjunction with the allocation process of the first allocation unit, so that it is possible to secure an appropriate luminance by compensating for the decrease in luminance, and the vividness of the color and the deep color tone. While maintaining the expression, it is possible to prevent a decrease in the brightness of the image.

本発明にあっては、拡張色空間に属する値が、外部から取得したxvYCC色空間に係る画像信号に含まれていれば、xvYCC色空間を包含する広域の色信号に応じた色表現処理を行うので、取得した画像信号に含まれる値に応じて、xvYCC色空間に含まれる広い範囲の色信号の再現に応じた表示処理を自動で行うことができる。
また、本発明にあっては、第1拡張色空間に属する値が、外部から取得した画像信号に含まれていれば、広域の色信号に応じた色表現処理を行うので、取得した画像信号に含まれる値に応じて、広域の色信号の再現に応じた表示処理を自動で行うことができ、特段の操作を行うことなく、ユーザは色再現性に優れた画質を享受できる。
さらに、本発明にあっては、第1拡張色空間に属する値を画像信号が含まなければ、画像信号を第2色空間に応じたものに変換して、第2拡張色空間に属する値を変換した画像信号が含むか否かを検出するので、取得した画像信号に広域色信号に応じた値が含まれるかを二段階で判定でき、さらに、第2拡張色空間の範囲に応じた値が含まれれば、広域の色信号に応じた色表現処理を行うので、この場合も、ユーザが特段の操作を行わなくても、自動で色再現性に優れた画像の表示処理を行える。
In the present invention, if a value belonging to the extended color space is included in an image signal related to the xvYCC color space acquired from the outside, color expression processing corresponding to a wide color signal including the xvYCC color space is performed. Therefore, display processing corresponding to reproduction of a wide range of color signals included in the xvYCC color space can be automatically performed according to the values included in the acquired image signal.
In the present invention, if a value belonging to the first extended color space is included in an image signal acquired from the outside, color representation processing is performed according to a color signal in a wide area. In accordance with the value included in the image, display processing according to reproduction of a wide-range color signal can be automatically performed, and the user can enjoy image quality with excellent color reproducibility without performing any special operation.
Furthermore, in the present invention, if the value belonging to the first extended color space is not included in the image signal, the image signal is converted into one corresponding to the second color space, and the value belonging to the second extended color space is changed. Since it is detected whether or not the converted image signal is included, it can be determined in two steps whether the acquired image signal includes a value corresponding to the wide color signal, and further, a value corresponding to the range of the second extended color space Is included, color expression processing corresponding to a wide range of color signals is performed. In this case as well, an image display process having excellent color reproducibility can be automatically performed without any special operation by the user.

さらに、本発明にあっては、第2拡張色空間の範囲に属する値を、変換した画像信号が含まなければ、変換した画像信号で色表現処理を行うので、ユーザが色表現処理の種類を指定しなくても、最適な処理に自動で切り替わるため、ユーザは取得した画像信号に応じた色信号の種類を気にすることなく、画像コンテンツを楽しむことができる。   Furthermore, in the present invention, if the converted image signal does not include a value belonging to the range of the second extended color space, the converted image signal is used for color expression processing. Even if it is not specified, since the process is automatically switched to the optimum process, the user can enjoy the image content without worrying about the type of color signal corresponding to the acquired image signal.

本発明にあっては、外部の表示装置と接続を行う接続手段を具備し、その接続手段から、色表現処理に係る画像信号を出力するので、表示デバイスを有しない装置形態でも本発明を有効に適用できる。
また、本発明にあっては、表示デバイスに相当する表示部を具備すると共に、その表示部へ色表現処理に係る画像信号を供給するので、テレビジョン装置のような表示デバイスを有する装置形態に対しても本発明を適切できる。
In the present invention, a connection means for connecting to an external display device is provided, and an image signal related to color expression processing is output from the connection means. Therefore, the present invention is effective even in an apparatus configuration having no display device. Applicable to.
Further, in the present invention, a display unit corresponding to a display device is provided and an image signal related to color expression processing is supplied to the display unit, so that the apparatus has a display device such as a television device. The present invention can also be properly applied to this.

本発明にあっては、第1割当手段が行う割当処理に連動して、照射手段の照射量を高めるので、広い色域に応じた色表現処理を行った場合に生じる画面上の輝度低下が防止され、優れた色表現性および適切な輝度確保を両立できる。   In the present invention, the irradiation amount of the irradiating unit is increased in conjunction with the allocation process performed by the first allocating unit. Therefore, the luminance reduction on the screen that occurs when the color expression process corresponding to a wide color gamut is performed. It is possible to achieve both excellent color expression and adequate luminance.

図1は、本発明の実施形態に係るテレビジョン装置1の主要な構成を示すブロック図である。本実施形態のテレビジョン装置1は、本発明に係る画像処理装置を包含した構成になっており、本発明に応じた各種処理を行うユニットを内蔵している。テレビジョン装置1は、色信号に応じた映像(動画)に係る画像信号(動画の画像フレームに応じた信号)を外部から取得しており、取得した画像信号に応じた画像の表示処理を行う際、画像信号に係る色域に従って、画像表示に係る色表示域に応じた階調へ画像信号を割り当てると云うマッピング処理の仕方を適宜選択し、最適な色表現処理を自動で切替可能にしている。そのため、テレビジョン装置1は、取得した画像信号に「拡張された色空間(いわゆる拡張色空間)」に属する信号値が含まれていれば、拡張色空間に合わせたマッピング処理にも自動で対応できるようになっている。   FIG. 1 is a block diagram showing a main configuration of a television apparatus 1 according to an embodiment of the present invention. The television apparatus 1 of the present embodiment is configured to include the image processing apparatus according to the present invention, and includes a unit that performs various processes according to the present invention. The television apparatus 1 acquires an image signal (signal corresponding to an image frame of a moving image) related to a video (moving image) corresponding to a color signal from the outside, and performs display processing of an image corresponding to the acquired image signal. In this case, according to the color gamut related to the image signal, the mapping processing method of assigning the image signal to the gradation corresponding to the color display gamut related to the image display is appropriately selected so that the optimum color expression processing can be automatically switched. Yes. Therefore, if the acquired image signal includes a signal value belonging to the “extended color space (so-called extended color space)”, the television apparatus 1 automatically supports mapping processing according to the extended color space. It can be done.

テレビジョン装置1(液晶テレビジョン装置)は、外部から色信号に応じた画像信号を取得するためにアナログチューナ2、ビデオ入力部3(アナログ)、デジタル入力部6、デジタルチューナ7を具備し、取得した画像信号に係る色信号の色域を色域判断部9で判断すると共に、その判断結果に基づいた画像処理を映像処理部8で行う。なお、テレビジョン装置1は、アナログの画像信号の処理系統としてセレクタ4およびAD変換部5を含んでおり、画像を表示する液晶パネル20(表示部に相当)を照射するためのバックライト22およびバックライト制御部23も備えている。さらに、テレビジョン装置1は、全般的な制御を行う制御部21を具備し、ユーザからの操作を受け付ける操作部24と、リモコン装置26からの遠隔操作信号を含む赤外光を受光する受光部25とを制御部21に接続して、ユーザの操作指示を制御部21へ伝えられるようにしている。以下、テレビジョン装置1の各部を詳説する。   The television device 1 (liquid crystal television device) includes an analog tuner 2, a video input unit 3 (analog), a digital input unit 6, and a digital tuner 7 in order to acquire an image signal corresponding to a color signal from the outside. The color gamut determination unit 9 determines the color gamut of the color signal related to the acquired image signal, and the video processing unit 8 performs image processing based on the determination result. Note that the television apparatus 1 includes a selector 4 and an AD conversion unit 5 as an analog image signal processing system, and a backlight 22 for irradiating a liquid crystal panel 20 (corresponding to a display unit) for displaying an image and A backlight control unit 23 is also provided. Furthermore, the television apparatus 1 includes a control unit 21 that performs general control, and includes an operation unit 24 that receives an operation from a user, and a light receiving unit that receives infrared light including a remote operation signal from a remote control device 26. 25 is connected to the control unit 21 so that a user's operation instruction can be transmitted to the control unit 21. Hereinafter, each part of the television apparatus 1 will be described in detail.

まず、テレビジョン装置1のアナログの画像信号の取得に関する処理系統(アナログチューナ2、ビデオ入力部3、セレクタ4、およびAD変換部5。これら全体が画像取得手段に相当)を説明する。アナログチューナ2は、受信アンテナA1と接続されており、放送電波を通じて送信されてくるアナログのテレビジョン信号(放送番組の映像を示す信号)を受信し、受信したテレビジョン信号に含まれる画像信号を取得して、取得した画像信号をセレクタ4へ伝送する処理を行う。また、ビデオ入力部3は、アナログの画像信号(動画の画像フレーム)の出力が可能な外部機器(ビデオカメラ、録画装置等)と接続を行う接続端子に相当し、接続されている外部機器が画像信号を出力すれば、出力されてくる画像信号を取得してセレクタ4へ伝送する処理を行う。   First, a processing system (analog tuner 2, video input unit 3, selector 4, and AD conversion unit 5 relating to the acquisition of an analog image signal of the television device 1; these correspond to the image acquisition means as a whole) will be described. The analog tuner 2 is connected to the receiving antenna A1, receives an analog television signal (a signal indicating a broadcast program image) transmitted through broadcast radio waves, and receives an image signal included in the received television signal. A process of acquiring and transmitting the acquired image signal to the selector 4 is performed. The video input unit 3 corresponds to a connection terminal for connecting to an external device (video camera, recording device, etc.) capable of outputting an analog image signal (moving image frame). If an image signal is output, the output image signal is acquired and transmitted to the selector 4.

セレクタ4は、アナログチューナ2またはビデオ入力部3から伝送されてきた画像信号を受け取って、制御部21からの制御指示に従って、アナログチューナ2またはビデオ入力部3のいずれか一方の画像信号をAD変換部5へ伝送する処理を行う。AD変換部5は、セレクタ4から送られてくるアナログの画像信号をデジタルの画像信号に変換するものであり、変換したデジタルの画像信号に、その画像信号に応じた画像フレームを識別する識別信号を付帯させて映像処理部8および色域判断部9へそれぞれ伝送する。AD変換部5が変換するデジタルの画像信号は、輝度(Y)および色差(CbCr)を規定するYCbCr色空間(第1色空間に相当)に係るYCbCr信号の値(第1色信号値に相当)が、画像を構成する複数の画素にそれぞれ含まれたものになっており、このように変換することで、テレビジョン装置1は、アナログのテレビジョン信号に基づいてYCbCr色空間に係るYCbCr信号値を取得する。なお、YCbCr信号は、輝度および色差に関して、それぞれ0以上255以下の範囲(256段階の範囲)に応じた値を有している。   The selector 4 receives the image signal transmitted from the analog tuner 2 or the video input unit 3, and AD converts the image signal of either the analog tuner 2 or the video input unit 3 in accordance with a control instruction from the control unit 21. Processing to transmit to the unit 5 is performed. The AD converter 5 converts the analog image signal sent from the selector 4 into a digital image signal, and an identification signal for identifying the image frame corresponding to the converted digital image signal. Are transmitted to the video processing unit 8 and the color gamut determination unit 9, respectively. The digital image signal converted by the AD converter 5 is a YCbCr signal value (corresponding to the first color signal value) related to the YCbCr color space (corresponding to the first color space) that defines the luminance (Y) and the color difference (CbCr). ) Is included in each of a plurality of pixels constituting an image, and by converting in this way, the television apparatus 1 can generate a YCbCr signal related to the YCbCr color space based on an analog television signal. Get the value. The YCbCr signal has a value corresponding to a range of 0 or more and 255 or less (range of 256 steps) with respect to luminance and color difference.

次に、テレビジョン装置1のデジタルの画像信号の取得に関する処理系統(デジタル入力部6およびデジタルチューナ7)を説明する。デジタル入力部6は、接続インタフェース部6aと、無線インタフェース部6bを有している。接続インタフェース部6aは、デジタルの画像信号(動画の画像フレーム)の出力が可能な外部機器(デジタルビデオカメラ、デジタルの録画装置等)と接続ケーブルを介して接続を行う接続端子に相当し、外部機器から出力されてくる画像信号を取得すると共に、取得した画像信号を、その画像信号に応じた画像フレームを識別する識別信号と共に、映像処理部8および色域判断部9へそれぞれ伝送する。なお、本実施形態の接続インタフェース部6aは、接続に応じた規格としてIEEE1394に対応したものになっているが、それはあくまで一例であり、他のデジタルインタフェース(たとえば、HDMI、USB、10BASE/100BASE等に係るLAN規格等)も勿論適用可能であると共に、異なる規格に応じた接続インタフェース部6aを複数設けることも可能である。   Next, a processing system (digital input unit 6 and digital tuner 7) related to the acquisition of digital image signals of the television apparatus 1 will be described. The digital input unit 6 includes a connection interface unit 6a and a wireless interface unit 6b. The connection interface unit 6a corresponds to a connection terminal for connecting to an external device (digital video camera, digital recording device, etc.) capable of outputting a digital image signal (moving image frame) via a connection cable. The image signal output from the device is acquired, and the acquired image signal is transmitted to the video processing unit 8 and the color gamut determination unit 9 together with an identification signal for identifying an image frame corresponding to the image signal. Note that the connection interface unit 6a of the present embodiment corresponds to IEEE 1394 as a standard according to connection, but this is merely an example, and other digital interfaces (for example, HDMI, USB, 10BASE / 100BASE, etc.) Of course, it is also possible to apply a plurality of connection interface units 6a according to different standards.

また、デジタル入力部6の無線インタフェース部6bは、デジタルの画像信号(動画の画像フレーム)の出力を無線通信で行うことが可能な外部機器から、無線通信を通じて画像信号を取得するものであり、取得した画像信号を、その画像信号に応じた画像フレームを識別する識別信号と共に、映像処理部8および色域判断部9へそれぞれ伝送する。本実施形態の無線インタフェース部6aは、無線通信に応じた規格として無線HDMIに対応したものになっているが、それはあくまで一例であり、IrSS等の赤外線通信(IrDA)、その他各種無線通信規格(たとえば、ワイヤレスUSB、ブルートゥース(登録商標)、無線LAN規格等)も勿論適用可能であると共に、異なる規格に応じた無線インタフェース部6bを複数設けることも可能なのは、上述した接続インタフェース部6aと同様である。   The wireless interface unit 6b of the digital input unit 6 acquires an image signal through wireless communication from an external device capable of outputting a digital image signal (moving image frame) through wireless communication. The acquired image signal is transmitted to the video processing unit 8 and the color gamut determination unit 9 together with an identification signal for identifying an image frame corresponding to the image signal. The wireless interface unit 6a of the present embodiment is compatible with wireless HDMI as a standard according to wireless communication, but this is only an example, and infrared communication (IrDA) such as IrSS, and other various wireless communication standards ( For example, wireless USB, Bluetooth (registered trademark), wireless LAN standard, etc.) can of course be applied, and a plurality of wireless interface units 6b corresponding to different standards can be provided in the same manner as the connection interface unit 6a described above. is there.

デジタルチューナ7は、受信アンテナA2と接続されており、地上デジタルテレビジョン放送などのデジタル放送を通じてデジタルのテレビジョン信号(放送番組の映像を示す信号)を受信し、受信したテレビジョン信号に含まれるデジタルの画像信号を取得して、取得した画像信号を、その画像信号に応じた画像フレームを識別する識別信号と共に、映像処理部8および色域判断部9へそれぞれ伝送する。なお、上述したデジタル入力部6およびデジタルチューナ7で取得される画像信号も、AD変換部5での変換後の画像信号と同様に、YCbCr色に係る複数のYCbCr信号に応じたものになっている。   The digital tuner 7 is connected to the receiving antenna A2, receives a digital television signal (a signal indicating a broadcast program image) through digital broadcasting such as digital terrestrial television broadcasting, and is included in the received television signal. A digital image signal is acquired, and the acquired image signal is transmitted to the video processing unit 8 and the color gamut determination unit 9 together with an identification signal for identifying an image frame corresponding to the image signal. Note that the image signal acquired by the digital input unit 6 and the digital tuner 7 described above also corresponds to a plurality of YCbCr signals related to the YCbCr color, similarly to the image signal after conversion by the AD conversion unit 5. Yes.

次に、本発明において中心的な処理を行う1つである色域判断部9について説明する。色域判断部9は検出手段に相当し、AD変換部5、デジタル入力部6およびデジタルチューナ7からそれぞれ送られてくる画像信号に係るYCbCr信号がどのような色域に応じた値を含んでいるか否かを段階的に計2段階で検出する処理を行っている。   Next, the color gamut determination unit 9 that performs one of the central processes in the present invention will be described. The color gamut determination unit 9 corresponds to detection means, and the YCbCr signal related to the image signal respectively sent from the AD conversion unit 5, the digital input unit 6, and the digital tuner 7 includes a value corresponding to what color gamut. Whether or not it is present is detected in two steps in total.

図2(a)に示すように、色域判断部9は、上述したような計2段階で色域に係る検出を行うため、第1検出部9a(第1検出手段に相当)および第2検出部9b(第2検出手段に相当)を具備している。第1検出部9aは、最初の段階(第1段階)の検出処理を行っており、検出結果を映像処理部8へ伝送する。また、第2検出部9bは、次の段階(第2段階)の検出処理を行い、検出結果を映像処理部8へ伝送する。   As shown in FIG. 2 (a), the color gamut determination unit 9 performs detection related to the color gamut in two stages as described above, and therefore the first detection unit 9a (corresponding to the first detection means) and the second A detection unit 9b (corresponding to the second detection means) is provided. The first detection unit 9 a performs the first stage (first stage) detection process, and transmits the detection result to the video processing unit 8. In addition, the second detection unit 9 b performs detection processing at the next stage (second stage) and transmits the detection result to the video processing unit 8.

図3は、色域判断部9の色域に係る検出処理において、検出対象となる色空間を、YCbCr色空間をベースにして二次元上のグラフに表したものであり、0〜254までの目盛が示された横軸が色差(CbCr)を表し、0〜254の目盛が示された縦軸が輝度(Y)を表している。このグラフにおいて、色差が16以上240以下であり、かつ輝度が16以上235以下の矩形範囲の中に位置する菱形範囲11gは、従来のsRGB信号に対する画像の表示処理で、処理対象となっていた範囲に該当する。そのため、色差が1以上15以下であり、かつ輝度が16以上235以下の縦長矩形の第1領域11a(xvYCC色空間で拡張された範囲であり、少なくとも色差範囲が拡張された第1拡張色空間に相当)は、従来のYCbCr信号に対する画像の表示処理で、クリッピングされていた範囲に該当する。同様に、色差が241以上254以下であり、かつ輝度が16以上235以下の縦長矩形の第2領域11b(xvYCC色空間で拡張された範囲であり、少なくとも色差範囲が拡張された第1拡張色空間に相当)も、従来のYCbCr信号に対する画像の表示処理でクリッピングされていた範囲(従来の色表現処理で反映されない範囲)に該当する。   FIG. 3 shows a color space to be detected in a detection process related to the color gamut of the color gamut determination unit 9 as a two-dimensional graph based on the YCbCr color space. The horizontal axis on which the scale is shown represents the color difference (CbCr), and the vertical axis on which the scale from 0 to 254 is shown represents the luminance (Y). In this graph, a rhombus range 11g located in a rectangular range having a color difference of 16 or more and 240 or less and a luminance of 16 or more and 235 or less was a processing target in the conventional image display processing for sRGB signals. Applicable to the range. Therefore, the first rectangular area 11a having a color difference of 1 or more and 15 or less and a luminance of 16 or more and 235 or less (a first extended color space that is an extended range in the xvYCC color space and at least the extended color difference range). Corresponds to the clipped range in the conventional image display processing for the YCbCr signal. Similarly, a vertically long rectangular second region 11b having a color difference of 241 to 254 and a luminance of 16 to 235 (a first extended color that is an extended range in the xvYCC color space and at least the extended color difference range). (Corresponding to space) also corresponds to the range clipped in the image display process for the conventional YCbCr signal (the range not reflected in the conventional color expression process).

また、上述した菱形範囲11gは、sRGB色空間(赤色、緑色、青色が含まれる割合を規定する第2色空間に相当)に該当し、sRGB色空間に係る規定(BT.709)において、sRGB信号の値が0を超過して1未満の範囲を表している。さらに、上述した色差が16以上24以下の矩形範囲の中で、菱形範囲11gより輝度(Y)において下方となる三角形状の第3領域11cおよび第4領域11dは、sRGB信号の値が負となる範囲に該当し、菱形範囲11gより輝度(Y)において上方となる三角形状の第5領域11eおよび第6領域11fは、sRGB信号の値が1より大きい範囲(基準値を超える範囲に相当)に該当し、これら第3領域11c〜第6領域11fは、従来のsRGB信号に対する画像の色表現処理の中でクリッピングされていた範囲を示し、sYCbCr空間で拡張された第2拡張色空間に該当する。   The rhombus range 11g described above corresponds to the sRGB color space (corresponding to the second color space that defines the ratio of red, green, and blue), and in the definition related to the sRGB color space (BT.709), sRGB The signal value represents a range exceeding 0 and less than 1. Further, in the rectangular range in which the color difference is 16 or more and 24 or less, the triangular third region 11c and the fourth region 11d that are lower in luminance (Y) than the rhombus range 11g have negative sRGB signal values. The triangular fifth region 11e and sixth region 11f, which are above the rhombus range 11g in luminance (Y), have a range in which the value of the sRGB signal is greater than 1 (corresponding to a range exceeding the reference value). The third region 11c to the sixth region 11f indicate the range clipped in the image color representation processing for the conventional sRGB signal, and correspond to the second extended color space expanded in the sYCbCr space. To do.

一方、sRGB色空間を包含するxvYCC色空間は、従来の色表現処理でクリッピングされていた第1領域11a〜第6領域11fの各領域の範囲も含んでおり(第1領域11a〜第6領域11fは、sRGB色空間から拡張された拡張色空間に相当)、xvYCC色空間に係る画像信号の色表現処理において反映することが規定されている。そのため、xvYCC色空間に係るxvYCC信号に応じた画像表示処理では、拡張色空間に応じた各領域11a〜11fに含まれる信号値も液晶パネル20の動作範囲(画像表示に係る色表示域に応じた階調。たとえば、8ビットの256階調)へ割り当てると云うマッピング処理が行われる。   On the other hand, the xvYCC color space including the sRGB color space also includes the ranges of the first area 11a to the sixth area 11f clipped by the conventional color expression processing (the first area 11a to the sixth area). 11f is equivalent to an extended color space extended from the sRGB color space), and is specified to be reflected in the color representation processing of the image signal related to the xvYCC color space. Therefore, in the image display processing according to the xvYCC signal related to the xvYCC color space, the signal value included in each of the regions 11a to 11f corresponding to the extended color space is also the operation range of the liquid crystal panel 20 (depending on the color display range related to image display). Mapping processing is performed such as assigning to (for example, 8-bit 256 gradation).

上述した図2(a)の色域判断部9の第1検出部9aは、色域判断部9へ送られてきた画像信号に係るYCbCr信号の中に、図3の第1領域11aまたは第2領域11bの少なくともいずれか一方に属する値が含まれるか否かを検出する(第1段階の検出処理)。検出を行うと、第1検出部9aは、検出結果を示す情報を、検出処理を行った画像信号を表す識別信号と共に映像処理部8へ送る。   The first detection unit 9a of the color gamut determination unit 9 in FIG. 2A described above includes the first region 11a in FIG. 3 or the first region in the YCbCr signal related to the image signal sent to the color gamut determination unit 9. It is detected whether or not a value belonging to at least one of the two regions 11b is included (first-stage detection process). When the detection is performed, the first detection unit 9a sends information indicating the detection result to the video processing unit 8 together with an identification signal representing the image signal subjected to the detection process.

一方、第2検出部9bは、後述するように映像処理部8から送られてくるRGB変換された色空間に応じた画像信号に係るRGB値(第2色信号値に相当)の中に、第3領域11c、第4領域11d、第5領域11e、第6領域11fの少なくともいずれか一つの領域に属する値が含まれるか否かを検出する(第2段階の検出処理)。検出を行うと、この第2検出部9aも、検出結果を示す情報を、検出処理を行った画像信号を表す識別信号と共に映像処理部8へ送る。   On the other hand, the second detection unit 9b includes an RGB value (corresponding to the second color signal value) related to the image signal corresponding to the RGB-converted color space sent from the video processing unit 8 as described later. It is detected whether or not a value belonging to at least one of the third area 11c, the fourth area 11d, the fifth area 11e, and the sixth area 11f is included (second-stage detection process). When the detection is performed, the second detection unit 9a also sends information indicating the detection result to the video processing unit 8 together with the identification signal representing the image signal subjected to the detection process.

図1および図2(b)に示す映像処理部8は、本発明において上述した色域判断部9と共に、中心的な処理を行うものであり、画像信号を液晶パネル20の可変幅である画像表示に係る色表示域に応じたRGB信号の階調(8ビット)へ割り当てる処理(マッピング処理)を行う手段に相当する。特に、本実施形態の映像処理部8は、このマッピング処理の内容を、ユーザからの操作指示を受けなくても、上述した色域判断部9から送られてくる検出結果を示す情報に基づき、xvYCC信号の色域に合った色表現処理と、sRGB信号の色域に合った色表現処理とに自動で切り替えることが特徴になっている。   The video processing unit 8 shown in FIGS. 1 and 2 (b) performs central processing together with the color gamut determination unit 9 described above in the present invention, and the image signal is an image having a variable width of the liquid crystal panel 20. This corresponds to means for performing a process (mapping process) for assigning to the gradation (8 bits) of the RGB signal corresponding to the color display area for display. In particular, the video processing unit 8 according to the present embodiment uses the information indicating the detection result sent from the color gamut determination unit 9 as described above, without receiving the operation instruction from the user. It is characterized in that it is automatically switched between color representation processing suitable for the color gamut of the xvYCC signal and color representation processing suitable for the color gamut of the sRGB signal.

図2(b)に示すように、映像処理部8は第1マッピング処理部8a(第1割当手段に相当)、第2マッピング処理部8b(第2割当手段に相当)、変換処理部8c(変換手段に相当)、および内部メモリ8dを具備している。なお、映像処理部8の内部メモリ8dは、入力ソースとして選択されている画像信号の取得元(AD変換部5、デジタル入力部6、デジタルチューナ7のいずれか)から順次送られてくるYCbCr信号に応じた画像信号を一時的に記憶すると共に、変換処理部8cが行う変換処理用のワークエリア等として用いられる。   As shown in FIG. 2B, the video processing unit 8 includes a first mapping processing unit 8a (corresponding to the first allocation unit), a second mapping processing unit 8b (corresponding to the second allocation unit), and a conversion processing unit 8c ( Equivalent to conversion means) and an internal memory 8d. The internal memory 8d of the video processing unit 8 receives YCbCr signals sequentially transmitted from the acquisition source of the image signal selected as the input source (any one of the AD conversion unit 5, the digital input unit 6, and the digital tuner 7). Is temporarily stored and used as a work area for conversion processing performed by the conversion processing unit 8c.

映像処理部8の第1マッピング処理部8aは、上述した色域判断部9の第1段階の検出結果に応じて、AD変換部5、デジタル入力部6、デジタルチューナ7のいずれかから送られてきて内部メモリ8dに記憶しているYCbCr信号に応じた画像信号のマッピング処理を行うものである。詳しくは、色域判断部9から送られてきた検出結果の情報が、図3に示す第1領域11aまたは第2領域11bの少なくともいずれか一方に属する値を、画像信号に係るYCbCr信号が含むことを検出した旨を表していれば、第1マッピング処理部8aは、その検出結果と共に映像処理部8へ送られてきた識別信号に応じた画像信号を、内部メモリ8dから読み出す。   The first mapping processing unit 8 a of the video processing unit 8 is sent from any of the AD conversion unit 5, the digital input unit 6, and the digital tuner 7 according to the detection result of the first stage of the color gamut determination unit 9 described above. The image signal mapping process is performed in accordance with the YCbCr signal stored in the internal memory 8d. Specifically, the detection result information sent from the color gamut determination unit 9 includes a value belonging to at least one of the first region 11a and the second region 11b shown in FIG. 3 in the YCbCr signal related to the image signal. If this is detected, the first mapping processing unit 8a reads an image signal corresponding to the identification signal sent to the video processing unit 8 together with the detection result from the internal memory 8d.

そして、第1マッピング処理部8aは、読み出した画像信号を第1領域11aと第2領域11bに属する範囲(第1拡張色空間に相当する範囲)の値も含めて、液晶パネル20のRGB信号での色表示域(8ビットの動作範囲)に係る階調へマッピングする処理を行い、マッピングした画像信号(RGB信号)を液晶パネル20へ供給する。このようなマッピング処理を第1マッピング処理部8aが行うので、液晶パネル20の色表現範囲が、xvYCC空間に合わせて最大限利用されることになり、鮮やかで深い色味のある画像を表現することができる。なお、第1マッピング処理部8aは、上述したようなマッピング処理を行うと、処理を行った旨を示すマッピング処理情報を制御部21へ送る。また、上述した第1マッピング処理部8aが行うxvYCC色空間の拡張した色空間(第1拡張色空間)に合わせたマッピング処理を、以降の説明では第1xvYCC信号処理と称する。   Then, the first mapping processing unit 8a includes the RGB signals of the liquid crystal panel 20 including the values of the read image signal including the range belonging to the first region 11a and the second region 11b (the range corresponding to the first extended color space). The image is mapped to gradations related to the color display area (8-bit operation range), and the mapped image signal (RGB signal) is supplied to the liquid crystal panel 20. Since the first mapping processing unit 8a performs such mapping processing, the color expression range of the liquid crystal panel 20 is used to the maximum according to the xvYCC space, and an image having a bright and deep color is expressed. be able to. When the first mapping processing unit 8a performs the mapping processing as described above, the first mapping processing unit 8a sends mapping processing information indicating that the processing has been performed to the control unit 21. Further, the mapping process that is performed by the first mapping processing unit 8a described above and matched with the color space (first extended color space) expanded from the xvYCC color space will be referred to as first xvYCC signal processing in the following description.

また、色域判断部9から送られてきた第1段階の検出結果の情報が、画像信号に係るYCbCr信号の中に第1領域11aまたは第2領域11bのいずれか一方に属する値が含まれないことを検出した旨を表していれば、映像処理部8は、変換処理部8cで、画像信号をRGB変換させて、RGB変換後の画像信号のRGB値を色域判断部9へ送る処理を行う。詳しくは、変換処理部8cが、色域判断部9から検出結果と共に送られてきた識別信号に応じた画像信号を内部メモリ8dから読み出し、その読み出した画像信号をRGB変換して、変換後のsRGB信号に応じた画像信号の信号値(RGB値)を識別信号と共に色域判断部9へ送る。なお、変換処理部8cでRGB変換された画像信号(RGB信号)と、RGB変換前の画像信号(YCbCr信号)は両方とも、識別信号と対応付けて内部メモリ8dに保存される。   Further, the information of the first-stage detection result sent from the color gamut determination unit 9 includes a value belonging to one of the first region 11a and the second region 11b in the YCbCr signal related to the image signal. If the image processing unit 8 indicates that it has been detected, the conversion processing unit 8c performs RGB conversion on the image signal and sends the RGB value of the image signal after the RGB conversion to the color gamut determination unit 9. I do. Specifically, the conversion processing unit 8c reads an image signal corresponding to the identification signal sent together with the detection result from the color gamut determination unit 9 from the internal memory 8d, performs RGB conversion on the read image signal, and converts the image signal after conversion. The signal value (RGB value) of the image signal corresponding to the sRGB signal is sent to the color gamut determination unit 9 together with the identification signal. Note that both the image signal (RGB signal) subjected to RGB conversion by the conversion processing unit 8c and the image signal (YCbCr signal) before RGB conversion are stored in the internal memory 8d in association with the identification signal.

再度、映像処理部8の第1マッピング処理部8aの説明に戻り、第1マッピング処理部8aは、上述した色域判断部9の第2段階の検出結果に応じて、内部メモリ8dに記憶しているYCbCr信号に応じた画像信号のマッピング処理も行っている。詳しくは、色域判断部9から送られてきた検出結果の情報が、図3に示す第3領域11c〜第6領域11fの少なくともいずれか一つに属する値を、RGB変換した画像信号に係るRGB値が含むことを検出した旨を表していれば、第1マッピング処理部8aは、その検出結果と共に映像処理部8へ送られてきた識別信号に応じた画像信号(RGB変換前のオリジナルのYCbCr信号)を内部メモリ8dから読み出す。   Returning to the description of the first mapping processing unit 8a of the video processing unit 8 again, the first mapping processing unit 8a stores it in the internal memory 8d according to the detection result of the second stage of the color gamut determination unit 9 described above. The image signal mapping process corresponding to the YCbCr signal is also performed. Specifically, the detection result information sent from the color gamut determination unit 9 relates to an image signal obtained by RGB conversion of a value belonging to at least one of the third region 11c to the sixth region 11f shown in FIG. If it represents that the RGB value is detected, the first mapping processing unit 8a displays the image signal corresponding to the identification signal sent to the video processing unit 8 together with the detection result (original before RGB conversion). YCbCr signal) is read from the internal memory 8d.

そして、第1マッピング処理部8aは、読み出した画像信号(YCbCr信号)を第3領域11c〜第6領域11fに属する値も含めて、液晶パネル20のRGB信号での色表示域(8ビットの動作範囲)に係る階調へマッピングする処理を行い、マッピングした画像信号(RGB信号)を液晶パネル20へ供給する。このようなマッピング処理も、第1マッピング処理部8aが行うので、液晶パネル20の色表現範囲に、xvYCC色空間に応じた範囲、すなわち従来クリッピングされていたsRGB空間において負となる範囲および1を超過する範囲(第2拡張色空間に相当する範囲)の色域も割り当てられるようになり、従来に比べて鮮やかで深い色味のある画像を表現することができる。なお、第1マッピング処理部8aは、上述したようなマッピング処理を行ったときも、処理を行った旨を示すマッピング処理情報を制御部21へ送る。また、上述した第1マッピング処理部8aによるsYCbCr色空間を拡張した色空間(第2拡張色空間)に合わせたマッピング処理を、以降の説明では第2xvYCC信号処理と称する。   Then, the first mapping processing unit 8a includes the read image signal (YCbCr signal) including the values belonging to the third area 11c to the sixth area 11f, and the color display area (8-bit color) in the RGB signal of the liquid crystal panel 20. A process of mapping to the gradation related to the operation range is performed, and the mapped image signal (RGB signal) is supplied to the liquid crystal panel 20. Since such a mapping process is also performed by the first mapping processing unit 8a, a range corresponding to the xvYCC color space, that is, a negative range and 1 in the sRGB space that has been clipped in the past, is included in the color expression range of the liquid crystal panel 20. A color gamut that exceeds the range (corresponding to the second extended color space) is also assigned, and an image having a brighter and deeper color than before can be expressed. Note that the first mapping processing unit 8 a also sends mapping processing information indicating that the processing has been performed to the control unit 21 even when the mapping processing as described above is performed. Further, the mapping processing in accordance with the color space (second extended color space) obtained by expanding the sYCbCr color space by the first mapping processing unit 8a described above is referred to as second xvYCC signal processing in the following description.

最後に、映像処理部8の第2マッピング処理部8bは、上述した色域判断部9の第2段階の検出結果に応じて、内部メモリ8dに記憶しているRGB変換された画像信号のマッピング処理を行うものである。詳しくは、色域判断部9から送られてきた第2段階の検出結果の情報が、図3に示す第3領域11c〜第6領域11fの少なくともいずれか一つに属する値を、RGB値が含まないことを検出した旨を表していれば、第2マッピング処理部8bは、その検出結果と共に映像処理部8へ送られてきた識別信号に応じたRGB変換済みの画像信号を、内部メモリ8dから読み出す。   Finally, the second mapping processing unit 8b of the video processing unit 8 maps the RGB-converted image signal stored in the internal memory 8d according to the detection result of the second stage of the color gamut determination unit 9 described above. The processing is performed. Specifically, the second-stage detection result information sent from the color gamut determination unit 9 indicates that the value belonging to at least one of the third region 11c to the sixth region 11f shown in FIG. If it indicates that it is not included, the second mapping processing unit 8b sends the RGB converted image signal corresponding to the identification signal sent to the video processing unit 8 together with the detection result to the internal memory 8d. Read from.

そして、第2マッピング処理部8bは、読み出したRGB変換済みの画像信号を液晶パネル20のRGB信号での色表示域(8ビットの動作範囲)に係る階調へマッピングし、マッピングした画像信号(RGB信号)を液晶パネル20へ供給する。このような第2マッピング処理部8bのマッピング処理により、外部から取得した画像信号には、拡張色空間に応じた第1領域11a〜第6領域11cに属する値が含まれなければ、sRGB色空間の色域に合ったマッピング処理を行うことで、半発明は、液晶パネル20の色域に係る作動範囲を有効に利用できるようにしている。なお、第2マッピング処理部8bが行うsRGB色空間に応じたマッピングの処理を、以降の説明ではsRGB信号処理と称する。   The second mapping processing unit 8b maps the read RGB-converted image signal to the gradation related to the color display area (8-bit operation range) of the RGB signal of the liquid crystal panel 20, and the mapped image signal ( RGB signal) is supplied to the liquid crystal panel 20. If the image signal acquired from the outside by the mapping process of the second mapping processing unit 8b does not include values belonging to the first area 11a to the sixth area 11c according to the extended color space, the sRGB color space The semi-invention makes it possible to effectively use the operating range related to the color gamut of the liquid crystal panel 20 by performing the mapping process suitable for the color gamut. Note that the mapping processing according to the sRGB color space performed by the second mapping processing unit 8b is referred to as sRGB signal processing in the following description.

図1に戻って説明を続けると、制御部21は、操作部24またはリモコン装置26で受け付けるユーザからの操作指示に従って、上述した各部の制御を行う。ユーザの操作指示に伴って制御部21が行う制御の一例として、アナログチューナ2、ビデオ入力部3、デジタル入力部6またはデジタルチューナ7の中から入力ソース(画像信号の取得元)を選択する制御(セレクタ4の切替制御も含む)、選択された入力ソースがアナログチューナ2またはデジタルチューナ7のいずれかであれば、放送チャンネルの選択等に係る制御が挙げられる。また、制御部21が自動で行う制御内容の一つに、バックライト調整部23(照射量調整手段に相当)に対する制御がある。なお、操作部24またはリモコン装置26は、上下左右キー、決定キー、テレビジョン装置1の各種機能に応じた操作指示の受付キー、電源オン・オフボタン等を具備している。   Returning to FIG. 1 and continuing the description, the control unit 21 controls each unit described above in accordance with an operation instruction from a user received by the operation unit 24 or the remote control device 26. As an example of control performed by the control unit 21 in response to a user operation instruction, control for selecting an input source (image signal acquisition source) from the analog tuner 2, the video input unit 3, the digital input unit 6, or the digital tuner 7. If the selected input source is either the analog tuner 2 or the digital tuner 7 (including the switching control of the selector 4), the control relating to the selection of the broadcast channel and the like can be mentioned. Further, one of the control contents automatically performed by the control unit 21 is a control for the backlight adjustment unit 23 (corresponding to the dose adjustment means). The operation unit 24 or the remote control device 26 includes up / down / left / right keys, an enter key, an operation instruction accepting key corresponding to various functions of the television device 1, a power on / off button, and the like.

バックライト調整部23は、LED光源または蛍光管からなるバックライト22(照射手段に相当)の点灯と消灯の切替、点灯時の照射量の調整等を制御部21の制御指示に従って行うものであり、制御部21から点灯指示を受けると、バックライト22を点灯させ、消灯指示を受けると、点灯させていたバックライト22を消灯させる。また、バックライト調整部23は、点灯させたバックライト22を最初、デフォルトの照射量(基準量に相当)に設定するが、制御部21から、照射量を高める指示を受けると、デフォルト照射量から高める調整を行い、照射量を低くする指示を受けると、デフォルト照射量から低める調整を行う。   The backlight adjustment unit 23 performs switching of turning on / off of a backlight 22 (corresponding to an irradiation unit) composed of an LED light source or a fluorescent tube, adjusting an irradiation amount at the time of lighting, and the like according to a control instruction of the control unit 21. When the lighting instruction is received from the control unit 21, the backlight 22 is turned on, and when the turning-off instruction is received, the lighted backlight 22 is turned off. The backlight adjustment unit 23 initially sets the lit backlight 22 to a default irradiation amount (corresponding to a reference amount). When receiving an instruction to increase the irradiation amount from the control unit 21, the default irradiation amount is set. When an instruction to lower the dose is received, an adjustment to lower the default dose is performed.

制御部21は、ユーザの操作指示に従って、バックライト22の照射量を調整する場合、照射量を高める指示または低める指示を出すが、本発明においては、上述した映像処理部8から送られてくるマッピング処理情報を受け取った場合に、照射量を高める指示をバックライト調整部23へ送る制御を行う。映像処理部8がマッピング処理情報を制御部21へ送る場合は、xvYCC色空間の第1領域11a〜第6領域11fのいずれかに属する値も含めてマッピング処理を行った場合(第1xvYCC信号処理または第2xvYCC信号処理を行った場合)に相当し、この場合、液晶パネル20では、より鮮やかな色、深みのある色味を再現できるが、その反面、バックライト22から照射される光量が、鮮やかさ及び深みを増した色により、パネル表面へ到達するまでに遮られる程度が高まり、それによりパネル表面での輝度が下がる。そのため、上述したように、バックライト22の照射量を高めることで、パネル表面での輝度低下分が補われ、液晶パネル20は、鮮やかな色、深みのある色味で表現された画像を適切な輝度で表示することができる。   The control unit 21 gives an instruction to increase or decrease the irradiation amount when adjusting the irradiation amount of the backlight 22 in accordance with the user's operation instruction. In the present invention, the control unit 21 sends it from the video processing unit 8 described above. When mapping processing information is received, control is performed to send an instruction to increase the dose to the backlight adjustment unit 23. When the video processing unit 8 sends the mapping processing information to the control unit 21, when the mapping processing is performed including a value belonging to any of the first region 11a to the sixth region 11f of the xvYCC color space (first xvYCC signal processing) In this case, the liquid crystal panel 20 can reproduce more vivid colors and deep colors, but on the other hand, the amount of light emitted from the backlight 22 is The color with increased vividness and depth increases the degree of obstruction before reaching the panel surface, thereby reducing the brightness on the panel surface. Therefore, as described above, by increasing the irradiation amount of the backlight 22, the decrease in luminance on the panel surface is compensated, and the liquid crystal panel 20 appropriately displays an image expressed with vivid colors and deep colors. Display with high brightness.

図4に示すフローチャートは、上述した処理を行うテレビジョン装置1における画像信号に対する一連の処理手順を整理したものである。以下、図4のフローチャートに基づいて本発明に係る処理内容(画像処理方法)を説明する。なお、以下の説明では、ユーザによる電源オン操作後に、デジタルチューナ7を入力ソースとして、ユーザが選択した場合の内容にしているが、他の入力ソース(アナログチューナ2、ビデオ入力部3、デジタル入力部6)が選択された場合でも、外部から取得した画像信号に対する処理内容は、下記の説明と同等になる。   The flowchart shown in FIG. 4 is an arrangement of a series of processing procedures for image signals in the television apparatus 1 that performs the above-described processing. The processing content (image processing method) according to the present invention will be described below based on the flowchart of FIG. In the following description, after the user turns on the power, the digital tuner 7 is used as an input source, and the content is selected by the user. However, other input sources (analog tuner 2, video input unit 3, digital input) Even when the unit 6) is selected, the processing content for the image signal acquired from the outside is equivalent to the following description.

まず、テレビジョン装置1は、操作部24またはリモコン装置26で入力ソースとして選択されたデジタルチューナ7で、ユーザにより設定された放送チャンネルの放送信号を受信して、テレビジョン放送の画像信号(YCbCr信号)を取得する(S1)。次に、テレビジョン装置1は、色域判断部9の第1検出部9aで、取得した画像信号に係るYCbCr信号の中に、図3の第1領域11aまたは第2領域11bの少なくともいずれかの範囲(第1拡張色空間の範囲)に属する値が含まれるか否かを検出する(S2)。第1検出部9aが、各領域11a、11bのいずれかに属する値が画像信号に含まれることを検出した場合(S2:YES)、テレビジョン装置1は、映像処理部8の第1マッピング処理部8aで、S2の段階の検出処理対象と同じ識別番号の画像信号に対して第1xvYCC信号処理を行う(S3)。   First, the television apparatus 1 receives a broadcast signal of a broadcast channel set by a user with the digital tuner 7 selected as an input source by the operation unit 24 or the remote control device 26, and receives an image signal (YCbCr of the television broadcast). Signal) is acquired (S1). Next, in the television apparatus 1, the first detection unit 9a of the color gamut determination unit 9 includes at least one of the first region 11a and the second region 11b in FIG. 3 in the YCbCr signal related to the acquired image signal. It is detected whether or not a value belonging to the range (the range of the first extended color space) is included (S2). When the first detection unit 9a detects that a value belonging to one of the regions 11a and 11b is included in the image signal (S2: YES), the television apparatus 1 performs the first mapping process of the video processing unit 8. The unit 8a performs the first xvYCC signal processing on the image signal having the same identification number as the detection processing target in the step S2 (S3).

また、第1検出部9aが、各領域11a、11bのいずれかに属する値が画像信号に含まれないことを検出した場合(S2:NO)、テレビジョン装置1は、映像処理部8の変換処理部8cで、取得した画像信号(YCbCr信号)のRGB変換を行う(S4)。そして、テレビジョン装置1は、色域判断部9の第2検出部9bで、RGB変換された画像信号のRGB値(sRGB信号値)の中に、第2拡張色空間に応じた図3の第3領域11c〜第6領域11fの少なくともいずれかに属する値が含まれるか否かを検出する(S5)。第2検出部9bが、各領域11c〜11fのいずれかに属する値が画像信号に含まれることを検出した場合(S5:YES)、テレビジョン装置1は、映像処理部8の第1マッピング処理部8aで、S5の段階の検出処理対象と同じ識別番号の画像信号に対して第2xvYCC信号処理を行う(S6)。   When the first detection unit 9a detects that a value belonging to one of the regions 11a and 11b is not included in the image signal (S2: NO), the television device 1 converts the video processing unit 8 The processing unit 8c performs RGB conversion of the acquired image signal (YCbCr signal) (S4). The television apparatus 1 in FIG. 3 corresponds to the second extended color space among the RGB values (sRGB signal values) of the RGB-converted image signal by the second detection unit 9b of the color gamut determination unit 9. It is detected whether or not a value belonging to at least one of the third area 11c to the sixth area 11f is included (S5). When the second detection unit 9b detects that a value belonging to any of the regions 11c to 11f is included in the image signal (S5: YES), the television device 1 performs the first mapping process of the video processing unit 8. The unit 8a performs the second xvYCC signal processing on the image signal having the same identification number as the detection processing target in the step S5 (S6).

それから、テレビジョン装置1は、S3の段階で第1xvYCC信号処理が行われた場合、またはS6の段階で第2xvYCC信号処理が行われた場合、バックライト22の照射量をデフォルトより高める処理を行い(S7)、各xvYCC信号処理を行った画像信号に基づいた画像を液晶パネル20に表示させる出力処理を行う(S9)。   Then, when the first xvYCC signal processing is performed in the step S3 or the second xvYCC signal processing is performed in the step S6, the television apparatus 1 performs processing for increasing the irradiation amount of the backlight 22 from the default. (S7) An output process for displaying an image on the liquid crystal panel 20 based on the image signal subjected to each xvYCC signal process is performed (S9).

一方、第2検出部9bが、各領域11c〜11fのいずれかに属する値が画像信号に含まれないことを検出した場合(S5:NO)、テレビジョン装置1は、映像処理部8の第2マッピング処理部8bで、S5の段階の検出処理に係るRGB変換された画像信号に対してsRGB信号処理を行う(S8)。そして、テレビジョン装置1は、sRGB信号処理を行った画像信号に基づいた画像を液晶パネル20に表示させる出力処理を行う(S9)。   On the other hand, when the second detection unit 9b detects that a value belonging to any of the regions 11c to 11f is not included in the image signal (S5: NO), the television device 1 The two mapping processing unit 8b performs sRGB signal processing on the RGB-converted image signal related to the detection processing in step S5 (S8). Then, the television apparatus 1 performs output processing for displaying an image on the liquid crystal panel 20 based on the image signal subjected to the sRGB signal processing (S9).

最後に、テレビジョン装置1は、操作部24またはリモコン装置26で、電源オフ操作を受け付けたか否かを制御部21で判断する(S10)。電源オフ操作を受け付けていない場合(S10:NO)、テレビジョン装置1は、最初の段階(S1)へ戻り、画像信号の取得を継続する。一方、ユーザから電源オフ操作を受け付けた場合(S10:YES)、テレビジョン装置1は、一連の処理を終了する。   Finally, the television apparatus 1 determines whether or not the power-off operation has been accepted by the operation unit 24 or the remote control device 26 (S10). When the power-off operation is not received (S10: NO), the television apparatus 1 returns to the first stage (S1) and continues to acquire the image signal. On the other hand, when the power-off operation is received from the user (S10: YES), the television apparatus 1 ends the series of processes.

よって、本発明のテレビジョン装置1は、上述したような処理を行うので、例えば、テレビジョン放送で放送されてきた放送番組に係る画像信号が、放送時間帯によってxvYCC色空間の拡張された色空間(拡張色空間)に属する値を含むものと、sRGB色空間のみで規定された範囲に属する値を含むものが切り替わっても、それに対応して、自動的に、第1xvYCC信号処理、第2xvYCC信号処理、sRGB信号処理を適宜切り替えるので、常に、液晶パネル20の色域表現範囲を有効に使うことができる。さらに、テレビジョン装置1が第1xvYCC信号処理または第2xvYCC信号処理を行う際、バックライト22の照射量を高めるので、画像を表示するパネル表面における適切な輝度を確保した上で、xvYCC色空間の拡張色空間に属する値を含む画像信号に基づく鮮やかで深い色味のある画像をユーザは楽しむことができる。   Therefore, the television apparatus 1 of the present invention performs the processing as described above. For example, an image signal related to a broadcast program broadcast by television broadcasting is a color in which the xvYCC color space is expanded by the broadcast time zone. In response to switching between a value including a value belonging to a space (extended color space) and a value including a value belonging to a range defined only by the sRGB color space, the first xvYCC signal processing and the second xvYCC are automatically performed accordingly. Since the signal processing and the sRGB signal processing are appropriately switched, the color gamut expression range of the liquid crystal panel 20 can always be used effectively. Further, when the television apparatus 1 performs the first xvYCC signal processing or the second xvYCC signal processing, the amount of illumination of the backlight 22 is increased, so that an appropriate luminance on the panel surface for displaying an image is secured, and the xvYCC color space The user can enjoy a vivid and deep color image based on an image signal including a value belonging to the extended color space.

なお、本発明は、上述した実施形態に限定されるものではなく、様々な変形例が考えられる。例えば、液晶パネル以外の表示デバイスを備えるテレビジョン装置(表示装置)に対しても、本発明は適用可能であり、例えば、表示デバイスとしては、有機ELのような表示パネル、ブラウン管(受像管)、プラズマディスプレイ(PDP)等も適用可能である。また、バックライトまたはフロントライト等を必要としない表示デバイスを適用する場合、図1のバックライト22およびバックライト調整部23の替わりに、適用される表示デバイスの画面輝度を調整するユニットを、上述したバックライト調整部23の照射量の調整処理を同様に制御部21が制御を行うことになる。たとえば、表示デバイスとして、自発光式の有機ELを適用した場合、有機ELの発光量を調整するユニットに対して、制御部21は制御を行うことになる。   In addition, this invention is not limited to embodiment mentioned above, Various modifications can be considered. For example, the present invention can be applied to a television apparatus (display apparatus) including a display device other than a liquid crystal panel. For example, as a display device, a display panel such as an organic EL, a cathode ray tube (picture tube), or the like. A plasma display (PDP) or the like is also applicable. When a display device that does not require a backlight or a front light is applied, a unit that adjusts the screen brightness of the display device to be applied instead of the backlight 22 and the backlight adjustment unit 23 in FIG. Similarly, the control unit 21 controls the irradiation amount adjustment processing of the backlight adjustment unit 23. For example, when a self-luminous organic EL is applied as the display device, the control unit 21 controls the unit that adjusts the light emission amount of the organic EL.

さらに、上述した説明では、画像信号として動画を構成する画像フレームの画像信号に対する処理で説明したが、勿論、静止画の画像信号に対しても、同様な処理を行うことができる。特に、デジタル入力部6の無線インタフェース6bとして、IrSS用の無線インタフェースを用いて、外部のIrSS通信可能な撮像機能を有する携帯電話機等から送られる撮像画像(静止画)を取得する場合に対しても、適切な色表現処理の切替を自動で行うことが可能となる。さらにまた、本発明は、HDMIまたは無線HDMIに対応したHDMI系インタフェースを具備している表示装置に適用された場合に、HDMI規格に係るインフォフレームに色信号を示す識別符号が含まれないときに、HDMI系インタフェースで取得する画像信号に含まれる色信号の値に応じて、最適な色表現処理を自動で適宜切り替えることができる。   Furthermore, in the above description, the processing has been described with respect to the image signal of the image frame constituting the moving image as the image signal. Of course, the same processing can be performed on the image signal of the still image. In particular, for a case where a captured image (still image) transmitted from a mobile phone or the like having an imaging function capable of external IrSS communication is acquired using a wireless interface for IrSS as the wireless interface 6b of the digital input unit 6. In addition, it is possible to automatically switch the appropriate color expression processing. Furthermore, when the present invention is applied to a display device having an HDMI interface compatible with HDMI or wireless HDMI, an identification code indicating a color signal is not included in an info frame according to the HDMI standard. The optimum color expression processing can be automatically switched appropriately according to the value of the color signal included in the image signal acquired by the HDMI interface.

また、図5に示すように、表示デバイスを有しない画像処理装置50に対しても適用可能である。この場合、画像処理装置50は、図1に示す構成において、液晶パネル20、バックライト22、およびバックライト調整部23が省略されると共に、映像処理部8のマッピングされた画像信号の出力を画像出力端子(接続手段に相当)から行うようになり、この画像出力端子に、外部の表示装置40を接続する形態となる。このような画像処理装置50には、録画装置、ケーブルテレビまたは特定の放送の受信を行うセットトップボックス等に適用可能である。また、外部の表示装置40が備える表示デバイス40a(たとえば、液晶パネル)は、機種により色再現特性が相異することがあるので、マッピング処理においても微妙なチューニング処理が要求されることもある。そのため、図5に示す変形例の画像処理装置50に、様々な外部表示装置に合ったチューニング処理用のテーブルを具備させると共に、画像出力端子に接続された外部表示装置の種類に合ったチューニング処理を、上記テーブルから読み出すようにして、上述したマッピング処理の結果を接続対象の外部表示装置の表示特性に合わせてチューニング(調整)することが好ましい。   Further, as shown in FIG. 5, the present invention can also be applied to an image processing apparatus 50 that does not have a display device. In this case, in the configuration shown in FIG. 1, the image processing apparatus 50 omits the liquid crystal panel 20, the backlight 22, and the backlight adjustment unit 23, and outputs the mapped image signal output from the video processing unit 8 as an image. The operation is performed from an output terminal (corresponding to connection means), and an external display device 40 is connected to the image output terminal. Such an image processing device 50 can be applied to a recording device, a cable television, a set top box that receives a specific broadcast, or the like. In addition, the display device 40a (for example, a liquid crystal panel) provided in the external display device 40 may have different color reproduction characteristics depending on the model, so that a fine tuning process may be required in the mapping process. Therefore, the image processing apparatus 50 according to the modification shown in FIG. 5 is provided with a tuning process table suitable for various external display devices, and a tuning process suitable for the type of external display device connected to the image output terminal. Is read from the table, and the result of the mapping process described above is preferably tuned (adjusted) according to the display characteristics of the external display device to be connected.

本発明の実施形態に係るテレビジョン装置の主要な内部構成を示すブロック図である。It is a block diagram which shows the main internal structures of the television apparatus which concerns on embodiment of this invention. (a)は、色域判断部の構成を示す概略図、(b)は映像処理部の構成を示す概略図である。(A) is the schematic which shows the structure of a color gamut determination part, (b) is the schematic which shows the structure of a video processing part. YCbCr色空間をベースとした色域を示すグラフである。It is a graph which shows the color gamut based on YCbCr color space. 本発明に係る画像処理方法の処理手順を示すフローチャートである。It is a flowchart which shows the process sequence of the image processing method which concerns on this invention. 本発明の変形例に係る画像処理装置を示す概略図である。It is the schematic which shows the image processing apparatus which concerns on the modification of this invention.

符号の説明Explanation of symbols

1 画像処理装置
2 アナログチューナ
3 ビデオ入力部
6 デジタル入力部
7 デジタルチューナ
8 映像処理部
8a 第1マッピング処理部
8b 第2マッピング処理部
8c 変換処理部
9 色域判断部
9a 第1検出部
9b 第2検出部
20 液晶パネル
21 制御部
22 バックライト
23 バックライト調整部
DESCRIPTION OF SYMBOLS 1 Image processing apparatus 2 Analog tuner 3 Video input part 6 Digital input part 7 Digital tuner 8 Video processing part 8a 1st mapping process part 8b 2nd mapping process part 8c Conversion process part 9 Color gamut determination part 9a 1st detection part 9b 1st 2 detection unit 20 liquid crystal panel 21 control unit 22 backlight 23 backlight adjustment unit

Claims (7)

sRGB色空間と、sRGB色空間から拡張された拡張色空間とを含むxvYCC色空間に係るxvYCC色信号値に応じた画像信号を、画像表示に係る色表示域に応じた階調へ割り当てる処理を行う画像処理装置において、
外部から取得した画像信号に係る信号値の中に、前記拡張色空間に属する値が含まれるか否かを検出する検出手段と、
前記検出手段が前記拡張色空間に属する値が含まれることを検出した場合、前記拡張色空間に属する値を含んだ画像信号を、画像表示に係る色表示域に応じた階調へ割り当てる処理を行う手段と
を備えることを特徴とする画像処理装置。
Processing for assigning an image signal corresponding to an xvYCC color signal value related to an xvYCC color space including an sRGB color space and an extended color space expanded from the sRGB color space to a gradation corresponding to the color display area related to the image display In the image processing apparatus to perform,
Detecting means for detecting whether or not a value belonging to the extended color space is included in a signal value relating to an image signal acquired from outside;
When the detection unit detects that a value belonging to the extended color space is included, a process of assigning an image signal including the value belonging to the extended color space to a gradation corresponding to a color display area related to image display And an image processing apparatus.
輝度および色差を規定し、少なくとも色差範囲が拡張された第1拡張色空間を含む第1色空間に係る第1色信号値に応じた画像信号を取得する画像取得手段を備え、前記画像取得手段で取得した画像信号を、画像表示に係る色表示域に応じた階調へ割り当てる処理を行う画像処理装置において、
前記画像取得手段で取得した画像信号に係る第1色信号値の中に、前記第1拡張色空間に属する値が含まれるか否かを検出する第1検出手段と、
前記第1検出手段が前記第1拡張色空間に属する値が含まれることを検出した場合、前記第1拡張色空間に属する値を含んだ画像信号を、画像表示に係る色表示域に応じた階調へ割り当てる処理を行う第1割当手段と
を備えることを特徴とする画像処理装置。
Image acquisition means for acquiring an image signal according to a first color signal value relating to a first color space that includes a first extended color space that defines a luminance and a color difference and at least a color difference range is extended, the image acquisition means In the image processing apparatus that performs the process of assigning the image signal acquired in step 1 to the gradation corresponding to the color display area related to the image display,
First detection means for detecting whether or not a value belonging to the first extended color space is included in the first color signal value relating to the image signal acquired by the image acquisition means;
When the first detection unit detects that a value belonging to the first extended color space is included, an image signal including the value belonging to the first extended color space is determined according to a color display area related to image display. An image processing apparatus comprising: a first assigning unit that performs a process of assigning to gradations.
前記第1検出手段が前記第1拡張色空間に属する値が含まれないことを検出した場合、前記画像取得手段が取得した画像信号を、複数色の割合を規定し、色信号値が負となる範囲または基準値を超える範囲まで拡張された第2拡張色空間を含む第2色空間に係る第2色信号値に応じた画像信号へ変換する変換手段と、
前記変換手段が変換した画像信号に係る第2色信号値の中に、前記第2拡張色空間に属する値が含まれるか否かを検出する第2検出手段とを備え、
前記第2検出手段が前記第2拡張色空間に属する値が含まれることを検出した場合、前記第1割当手段は、前記第2拡張色空間に属する値を含んだ画像信号を、画像表示に係る色表示域に応じた階調へ割り当てる処理を行う請求項2に記載の画像処理装置。
When the first detection unit detects that a value belonging to the first extended color space is not included, the image signal acquired by the image acquisition unit defines a ratio of a plurality of colors, and the color signal value is negative. Conversion means for converting into an image signal corresponding to a second color signal value related to a second color space including a second extended color space expanded to a range exceeding the range or the reference value;
Second detection means for detecting whether or not a value belonging to the second extended color space is included in the second color signal value related to the image signal converted by the conversion means;
When the second detecting means detects that a value belonging to the second extended color space is included, the first assigning means uses an image signal including the value belonging to the second extended color space for image display. The image processing apparatus according to claim 2, wherein a process of assigning to gradations corresponding to the color display area is performed.
前記第2検出手段が前記第2拡張色空間に属する値が含まれないことを検出した場合、前記変換手段で変換した画像信号を、画像表示に係る色表示域に応じた階調へ割り当てる処理を行う第2割当手段を備える請求項3に記載の画像処理装置。   When the second detection unit detects that a value belonging to the second extended color space is not included, the process of assigning the image signal converted by the conversion unit to a gradation corresponding to a color display area related to image display The image processing apparatus according to claim 3, further comprising a second assigning unit that performs the following. 外部の表示装置と接続を行う接続手段と、
前記接続手段から、画像表示に係る色表示域に応じた階調へ割り当てられた画像信号を出力する手段と
を備える請求項1乃至請求項4のいずれか1項に記載の画像処理装置。
A connection means for connecting to an external display device;
5. The image processing apparatus according to claim 1, further comprising: an output unit configured to output an image signal assigned to a gradation corresponding to a color display area related to image display from the connection unit.
表示部と、
前記表示部へ、画像表示に係る色表示域に応じた階調へ割り当てられた画像信号を供給する手段と
を備える請求項1乃至請求項4のいずれか1項に記載の画像処理装置。
A display unit;
5. The image processing apparatus according to claim 1, further comprising: an image signal assigned to a gradation corresponding to a color display area related to image display to the display unit.
前記表示部は、表示パネルであり、
前記表示パネルの照射を行う照射手段と、
前記第1割当手段が、画像信号を階調へ割り当てる処理を行った場合、前記照射手段の照射量を基準量より高める調整を行う照射量調整手段と
を備える請求項6に記載の画像処理装置。
The display unit is a display panel,
Irradiation means for irradiating the display panel;
The image processing apparatus according to claim 6, further comprising: a dose adjustment unit configured to adjust the dose of the irradiation unit to be higher than a reference amount when the first allocation unit performs a process of assigning an image signal to a gradation. .
JP2008026654A 2008-02-06 2008-02-06 Image processing device Expired - Fee Related JP5063394B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008026654A JP5063394B2 (en) 2008-02-06 2008-02-06 Image processing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008026654A JP5063394B2 (en) 2008-02-06 2008-02-06 Image processing device

Publications (2)

Publication Number Publication Date
JP2009188744A true JP2009188744A (en) 2009-08-20
JP5063394B2 JP5063394B2 (en) 2012-10-31

Family

ID=41071549

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008026654A Expired - Fee Related JP5063394B2 (en) 2008-02-06 2008-02-06 Image processing device

Country Status (1)

Country Link
JP (1) JP5063394B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103546714A (en) * 2013-10-29 2014-01-29 深圳Tcl新技术有限公司 Method and device for processing HDMI signal
JP2014063138A (en) * 2012-08-31 2014-04-10 Canon Inc Display control device and control method thereof
JP2017532609A (en) * 2015-07-28 2017-11-02 小米科技有限責任公司Xiaomi Inc. Color gamut mode switching method and apparatus

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004240992A (en) * 2000-10-13 2004-08-26 Seiko Epson Corp Output image adjustment of image file
JP2007166604A (en) * 2005-12-10 2007-06-28 Samsung Electronics Co Ltd Image capture device and method, and recording medium with program for implementing the method recorded thereon
JP2007286120A (en) * 2006-04-12 2007-11-01 Sony Corp Device and method for displaying image
WO2007125697A1 (en) * 2006-04-26 2007-11-08 Panasonic Corporation Video processing device, recording medium, video signal processing method, video signal processing program, and integrated circuit

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004240992A (en) * 2000-10-13 2004-08-26 Seiko Epson Corp Output image adjustment of image file
JP2007166604A (en) * 2005-12-10 2007-06-28 Samsung Electronics Co Ltd Image capture device and method, and recording medium with program for implementing the method recorded thereon
JP2007286120A (en) * 2006-04-12 2007-11-01 Sony Corp Device and method for displaying image
WO2007125697A1 (en) * 2006-04-26 2007-11-08 Panasonic Corporation Video processing device, recording medium, video signal processing method, video signal processing program, and integrated circuit

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014063138A (en) * 2012-08-31 2014-04-10 Canon Inc Display control device and control method thereof
CN103546714A (en) * 2013-10-29 2014-01-29 深圳Tcl新技术有限公司 Method and device for processing HDMI signal
CN103546714B (en) * 2013-10-29 2018-03-30 深圳Tcl新技术有限公司 To the method and apparatus of HDMI signal transactings
JP2017532609A (en) * 2015-07-28 2017-11-02 小米科技有限責任公司Xiaomi Inc. Color gamut mode switching method and apparatus

Also Published As

Publication number Publication date
JP5063394B2 (en) 2012-10-31

Similar Documents

Publication Publication Date Title
US8063992B2 (en) Dominant color extraction for ambient light derived from video content mapped through unrendered color space
JP5611508B2 (en) Ambient light adaptive color correction apparatus and method
US7932953B2 (en) Ambient light derived from video content by mapping transformations through unrendered color space
JP4927437B2 (en) Color reproduction device having multiple color reproduction ranges and color signal processing method thereof
EP1704727B1 (en) Flicker-free adaptive thresholding for ambient light derived from video content mapped through unrendered color space
US20070091111A1 (en) Ambient light derived by subsampling video content and mapped through unrendered color space
KR102176398B1 (en) A image processing device and a image processing method
US20080266314A1 (en) Nonlinearly extending a color gamut of an image
JP2009081849A (en) Color correction circuit and image display device using the same
JP2013140353A (en) Display apparatus and method for displaying image
JP2008278465A (en) Method and apparatus for displaying image having wide hue range
JP4181625B1 (en) Luminance information display apparatus and method
US8139079B2 (en) Color gamut component analysis apparatus, method of analyzing color gamut component, and color gamut component analysis program
CN101141654A (en) Image processing apparatus, display apparatus comprising image processing apparatus and image processing method
JP2007286120A (en) Device and method for displaying image
KR20030090849A (en) Video display device
JP5063394B2 (en) Image processing device
US8792712B2 (en) Method for correcting color and apparatus using the same
JP2009170999A (en) Display device
KR100712481B1 (en) Display apparatus and control method thereof
CN109427313B (en) Display apparatus, display control method, and computer-readable medium
JP2011024202A (en) Color conversion apparatus, color conversion method, and image display system
JP2005109611A (en) Video display
JP5476108B2 (en) Display device
WO2021040075A1 (en) Image display apparatus and image processing method thereof

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100218

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120308

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120319

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120516

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120717

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120807

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150817

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees