CN1172527C - 图像显示***、投影仪及图像处理方法 - Google Patents
图像显示***、投影仪及图像处理方法 Download PDFInfo
- Publication number
- CN1172527C CN1172527C CNB011427620A CN01142762A CN1172527C CN 1172527 C CN1172527 C CN 1172527C CN B011427620 A CNB011427620 A CN B011427620A CN 01142762 A CN01142762 A CN 01142762A CN 1172527 C CN1172527 C CN 1172527C
- Authority
- CN
- China
- Prior art keywords
- mentioned
- image
- target color
- color gamut
- colour gamut
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 12
- 230000003044 adaptive effect Effects 0.000 title 1
- 239000011159 matrix material Substances 0.000 claims abstract description 105
- 230000000007 visual effect Effects 0.000 claims abstract description 76
- 238000006243 chemical reaction Methods 0.000 claims abstract description 46
- 230000007613 environmental effect Effects 0.000 claims abstract description 37
- 230000009466 transformation Effects 0.000 claims description 82
- 238000012937 correction Methods 0.000 claims description 31
- 239000003086 colorant Substances 0.000 abstract description 2
- 238000013507 mapping Methods 0.000 description 24
- 230000000694 effects Effects 0.000 description 12
- 238000000034 method Methods 0.000 description 12
- 238000012545 processing Methods 0.000 description 9
- 239000004973 liquid crystal related substance Substances 0.000 description 6
- 230000008569 process Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 238000005401 electroluminescence Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000012512 characterization method Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G1/00—Control arrangements or circuits, of interest only in connection with cathode-ray tube indicators; General aspects or details, e.g. selection emphasis on particular characters, dashed line or dotted line generation; Preprocessing of data
- G09G1/28—Control arrangements or circuits, of interest only in connection with cathode-ray tube indicators; General aspects or details, e.g. selection emphasis on particular characters, dashed line or dotted line generation; Preprocessing of data using colour tubes
- G09G1/285—Interfacing with colour displays, e.g. TV receiver
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/67—Circuits for processing colour signals for matrixing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/73—Colour balance circuits, e.g. white balance circuits or colour temperature control
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/06—Adjustment of display parameters
- G09G2320/0666—Adjustment of display parameters for control of colour parameters, e.g. colour temperature
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Controls And Circuits For Display Device (AREA)
- Processing Of Color Television Signals (AREA)
- Color Image Communication Systems (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
- Digital Computer Display Output (AREA)
Abstract
为了提供一种可以更高速地再现符合用户喜好的图像颜色的图像显示***、投影仪及图像处理方法,设置基于用户选择的目标轮廓存储部(162)内的目标轮廓运算目标色域,同时基于投影仪轮廓存储部(164)内的投影仪轮廓、来自掌握视野环境的色光传感器(60)的环境信息,运算可显示色域的色域运算部(160)和,根据目标色域和可显示色域的关系,生成变换矩阵的矩阵生成部(122)和,使用生成的变换矩阵变换图像信息的矩阵变换部(124),矩阵变换图像信息而显示图像。
Description
技术领域
本发明涉及环境适应型的图像显示***、图像处理方法和信息存储媒体。
背景技术
本发明原样包含2000年11月13日申请的日本特许愿2000-344822、2001年9月27日申请的日本特许愿2001-296027的内容。
为了统一图像的观看效果,提出了CMS(Color Management System)等色变换***。
但是,实际希望的图像的观看效果根据个人和地区而不同。
例如,在日本图像的标准显示方式是NTSC,但在欧洲图像的标准显示方式是PAL。
从而,例如,在欧洲面向欧洲人显示在日本以NTSC为前提生成的图像时,与欧洲人所希望的图像的观看效果不同。
因此,不只变换图像信息(RGB信号等),需要与用户所选的显示方式等图像特性一致地变换图像信息。
另外,图像的观看效果由于受到环境光等影响,所以需要掌握视野环境,并考虑视野环境而变换图像信息。
在根据这些图像特性和视野环境变换图像信息时,需要生成用于变换的变换用信息。但是,对所有设想的图像特性和视野环境,在存储区域预先存储变换用信息需要很大的存储区域。
另外,还需要实时变换实时生成的图像信息。
发明内容
(1)本发明是鉴于上述问题而提出的,其目的在于提供可以更高速再现适合用户所选的图像特性的图像的观看效果的环境适应型的图像显示***、图像处理方法和信息存储媒体。
为了解决上述问题,本发明的环境适应型的图像显示***是基于掌握图像的被显示区域的视野环境的视野环境掌握单元的环境信息,变换用于显示上述图像的图像信息并显示图像的图像显示***,其特征在于包括:
矩阵生成单元,为了基于上述环境信息和用户选择的图像特性,显示适合上述视野环境和上述图像特性的图像,生成变换矩阵;
矩阵变换单元,基于生成的变换矩阵,变换上述图像信息;
图像显示单元,基于变换的图像信息而显示图像,
上述图像特性至少基于图像显示方式和图像种类中的一个。
(2)本发明的信息存储媒体是基于掌握图像的被显示区域的视野环境的视野环境掌握单元的环境信息,存储用于变换显示上述图像所用的图像信息的程序的计算机可读取的信息存储媒体,其特征在于:
存储使计算机作为矩阵生成单元和矩阵变换单元工作的程序,其中,矩阵生成单元是为了基于上述环境信息和用户选择的图像特性,显示适合上述视野环境和上述图像特性的图像,生成变换矩阵;矩阵变换单元是基于生成的变换矩阵,变换上述图像信息,
上述图像特性至少基于图像显示方式和图像种类中的一个。
(3)本发明的图像处理方法是基于掌握图像的被显示区域的视野环境的视野环境掌握单元的环境信息,变化用于显示上述图像的图像信息的图像处理方法,其特征在于包括:
矩阵生成工序,为了基于上述环境信息和用户选择的图像特性,显示适合上述视野环境和上述图像特性的图像,生成变换矩阵;
矩阵变换工序,基于生成的变换矩阵,变换上述图像信息。
根据本发明,作为变换用信息生成变换矩阵,通过使用该变换矩阵变化图象信息,与作为变换用信息使用查表(以下称为“LUT”)的情况相比,可以进行高速变换,而且可以减少变换用信息所占的存储区域。
从而,根据本发明,可以更实时显示适合用户选择的图像特性和视野环境的图像。
在此,图像显示方式例如为NTSC、PAL、SECAM等。图像种类例如为RGB、sRGB等。
(4)上述图像显示***包括运算作为基于上述图像特性的色域的目标色域,同时基于上述环境信息,运算作为用上述图像显示单元在上述视野环境可显示的色域的可显示色域的色域运算单元,
上述矩阵生成单元在上述可显示色域比上述目标色域更广时,比上述目标色域更窄时,与上述目标色域一致时,有与上述目标色域重合的部分和不重合的部分时的各种情况下,也可以生成不同的变换矩阵。
(5)上述信息存储媒体存储使计算机作为色域运算单元工作的程序,色域运算单元是运算作为基于上述图像特性的色域的目标色域,同时基于上述环境信息,运算作为用上述图像显示单元在上述视野环境可显示的色域的可显示色域,
上述矩阵生成单元在上述可显示色域比上述目标色域更广时,比上述目标色域更窄时,与上述目标色域一致时,有与上述目标色域重合的部分和不重合的部分时的各种情况下,也可以生成不同的变换矩阵。
(6)上述矩阵生成工序包括运算作为基于上述图像特性的色域的目标色域,同时基于上述环境信息,运算作为用上述图像显示单元在上述视野环境可显示的色域的可显示色域的工序,
上述矩阵生成工序在上述可显示色域比上述目标色域更广时,比上述目标色域更窄时,与上述目标色域一致时,有与上述目标色域重合的部分和不重合的部分时的各种情况下,也可以生成不同的变换矩阵。
根据视野环境和图像特性,基于图像特性的色域和用上述图像显示单元可显示的色域的关系不同。因此,采用只使用单独的变换矩阵变换图像信息的方法不能很好再现图像。
根据本发明,通过分成上述4种情况并生成与各情况对应的变换矩阵,可以更好地再现图像。
(7)上述图像显示***和上述信息存储媒体中,上述矩阵生成单元在上述可显示色域比上述目标色域更窄时和有与上述目标色域重合的部分和不重合的部分时,也可以生成重视色彩再现性或色域再现性的变换矩阵。
(8)上述矩阵生成工序中,在上述可显示色域比上述目标色域更窄时和有与上述目标色域重合的部分和不重合的部分时,也可以生成重视色彩再现性或色域再现性的变换矩阵。
这样,通过生成重视色彩或色域再现性的变换矩阵,可以更好地再现图像。
(9)上述图像显示***包括具有上述色域运算单元、上述矩阵生成单元、上述矩阵变换单元、上述图像显示单元和生成校对用图像的单元的投影型显示装置,
上述图像显示单元将生成的校对用图像投影显示在上述被显示区域,
上述视野环境掌握单元也可以掌握显示上述校对用图像的被显示区域的视野环境。
这样,由于在投影型显示装置的内部生成校对用图像,所以可以不从PC等外部输入装置把校对用图像输入到投影型显示装置,投影型显示装置可以单独进行校正(校对)。
上述图像处理方法也可以包括:
在修正上述图像信息之前生成校对用图像的工序;
在上述被显示区域显示生成的校对用图像的工序;
掌握显示上述校对用图像的被显示区域的视野环境,生成上述环境信息的工序。
这样,通过使用校对用图像来掌握视野环境,可以更好地掌握视野环境。从而,可以更好地再现图像的观看效果。
本发明提供了一种图像显示***,基于视野环境掌握单元的环境信息,变换用于显示上述图像的图像信息并显示图象,所述视野环境掌握单元用于掌握图像的被显示区域的视野环境,其特征在于包括:
矩阵生成单元,为了基于上述环境信息和用户选择的图像特性,显示适合上述视野环境和上述图像特性的图像,生成变换矩阵;
矩阵变换单元,基于生成的变换矩阵,变换上述图像信息;
图像显示单元,基于变换的图像信息而显示图像;以及
色域运算单元,运算目标色域和可显示色域,所述目标色域是基于上述图像特性的色域,所述可显示色域是基于上述环境信息并用上述图像显示单元在上述视野环境可显示的色域,
上述图像特性基于图像显示方式或图像种类,上述矩阵生成单元在上述可显示色域比上述目标色域更广时,比上述目标色域更窄时,与上述目标色域一致时,有与上述目标色域重合的部分和不重合的部分时的各种情况下,生成不同的变换矩阵。
本发明还提供了一种投影仪,基于视野环境掌握单元的环境信息,变换用于显示上述图像的图像信息并显示图象,所述视野环境掌握单元用于掌握图像的被显示区域的视野环境,其特征在于:
包括:矩阵生成单元,为了基于上述环境信息和用户选择的图像特性,显示适合上述视野环境和上述图像特性的图像,生成变换矩阵;
矩阵变换单元,基于生成的变换矩阵,变换上述图像信息;
图像显示单元,基于变换的图像信息而显示图像;
生成校对用图象的单元,以及
色域运算单元,运算目标色域和可显示色域,所述目标色域是基于上述图像特性的色域,所述可显示色域是基于上述环境信息并用上述图像显示单元在上述视野环境可显示的色域,
上述图像特性基于图像显示方式或图像种类,
上述矩阵生成单元在上述可显示色域比上述目标色域更广时,比上述目标色域更窄时,与上述目标色域一致时,有与上述目标色域重合的部分和不重合的部分时的各种情况下,生成不同的变换矩阵,
上述图像显示单元将生成的校对用图像投影显示在上述被显示区域,
上述视野环境掌握单元掌握显示上述校对用图像的被显示区域的视野环境。
本发明还提供了一种图像处理方法,基于视野环境掌握单元的环境信息,变换用于显示上述图像的图像信息,所述视野环境掌握单元用于掌握图像的被显示区域的视野环境,其特征在于包括:
矩阵生成工序,为了基于上述环境信息和用户选择的图像特性,显示适合上述视野环境和上述图像特性的图像,生成变换矩阵;
矩阵变换工序,基于生成的变换矩阵,变换上述图像信息,
上述矩阵生成工序包括运算目标色域和可显示色域的工序,所述目标色域是基于上述图像特性的色域,所述可显示色域是基于上述环境信息并用图像显示单元在上述视野环境可显示的色域,
在上述矩阵生成工序中,上述可显示色域比上述目标色域更广时,比上述目标色域更窄时,与上述目标色域一致时,有与上述目标色域重合的部分和不重合的部分时的各种情况下,生成不同的变换矩阵。
附图说明
图1是本实施例的图像显示***的概要说明图。
图2A是表示目标色域和可显示色域一致时的目标色域和可显示色域的模式图,图2B是表示可显示色域比目标色域更广时的目标色域和可显示色域的模式图。
图3A是表示可显示色域比目标色域更窄时的目标色域和可显示色域的模式图,图3B是表示目标色域有与可显示色域重合的部分和不重合部分时的目标色域和可显示色域的模式图。
图4A表示在色域优先时的色域映射后的色域,图4B是表示在色彩优先时的色域映射后的色域的模式图。
图5是本实施例的投影仪内的图像处理部的功能框图。
图6是表示本实施例的图像处理次序的流程图。
图7是表示本实施例的矩阵生成变换处理的次序的流程图。
具体实施方式
下面,以在使用液晶投影仪的图像显示***适用本发明为例,参考附图进行说明。另外,以下所示的实施例不限制权利要求范围记载的发明内容。以下实施例所示的所有结构不是作为权利要求范围记载的发明的解决手段而必须的。
(说明***整体)
图1是本实施例的图像显示***的概要说明图。
从设置在银幕10的几乎正面的一种投影型显示装置的投影仪20投影规定的演示图像。发送器30一边用从激光指示器50投射的光点70指示作为银幕10上的被显示区域的图像显示区域12的图像的希望位置,一边对第3者进行演示。
进行这样的演示时,根据银幕10的种类和环境光80,图像显示区域12的图像的观看效果有很大不同。例如,在显示同样的白色情况下,根据银幕10的种类,看上去是有黄色的白色,或有蓝色的白色。另外,在显示同样的白色的情况下,如果环境光80不同,则看上去是亮白或暗白。
近年,随着投影仪20的小型化,携带也很容易。因此,也有在客户处进行演示的场合,但难以在事前调整好与客户处的环境一致的颜色,在客户处手动调整颜色又太费时间。
现有的投影仪基于表示投影仪固有的输入输出特性的输入输出轮廓,只进行色变换,没有考虑投影显示图像的视野环境。另外,轮廓表示特性数据。
但是,如上所述,如果不考虑视野环境,难以统一图像颜色的观看效果。颜色的观看效果是由光、对象的光反射或穿透、视觉3个要素确定。
本实施例中,通过掌握反映了光和、对象的光反射或穿透的视野环境,可以实现可再现合适的颜色的图像显示***。
但是,在以再现合适的颜色为目的时,合适的颜色根据用户和再现颜色的地区而不同。
例如,在日本使用投影仪20时,用户希望用NTSC方式再现图像颜色,但在欧洲使用投影仪20时,用户希望用pAL方式再现图像颜色。
此时,需要与使用投影仪20的地区无关地再现用户希望的图像颜色。
本实施例中,投影仪20构成为可基于用户的图像显示方式等的选择而调整图像颜色。
具体说来,如图1所示,安装作为掌握视野环境的视野掌握单元工作的色光传感器60,将来自色光传感器60的环境信息输入到投影仪20。色光传感器60具体计测银幕10内的图像显示区域12的环境信息(更具体是RGB或XYZ的3个刺激值)。
在投影仪20安装有基于来自色光传感器60的环境信息、用户的图像显示方式等的选择信息等,生成变换矩阵,使用该变换矩阵,变换图像显示所用的图像信息的变换单元。
通过基于环境信息掌握视野环境,基于选择信息掌握用户的喜好,可以实现适合于用户喜好的、可再现合适的图像的图像显示***。
本实施例中,运算在进行演示时的视野环境下投影仪20可显示的可显示色域,同时运算求出用户选择的图像显示方式的目标色域。还有,比较求出的可显示色域和目标色域,进行使投影仪20尽可能显示近似目标色域的颜色的图像处理。
(说明色域)
图2A是表示目标色域和可显示色域一致时的目标色域和可显示色域的模式图。图2B是表示可显示色域比目标色域更广时的目标色域和可显示色域的模式图。图3A是表示可显示色域比目标色域更窄时的目标色域和可显示色域的模式图,图3B是表示目标色域有与可显示色域重合的部分和不重合的部分时的目标色域和可显示色域的模式图。
图2A~图3B中,实线表示目标色域,虚线表示可显示色域。另外,从三角形状各色域的各顶点向三角形的中心部的线的交点是白色点。
另外,在色度坐标(x,y)的平面上定义图2A~图3B的色域。在此,x=X/(X+Y+Z),y=Y/X+Y+Z)。X、Y、Z分别是XYZ色品图的刺激值。
由于有图像特性和视野环境的2个变动要素,所以目标色域和可显示色域的关系不是固定的,大致区分为图2A~图3B所示的4个图形而变动。
图像信息的变换方法根据相当于该4个图形中的哪一个而有很大的不同。例如,如图2A和图2B所示的情况,在可显示色域覆盖整个目标色域时,使用一般的变换方法的情况下,也可以很好地再现目标图像。
但是,如图3A和图3B所示的情况,在可显示色域没有完全覆盖目标色域时,使用一般的变换方法难以很好地再现目标图像。
此时,需要进行使可显示色域外部的目标色域的颜色与目标色域内部的颜色对应的色域映射(有时称为色域压缩)。
本实施例中,作为色域映射的方法,使用色域优先的方法和色彩优先的方法中的一个。
图4A是表示在色域优先时映射色域后的色域(映射色域)的模式图,图4B是表示在色彩优先时映射色域的模式图。
图4A和图4B中,虚线表示可显示色域,2点划线表示目标色域。图4A和图4B表示图3B所示的目标色域和可显示色域一部分重合时的色域映射的例子。
例如,如图4A所示,目标色域的顶点D在可显示色域ABC的内部,但目标色域的顶点E和顶点F在可显示色域ABC的外部。因此,不能原样再现顶点E和顶点F附近的颜色。
因此,在要求显示不能再现的颜色时,为了尽可能再现近似颜色,进行色域映射。
本实施例中,进行优先色域或色彩的色域映射。
例如,在优先色域时,如图4A所示,在三角形DEF和三角形ABC的交点中,求出尽可能靠近顶点E的点H和、尽可能靠近顶点F的点I。另外,由于顶点D在三角形ABC内部,所以可以原样作为新的色域顶点G适用。
在这样求出的三角形GHI成为优先色域时的、即考虑使映射色域尽可能广时的映射色域。
另外,例如在优先色彩时,如图4B所示,求出三角形DEF的顶点向白色点Y的线与三角形ABC的各边的交点K、L。另外,由于顶点D在三角形内部,所以可以原样作为新的色域顶点J适用。
在这样求出的三角形JKL成为优先色彩时的、即考虑尽可能正确再现色彩时的映射色域。颜色有亮度、纯度、色彩三个属性。其中,人眼最敏感的是色彩。从而,通过优先色彩而求出映射色域,使用投影仪20可以再现更近似目标色域的颜色。
另外,图2A和图2B所示情况下的映射色域可以原样适用目标色域。
本实施例中,为了可再现如上确定的映射色域,生成用于变换图像信息的变换矩阵,使用生成的变换矩阵变换图像信息。
(说明功能块)
接着,说明包含这些矩阵生成单元等的投影仪20的图像处理部的功能块。
图5是本实施例的投影仪20内的图像处理部100的功能框图。
投影仪20将来自PC等的构成模拟形式的RGB信号的R1信号、G1信号、B1信号输入到A/D变换部110,在利用CPU200控制的投影仪图像处理部100对数字形式的R2信号、G2信号、B2信号进行色变换。
还有,将色变换的R3信号、G3信号、B3信号输入到D/A变换部180,变换成模拟信号的R4信号、G4信号、B4信号输入到作为一部分图像显示单元的L/V(光阀)驱动部190,驱动液晶光阀而投影显示图像。
投影仪图像处理部100构成为包括投影仪色变换部120、色域运算部160和、校正信号发生部150。
色域运算部160构成为包括目标轮廓存储部162和投影仪轮廓存储部164。
校正信号发生部150生成校正(校对用)图像信号。该校正图像信号与从A/D变换部110输出的信号同样,作为数字形式的R2信号、G2信号、B2信号输入到投影仪色变换部120。
像这样,由于在投影仪20的内部生成校正图像信号,所以不从PC等外部输入装置把校正图像信号输入给投影仪20,投影仪20可以单独进行校正。
投影仪色变换部120参考投影仪轮廓存储部164管理的投影仪轮廓,将来自校正信号发生部150的RGB各数字信号(R2信号、G2信号、B2信号)变换为适合于投影仪输出的RGB数字信号(R3信号、G3信号、B3信号)。
投影仪色变换部120构成为包括生成用于变换作为图像信息的各数字信号(R2信号、G2信号、B2信号)的变换矩阵的矩阵生成部122和、使用生成的变换矩阵变换图像信息的矩阵变换部124。
更具体说来,矩阵生成部122生成可再现用色域运算部160运算的映射色域的变换矩阵。
下面,说明色域运算部160。
色域运算部160构成为包括目标轮廓存储部162和投影仪轮廓存储部164。更具体说来,色域运算部160基于用户选择的目标轮廓、来自色光传感器60的环境信息、投影仪轮廓,为了具有用户选择的喜欢的颜色,而且适合视野环境的图像颜色的观看效果,运算使用图2~图4说明的映射色域。
在此,目标轮廓是应成为目标颜色的一种输入输出特性数据。更具体说来,目标轮廓例如是对应RGB亮度信号和三刺激值(X、Y、Z)定义的数据。本实施例中,目标轮廓是利用将RGB亮度信号变换为三刺激值(X、Y、Z)的矩阵来实现的。另外,作为目标轮廓与用户可选的多个图像特性对应设置多种轮廓。
投影仪轮廓是与投影仪20的机种对应的一种输入输出特性数据。更具体说来,投影仪轮廓例如是对应RGB亮度信号和、在理想环境下投影仪显示基于该RGB亮度信号的图像时实际得到的三刺激值(X、Y、Z)而定义的数据。本实施例中,投影仪轮廓是利用将RGB亮度信号变换为三刺激值(X、Y、Z)的矩阵来实现的。
(说明图像处理流程)
下面,采用流程图说明使用这些各部分的图像处理流程。
图6是表示本实施例的图像处理次序的流程图。
首先,在进行演示之前,投影仪20的用户从投影仪20的操作按钮给予的多种图像特性选择一种图像特性。具体说来,例如在投影仪20的外面设置NTSC、PAL、SECAM等图像特性的选择按钮,让用户按下选择按钮而选择1种图像特性。
该选择信息发送给投影仪图像处理部100。投影仪图像处理部100基于该选择信息,使从目标轮廓存储部162的多个目标轮廓选择的目标轮廓的标记为ON。
这样,投影仪图像处理部100根据用户的选择而选择目标轮廓(步骤S2)。
根据用户的选择而选择了目标轮廓之后,投影仪20使从校正信号发生部150产生校正信号(R2、G2、B2)。
校正信号发生部150将该校正信号输出给投影仪色变换部120。
投影仪色变换部120使用默认(初始状态)的变换矩阵,变换校正信号,并作为数字RGB信号(R3、G3、B3)输出。
D/A变换部180将数字RGB信号变换为模拟RGB信号(R4、G4、B4)。L/V驱动部190基于模拟RGB信号(R4、G4、B4),驱动液晶光阀。投影仪20将校正图像投影显示在图像显示区域12(步骤S4)。
在图像显示区域12显示了校正图像的状态下,色光传感器60为了掌握视野环境而检测三刺激值(步骤S6)。
像这样,通过使用校正图像掌握视野环境,可以更好地掌握视野环境。从而,可以更好地再现图像的观看效果。
投影仪色变换部120基于掌握的视野环境,生成变换矩阵,使用该变换矩阵变换图像信息(步骤S8)。
在此,更具体说明该矩阵生成变换处理(步骤S8)。
图7是表示本实施例的矩阵生成变换处理的次序的流程图。
色域运算部160基于从目标轮廓存储部162选择的目标轮廓,运算并求出目标色域。另外,色域运算部160基于存储在轮廓存储部164的投影仪轮廓和色光传感器60检测的三刺激值,运算求出投影仪20的可显示色域(步骤S12)。
接着,色域运算部160比较运算(步骤S12)求出的可显示色域和目标色域。
首先,在可显示色域与目标色域一致时,即,在图2A所示的情况下(步骤S14),矩阵生成部122为了再现图2A的实线三角形的映射色域,生成变换矩阵(步骤S16)。
在可显示色域比目标色域广时,即,在图2B所示的情况下(步骤S18),矩阵生成部122为了再现图2B的实线三角形的映射色域,生成变换矩阵(步骤S20)。
在可显示色域比目标色域窄时,即,在图3A所示的情况下(步骤S22),矩阵生成部122为了再现图4A或4B所示的优先再现色域或色彩的映射色域,生成变换矩阵(步骤S24)。
上述3个图形(步骤S14、S18、S22)以外的情况有可显示色域有与目标色域重合的部分和不重合的部分的情况,即图3B所示的情况。此时,矩阵生成部122为了再现图4A或4B所示的优先再现色域或色彩的映射色域,生成变换矩阵(步骤S26)。
另外,在矩阵生成(步骤S16、S20、S24、S26)生成的变换矩阵是完全不同的。
接着,矩阵变换部124使用利用矩阵生成部122生成的变换矩阵进行色变换(变换图像信息)(步骤S28)。更具体说来,矩阵变换部124使用3行3列的变换矩阵而变换数字RGB信号(R2、G2、B2),并作为数字RGB信号(R3、G3、B3)输出。
若用数学式表示,成为(R3、G3、B3)=M(R2、G2、B2)。在此,M为变换矩阵。
投影仪20用D/A变换部180对变换的数字RGB信号(R3、G3、B3)进行D/A转换,用变换的模拟RGB信号(R4、G4、B4)显示实际的演示图像(步骤810)。
如上所述,根据本实施例,采用变换矩阵,变换以图像信息可显示适合用户选择的图像特性的图像。
这样,可以实现可显示适合用户喜好的图像的图像显示***。
另外,本实施例中,通过使用色光传感器60掌握视野环境,考虑视野环境而投影显示图像。
这样,可以显示符合显示图像时的视野环境的图像,吸收显示环境差,可以与适用的环境无关地显示同一图像。从而,在多个不同场所,可以用短时间再现几乎相同的颜色。
本实施例中,通过不用LUT,而用变换矩阵来变换图像信息,可以更高速地变换图像信息,而且减少存储区域的占有量。
本实施例中,在生成变换矩阵时,根据可显示所以和目标色域的关系分成4个图形的情况,生成与各情况对应的变换矩阵。
可显示色域和目标色域的关系根据投影仪20适用的环境和用户选择的图像特性而不同。因此,需要生成与可显示色域和目标色域的关系对应的合适的变换矩阵。
本实施例中,通过生成对应设想的4个图形的变换矩阵,可以生成合适的变换矩阵。
另外,在图2A和图2B所示图形的情况下,由于作为映射色域可以几乎原样适用目标色域,所以与图3A和图3B所示的需要色域映射的场合相比,可以高速生成变换矩阵。
在需要图3A和图3B所示的色域映射的情况下,通过使用重视色彩再现性或色域再现性的变换矩阵,与使用重视亮度和纯度的再现性的变换矩阵的场合相比,可以更好地再现图像。
(说明硬件)
另外,作为上述各部分所用的硬件,例如可以适用以下的单元。
例如,作为A/D变换部110例如可使用A/D转换器等,作为D/A变换部180例如可使用D/A转换器等,作为L/V驱动部190例如可使用液晶光阀驱动器等,作为投影仪色变换部120例如可使用图像处理电路和ASIC(专用集成电路)等,作为色域运算部160例如可使用CPU和RAM等。另外,这些各部分也可以像电路用硬件实现,也可以像驱动器和程序用软件实现。
如图5所示,也可以从信息存储媒体300读取程序来实现这些各部分的功能。作为信息存储媒体300例如可以适用CD-ROM、DVD-ROM、ROM、RAM、HDD等,其程序的读取方式也可以是接触方式,也可以是非接触方式。
也可以代替信息存储媒体300,通过经传送线路从主机等下载实现上述各功能的程序来实现上述各功能。
另外,以下硬件可适用于色光传感器60。
例如,可以适用选择性穿透各刺激值的彩色过滤器和光电二极管、将来自光电二极管的模拟信号变换为数字信号的A/D转换器和放大该数字信号的OP放大器等。
以上说明了适用本发明的最佳实施例,但本发明不限于上述实施例。
(变形例)
例如,作为上述目标轮廓除了NTSC等图像显示方式之外,例如还可以适用RGB、sRGB等图像种类等的图像特性。
另外,作为视野环境掌握单元除色光传感器60之外,例如还可以适用CCD照相机、CMOS照相机等摄像单元。
上述银幕10为反射型银幕,但也可以是透射型银幕。
上述的变换矩阵为单独矩阵,但也可以组合多个矩阵来进行色变换。例如,也可以组合与输出装置对应的逆变换矩阵和、反映环境信息的环境修正矩阵来进行色变换。
另外,在用上述投影仪的投影型图像显示装置以外的显示单元进行图像显示而进行演示等的情况下也可以适用本发明。作为这样的显示单元除了液晶投影仪之外,例如还有采用CRT(Cathode Ray Tube)、PDP(Plasma Display Panel)、FED(FieldEmission Display)、EL(Electro Luminescence)、直视式液晶显示装置等显示装置、DMD(Digital Micromirror Device)的投影仪等。另外,DMD为美国德克萨斯仪表公司的商标。还有,投影仪不限于正面投影型的投影仪,也可以是背面投影型的投影仪。
另外,除了演示之外,本发明对进行会议、医疗、设计、流行领域、营业活动、商业、教育、而且电影、TV、录像、游戏等一般图像等的图像显示的情况也是有用的。
另外,也可以用单独的图像显示装置(例如,投影仪20)实现上述投影仪20的投影仪图像处理部100的功能,也可以在多个处理装置分散(例如,在投影仪20和PC分散处理)实现上述投影仪20的投影仪图像处理部100的功能。
Claims (6)
1.一种图像显示***,基于视野环境掌握单元的环境信息,变换用于显示上述图像的图像信息并显示图象,所述视野环境掌握单元用于掌握图像的被显示区域的视野环境,其特征在于包括:
矩阵生成单元,为了基于上述环境信息和用户选择的图像特性,显示适合上述视野环境和上述图像特性的图像,生成变换矩阵;
矩阵变换单元,基于生成的变换矩阵,变换上述图像信息;
图像显示单元,基于变换的图像信息而显示图像;以及
色域运算单元,运算目标色域和可显示色域,所述目标色域是基于上述图像特性的色域,所述可显示色域是基于上述环境信息并用上述图像显示单元在上述视野环境可显示的色域,
上述图像特性基于图像显示方式或图像种类,上述矩阵生成单元在上述可显示色域比上述目标色域更广时,比上述目标色域更窄时,与上述目标色域一致时,有与上述目标色域重合的部分和不重合的部分时的各种情况下,生成不同的变换矩阵。
2.如权利要求1所述的图像显示***,其特征在于:
上述矩阵生成单元在上述可显示色域比上述目标色域更窄时和有与上述目标色域重合的部分和不重合的部分时,生成重视色彩再现性或色域再现性的变换矩阵。
3.一种投影仪,基于视野环境掌握单元的环境信息,变换用于显示上述图像的图像信息并显示图象,所述视野环境掌握单元用于掌握图像的被显示区域的视野环境,其特征在于:
包括:矩阵生成单元,为了基于上述环境信息和用户选择的图像特性,显示适合上述视野环境和上述图像特性的图像,生成变换矩阵;
矩阵变换单元,基于生成的变换矩阵,变换上述图像信息;
图像显示单元,基于变换的图像信息而显示图像;
生成校对用图象的单元,以及
色域运算单元,运算目标色域和可显示色域,所述目标色域是基于上述图像特性的色域,所述可显示色域是基于上述环境信息并用上述图像显示单元在上述视野环境可显示的色域,
上述图像特性基于图像显示方式或图像种类,
上述矩阵生成单元在上述可显示色域比上述目标色域更广时,比上述目标色域更窄时,与上述目标色域一致时,有与上述目标色域重合的部分和不重合的部分时的各种情况下,生成不同的变换矩阵,
上述图像显示单元将生成的校对用图像投影显示在上述被显示区域,
上述视野环境掌握单元掌握显示上述校对用图像的被显示区域的视野环境。
4.一种图像处理方法,基于视野环境掌握单元的环境信息,变换用于显示上述图像的图像信息,所述视野环境掌握单元用于掌握图像的被显示区域的视野环境,其特征在于包括:
矩阵生成工序,为了基于上述环境信息和用户选择的图像特性,显示适合上述视野环境和上述图像特性的图像,生成变换矩阵;
矩阵变换工序,基于生成的变换矩阵,变换上述图像信息,
上述矩阵生成工序包括运算目标色域和可显示色域的工序,所述目标色域是基于上述图像特性的色域,所述可显示色域是基于上述环境信息并用图像显示单元在上述视野环境可显示的色域,
在上述矩阵生成工序中,上述可显示色域比上述目标色域更广时,比上述目标色域更窄时,与上述目标色域一致时,有与上述目标色域重合的部分和不重合的部分时的各种情况下,生成不同的变换矩阵。
5.如权利要求4所述的图像处理方法,其特征在于:
上述矩阵生成工序中,在上述可显示色域比上述目标色域更窄时和有与上述目标色域重合的部分和不重合的部分时,生成重视色彩再现性或色域再现性的变换矩阵。
6.如权利要求4、5中任一项所述的图像处理方法,其特征在于,
生成校对用图像的工序;
在上述被显示区域显示生成的校对用图像的工序;以及
掌握显示上述校对用图像的被显示区域的视野环境,生成上述环境信息的工序在上述矩阵生成工序之前进行。
Applications Claiming Priority (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP344822/2000 | 2000-11-13 | ||
JP2000344822 | 2000-11-13 | ||
JP344822/00 | 2000-11-13 | ||
JP296027/2001 | 2001-09-27 | ||
JP2001296027A JP3692989B2 (ja) | 2000-11-13 | 2001-09-27 | 画像表示システム、プロジェクタ、画像処理方法、プログラムおよび情報記憶媒体 |
JP296027/01 | 2001-09-27 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN1353538A CN1353538A (zh) | 2002-06-12 |
CN1172527C true CN1172527C (zh) | 2004-10-20 |
Family
ID=26603818
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNB011427620A Expired - Fee Related CN1172527C (zh) | 2000-11-13 | 2001-11-13 | 图像显示***、投影仪及图像处理方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US6765585B2 (zh) |
EP (1) | EP1205902B1 (zh) |
JP (1) | JP3692989B2 (zh) |
CN (1) | CN1172527C (zh) |
DE (1) | DE60126554T8 (zh) |
Families Citing this family (34)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6765589B1 (en) * | 2000-11-16 | 2004-07-20 | Adobe Systems Incorporated | Brush for warping and water reflection effects |
JP3729252B2 (ja) * | 2001-03-26 | 2005-12-21 | セイコーエプソン株式会社 | 画像処理システム、プログラムおよび情報記憶媒体 |
JP3719411B2 (ja) * | 2001-05-31 | 2005-11-24 | セイコーエプソン株式会社 | 画像表示システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法 |
JP3894302B2 (ja) * | 2002-03-25 | 2007-03-22 | セイコーエプソン株式会社 | 画像表示システム、画像処理方法、プログラムおよび情報記憶媒体 |
KR20030097507A (ko) * | 2002-06-21 | 2003-12-31 | 삼성전자주식회사 | 평판 표시 장치의 색도 보정 장치 및 그 방법 |
JP3855881B2 (ja) * | 2002-08-09 | 2006-12-13 | セイコーエプソン株式会社 | 色補正回路及びそれを備えた画像表示装置 |
US7184054B2 (en) * | 2003-01-21 | 2007-02-27 | Hewlett-Packard Development Company, L.P. | Correction of a projected image based on a reflected image |
EP1443777A1 (de) | 2003-01-28 | 2004-08-04 | Gretag-Macbeth AG | Profilierungsvorrichtung, damit ausgestatteter elektronischer Projektor und Verfahren zur Profilierung einer elektronischen Anzeigevorrichtung |
DE602004017423D1 (de) | 2003-02-20 | 2008-12-11 | Zarlink Semiconductor Inc | Synchronisation von takten über mehrerepaketnetzwerke hinweg |
TWI249959B (en) * | 2003-05-16 | 2006-02-21 | Seiko Epson Corp | Image processing system, projector, information memorizing medium and image processing method |
US7221374B2 (en) * | 2003-10-21 | 2007-05-22 | Hewlett-Packard Development Company, L.P. | Adjustment of color in displayed images based on identification of ambient light sources |
JP2005134482A (ja) * | 2003-10-28 | 2005-05-26 | Olympus Corp | 画像投影装置 |
TW200520549A (en) * | 2003-12-02 | 2005-06-16 | Quanta Comp Inc | Display device featuring automatic adjustment of display setting function in response to surrounding brightness |
KR100595251B1 (ko) * | 2004-01-12 | 2006-07-03 | 엘지전자 주식회사 | 디스플레이 장치의 색재현 장치 및 방법 |
KR100565810B1 (ko) * | 2004-06-16 | 2006-03-29 | 삼성전자주식회사 | 색신호 처리장치 및 방법 |
WO2006071628A2 (en) * | 2004-12-20 | 2006-07-06 | Color Kinetics Incorporated | Color management methods and apparatus for lighting |
US7907756B2 (en) * | 2005-01-31 | 2011-03-15 | Siemens Medical Solutions Usa, Inc. | System and method for validating an image segmentation algorithm |
JP2006293087A (ja) * | 2005-04-12 | 2006-10-26 | Casio Comput Co Ltd | 映像投射装置、映像出力装置 |
TWI260922B (en) * | 2005-04-14 | 2006-08-21 | Coretronic Corp | A projection system with a built-in digital video player |
KR101133572B1 (ko) | 2005-06-21 | 2012-04-05 | 삼성전자주식회사 | 다수의 색재현 범위를 갖는 색재현 장치 및 그 색신호처리방법 |
US20070097669A1 (en) * | 2005-11-01 | 2007-05-03 | Hui Man P | Adaptor for capturing screen images from handheld video game devices and handheld video player devices and transmitting said images to a television or computer monitor |
KR100763190B1 (ko) * | 2005-12-19 | 2007-10-04 | 삼성전자주식회사 | 영상 시스템, 영상 신호 포맷 설정 장치 및 설정 방법 |
JP4974607B2 (ja) * | 2006-08-09 | 2012-07-11 | 株式会社ナナオ | 表示装置および表示システム並びにrgb信号処理方法 |
KR20080029410A (ko) * | 2006-09-29 | 2008-04-03 | 삼성전자주식회사 | 디스플레이 시스템 및 그 영상 처리 방법 |
KR100843089B1 (ko) | 2006-10-17 | 2008-07-02 | 삼성전자주식회사 | 영상의 시인성을 향상시키는 장치 및 방법 |
KR101446364B1 (ko) * | 2006-12-21 | 2014-10-01 | 톰슨 라이센싱 | 디스플레이를 위한 컬러 그레이딩을 제공하는 방법, 장치 및 시스템 |
KR101477533B1 (ko) * | 2008-06-26 | 2014-12-30 | 삼성전자주식회사 | 영상 보상 방법 및 장치, 및 이를 이용한 디지털 촬영 장치 |
JP5267325B2 (ja) * | 2009-05-22 | 2013-08-21 | ソニー株式会社 | 情報処理装置および方法、並びにプログラム |
JP5348022B2 (ja) * | 2010-03-05 | 2013-11-20 | セイコーエプソン株式会社 | プロジェクターおよび射影変換処理装置 |
US20150187327A1 (en) * | 2013-12-28 | 2015-07-02 | Mark Francis | Wearable electronic device with color display |
KR101594258B1 (ko) * | 2014-09-24 | 2016-02-16 | 주식회사 넥서스칩스 | 컬러/조도 센서를 이용한 카메라 영상 보정/제어 장치 및 방법 |
JP2016105153A (ja) * | 2014-11-19 | 2016-06-09 | 株式会社東芝 | 画像処理装置及び画像表示装置 |
WO2020100200A1 (ja) * | 2018-11-12 | 2020-05-22 | Eizo株式会社 | 画像処理システム、画像処理装置、およびコンピュータープログラム |
CN114584752B (zh) * | 2020-11-30 | 2024-02-02 | 华为技术有限公司 | 图像颜色还原方法及相关设备 |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5300944A (en) * | 1988-07-21 | 1994-04-05 | Proxima Corporation | Video display system and method of using same |
JPH0425892A (ja) | 1990-05-21 | 1992-01-29 | Canon Inc | 画像処理装置 |
JP2973477B2 (ja) | 1990-06-20 | 1999-11-08 | ソニー株式会社 | 補正回路付プロジェクタ |
JP2567756B2 (ja) | 1991-07-04 | 1996-12-25 | 三洋電機株式会社 | テレビジョン受信機の画像自動制御表示装置 |
US5754184A (en) * | 1993-01-06 | 1998-05-19 | Eastman Kodak Company | Digital color system and method which provides a visual match across different input and output viewing conditions |
JP2907057B2 (ja) | 1995-04-20 | 1999-06-21 | 日本電気株式会社 | 輝度自動調整装置 |
US6320980B1 (en) * | 1995-10-02 | 2001-11-20 | Canon Kabushiki Kaisha | Image processing apparatus and method, and recording medium |
CN1153444C (zh) * | 1995-10-02 | 2004-06-09 | 佳能株式会社 | 图象处理装置及方法 |
JP3412985B2 (ja) * | 1995-10-02 | 2003-06-03 | キヤノン株式会社 | 画像処理装置及び方法 |
JPH1175072A (ja) * | 1997-08-29 | 1999-03-16 | Toyota Motor Corp | 画像出力方法及び装置 |
JP3029254B2 (ja) | 1998-02-12 | 2000-04-04 | リコー計器株式会社 | 液晶表示装置の制御装置 |
WO1999055074A1 (fr) * | 1998-04-17 | 1999-10-28 | Mitsubishi Denki Kabushiki Kaisha | Procede de compression de la gamme de couleurs, et dispositif de compression associe |
JP3628173B2 (ja) * | 1998-05-01 | 2005-03-09 | パイオニア株式会社 | 情報表示装置 |
JP2000278546A (ja) * | 1999-01-22 | 2000-10-06 | Sony Corp | 画像処理装置及び画像処理方法、色域変換テーブル作成装置及び色域変換テーブル作成方法、画像処理プログラムを記録した記録媒体、並びに色域変換テーブル作成プログラムを記録した記録媒体 |
JP2001060082A (ja) * | 1999-08-24 | 2001-03-06 | Matsushita Electric Ind Co Ltd | 色再現端末装置およびネットワーク色再現システム |
-
2001
- 2001-09-27 JP JP2001296027A patent/JP3692989B2/ja not_active Expired - Fee Related
- 2001-11-12 EP EP01126883A patent/EP1205902B1/en not_active Expired - Lifetime
- 2001-11-12 DE DE60126554T patent/DE60126554T8/de active Active
- 2001-11-13 CN CNB011427620A patent/CN1172527C/zh not_active Expired - Fee Related
- 2001-11-13 US US09/987,170 patent/US6765585B2/en not_active Expired - Lifetime
Also Published As
Publication number | Publication date |
---|---|
US20020057835A1 (en) | 2002-05-16 |
JP3692989B2 (ja) | 2005-09-07 |
EP1205902A3 (en) | 2003-01-22 |
EP1205902A2 (en) | 2002-05-15 |
CN1353538A (zh) | 2002-06-12 |
DE60126554T2 (de) | 2007-11-08 |
US6765585B2 (en) | 2004-07-20 |
EP1205902B1 (en) | 2007-02-14 |
DE60126554T8 (de) | 2008-02-21 |
JP2002209229A (ja) | 2002-07-26 |
DE60126554D1 (de) | 2007-03-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1172527C (zh) | 图像显示***、投影仪及图像处理方法 | |
CN1231832C (zh) | 图象显示***、图象处理方法和投影机 | |
CN1193318C (zh) | 图像显示*** | |
CN1154082C (zh) | 环境适应型的图像显示***和图像处理方法 | |
CN1251057C (zh) | 图像显示***、投影仪以及图像处理方法 | |
CN1223928C (zh) | 图像处理***、投影机以及图像处理方法 | |
CN1215400C (zh) | 投影机及图像处理方法 | |
CN100346651C (zh) | 图像显示***、投影机及图像处理方法 | |
CN1479915A (zh) | 图像显示***、投影机、图像处理方法与信息存储媒体 | |
CN1184797C (zh) | 图像显示***、投影机及图像处理方法 | |
CN100346635C (zh) | 灰度特性修正装置、修正方法、图像处理、显示装置 | |
CN1336584A (zh) | 环境适应型图像显示***和信息存储媒体 | |
CN1254116C (zh) | 图像显示***和图像处理方法 | |
CN1248159C (zh) | 图像处理***、投影仪和图像处理方法 | |
CN1229970C (zh) | 图像处理装置、图像处理方法和存储介质 | |
CN1168065C (zh) | 环境适应型图像显示***以及图像处理方法 | |
CN1822661A (zh) | 图像处理***、投影机及图像处理方法 | |
CN1543207A (zh) | 图像处理***、投影机及图像处理方法 | |
CN1822660A (zh) | 图像处理***、投影机及图像处理方法 | |
CN1674655A (zh) | 投影机的控制 | |
CN1661666A (zh) | 用于转换色彩空间的方法和设备以及多色彩显示设备 | |
CN1537304A (zh) | 图像显示装置、图像处理方法、程序和存储介质 | |
CN1945422A (zh) | 图像显示装置和投影机 | |
CN1228965C (zh) | 图像处理***、投影仪及黑白扩展处理法 | |
CN1893617A (zh) | 动态补偿显示 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C06 | Publication | ||
PB01 | Publication | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20041020 Termination date: 20181113 |