CN100521729C - 颜色管理***和方法 - Google Patents

颜色管理***和方法 Download PDF

Info

Publication number
CN100521729C
CN100521729C CNB200580008516XA CN200580008516A CN100521729C CN 100521729 C CN100521729 C CN 100521729C CN B200580008516X A CNB200580008516X A CN B200580008516XA CN 200580008516 A CN200580008516 A CN 200580008516A CN 100521729 C CN100521729 C CN 100521729C
Authority
CN
China
Prior art keywords
color
image data
value
color image
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB200580008516XA
Other languages
English (en)
Other versions
CN1934851A (zh
Inventor
雷蒙德·杨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Technicolor Inc
Original Assignee
Technicolor Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Technicolor Inc filed Critical Technicolor Inc
Publication of CN1934851A publication Critical patent/CN1934851A/zh
Application granted granted Critical
Publication of CN100521729C publication Critical patent/CN100521729C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • H04N1/56Processing of colour picture signals
    • H04N1/60Colour correction or control
    • H04N1/6058Reduction of colour to a range of reproducible colours, e.g. to ink- reproducible colour gamut
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • H04N1/56Processing of colour picture signals
    • H04N1/60Colour correction or control
    • H04N1/603Colour correction or control controlled by characteristics of the picture signal generator or the picture reproducer
    • H04N1/6052Matching two or more picture signal generators or two or more picture reproducers

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Color Image Communication Systems (AREA)
  • Processing Of Color Television Signals (AREA)

Abstract

一种颜色处理***,包括用于捕获景物以及提供代表该景物的第一彩色图像数据的图像捕获设备。颜色空间变换器连接到该图像捕获设备,用于将第一彩色图像数据变换为第二彩色图像数据。第一显示设备连接到该颜色变换器。第一显示设备显示如第二彩色图像数据所代表的景物。该颜色变换器包括处理器,该处理器被编程为通过从包括预先计算值的查找表(LUT)中选择矩阵元素来对第一彩色图像数据执行矩阵运算。

Description

颜色管理***和方法
技术领域
本发明涉及用于颜色管理的***和方法。
背景技术
胶片是典型优选的产生运动画面的记录媒体。这种优选有几种原因。首先,由于生胶片(film stock)的色感应特性,胶片提供高级的视觉印象。其次,当胶片素材(filmed material)通过电影放映机投影到屏幕上时,观众熟悉由胶片素材而产生的外观。这种胶片“外观”是多种因素的产物。这些因素包括和胶片关联的光化学过程,用于投影图像的电影放映机的质量和标定,在上面投影图像的屏幕的特性以及观看环境中的环境照明条件。
近来,有多种显示设备和技术可用于利用不同于胶片的媒体,即非胶片媒体,来向观众显示电影。和这些非胶片技术关联的难题之一是,维持由胶片色感应所提供的整体视觉印象。显示设备所产生的颜色取决于该设备的特性,例如设备相关颜色空间,而且也取决于要显示图像的环境。而且,不同彩色成像设备使用不同的颜色空间,并且这些颜色空间经常不同于显示设备的颜色空间。
因此,颜色技术的主要任务是,为了以一种保持作为图像源的原始景物的颜色属性所固有的艺术意图的方式来捕获、显示和重现图像,而将色标(color specification)从一种颜色空间转变到另一种颜色空间。
例如,电视使用红、绿、蓝(R、G、B)颜色空间,且打印机使用减色***(青、品红和黄)(或四分色***(青、品红、黄、黑))颜色空间。另一个颜色空间例子是“u′v′L*”空间。“u′v′L*”空间是由参数u′、v′和L*定义的三维颜色空间。该颜色空间中的每种颜色的色度由参数u′和v′均匀地表征。第三参数L*表示感觉上均匀的颜色亮度变化(例如L*=0为黑,L*=100为白)。为了处理“u′v′L*”颜色空间中的彩色图像,颜色处理器只是将颜色空间中的每一点u′.sub.0、v′.sub.0和L*.sub.0映射为新点u′.sub.1、v′.sub.1和L*.sub.1。
在该颜色空间中,可以调节图像颜色,以补偿房间的照明条件、图像显示器的特性及其它变量。例如,为补偿照明条件,可选择的变换将每一点u′.sub.0、v′.sub.0和L*.sub.0映射为具有相同的u′.sub.0、v′.sub.0值,但具有更大的亮度值L*.sub.1的新点。
除设备相关颜色空间以外,国际照明委员会(CIE)利用色度学开发了一系列的颜色空间,来为所有颜色给出定量的度量。CIE规范是和成像设备不相关的。在CIE出版物15.2中定义了CIE颜色空间。
本发明使设备颜色空间(打印机、投影仪、专业阴极射线管)之间的图像处理和变换变得容易。本发明的多个实施例提供了用于模拟设备特定颜色和颜色空间的方法和设备。即,本发明的实施例允许在第一设备上观看在第一设备上得不到的颜色表示。这允许第一设备模拟第二设备的外观。由于许多原因,这种模拟是所希望的。在示例实施例中,通过数字手段捕获或显示电影,并进行处理,以便获得在胶片上捕获或显示的外观。在本发明另一实施例中,把最初为高清晰投影电视而设计的数字投影仪用作数字媒介(媒体)的预览***。此外,本发明提供了使数字数据能够像被转印到胶片上并被投影那样,在显示器上进行显示的设备标定***和方法。
此外,本发明提供具有高动态范围、且能够精确模拟胶片输出的***和方法。这些属性与发起工作的设备无关地提供,并恢复一致的颜色体验。此外,本发明的实施例允许,随时间的过去以及当显示技术变化时,观众获得一致的颜色体验。
发明内容
本发明提供一种颜色***,包括:图像捕获设备,用于捕获景物及提供代表该景物的第一彩色图像数据;连接到图像捕获设备的颜色变换器,用于将第一彩色图像数据变换为第二彩色图像数据;第一显示设备,用于接收颜色变换器的输出,并显示由第二彩色图像数据所代表的景物;该***的特征在于,颜色变换器包括处理器,该处理器被编程为通过从包括预先计算值的查找表中选择矩阵元素,来对第一彩色图像数据执行矩阵运算,所述预先计算值与第一显示设备相关联,使得通过对第一彩色图像数据进行调整来提供在第一显示设备上的显示所用的第二彩色图像数据,以便模拟第一彩色图像数据。
本发明还提供一种方法,包括:捕获景物及提供代表该景物的第一彩色图像数据;将第一彩色图像数据变换为第二彩色图像数据;接收第一显示设备上的颜色变换器的输出;以及显示由第二彩色图像数据所代表的景物;其中所述变换步骤包括:通过从包括预先计算值的查找表中选择矩阵元素,来对第一彩色图像数据执行矩阵运算,所述预先计算值与第一显示设备相关联,使得通过对第一彩色图像数据进行调整来提供在第一显示设备上的显示所用的第二彩色图像数据,以便模拟第一彩色图像数据。
附图说明
图1是根据本发明实施例的颜色管理***的框图。
图2是描述根据本发明实施例的方法的步骤的过程图。
图3所示为根据本发明实施例的查找表操作的示意图。
图4是根据本发明替换实施例的颜色管理***的框图。
图5所示为根据本发明实施例的***的详细框图。
图6所示为根据本发明替换实施例的***的框图。
具体实施方式
术语和定义。定义在此所使用的如下术语。术语“设备相关”指的是用于在设备控制层面对设备特定数字数据进行编码的颜色空间。诸如线性RGB和CMYK(青、品红、黄、黑)的颜色空间分别可用于图像扫描设备和图像打印设备,因为颜色空间的每个参数都紧密地对应于这些设备借以度量和产生颜色的物理机制。
由于多种原因,设备相关颜色空间在某些情况下不适于处理彩色图像。例如,R、G和B三个参数定义了三维线性颜色空间,颜色空间中的每一点都对应于唯一颜色。在该颜色空间中的各个点,参数值的选定变化可能不造成感觉颜色的相称变化。例如,在该颜色空间中的一个位置,使参数R增大n个单位几乎不产生感觉颜色的变化。然而,在该颜色空间中的另一点,使R增大相同的n个单位产生了感觉颜色的显著变化。因此,操作者可能难以操纵R、G、B三原色来获得期望的颜色变化。
术语“设备无关”指的是视觉上非均匀的颜色空间,即考虑了人的感觉如配色能力的颜色空间。已提出了多种合适的基于感觉的颜色空间,用于用更加紧密地对应于人感觉颜色的方式的参数、来定义颜色。最著名的基于感觉的颜色表示标准整体被称为CIE***。
术语“色域映射”一般是指作用于颜色空间以便将一种颜色空间的色域变换到另一颜色空间的色域的技术。术语“颜色空间变换”是指在图像获取、显示和再现期间变换颜色信息的过程。
可适用标准。ISO TC42 22028-1在此通过参考而被引入。
表1定义了商业上可得到的、适于实施本发明各个实施例的测量设备(分光光度计、密度计、光度计、色度计)。
表1
 
—GretagMacbeth·X-rite密度计·Spectroscan—PhotoResearch·Metadata(元数据)—CXF—色彩交换格式·颜色变换设备—Digital Audio Video(DAV)(数字音频视频)—Astro***—FilmLight(以前的CFC)—Quantel·颜色校正/标定—Pandora-Pogle —FilmLight(以前的CFC)—Discreet Logic(incl.5D)—TI—Texas仪器—光学组件电子仪器w/色晶格变形·标定设备—Sequel—Spectrolino—Xrite—Praxisoft—Kodak—Barco—Graphic Technology—Telecine(HD或2K/4K)—Viper FilmStream camera
 
—DaVinci—2K—ColorFront—Clossus filmgrading & finishing(Clossus胶片分等与修正)
图1所示为根据本发明实施例的颜色管理***200的框图。***200包括参考图像子***,该参考图像子***包括参考图像捕获设备211和参考图像显示器240。在本发明的实施例中,图像捕获设备211是一种能够在胶片上捕获图像的电影摄影机。在图5的711、712和714及图6的812中,进一步示出了适用于本发明的参考图像捕获设备的示例实施例。在本发明的一个实施例中,参考图像显示器240是图像捕获设备211所捕获的图像将要投影在上面的屏幕。在本发明一个实施例中,***200包括用于存储要用作参考图像子***的参考图像数据的存储器(未示出)。
在本发明的实施例中,参考子***提供要和被处理图像的颜色特性匹配的“理想(ideal)”颜色特性,以重新生成好像是由参考子***捕获的图像外观。在本发明的实施例中,实时地或者在制作或后期制作期间,通过硬件和软件部件来模拟,即提供参考图像子***的特性。本发明的替换实施例不依赖于实际的硬件和软件参考***,而是包括与参考图像子***特性相对应的“插件”库。图6示出了和示例颜色校正***配置一起使用的插件库的一个示例实施例。在图6的837中进一步示出了适用于本发明各个实施例的“插件”库的例子。如图6所示,插件库837包括示例胶片型插件840、示例染料转印插件835和示例负片冲洗插件832。因而,本发明的实施例提供多种可选择的参考图像。所选择的参考图像取决于目标图像的期望外观。
对于给定的显示装置,当在视频监视器上观看时,当对相同照明条件下拍摄的电影和视频起源图像进行比较时,存在这样的常数,该常数定义胶片图像和非胶片设备如viper数字图像捕获设备所产生的图像之间的显示单元(阴极射线管中的像素或液晶显示器中的其它物等)响应的变化。因此,本发明的某些实施例采用拍摄信息的组合,因为它可以在监视器上重现,以便在总体上维持“胶片外观”。在本发明的实施例中,使用了与胶片起源图像的每个像素对应的分离颜色分量组合,并且视频起源图像使用该分离颜色分量组合,尽管响应不同的摄影激励(photographic stimulus)。
***200进一步包括目标图像子***,该目标图像子***包括至少一个图像捕获设备210和处理器子***250。图像捕获设备210捕获并产生包括景物如电影景物的彩色图像的电子表示。在本发明一个实施例中,图像捕获设备210提供数字视频图像。在本发明的实施例中,捕获设备210所提供的电子图像包括二维像元(像素)阵列。用多种颜色空间的任一种来表示每个像素的颜色。例如,RGB颜色空间和CMYK颜色空间是合适的。
在本发明的替换实施例中,通过输入设备210来提供模拟视频。在这种情况下,数字化转换器221把图像捕获设备210所提供的模拟图像转换成数字表示。因此,本发明的实施例能够通过多种装置来提供视频图像的数字表示。在本发明一个实施例中,直接通过数字设备如数码相机或特技(SFX)***来提供数字表示。作为选择,借助于数字化过程来生成被捕获彩色图像的数字化表示。在本发明一个实施例中,捕获设备210包括胶片扫描仪。在扫描仪实施例的例子中,捕获设备210对参考图像(胶片)捕获设备211的输出执行一种形式的浓度测定。在本发明的实施例中,利用透过捕获设备211所提供的胶片的光,来确定扫描仪的RGB值。
在本发明一个实施例中,从包括模拟摄像机、数字摄像机、电视电影设备、胶片扫描仪和高清晰胶片图像捕获设备的组中,选择图像捕获设备210。图5进一步示出了合适的图像捕获设备的例子,例如广播电视摄影机714、数字电影摄影机712和胶片摄影机。在图5的724中示出了适用于本发明实施例的原始扫描仪捕获设备的例子。在本发明的实施例中,借助于标准的电视电影“飞点扫描仪(flying spotscanner)”转印,来从胶片图像生成视频图像。
由电视电影转印而产生的视频数据用视频来定义胶片图像。所得到的视频图像适于用阴极射线管(CRT)、液晶显示器(LCD)或根据本发明实施例的其它显示设备进行显示。图5示出了通过应用本发明的方法和设备以提供适于用各种显示设备进行显示的视频图像版本、而提供的显示环境的例子。这些环境包括但不限于数字电视电影、常规电影、网络电视和各种格式的封装媒体,包括但不限于数字通用盘(DVD)和家用录像***(VHS)。
在本发明的实施例中,捕获设备提供被捕获图像的设备相关颜色空间表示。设备相关颜色空间提供了使用、数字表示和计算的方便性。然而,设备相关颜色空间通常和颜色的客观定义不相关,或者和人眼观看颜色的方式不相关。因此,本发明的一个实施例包括正向变换器218。正向变换器218接收设备相关颜色空间中的被捕获图像数字表示,并将该图像的数字表示从设备相关颜色空间变换到设备无关颜色空间,如图4的310更详细说明的。在本发明的实施例中,正向设备变换器218将比色(设备特定)颜色空间变换到感觉颜色空间。在本发明的某些实施例中,设备变换器118基于用于在选定特定环境中精确高效地重现色彩的元数据和测度。例如,设备变换器118实施并利用显示器的颜色配置文件和实际模拟以及环境的分布格式。
另外,本发明的实施例进一步包括正向外观模拟器220。正向外观模拟器220将外观模型应用于来自正向变换器218的数字表示。即,正向外观模拟器220处理来自正向变换器218的数字表示,以便提供与观众的感觉特性一致的图像表示。在本发明的实施例中,颜色外观模拟器220提供用于将三色激励值变换为感觉属性相关值以及/或者将感觉属性相关值变换为三色激励值的观看条件特定方法。在具体的CIECAM02中概述了适用于本发明实施例的一种颜色外观模型。
在本发明的实施例中,可以从***200的存储器中选择多种颜色外观模型。在一个实施例中,操作者选择要应用于图像表示的期望颜色外观模型。在本发明实施例中,颜色处理器250包括至少一个用于存储预定义的可重新调节设备特定标定数据的存储器,该设备特定标定数据包括非线性颜色空间变换模型。在本发明的实施例中,处理器250在存储器中进一步存储用于解释色值的其它信息,如图像状态、参考图像观看环境等。
在本发明一个实施例中,把正向外观模拟器220所提供的图像表示提供给域映射器222。域映射器222将图像输入颜色空间的色域映射到显示图像输出颜色空间的色域。域映射器222的输出被提供给逆外观模拟器229。逆外观模拟器229的输出被提供给逆变换器280。在本发明实施例中,逆变换器280说明了显示器特定特性。
在本发明的实施例中,正向变换器225、正向外观模拟器220、域映射器222、逆外观模拟器229和逆变换器280是用至少一个被编程为执行***200这些部件的各自功能的处理器250来实施的。在一个实施例中,用单个处理器来实施这些功能。本发明的替换实施例包括分布式处理器,即嵌入和/或分布于***200全部硬件部件中的处理器。
处理器250把经过处理的图像提供给至少一个目标图像显示器230。在那种配置下,经过处理的图像被显示在目标图像显示器230上,以便和参考图像显示器240上所显示的参考图像进行比较。本发明的实施例包括从以下组中选择的目标图像显示设备230,该组包括但不限于:高清晰电视显示器233,标准清晰电视显示器231,数字电影显示器232,液晶二极管(LCD)显示器234(包括硅上液晶LCoS显示器),以及投影电视显示器。图6示出了包括目标和参考图像显示设备的更多示例实施例。图6示出了颜色校正组合中所包括的数字投影仪851和高清晰(HD)监视器852。
本发明的实施例包括用户可操作的颜色调节控制,例如如图3的查找表(LUT)节点所示的。
在本发明的实施例中,处理器250、目标图像显示器230和参考图像显示器240包括数字电影制作***200。在本发明的一个实施例中,目标图像显示器230包括数字电影放映机,例如Christie Digital(以前为Electrohome)的Texas仪器公司(TI)的数字光处理(DLP)电影放映机。数字电影放映机和灯箱一起照亮电影屏幕,以提供目标图像显示。例如,在本发明的实施例中采用10英尺高、24英尺宽的电影屏幕。在本发明的实施例中,数字电影放映机是DLP放映机。在本发明的实施例中,数字电影目标图像投影仪和参考图像显示器240并排放置。在本发明的实施例中,参考图像显示器240包括放映室中的标准35mm电影放映机301。在那种配置下,利用本发明的***200来实现胶片拷贝参考图像和数字目标图像之间的并排比较和匹配。
在本发明的一个实施例中,可以通过用户控制来操作颜色处理器250,以便例如用户在房中实时灵活地调整目标图像(允许实时改变)。在图10的1001中说明了这一点。本发明的一个实施例允许相对于观看环境条件(提供给色域映射器260的黑暗、昏暗环境照明)来调节颜色空间。
在本发明的实施例中,处理器250提供经过颜色处理的图像原版(master)290,以支持媒体分发。当拷贝经过处理的原版图像290、分发拷贝并在具有类似于选定目标图像显示器230的设备特性的显示设备上显示拷贝时,经过颜色处理的图像原版290将匹配参考图像240的外观。本发明的更多实施例包括用于将计算机生成图像并入数字视频原版中以便分发的装置,如290所示。
因此,被捕获图像的彩色重现是这样一种彩色重现,其中颜色以给出期望外观的方式,绝对地或相对于白色而脱离原始图像中那些颜色的外观。
在本发明的实施例中,处理器250重新映射被捕获数字图像的颜色特性,以便提供具有胶片外观的变换后图像。本发明的实施例实时执行重新映射步骤。变换后图像被提供给目标图像显示设备230。目标图像显示设备的例子包括数字电影放映机、高清晰CRT监视器、计算机监视器、LCD和LCOS显示器或任何显示设备。
在本发明的实施例中,处理器250提供图像数据,用于生成要分发并在目标显示环境如数字电影院中显示的数字原版(用作目标分发媒体)230。
图2示出了通过根据本发明一个实施例的图1***200所实施的方法的步骤。总之,该方法包括计算绝对设备无关颜色(例如XYZ)的正向设备变换步骤310。正向外观模拟步骤320计算人眼所看到的(例如L*a*b*)。色域映射步骤330根据输出设备来还原颜色(例如胶片到电视)。逆外观模拟步骤340重新计算绝对颜色。逆设备模拟步骤350计算设备特定信号(例如RGB投影仪、RGB电视)。
在本发明的实施例中,利用如图2的360所示的图像捕获设备来捕获彩色图像。被捕获的图像被提供给第一变换器,在该第一变换器中根据正向设备变换来变换图像,如310所示。正向设备变换产生与被捕获图像的设备相关图像数据相对应的设备无关输出图像彩色数据。
设备无关输出数据是基于如320所示的正向颜色外观模拟所调节的正向外观。该步骤说明了人的感觉特性,以便提供感觉上增强的彩色图像数据。在色域匹配步骤中,根据输出设备的特性对感觉上增强的彩色图像数据进行映射。通过如330所示的色域映射步骤来提供这种经过色域映射的图像数据。
对经过色域映射的图像数据执行与320所示的正向外观模拟步骤相对应的外观模拟逆步骤340,以便提供感觉上反转的彩色图像数据。经过外观模型反转的彩色图像数据被提供给如350所示的第二设备变换。在本发明的实施例中,第二设备变换包括310所示的第一设备变换的逆。第二设备变换步骤350提供重现的图像,如370所示。
图3所示为用于执行由***200所实施的颜色变换步骤的颜色变换器400的功能图。本发明的实施例完全用硬件和软件或者用它们的各种组合,来实现算法。在本发明的实施例中,变换器在实时环境中操作。该实时能力支持包括多种颜色管理应用和颜色处理***设计的实施例。
变换器400的一个实施例包括存储在存储器(未示出)中的查找表(LUT),并实施3×3矩阵运算(M)。LUT执行查找操作(L)。在本发明的实施例中,用图1的处理器250来实施图3的颜色变换器400。在本发明的一个实施例中,通过只采用存储器查找和加法运算来执行算法,而无需更多类型的操作。与需要附加处理操作的算法相比,该方法导致了计算的大大节约。
如图3所示,对于具有R、G、B值的像素
R′=Mrr*Lr(R)+Mrg*Lg(G)+Mrb*Lb(B)
G′=Mgr*Lr(R)+Mgg*Lg(G)+Mgb*Lb(B)
B′=Mbr*Lr(R)+Mbg*Lg(G)+Mbb*Lb(B)
在本发明的实施例中,R、G、B值及其对应的LUT变换值Lr(R)、Lg(G)、Lb(B)介于最小和最大数字值之间。因而,可以从存储器中所存储的预先计算值查找矩阵元素,因为矩阵元素是常数。在本发明的实施例中,通过如下的更一般变换,来实现线性矩阵变换:
R′=Mrr(Lr(R))+Mrg(Lg(G))+Mrb(Lb(B))
G′=Mgr(Lr(R))+Mgg(Lg(G))+Mgb(Lb(B))
B′=Mbr(Lr(R))+Mbg(Lg(G))+Mbb(Lb(B))
因此,在乘以色值以前,每个矩阵元素都可以扩展为曲线。因而,本发明提供“弯曲”颜色空间或相反调制颜色空间的能力。在本发明一个实施例中,用现场可编程门阵列(FPGA)即硬件配置来实施图3的变换器。在本发明的实施例中,颜色变换器400实时操作,并且能够应用于多种标准输入/输出格式,包括例如高清串行数字接口(HDSDI)和模拟视频图形阵列(VGA)。在本发明的实施例中,颜色变换器400对目标显示器如图1的目标图像显示器230执行比色变换。在那个实施例中,颜色变换器400连接在图像捕获设备210和目标图像显示器230之间,以便当图像数据从图像源传送给显示设备时、对图像表示进行操作。本发明的实施例通过采用一般变换的一阶或二阶或更高阶多项式近似,来获得适于特定应用的精度。
在本发明一个实施例中,颜色变换器400将10位RGB源连接到10位显示器。本发明的实施例使用8位处理技术。一些实施例对输入信号执行2位移位(除以4)。而且,本发明的某些实施例利用对输出信号执行的2位补位操作(乘以4)。
在图3的变换器400的一个实施例中,在矩阵乘积操作中用LUT来代替标量。在这些实施例中,例如如果(R、G、B)是输入三元组,则按照下式来计算输出三元组(R’、G’、B’):
R ′ G ′ B ′ = L RR ( R ) L RG ( G ) L RB ( B ) L GR ( R ) L GG ( G ) L GB ( B ) L BR ( R ) L BG ( G ) L BB ( B ) · R G B
以便实现以下关系:
R ′ = L RR ( R ) . R + L RG ( G ) . G + L RB ( B ) . B G ′ = L GR ( R ) . R + L GG ( G ) . G + L GB ( B ) . B B ′ = L BR ( R ) . R + L BG ( G ) . G + L BB ( B ) . B
因为每个乘积都只取决于R、G或B之一,所以可以用更一般的LUTL′(记为L′RR(R)=LRR(R).R、L′RG(G)=LRG(G).G等)来代替它,以便实现以下方程:
R ′ = L ′ RR ( R ) + L ′ RG ( G ) + L ′ RB ( B ) G ′ = L ′ GR ( R ) + L ′ GG ( G ) + L ′ GB ( B ) B ′ = L ′ BR ( R ) + L ′ BG ( G ) + L ′ BB ( B )
根据本发明实施例,对于每个输出值(R’、G’或B’),变换器400所执行的处理步骤都包括三次查找操作(一次用于R、一次用于G、一次用于B)、接着是两次加法。在本发明一个实施例中,每个LUT表L’XY都用8位进行编码。对角元素(L’RR、L’GG、L’BB)包括0至255之间的无符号值。非对角元素(L’RG、L’RB、L’GR、L’GB、L’BR、L’BG)包括-128至+127之间的有符号值。在本发明一个实施例中,把输出值R’、G’和B’剪切在0至255之间(在填补2位以转换为10位之前)。
在本发明实施例中,将变换器400实施为按照图3进行编程的、且连接到1920×108010位输入输出视频接口的FPGA。
在本发明一个实施例中,通过上载每一个都包括9个查找表L’RR、L’RG、L’RB、L’GR、L’GG、L’GB、L’BR、L’BG和L’BB(按此顺序)的文件来初始化变换器400,其中每个查找表都有256个值。
***200的实施例(图1所示)包括变换器400(图3所示),以便通过把被捕获图像转换为数字域来从捕获设备210的捕获提供颜色一致性,如图1的201和221所示。本发明的实施例进一步提供用于在后期制作链的任何步骤恢复初始颜色参数的装置,并提供在任何步骤用于多种可选择目标显示器(图1的230所示)的无缝视觉控制。那样,在处理的任何步骤,利用一致的颜色基准来跨越设备进行文件交换。
本发明减少了颜色师对每个新版本的高昂劳动。本发明的一个实施例自动适于不同的视觉环境,例如用于全黑环境的剧院版本、具有景物反差压缩的广播版本(以看到黑暗起居室中的暗景物)。DVD版本介于广播和剧院版本之间(顾客可能希望减弱起居室内的灯光)。
根据本发明的实施例,标定过程包括提供颜色管理***250的步骤。把计算机如个人计算机编程为向模型应用测量,以计算将驱动***250的变换参数。在本发明的实施例中,利用测量工具和色卡(colorpatch)来降低成本。
在本发明的实施例中,利用SGI“便携式”工作站来实现根据本发明实施例的颜色变换器。对于第一调节步骤,接口使得可以访问三条描述投影仪RGB对负片读数的曲线。在本发明的实施例中,在这些曲线上有21个控制点可调节,在这些点之间进行线性插值。这等效于从胶片d.LogE RGB曲线得到的纯对角矩阵。
在曲线之后,接连对RGB应用另外两个矩阵。主矩阵包括色调、饱和度和亮度(HSL)接口(绕亮度轴旋转+沿亮度和饱和度轴的乘法系数)。提供调整(tweak)饱和度的能力。本发明所使用的次矩阵具有固定为1.0的对角线值,并且可以单独访问其它的6个非对角系数(代表串扰)。
在该次矩阵中,把对6个非对角系数的每一个的动作实施为LUT。这使能生成曲线,以取决于输入信号而改变响应。当对6个系数执行动作时,将对角值调节为1.0±ε,以便保持操作的整体标量一致性。在本发明的实施例中,在次矩阵操作期间向量标量值保持恒定。
本发明的实施例利用次矩阵(secondary matrix)来控制颜色串扰。在本发明的一个实施例中,在以下形式的单个LUT矩阵中,对HSL控制的主矩阵和基于LUT的次矩阵的三个初始RGB LUT的组合进行合成:
R ′ = L ′ RR ( R ) + L ′ RG ( G ) + L ′ RB ( B ) G ′ = L ′ GR ( R ) + L ′ GG ( G ) + L ′ GB ( B ) B ′ = L ′ BR ( R ) + L ′ BG ( G ) + L ′ BB ( B )
将同步的LUT矩阵(即9个LUTL′RR、L′RG、L′RB、L′GR、L′GG、L′GB、L′BR、L′BG、L′BB)上载到变换器,以便对显示屏起作用。
在本发明的实施例中,通过用PhotoResearch 6501光度计测量220个色卡的色卡集合的光输出,来执行数字投影仪标定。首先对电影放映机进行测量。对数字投影仪执行的测量用于调节数字投影仪的设置,以匹配电影放映机结果。在本发明的一个实施例中,用默认的“电影院”或“剧院”设置来设置数字投影仪。
本发明的一个实施例被自动化并被优化,以便将仿真变为接近实时(即从Fuji切换到Kodak胶片)。在本发明一个实施例中,利用插件库(图6的837)来提供可选择的仿真参数。在本发明的实施例中,仿真设计基于颜色配置文件结果。
本发明的实施例可以操作,以允许从多种类型的超级原版生成分发原版期间的一致颜色恢复自动化,该多种类型超级原版包括但不限于:高价premium电影、SD-HD电影、SD/DVD、HD/DVD和电视广播。图5示出了示例数字超级原版750,以及关于分发原版的各种类型分发路径716、718、720和722的例子。
图4所示为颜色处理***200的实施例的更详细框图。
图5所示为根据本发明实施例的颜色管理***的框图。
图6所示为根据本发明实施例的颜色管理***900的框图。
虽然以上说明针对本发明的优选实施例,但是可以设计本发明的其它和更多实施例,而不脱离本发明基本范围,并且本发明的范围由以下的权利要求来确定。

Claims (13)

1.一种颜色***,包括:图像捕获设备,用于捕获景物及提供代表该景物的第一彩色图像数据;连接到图像捕获设备的颜色变换器,用于将第一彩色图像数据变换为第二彩色图像数据;第一显示设备,用于接收颜色变换器的输出,并显示由第二彩色图像数据所代表的景物;该***的特征在于,颜色变换器包括处理器,该处理器被编程为通过从包括预先计算值的查找表中选择矩阵元素,来对第一彩色图像数据执行矩阵运算,所述预先计算值与第一显示设备相关联,使得通过对第一彩色图像数据进行调整来提供在第一显示设备上的显示所用的第二彩色图像数据,以便模拟第一彩色图像数据。
2.根据权利要求1所述的颜色***,其中所述颜色变换器的特征进一步在于,按照以下关系对第一彩色图像数据R、G、B进行操作,以便提供第二彩色图像数据R′、G′、B′:
R′=Mrr*Lr(R)+Mrg*Lg(G)+Mrb*Lb(B)
G′=Mgr*Lr(R)+Mgg*Lg(G)+Mgb*Lb(B)
B′=Mbr*Lr(R)+Mbg*Lg(G)+Mbb*Lb(B)
其中,R是所述第一彩色图像的红色值,G是所述第一彩色图像的绿色值,B是所述第一彩色图像的蓝色值,M是矩阵运算,并且L是对红色、绿色和蓝色执行的查找表操作。
3.根据权利要求2所述的颜色***,其中,所述颜色变换器的特征进一步在于,R、G和B值在最小和最大数字值之间变化。
4.根据权利要求2所述的颜色***,其中,所述颜色变换器的特征进一步在于,Lr(R)、Lg(G)和Lb(B)值在最大和最小数字值之间变化。
5.根据权利要求1所述的颜色***,其中,所述变换的特征进一步在于,处理器被编程为按照以下关系对R、G和B值进行操作,以提供变换后的值R′、G′和B′:
R′=Mrr(Lr(R))+Mrg(Lg(G))+Mrb(Lb(B))
G′=Mgr(Lr(R))+Mgg(Lg(G))+Mgb(Lb(B))
B′=Mbr(Lr(R))+Mbg(Lg(G))+Mbb(Lb(B))
其中,M是矩阵运算,Lr(R)是红色查找值,Lg(G)是绿色查找值,Lb(B)是蓝色查找值。
6.根据权利要求1所述的颜色***,其中,所述处理器的特征进一步在于3×3矩阵运算。
7.根据权利要求1所述的颜色***,其特征在于:
第一存储器,用于存储至少一幅参考图像,该至少一幅参考图像具有与在参考显示器上显示所述参考图像时的第一颜色外观相对应的颜色特性;
第二存储器,用于存储至少一幅重现图像,该至少一幅重现图像具有与在目标显示器上显示所述重现图像时的第二颜色外观相对应的颜色特性;以及
所述处理器连接到所述第一和第二存储器,所述处理器能够使用矩阵运算来自动修改所述重现图像的颜色特性,以致对于选定的目标显示器,所述第二颜色外观基本上匹配所述第一颜色外观。
8.一种方法,包括:
捕获景物及提供代表该景物的第一彩色图像数据;
将第一彩色图像数据变换为第二彩色图像数据;
接收第一显示设备上的颜色变换器的输出;以及
显示由第二彩色图像数据所代表的景物;
其中,所述变换步骤包括:通过从包括预先计算值的查找表中选择矩阵元素,来对第一彩色图像数据执行矩阵运算,所述预先计算值与第一显示设备相关联,使得通过对第一彩色图像数据进行调整来提供在第一显示设备上的显示所用的第二彩色图像数据,以便模拟第一彩色图像数据。
9.根据权利要求8所述的方法,其中,按照以下关系对第一彩色图像数据R、G、B进行操作,以便提供第二彩色图像数据R′、G′、B′:
R′=Mrr*Lr(R)+Mrg*Lg(G)+Mrb*Lb(B)
G′=Mgr*Lr(R)+Mgg*Lg(G)+Mgb*Lb(B)
B′=Mbr*Lr(R)+Mbg*Lg(G)+Mbb*Lb(B)
其中,R是所述第一彩色图像的红色值,G是所述第一彩色图像的绿色值,B是所述第一彩色图像的蓝色值,M是矩阵运算,并且L是对红色、绿色和蓝色执行的查找表操作。
10.根据权利要求9所述的方法,其中,R、G和B值在最小和最大数字值之间变化。
11.根据权利要求9所述的方法,其中,Lr(R)、Lg(G)和Lb(B)值在最大和最小数字值之间变化。
12.根据权利要求8所述的方法,其中,按照以下关系对R、G和B值进行操作,以提供变换后的值R′、G′和B′:
R′=Mrr(Lr(R))+Mrg(Lg(G))+Mrb(Lb(B))
G′=Mgr(Lr(R))+Mgg(Lg(G))+Mgb(Lb(B))
B′=Mbr(Lr(R))+Mbg(Lg(G))+Mbb(Lb(B))
其中,M是矩阵运算,Lr(R)是红色查找值,Lg(G)是绿色查找值,Lb(B)是蓝色查找值。
13.根据权利要求8所述的方法,其中,所述矩阵运算是3×3矩阵运算。
CNB200580008516XA 2004-03-19 2005-03-17 颜色管理***和方法 Expired - Fee Related CN100521729C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP04364022A EP1578140A3 (en) 2004-03-19 2004-03-19 System and method for color management
EP04364022.6 2004-03-19

Publications (2)

Publication Number Publication Date
CN1934851A CN1934851A (zh) 2007-03-21
CN100521729C true CN100521729C (zh) 2009-07-29

Family

ID=34833810

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB200580008516XA Expired - Fee Related CN100521729C (zh) 2004-03-19 2005-03-17 颜色管理***和方法

Country Status (7)

Country Link
US (1) US20070211074A1 (zh)
EP (2) EP1578140A3 (zh)
JP (1) JP2007537620A (zh)
CN (1) CN100521729C (zh)
CA (1) CA2559373A1 (zh)
HK (1) HK1102050A1 (zh)
WO (1) WO2005094059A2 (zh)

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1797718A4 (en) * 2004-10-04 2009-02-25 Cine Tal Systems Llc VIDEO SURVEILLANCE SYSTEM
KR101329173B1 (ko) 2004-11-01 2013-11-14 테크니컬러, 인크. 향상된 컬러 공간 콘텐츠를 마스터하고 분배하는 방법 및 시스템
US7656462B2 (en) * 2005-06-17 2010-02-02 Martin Weston Systems and methods for modifying master film for viewing at different viewing locations
EP1964389A2 (en) 2005-12-21 2008-09-03 Thomson Licensing Constrained color palette in a color space
EP1838083B1 (en) * 2006-03-23 2020-05-06 InterDigital CE Patent Holdings Color metadata for a downlink data channel
JP5026514B2 (ja) * 2006-06-02 2012-09-12 トムソン ライセンシング 入力色空間から出力色空間への測色変換の適合化
JP4109702B1 (ja) * 2007-02-08 2008-07-02 株式会社イクス 画質調整装置、画質調整方法及び画質調整プログラム
US20080195977A1 (en) * 2007-02-12 2008-08-14 Carroll Robert C Color management system
EP2132923B1 (fr) * 2007-04-03 2019-03-13 InterDigital Madison Patent Holdings Procédés et systèmes pour les affichages de correction chromatique avec des gammes chromatiques differentes
JP4898578B2 (ja) 2007-07-03 2012-03-14 オリンパス株式会社 画像処理システム、撮像システム、及び顕微鏡撮像システム
KR101662696B1 (ko) * 2008-08-22 2016-10-05 톰슨 라이센싱 콘텐츠 전달 방법 및 시스템
US10129513B2 (en) 2008-08-28 2018-11-13 Thomson Licensing Color metadata for a downlink data channel
EP2200268B1 (en) * 2008-12-22 2012-02-08 Thomson Licensing Method of calibration of a target color reproduction device
EP2204980B1 (en) 2009-01-02 2011-05-18 Olympus Corporation Image processing system, imaging system, and microscope imaging system
US20100245381A1 (en) * 2009-03-28 2010-09-30 Ramin Samadani Color gamut mapping
JP5149858B2 (ja) * 2009-04-20 2013-02-20 富士フイルム株式会社 カラー画像の代表色決定装置およびその動作制御方法
CN102667579A (zh) * 2009-09-15 2012-09-12 恩迪斯外科影像有限公司 用于图像的修正、测量和显示的方法和***
KR101428504B1 (ko) * 2010-02-22 2014-08-11 돌비 레버러토리즈 라이쎈싱 코오포레이션 비트스트림에 임베딩된 메타데이터를 이용하는 렌더링 제어부를 갖는 비디오 디스플레이
US8952980B2 (en) 2010-08-09 2015-02-10 Gsi Group, Inc. Electronic color and luminance modification
KR102105645B1 (ko) * 2012-10-08 2020-05-04 코닌클리케 필립스 엔.브이. 색상 제한들을 통한 루미넌스 변화 이미지 처리
EP2951985A1 (en) * 2013-01-29 2015-12-09 Hewlett-Packard Development Company, L.P. To generate a print specification color separation look-up table
WO2014176019A1 (en) 2013-04-23 2014-10-30 Dolby Laboratories Licensing Corporation Transmitting display management metadata over hdmi
WO2015050857A1 (en) 2013-10-02 2015-04-09 Dolby Laboratories Licensing Corporation Transmitting display management metadata over hdmi
KR102158844B1 (ko) 2014-01-03 2020-09-22 삼성전자주식회사 영상 처리 장치, 영상 처리 방법, 및 컴퓨터 판독가능 기록매체
EP3484137A1 (en) * 2017-11-09 2019-05-15 Thomson Licensing Method and device for generating a second image from a first image
US11158286B2 (en) * 2018-10-05 2021-10-26 Disney Enterprises, Inc. Machine learning color science conversion
CN109272922A (zh) * 2018-11-30 2019-01-25 北京集创北方科技股份有限公司 显示设备的驱动方法和驱动装置
US10992902B2 (en) 2019-03-21 2021-04-27 Disney Enterprises, Inc. Aspect ratio conversion with machine learning
CN113968088B (zh) * 2021-12-22 2022-03-11 杭州宏华数码科技股份有限公司 用于打印待呈色对象的方法、设备和存储介质

Family Cites Families (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63116277A (ja) * 1986-11-05 1988-05-20 Matsushita Electric Ind Co Ltd 色補正装置
WO1989000317A1 (en) * 1987-07-06 1989-01-12 Dai Nippon Insatsu Kabushiki Kaisha Method and apparatus for correcting color
US4994901A (en) * 1988-12-23 1991-02-19 Eastman Kodak Company Method and apparatus for increasing the gamut of an additive display driven from a digital source
US5233684A (en) * 1990-06-26 1993-08-03 Digital Equipment Corporation Method and apparatus for mapping a digital color image from a first color space to a second color space
US5212546A (en) * 1990-07-03 1993-05-18 Electronics For Imaging, Inc. Color correction system employing reference pictures
BE1004659A5 (nl) * 1991-03-01 1993-01-05 Barco Graphics Nv Werkwijze en inrichting voor het transformeren van een kleurcoordinatenset.
CA2045908A1 (en) * 1991-06-28 1992-12-29 Jennifer M. Crawford Method and apparatus for converting data representations of an image between colour spaces
JP2994153B2 (ja) * 1991-12-03 1999-12-27 株式会社リコー 色信号変換装置
US5317425A (en) * 1992-02-10 1994-05-31 Eastman Kodak Company Technique for use in conjunction with an imaging system for providing an appearance match between two images and for calibrating the system thereto
US5754184A (en) * 1993-01-06 1998-05-19 Eastman Kodak Company Digital color system and method which provides a visual match across different input and output viewing conditions
GB2275584B (en) * 1993-02-25 1997-05-14 Quantel Ltd An image processing system
JP3504975B2 (ja) * 1993-10-06 2004-03-08 富士写真フイルム株式会社 色再現システム
US5377041A (en) * 1993-10-27 1994-12-27 Eastman Kodak Company Method and apparatus employing mean preserving spatial modulation for transforming a digital color image signal
US6301025B1 (en) * 1994-06-24 2001-10-09 Mgi Software Corporation Method for performing a color space transformation
US5805213A (en) * 1995-12-08 1998-09-08 Eastman Kodak Company Method and apparatus for color-correcting multi-channel signals of a digital camera
JP3907783B2 (ja) * 1996-12-12 2007-04-18 富士フイルム株式会社 色変換方法
US6243133B1 (en) * 1997-03-07 2001-06-05 Eastman Kodak Company Method for automatic scene balance of digital images
US6044172A (en) * 1997-12-22 2000-03-28 Ricoh Company Ltd. Method and apparatus for reversible color conversion
US6181445B1 (en) * 1998-03-30 2001-01-30 Seiko Epson Corporation Device-independent and medium-independent color matching between an input device and an output device
US6999617B1 (en) * 1998-07-24 2006-02-14 Canon Kabushiki Kaisha Image processing method and apparatus
JP3072729B2 (ja) * 1998-10-09 2000-08-07 日本電気株式会社 カラーマッチング方法、カラーマッチング装置並びにプログラムを記録した機械読み取り可能な記録媒体
US6360007B1 (en) * 1998-12-22 2002-03-19 Xerox Corporation Dynamic optimized color lut transformations based upon image requirements
US6417891B1 (en) * 1999-04-16 2002-07-09 Avid Technology, Inc. Color modification on a digital nonlinear editing system
US6603483B1 (en) * 1999-11-15 2003-08-05 Canon Kabushiki Kaisha Color management and proofing architecture
WO2001078368A2 (en) * 2000-04-07 2001-10-18 Demografx Film and video bi-directional color matching system and method
US6707938B2 (en) * 2000-12-06 2004-03-16 Xerox Corporation Principal axis look-up for color correction
US6987586B2 (en) * 2001-03-02 2006-01-17 Eastman Kodak Company Method of digital processing for digital cinema projection of tone scale and color
US7053927B2 (en) * 2001-03-02 2006-05-30 Eastman Kodak Company System for optimizing the display and rendering of digital images for digital mastering
JP2001309198A (ja) * 2001-03-21 2001-11-02 Canon Inc 画像処理方法
JP3876650B2 (ja) * 2001-06-06 2007-02-07 日本電気株式会社 色補正パラメータ算出装置、画像色補正装置及びそれに用いる色補正パラメータ算出方法並びにそのプログラム
US6961477B2 (en) * 2001-07-12 2005-11-01 Canon Kabushiki Kaisha Image-based selection of gamut mapping
KR100439502B1 (ko) * 2001-12-27 2004-07-09 삼성전기주식회사 권선금형 및 이를 이용한 편향요크
US6795084B2 (en) * 2002-01-02 2004-09-21 Canon Kabushiki Kaisha Heuristic determination of color reproduction parameters
EP1538826A3 (en) * 2003-12-05 2007-03-07 Samsung Electronics Co., Ltd. Color transformation method and apparatus
KR101329173B1 (ko) * 2004-11-01 2013-11-14 테크니컬러, 인크. 향상된 컬러 공간 콘텐츠를 마스터하고 분배하는 방법 및 시스템
EP1952640B1 (en) * 2005-10-28 2018-04-11 Thomson Licensing Systems and methods for determining and communicating correction information for video images
EP1964389A2 (en) * 2005-12-21 2008-09-03 Thomson Licensing Constrained color palette in a color space
JP5026514B2 (ja) * 2006-06-02 2012-09-12 トムソン ライセンシング 入力色空間から出力色空間への測色変換の適合化

Also Published As

Publication number Publication date
HK1102050A1 (en) 2007-11-02
JP2007537620A (ja) 2007-12-20
US20070211074A1 (en) 2007-09-13
CA2559373A1 (en) 2005-10-06
WO2005094059A2 (en) 2005-10-06
EP1578140A2 (en) 2005-09-21
EP1772008A2 (en) 2007-04-11
EP1578140A3 (en) 2005-09-28
CN1934851A (zh) 2007-03-21
WO2005094059A3 (en) 2006-03-23

Similar Documents

Publication Publication Date Title
CN100521729C (zh) 颜色管理***和方法
US6987586B2 (en) Method of digital processing for digital cinema projection of tone scale and color
US9294750B2 (en) Video conversion device, photography system of video system employing same, video conversion method, and recording medium of video conversion program
CN101461250B (zh) 将色度变换从输入色彩空间转换到输出色彩空间
EP2200268B1 (en) Method of calibration of a target color reproduction device
US20140233914A1 (en) Image appearance framework and applications for digital image creation and display
US7656462B2 (en) Systems and methods for modifying master film for viewing at different viewing locations
US9443327B2 (en) Rendering and un-rendering using profile replacement
US20060181721A1 (en) Motion picture content preview
US20070085910A1 (en) Method and system for color correction of digital image data
Postma et al. Color grading with color management
Stauder et al. Introduction to cinematographic color management
JP2006078794A (ja) 画像処理方法および装置
Kraushaar et al. ICC color management in the motion picture industry
Dutta Color Primary Correction of Image and Video Between Different Source and Destination Color Spaces
Kainz Using OpenEXR and the Color Transformation Language in Digital Motion Picture Production
Clark Investigation of the academy’s image interchange framework at rit
Tremeau et al. Color Imaging management in film processing
Chenery The Validity and Relevance of Reference Displays
Giorgianni et al. Color Encoding in the Photo CD System
Goldstone An Experiment in Digital Intermediate Color Management Using ICC Profiles
Trémeau Perception of color and image quality of films projected in cinema or displayed on TV screen

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1102050

Country of ref document: HK

C14 Grant of patent or utility model
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: GR

Ref document number: 1102050

Country of ref document: HK

C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20090729

Termination date: 20110317