CN1638687A - 内窥镜图像处理装置 - Google Patents
内窥镜图像处理装置 Download PDFInfo
- Publication number
- CN1638687A CN1638687A CNA038053764A CN03805376A CN1638687A CN 1638687 A CN1638687 A CN 1638687A CN A038053764 A CNA038053764 A CN A038053764A CN 03805376 A CN03805376 A CN 03805376A CN 1638687 A CN1638687 A CN 1638687A
- Authority
- CN
- China
- Prior art keywords
- image
- mentioned
- signal
- endoscopic images
- still image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000095—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/043—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for fluorescence imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/05—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0638—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0646—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements with illumination filters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0655—Control therefor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/0016—Operational features thereof
- A61B3/0041—Operational features thereof characterised by display arrangements
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0082—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
- A61B5/0084—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for introduction into the body, e.g. by catheters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/555—Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0071—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by measuring fluorescence emission
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Engineering & Computer Science (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Biophysics (AREA)
- Veterinary Medicine (AREA)
- Public Health (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Animal Behavior & Ethology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Pathology (AREA)
- Radiology & Medical Imaging (AREA)
- Optics & Photonics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Signal Processing (AREA)
- Ophthalmology & Optometry (AREA)
- Multimedia (AREA)
- Endoscopes (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
- Closed-Circuit Television Systems (AREA)
- Image Processing (AREA)
Abstract
本发明提供一种内窥镜图像处理装置。该内窥镜图像处理装置能够根据电子内窥镜的CCD拍摄的信号生成原图像、及对应于血液信息量的IHb的模拟彩色化的处理图像等;在模拟彩色显示设为ON时用静态图像显示该处理图像;在进行了释放指示操作时,利用监视器摄影装置拍摄并存储该模拟彩色化的处理图像后,继续显示与处理图像相同场景的原图像的静态图像。
Description
技术领域
本发明涉及一种对内窥镜的图像信号进行图像处理的内窥镜图像处理装置。
背景技术
近年来,内窥镜在医疗领域中被广泛地采用。并且,除了进行通常的图像处理外,对被检查体的检查对象区域也能进行图像处理。
例如,在日本专利2851116号中,公开了一种电子内窥镜装置,该装置可在监视器上显示原图像和经过图像处理后的处理图像,并且控制成可以存储处理图像和原图像。
在以前的技术中,判断是处理图像还是原图像,如果判断为处理图像,则根据图像存储指示,首先存储处理图像,然后自动地存储原图像。或者,如果判断为原图像,则根据图像存储指示,只存储原图像。由此可节省存储介质。
可是,在上述以前的技术中,在判断为处理图像时,必须存储处理图像+原图像这2幅图像。即使在只需要处理图像时,也必须存储原图像,从而增加了存储图像的张数。另外,在存储处理图像后,要看相同场景的原图像,必须调出存储图像,因而操作比较麻烦。
因此,本发明是鉴于上述问题而提出的,其目的在于提供一种能够根据用户的选择来存储所希望的图像,能够防止图像存储浪费的内窥镜图像处理装置。
并且,本发明的目的还在于,提供一种在存储了处理图像时,能够显示相同场景的原图像,提高了操作性的内窥镜图像处理装置。
发明内容
在处理利用内窥镜拍摄被检查体的体腔内部而得到的图像信号的内窥镜图像处理装置中,具有:
图像生成单元,其处理上述图像信号并生成能够显示的第1内窥镜图像;
处理图像生成单元,其处理上述图像信号或上述第1内窥镜图像并生成能够显示的第2内窥镜图像;
静态图像单元,其根据通过定格指示操作所发出的定格信号,定格上述图像信号或者上述第1内窥镜图像并生成第1静态图像,定格上述图像信号中规定的区域的图像或者上述第2内窥镜图像并生成第2静态图像;
存储单元,其暂时存储上述第1及第2静态图像中的至少一个;
图像存储单元,其根据通过释放指示操作所发出的释放信号,存储上述第1或第2静态图像中的至少一个;以及
控制单元,其根据上述释放指示操作控制上述图像存储单元存储上述第2静态图像,然后显示输出存储在上述存储单元中的上述第1静态图像。
而且,在用户对利用处理图像生成单元得到的处理图像进行了释放指示操作时,存储对应于该释放指示操作的第2静态图像,然后显示输出对应于第2静态图像的第1静态图像,能够根据用户的选择来选择存储或观察,提高了操作性。
附图说明
图1是具有本发明的一种实施方式的内窥镜装置的整体结构图。
图2是表示图1中的内部结构的方框图。
图3是表示图像处理模块部分的结构的方框图。
图4A~图4C是表示显示于监视器中的通常图像及主要模拟图像的显示例的图。
图5是表示检测CCD的类型并生成对应的掩盖信号动作的流程图。
图6A~图6D是在通常观察状态下进行了释放指示操作时的显示画面的动作说明图。
图7A~图7F是在模拟彩色显示状态下进行了释放指示操作时的显示画面的动作说明图。
图8是表示本实施方式的针对释放指示操作的动作内容的流程图。
图9A~图9D是从通常图像的静态图像显示的状态进行模拟彩色显示,在进行释放指示操作时的显示画面的动作说明图。
图10A~图10C是图7A~图7F的变形例的显示画面的动作说明图。
图11A~图11D是图9A~图9D的变形例的显示画面的动作说明图。
图12是表示用于获得可视光的通常图像及荧光图像的光源部的结构的方框图。
图13是图12的频带限制旋转滤光器的结构图。
图14是RGB旋转滤光器的结构图。
图15是第1模式的动作的说明图。
图16是第2模式的动作的说明图。
具体实施方式
以下,参照图1至图16对本发明的一种实施方式进行详细地说明。
如图1所示,具有本实施方式的内窥镜装置1包括:具有摄像单元的电子内窥镜2;向该电子内窥镜2提供照明光的光源部3;视频处理器6,其内设有对摄像单元进行影像信号处理(图像信号处理)的影像信号处理模块4以及对来自于该影像信号处理模块4的输出信号进行图像处理的图像处理模块5;对从该视频处理器6输出的图像信号进行显示的监视器7;对在监视器7中显示的监视器图像(内窥镜图像)进行照片拍摄的监视器图像摄影装置8;以及与该视频处理器7相连接并发送图像处理的ON/OFF指示信号且输入患者数据等的键盘9。
电子内窥镜2为细长形,具有例如可动性的***部11,宽度大的操作部12连接设置在该***部11的后端。从该操作部12的后端侧的侧部开始延伸设置着具有可挠性的通用电线13,该通用电线13的端部的连接器14与视频处理器6的连接器接受部15可自由插拔地相连接。
上述***部11中,从前端侧开始顺序地设置有硬性的末端部16、与该末端部16相邻的后端的能够自由弯曲的弯曲部17、以及具有可挠性的长的可挠部18。另外,通过旋转操作设置于操作部12上的弯曲操作旋钮19,能够将弯曲部17在左右方向或上下方向上弯曲。另外,在操作部12中设置着与设置在***部11内的治疗用品通道连通的***口20。
并且,在电子内窥镜2的操作部12的顶部,设有进行定格指示的定格开关,及进行释放指示的释放开关等的观察仪器开关10等。而且,如果操作观察仪器开关10并进行例如定格指示,则该指示信号被输入到视频处理器6内部的控制电路35中(参照图2),控制电路35控制存储器部34(的R、G、B存储器部34r、34g、34b),以显示定格图像(参照图3)。
并且,根据从键盘9或视频处理器6的面板50(参照图2)进行的定格指示操作,通过CPU51(参照图2)将该指示信号送往控制电路35,控制电路35进行对应的控制。
并且,一旦进行了释放指示操作,则变为定格图像的显示状态,向监视器图像摄影装置8中发送释放信号,进行照片拍摄。
如图2所示,在末端部16的照明窗及观察窗上,分别安装着照明透镜21和物镜光学***22。在照明透镜21的后端侧,配置着由光纤束构成的光导23,该光导23贯通于***部11、操作部12、通用电线13中,并与连接器14相连接。
而且,通过将该连接器14与视频处理器6相连接,能够将从该视频处理器6中的光源部3照射出来的照明光输入到上述光导23的入射端。
光源部3包括灯24及旋转滤光器26,该旋转滤光器26配置在该灯24的照明光路中并受电动机25的驱动而旋转。
灯24可射出可视光。在旋转滤光器26中,沿圆周方向排列着分别透过互不相同的波长区域的光的滤色器27R、27G、27B。该旋转滤光器26的滤色器27R、27G、27B被设定成通过红(R)、绿(G)、蓝(B)的各波长区域的光的特性。
从灯24射出的光,通过旋转滤光器26,被按照时间顺序分离为各波长区域,入射到光导23的入射端。该照明光能够通过光导23被引导到末端部16,通过安装在末端面的照明窗上的照明透镜21,用R,G,B面顺序的照明光,照射被***位等被摄体。
另一方面,在上述物镜光学***22的成像位置上,作为固体摄像元件,例如,设置有电荷耦合元件(简称为CCD)28。而且,被面顺序的照明光照明的被摄体,通过物镜光学***22在CCD 28的光电变换面上成像,通过该CCD 28变换为电信号。通过该CCD 28进行光电变换并输出的图像信号(摄像信号)被输入到影像信号处理模块4中,并被输入到用于放大规定范围的电信号(例如0~1伏特)的放大器31中。
该放大器31的输出信号被A/D转换器32转换为数字信号,并被输入到1输入/3输出的选择器33中。按时间顺序发送过来的RGB信号,通过该选择器33被分离成R、G、B各颜色信号,并输入到存储器部34中。
分离出来的R、G、B各颜色信号分别被存储到对应于R、G、B(构成存储器部34)的R、G、B存储器部34r、34g、34b中(参照图3,图4。图2中省略了34r、34g、34b)。
另外,由控制电路35对A/D转换器32的A/D转换、将颜色信号存储(写入)到存储器部34的R、G、B存储器部34r、34g、34b中及读出颜色信号进行控制。并且,控制电路35把基准信号发送到同步信号发生电路(在图2中简记为SSG)36中,同步信号发生电路36产生与其同步的同步信号。另外,通过设定为禁止向此处的R、G、B存储器34r、34g、34b写入的状态,能够设定为为显示静态图像的状态(在后述的同时化电路48的R、G、B存储器中也可以这么做)。
并且,在本实施方式中,即使对于CCD 28的像素数等不同的电子内窥镜2也能进行信号处理。因此,在连接器接收部15中设置了CCD类型检测电路37,其检测内置于电子内窥镜2中的CCD 28的像素数等的种类类型,该电子内窥镜2例如实际上通过连接器14的插脚数等与视频处理器6相连接。
另外,检测CCD 28的像素数等的种类的单元,并不限于通过对应于CCD 28的像素数等种类的连接器14的插脚数等进行检测,还可通过施加CCD驱动信号并从其输出信号的波形数来检测像素数(水平像素数,垂直像素数)。
从各存储器34r、34g、34b中读出的颜色信号R、G、B,被输入到构成图像处理模块5的IHb处理模块41中,该IHb处理模块41进行计算作为色素量的血色素量的相关值(以下简记为IHb)等处理,该色素量是血液信息量。
在本实施方式中,该IHb处理模块41包括IHb处理电路部42和色彩强调电路部43。IHb处理电路部42进行各像素的IHb的量(值)的计算及其平均值计算,或以各像素的IHb的值为基础进行作为模拟彩色图像进行显示的模拟图像生成处理;色彩强调电路部43进行色彩强调。
并且,在本实施方式中,还具有色彩偏差检测模块44,该色彩偏差检测模块44在用定格图像显示IHb的模拟彩色图像时,进行色彩偏差检测,以便能够以色彩偏差小的状态进行显示。
从上述IHb处理模块41输出的面顺序的信号用γ校正电路45进行γ校正,进而用后级的图像处理电路46进行结构强调。然后,用文字叠加电路47,在叠加患者数据和计算出的IHb的平均值后,能够用同时化电路48从面顺序信号变换为同时化信号。
如图3所示,同时化电路48具有R、G、B存储器,通过将面顺序的信号数据暂时写入R、G、B存储器、并同时读出,输出同时化的RGB信号。
将同时化后的RGB信号分别输入到D/A转换部49的3个D/A转换器49r、49g、49b(参照图3,图2中省略了49r、49g、49b)中,变换成模拟RGB信号并输入到监视器7及监视器图像摄影装置8中。另外,同时化电路48的R、G、B存储器的写入及读出以及D/A变换部49的D/A变换由控制电路35进行控制。
另外,监视器图像摄影装置8由未图示的监视器和照片拍摄装置(具体地说就是照相机)构成,该监视器与监视器7同样对图像等进行显示;照片拍摄装置对显示在其监视器中的图像拍摄照片并进行图像存储。
而且,一旦用户把用通常的可视光照明及拍摄的通常图像(也称为原图像)显示于监视器7上,或者通过来自于设置在视频处理器6的面板50上的开关或键盘9的指示操作进行了IHb图像的显示的指示等,则该指示信号被输入到CPU51中,CPU51根据指示信号对IHb处理模块41等进行控制。
下面说明IHb处理模块41的结构。如图2及图3所示,来自于R存储器34r的R信号和来自G存储器34g的G信号都被输入到IHb处理模块41中的IHb计算电路53中,进行IHb的计算。然后,输出到计算IHb平均值的IHb平均值计算电路54中。
并且,通过CCD类型检测电路37检测出来的CCD类型信息被输入到区域设定电路55中,区域设定电路55根据CCD类型信息,在显示模拟图像时,设定模拟图像的显示区域,以便用适当的尺寸进行显示。
并且,由区域设定电路55所设定的区域信息被送往IHb计算电路53和IHb平均值计算电路54中,并在该区域中进行IHb的计算。
具体来说,IHb计算电路53进行以下的(1)公式的运算,计算有关各像素的IHb值。
IHb=32×Log2(R/G)…(1)
R:R图像的数据
G:G图像的数据
很容易利用电路实现该公式(1),例如,可以使用未图示的除法器对所输入的R图像的数据和G图像的数据进行运算,并利用没有图示的由ROM等构成的Log变换表对其输出结果进行变换来实现。并且,也可以使用CPU等进行上述(1)公式的计算。
利用IHb计算电路53计算出的IHb被输出到IHb平均值计算电路54中。IHb平均值计算电路54对于被输入的IHb,在区域设定电路55设定的区域中进行平均来计算IHb平均值。
并且,由IHb计算电路53计算出的IHb被输入到模拟图像生成电路56中。模拟图像生成电路56根据IHb的值生成以模拟彩色显示的模拟图像,并输出到进行图像合成的图像合成电路57中。
向图像合成电路57中输入由模拟图像生成电路56生成的模拟图像数据及来自于R、G、B存储器34r、34g、34b的R、G、B图像数据,图像合成电路57根据来自于区域设定电路55的掩盖信号,进行两种图像数据的合成处理,并将合成的图像数据输出到将其变换成面顺序信号的面顺序电路58中。
具体来讲,图像合成电路57,在掩盖信号为“0”的期间,输出与原图像相当的R、G、B图像数据,在掩盖信号为“1”的期间,输出模拟图像数据,并将合成的图像数据输出到后级的面顺序电路58中。
面顺序电路58进行将合成的图像数据R、G、B成分按照面顺序分别进行输出的处理。即,在γ校正电路45中,按照面顺序输出R、G、B成分的图像数据。
另外,在本实施方式中,将区域设定电路57设定的区域的信息(具体来讲为掩盖信号)送往γ校正电路45和后级的图像处理电路46中,除了与将模拟彩色显示设为ON连动,而将γ校正电路45和后级的图像处理电路46的动作设为OFF时的控制动作外,也可以根据用户从键盘9等进行的选择,通过CPU51对规定区域周围的原图像部分进行γ校正和结构强调。
并且,将由IHb平均值计算电路54计算出来的IHb平均值送往文字叠加电路47中,能够在监视器画面上显示计算出的IHb平均值。在这种情况下,也能根据用户的选择,通过CPU51选择显示/非显示。
并且,将来自于上述R、G、B存储器34r、34g、34b的R、G、B图像数据输入到构成色彩强调电路部43的亮度电路61中,生成亮度信号,且将该亮度信号输入到进行强调量设定的强调量设定电路62中。
并且,在该强调量设定电路62中,也输入利用设定强调级别的强调级别电路63所设定的强调级别的值。然后,根据来自于两电路的亮度信号的级别以及强调级别来设定强调量,把该强调量的信号输出到进行强调的强调电路64中。
进而,在该强调电路64中,在将来自R、G、B存储器34r、34g、34b的R、G、B图像数据和用IHb计算电路53计算出来的IHb输入的同时,还通过延迟&平滑化电路(在图2及图3中简记为DLY&平滑化)65输入用IHb平均值计算电路54计算出的IHb平均值。
强调电路64进行色彩强调并将R、G、B图像数据输出到图像合成电路57中,图像合成电路57在色彩强调设为ON时,能够代替原图像的图像数据,而将进行了色彩强调的图像和模拟彩色进行合成。当然,模拟彩色设为OFF时,也能够只输出从强调电路64输出的进行了色彩强调的图像,能够代替原图像与模拟彩色的合成,而合成并输出原图像与进行了色彩强调的图像。
这种情况下的色彩强调部分的图像成为根据IHb值、其平均值和亮度级别以及所设定的强调级别等生成的进行了色彩强调的R、G、B图像数据。
并且,在代替模拟彩色而将原图像与进行了色彩强调的图像进行合成的情况下,在合成了模拟彩色的区域部分中合成进行了色彩强调的图像并进行显示。而且,如果一旦进行全面显示的设定,而不是部分显示,则能够全面地显示进行了色彩强调的图像。
而且,一旦用户把用通常的可视光照明及拍摄的通常图像(也称为原图像)显示于监视器7上,或者根据来自于设置在视频处理器6的面板50的指示开关或键盘9的指示操作进行了IHb图像的显示的指示等,则该指示信号被输入到CPU51中,CPU51根据指示信号对IHb处理模块41等进行控制。
这种情况下,用户一旦通过设置在面板50上的开关或键盘9进行了IHb图像(模拟图像)的显示的ON/OFF或色彩强调的ON/OFF的指示,则CPU51根据该指示对ON/OFF 51a进行控制。并且,一旦进行了强调级别的设定指示,CPU51便对强调级别电路63的强调级别的级别设定51b进行控制。
并且,将来自R、G、B存储器34r、34g、34b的R、G、B图像数据输入到色彩偏差检测模块44的色彩偏差检测电路71中,通过对R、G、B图像数据的相关量等进行检测来检测色彩偏差量。
而且,在进行了图像的定格指示时,检测色彩偏差最小的图像,并向控制电路35发送信号,以便显示检测出该色彩偏差最小的图像的场(field)的图像,控制电路35设定为禁止向存储器部34的R、G、B存储器34r、34g、34b写入的状态,把在作为显示单元的监视器7上显示的图像以及在监视器图像摄影装置8的监视器上显示的图像设定为静态图像状态。
作为检测定格的图像的色彩偏差量的方法,可适当地从以下3种色彩偏差检测方法中选择或将它们组合起来,用所选择的方法检测色彩偏差最小的图像。
具体来讲,色彩偏差检测电路71,使用间除电路72、模糊校正电路73、或者比较器74,能够进行色彩偏差检测。
在色彩偏差检索的张数多的情况下,利用间除电路72间除时间顺序的图像,通过对间除后的图像进行色彩偏差检测,能够适应大范围的图像张数的情况。
使用比较器74有两种方法:一种是采用多级比较器的方法,该多级比较器通过对作为对象的多张的场的变化量进行一次比较来找出变化量小、即色彩偏差最小的图像(尽管电路规模大、对对象的图像张数有限制,但是能够进行高速处理,能够在短时间内找出色彩偏差最小的图像);另一种是对每2个作比较,从多张中找出色彩偏差最小的1张图像的方法(这种情况下,尽管具有电路规模小、对象的图像张数也比多级比较器多的特征,但由于不能进行高速处理,因此找出色彩偏差最小的图像比较费时间)。
并且,对于由此得到的色彩偏差最小图像,有如下的图像构造方法:把红色图像、绿色图像、蓝色图像的显示位置分别以数像素为单位2维地错开,进而使色彩偏差最小,即进行模糊校正,模糊校正电路73进行该工作。
该方法由于要错开图像,虽然图像的边缘部分无效而使观察图像变小,但是具有能够减少色彩偏差的优点。
也可以事先用菜单选择上述方法或其组合,或根据设定条件对这些方法或其组合进行切换。例如可用在未图示的定格菜单的预定格项目中进行设定。
该预定格中,例如级别的数值与对象图像张数相对应,例如如果最大的级别是8,则大于等于上述多级比较的限制张数,因此用对每2个进行比较的方法进行色彩偏差检测。在级别小于该限制张数时,由于比多级比较的限制张数少,因此利用多级比较进行色彩偏差检测。
并且,如果将定格的菜单画面的模糊校正的项目的模糊校正设为ON,那么就能够通过对于使用任何方法得到的色彩偏差最小图像进行模糊校正,来构造色彩偏差少的色彩偏差最小图像。
在本实施方式中,具有以下特征:通过利用CCD类型检测电路37,检测实际内置于电子内窥镜2中的CCD 28的像素数等种类,并根据检测出的种类的像素数来设定显示模拟图像的区域,即使在把种类不同的电子内窥镜2连接起来使用的情况下,也能够自动地用适当的尺寸显示模拟图像。
具体来说,在通常的动作状态下,在监视器7的显示画面上如图4A所示,在八边形的内窥镜图像显示区域7a中,用动态图像显示内窥镜图像。并且,在该内窥镜图像显示区域7a的左侧,除了患者数据等之外,还显示IHb平均值显示准备。
具体地讲,显示为IHb=---(用符号7b表示),准备显示IHb平均值。另外,也可以通过选择将该IHb平均值显示准备的显示设为非显示。另外,根据IHb平均值的值,能够得到作为诊断是病变部分还是健康部分(正常部分)的标准的信息。
而且,一旦进行了把模拟彩色图像的显示设为ON的指示操作,则例如如图4B所示,在内窥镜图像显示区域7a的中央部的掩盖区域7c中显示模拟彩色图像。在该情况下,也能从IHb平均值显示准备的显示进行IHb平均值的显示(用符号7b显示)。
即,在作为观察对象部分的内窥镜图像的关心区域的中央部分的掩盖区域7c内(是处理图像或第2内窥镜图像)显示模拟彩色图像,其周围(即第1内窥镜图像)显示原图像。
并且,在该情况下,在内窥镜图像显示区域7a的右侧,显示用模拟彩色图像显示时的范围的彩色条7e。在该情况下,示出标准(Norm)的范围的情况。
在本实施方式中,如图4B所示,在只在显示内窥镜图像显示区域7a的中央部的掩盖区域7c部分中显示模拟彩色图像时(即,部分地显示模拟彩色图像时),区域设定电路55利用如图5所示的作用产生掩盖信号,即使在像素数等不同的CCD 28的情况下,也能够用适当的尺寸部分地显示模拟彩色图像。
即,进行模拟彩色图像的部分显示时,区域设定电路53通过来自于CCD类型检测电路37的检测信号,如图5的步骤S1所示,判断实际使用的CCD 28是否为类型1的种类,如果判断为是这种情况,则如步骤S2所示,产生类型1用的掩盖信号,并将该掩盖信号输出到图像合成电路57中。
类型1用的掩盖信号输出在进行模拟彩色图像的部分显示时为“1”,在其以外的期间为“0”的二进制掩盖信号;图像合成电路57根据该掩盖信号,进行将模拟彩色图像部分地嵌入到原图像的图像合成并输出给后一级。然后,在监视器7的显示面上,如图4B所示,部分地显示模拟彩色图像。
另一方面,在不符合图5的步骤S1时,转入到步骤S3,判断CCD 28是否为类型2。在判断符合该类型2的种类时,区域设定电路53如步骤S4所示,产生类型2用的掩盖信号,并将该掩盖信号输出到图像合成电路57中。而且,在这种情况下,也部分显示与图4B基本相同的模拟彩色图像。
另一方面,在不符合步骤S3的条件时,转入到步骤S5,产生对应于其它类型的掩盖信号。由此,即使在多种类的CCD 28的情况下,也能够(没有必要像以往例子那样根据像素数等进行区域设定)以适合于其CCD 28的像素数的尺寸进行模拟彩色图像的部分显示。
用具体的例子来说明,例如在类型1的CCD 28中,其像素数为400×400,这时产生如下的二进制的掩盖信号:在其中央部200×200的像素区域(即1/4的尺寸)中为“1”,在其以外的区域为“0”。而且,在类型2的CCD 28中,其像素数为800×600,这时产生如下的二进制的掩盖信号:在其中央部400×300的像素区域(即1/4的尺寸)中为“1”,在其以外的区域为“0”。
因此,在类型1或类型2中的任何一种情况下,都能够在原图像的中央部以1/4的显示尺寸进行模拟彩色图像的部分显示。
并且,在本实施方式中,除了进行如上述图4B所示的模拟彩色图像的部分显示外,还具有如下的显示模式:如图4C所示,在整个图像上用模拟彩色图像显示的模拟彩色全面显示(用7f显示)。在根据用户的选择而选择(ON)了中央部分(中的一部分)显示时,进行如图4B所示的部分显示;如果不选择中央部分,则进行如图4C所示的全面显示。另外,也可用在与图4A中所示的八边形相同的区域中,进行图4C的模拟彩色全面显示7f的显示。
在本实施方式中,在通常的动态图像观察模式下,一旦进行了释放指示操作,则进行如图6A~图6D所示的处理。
即,如图6A所示,在用动态图像显示原图像的状态下,一旦操作了定格开关,则如图6B所示,原图像被定格而变为静态图像。
然后,一旦操作了释放开关,便存储图6B的静态图像。在图6C中示出该状态。该存储一旦完成,则如图6D所示,返回原图像的动态图像显示。
并且,在本实施方式中,在通常的动态图像观察模式下一旦把模拟彩色的显示设为ON,则如图7B所示,进行定格并进行模拟彩色的显示。此外,在该情况下具有以下特征:一旦进行了释放操作而进行了存储,则在该存储后,继续定格该模拟彩色部分的原图像并用静态图像进行显示;用户处于能够观察对应于存储的模拟彩色部分的原图像的状态,根据需要很容易存储该静态图像。
即,一旦对于原图像进行了存储作为其处理图像的模拟彩色的指示操作,则存储其处理图像,然后,自动地显示对应于处理图像部分的原图像的静态图像,用户能够在希望存储的时候进行存储,在不希望存储的时候只进行观察,能够广泛适应用户的选择,提高了操作性。
因此,如图2所示,CPU51在监视来自键盘9等的模拟彩色以外的原图像的定格指示操作的同时,监视用模拟彩色显示的释放指示操作。而且,在进行了释放指示操作时,能够向监视器图像摄影装置8发送释放信号,以进行照片拍摄。
并且,一旦根据释放信号完成了照片拍摄,则从监视器图像摄影装置8接收拍摄完成的信号,CPU51在模拟彩色显示的照片拍摄完成后,将控制信号送往控制电路35,以显示作为处理图像的模拟彩色静态图像,控制电路35控制成显示模拟彩色的静态图像。
另外,虽然对CPU51从监视器图像摄影装置8中接收到拍摄完成的信号后,进行对应的原图像的静态图像的显示进行了说明,但并不限于此,也可以在向监视器摄影装置8发送释放信号后,在照片拍摄的动作经过充分的时间后,CPU51显示对应的原图像的静态图像。
另外,在图7B等中模拟彩色表示如图4B所示的在原图像的中央部分进行部分显示的部分显示和如图4C所示的显示全面显示中的一个。并且,通过定格指示操作,分别转换到右侧的状态。例如如果是部分显示,则保持部分显示的状态转换到右侧;如果是全面显示则保持全面显示的状态转换到右侧。
下面参照图8说明进行了释放指示操作时的作用。
如图8所示,一旦接通内窥镜装置1的电源,则如步骤S11所示,在监视器7中原图像处于动态图像显示的状态。然后如步骤S12所示,CPU51判断是否进行了释放指示操作,即判断释放是否被设为ON。
在没有进行释放指示操作时,返回到步骤S11;在进行了释放指示操作时,转入到步骤S13。在步骤S13中,判断模拟彩色是否被设为ON,如果模拟彩色没有被设为ON,则如步骤S14所示,使原图像处于定格状态,在进行了原图像的照片拍摄后,返回到步骤S11的原图像的动态图像显示。
在该情况下,相当于图6A~图6D所示的通常观察中的摄影模式。另外,在图6A~图6D中,对进行定格指示操作后又进行了释放指示操作的情况进行了说明,但是,在进行定格前进行了释放指示操作的情况下,由于如步骤S14所说明的那样设为定格状态后,进行释放(摄影),因此其作用与图6A~图6D所示的相同。
在步骤S13中,如果模拟彩色为ON,则转入到步骤S15,进行处理图像、即模拟彩色图像的照片拍摄。
在该情况下,在图7A的状态下,通过将模拟彩色(IHb分布图像开关)设为ON的操作,如图7B所示,在变为模拟彩色(图像)在定格状态下作为静态图像进行显示的状态之后,通过释放指示操作(释放ON)如图7C所示,图7B的模拟彩色(图像)的静态图像通过释放被进行照片拍摄并被存储。
一旦完成了该照片拍摄,就进行步骤S16的原图像的静态图像显示。即,如图7D所示,变为进行了照片拍摄的模拟彩色(图像)部分的原图像处于以被定格的静态图像进行显示的状态。
因此,在用户为比较模拟彩色图像部分的原图像等而进行照片拍摄时可将释放设为ON,在没必要进行照片拍摄时可解除定格。CPU51如步骤S17所示判断是否选择了定格ON,在定格ON没有被选择(即,定格解除)时转入到步骤S20,变为显示原图像的动态图像的状态。即,变为图7F的显示状态。
另一方面,一旦选择了定格ON,则如步骤S18所示,判断是否已将定格设为ON。然后,如果没有将定格设为ON,则返回到步骤S16,维持原图像的静态图像的显示状态;如果将定格设为ON,则如步骤S19所示,通过照片拍摄来对静态图像状态的原图像进行存储。即,如图7E所示,通过照片拍摄来对静态图像状态的原图像进行存储,在存储后转入到步骤S20,进行原图像的动态图像显示。
根据如此动作的本实施方式,在通过拍摄照片存储模拟彩色图像时,由于在该存储后,以定格状态显示该模拟彩色图像,因此用户无需存储对应的原图像,可简单地通过照片拍摄进行存储,同时在只观察而不进行照片拍摄时也能选择原图像,可提供操作性良好的装置。
即,在以往的例子中,在存储处理图像时,也必须存储原图像,但是本实施方式中,在用户判断没有必要存储时,不进行多余的存储,可以根据实际的使用状态等,更广泛地选择存储等。并且,在拍摄处理图像时,由于用静态图像显示对应的原图像,所以,无需操作,便能够观察对应的原图像,能够简单地选择是存储还是只观察。
另外,根据图8的流程,虽然用图6A~图6D以及图7A~图7F对进行照片拍摄的动作进行了说明,但在本实施方式中,如图9B所示,在静态图像显示状态时,在将模拟彩色设为ON后进行释放时,其释放后的作用也与图7C以后的相同。
即,图9A及图9B示出在动态图像的状态下进行了定格指示操作的状态,与图6A及图6B相同。而且,在该定格的静态图像的状态下,将模拟彩色设为ON,成为显示定格状态的模拟彩色静态图像的图9C的状态;在该状态下一旦进行了释放指示操作,则如图9D所示,在该模拟彩色的静态图像的显示状态下进行照片拍摄,即进行存储。之后的处理与图7D以后相同。
根据本实施方式,在拍摄了处理图像时,由于能够用静态图像显示对应的原图像,因此,通过用户的选择在必须进行存储时,能够简单地进行存储,并且,也能够对应没必要存储的情况;能够提高操作性,还能够防止进行无用的图像存储以及在进行无用图像存储时对必要图像和不必要的多余图像进行区分管理而耗费精力。
虽然前面叙述了释放处理图像的情况,但是也可以不进行释放而解除图像处理动作。在该情况下返回处理图像动作前的状态,对用户来说是很自然的。对于这种情况,作为图7A~图7F的变形例及图9A~图9D的变形例,通过以下的图10A~图10C及图11A~图11D进行说明。
在如图10A所示的动态图像的原图像的情况下,一旦将模拟彩色设为ON,则如图10B所示,定格原图像并显示模拟彩色的静态图像(这与图7A及图7B的动作相同)。
其后,也可以在模拟彩色设为OFF之后,与模拟彩色设为ON之前的图10A相同状态的图10C所示,返回动态图像的原图像。
并且,与图9A的情况相同,如图11A所示,在显示动态图像的原图像时,在定格设为ON的情况下,与图9B相同,如图11B所示,定格原图像并用静态图像进行显示。
其后,如果将模拟彩色设为ON,则与图9C相同,如图11C所示,将原图像变为显示模拟彩色的静态图像的状态;其后一旦进行了将模拟彩色设为OFF的指示操作,则以静态图像显示与模拟彩色设为ON之前的图11B相同状态的原图像。
并且,同样地,在不进行释放动作而解除了图像处理动作时,无论进行处理图像动作之前是何种状态,都可以返回动态图像的原图像。通过这样做,能够立刻继续进行动态图像观察。
另外,在上述的说明中,虽然说明了通过照片拍摄来存储图像的情况,但也可应用于通过用数字照相机进行拍摄来进行图像存储的情况,也可应用于把图像进行电存储在图像存档装置等中的情况。
并且,在作为处理图像在原图像的显示区域中的中央部分中部分地显示模拟彩色的状态下,通过释放指示操作进行了图像存储时,紧随其后用静态图像显示对应的原图像,能够选择存储或者不存储该原图像,但是,根据用户的选择,在存储原图像时,也可以只选择与部分显示的模拟彩色对应的部分。
由此,可防止重复存储周围的原图像部分。特别是在应用于对图像进行电存储的情况下时,能够防止多余图像部分的内存消耗。
并且,在上述说明中,虽然说明了IHb的模拟彩色的图像存储,但是也可以在存储了进行了色彩强调的图像、进行了结构强调等的处理图像的情况下,同样地显示对应的原图像的静态图像。
用具体的情况进行补充说明,在显示着对于对利用CCD 28得到的图像信号进行通常的图像处理(影像处理)而生成的可在监视器7中显示的原图像的全体或规定区域部分实施色彩强调和结构强调等处理后的处理图像的情况下,进行了释放指示操作时,也可以控制成:在照片拍摄等的图像存储后,紧接着以静态图像方式显示对应的原图像。
并且,即使在对所拍摄的图像信号实施多种类的图像处理而形成了处理图像的情况下,也可以在对该处理图像进行了释放指示操作时,控制成:在进行该处理图像的图像存储后,显示对应的原图像的静态图像。
作为该情况的具体例子,可以在原图像的例如中央部的第1规定区域中将模拟彩色图像作为第1处理图像进行显示;在其周围部分的第2规定区域中,显示进行了结构强调或色彩强调的第2处理图像;在对进行了该复合处理的处理图像进行了释放指示操作时,在进行该图像存储后,以静态图像显示对应的原图像。
并且,在这样的复合处理图像的情况下,在以静态图像显示对应的原图像时,可以选择以下方式:以静态图像显示两个处理图像的原图像;或只将一个处理图像部分作为原图像,将另一个处理图像直接作为静态图像进行显示。
并且,也可以让用户通过键盘9等来选择上述第1区域或第2区域。
并且,在用户设定的区域部分中对原图像实施了多种不同的例如第1处理和第2处理的情况下,除了在图像存储后用静态图像显示对应的原图像外,还可以控制成:以静态图像显示解除了第2处理而仅实施了第1处理的图像,然后,再以静态图像显示解除了第1处理的原图像。
下面说明本实施方式的变形例。
上述实施方式中,对于图像处理的概念,以血液信息量即IHb为中心进行了记载。但是,有时作为其他的图像处理,获得荧光、窄频带或红外图像。以下首先以荧光图像为例来进行详细说明。
(1)荧光图像
在图2所示的结构中,光源部3以面顺序把R、G、B波长域的照明光照射到被检查体上,在该照明状态下获得各波长域的成分图像,但是,具有如下的诊断法:事先将荧光物质投放到被检查体上,通过照射激励荧光物质的激励光,来获得荧光图像。
在应用于上述实施方式时,具有以下要点,关于上述原图像和处理图像,存在以下(A)及(B)两种模式。
(A)原图像是利用通常的白色光(或与此相当的可视域的面顺序照明光)的通常图像
将白色光照射在被摄体上而得到的通常图像作为原图像。例如使用通过可视光的RGB滤光器。
并且,将把激励光照射在被摄体上而得到的荧光图像作为处理图像。使用通过红外频带的滤光器或限制频带的滤光器。
(B)原图像是荧光图像
将把激励光照射在被摄体上而得到的荧光图像作为原图像。
把对荧光图像进行图像处理而得到的荧光模拟彩色图像作为处理图像。
其方法是对于用摄像元件感光来自被摄体的荧光而得到的信号,生成与范围对应的模拟彩色数据。另外,也可以算出用摄像元件感光来自于被摄体的荧光所得到的信号与用摄像元件感光来自于被摄体的反射光所得到的信号之比,同样地生成模拟彩色数据。
下面说明实现上述目的的方法及作用。
首先,代替图2的光源部3采用图12所示的光源部3A。该光源部3A如以下说明的那样,具有照射(供给)通常的可视光区域的照明光的可视光照明单元(可视光供给单元)的功能,同时,还具有供给可视光区域以外的波长区域的特殊光的特殊光供给单元的功能,具体来说还具有照射(供给)用于得到荧光图像的激励光的功能。
换言之,该光源部3A具有供给可视光区域及其以外区域的照明光的特殊光照明单元,在获得荧光图像时通过频带限制单元限制可视光区域的照明。
并且,视频处理器6进行将用可视光照明所得到的图像作为通常图像的信号处理,或者进行例如作为处理图像获得荧光图像的信号处理。
如图12所示,光源部3A具有:放射包含从红外波长频带到可视光频带的光的灯110、设置在该灯110的照明光路上的限制通过的频带的能够旋转的频带限制滤光器111、限制来自灯110的光量的照明光光阑112、RGB旋转滤光器113、及聚光的聚光透镜114。
频带限制滤光器111及RGB旋转滤光器113分别利用电动机115、116进行旋转驱动。
频带限制滤光器111如图13所示,设有例如半圆形的可视光透过滤光器111a、红外光透过滤光器111b。
而且,灯110的光利用可视光透过滤光器111a或红外光透过滤光器111b只将可视光频带或红外频带的光成分抽出,再利用照明光光阑112控制光量后,入射到RGB旋转滤光器113中。
如图14所示,该RGB旋转滤光器113沿圆周方向3等分地设置有RGB滤光器113a、113b、113c,通过由电动机116进行旋转驱动而被分别顺序地***到光路中。
并且,R、G、B透过滤光器113a、113b、113c的透过特性是分别通过红、绿、蓝的波长区域的光,同时,分别通过比700nm长的波长的激励光的波长,具体地说,也透过激励靛青绿(ICG)衍生物标识抗体的波长的光(如以下说明的那样例如770-780nm附近的红外光)。
通过RGB旋转滤光器113的光利用聚光透镜114聚光并照射到光导纤维23的入射端。然后,通过该光导纤维23来传输光,并从其末端面经过照明透镜21照射在体腔内的被检查体上。
如果在被检查体的体内,事先对癌等的病变部投放作为具有亲和性的荧光物质的ICG衍生物标识抗体,一旦通过照射770-780nm附近的红外光进行激励,则产生810-820nm附近的红外区域的荧光。
并且,通过控制电路35对电动机115、116进行控制。
并且,在形成摄像单元的CCD 28的前面侧配置了未图示的激励光截止滤光器,在进行荧光观察时,能够截止该激励光而拍摄微弱的荧光。并且,虽然没有图示,但是在物镜光学***22和CCD 28的摄像光路上,配置有具有波长依存性并限制入射光量的光阑。
该光阑形成例如同心圆形状,只有在通过中央部的小圆形内侧时,可视光才被CCD 28拍摄,与此相反,荧光透过中央部及其外侧的环状部分而被CCD 28拍摄。由此,在可视的图像的拍摄状态(抑制其强度的状态)下,利用不太小的适宜的强度也能进行荧光图像的拍摄。
并且,本变形例中,在视频处理器6的面板等上设置了观察方式选择开关,通过该观察方式选择开关,能够选择利用可视光的第1模式、以及利用荧光及通常的内窥镜图像进行观察的第2模式。
即,一旦利用观察方式选择开关进行了选择,则将该指示输入到控制电路35中,该控制电路35进行电动机115、116及多路复用器33的切换控制,进行与图15及图16中所示的各方式对应的控制。
例如,在选择了与上述实施方式相同的第1模式时,控制电路35控制电动机115的旋转量,使频带限制旋转滤光器111的可视光透过滤光器111a固定于光路上,并且控制电动机116的旋转,使RGB旋转滤光器113每秒旋转30次。
这种情况下的频带限制旋转滤光器111、RGB旋转滤光器113及CCD28的动作状态例如如图15所示。
即,在第1模式时,频带限制旋转滤光器111的可视光透过滤光器111a固定在光路上,RGB旋转滤光器113通过每秒30次的旋转,依次照射红、绿、蓝光。而且,利用CCD 28来进行拍摄。这种情况下的处理与上述的实施方式相同。
与此相对,在选择了第2模式(设可视光为原图像,处理图像为荧光图像;或设荧光图像为原图像,处理图像为对荧光图像进行了处理的图像)时,控制电路35控制电动机115的旋转,使频带限制旋转滤光器111每秒旋转90次,并且控制电动机116的旋转,使RGB旋转滤光器113每秒旋转30次。
这种情况下的动作状态如图16所示。
这时控制电路35进行控制,使RGB旋转滤光器113和频带限制旋转滤光器111同步旋转。
具体地说,通过使RGB旋转滤光器113每秒旋转30次,使频带限制旋转滤光器111每秒旋转90次,依次照射红、激励光、绿、激励光、蓝、激励光。
这种状态下的照明,即以R、红外光、G、红外光、B、红外光的顺序的照射为基础,通过利用CCD 28进行拍摄,可获得红、荧光、绿、荧光、蓝、荧光的图像信号。
而且,能够根据用户的意图,适当地进行存储,如将可视光的通常图像作为原图像,把处理图像作为荧光图像;或者把荧光图像作为原图像,把对该原图像进行处理并进行了模拟彩色化的图像作为处理图像等。
例如如上述(A)的情况那样,将可视光的通常图像作为原图像,把荧光图像作为处理图像时,在释放作为处理图像的荧光图像后,显示作为原图像的通常图像的静态图像。
并且,也可考虑将荧光图像作为原图像,将以该荧光图像为基础处理后的荧光模拟彩色图像作为处理图像。
此处,所谓的荧光模拟彩色图像,例如可以列举出对用CCD 28对荧光进行感光所得到的信号进行定量化。例如,可以列举出与根据IHb值得到模拟彩色图像同样,对于对荧光进行感光所得到的信号,进行信号级别的划分,根据对应于该信号级别所分配的模拟彩色,来获得荧光模拟彩色图像。或者,也可对于作为反射光得到的红色图像和绿色图像,取得荧光的感光信号之比,将该比分配到模拟彩色中。
并且,在图12中,虽然作为观察用光源单元使用了一个灯,但是也可例如将通常光观察用的卤素灯与荧光物质激励用的激光或者发光二极管等两个以上的光源组合起来。
(2)频带限制的观察图像
具有以下内窥镜装置,该内窥镜装置利用控制照明光的多个波长域的至少其中一个波长域的频带限制单元,可以获得靠近生物体组织的组织表面的所希望的深部的组织信息。
这种情况下,在不进行频带限制时是通常图像,将其作为原图像考虑,将进行了频带限制时的图像作为处理图像考虑。与荧光的情况相同,在对进行了频带限制的图像即处理图像进行了释放之后,显示原图像的静态图像。
并且,也可以考虑将进行了频带限制时的图像作为原图像,将对该原图像进行了处理的频带限制模拟彩色图像作为处理图像。此处,所谓的频带限制模拟彩色图像,例如,可以通过对用CCD 28感光后的信号进行定量化,或计算IHb值,根据对应于范围分配的模拟彩色,来获得频带限制模拟彩色图像。
(3)红外图像
观察红外图像的内窥镜装置在例如日本国特开2000-41942号公报中公开。因此,同样地在将红外图像作为处理图像,将通常图像作为原图像的情况下,可与(1)(2)进行相同的考虑。
并且,也可考虑将红外图像作为原图像。可以列举出:在红外图像中,例如对用CCD 28感光后的信号进行定量化,或者使用多个波长域的红外光,计算在每个波长域的照明时通过CCD 28拍摄得到的信号之比,根据对应于范围分配的模拟彩色,获得红外模拟彩色图像。
并且,求得靛青绿(ICG)的量,即ICG量IIcg的公式是:IIcg=log(Bin/Rin),通过Iicg可获得红外模拟彩色图像。
并且,在日本国特开2002-85342号公报中,公开了利用红外光的氧饱和度分布的模拟彩色,本发明也能同样应用于该情况。
(4)2CCD
也可将频带限制的工作分配给装在CCD上的滤色器。在该情况下,在电子视野中,装有通常观察用的CCD(通常的滤色器)和特殊光观察用的CCD(频带限制滤光器)。在特殊光观察用的CCD中,能够获得与用特殊光照明被摄体时相同的信号。
另外,对构成上述实施方式等进行部分组合所构成的实施方式等也属于本发明。
如上所述,根据本发明,用户在对通过例如处理图像生成单元处理后的处理图像进行了释放指示操作时,可以存储对应于该释放指示操作的第2静态图像,可以在其后显示并输出对应于第2静态图像的第1静态图像,可以根据用户的选择来选择存储或观察,具有能够提高操作性等的效果。
如上所述,本发明的内窥镜图像处理装置,在进行了释放指示操作时,能够存储对应该释放指示操作的第2静态图像,为了在其后显示对应于第2静态图像的第1静态图像而输出该第1静态图像等,能够根据用户的选择进行存储或观察,能够提高操作性。
Claims (9)
1.一种内窥镜图像处理装置,对利用内窥镜对被检查体的体腔内部进行拍摄而得到的图像信号进行处理,其特征在于,具有:
图像生成单元,其处理上述图像信号并生成能够显示的第1内窥镜图像;
处理图像生成单元,其处理上述图像信号或上述第1内窥镜图像并生成能够显示的第2内窥镜图像;
静态图像单元,其根据通过定格指示操作所发出的定格信号,定格上述图像信号或者上述第1内窥镜图像并生成第1静态图像,定格上述图像信号中规定的区域的图像或者上述第2内窥镜图像并生成第2静态图像;
存储单元,其暂时存储上述第1及第2静态图像中的至少一个;
图像存储单元,其根据通过释放指示操作所发出的释放信号,存储上述第1或第2静态图像中的至少一个;及
控制单元,其根据上述释放指示操作控制上述图像存储单元,以存储上述第2静态图像,然后显示输出存储在上述存储单元中的上述第1静态图像。
2.权利要求1所述的内窥镜图像处理装置,其特征在于,
上述处理图像生成单元,对上述第1内窥镜图像中规定的区域实施规定的处理,并生成上述第2内窥镜图像。
3.权利要求1所述的内窥镜图像处理装置,其特征在于,
上述处理图像生成单元是计算血液信息量的血液信息量计算单元。
4.权利要求1或2所述的内窥镜图像处理装置,其特征在于,
生成上述第2内窥镜图像的规定的区域是与上述第1内窥镜图像的区域相同或比上述第1内窥镜图像的区域小的区域。
5.权利要求1所述的内窥镜图像处理装置,其特征在于,
上述处理图像生成单元,包含:
特殊光照射单元,其将特殊光照射在被检查体上;
信号处理单元,其对利用设置于内窥镜中的摄像单元对被上述特殊光照射的被检查体进行拍摄而得到的图像信号进行信号处理。
6.权利要求5所述的内窥镜图像处理装置,其特征在于,
上述特殊光照射单元,包含:
照明供给单元,其提供包含可视光区域的照明光;
频带限制单元,其限制上述照明光的多个波长域的至少其中之一的波长域。
7.权利要求1所述的内窥镜图像处理装置,其特征在于,
上述第1内窥镜图像是以可视光区域的照明光为基础所拍摄的图像、或者在用激励光对投放有荧光物质的部位进行了激励的状态下所拍摄的荧光图像。
8.权利要求1所述的内窥镜图像处理装置,其特征在于,上述处理图像生成单元是荧光模拟彩色化单元,该荧光模拟彩色化单元对在用激励光对投放有荧光物质的部位进行了激励的状态下所拍摄的荧光图像进行模拟彩色化。
9.一种内窥镜图像处理方法,其特征在于,具有:
图像生成步骤,其处理利用内窥镜拍摄被检查体的体腔内部而得到的图像信号并生成能够显示的第1内窥镜图像;
处理图像生成步骤,其处理上述图像信号或上述第1内窥镜图像并生成能够显示的第2内窥镜图像;
静态图像生成步骤,其根据通过定格指示操作所发出的定格信号,定格上述第1内窥镜图像并生成第1静态图像,并且定格上述第2内窥镜图像并生成第2静态图像;
图像存储步骤,其根据通过释放指示操作所发出的释放信号,存储上述第2静态图像;及
控制步骤,其控制成在存储上述第2静态图像之后,输出并显示上述第1静态图像。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP70497/2002 | 2002-03-14 | ||
JP2002070497 | 2002-03-14 | ||
JP2003060153A JP2003334162A (ja) | 2002-03-14 | 2003-03-06 | 内視鏡画像処理装置 |
JP60153/2003 | 2003-03-06 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN1638687A true CN1638687A (zh) | 2005-07-13 |
CN100493438C CN100493438C (zh) | 2009-06-03 |
Family
ID=27806987
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNB038053764A Expired - Lifetime CN100493438C (zh) | 2002-03-14 | 2003-03-14 | 内窥镜图像处理装置 |
Country Status (7)
Country | Link |
---|---|
US (1) | US20050078175A1 (zh) |
EP (1) | EP1484001B1 (zh) |
JP (1) | JP2003334162A (zh) |
KR (1) | KR20040069332A (zh) |
CN (1) | CN100493438C (zh) |
AU (1) | AU2003221384A1 (zh) |
WO (1) | WO2003075752A1 (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109839734A (zh) * | 2017-11-27 | 2019-06-04 | 汉克沙斯伍夫公司 | 用于内窥镜的光学配置以及具有该光学配置的内窥镜 |
CN110123247A (zh) * | 2019-04-09 | 2019-08-16 | 苏州西能捷科技发展有限公司 | 一种鼻窦炎检测*** |
CN112190222A (zh) * | 2020-10-20 | 2021-01-08 | 青岛市中心医院 | 一种消化性溃疡检测装置 |
Families Citing this family (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4533673B2 (ja) * | 2004-06-07 | 2010-09-01 | オリンパス株式会社 | 赤外観察システム及び赤外観察システムによる作動方法 |
JP2006020788A (ja) * | 2004-07-07 | 2006-01-26 | Pentax Corp | 自家蛍光観察可能な電子内視鏡装置およびシステム |
JP2006115965A (ja) * | 2004-10-20 | 2006-05-11 | Fujinon Corp | 電子内視鏡装置 |
JP4637620B2 (ja) * | 2005-03-18 | 2011-02-23 | 富士フイルム株式会社 | 内視鏡システム装置 |
JP5173120B2 (ja) * | 2005-05-23 | 2013-03-27 | オリンパスメディカルシステムズ株式会社 | 内視鏡装置 |
JP5030394B2 (ja) * | 2005-06-08 | 2012-09-19 | オリンパスメディカルシステムズ株式会社 | 内視鏡画像表示装置及びその制御方法 |
JP2007020727A (ja) * | 2005-07-13 | 2007-02-01 | Olympus Medical Systems Corp | 画像処理装置 |
JP4855728B2 (ja) * | 2005-07-27 | 2012-01-18 | オリンパスメディカルシステムズ株式会社 | 照明装置及び観察装置 |
US8373748B2 (en) * | 2005-12-14 | 2013-02-12 | Stryker Corporation | Automatic endoscope recognition and selection of image processing and display settings |
JP4643481B2 (ja) * | 2006-03-23 | 2011-03-02 | オリンパスメディカルシステムズ株式会社 | 画像処理装置 |
JP4855987B2 (ja) * | 2007-03-26 | 2012-01-18 | オリンパスメディカルシステムズ株式会社 | 内視鏡システム |
JP5457247B2 (ja) | 2010-03-26 | 2014-04-02 | 富士フイルム株式会社 | 電子内視鏡システム、電子内視鏡用のプロセッサ装置、及び電子内視鏡システムの作動方法 |
JP4884574B2 (ja) * | 2010-04-01 | 2012-02-29 | オリンパスメディカルシステムズ株式会社 | 光源装置および内視鏡システム |
JP2011237525A (ja) * | 2010-05-07 | 2011-11-24 | Olympus Corp | 撮像モジュール |
JP5763893B2 (ja) * | 2010-06-08 | 2015-08-12 | 富士フイルム株式会社 | 画像処理システム及びプログラム並びに内視鏡システムの作動方法 |
GB2487940B (en) | 2011-02-09 | 2014-12-17 | Tel Hashomer Medical Res Infrastructure & Services Ltd | Methods and devices suitable for imaging blood-containing tissue |
KR101416121B1 (ko) | 2012-06-07 | 2014-07-11 | 주식회사 휴먼브릿지코리아 | 휴 브릿지 단말장치 |
JP6097629B2 (ja) * | 2013-04-26 | 2017-03-15 | Hoya株式会社 | 病変評価情報生成装置 |
JP2016525905A (ja) * | 2013-05-17 | 2016-09-01 | エンドチョイス インコーポレイテッドEndochoice, Inc. | 複数ビュー素子内視鏡システムのインタフェースユニット |
WO2016098716A1 (ja) * | 2014-12-15 | 2016-06-23 | オリンパス株式会社 | 表示制御装置及び内視鏡システム |
WO2016158276A1 (ja) * | 2015-04-02 | 2016-10-06 | 富士フイルム株式会社 | プロセッサ装置及びその作動方法並びに内視鏡システム及びその作動方法 |
JP6660707B2 (ja) * | 2015-10-23 | 2020-03-11 | Hoya株式会社 | 内視鏡システム |
KR102161350B1 (ko) * | 2018-11-02 | 2020-09-29 | 부산대학교 산학협력단 | 대장 혈류 모니터링 방법을 통한 문합부 합병증 진단을 위한 정보 제공 방법 |
WO2022092334A1 (ko) * | 2020-10-27 | 2022-05-05 | 경상대학교병원 | 위암에 대한 위 절제술 중 조기 문합 합병증을 예방하기 위한 수술 중 내시경 검사의 안전성 및 효능 |
Family Cites Families (43)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4369767A (en) * | 1979-05-25 | 1983-01-25 | Olympus Optical Co., Ltd. | Endoscope system |
JPS56151019A (en) * | 1980-04-25 | 1981-11-21 | Olympus Optical Co | Release apparatus of endoscope photographing system |
JPS57117825A (en) * | 1981-01-14 | 1982-07-22 | Olympus Optical Co | Photograph apparatus of endoscope |
JPS60182001U (ja) * | 1984-05-16 | 1985-12-03 | 富士写真光機株式会社 | 観察面像映出、記録装置付き内視鏡 |
JPS6150478A (ja) * | 1984-08-20 | 1986-03-12 | Fuji Photo Optical Co Ltd | 内視鏡 |
JPS6281193A (ja) * | 1985-10-03 | 1987-04-14 | Toshiba Corp | 内視鏡装置 |
US4914512A (en) * | 1988-01-19 | 1990-04-03 | Kabushiki Kaisha Toshiba | Electronic endoscope apparatus capable of displaying hemoglobin concentration on color image |
JP2648494B2 (ja) * | 1988-05-02 | 1997-08-27 | オリンパス光学工業株式会社 | 内視鏡装置 |
US5031036A (en) * | 1988-07-11 | 1991-07-09 | Olympus Optical Co., Ltd. | Electronic endoscope apparatus simultaneously displaying an original picture image and special picture image on a single displaying picture surface |
US5697885A (en) * | 1989-01-30 | 1997-12-16 | Olympus Optical Co., Ltd. | Endoscope for recording and displaying time-serial images |
US4920413A (en) * | 1989-02-28 | 1990-04-24 | Olympus Optical Co., Ltd. | Blood-vessel endoscope system for storing a frozen picture in synchronization with heart pulsation |
JPH0681614B2 (ja) * | 1989-04-12 | 1994-10-19 | 株式会社東芝 | 電子内視鏡装置 |
US4993404A (en) * | 1989-06-26 | 1991-02-19 | Lane Timothy G | Fluoroscopy switching device |
US5134469A (en) * | 1989-11-16 | 1992-07-28 | Olympus Optical Co., Ltd. | Endoscope light source apparatus with detachable flash unit |
JP2851116B2 (ja) * | 1990-03-29 | 1999-01-27 | 株式会社東芝 | 電子内視鏡装置 |
US5412478A (en) * | 1992-09-30 | 1995-05-02 | Olympus Optical Co., Ltd. | Endoscope system which changes over switches in interlocking relation to each other within video processor and image display apparatus to perform display of endoscope image |
US5550582A (en) * | 1993-03-19 | 1996-08-27 | Olympus Optical Co., Ltd. | Endoscope-image processing apparatus for performing image processing of emphasis in endoscope image by pigment concentration distribution |
EP0692120B1 (en) * | 1993-03-31 | 2002-10-09 | Luma Corporation | Managing information in an endoscopy system |
US5749830A (en) * | 1993-12-03 | 1998-05-12 | Olympus Optical Co., Ltd. | Fluorescent endoscope apparatus |
JPH07246184A (ja) * | 1994-03-09 | 1995-09-26 | Fuji Photo Optical Co Ltd | 面順次式撮像装置 |
US5605531A (en) * | 1994-04-08 | 1997-02-25 | Tilane Corporation | Apparatus for use with endoscopy and fluoroscopy for automatic switching between video modes |
DE19535114B4 (de) * | 1994-09-21 | 2013-09-05 | Hoya Corp. | Endoskopsystem mit Fluoreszenzdiagnose |
US5910816A (en) * | 1995-06-07 | 1999-06-08 | Stryker Corporation | Imaging system with independent processing of visible an infrared light energy |
JPH09238894A (ja) * | 1996-03-07 | 1997-09-16 | Asahi Optical Co Ltd | 内視鏡装置 |
JPH10276973A (ja) * | 1997-04-02 | 1998-10-20 | Olympus Optical Co Ltd | 電子内視鏡装置 |
JP3887453B2 (ja) * | 1997-05-23 | 2007-02-28 | オリンパス株式会社 | 内視鏡装置 |
US6462770B1 (en) * | 1998-04-20 | 2002-10-08 | Xillix Technologies Corp. | Imaging system with automatic gain control for reflectance and fluorescence endoscopy |
JP4223596B2 (ja) * | 1998-09-16 | 2009-02-12 | Hoya株式会社 | 電子内視鏡システム |
JP2001037718A (ja) * | 1999-05-26 | 2001-02-13 | Olympus Optical Co Ltd | 画像診断装置及び内視鏡装置 |
JP4568394B2 (ja) * | 1999-09-10 | 2010-10-27 | 株式会社東芝 | 内視鏡装置 |
JP2001111992A (ja) * | 1999-10-08 | 2001-04-20 | Olympus Optical Co Ltd | 画像記録装置 |
DE10055725B4 (de) * | 1999-11-11 | 2007-12-27 | Pentax Corp. | Elektronisches Endoskopsystem |
JP2001177824A (ja) * | 1999-12-17 | 2001-06-29 | Asahi Optical Co Ltd | 電子内視鏡用信号切替装置 |
JP2001197485A (ja) * | 2000-01-11 | 2001-07-19 | Asahi Optical Co Ltd | 電子内視鏡システムおよび電子内視鏡用信号切替装置 |
US6635011B1 (en) * | 2000-01-14 | 2003-10-21 | Pentax Corporation | Electronic endoscope system |
JP3559755B2 (ja) * | 2000-07-27 | 2004-09-02 | オリンパス株式会社 | 内視鏡装置 |
JP4663083B2 (ja) | 2000-09-11 | 2011-03-30 | オリンパス株式会社 | 内視鏡装置 |
US7053926B2 (en) * | 2000-09-19 | 2006-05-30 | Fujinon Corporation | Electronic endoscope apparatus enlarging a still image |
JP5030335B2 (ja) * | 2001-03-06 | 2012-09-19 | オリンパス株式会社 | 医用画像表示装置 |
US6758807B2 (en) * | 2001-08-27 | 2004-07-06 | Fuji Photo Optical Co., Ltd. | Electronic endoscope with power scaling function |
KR100411631B1 (ko) * | 2001-10-18 | 2003-12-18 | 주식회사 메디미르 | 형광 내시경 장치 및 그 장치를 이용한 진단부위 조상 방법 |
JP5028002B2 (ja) * | 2005-09-29 | 2012-09-19 | 富士フイルム株式会社 | 電子内視鏡システム |
JP4643481B2 (ja) * | 2006-03-23 | 2011-03-02 | オリンパスメディカルシステムズ株式会社 | 画像処理装置 |
-
2003
- 2003-03-06 JP JP2003060153A patent/JP2003334162A/ja active Pending
- 2003-03-14 CN CNB038053764A patent/CN100493438C/zh not_active Expired - Lifetime
- 2003-03-14 WO PCT/JP2003/003070 patent/WO2003075752A1/ja active Application Filing
- 2003-03-14 KR KR10-2004-7009350A patent/KR20040069332A/ko active Search and Examination
- 2003-03-14 AU AU2003221384A patent/AU2003221384A1/en not_active Abandoned
- 2003-03-14 EP EP03710356.1A patent/EP1484001B1/en not_active Expired - Lifetime
- 2003-03-14 US US10/498,083 patent/US20050078175A1/en not_active Abandoned
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109839734A (zh) * | 2017-11-27 | 2019-06-04 | 汉克沙斯伍夫公司 | 用于内窥镜的光学配置以及具有该光学配置的内窥镜 |
CN109839734B (zh) * | 2017-11-27 | 2022-07-22 | 汉克沙斯伍夫公司 | 用于内窥镜的光学配置以及具有该光学配置的内窥镜 |
CN110123247A (zh) * | 2019-04-09 | 2019-08-16 | 苏州西能捷科技发展有限公司 | 一种鼻窦炎检测*** |
CN110123247B (zh) * | 2019-04-09 | 2021-12-28 | 苏州西能捷科技发展有限公司 | 一种鼻窦炎检测*** |
CN112190222A (zh) * | 2020-10-20 | 2021-01-08 | 青岛市中心医院 | 一种消化性溃疡检测装置 |
CN112190222B (zh) * | 2020-10-20 | 2023-06-02 | 青岛市中心医院 | 一种消化性溃疡检测装置 |
Also Published As
Publication number | Publication date |
---|---|
AU2003221384A1 (en) | 2003-09-22 |
CN100493438C (zh) | 2009-06-03 |
WO2003075752A1 (fr) | 2003-09-18 |
JP2003334162A (ja) | 2003-11-25 |
US20050078175A1 (en) | 2005-04-14 |
EP1484001A4 (en) | 2010-11-17 |
EP1484001A1 (en) | 2004-12-08 |
KR20040069332A (ko) | 2004-08-05 |
EP1484001B1 (en) | 2017-10-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1638687A (zh) | 内窥镜图像处理装置 | |
CN1642467A (zh) | 内窥镜图像处理装置 | |
CN101040774A (zh) | 图像处理装置 | |
CN1809308A (zh) | 内窥镜装置 | |
CN1578471A (zh) | 图像处理装置 | |
CN1658787A (zh) | 电子内窥镜装置 | |
CN1827033A (zh) | 内窥镜装置 | |
CN1530073A (zh) | 诊断用摄影仪 | |
CN1217533C (zh) | 信号处理设备及方法,与图象感测设备 | |
CN1665440A (zh) | 多功能成像装置和用于该装置的适配器 | |
CN1275456C (zh) | 电子摄像机 | |
CN1777390A (zh) | 图像处理装置、图像处理方法以及图像处理程序 | |
TWI316852B (en) | Living body observation apparatus | |
JP5968944B2 (ja) | 内視鏡システム、プロセッサ装置、光源装置、内視鏡システムの作動方法、プロセッサ装置の作動方法、光源装置の作動方法 | |
CN101043841A (zh) | 图像处理方法及胶囊型内窥镜装置 | |
CN1920539A (zh) | 缺陷检测方法与缺陷检测装置 | |
CN1882275A (zh) | 胶囊式医疗*** | |
CN1820698A (zh) | 内窥镜装置 | |
CN1870932A (zh) | 扫描内窥镜 | |
CN1777802A (zh) | 荧光观察用装置 | |
WO2015093104A1 (ja) | 内視鏡装置 | |
CN1572230A (zh) | 电子内窥镜设备 | |
CN1573283A (zh) | 图像测量方法和图像测量装置 | |
WO2016110984A1 (ja) | 画像処理装置、画像処理装置の作動方法、画像処理装置の作動プログラムおよび内視鏡装置 | |
JPWO2019220848A1 (ja) | 内視鏡装置、内視鏡操作方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CX01 | Expiry of patent term |
Granted publication date: 20090603 |
|
CX01 | Expiry of patent term |