CN102188219B - 内窥镜***、摄像装置以及控制方法 - Google Patents
内窥镜***、摄像装置以及控制方法 Download PDFInfo
- Publication number
- CN102188219B CN102188219B CN201110066302.5A CN201110066302A CN102188219B CN 102188219 B CN102188219 B CN 102188219B CN 201110066302 A CN201110066302 A CN 201110066302A CN 102188219 B CN102188219 B CN 102188219B
- Authority
- CN
- China
- Prior art keywords
- observing pattern
- photographed images
- image
- observing
- aperture
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00064—Constructional details of the endoscope body
- A61B1/00071—Insertion part of the endoscope body
- A61B1/0008—Insertion part of the endoscope body characterised by distal tip features
- A61B1/00096—Optical elements
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000095—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00163—Optical arrangements
- A61B1/00188—Optical arrangements with focusing or zooming features
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/05—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
- G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
- G02B23/2407—Optical details
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Optics & Photonics (AREA)
- Biomedical Technology (AREA)
- Veterinary Medicine (AREA)
- Pathology (AREA)
- Radiology & Medical Imaging (AREA)
- Biophysics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Public Health (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Astronomy & Astrophysics (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Endoscopes (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
内窥镜***、摄像装置以及控制方法。本发明的课题是在考虑到衍射极限的影响的基础上,即能拍摄摄像元件所具备的分辨率的图像,又能扩大景深宽度。作为解决手段,内窥镜***具有:具有光学***和摄像元件的摄像部(200);设定观察模式的观察模式设定部(304);根据观察模式来对光圈状态进行选择控制的光圈控制部(204);以及对摄像部(200)拍摄的摄像图像实施图像处理的图像处理部(301),在第一观察模式下,光圈控制部(204)选择由光学***的光圈的衍射极限确定的分辨率低于摄像元件所确定的分辨率的第一光圈状态;在第二观察模式下,光圈控制部(204)选择由光学***的光圈的衍射极限确定的分辨率大于等于由摄像元件确定的分辨率的第二光圈状态。
Description
技术领域
本发明涉及内窥镜***、摄像装置以及控制方法等。
背景技术
在内窥镜那样的摄像装置中,为了不对医生的诊断带来妨碍,对于在体腔内拍摄的图像,要求实现泛焦的图像。因此内窥镜使用光圈值(以下也称之为F值)较大的光学***来加深景深,从而实现这样的性能。
另一方面,近些年来在内窥镜***中逐渐开始使用几十万像素左右的高像素的摄像元件。当光学***固定的情况下,其景深是根据容许弥散圆的大小来确定的,但由于高像素的摄像元件中容许弥散圆与像素节距都很小,因而摄像装置的景深变小。这种情况下,虽然可考虑通过增大光学***的光圈值来维持景深,但是光学***会变暗且噪声增加,由此导致画质变差。另外,如果光圈值增大,则衍射的影响也会增大,成像性能会变差,因而会产生即便提高了摄像元件的像素,也无法取得较高分辨率的图像的问题。
在日本特开平10-225427号公报中公开了在存在有上述问题且具有可变光圈的内窥镜***中兼顾景深和光量的例子。
在日本特开平10-225427号公报的技术中,为了取得实用的景深,伴随该光圈值的变更,将容许弥散圆的大小设定得较大,将摄像元件的读出像素尺寸变更为与所述容许弥散圆同等的尺寸。这样就能在希望确保光量的较暗的被摄体的情况下,同时确保充足的光量和景深。
另外,日本特开平8-181909号公报公开了抑制根据光圈值而产生变化的分辨率变化的例子。在该例子中,在减小光学***的光圈值的情况下减弱轮廓强调,在增大光学***的光圈值的情况下加强轮廓强调,从而能与光圈值无关地取得固定的分辨率。
【专利文献1】日本特开平10-225427号公报
【专利文献2】日本特开平8-181909号公报
日本特开平10-225427号公报的方法以荧光像的观察为前提,通常荧光像并不需要较高的分辨率,因此在该假设成立时,方法是有效的。然而在白色光照明下,分辨率与景深同样应被重视,如果摄像元件的像素节距变小,则即使为了收敛于作为实用景深的容许弥散圆而增大F值,该弥散圆由于衍射的影响也不会收敛于所述容许弥散圆以下,成为无法得到原本摄像元件所具备的分辨率的状态。日本特开平10-225427号公报的方法在这种条件下根本无法发挥作用。
通过把日本特开平8-181909号公报的方法应用于以无法忽视所述衍射影响的F值拍摄的摄像图像,能一定程度地恢复分辨率,但是会产生这样的问题:由于其原本就不具备对于高频成分充分的能量,因此会成为极端地提升高频的处理,噪声会增大。
发明内容
根据本发明的若干方面,能够提供如下所述的内窥镜***、控制方法、摄像装置等:在考虑到衍射极限的影响的基础上,既能够拍摄摄像元件所具备的分辨率的图像,又能够扩大景深宽度。
另外,根据本发明的若干方面,能够提供如下所述的内窥镜***、控制方法、摄像装置等:具备可变光圈,在使用了如下像素节距的摄像元件的情况下,也能拍摄原本摄像元件所具备的分辨率的图像,而且不会增大噪声,其中,上述像素节距是:为了得到实用的景深而增大F值时,其弥散圆由于衍射的影响而无法收敛于作为目标的容许弥散圆以下。
本发明的一个方面涉及内窥镜***,其具有:摄像部,其具有光学***和摄像元件;观察模式设定部,其设定被摄体的观察模式;光圈控制部,其根据由所述观察模式设定部设定的所述观察模式,对光圈状态进行选择控制;以及图像处理部,其对由所述摄像部所拍摄的摄像图像实施图像处理,在所述观察模式为第一观察模式的情况下,所述光圈控制部选择由所述光学***的光圈的衍射极限确定的分辨率低于由所述摄像元件确定的分辨率的第一光圈状态,在所述观察模式为第二观察模式的情况下,所述光圈控制部选择由所述光学***的光圈的衍射极限确定的分辨率大于等于由所述摄像元件确定的分辨率的第二光圈状态。
在本发明的一个方面中,设定观察模式,在第一观察模式中选择第一光圈状态,在第二观察模式中选择第二光圈状态。在第一光圈状态中,由光学***的光圈的衍射极限所确定的分辨率低于由摄像元件确定的分辨率。另外,在第二光圈状态中,由光学***的光圈的衍射极限所确定的分辨率大于等于由摄像元件确定的分辨率。
因此能够按照观察模式适当地确定光圈状态,作为光圈状态,能够设定:较强地受到衍射极限的影响而分辨率变低的状态;和不受到衍射极限的影响而分辨率保持得较高的状态。
本发明的另一方面涉及控制方法,其中,设定被摄体的观察模式,在所述观察模式为第一观察模式的情况下,作为光圈值,选择由光学***的光圈的衍射极限确定的分辨率低于由摄像元件确定的分辨率的第一光圈状态,在所述观察模式为第二观察模式的情况下,作为所述光圈值,选择由所述光学***的光圈的衍射极限确定的分辨率大于等于由所述摄像元件确定的分辨率的第二光圈状态。
根据本发明的另一方面,能实现下述控制方法:按照观察模式适当地确定光圈状态,作为光圈状态,可设定较强地受到衍射极限的影响而分辨率变低的状态和不受到衍射极限的影响而分辨率保持得较高的状态。
本发明的又一方面涉及摄像装置,其具有:摄像部,其具有光学***和摄像元件;观察模式设定部,其设定被摄体的观察模式;以及光圈控制部,其根据由所述观察模式设定部设定的所述观察模式,对光圈值进行选择控制,在所述观察模式为第一观察模式的情况下,所述光圈控制部选择由所述光学***的光圈的衍射极限确定的分辨率低于由所述摄像元件确定的分辨率的第一光圈状态,作为所述光圈值,在所述观察模式为第二观察模式的情况下,所述光圈控制部选择由所述光学***的光圈的衍射极限确定的分辨率大于等于由所述摄像元件确定的分辨率的第二光圈状态,作为所述光圈值。
根据本发明的又一方面,能实现下述的摄像装置:可按照观察模式适当地确定光圈状态,作为光圈状态,能够设定较强地受到衍射极限的影响而分辨率变低的状态和不受到衍射极限的影响而分辨率保持得较高的状态。
附图说明
图1的(A)是没有考虑衍射极限时的光的会聚的例子,(B)是考虑到衍射极限时的光的会聚的例子。
图2是艾里斑(Airy disk)直径d与F值F的关系图。
图3是景深的说明图。
图4是艾里斑直径d小于容许弥散圆的大小K·P的情况下的例子。
图5的(A)是景深的远点的说明图,(B)是景深的近点的说明图。
图6是艾里斑直径d大于容许弥散圆的大小K·P的情况下的例子。
图7的(A)是景深的远点的说明图,(B)是景深的近点的说明图。
图8是第一观察模式和第二观察模式的关系图。
图9是F值的值F与容许弥散圆的大小的关系图。
图10是景深宽度与F值的值F的关系图。
图11是用于实现景深宽度D的F值的值F的说明图。
图12是本实施方式的***结构例。
图13是旋转滤色器的结构例。
图14是滤色器的分光特性。
图15的(A)是选择远景观察模式时的光圈和容许弥散圆的说明图,(B)是选择近景观察模式时的光圈和容许弥散圆的说明图。
图16是图像处理部的结构例。
图17是第一观察模式和第二观察模式中的图像数据的空间频率特性的例子。
图18的(A)是基于拉普拉斯金字塔(Laplacian pyramid)的处理的说明图,(B)是分割为多个频带的例子。
图19是轮廓强调处理部的结构例。
图20是轮廓强调处理的强调频率特性。
图21是本实施方式的另一***结构例。
图22是旋转滤色器的另一结构例。
图23是普通光图像用的滤色器的分光特性。
图24是特殊光图像用的滤色器的分光特性。
图25的(A)是拜尔排列的原色单板元件的说明图,(B)是R信号的图像数据的说明图。
图26是图像处理部的另一结构例。
图27是显示图像生成部的结构例。
图28是对焦位置控制部的结构例。
符号说明
100光源部;101白色光源;102旋转滤色器;103旋转驱动部;104聚光透镜;200摄像部;201光纤;202照明透镜;203物镜;204可变光圈控制部;205可变光圈部;206焦点位置控制部;207焦点位置调整透镜;208摄像元件;209A/D转换部;300处理器部;301图像处理部;302控制部;303对焦位置控制部;304观察模式设定部;310预处理部;311选择部;312第一降噪处理部;313同步处理部;314颜色处理部;315灰度转换处理部;316第二降噪处理部;317轮廓强调处理部;321选择部;322第一频带提取部;323第二频带提取部;324增益系数确定部;325乘法器;326加法器;350预处理部;351第一降噪处理部;352同步处理部;353颜色处理部;354第二降噪处理部;355选择部;356病变位置检测部;357显示图像生成部;360选择部;361区域提取部;362电子变焦部;363区域框合成部;364区域提取部;365亮度值计算部;366对比度计算部;367透镜移动量计算部;400显示部;500外部I/F部;601滤色器;602滤色器;603滤色器;801滤色器;802滤色器;803旋转电动机。
具体实施方式
下面说明本实施方式。并且,以下说明的本实施方式并非用于不当地限定权利要求书所记载的本发明内容。另外,本实施方式所说明的所有结构并非都是本发明所必须的构成要件。
1.本实施方式的手法
首先说明衍射极限和艾里斑。光由于具有波动的性质,因而存在衍射现象,因此即便光会聚于1点(焦点对准),也不会如图1(A)所示会聚于无限小的点,而是会如图1(B)所示具有某种程度的大小。该极限就称作衍射极限,会聚点的大小称作艾里斑。图1(B)中,d表示艾里斑直径。
越增大F值(越缩小光圈),则艾里斑直径d会变得越大,成为图2所示的关系。
接着使用图3来详细地说明景深。在此,朝右的箭头表示正值的矢量,朝左的箭头表示负值的矢量。首先考虑在与光学***的后侧焦点位置相距XB’的位置处配置了像素节距(1个像素的纵横的尺寸)为P的摄像元件的情况。此时,光学***在摄像元件的摄像面上成像性能最好的被摄***置(对焦位置)被表示为与光学***的前侧焦点位置相距XB的位置。当XB’确定时,XB可根据如下的牛顿成像式被唯一地计算出来。此处,f是光学***的焦距。
XB·XB’=-f2......(1)
当使被摄体从XB移动到XN的位置时,此时的像面位置XN’从摄像面向光学***的反方向移动。然而,当摄像面上的弥散圆的直径比摄像装置的分辨力K·P(其中K是根据滤波器排列方式和插值处理而确定的系数)小的情况下,XN的物体可看作是已对焦。将此时的分辨率K·P作为容许弥散圆。
将摄像面上的弥散圆直径小于等于K·P的范围定义为近点侧的景深,将弥散圆直径与K·P一致的被摄***置称作近点。此后将近点位置表示为与前侧焦点位置相距XN的位置。远点侧关于景深的定义也相同,将远点侧的弥散圆直径与K·P一致的被摄***置称作远点。此后将远点的位置表示为与前侧焦点位置相距XF的位置。
关于被摄体处于近点时摄像面上的弥散圆的直径,可以使用光学***的数值孔径NA’=sin(u’)(其中,u’是图3所示射入摄像面的光线与光轴所成的角),由弥散圆直径=2(XN’-XB’)·NA’近似得出。
由于近点处弥散圆的直径与K·P一致,因此下式(2)成立。
2(XN’-XB’)·NA’=K·P......(2)
使用作为F值与数值孔径的关系式的下式(3)对上式(2)进行变形,得到下式(4)。其中F是光学***的F值。
XN’-XB’=K·P·F……(4)
进而使用(1)式所示的牛顿式对(4)式进行变形时,式(5)所示近点侧的景深的关系式成立。
如果采用与近点侧相同的方法来计算远点侧的景深的关系式,则可得如下的式(6)。
上式(5)、(6)还可以进行如下变形,使用它们可以计算出近点位置XN和远点位置XF。
上式(7)、(8)表示出下述情况:在光学***的焦距f、F值F、系数K、对焦位置XB固定的情况下,随着摄像装置的分辨力K·P变小,近点和远点接近对焦位置,景深的宽度变小。
反之还表示出:若将摄像装置的分辨力K·P的K或F值F设定得较大,则景深的宽度会变大。在本实施方式中,考虑这样的办法:K固定,通过改变F来改变景深。
接着说明容许弥散圆与艾里斑的关系。如图4所示,当艾里斑直径d比容许弥散圆的大小K·P小的情况下,如图5(A)和图5(B)所示,可通过上述方式求出景深。
另一方面,如图6所示,当艾里斑直径d比容许弥散圆的大小K·P大的情况下,景深不是通过K·P而是通过d来确定的。如图可知,这是由于弥散圆的大小大于等于d,因此即使在对焦的状态下,也不会小于等于K·P。亦即,此时容许弥散圆的大小并非K·P而是d。
由于容许弥散圆变大,因此分辨力会降低(解像度降低),而如图7(A)、图7(B)所示,景深可能变大。
本申请人将d大于K·P的情况作为第一观察模式,将d小于K·P的情况作为第二观察模式,提出了这样的办法:通过使用2种观察模式,既能取得最大限度地发挥了摄像装置的能力的解像度的图像,又能实现泛焦(景深宽的状态)。
具体而言,在第一观察模式中,增大F值(缩小光圈),有意增大衍射极限的影响,由此,虽然解像度会降低,然而能实现加大景深的模式。另外,在第二观察模式中,减小F值,使得处于不受衍射极限的影响的状态,由此,虽然景深会变小,然而能实现取得摄像装置所确定的高解像度的图像的模式。
图8表示出第一观察模式和第二观察模式。例如以d=K·P的点作为界线,来确定是第一观察模式还是第二观察模式。
进一步说明要实现泛焦时,使用第一观察模式的优点。
图9示出设第一观察模式与第二观察模式的界线处的F值为F’时F值与容许弥散圆的关系。当F小于F’时,容许弥散圆的大小为K·P且固定。另外,当F大于F’时,容许弥散圆的大小通过d来确定,而如图8所示,d具有随着F增大而变大的性质,因此如图9所示,在第一观察模式中,随着F变大,容许弥散圆也会变大。
如上面所述,景深宽度具有随着F值变大而变大的性质,另外,随着容许弥散圆变大也会变大。也就是说,对景深宽度与F值的关系进行图示时,成为图10所示那样。当F小于F’时(第二观察模式),随着F变大,由于F值增大的影响,景深宽度也会以某个斜率S1增大。而当F大于F’时(第一观察模式),由于同时受到F值增大的影响和容许弥散圆增大的影响,景深宽度会以大于S1的斜率S2增大。
因而,相比仅使用不受衍射极限影响的模式(第二观察模式)的情况,能增大景深宽度相对于F值增大的增大率。因此当需要某种景深宽度时,相比仅使用第二观察模式的情况,能通过较小的F值实现该景深宽度。图11图示出这种情况。当需要景深宽度D时,在仅使用第二观察模式的情况下需要使F值为F2,而如果使用第一观察模式,则可使用小于F2的F1来实现。
也就是说,当实现相同的景深宽度D时,由于能使用较小的F值,因此能取得更为明亮的图像。尤其能够在内窥镜***的窄带光观察(例如NBI等)等、原本光量较少而容易成为较暗图像的***中能发挥效果。
为实现上述办法,本实施方式的内窥镜***具有摄像部、设定观察模式的观察模式设定部、根据观察模式对光圈状态进行选择控制的光圈控制部、图像处理部。在第一观察模式中,光圈控制部缩小光圈(增大F值),控制为解像度比完全发挥摄像元件的能力时低的状态。另外,在第二观察模式中,光圈控制部开放光圈,选择实现完全发挥摄像元件的能力的解像度的光圈状态。
由此,在设定了多个观察模式的基础上,能选择与观察模式对应的光圈状态。具体而言,在第一观察模式中,通过有意增加衍射极限的影响,能设定为虽然解像度降低但却能加大景深宽度且F值较大的状态。另外,在第二观察模式中,通过使之不受衍射极限的影响,而能设定为虽然景深宽度较小但却能取得完全发挥了摄像元件能力的解像度的图像且F值较小的状态。
另外,本实施方式还可以为一种控制方法,该方法设定观察模式,在处于第一观察模式的情况下,缩小光圈(增大F值),控制为解像度比完全发挥摄像元件的能力时低的状态,在第二观察模式中,开放光圈,选择实现完全发挥了摄像元件能力的解像度的光圈状态。
由此,不仅限于内窥镜***,还能对于控制方法应用本实施方式的办法,取得上述效果。
另外,本实施方式不限于内窥镜***,还可用于摄像装置。具体而言,摄像装置具有摄像部、设定观察模式的观察模式设定部、根据观察模式对光圈状态进行选择控制的光圈控制部。而且,在第一观察模式中,光圈控制部缩小光圈(增大F值),控制为解像度比完全发挥摄像元件的能力时低的状态,而在第二观察模式中,光圈控制部开放光圈,选择实现完全发挥了摄像元件能力的解像度的光圈状态。
由此,不仅限于内窥镜***,还能在一般的摄像装置中应用本实施方式的办法,取得上述效果。
另外,本申请人还提出了与观察模式相应的降噪处理和轮廓强调处理的办法。详细情况将在第一实施方式中加以说明。另一方面,在第二实施方式中,在第一实施方式的基础上,还说明这样的办法:取得普通光图像和特殊光图像,根据特殊光图像检测病变部,进而强调显示普通光图像的病变部。
2.第一实施方式
图12是示出第一实施方式的内窥镜***(摄像装置)的总体结构的框图。本实施方式的内窥镜***具有光源部100、摄像部200、处理器部300、显示部400、外部I/F部500。
光源部100具有白色光源101、具有多个分光透射率的旋转滤色器102、驱动旋转滤色器102的旋转驱动部103、使来自旋转滤色器102的具有分光特性的光会聚到光纤201的入射端面上的聚光透镜104。
例如图13所示,旋转滤色器102由三原色的红色滤色器601、绿色滤色器602、蓝色滤色器603、旋转电动机803构成。该3个滤色器的分光特性如图14所示。
旋转驱动部103根据来自处理器部300的控制部302的控制信号,使旋转滤色器102与摄像元件208的摄像期间同步地以规定转速旋转。例如使滤色器在1秒内旋转20转,则各滤色器会以60分之1秒的间隔横穿过入射白色光,摄像元件208以60分之1秒的间隔完成三原色的各颜色的光(R或G或B)的反射光的图像数据的摄像和传输。其中,摄像元件208是黑白的。也就是说,在例子中的内窥镜***中,以60分之1秒的间隔按面序拍摄R图像数据、G图像数据、B图像数据。
摄像部200例如为了能***体腔而形成为细长且可以弯曲。摄像部200具有:用于引导由光源部100会聚的光的光纤201;使通过该光纤201而被引导至前端的光扩散并照射到观察对象的照明透镜202;会聚从观察对象返回的反射光的物镜203;可变光圈控制部204;可变光圈205;焦点位置控制部206;焦点位置调整透镜207;用于检测会聚的反射光的摄像元件208;将来自摄像元件208的经过光电转换后的模拟信号转换为数字信号的A/D转换部209。其中,所述摄像元件208如上面所述为黑白单板摄像元件,可使用CCD和CMOS等。
处理器部300由图像处理部301、控制部302、观察模式设定部304构成。
显示部400是CRT或液晶监视器等能显示动态图像的显示装置。
外部I/F部500是用于进行用户对该摄像装置的输入等的接口,被构造成包含用于打开/关闭电源的电源开关、用于开始摄影操作的快门按钮、用于切换摄影模式和其他各种模式的模式切换按钮等。而且该外部I/F部500向控制部302输出所输入的信息。
接着详细说明作为摄像部200的构成要素的可变光圈控制部204、可变光圈205、焦点位置控制部206、焦点位置调整透镜207、控制部302的关系。首先说明本实施例的内窥镜***的两种观察模式。这两种观察模式之一是作为大景深低解像度的远景观察模式,另一种是作为小景深高解像度的近景观察模式。
为了切换这两种模式,控制部302根据用户通过外部I/F部500的模式切换按钮进行的模式切换请求,向可变光圈控制部204和焦点位置控制部206输出控制信号。可变光圈控制部204根据接收到的控制信号控制可变光圈205的光圈量,焦点位置控制部206根据所输入的控制信号控制焦点位置调整透镜207。
具体而言,如图15(B)所示,在选择了近景观察模式的情况下,开放光圈而增大镜头孔径,将其容许弥散圆设定为能取得摄像元件208的极限解像度的状态。进而焦点位置控制部206使焦点位置调整透镜动作以成为预先确定的规定的焦点位置。由此虽然将景深限定得较小,然而能够在规定的焦点位置取得完全发挥了摄像元件的性能的高解像度的图像。
另一方面,如图15(A)所示,在选择了远景观察模式的情况下,缩小光圈而减小镜头孔径,设定为能得到实用的解像度和景深的容许弥散圆的大小。其中,所谓实用的解像度指的是虽无法得到摄像元件208的极限解像度但例如与通过前1代的旧制造工艺制成的摄像元件相当的解像度,例如表示相当于摄像元件208的像素节距的1.5~2倍的解像度。然后焦点位置控制部206使焦点位置调整透镜动作以成为用于得到实用景深的焦点位置。
必须设定如上面所述的两种模式的原因在于:如果为得到内窥镜的实用景深而缩小光学***的光圈,则由于与孔径减小相伴随的衍射极限的影响,导致成像时的弥散圆无法小于摄像元件208的像素节距。
也就是说,近些年来半导体制造工艺的细微化得以发展,在采用小像素节距且高像素化的摄像元件的情况下,缩小光圈时会较强地受到衍射极限的影响。尤其是因为:对于内窥镜***而言,最好是在实用的观察距离中对焦的状态(泛焦),为了得到该景深需要缩小光圈,因而无法忽视该衍射极限的影响。
接着根据图16的框图详细说明图像处理部301。图像处理部301包括预处理部310、选择部311、第一降噪处理部312、同步处理部313、颜色处理部314、灰度转换处理部315、第二降噪处理部316、轮廓强调处理部317。
接着说明各构成部之间的数据流动。从A/D转换部209输出的图像数据被输入到图像处理部301的预处理部310。预处理部310还被输入有预先保存于控制部302的OB钳位值、增益校正值、WB系数值,根据这些输入值对图像数据实施OB钳位处理、增益校正、WB处理,输出给选择部311。
进一步地,将来自控制部302的观察模式信息输入到选择部311,当所述观察模式信息为远景观察模式的情况下将所输入的图像数据输出给第一降噪处理部312,为近景观察模式的情况下,将所输入的图像数据输出给同步处理部313。其中,图17示出所输入的图像数据的MTF(空间频率特性)的例子。MTF 1000是在近景观察模式时的,MTF 1001是远景观察模式时的。在远景观察模式时,由于与光圈缩小相伴随的衍射极限的影响,而处于高频成分少的状态。
第一降噪处理部312鉴于所输入的图像数据为MTF 1001的特性,使图17的频率特性1002的低通滤波器作用于图像数据。由此能去除与低通滤波器的阻带对应的频带中所存在的不需要的高频噪声。
从第一降噪处理部312输出的经过了降噪的图像数据或从选择部311输出的图像数据被输出给同步处理部313。
同步处理部313具有保持按时序输入的R图像数据、G图像数据、B图像数据的缓冲存储器,通过仅置换新输入的颜色信号的图像数据,生成每个像素的由RGB信号构成的彩色图像数据并输出给颜色处理部314。
颜色处理部314将所输入的彩色图像数据转换到与输出监视器的色域对应的色空间,输出给灰度转换处理部315。所述色域例如为sRGB。
灰度转换处理部315将颜色转换完毕的彩色图像数据转换为作用了抵消显示部400的输出灰度特性的γ特性的、例如8位的灰度转换后的彩色图像数据,输出给第二降噪处理部316。
第二降噪处理部316根据所输入的彩色图像数据,生成例如拉普拉斯金字塔型的多重解像度图像,对彼此不同的解像度图像独立地进行规定降低量的降噪处理。图18(A)、图18(B)示出了基于拉普拉斯金字塔的处理的详细情况。如图18(A)所示,对没有经过低通滤波器的数据与经过了低通滤波器的数据求差,从而能如图18(B)所示将数据分离为多个空间频带。
由此就能够减少低频噪声(色噪声等)。尤其可以根据由控制部302输入的观察模式信息,变更噪声降低量对所述多重解像度图像的比率。例如在远景观察模式中,由于信号的高频成分减少,因而判断为高频图像的噪声成分较多,认为:与近景观察模式时相比较,应提高对于高频图像的噪声降低量。以图18(A)、图18(B)为例,在远景观察模式时与频带1和频带2相比,通过增强对频带3的降噪处理的强度(增大噪声降低量),可期待提升噪声降低效果。经过了第二降噪后的彩色图像数据被输出到轮廓强调处理部317。
轮廓强调处理部317除了被输入经过了第二降噪后的彩色图像数据之外,还从控制部302输入观察模式信息,根据所述观察模式信息而被实施了不同的轮廓强调处理的轮廓强调后彩色图像数据被输出给显示部400。
接着根据图19的框图和图20的强调频率特性来详细地说明轮廓强调处理部317。
轮廓强调处理部317由选择部321、第一频带提取部322、第二频带提取部323、增益系数确定部324、乘法器325、加法器326构成。
接着说明各构成部间的数据流动。从第二降噪处理部316输出的彩色图像数据被输入到选择部321,在远景观察模式的情况下,来自控制部302的观察模式信息被选择输出到第一频带提取部322,在近景观察模式的情况下,则被选择输出到第二频带提取部323。
在第一频带提取部322中,事先准备好与图20的强调频率特性1101对应的带通滤波器,对所输入的彩色图像数据进行滤波处理。所提取出的第一轮廓图像被输出给乘法器325。
在第二频带提取部323中,事先准备好与图20的强调频率特性1100对应的带通滤波器,对所输入的彩色图像数据进行滤波处理。所提取出的第二轮廓图像被输出给乘法器325。
这是因为:在近景观察模式中强调高频成分即可,而在远景观察模式中,由于高频成分的信号少,因此应强调的轮廓的信息相比近景观察模式而位于频率较低的频带。
增益系数确定部324将从控制部302输出的强调级别信息转换为所述第一频带提取部322或第二频带提取部323提取出的特定频率的轮廓图像的放大量并输出给乘法器325。
乘法器325使第一频带提取部322或第二频带提取部323提取出的特定频率的轮廓图像与从增益系数确定部324输出的放大量相乘,将放大后的轮廓图像输出给加法器326。
加法器326生成在输入到轮廓强调处理部317的彩色图像数据中加入了所述轮廓图像的轮廓强调图像,将轮廓强调图像数据输出到显示部400。
如上面所述,根据第一实施方式,基于多个观察模式进行适于其不同频率特性的图像处理,从而能在各观察模式中得到高画质的摄像图像,能按照目的进行最佳观察。
尤其是,在相对于伴随摄像元件的细微化的像素节距,由于基于光学***光圈的衍射极限的影响而使得无法得到摄像元件原本的解像度的情况下,也能设定大景深低解像度模式和小景深高解像度模式,从而观察到摄像元件本来具备的最大解像度的图像。
在以上的本实施方式中,在第一观察模式的情况下,与第二观察模式的情况相比,图像处理部301进行更为减少高频的图像处理。
由此能够在第一观察模式中有效减少噪声。这是由于第一观察模式中受到衍射极限的影响,因而解像度会降低,高频成分的信号会减少。也就是说,在存在有高频成分的情况下,属于噪声的可能性较高,因而认为即便减少了高频,对信号值的影响也较小。具体是进行应用低通滤波器的处理。
另外,在第一观察模式的情况下,与第二观察模式的情况相比,图像处理部301进行增大噪声降低量的图像处理。
由此能够在第一观察模式中有效地减少噪声。在第一观察模式中,因高频成分信号减少而导致的情况与上述同样。具体而言,使用图18(A)、图18(B)所示的拉普拉斯金字塔进行分割为多个频带的处理。而且在图18(A)、图18(B)的例子中,对频带3进行增大噪声降低量的处理。
另外,图像处理部301在第二观察模式中进行强调规定的高频频带的处理,在第一观察模式中进行强调比第二观察模式低的频带的轮廓强调处理。
由此,能够进行对应于观察模式的有效的轮廓强调处理。关于第一观察模式中因高频成分信号减少而导致的情况,与上述同样。具体而言,如图20所示,在第二观察模式中强调1100,而在第一观察模式中进行强调1101的处理。
另外,第一观察模式可以是远景观察模式,第二观察模式可以是近景观察模式。
由此,能够在考虑到各模式的特性的基础上确定用途。第一观察模式可增大景深宽度。因此在内窥镜***中,可用于在管状器官中进行病变部搜索的状况等中的、期望由近及远都处于对焦状态的远景观察模式。另外,在第二观察模式中,可用于发现了病变部之后,正对所发现的病变部进行观察那样的解像度优先于景深宽度的近景观察模式。
3.第二实施方式
图21是表示第二实施方式的内窥镜***(摄像装置)的总体结构的框图。本实施方式的内窥镜***具有光源部100、摄像部200、处理器部300、显示部400、外部I/F部500。基本结构与第一实施方式相同,因此对相同结构省略详细说明,以下示出不同结构的详细情况。
首先,旋转滤色器102不同于光源部100。其结构如图22所示,其由表现出白色光的分光透射率的滤色器801、表现出作为特殊光的窄带分光透射率的滤色器802、旋转电动机803构成。如图23所示,滤色器801例如具有使从380nm到650nm波长范围的光透过的分光特性。如图24所示,滤色器802的分光特性具有使B2为390~445nm、G2为530~550nm的波段的光透过的透射率特性。
其次,摄像元件208不同于摄像部200,其使用图25(A)所示的拜尔排列的原色单板元件。
进而,对处理器部300还新添加了对焦位置控制部303,而且图像处理部301的详细情况也不同,伴随所述对焦位置控制部303的添加和旋转滤色器102的不同之处,控制部302的控制内容也发生了变更。
接着根据图26的框图说明图像处理部301的详细情况。图像处理部301包括预处理部350、选择部311、第一降噪处理部351、同步处理部352、颜色处理部353、灰度转换处理部315、第二降噪处理部354、轮廓强调处理部317、选择部355、病变位置检测部356、显示图像生成部357。
接下来说明各构成部间的数据流动。从A/D转换部209输出的图像数据被输入到图像处理部301,在预处理部350处,输入控制部302中预先保存的与各色信号对应的OB钳位值、增益校正值、WB系数值,根据这些输入值实施OB钳位处理、增益校正、WB处理,并输出到选择部311。
还将来自控制部302的观察模式信息输入到选择部311,当该观察模式信息为远景观察模式的情况下将所输入的图像数据输出给第一降噪处理部351,当该观察模式信息为近景观察模式的情况下将所输入的图像数据输出给同步处理部352。其中,图17示出了所输入的图像数据的MTF(空间频率特性)的例子。MTF 1000是近景观察模式时的,MTF 1001是远景观察模式时的。在远景观察模式时,由于伴随光圈缩小的衍射极限的影响,而处于高频成分少的状态。
第一降噪处理部351鉴于所输入的图像数据为MTF 1001的特性,使图17的频率特性1002的低通滤波器作用于图25(B)所示的各色信号(该图中为R信号)所构成的图像数据。由此能去除与所述低通滤波器的阻带对应的频带中的高频噪声。
从第一降噪处理部351输出的经过了降噪的图像数据或从选择部311输出的图像数据被输出给同步处理部352。
而且,从控制部302向同步处理部352输入照明光的种类(白色光或特殊光)信息,基于拜尔排列,对于每个像素,按照所述照明光的种类信息对缺失的2个信号进行不同的插值处理,从而对于每个像素生成由RGB信号构成的彩色图像数据,输出给颜色处理部353。
而且从控制部302向颜色处理部353输入照明光的种类(白色光或特殊光)信息,当所输入的彩色图像数据的照明光为白色光的情况下,转换至与输出监视器的色域对应的色空间,当所输入的彩色图像数据的照明光为特殊光的情况下,转换为规定的伪彩色,输出给灰度转换处理部315。所述色域例如是作为色空间的国际标准规范的sRGB(standard RGB)。
灰度转换处理部315将颜色转换后的彩色图像数据转换为作用了抵消显示部400的输出灰度特性的γ特性的、例如8位的灰度转换后彩色图像数据,输出给第二降噪处理部354。
还从控制部302向第二降噪处理部354输入照明光的种类(白色光或特殊光)信息和摄像模式信息,根据所输入的彩色图像数据生成例如拉普拉斯金字塔型的多重解像度图像,按照所述照明光的种类和摄像模式信息对各个不同的解像度图像独立地进行规定降低量的降噪处理。由此能减少低频噪声(例如色噪声等),还能进行消除与特殊光时的光量不足相伴随的噪声增加的强力降噪。经过了第二降噪后的彩色图像数据被输出给轮廓强调处理部317。
除了经过降噪后的彩色图像数据之外,轮廓强调处理部317还被输入有来自控制部302的观察模式信息,与第一实施方式同样地,根据观察模式信息被实施了不同的轮廓强调处理的轮廓强调后彩色图像数据被输出给选择部355。其中,还可以从控制部302输入照明光的信息,也可以根据照明光变更强调量。
还从控制部302向选择部355输入照明光的信息,照明光为特殊光的彩色图像数据被输出给病变位置检测部356,照明光为白色光的彩色图像数据被输出给显示图像生成部357。此后,将如下所述的彩色图像数据记作特殊光图像,该彩色图像数据包含通过作为特殊光的照明光的照射而得到的具有特定波段中的信息的被摄体像。另外,将如下所述的彩色图像数据记作白色光图像,该彩色图像数据包含通过作为白色光的照明光的照射而得到的具有白色光的波段中的信息的被摄体像。
病变位置检测部356对所输入的特殊光图像提取规定色相的区域,对通过所述提取区域连接起来的区域进行归组,进行该归组后的面积是否大于等于规定阈值的判定。在判断为面积大于等于规定阈值的情况下,将包围归组区域的矩形或圆形区域设定为病变区域,作为病变位置输出给显示图像生成部357和对焦位置控制部303。而且,在检测到多个病变位置的情况下,选择例如最大面积的病变,在还剩下多个的情况下选择位于画面中央附近的,把范围缩小到1个。
显示图像生成部357根据所输入的病变区域、白色光图像和来自控制部302的显示模式信息,生成后述的显示图像,输出给显示部400和对焦位置控制部303。仅当作为观察模式信息而由控制部302通知了近景观察模式的情况下或由病变位置检测部356通知了病变位置的情况下,对焦位置控制部303能有效地发挥作用。
接着根据图27说明显示图像生成部357的详细情况。
显示图像生成部357由选择部360、区域提取部361、电子变焦部362、区域框合成部363构成。
接着说明各构成部间的数据流动。从选择部355输出的白色光图像被输入到选择部360,在来自控制部302的显示模式信息为病变区域放大显示模式的情况下被分配到区域提取部361,在来自控制部302的显示模式信息为病变区域框显示模式的情况下分配到区域框合成部363。
区域提取部361对于白色光图像提取出包含从病变位置检测部356输出的病变位置(矩形或圆形区域)的规定区域,输出给电子变焦部362。电子变焦部362以使所提取出的规定区域成为显示部400的显示画面尺寸的方式来进行电子变焦处理,输出给显示部400和对焦位置控制部303。
另一方面,在区域框合成部363中,对于白色光图像,在其对应位置处叠加表示从病变位置检测部356输出的病变位置(矩形或圆形区域)的矩形框或者圆形框,输出给显示部400和对焦位置控制部303。
在这里,可由用户通过外部I/F部500的切换开关来选择显示模式,尤其在选择了病变区域放大显示模式的情况下,通过控制部302以开放可变光圈205的方式对可变光圈控制部204进行控制。亦即,在病变区域放大显示模式的情况下处于近景观察模式,虽然景深较小却可以得到较高的解像度,因此即便通过电子变焦加以放大也能显示相比远景观察模式时毫不逊色的解像度的图像。这种情况下,期望如下所说明的自动对焦发挥作用,然而在固定焦点的情况下,如果在近景观察时限定使用,也能得到实用的使用感。
最后根据图28详细说明对焦位置控制部303。
对焦位置控制部303由区域提取部364、亮度值计算部365、对比度计算部366、透镜移动量计算部367构成。
接着说明各构成部间的数据流动。从显示图像生成部357输出的白色光图像被输入到区域提取部364,从白色光图像提取出来自控制部302的显示模式信息和来自病变位置检测部356的对应于病变位置的区域。其中,当病变位置检测部356检测出病变部且输出了其位置信息的情况下,经由区域提取部364向控制部302通知切换信息以切换观察模式信息。例如,在把外部I/F部500内未图示的自动观察模式开关指定为开启的情况下,根据所述切换信息切换所述观察模式信息。例如以下述方式进行控制:在由病变位置检测部356检测到病变的情况下切换为近景观察模式,如果没有检测出病变则切换为远景观察模式。另一方面,在将所述自动观察模式开关设定为关闭的情况下,只要用户没有设定为近景观察模式,对焦位置控制部303就不发挥作用。
在由病变位置检测部356输出了病变位置的情况下,通过区域提取部364提取出的病变区域被亮度值计算部365根据彩色图像数据转换为亮度值,然后输出给对比度计算部366。
对比度计算部366计算区域内的亮度值的最大最小值作为对比度值,计算出的对比度值以时序数据的形式在对比度计算部366所具备的未图示的存储器中保存多个帧的对比度值。储存于所述存储器的至少3个对比度值被输出给透镜移动量计算部367。
透镜移动量计算部367的未图示的存储器中保存有焦点位置调整透镜207的调整位置,根据与所输入的至少3个对比度值相对应的调整位置计算作为对焦位置的透镜调整位置,输出给控制部302。控制部302将计算出的透镜调整位置输出给焦点位置控制部206,焦点位置控制部206通过移动焦点位置调整透镜207,能够实现对于病变位置的自动对焦。
如上所述,根据第二实施方式,能够根据病变检测结果自动切换远景观察模式和近景观察模式这2种观察模式,而且当选择了近景观察模式的情况下能自动对焦于病变位置,因此能摆脱模式切换的繁琐,可更加专注于病变的诊断。进而在通过电子变焦来放大显示包含检测到的病变位置的区域情况下,自动切换为高解像度的近景观察模式,因此能够在不会助长电子变焦带来的模糊感的情况下通过具备与远景观察模式时同等的解像度的高画质图像进行病变的诊断。
在上述的本实施方式中,具有从摄像图像中检测病变位置的病变位置检测部,在检测到病变位置的情况下,观察模式设定部304将观察模式设定为第二观察模式。
由此,当检测到病变部的情况下,能够设定为第二观察模式(景深宽度较小,解像度较高)。这是因为预想为:在检测到病变部的情况下,并不是要观察大范围,而是要观察以病变部为中心的较小的范围。
另外,图像处理部301取得包含具有特定波段中的信息的被摄体像的第一摄像图像,该特定波段是比白色光窄的波段,病变位置检测部356根据所取得的第一摄像图像,检测病变位置。
由此,能够通过窄带光观察检测病变部。具体而言,例如当使用NBI模式的情况下,用褐色显示扁平上皮癌等特定的病变等,相比白色光的观察,通过窄带光的观察能够提高对特定病变的视觉辨认性。因此通过使用窄带光能有效地检测病变位置。
另外,还可以具有对焦位置控制部303,在观察模式为第二观察模式的情况下,进行焦点位置的控制。具体而言,既可以将焦点对准预先确定的固定位置,也可以将焦点对准病变位置。
由此就能够控制焦点位置,即便是景深宽度较小的第二观察模式中,也能够恰当地将焦点对准被摄体。具体而言,预先确定第二观察模式中的平均焦点位置,把焦点对准该位置即充分具有实用性。另外,当所述病变位置检测部356检测到病变部的情况下,认为要观察以病变部为中心的区域,因而可把焦点对准病变位置。
另外,也可以设置为:图像处理部301除了所述第一图像之外,还取得包含具有白色光的波段中的信息的被摄体像的第二摄像图像,根据第二摄像图像的规定区域的对比度对准焦点。并且,第二摄像图像是包含在第一摄像图像中检测到的病变位置的图像。
由此能得到作为特殊光图像的第一摄像图像和作为普通光图像的第二摄像图像,使用第二图像通过对比度法对准焦点。
还可以具有放大显示所拍摄的图像的电子变焦部362,电子变焦部362以规定倍率放大显示对焦位置控制部303对准了焦点的病变位置的周边区域。
由此能放大显示病变位置,能更加详细地观察病变位置。并且,虽然进行电子变焦会使得解像度降低,但是因为在检测到病变位置时使用解像度较高的第二观察模式,因此能实现具有充分实用性的解像度。
另外,图像处理部301取得作为特殊光图像的第一摄像图像和作为普通光图像的第二摄像图像。其中,第一摄像图像和第二摄像图像是拍摄了生物体内的生物体内图像。生物体内图像所包含的特定波段是指被血液中的血红蛋白吸收的波长的波段。该血红蛋白所吸收的波长例如为390nm~445nm(窄带光的B2成分)或530nm~550nm(窄带光的G2成分)。
由此就能够进行被称作NBI(Narrow Band Imaging:窄带成像)的窄带光观察,能观察位于生物体表层部和深处的血管的构造。另外,通过将得到的信号输入到特定的通道(G2→R、B2→G、B),能用褐色等显示扁平上皮癌等通过普通光难以看清的病变等,能防止看漏病变部。并且,所谓390nm~445nm或530nm~550nm指的是根据被血红蛋白吸收的特性以及分别到达生物体的表层部或深处的特性而得到的波长。但是,此时的波段并不限于此,例如还可以考虑到由于与血红蛋白的吸收和到达生物体的表层部或深处有关的实验结果等变动因素,使得波段的下限值降低约0~10%,上限值提高约0~10%的情况。
另外,生物体内图像所包含的特定波段可以是荧光物质发出的荧光的波段。例如特定波段可以是490nm~625nm的波段。
由此就能够实现被称作AFI(Auto Fluorescence Imaging:自发荧光成像)的荧光观察。通过照射激励光(390nm~470nm),能观察到胶原蛋白等荧光物质发出的固有荧光(intrinsic fluorescence。490nm~625nm)。在这种观察中,能采用与正常粘膜不同的色调来强调地显示病变,能防止看漏病变部等。并且,490nm~625nm的波长表示照射所述激励光时由胶原蛋白等荧光物质发出的固有荧光的波段。390nm~470nm的波长表示用于产生荧光的激励光的波段。
其中,此时的波段不限于此,例如还可以考虑到下述情况:由于与荧光物质发出的荧光的波段有关的实验结果等变动因素,使得波段的下限值降低约0~10%,上限值提高约0~10%。还可以同时照射被血红蛋白吸收的波段(540nm~560nm),生成伪彩色图像。
另外,生物体内图像所包含的特定波段可以是红外光的波段。例如特定波段可以是790nm~820nm或905nm~970nm的波段。
由此就能够实现被称作IRI(Infra Red Imaging:红外成像)的红外光观察。在静脉注射了作为红外光易于吸收的红外指标药剂的ICG(吲哚菁绿)之后,照射上述波段的红外光,从而能强调地显示出人眼难以视觉辨认的粘膜深处的血管和血流信息,能进行胃癌的深度诊断和治疗方针的判定等。并且,790nm~820nm这样的波长可通过红外指标药剂的吸收最强这一特性来求出,905nm~970nm这样的波长可通过红外指标药剂的吸收最弱这一特性来求出。但是,此时的波段不限于此,例如还可以考虑到下述情况:由于与红外指标药剂的吸收有关的实验结果等变动因素,使得波段的下限值降低约0~10%,上限值提高约0~10%。
并且在以上的说明中,图像处理部301取得作为特殊光图像的第一摄像图像和作为普通光图像的第二摄像图像这两种图像,然而并不限于此。既可以在病变位置的检测和显示部400的显示中都使用特殊光图像,也可以在病变位置的检测和显示部400的显示中都使用普通光图像。
在上面,对应用了本发明的2个实施方式1~2及其变形例进行了说明,但本发明不限于实施方式1~2及其变形例,在实施阶段,可以在不脱离发明主旨的范围内对构成要素进行变形而具体化。另外,通过适当组合所述实施方式1~2和变形例所公开的多个构成要素,能形成各种发明。例如可以从实施方式1~2及其变形例所记载的所有构成要素中删除掉某些构成要素。进而,还可以适当组合不同实施方式和变形例中所说明的构成要素。这样,能够在不脱离发明主旨的范围内实现各种变形和应用。
另外,在说明书或附图中与更为广义或同义的不同用语(例如缩小光圈)一起至少记载了一次的用语(例如增大F值)都可以在说明书或附图中任何部分置换为该不同用语。
Claims (20)
1.一种内窥镜***,其特征在于,具有:
摄像部,其具有光学***和摄像元件;
观察模式设定部,其设定被摄体的观察模式;
光圈控制部,其根据由所述观察模式设定部设定的所述观察模式,对光圈状态进行选择控制;以及
图像处理部,其对由所述摄像部拍摄的摄像图像实施图像处理,
在所述观察模式为第一观察模式的情况下,所述光圈控制部选择由所述光学***的光圈的衍射极限确定的分辨率低于由所述摄像元件确定的分辨率的第一光圈状态,
在所述观察模式为第二观察模式的情况下,所述光圈控制部选择由所述光学***的光圈的衍射极限确定的分辨率大于等于由所述摄像元件确定的分辨率的第二光圈状态,
其中,所述第一观察模式是远景观察模式,所述第二观察模式是近景观察模式。
2.根据权利要求1所述的内窥镜***,其特征在于,在所述观察模式为所述第一观察模式的情况下,所述图像处理部进行与所述观察模式为所述第二观察模式时相比更减少高频的图像处理。
3.根据权利要求1所述的内窥镜***,其特征在于,在所述观察模式为所述第一观察模式的情况下,所述图像处理部进行与所述观察模式为所述第二观察模式时相比增大了噪声降低量的图像处理。
4.根据权利要求1所述的内窥镜***,其特征在于,在所述观察模式为所述第二观察模式的情况下,所述图像处理部进行强调规定的高频频带的轮廓强调处理,在所述观察模式为所述第一观察模式的情况下,所述图像处理部进行强调频率比所述规定的高频频带低的频带的轮廓强调处理。
5.根据权利要求1所述的内窥镜***,其特征在于,
该内窥镜***具有根据所述摄像图像来检测病变位置的病变位置检测部,
在检测到所述病变位置的情况下,所述观察模式设定部将所述观察模式设定为所述第二观察模式。
6.根据权利要求5所述的内窥镜***,其特征在于,
所述图像处理部获得第一摄像图像,该第一摄像图像包含具有特定波段中的信息的被摄体像,该特定波段与白色光的波段相比为窄波段,
所述病变位置检测部根据所述第一摄像图像,检测所述病变位置。
7.根据权利要求5所述的内窥镜***,其特征在于,
该内窥镜***具有将焦点对准规定位置的对焦位置控制部,
在所述观察模式为所述第二观察模式的情况下,所述对焦位置控制部进行焦点位置的控制。
8.根据权利要求7所述的内窥镜***,其特征在于,所述对焦位置控制部将焦点对准预先确定的固定位置。
9.根据权利要求7所述的内窥镜***,其特征在于,所述对焦位置控制部将焦点对准所述病变位置。
10.根据权利要求5所述的内窥镜***,其特征在于,
该内窥镜***具有将焦点对准规定位置的对焦位置控制部,
所述图像处理部获得第一摄像图像和第二摄像图像,该第一摄像图像包含具有特定波段中的信息的被摄体像,该特定波段与白色光的波段相比为窄波段,该第二摄像图像包含具有白色光的波段中的信息的被摄体像,
所述第二摄像图像是包含在所述第一摄像图像中检测出的所述病变位置的图像,
所述对焦位置控制部根据所述第二摄像图像的规定区域的对比度来对准焦点。
11.根据权利要求10所述的内窥镜***,其特征在于,
该内窥镜***具有放大显示所拍摄的图像的电子变焦部,
所述电子变焦部以规定倍率放大显示所述第二摄像图像中的、包含由所述对焦位置控制部对准了焦点的所述病变位置在内的周边区域。
12.根据权利要求1所述的内窥镜***,其特征在于,所述图像处理部取得第一摄像图像和第二摄像图像,该第一摄像图像包含具有特定波段中的信息的被摄体像,该特定波段与白色光的波段相比为窄波段,该第二摄像图像包含具有白色光的波段中的信息的被摄体像。
13.根据权利要求12所述的内窥镜***,其特征在于,
所述第一摄像图像和所述第二摄像图像是拍摄了生物体内的生物体内图像,
所述生物体内图像所包含的所述特定波段是被血液中的血红蛋白吸收的波段。
14.根据权利要求13所述的内窥镜***,其特征在于,所述特定波段是390纳米~445纳米或530纳米~550纳米。
15.根据权利要求12所述的内窥镜***,其特征在于,
所述第一摄像图像和所述第二摄像图像是拍摄了生物体内的生物体内图像,
所述生物体内图像所包含的所述特定波段是荧光物质所发出的荧光的波段。
16.根据权利要求15所述的内窥镜***,其特征在于,所述特定波段是490纳米~625纳米的波段。
17.根据权利要求12所述的内窥镜***,其特征在于,
所述第一摄像图像和所述第二摄像图像是拍摄了生物体内的生物体内图像,
所述生物体内图像所包含的所述特定波段是红外光的波段。
18.根据权利要求17所述的内窥镜***,其特征在于,所述特定波段是790纳米~820纳米或905纳米~970纳米的波段。
19.一种控制方法,其特征在于,
设定被摄体的观察模式,
在所述观察模式为第一观察模式的情况下,作为光圈值,选择由光学***的光圈的衍射极限确定的分辨率低于由摄像元件确定的分辨率的第一光圈状态,
在所述观察模式为第二观察模式的情况下,作为所述光圈值,选择由所述光学***的光圈的衍射极限确定的分辨率大于等于由所述摄像元件确定的分辨率的第二光圈状态,
其中,所述第一观察模式是远景观察模式,所述第二观察模式是近景观察模式。
20.一种摄像装置,其特征在于,其具有:
摄像部,其具有光学***和摄像元件;
观察模式设定部,其设定被摄体的观察模式;以及
光圈控制部,其根据由所述观察模式设定部设定的所述观察模式,对光圈值进行选择控制,
在所述观察模式为第一观察模式的情况下,所述光圈控制部选择由所述光学***的光圈的衍射极限确定的分辨率低于由所述摄像元件确定的分辨率的第一光圈状态,作为所述光圈值,
在所述观察模式为第二观察模式的情况下,所述光圈控制部选择由所述光学***的光圈的衍射极限确定的分辨率大于等于由所述摄像元件确定的分辨率的第二光圈状态,作为所述光圈值,
其中,所述第一观察模式是远景观察模式,所述第二观察模式是近景观察模式。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010-062887 | 2010-03-18 | ||
JP2010062887A JP5346856B2 (ja) | 2010-03-18 | 2010-03-18 | 内視鏡システム、内視鏡システムの作動方法及び撮像装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102188219A CN102188219A (zh) | 2011-09-21 |
CN102188219B true CN102188219B (zh) | 2015-07-15 |
Family
ID=44597703
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201110066302.5A Active CN102188219B (zh) | 2010-03-18 | 2011-03-18 | 内窥镜***、摄像装置以及控制方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US8723937B2 (zh) |
JP (1) | JP5346856B2 (zh) |
CN (1) | CN102188219B (zh) |
Families Citing this family (31)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5698476B2 (ja) * | 2010-08-06 | 2015-04-08 | オリンパス株式会社 | 内視鏡システム、内視鏡システムの作動方法及び撮像装置 |
WO2013061939A1 (ja) * | 2011-10-26 | 2013-05-02 | オリンパス株式会社 | 内視鏡装置及びフォーカス制御方法 |
JP5757891B2 (ja) * | 2012-01-23 | 2015-08-05 | 富士フイルム株式会社 | 電子内視鏡システム、画像処理装置、画像処理装置の作動方法及び画像処理プログラム |
WO2013145408A1 (ja) * | 2012-03-30 | 2013-10-03 | オリンパスメディカルシステムズ株式会社 | 内視鏡装置 |
JP6128792B2 (ja) * | 2012-10-16 | 2017-05-17 | オリンパス株式会社 | 観察装置、観察支援装置、観察装置の作動方法及びプログラム |
WO2014126000A1 (ja) * | 2013-02-13 | 2014-08-21 | オリンパス株式会社 | 蛍光観察装置 |
JP2014204851A (ja) * | 2013-04-12 | 2014-10-30 | オリンパス株式会社 | 内視鏡装置 |
JP5695808B1 (ja) * | 2013-04-19 | 2015-04-08 | オリンパスメディカルシステムズ株式会社 | 内視鏡装置 |
WO2014199980A1 (ja) * | 2013-06-12 | 2014-12-18 | オリンパスメディカルシステムズ株式会社 | 内視鏡システム |
JP2016170182A (ja) * | 2013-07-22 | 2016-09-23 | オリンパスメディカルシステムズ株式会社 | 医療用観察装置 |
WO2015044996A1 (ja) * | 2013-09-24 | 2015-04-02 | オリンパス株式会社 | 内視鏡装置及び内視鏡装置の制御方法 |
JP6196900B2 (ja) * | 2013-12-18 | 2017-09-13 | オリンパス株式会社 | 内視鏡装置 |
JP6230409B2 (ja) * | 2013-12-20 | 2017-11-15 | オリンパス株式会社 | 内視鏡装置 |
EP3085301A4 (en) * | 2013-12-20 | 2017-08-23 | Olympus Corporation | Endoscopic device |
CA2942921C (en) * | 2014-03-18 | 2019-07-30 | Integrated Medical Systems International, Inc. | Optically adaptive endoscope |
CN104274148A (zh) * | 2014-09-28 | 2015-01-14 | 安徽中科医药成像技术科技有限公司 | 成像*** |
DE112014007051T5 (de) * | 2014-11-19 | 2017-06-22 | Olympus Corporation | Bildverarbeitungsvorrichtung, Bildverarbeitungsverfahren, Bildverarbeitungsprogramm und Endoskopvorrichtung |
WO2016084608A1 (ja) * | 2014-11-25 | 2016-06-02 | ソニー株式会社 | 内視鏡システム、および内視鏡システムの動作方法、並びにプログラム |
JPWO2016084257A1 (ja) * | 2014-11-28 | 2017-10-05 | オリンパス株式会社 | 内視鏡装置 |
US10568492B2 (en) * | 2015-07-15 | 2020-02-25 | Sony Corporation | Medical observation device and medical observation method |
CN105520712B (zh) * | 2015-11-30 | 2019-04-16 | 广州三瑞医疗器械有限公司 | 一种***镜图像智能采集评估方法及装置 |
CN105326470B (zh) * | 2015-11-30 | 2017-03-29 | 西安交通大学第一附属医院 | 一种基于近红外光视觉诊断的磁锚定腹腔镜*** |
CN105338234A (zh) * | 2015-12-16 | 2016-02-17 | 北京博视中自科技有限公司 | 一种内窥式智能相机 |
JP2017158764A (ja) * | 2016-03-09 | 2017-09-14 | ソニー株式会社 | 画像処理装置、画像処理方法、及び記録媒体 |
JP2018139846A (ja) * | 2017-02-28 | 2018-09-13 | 富士フイルム株式会社 | 内視鏡システム及びその作動方法 |
WO2019130964A1 (ja) | 2017-12-28 | 2019-07-04 | 富士フイルム株式会社 | 内視鏡画像取得システム及び方法 |
WO2019146075A1 (ja) * | 2018-01-26 | 2019-08-01 | オリンパス株式会社 | 内視鏡画像処理装置、内視鏡画像処理プログラム及び内視鏡画像処理方法 |
CN108577791B (zh) * | 2018-05-16 | 2020-05-12 | 广东欧谱曼迪科技有限公司 | 一种荧光导航内窥镜***及其增强荧光成像灵敏度的方法 |
WO2021149141A1 (ja) * | 2020-01-21 | 2021-07-29 | オリンパス株式会社 | フォーカス制御装置、内視鏡システム及びフォーカス制御装置の作動方法 |
CN112957082B (zh) * | 2021-03-16 | 2022-11-04 | 济南显微智能科技有限公司 | 一种基于体内探针的手术*** |
CN114159007B (zh) * | 2022-02-11 | 2022-05-06 | 极限人工智能有限公司 | 内窥镜、内窥镜影像***以及手术机器人 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4902115A (en) * | 1986-09-22 | 1990-02-20 | Olympus Optical Co., Ltd. | Optical system for endoscopes |
US5764292A (en) * | 1994-12-29 | 1998-06-09 | Canon Kabushiki Kaisha | Image pickup apparatus having a diaphragm and a high-resolution diaphragm |
EP1527730A1 (en) * | 2003-10-30 | 2005-05-04 | Olympus Corporation | Image pick-up apparatus and endoscope apparatus |
CN1678239A (zh) * | 2002-08-01 | 2005-10-05 | 约翰霍普金斯大学 | 利用荧光鉴定分子结构和使体腔起皱的细胞类型的技术 |
CN1953697A (zh) * | 2004-05-14 | 2007-04-25 | 奥林巴斯医疗株式会社 | 电子内窥镜 |
CN101258740A (zh) * | 2005-07-28 | 2008-09-03 | 京瓷株式会社 | 摄像装置及图像处理方法 |
CN101621956A (zh) * | 2007-02-22 | 2010-01-06 | 奥林巴斯医疗株式会社 | 被检体内导入*** |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0837604A (ja) * | 1994-05-17 | 1996-02-06 | Olympus Optical Co Ltd | 画像処理装置 |
JP3566370B2 (ja) | 1994-12-26 | 2004-09-15 | キヤノン株式会社 | 撮像装置 |
JP3771344B2 (ja) * | 1997-02-13 | 2006-04-26 | 富士写真フイルム株式会社 | 蛍光電子内視鏡 |
JP2003134393A (ja) * | 2001-10-25 | 2003-05-09 | Olympus Optical Co Ltd | 撮像装置 |
US8057401B2 (en) * | 2005-02-24 | 2011-11-15 | Erich Wolf | System for transcutaneous monitoring of intracranial pressure |
CA2567737A1 (en) * | 2004-05-14 | 2005-11-24 | Olympus Medical Systems Corp. | Electronic endoscope |
JP2007050110A (ja) * | 2005-08-18 | 2007-03-01 | Pentax Corp | 画像処理装置および電子内視鏡装置 |
JP4659645B2 (ja) * | 2006-03-01 | 2011-03-30 | オリンパスメディカルシステムズ株式会社 | 拡大内視鏡光学系 |
JP4728162B2 (ja) * | 2006-04-21 | 2011-07-20 | オリンパスメディカルシステムズ株式会社 | 内視鏡システム |
JP2009219719A (ja) * | 2008-03-18 | 2009-10-01 | Fujifilm Corp | 内視鏡装置 |
US8553075B2 (en) * | 2008-10-22 | 2013-10-08 | Fujifilm Corporation | Endoscope apparatus and control method therefor |
JP5415973B2 (ja) * | 2010-01-25 | 2014-02-12 | オリンパス株式会社 | 撮像装置、内視鏡システム及び撮像装置の作動方法 |
-
2010
- 2010-03-18 JP JP2010062887A patent/JP5346856B2/ja active Active
-
2011
- 2011-03-16 US US13/049,055 patent/US8723937B2/en active Active
- 2011-03-18 CN CN201110066302.5A patent/CN102188219B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4902115A (en) * | 1986-09-22 | 1990-02-20 | Olympus Optical Co., Ltd. | Optical system for endoscopes |
US5764292A (en) * | 1994-12-29 | 1998-06-09 | Canon Kabushiki Kaisha | Image pickup apparatus having a diaphragm and a high-resolution diaphragm |
CN1678239A (zh) * | 2002-08-01 | 2005-10-05 | 约翰霍普金斯大学 | 利用荧光鉴定分子结构和使体腔起皱的细胞类型的技术 |
EP1527730A1 (en) * | 2003-10-30 | 2005-05-04 | Olympus Corporation | Image pick-up apparatus and endoscope apparatus |
CN1953697A (zh) * | 2004-05-14 | 2007-04-25 | 奥林巴斯医疗株式会社 | 电子内窥镜 |
CN101258740A (zh) * | 2005-07-28 | 2008-09-03 | 京瓷株式会社 | 摄像装置及图像处理方法 |
CN101621956A (zh) * | 2007-02-22 | 2010-01-06 | 奥林巴斯医疗株式会社 | 被检体内导入*** |
Also Published As
Publication number | Publication date |
---|---|
US20110228064A1 (en) | 2011-09-22 |
US8723937B2 (en) | 2014-05-13 |
JP5346856B2 (ja) | 2013-11-20 |
CN102188219A (zh) | 2011-09-21 |
JP2011193983A (ja) | 2011-10-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102188219B (zh) | 内窥镜***、摄像装置以及控制方法 | |
KR101050887B1 (ko) | 내시경용 화상 처리 장치 및 내시경 장치 | |
CN103619233B (zh) | 内窥镜装置 | |
CN103561629B (zh) | 内窥镜装置及内窥镜装置的工作方法 | |
JP5395725B2 (ja) | 電子内視鏡システム | |
US10335014B2 (en) | Endoscope system, processor device, and method for operating endoscope system | |
US7393321B2 (en) | Endoscope apparatus with solid-state pick-up | |
CN103582445B (zh) | 内窥镜装置 | |
JP4554944B2 (ja) | 内視鏡装置 | |
CN107252299B (zh) | 内窥镜装置以及内窥镜装置的工作方法 | |
KR100988113B1 (ko) | 생체 관측 장치 | |
CN103153158B (zh) | 内窥镜装置 | |
CN101010029A (zh) | 内窥镜装置 | |
US20120130175A1 (en) | Light source apparatus and endoscope system | |
CN101822525A (zh) | 内窥镜装置 | |
JP5757891B2 (ja) | 電子内視鏡システム、画像処理装置、画像処理装置の作動方法及び画像処理プログラム | |
CN107072520A (zh) | 以可见光波长和红外波长并行成像的内窥镜*** | |
CN103220960B (zh) | 荧光内窥镜装置 | |
US20160128545A1 (en) | Endoscope apparatus and method for controlling endoscope apparatus | |
JP2003215469A (ja) | 内視鏡装置 | |
CN105813538B (zh) | 活体观察*** | |
JP5467971B2 (ja) | 電子内視鏡システム、電子内視鏡システムのプロセッサ装置及び電子内視鏡システムの作動方法 | |
WO2013054837A1 (ja) | 内視鏡システム及び画像生成方法 | |
JPWO2016080130A1 (ja) | 観察装置 | |
JP5948203B2 (ja) | 内視鏡システム及びその作動方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |