JP2001258820A - Fluorescent image display method and device - Google Patents

Fluorescent image display method and device

Info

Publication number
JP2001258820A
JP2001258820A JP2000299397A JP2000299397A JP2001258820A JP 2001258820 A JP2001258820 A JP 2001258820A JP 2000299397 A JP2000299397 A JP 2000299397A JP 2000299397 A JP2000299397 A JP 2000299397A JP 2001258820 A JP2001258820 A JP 2001258820A
Authority
JP
Japan
Prior art keywords
image
light
tissue
fluorescence
abnormal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2000299397A
Other languages
Japanese (ja)
Other versions
JP4298151B2 (en
Inventor
Tomonari Sendai
知成 千代
Kazuhiro Tsujita
和宏 辻田
Toshitaka Agano
俊孝 阿賀野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Holdings Corp
Original Assignee
Fuji Photo Film Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Photo Film Co Ltd filed Critical Fuji Photo Film Co Ltd
Priority to JP2000299397A priority Critical patent/JP4298151B2/en
Priority to US09/758,126 priority patent/US20020138008A1/en
Publication of JP2001258820A publication Critical patent/JP2001258820A/en
Priority to US10/756,276 priority patent/US20040148141A1/en
Application granted granted Critical
Publication of JP4298151B2 publication Critical patent/JP4298151B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Endoscopes (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)

Abstract

PROBLEM TO BE SOLVED: To perform a reliable observation of organism tissue property in a fluorescent image display method and device. SOLUTION: The excited light and reference light emitted from a light source 100 are emitted to an organism tissue 1 via an endoscopic unit 200, and the fluorescence generated from the organism tissue 1 and the reflected reference light reflected by the tissue 1 are detected as fluorescent image and reflected reference light image by an image pickup element 25. The normally reflected light area included in the reflected reference light image is judged by an arithmetic unit 400, and the normally reflected light area is displayed on an indicator 400 in a mode different from a normally light receiving area together with a tissue property image showing the tissue property of the tissue 1 formed on the basis of the fluorescent image.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、励起光の照射によ
り生体組織から発せられた蛍光に基づいて生体の組織性
状を表す画像を表示する蛍光画像表示方法および装置に
関するものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a fluorescent image display method and apparatus for displaying an image representing the tissue properties of a living body based on fluorescence emitted from the living tissue by irradiation with excitation light.

【0002】[0002]

【従来の技術】従来より、励起光を生体組織に照射する
ことにより、この生体組織から発生した自家蛍光を画像
として検出し、生体の組織性状を観察する装置が知られ
ている。例えば、体腔内の生体組織に波長410nm近
傍の励起光を照射し、この励起光の照射により生体組織
から発生した蛍光の強度と、この生体組織が受光した励
起光の強度との比率で表される蛍光収率や、励起光の照
射により発生した蛍光中の480nm近傍の波長領域の
強度と、430nm〜730nmに亘る波長領域の強度
との比率で表される規格化蛍光強度に基づいて作成され
た画像によって生体の組織性状を観察する内視鏡装置が
提案されている。
2. Description of the Related Art Conventionally, there has been known an apparatus which irradiates a living tissue with excitation light, detects auto-fluorescence generated from the living tissue as an image, and observes the tissue properties of the living body. For example, a living tissue in a body cavity is irradiated with excitation light having a wavelength of about 410 nm, and is expressed by a ratio between the intensity of fluorescence generated from the living tissue by the irradiation of the excitation light and the intensity of the excitation light received by the living tissue. And the normalized fluorescence intensity represented by the ratio of the intensity in the wavelength region near 480 nm in the fluorescence generated by the irradiation of the excitation light to the intensity in the wavelength region from 430 nm to 730 nm. An endoscope apparatus for observing tissue properties of a living body by using an image has been proposed.

【0003】上記蛍光収率は、生体の正常組織および病
変組織が同一強度の励起光を受光した場合に正常組織か
ら発生する自家蛍光の強度が病変組織から発生する自家
蛍光の強度より高くなることに基づいて病変組織と正常
組織との識別を行う指標であり、また、この蛍光収率は
同一の被測定部位における励起光の受光強度とこの励起
光の受光により発生した自家蛍光の発光強度との比率で
表される値なので、励起光を照射する射出点と励起光の
照射を受ける生体組織の被測定部位との距離および角度
等に影響されない生体の組織性状を表す安定した指標と
して利用することができる。
[0003] The above-mentioned fluorescence yield is such that when normal tissues and diseased tissues of a living body receive excitation light of the same intensity, the intensity of autofluorescence generated from normal tissues becomes higher than the intensity of autofluorescence generated from diseased tissues. Is an index for discriminating between a diseased tissue and a normal tissue based on the fluorescence yield, and the fluorescence yield is the intensity of the received light of the excitation light and the emission intensity of the autofluorescence generated by the reception of the excitation light at the same measurement site. Is used as a stable index indicating the tissue properties of the living body that are not affected by the distance and angle between the exit point for irradiating the excitation light and the measurement site of the living tissue to be irradiated with the excitation light. be able to.

【0004】実際に蛍光収率を求めるにあたっては、生
体組織が受光した励起光の強度を直接測定することが難
しいので、近赤外光等の生体組織に吸収されにくい波長
領域を有する参照光の照射を受けた生体組織によって反
射された光(以後反射参照光と呼ぶ)の強度によって前
記生体組織が受光した励起光の強度を代替し、蛍光収率
を求めている。
In actually obtaining the fluorescence yield, it is difficult to directly measure the intensity of the excitation light received by the living tissue, so that the reference light having a wavelength region such as near-infrared light which is hardly absorbed by the living tissue is difficult. The intensity of the excitation light received by the living tissue is substituted by the intensity of light reflected by the irradiated living tissue (hereinafter referred to as reflected reference light), and the fluorescence yield is determined.

【0005】すなわち、蛍光収率は、励起光の照射を受
けた生体組織から発生した蛍光の強度と生体組織が照射
を受けた励起光の強度との比率に基づいて求められる値
であるが、蛍光収率の近似値として、励起光の照射を受
けた生体組織から発生した蛍光の強度と参照光の照射を
受けた生体組織によって反射された反射参照光の強度と
の比率に基づいて近似的に蛍光収率の値を求めている。
That is, the fluorescence yield is a value determined based on the ratio of the intensity of the fluorescence generated from the living tissue irradiated with the excitation light to the intensity of the excitation light irradiated to the living tissue. The approximate value of the fluorescence yield is approximated based on the ratio between the intensity of the fluorescence generated from the living tissue irradiated with the excitation light and the intensity of the reflected reference light reflected by the living tissue irradiated with the reference light. Calculate the value of the fluorescence yield.

【0006】一方、規格化蛍光強度は、励起光の照射を
受けた生体の正常組織と病変組織とから発生する蛍光の
スペクトルの形状が480nm近傍の波長領域において
異なることに基づいて正常組織と病変組織との識別を行
う指標であり、蛍光収率と同様に、励起光を照射する射
出点と励起光の照射を受ける生体組織の被測定部位との
距離および角度等に影響されない指標である。
On the other hand, the normalized fluorescence intensity is based on the fact that the shapes of the spectra of the fluorescence generated from the normal tissue and the diseased tissue of the living body irradiated with the excitation light differ in the wavelength region near 480 nm. It is an index for discriminating from a tissue, and is an index that is not affected by the distance and angle between the emission point for irradiating the excitation light and the measurement site of the living tissue to be irradiated with the excitation light, like the fluorescence yield.

【0007】このように、体腔内の組織性状を画像とし
て観察する内視鏡装置等においては、上記蛍光収率や規
格化蛍光強度等の指標を用いて作成した組織性状画像を
用いて生体の組織性状を観察している。
[0007] As described above, in an endoscope apparatus or the like for observing tissue properties in a body cavity as an image, a tissue property image created using the above-mentioned indices such as the fluorescence yield and the normalized fluorescence intensity is used. Observe the tissue characteristics.

【0008】上記蛍光収率を表す画像を作成しようとす
るときに生体組織に参照光を照射すると生体組織を覆っ
ている粘膜や血液によって参照光が鏡面反射(正反射)
され、この反射光(正反射光)が検出光路を伝播して直
接検出されることがある。この正反射光が生じた生体組
織の領域は、生体組織が受光した励起光の強度を表して
いない輝度の非常に高い輝点として検出され、この領域
からは正確な蛍光収率を表す画像が得られない。したが
って、この正反射光による影響を除去する方法が望まれ
る。
When a living tissue is irradiated with reference light when an image representing the fluorescence yield is to be created, the reference light is specularly reflected (specular reflection) by mucous membrane or blood covering the living tissue.
The reflected light (specular reflection light) may be directly detected by propagating through the detection optical path. The region of the living tissue where the specular reflection light is generated is detected as a very bright luminescent spot that does not represent the intensity of the excitation light received by the living tissue, and from this region, an image representing the exact fluorescence yield is obtained. I can't get it. Therefore, a method for removing the influence of the regular reflection light is desired.

【0009】その一般的な方式としては、偏光フィルタ
を介して直線偏光とされた光を生体組織に照射し、この
生体組織によって反射された光を撮像側にクロスニコル
の配置となるように偏光フィルタを配置した光学系を介
して撮像することにより、照射された光の偏光方向が保
存されている正反射光を除去する方式が知られている。
また、偏光フィルタを介して直線偏光とされた光を生体
組織に照射し、この生体組織によって反射され撮像素子
によって受光された光の輝度が一定レベルを越えた場合
に検光子を回転させて受光される正反射光の輝度を低減
する方式や、正反射光を含む複数の画像を撮像して、そ
れらの画像上の対応点を検出し、正反射光による輝点が
目立たないように画像を合成する画像処理を施す方式等
も提案されている。
As a general method, linearly polarized light is applied to a living tissue through a polarizing filter, and the light reflected by the living tissue is polarized so that the light is reflected in a crossed Nicols arrangement on the imaging side. 2. Description of the Related Art There is known a method of removing specularly reflected light in which the direction of polarization of irradiated light is preserved by imaging through an optical system provided with a filter.
In addition, the linearly polarized light is irradiated to the living tissue through the polarizing filter, and when the luminance of the light reflected by the living tissue and received by the imaging device exceeds a certain level, the analyzer is rotated to receive the light. A method of reducing the brightness of specular reflected light, or a method of capturing a plurality of images including specular reflected light, detecting corresponding points on the images, and forming an image so that bright points due to the specular reflected light are not conspicuous. A method of performing image processing for composition has been proposed.

【0010】[0010]

【発明が解決しようとする課題】しかしながら、生体組
織から発生した蛍光の強度の違いに基づいてこの生体の
組織性状を表す画像を作成し表示しようとするときに
は、生体の組織性状が誤って観察されてしまうような画
像として表示すると非常に大きな問題となるので、上記
方式のように単に正反射光の影響が目立たないように画
像を処理しただけでは不十分である。
However, when attempting to create and display an image representing the tissue properties of the living body based on the difference in the intensity of the fluorescence generated from the living tissue, the tissue properties of the living body are erroneously observed. If the image is displayed as such an image, a very serious problem will occur. Therefore, it is not sufficient to simply process the image so that the influence of the regular reflection light is not conspicuous as in the above method.

【0011】例えば、蛍光収率を用いて生体の組織性状
を表示しようとする場合には、参照光が正反射された生
体組織の領域からは強度の高い反射参照光が検出され、
この領域は強度の高い励起光を受光した領域として認識
されてしまう。この場合、その領域から発生した蛍光の
強度と、その領域から検出された、正反射された反射参
照光の強度とは無関係であり、実際にはその領域の生体
組織は強度の高い励起光を受光したわけではない。
For example, when an attempt is made to display the tissue properties of a living body using the fluorescence yield, high-intensity reflected reference light is detected from the region of the living tissue where the reference light is specularly reflected.
This region is recognized as a region that has received the high-intensity excitation light. In this case, there is no relation between the intensity of the fluorescence generated from the region and the intensity of the specularly-reflected reference light detected from the region. Not received.

【0012】この問題に対しては、偏光フィルタを撮像
素子の入射光路に挿入することにより正反射光の強度を
弱めたり、画像処理によって輝点を目立たなくしたりし
ただけでは上記問題点は十分に改善されず、正反射光の
影響により生体の組織性状を観察するために用いる十分
に信頼のできる画像が得られない。
In order to solve this problem, it is sufficient to reduce the intensity of specularly reflected light by inserting a polarizing filter into the incident optical path of the image pickup device or to make the bright spot less noticeable by image processing. The image is not improved, and a sufficiently reliable image used for observing the tissue properties of the living body cannot be obtained due to the influence of specular reflection light.

【0013】なお、このように、生体の組織性状を正確
に表すことができない領域が生じる問題は、測定装置の
検出限界や有効測定範囲の限界を超えて測定が行なわれ
たときにも発生し、また、この種の課題は生体組織に励
起光を照射した際に発生する蛍光(自家蛍光)、および
予め蛍光診断薬を吸収させた生体組織に励起光を照射し
た際に発生する蛍光(薬剤蛍光)に共通する課題であ
る。
[0013] The problem that a region in which the tissue properties of the living body cannot be accurately represented also occurs when the measurement is performed beyond the detection limit of the measuring device or the limit of the effective measurement range. In addition, this type of problem is caused by fluorescence (auto-fluorescence) generated when living tissue is irradiated with excitation light, and fluorescence (drug) generated when living tissue is irradiated with excitation light beforehand by absorbing a fluorescent diagnostic agent. Fluorescence).

【0014】本発明は、上記の事情に鑑みてなされたも
のであり、生体の組織性状を表す画像に含まれる生体の
組織性状との対応が不正確な領域を明示することによ
り、信頼性の高い生体の組織性状の観察を行うことがで
きる蛍光画像表示方法および装置を提供することを目的
とするものである。
[0014] The present invention has been made in view of the above circumstances, and shows a region in which the correspondence with the tissue property of the living body included in the image representing the tissue property of the living body is inaccurate. It is an object of the present invention to provide a fluorescent image display method and apparatus capable of observing a high tissue property of a living body.

【0015】[0015]

【課題を解決するための手段】本発明の蛍光画像表示方
法は、励起光の照射を受けた生体組織から発せられた蛍
光を特定の波長領域において検出することにより得られ
た第1の蛍光画像と、蛍光を前記特定の波長領域とは異
なる波長領域において検出することにより得られた第2
の蛍光画像もしくは参照光の照射を受けた生体組織によ
って反射された反射参照光を検出することにより得られ
た反射参照光画像とに基づく演算により、生体組織まで
の距離を補正した組織性状画像を作成し、この組織性状
画像を表示する蛍光画像表示方法において、組織性状画
像に含まれる各画像領域について、これらの領域が規定
値以上の光量を受光した異常受光領域であるか、あるい
は規定値未満の光量を受光した正常受光領域であるかを
各画像のいずれかに基づいて判定し、異常受光領域を正
常受光領域とは異なる形態で表示することを特徴とする
ものである。
According to the fluorescent image display method of the present invention, a first fluorescent image obtained by detecting, in a specific wavelength region, fluorescent light emitted from a living tissue irradiated with excitation light. And a second obtained by detecting fluorescence in a wavelength range different from the specific wavelength range.
By calculating based on the fluorescence reference image or the reflected reference light image obtained by detecting the reflected reference light reflected by the living tissue irradiated with the reference light, the tissue property image in which the distance to the living tissue is corrected is obtained. In the fluorescence image display method for creating and displaying the tissue property image, for each image area included in the tissue property image, whether these areas are abnormal light receiving areas that receive a light amount equal to or greater than a specified value, or less than the specified value Is determined based on any of the images, and whether the abnormal light receiving area is displayed in a different form from the normal light receiving area.

【0016】また、本発明の蛍光画像表示装置は、励起
光の照射を受けた生体組織から発せられた蛍光を特定の
波長領域において検出することにより得られた第1の蛍
光画像と、前記蛍光を前記特定の波長領域とは異なる波
長領域において検出することにより得られた第2の蛍光
画像もしくは参照光の照射を受けた生体組織によって反
射された反射参照光を検出することにより得られた反射
参照光画像とに基づく演算により、生体組織までの距離
を補正した組織性状画像を作成し、この組織性状画像を
表示する蛍光画像表示装置において、組織性状画像に含
まれる各画像領域について、これらの領域が規定値以上
の光量を受光した異常受光領域であるか、あるいは規定
値未満の光量を受光した正常受光領域であるかを各画像
のいずれかに基づいて判定する判定手段と、この判定手
段の出力に応じて異常受光領域を正常受光領域とは異な
る形態で表示する異常領域表示手段とを備えたことを特
徴とするものである。
Further, the fluorescence image display device of the present invention includes a first fluorescence image obtained by detecting fluorescence emitted from a living tissue irradiated with excitation light in a specific wavelength region; In a wavelength region different from the specific wavelength region, or a reflection obtained by detecting reflected reference light reflected by a living tissue irradiated with the reference light or a second fluorescent image. By a calculation based on the reference light image, a tissue property image in which the distance to the biological tissue is corrected is created, and in a fluorescent image display device that displays the tissue property image, each of the image regions included in the tissue property image is Based on one of the images, it is determined whether the area is an abnormal light receiving area receiving a light amount equal to or more than a specified value or a normal light receiving area receiving a light amount less than a specified value. A determination unit Te, the normal light-receiving region of the abnormal light receiving region in response to the output of the determination means is characterized in further comprising an abnormality region display means for displaying in different forms.

【0017】すなわち、本発明による方法および装置
は、規定値以上の光量を受光した信頼性のない異常受光
領域を、正常な領域と区別できる方法で表示するように
したことを特徴とするものである。
That is, the method and the apparatus according to the present invention are characterized in that an unreliable abnormal light receiving area which has received a light amount not less than a specified value is displayed in a manner that can be distinguished from a normal area. is there.

【0018】前記規定値は、反射参照光画像における正
反射光の存在を示す反射参照光の強度や、前記各画像の
いずれかにおける検出の限界や、前記各画像のいずれか
における有効測定範囲の限界に基づいて定められること
が適切である。
The specified value is defined as the intensity of reflected reference light indicating the presence of specularly reflected light in the reflected reference light image, the limit of detection in any of the images, and the effective measurement range in any of the images. It is appropriate to be based on limits.

【0019】前記異常領域表示手段は、組織性状画像が
静止画像として表示されたときにのみ、異常受光領域を
正常受光領域とは異なる形態で表示するものとすること
ができる。
The abnormal area display means may display the abnormal light receiving area in a form different from the normal light receiving area only when the tissue property image is displayed as a still image.

【0020】前記組織性状画像は、蛍光収率あるいは規
格化蛍光強度を表すものとすることが好ましい。
It is preferable that the tissue property image indicates a fluorescence yield or a normalized fluorescence intensity.

【0021】前記各画像の内少なくとも1つが撮像素子
によって光電的に光を検出することにより得られたもの
である場合には、前記検出の限界は撮像素子の出力の飽
和値に相当するものとすることができる。
In a case where at least one of the images is obtained by photoelectrically detecting light by an image pickup device, the limit of the detection corresponds to a saturation value of an output of the image pickup device. can do.

【0022】前記有効測定範囲の限界に基づく規定値
は、所定距離離れた正常組織への励起光の照射によりこ
の正常組織から発せられた蛍光の検出により得られた第
1の蛍光画像と第2の蛍光画像の少なくとも一方の検出
値の平均値にこの検出値のバラツキを表す値を加算した
値に基づいて定められることが適切である。
The specified value based on the limit of the effective measurement range is determined by irradiating excitation light to a normal tissue at a predetermined distance and detecting the first fluorescence image and the second fluorescence image obtained by detecting the fluorescence emitted from the normal tissue. Is appropriately determined based on a value obtained by adding a value representing a variation of the detected value to an average value of at least one detected value of the fluorescent image.

【0023】前記異常領域表示手段は、正常受光領域が
モノクロ表示されている場合には異常受光領域をカラー
表示させ、正常受光領域がカラー表示されている場合に
は異常受光領域をモノクロ表示させたりして区別して表
示することができる。あるいはまた異常受光領域を点滅
して表示するようにしてもよい。
The abnormal area display means displays the abnormal light receiving area in color when the normal light receiving area is displayed in monochrome, and displays the abnormal light receiving area in monochrome when the normal light receiving area is displayed in color. Can be distinguished and displayed. Alternatively, the abnormal light receiving area may be displayed by blinking.

【0024】前記蛍光画像表示装置は、異常受光領域の
表示と非表示とを手動で切り替える表示切替手段を備え
たものとしてもよい。
The fluorescent image display device may include display switching means for manually switching between display and non-display of the abnormal light receiving area.

【0025】前記蛍光画像表示装置は、生体内に挿入す
る内視鏡挿入部を有する内視鏡装置とすることができ
る。
[0025] The fluorescent image display device may be an endoscope device having an endoscope insertion portion to be inserted into a living body.

【0026】前記励起光の光源は、GaN系の半導体レ
ーザとしてもよい。なお、GaN系の半導体レーザの発
振波長は400nmから420nmの範囲であることが
好ましい。
The light source of the excitation light may be a GaN-based semiconductor laser. Note that the oscillation wavelength of the GaN-based semiconductor laser is preferably in the range of 400 nm to 420 nm.

【0027】なお、有効測定範囲とは、蛍光画像表示装
置が有する光学系の性能等に基づいて定められるもので
あり、例えば光学系の被写界深度等によって定められる
生体組織を正しく観察できる範囲等を意味するものであ
る。
Note that the effective measurement range is determined based on the performance of the optical system of the fluorescent image display device, and is, for example, a range in which a living tissue determined by the depth of field of the optical system can be correctly observed. And so on.

【0028】また、所定距離とは有効測定範囲内で最も
生体組織に接近したときの距離を意味するものである。
The predetermined distance means a distance when the living tissue is closest to the living tissue within the effective measurement range.

【0029】また、形態とは、例えば色、形、模様、点
滅の有無等を意味するものである。
The form means, for example, a color, a shape, a pattern, the presence or absence of blinking, and the like.

【0030】また、組織性状画像に含まれる各画像領域
とは、組織性状画像に含まれる画素の領域、あるいは複
数の画素が集まった領域等を意味するものである。
Each image area included in the tissue property image means an area of pixels included in the tissue property image, an area where a plurality of pixels are gathered, or the like.

【0031】また、蛍光収率は、必ずしも「励起光の照
射を受けた生体組織から発生した蛍光の強度とこの生体
組織が受光した励起光の強度との比率」によって求めら
れた値である必要はなく、代替光等を用いることにより
近似的に求められた値であってもかまわない。なお、上
記近似的に求められた値も蛍光収率と呼ぶことにする。
The fluorescence yield is necessarily a value determined by “the ratio of the intensity of the fluorescence generated from the living tissue irradiated with the excitation light to the intensity of the excitation light received by the living tissue”. However, a value approximately obtained by using an alternative light or the like may be used. Note that the value approximately determined above is also referred to as the fluorescence yield.

【0032】[0032]

【発明の効果】本発明の蛍光画像表示方法および装置に
よれば、第1の蛍光画像と、第2の蛍光画像もしくは反
射参照光画像とに基づく演算により生体組織の組織性状
を表す組織性状画像を作成し、この組織性状画像を表示
するにあたり、規定値以上の光量を受光した異常受光領
域を規定値未満の光量を受光した正常受光領域とは異な
る形態で表示するようにしたので、規定値以上の光量を
受光したために生体の組織性状との対応が不正確となっ
た異常受光領域と生体の組織性状との対応が正確な正常
受光領域とを容易に識別することができ、正常受光領域
のみを観察対象とすることができるので、信頼性の高い
生体の組織性状の観察を行うことができる。
According to the fluorescent image display method and apparatus of the present invention, a tissue property image representing a tissue property of a living tissue by calculation based on the first fluorescence image and the second fluorescence image or the reflected reference light image. In displaying this tissue characterization image, the abnormal light receiving area receiving the light amount equal to or more than the specified value is displayed in a different form from the normal light receiving area receiving the light amount less than the specified value. The abnormal light receiving area in which the correspondence with the tissue property of the living body becomes inaccurate due to the reception of the above light amount can be easily distinguished from the normal light receiving area in which the correspondence with the tissue property of the living body is accurate. Since only the observation target can be set as the observation target, highly reliable observation of the tissue property of the living body can be performed.

【0033】また、規定値を反射参照光画像における正
反射光の存在を示す反射参照光の強度に基づいて定めた
り、前記各画像のいずれかにおける検出の限界に基づい
て定めたり、前記各画像のいずれかにおける有効測定範
囲の限界に基づいて定めたりすれば、異常受光領域をよ
り正確に定めることができる。
The specified value may be determined based on the intensity of the reflected reference light indicating the presence of the specularly reflected light in the reflected reference light image, or may be determined based on the detection limit in any one of the images. If the determination is made based on the limit of the effective measurement range in any one of the above, the abnormal light receiving area can be more accurately determined.

【0034】また、異常領域表示手段を、組織性状画像
を静止画像として表示させるときにのみ、異常受光領域
を正常受光領域とは異なる形態として表示させるものと
すれば、例えば、観察対象となる生体の部位を探してい
るときには異常受光領域は表示させずに動画像として表
示させ、観察対象部位を探し当てた後、その組織性状の
詳細を観察するために静止画像として組織性状を表示さ
せたときにのみ異常受光領域を表示させることができ
る。すなわち、観察者が観察対象部位を探している最中
で生体の組織性状に注目していないときには異常受光領
域の表示が視野に入ることがないので観察者の負担が軽
減される。また、観察対象部位を探しているときには高
速な演算処理を行い実時間で(動画像として)異常受光
領域を表示させる必要がなく、マイクロプロセッサおよ
びメモリ等の装置の負担も軽減される。
Further, if the abnormal area display means displays the abnormal light receiving area as a form different from the normal light receiving area only when displaying the tissue property image as a still image, for example, a living body to be observed can be obtained. When searching for the part, the abnormal light receiving area is displayed as a moving image without displaying it, and after locating the observation target part, when displaying the tissue property as a still image to observe the details of the tissue property, Only the abnormal light receiving area can be displayed. That is, when the observer is not looking at the tissue properties of the living body while searching for the observation target site, the display of the abnormal light receiving area does not enter the visual field, so that the burden on the observer is reduced. Further, when searching for the observation target site, it is not necessary to display the abnormal light receiving area in real time (as a moving image) by performing high-speed arithmetic processing, thereby reducing the load on devices such as a microprocessor and a memory.

【0035】また、前記組織性状画像を、蛍光収率ある
いは規格化蛍光強度を表すものとすれば、より信頼性の
高い組織性状の観察を行うことができる。すなわち、蛍
光収率および規格化蛍光強度は生体の組織性状を反映し
た値であることが知られているので、組織性状画像を蛍
光収率により近似させて求めた方が、より信頼性の高い
生体の組織性状の観察を行うことができる。
Further, if the tissue property image indicates the fluorescence yield or the normalized fluorescence intensity, the tissue property can be observed with higher reliability. That is, since it is known that the fluorescence yield and the normalized fluorescence intensity are values that reflect the tissue properties of the living body, it is more reliable to obtain the tissue property image by approximating it with the fluorescence yield. It is possible to observe the tissue properties of the living body.

【0036】また、前記各画像の内少なくとも1つが撮
像素子によって光電的に光を検出することにより得られ
たものであり、この検出の限界を、撮像素子の出力の飽
和値に相当するものとすれば、規定値が明確となり異常
受光領域をより正確に定めることができる。
Further, at least one of the images is obtained by photoelectrically detecting light by the image sensor, and the limit of this detection is defined as a value corresponding to the saturation value of the output of the image sensor. By doing so, the specified value becomes clear and the abnormal light receiving area can be determined more accurately.

【0037】また、有効測定範囲の限界に基づく規定値
を、所定距離離れた正常組織への励起光の照射により正
常組織から発せられた蛍光の検出により得られた第1の
蛍光画像と第2の蛍光画像の少なくとも一方の検出値の
平均値にこの検出値のバラツキを表す値を加算した値に
基づいて定められたものとすれば、有効測定範囲の規定
値が統計的に求められ、異常受光領域をより正確に定め
ることができる。
Further, a specified value based on the limit of the effective measurement range is obtained by combining a first fluorescence image and a second fluorescence image obtained by detecting fluorescence emitted from normal tissue by irradiating excitation light to normal tissue at a predetermined distance. If the value is determined based on the value obtained by adding the value representing the variation of this detection value to the average value of at least one of the detection values of the fluorescence image of The light receiving area can be determined more accurately.

【0038】また、異常領域表示手段を、正常受光領域
がモノクロ表示されている場合には異常受光領域をカラ
ー表示させ、正常受光領域がカラー表示されている場合
には異常受光領域をモノクロ表示させるものとしたり、
異常受光領域の表示を点滅させるものとしたりすれば、
異常受光領域をより確実に識別することができる。
The abnormal area display means displays the abnormal light receiving area in color when the normal light receiving area is displayed in monochrome, and displays the abnormal light receiving area in monochrome when the normal light receiving area is displayed in color. What to do
If the display of the abnormal light receiving area is made to blink,
The abnormal light receiving area can be more reliably identified.

【0039】また、蛍光画像表示装置を、異常受光領域
の表示と非表示とを手動で切り替える表示切替手段を備
えたものとすれば、観察者がより観察しやすいように生
体の組織性状を表示させることができる。
Further, if the fluorescent image display device is provided with display switching means for manually switching between display and non-display of the abnormal light receiving region, the tissue characteristics of the living body can be displayed so that the observer can easily observe the tissue. Can be done.

【0040】また、蛍光画像表示装置を生体内に挿入す
る内視鏡挿入部を有する内視鏡装置とすれば、生体内部
をより容易に観察することができる。
Further, if an endoscope apparatus having an endoscope insertion portion for inserting the fluorescent image display apparatus into a living body is used, the inside of the living body can be more easily observed.

【0041】また、励起光の光源をGaN系の半導体レ
ーザとすれば、装置を小型化し、低コスト化することが
できる。
If the light source of the excitation light is a GaN-based semiconductor laser, the size of the apparatus can be reduced and the cost can be reduced.

【0042】[0042]

【発明の実施の形態】以下、本発明の具体的な実施の形
態について、図面を用いて説明する。図1は、本発明の
蛍光画像表示方法を実施する蛍光画像表示装置を内視鏡
に適用した蛍光内視鏡装置の第1の実施の形態の概略構
成を示す図である。
DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, specific embodiments of the present invention will be described with reference to the drawings. FIG. 1 is a diagram illustrating a schematic configuration of a first embodiment of a fluorescent endoscope apparatus in which a fluorescent image display apparatus that performs the fluorescent image display method of the present invention is applied to an endoscope.

【0043】本発明の第1の実施の形態による蛍光内視
鏡装置800は、励起光Leの照射を受けた生体組織1
から発せられた蛍光を特定の波長領域において検出する
ことにより得られた第1の蛍光画像である蛍光画像デー
タDkと、参照光Lnの照射を受けた生体組織1によっ
て反射された反射参照光を検出することにより得られた
反射参照光画像である反射参照光画像データDnとに基
づく演算により、生体組織1までの距離を補正した生体
組織1の組織性状を表す組織性状画像である組織性状画
像データDDを作成するものである。この組織性状画像
データDDを表示するにあたり、組織性状画像データD
Dに含まれる各画像領域について、これらの画像領域が
規定値以上の光量を受光した異常受光領域であるか、あ
るいは規定値未満の光量を受光した正常受光領域である
かを、前記各画像、すなわち第1の蛍光画像である蛍光
画像データDkと反射参照光画像である反射参照光画像
データDnのいずれかに基づいて判定手段である正反射
光領域認識器41が判定する。この判定手段である正反
射光領域認識器41の出力に応じて、異常領域表示手段
である組織性状画像合成器45が異常受光領域を正常受
光領域とは異なる形態で表示する。なお、上記規定値
は、反射参照光画像データDnにおける正反射光の存在
を示す反射参照光の強度に基づいて定められるものであ
り、規定値以上の光量を受光した異常受光領域は正反射
光領域として判定される。
The fluorescence endoscope apparatus 800 according to the first embodiment of the present invention includes a living tissue 1 irradiated with excitation light Le.
Image data Dk, which is the first fluorescence image obtained by detecting the fluorescence emitted from in a specific wavelength region, and the reflected reference light reflected by the living tissue 1 irradiated with the reference light Ln. A tissue property image that is a tissue property image representing the tissue property of the living tissue 1 in which the distance to the living tissue 1 has been corrected by an operation based on the reflected reference light image data Dn that is the reflected reference light image obtained by the detection. This is for creating data DD. In displaying the tissue property image data DD, the tissue property image data D
For each image area included in D, whether each of these image areas is an abnormal light receiving area that has received a light amount equal to or more than a specified value or a normal light receiving area that has received a light amount less than a specified value, That is, the regular reflection light area recognizing unit 41 as the determination unit determines based on one of the fluorescence image data Dk as the first fluorescence image and the reflection reference light image data Dn as the reflection reference light image. In response to the output of the regular reflection light area recognition device 41 as the determination means, the tissue property image synthesizer 45 as the abnormal area display means displays the abnormal light reception area in a form different from the normal light reception area. The specified value is determined based on the intensity of the reflected reference light indicating the presence of the specularly reflected light in the reflected reference light image data Dn. It is determined as an area.

【0044】上記蛍光内視鏡装置800は、2つの互い
に異なる波長領域の光を射出する光源を備えた光源ユニ
ット100、光源ユニット100から射出された光を後
述する照射光ファイバ21を介して生体組織1に照射
し、これらの光の照射を受けた生体組織1によって反射
された反射光による像(以後反射光像Zhと呼ぶ)およ
び生体組織1から発生した蛍光による像(以後蛍光像Z
kと呼ぶ)を撮像する内視鏡ユニット200、内視鏡ユ
ニット200によって撮像された反射光像Zhおよび蛍
光像Zkをデジタル値によって構成される2次元画像デ
ータに変換して出力する中継ユニット300、および中
継ユニット300から出力された2次元画像データに基
づく演算および正反射光領域の判定を行ない生体の組織
性状を表す2次元画像データを得、この2次元画像デー
タを映像信号に変換して出力する上記正反射光領域認識
器41と組織性状画像合成器45とを有する演算ユニッ
ト400を備えている。
The fluorescent endoscope apparatus 800 includes a light source unit 100 having a light source for emitting light in two different wavelength regions, and a light emitted from the light source unit 100 is applied to a living body via an irradiation optical fiber 21 described later. The tissue 1 is irradiated, and an image based on reflected light reflected by the living tissue 1 irradiated with the light (hereinafter referred to as a reflected light image Zh) and an image based on fluorescence generated from the living tissue 1 (hereinafter referred to as a fluorescent image Z)
k), and a relay unit 300 that converts the reflected light image Zh and the fluorescent light image Zk captured by the endoscope unit 200 into two-dimensional image data composed of digital values and outputs the two-dimensional image data. And a calculation based on the two-dimensional image data output from the relay unit 300 and a determination of the specular reflection area are performed to obtain two-dimensional image data representing the tissue properties of the living body. The two-dimensional image data is converted into a video signal. An arithmetic unit 400 having the regular reflection light area recognizer 41 and the tissue property image synthesizer 45 for outputting is provided.

【0045】光源ユニット100には、波長780nm
近傍の近赤外領域の光の波長と可視領域の光の波長とを
含む白色光Lwを射出する白色光光源11および410
nmの波長の励起光Leを射出する励起光光源12が配
設されており、白色光光源11から射出された白色光L
wは、異なる波長透過特性を持つ複数のフィルタが一体
に結合されモータ13の主軸に取り付けられた回転フィ
ルタ14と、410nm以下の波長領域の光を反射し4
10nmを越える波長領域の光を透過するダイクロイッ
クミラー15とを透過して集光レンズ16によって集光
された後、照射光ファイバ21の端面21aに入射す
る。一方、励起光光源12から射出された励起光Leは
反射ミラー17およびダイクロイックミラー15によっ
て反射された後、集光レンズ16により集光されて照射
光ファイバの端面21aに入射する。
The light source unit 100 has a wavelength of 780 nm.
White light sources 11 and 410 that emit white light Lw including the wavelength of light in the near infrared region and the wavelength of light in the visible region in the vicinity
An excitation light source 12 that emits an excitation light Le having a wavelength of nm is provided, and the white light L emitted from the white light source 11 is provided.
w denotes a rotary filter 14 in which a plurality of filters having different wavelength transmission characteristics are integrally coupled and is attached to a main shaft of a motor 13 and reflects light in a wavelength region of 410 nm or less.
After being transmitted through the dichroic mirror 15 that transmits light in a wavelength region exceeding 10 nm and condensed by the condenser lens 16, the light is incident on the end face 21 a of the irradiation optical fiber 21. On the other hand, the excitation light Le emitted from the excitation light source 12 is reflected by the reflection mirror 17 and the dichroic mirror 15 and then condensed by the condenser lens 16 to enter the end face 21a of the irradiation optical fiber.

【0046】なお、回転フィルタ14は図2に示すよう
に、近赤外の波長領域の光のみを透過させるNIRフィ
ルタ、赤色の波長領域の光のみを透過させるRフィル
タ、緑色の波長領域の光のみを透過させるGフィルタ、
青色の波長領域の光のみを透過させるBフィルタおよび
光を遮断するSKフィルタ(遮光フィルタ)からなり、
この回転フィルタ14が回転することにより白色光光源
11から射出された白色光Lwは、図3のタイミングチ
ャートに示すように近赤外光Ln、赤色光Lr、緑色光
Lg、青色光Lbに分離され(以後近赤外光Lnを参照
光Lnと呼び、赤色光Lr、緑色光Lg、青色光Lbを
合わせて面順次光Lmと呼ぶ)、これらの分離された光
は順次照射光ファイバ21の端面21aに入射する。そ
して、SKフィルタによって白色光Lwが遮光されてい
る間に励起光光源12から射出された励起光Leはミラ
ー17およびダイクロイックミラー15を経由して端面
21aに入射する。
As shown in FIG. 2, the rotating filter 14 includes an NIR filter that transmits only light in a near-infrared wavelength range, an R filter that transmits only light in a red wavelength range, and a light in a green wavelength range. G filter that transmits only
It consists of a B filter that transmits only light in the blue wavelength region and an SK filter (light blocking filter) that blocks light.
The white light Lw emitted from the white light source 11 by the rotation of the rotary filter 14 is separated into near-infrared light Ln, red light Lr, green light Lg, and blue light Lb as shown in the timing chart of FIG. (Hereinafter, the near-infrared light Ln is referred to as reference light Ln, and the red light Lr, green light Lg, and blue light Lb are collectively referred to as surface-sequential light Lm). The light enters the end face 21a. The excitation light Le emitted from the excitation light source 12 while the white light Lw is blocked by the SK filter enters the end face 21a via the mirror 17 and the dichroic mirror 15.

【0047】内視鏡ユニット200は、屈曲自在な先端
部201と、光源ユニット100および中継ユニット3
00が接続された操作部202とから構成され、照射光
ファイバ21が先端部201から操作部202に亘って
その内部に敷設されている。
The endoscope unit 200 includes a bendable tip 201, a light source unit 100 and a relay unit 3.
The irradiation optical fiber 21 is laid from the distal end 201 to the operation unit 202 inside the operation unit 202.

【0048】照射光ファイバ21の端面21aに入射し
た参照光Ln、面順次光Lmおよび励起光Leは、照射
光ファイバ21の内部を伝搬して端面21bから射出さ
れ照射レンズ22を通して生体組織1に照射される。
The reference light Ln, the plane-sequential light Lm, and the excitation light Le incident on the end face 21a of the irradiation optical fiber 21 propagate inside the irradiation optical fiber 21, exit from the end face 21b, and enter the living tissue 1 through the irradiation lens 22. Irradiated.

【0049】参照光Lnおよび面順次光Lmの照射を受
けた生体組織1によって反射された反射参照光による生
体組織1の像(以後、反射参照光像Znと呼ぶ)および
反射面順次光による生体組織1の像(以後、面順次光像
Zmと呼ぶ)は、対物レンズ23によって撮像素子25
の受光面上に結像され撮像されて電気的な画像信号に変
換されケーブル26によって中継ユニット300に伝送
される。同様に励起光Leが照射された生体組織1から
発生した410nmを超え700nm近傍に亘る波長領
域の蛍光によって形成される蛍光像Zkも、対物レンズ
23によって撮像素子25の受光面上に結像され撮像さ
れて電気的な画像信号に変換されケーブル26によって
中継ユニット300に伝送される。なお、対物レンズ2
3と撮像素子25との間には410nmの波長を遮断し
410nmを越える波長領域の光を透過する励起光カッ
トフィルタ24が配設されており蛍光像Zkに混入して
対物レンズに入射した反射励起光(励起光の反射光)は
この励起光カットフィルタ24によって遮断される。
The image of the living tissue 1 by the reflected reference light reflected by the living tissue 1 irradiated with the reference light Ln and the surface sequential light Lm (hereinafter referred to as a reflected reference light image Zn) and the living body by the reflected surface sequential light An image of the tissue 1 (hereinafter, referred to as a plane-sequential light image Zm) is formed by an objective lens 23 through an image sensor 25.
The image is formed on the light receiving surface, is captured, is converted into an electric image signal, and is transmitted to the relay unit 300 via the cable 26. Similarly, a fluorescence image Zk formed by fluorescence in a wavelength region exceeding 410 nm and around 700 nm generated from the living tissue 1 irradiated with the excitation light Le is also formed on the light receiving surface of the image sensor 25 by the objective lens 23. The image is captured, converted into an electric image signal, and transmitted to the relay unit 300 via the cable 26. The objective lens 2
An excitation light cut filter 24 that blocks a wavelength of 410 nm and transmits light in a wavelength region exceeding 410 nm is disposed between the imaging element 3 and the imaging element 25, and is mixed with the fluorescent image Zk and reflected by the objective lens. The excitation light (reflected light of the excitation light) is blocked by the excitation light cut filter 24.

【0050】中継ユニット300には、ケーブル26に
よって伝送された各画像信号をデジタル値に変換するA
/D変換器31、A/D変換器31によってデジタル値
に変換された反射参照光像Znの2次元画像データを反
射参照光画像データDnとして記憶する反射参照光画像
メモリ32、A/D変換器31によってデジタル値に変
換された蛍光像Znの2次元画像データを蛍光画像デー
タDkとして記憶する蛍光画像メモリ33、およびA/
D変換器31によってデジタル値に変換された面順次光
像Zmの2次元画像データを面順次光画像データDmと
して記憶する面順次光画像メモリ34が配設されてい
る。
A relay unit 300 converts each image signal transmitted by the cable 26 into a digital value.
A / D converter 31, a reflected reference light image memory 32 for storing two-dimensional image data of the reflected reference light image Zn converted into a digital value by the A / D converter 31 as reflected reference light image data Dn, and an A / D converter Image memory 33 for storing two-dimensional image data of the fluorescent image Zn converted into digital values by the imager 31 as fluorescent image data Dk, and A /
A plane-sequential optical image memory 34 for storing two-dimensional image data of the plane-sequential optical image Zm converted into a digital value by the D converter 31 as plane-sequential optical image data Dm is provided.

【0051】演算ユニット400には、反射参照光画像
データDnを入力して、この反射参照光画像データDn
に含まれる正反射光の影響を受けた領域を認識する正反
射光領域認識器41、正反射光領域認識器41によって
認識された正反射光領域を表す正反射光領域データDs
hを記憶する正反射光領域メモリ42、反射参照光画像
データDnと蛍光画像データDkとを入力し生体の組織
性状を表す蛍光収率画像データDssを求める蛍光収率
演算器43、および蛍光収率演算器43によって求めら
れた蛍光収率画像データDssを記憶する蛍光収率画像
メモリ44が配設されており、正反射光領域メモリ42
に記憶された正反射光領域データDsh、蛍光収率画像
メモリ44に記憶された蛍光収率画像データDssおよ
び面順次光画像メモリ34に記憶された面順次光画像デ
ータDmは組織性状画像合成器45に入力され、それぞ
れの画像データが重ね合わされて1つの画像になるよう
に変換され、さらに映像信号処理回路46によって映像
信号に変換されて出力される。
The operation unit 400 receives the reflected reference light image data Dn and inputs the reflected reference light image data Dn.
, A regular reflection light region recognizer 41 for recognizing a region affected by the regular reflection light included in the regular reflection light region recognition unit 41, and regular reflection light region data Ds representing the regular reflection light region recognized by the regular reflection light region recognition unit 41
h, a regular reflection light area memory 42, a reflection reference light image data Dn and a fluorescence image data Dk, and a fluorescence yield calculator 43 for obtaining fluorescence yield image data Dss representing tissue properties of a living body, and a fluorescence collector A fluorescence yield image memory 44 for storing the fluorescence yield image data Dss obtained by the rate calculator 43 is provided, and a regular reflection light area memory 42 is provided.
Is stored in the fluorescence yield image memory 44, the fluorescence yield image data Dss stored in the fluorescence yield image memory 44, and the plane-sequential light image data Dm stored in the plane-sequential light image memory 34. The image data is converted into one image by superimposing the respective image data, and further converted into a video signal by a video signal processing circuit 46 and output.

【0052】演算ユニット400から出力された映像信
号は表示器500に入力され表示される。
The video signal output from the arithmetic unit 400 is input to the display 500 and displayed.

【0053】次に、上記実施の形態における作用につい
て説明する。なお、上記構成は、蛍光画像を得るために
波長410nmの励起光を生体組織に照射し、反射参照
光画像を得るために波長780nmの近赤外光を参照光
として生体組織に照射するものであり、面順次光は生体
組織の色および形を観察するために付加的に生体組織に
照射するものである。
Next, the operation of the above embodiment will be described. The above configuration irradiates living tissue with excitation light having a wavelength of 410 nm in order to obtain a fluorescence image, and irradiates living tissue with near-infrared light having a wavelength of 780 nm as reference light in order to obtain a reflected reference light image. Yes, the field sequential light additionally irradiates the living tissue to observe the color and shape of the living tissue.

【0054】光源ユニット100から射出され内視鏡ユ
ニット200を経由して照射された励起光Leによって
生体組織1から発生した蛍光により形成された生体組織
1の蛍光像Zkと、光源ユニット100から射出され内
視鏡ユニット200を経由して照射された参照光Lnお
よび面順次光Lmが生体組織1によって反射されること
により形成された生体組織1の反射参照光像Znおよび
面順次光像Zmとは撮像素子25によって撮像され、中
継ユニット300に伝送されてデジタル値からなる2次
元画像データに変換され、それぞれ蛍光画像メモリ3
3、反射参照光画像メモリ32および面順次光画像メモ
リ34に記憶される。
The fluorescence image Zk of the living tissue 1 formed by the fluorescent light generated from the living tissue 1 by the excitation light Le emitted from the light source unit 100 and irradiated through the endoscope unit 200, and emitted from the light source unit 100 The reflected reference light image Zn and the plane-sequential light image Zm of the living tissue 1 formed by the reference light Ln and the plane-sequential light Lm irradiated through the endoscope unit 200 being reflected by the living tissue 1. Are imaged by the image sensor 25, transmitted to the relay unit 300, and converted into two-dimensional image data composed of digital values.
3. Stored in the reflection reference light image memory 32 and the frame sequential light image memory 34.

【0055】反射参照光画像メモリ32に記憶された反
射参照光像Znを表す反射参照光画像データDnは正反
射光領域認識器41に入力され、この反射参照光像Zn
の中の強度が極めて高い領域に対応する反射参照光画像
データDnの中の画素領域、すなわち図4に示すように
各画素位置における強度の中で予め設定された閾値Q以
上となる強度を持つ画素領域Zが正反射光領域として認
識され、この領域は正反射光領域データDshとして正
反射光領域メモリ42に記憶される。
The reflection reference light image data Dn representing the reflection reference light image Zn stored in the reflection reference light image memory 32 is input to the regular reflection light region recognizer 41, and this reflection reference light image Zn
In the pixel area in the reflected reference light image data Dn corresponding to the area where the intensity is extremely high, that is, as shown in FIG. 4, the intensity at each pixel position is equal to or higher than a predetermined threshold Q. The pixel region Z is recognized as a regular reflection light region, and this region is stored in the regular reflection light region memory 42 as regular reflection light region data Dsh.

【0056】一方、上記反射参照光画像メモリ32に記
憶された反射参照光画像データDnおよび蛍光画像メモ
リ33に記憶された蛍光像Zkを表す蛍光画像データD
kは蛍光収率演算器43に入力され、同じ画素位置に対
応する蛍光画像データDkの値と反射参照光画像データ
Dnの値との間で除算を行うことにより(すなわち、蛍
光画像データDkの値と反射参照光画像データDnの値
との比率を求めることにより)蛍光収率画像データDs
sが求められる。すなわちDss=Dk/Dnの演算が
全ての画素位置について行われ蛍光収率画像データDs
sの値が求められる。
On the other hand, the reflected reference light image data Dn stored in the reflected reference light image memory 32 and the fluorescent image data Dk representing the fluorescent image Zk stored in the fluorescent image memory 33.
k is input to the fluorescence yield calculator 43 and is divided by the value of the fluorescence image data Dk corresponding to the same pixel position and the value of the reflected reference light image data Dn (that is, by dividing the value of the fluorescence image data Dk). The fluorescence yield image data Ds)
s is required. That is, the operation of Dss = Dk / Dn is performed for all pixel positions, and the fluorescence yield image data Ds
The value of s is determined.

【0057】なお、この蛍光収率画像データDssは、
生体組織が受光した励起光の強度とこの励起光の照射に
より発生した蛍光の強度との比率である蛍光収率を表す
2次元画像データと同等のものであり、生体組織が受光
した励起光の強度を直接測定することは難しいので、生
体組織によって反射された反射参照光の強度を生体組織
が受光した励起光の強度の代わりに用いて蛍光収率を求
めたものである。そして、この蛍光収率画像データDs
sは蛍光収率画像メモリ44に記憶される。
The fluorescence yield image data Dss is
It is equivalent to two-dimensional image data representing the fluorescence yield, which is the ratio of the intensity of the excitation light received by the living tissue to the intensity of the fluorescence generated by the irradiation of the excitation light. Since it is difficult to directly measure the intensity, the fluorescence yield is obtained by using the intensity of the reflected reference light reflected by the living tissue instead of the intensity of the excitation light received by the living tissue. Then, the fluorescence yield image data Ds
s is stored in the fluorescence yield image memory 44.

【0058】次に、このようにして求められた、正反射
光領域データDsh、蛍光収率画像データDssおよび
面順次光画像データDmは組織性状画像合成器45に入
力さる。ここで、正反射光領域データDshは図5
(a)に示すように参照光が生体組織で正反射された領
域P1,P2を表すデータであり、蛍光収率画像データ
Dssは生体の組織性状を表し図5(b)に示すように
病変組織の領域P3,P4を示す画像データで、正反射
光の影響により病変組織と類似した形態で表示される正
反射光の影響を受けた領域P1′,P2′も含む画像デ
ータである。また、面順次光画像データDmは図5
(c)に示すように生体組織の通常観察される色および
形状を表す画像データでありP5、P6は面順次光が生
体組織で正反射され輝点として表された領域を示す。
Next, the specularly reflected light region data Dsh, the fluorescence yield image data Dss, and the frame sequential light image data Dm thus obtained are input to the tissue property image synthesizer 45. Here, the regular reflection light area data Dsh is shown in FIG.
(A) is data representing the areas P1 and P2 where the reference light is specularly reflected by the living tissue, and the fluorescence yield image data Dss represents the tissue properties of the living body and is a lesion as shown in FIG. 5 (b). This is image data showing regions P3 and P4 of the tissue, and also includes regions P1 'and P2' which are displayed in a form similar to the diseased tissue due to the effect of specular reflection and are affected by specular reflection. The plane-sequential optical image data Dm is shown in FIG.
As shown in (c), the image data represents the normally observed color and shape of the living tissue, and P5 and P6 indicate areas where surface-sequential light is specularly reflected by the living tissue and represented as bright spots.

【0059】上記3種類のデータが組織性状画像合成器
45に入力されると、図6に示すように、面順次光画像
データDmの表す生体組織が通常観察される画像(明る
い部分が0に近い値を持ち暗い部分が大きな値を持つ画
像)上に、蛍光収率画像データDssによって病変組織
として識別された領域P3およびP4を有する画像(正
常組織が0に近い値を持ち病変組織が大きな値を持つ画
像)が加えられる。そして、正反射光領域データDsh
が表すP1、P2の領域、すなわち面順次光画像データ
Dmが表すP5、P6および蛍光収率画像データDss
が表すP1′、P2′と重なる領域は、病変組織として
識別されたP3およびP4の領域と明確に区別ができる
ように予め定められた特定の正反射光表示態様W1およ
びW2(領域の周辺に突起を持ち領域内が暗く表示され
る表示態様)によって表示される図7に示すような画像
が合成され組織性状画像データDDとして出力される。
When the above three types of data are input to the tissue characterization image synthesizer 45, as shown in FIG. 6, an image in which the living tissue represented by the frame sequential optical image data Dm is normally observed (the bright portion becomes zero). An image having areas P3 and P4 identified as the diseased tissue by the fluorescence yield image data Dss (an image having a value close to 0 for a normal tissue and a large diseased tissue) on a similar value and an image having a large dark portion. Valued image) is added. Then, the regular reflection light area data Dsh
, P5, P6 and the fluorescence yield image data Dss represented by the field sequential light image data Dm.
Are overlapped with the regions P1 'and P2', which are specified as specific regular reflection light display modes W1 and W2 (around the regions around the regions) so that they can be clearly distinguished from the regions P3 and P4 identified as diseased tissues. An image as shown in FIG. 7 displayed in a display mode having projections and the area is displayed darkly) is synthesized and output as tissue property image data DD.

【0060】そして組織性状画像データDDは映像信号
処理回路46により映像信号に変換され演算ユニット4
00から出力されて表示器500によって表示される。
この正反射光領域を表す予め定められた特定の正反射光
表示態様は、生体の組織性状を病変組織と区別し得る表
示態様とすれば良く、例えば正反射光領域を枠で囲い面
順次光画像データに含まれる正反射光による輝点がこの
枠内に見えるような表示形態であっても良い。また、上
記表示される画像は、内視鏡先端部が移動していても、
常に組織性状を表す画像と共に正反射光領域が予め定め
られた特定の表示形態により表示されるので信頼性の高
い生体の組織性状の観察を行うことができる。
The tissue property image data DD is converted into a video signal by the video signal processing circuit 46,
00 and is displayed by the display 500.
The predetermined specific specular reflection display mode representing the specular reflection region may be a display mode capable of distinguishing the tissue properties of the living body from the diseased tissue. The display form may be such that a bright spot due to the regular reflection light included in the image data can be seen in this frame. In addition, the displayed image is displayed even if the endoscope tip is moving.
Since the regular reflection light area is always displayed in a predetermined specific display mode together with the image representing the tissue property, the tissue property of the living body can be observed with high reliability.

【0061】なお、上記組織性状画像を動画像として観
察しているときには上記正反射光領域を予め定められた
表示形態により表示する処理を行わず、静止画像として
観察するときのみ正反射光領域を予め定められた表示形
態により表示する処理を行なうようにすることもでき
る。
When the tissue property image is observed as a moving image, the process of displaying the specular reflection area in a predetermined display mode is not performed, and the specular reflection area is only displayed when observing as a still image. Processing for displaying in a predetermined display mode may be performed.

【0062】また、上記組織性状を表す組織性状画像デ
ータDDは正反射光領域を表す正反射領域データDsh
および生体組織の組織性状を表す蛍光収率画像データD
ssの2種類のデータを用いて作成されたものであって
もよい。この場合には、図8に示すように上記蛍光像Z
kおよび反射参照光像Znを対物レンズ23および励起
光カットフィルタ24を通して一旦イメージファイバ2
7の端面27cに結像させイメージファイバ27内を通
して他端の端面27dに伝播し、結像レンズ35および
可視光の波長領域と近赤外の波長領域とを分離するダイ
クロイックミラー36を介して、それぞれの波長領域毎
に蛍光像Zkと反射参照光像Znとに分離して撮像素子
37および撮像素子38上に結像させ撮像して画像信号
を得ることができる。
The tissue property image data DD representing the tissue property is regular reflection area data Dsh representing a regular reflection light area.
And fluorescence yield image data D representing tissue properties of living tissue
It may be created using two types of data of ss. In this case, as shown in FIG.
k and the reflected reference light image Zn are temporarily passed through the objective lens 23 and the excitation light cut filter 24 to the image fiber 2.
7, through the image fiber 27, propagates through the image fiber 27 to the other end surface 27d, and passes through the imaging lens 35 and the dichroic mirror 36 that separates the visible light wavelength region from the near-infrared wavelength region. An image signal can be obtained by separating the image into a fluorescent image Zk and a reflected reference light image Zn for each wavelength region, forming an image on the image sensor 37 and the image sensor 38, and imaging.

【0063】なお、上記組織性状画像は生体の組織性状
を表す蛍光画像と正反射光領域を表す反射参照光画像と
に基づいて求められたものであればどのような種類の画
像であっても良く、例えば、正反射光領域を表す反射参
照光画像として410nmの波長の励起光あるいは赤色
の波長領域の参照光を生体組織に照射することによって
作成された正反射光領域を表す反射参照光画像を用いた
り、生体の組織性状を表す蛍光画像として励起光の照射
により生体組織から発生した蛍光の特定の波長領域の強
度をこの蛍光の全波長領域の強度で除算した規格化蛍光
強度を表す画像等を用いたりすることにより組織性状画
像を求めることもできる。ただし、この規格化蛍光強度
を求めるためには蛍光像を特定の波長領域で分光して検
出する光学系を付加する必要がある。
The tissue property image may be any type of image as long as it is obtained based on the fluorescence image representing the tissue property of the living body and the reflection reference light image representing the regular reflection light area. For example, a reflection reference light image representing a specular reflection light region created by irradiating living tissue with excitation light having a wavelength of 410 nm or reference light having a red wavelength region as a reflection reference light image representing a regular reflection light region. Or a fluorescence image representing the tissue properties of the living body, an image representing the normalized fluorescence intensity obtained by dividing the intensity of the specific wavelength region of the fluorescence generated from the living tissue by the irradiation of the excitation light by the intensity of the entire wavelength region of the fluorescence. Or the like can be used to obtain a tissue property image. However, in order to obtain the normalized fluorescence intensity, it is necessary to add an optical system for spectrally detecting the fluorescence image in a specific wavelength region and detecting the fluorescence image.

【0064】また、前記正反射光領域の認識方式は上記
実施の形態で述べた方式に限らず微分オペレータを用い
た画像処理等を採用して正反射が生じた領域を認識して
もよい。
The method of recognizing the specularly reflected light area is not limited to the method described in the above embodiment, and an area where specular reflection has occurred may be recognized by employing image processing or the like using a differential operator.

【0065】また、本発明の蛍光画像測定方法および装
置は、蛍光内視鏡に限らずコルポスコープ、手術用顕微
鏡等にも適用することができる。
The fluorescence image measuring method and apparatus of the present invention can be applied not only to a fluorescence endoscope but also to a colposcope, a surgical microscope and the like.

【0066】次に、本発明による蛍光画像表示方法を実
施する蛍光画像表示装置を内視鏡に適用した蛍光内視鏡
装置の第2の実施の形態について図9を用いて説明す
る。
Next, a description will be given of a second embodiment of a fluorescent endoscope apparatus in which the fluorescent image display apparatus for performing the fluorescent image display method according to the present invention is applied to an endoscope, with reference to FIG.

【0067】第2の実施の形態の蛍光内視鏡装置900
は、励起光の照射を受けた生体組織から発せられた蛍光
を特定の波長領域である波長帯域430nm〜530n
mにおいて検出することにより得られた第2の蛍光像で
ある狭帯域蛍光画像と、上記蛍光を上記特定の波長領域
とは異なる波長領域である波長帯域430nm〜730
nmにおいて検出することにより得られた第1の蛍光画
像である広帯域蛍光画像と、参照光である近赤外光が含
まれる白色光が照射された生体組織によって反射された
光を近赤外の波長帯域である波長帯域750nm〜90
0nmにおいて検出することにより得られた反射参照光
画像であるIR反射参照光画像とに基づく演算により、
生体組織までの距離を補正した生体組織の組織性状を表
す組織性状画像を作成し、この組織性状画像を表示する
にあたり、この組織性状画像に含まれる各画像領域につ
いて、これらの画像領域が規定値以上の光量を受光した
異常受光領域であるか、あるいは規定値未満の光量を受
光した正常受光領域であるかを前記各画像、すなわち第
2の蛍光画像である狭帯域蛍光画像と、第1の蛍光画像
である広帯域蛍光画像と、反射参照光画像であるIR反
射参照光画像とに基づいて判定する判定手段である画像
判定ユニット180と、この画像判定ユニット180の
出力に応じて異常受光領域を正常受光領域とは異なる形
態で表示する異常領域表示手段である画像合成器190
とを有するものである。なお、上記規定値は、IR反射
参照光画像における検出の限界、狭帯域蛍光画像および
広帯域蛍光画像における有効測定範囲の限界に基づいて
定められる。
The fluorescence endoscope apparatus 900 according to the second embodiment
Converts fluorescence emitted from living tissue irradiated with excitation light into a wavelength band of 430 nm to 530 n, which is a specific wavelength region.
m, a narrow-band fluorescence image which is a second fluorescence image obtained by detecting the fluorescence, and a wavelength band 430 nm to 730 which is a wavelength region different from the specific wavelength region.
and a broadband fluorescence image as a first fluorescence image obtained by detecting the light reflected by the living tissue irradiated with white light including near-infrared light as reference light. 750 nm to 90 wavelength band, which is a wavelength band
By calculation based on an IR reflected reference light image, which is a reflected reference light image obtained by detecting at 0 nm,
Create a tissue property image representing the tissue property of the living tissue with the distance to the living tissue corrected, and display this tissue property image.For each image area included in this tissue property image, these image areas are set to the specified values. Whether each of the images is the abnormal light receiving region receiving the above light amount or the normal light receiving region receiving the light amount less than the specified value, that is, the narrow band fluorescent image as the second fluorescent image, An image determination unit 180 that is a determination unit that determines based on a broadband fluorescence image that is a fluorescence image and an IR reflection reference light image that is a reflection reference light image; Image synthesizer 190 which is an abnormal area display means for displaying in a form different from the normal light receiving area
And The specified value is determined based on the limit of detection in the IR reflection reference light image and the limit of the effective measurement range in the narrow band fluorescent image and the wide band fluorescent image.

【0068】上記蛍光内視鏡装置900は、生体内に挿
入される内視鏡挿入部100、可視光の波長領域と近赤
外光の波長領域とを含む光を発する白色光光源、および
生体組織から蛍光を発生させる波長410nm近傍の励
起光を発する励起光光源を備えた照明ユニット110、
上記生体組織から発生した蛍光による像および生体組織
により反射された近赤外光による像を撮像する撮像ユニ
ット120、撮像ユニット120によって撮像された画
像に基づいて生体の組織性状を表す組織性状画像を作成
する組織性状画像作成ユニット130、内視鏡挿入部1
00内に配置された撮像素子によって撮像された、目視
により得られる画像と同等の画像である通常画像を表示
するための信号処理を行う通常画像処理ユニット14
0、上記各ユニットに接続され、動作タイミングの制御
を行うコントローラ150、通常画像処理ユニット14
0で処理された通常画像を可視画像として表示する映像
モニタ160、撮像ユニット120によって撮像された
画像を入力し、画像中の領域について異常受光領域であ
るか、あるいは正常受光領域であるかを判定する判定手
段である前記画像判定ユニット180、組織性状画像作
成ユニット130から出力された組織性状画像と、画像
判定ユニット180から出力された判定結果とを入力
し、組織性状画像中の異常受光領域を正常受光領域とは
異なる形態で表示させる異常領域表示手段である前記画
像合成器190、画像合成器190から出力された合成
画像を通常画像処理ユニット140のビデオ信号発生回
路144を経由して入力し可視画像として表示する映像
モニタ170から構成されている。
The fluorescent endoscope apparatus 900 includes an endoscope insertion section 100 inserted into a living body, a white light source that emits light including a visible light wavelength region and a near-infrared light wavelength region, and a living body light source. An illumination unit 110 including an excitation light source that emits excitation light having a wavelength of around 410 nm for generating fluorescence from tissue,
An imaging unit 120 that captures an image due to the fluorescence generated from the living tissue and an image due to near-infrared light reflected by the living tissue, a tissue property image representing the tissue property of the living body based on the image taken by the imaging unit 120. Tissue property image creation unit 130 to be created, endoscope insertion unit 1
A normal image processing unit 14 that performs signal processing for displaying a normal image equivalent to an image obtained by visual observation, which is captured by an image sensor disposed in the image sensor 00.
0, a controller 150 which is connected to each of the units and controls the operation timing, and a normal image processing unit 14
A video monitor 160 that displays a normal image processed at 0 as a visible image, an image captured by the imaging unit 120 is input, and it is determined whether a region in the image is an abnormal light receiving region or a normal light receiving region. The image determination unit 180, which is a determination unit, performs the tissue property image output from the tissue property image creation unit 130, and the determination result output from the image determination unit 180, and inputs the abnormal light receiving area in the tissue property image. The image synthesizer 190, which is an abnormal area display means for displaying the image in a form different from the normal light receiving area, and the synthesized image output from the image synthesizer 190 is input via the video signal generation circuit 144 of the normal image processing unit 140. It comprises a video monitor 170 for displaying as a visible image.

【0069】内視鏡挿入部100は、ライトガイド10
1、CCDケーブル102およびイメージファイバ10
3を内部に有し、ライトガイド101の端面の前方には
照明レンズ104が備えられており、また、石英ガラス
ファイバによって形成されているイメージファイバ10
3の端面の前方には集光レンズ106が備えられてい
る。また、CCDケーブル102の一端には、カラーモ
ザイクフィルタがオンチップされたCCD撮像素子10
7が接続され、このCCD撮像素子107には、プリズ
ム108が接合されている。ライトガイド101は、多
成分ガラスファイバによって形成されている白色光ライ
トガイド101Aおよび石英ガラスファイバによって形
成されている励起光ライトガイド101Bがバンドルさ
れケーブル状に一体化されており、内視鏡挿入部100
の外部に配置されているライトガイド101の他端は照
明ユニット110へ接続されている。また、内視鏡挿入
部100の外部に配置されているCCDケーブル102
の他端は通常画像処理ユニット140に接続され、イメ
ージファイバ103の他端は撮像ユニット120へ接続
されている。
The endoscope insertion section 100 is provided with the light guide 10
1. CCD cable 102 and image fiber 10
3, an illumination lens 104 is provided in front of the end face of the light guide 101, and an image fiber 10 made of quartz glass fiber is provided.
A condensing lens 106 is provided in front of the end face of No. 3. In addition, one end of the CCD cable 102 has a CCD image sensor 10 on which a color mosaic filter is on-chip.
7 is connected, and a prism 108 is joined to the CCD image pickup device 107. The light guide 101 includes a white light light guide 101A formed of a multi-component glass fiber and an excitation light light guide 101B formed of a quartz glass fiber, which are bundled and integrated in a cable shape. 100
The other end of the light guide 101 disposed outside is connected to the lighting unit 110. Further, a CCD cable 102 disposed outside the endoscope insertion section 100 is provided.
Is connected to the image processing unit 140, and the other end of the image fiber 103 is connected to the imaging unit 120.

【0070】照明ユニット110は、白色光J1を発す
る白色光光源111、この白色光光源111に電力を供
給する電源112、蛍光画像撮像用の励起光J2を発す
るGaN系半導体レーザ114およびこのGaN系半導
体レーザ114に電力を供給する電源115を備えてい
る。
The illumination unit 110 includes a white light source 111 for emitting white light J1, a power supply 112 for supplying power to the white light source 111, a GaN-based semiconductor laser 114 for emitting excitation light J2 for capturing a fluorescent image, and a GaN-based semiconductor laser. A power supply 115 for supplying power to the semiconductor laser 114 is provided.

【0071】撮像ユニット120は、イメージファイバ
103中を伝播して入射した蛍光J3から励起光の波長
領域を含む420nm以下の波長帯域をカットする励起
光カットフィルタ121、互いに異なる波長特性を持つ
3種類の光学フィルタが組み合わされ一体化された回転
フィルタ122、この回転フィルタ122を回転させる
フィルタ回転装置124、回転フィルタ122を透過し
た蛍光像またはIR反射参照光像を撮像するCCD撮像
素子125、およびこのCCD撮像素子125で撮像さ
れた信号をデジタル化し、その値を出力するA/D変換
回路126を備えている。
The imaging unit 120 includes an excitation light cut filter 121 that cuts a wavelength band of 420 nm or less including a wavelength region of the excitation light from the fluorescence J3 propagating and entering the image fiber 103, and three types having different wavelength characteristics. Optical filter is combined and integrated, a rotary filter 122 that rotates the rotary filter 122, a filter rotating device 124 that rotates the rotary filter 122, a CCD image sensor 125 that captures a fluorescent image or an IR reflected reference light image transmitted through the rotary filter 122, and An A / D conversion circuit 126 is provided for digitizing a signal imaged by the CCD image sensor 125 and outputting the digitized signal.

【0072】上記回転フィルタ122は図10に示すよ
うな、波長帯域430nm〜730nmの光を透過させ
る広帯域フィルタ122Aと、波長帯域430nm〜5
30nmの光を透過させる狭帯域フィルタ122Bと、
波長帯域750nm〜900nmの光を透過させるIR
帯域フィルタ122Cとから構成されている。広帯域フ
ィルタ122Aは、広帯域蛍光画像撮像用のフィルタで
あり、狭帯域フィルタ122Bは、狭帯域蛍光画像撮像
用のフィルタであり、IR帯域フィルタ122Cは、I
R反射参照光画像撮像用のフィルタである。この回転フ
ィルタ122は、白色光J1が照射されているときに
は、白色光J1の光路中にIR帯域フィルタ122Cが
配置され、励起光J2が照射されているときには、広帯
域フィルタ122Aおよび狭帯域フィルタ122Bが励
起光J2の光路中に順次配置されるように、コントロー
ラ150によってフィルタ回転装置124が制御されて
いる。
As shown in FIG. 10, the rotary filter 122 includes a broadband filter 122A that transmits light in a wavelength band of 430 nm to 730 nm,
A narrow band filter 122B transmitting 30 nm light;
IR that transmits light in a wavelength band of 750 nm to 900 nm
And a band-pass filter 122C. The broadband filter 122A is a filter for capturing a broadband fluorescent image, the narrowband filter 122B is a filter for capturing a narrowband fluorescent image, and the IR band filter 122C is
This is a filter for capturing an R reflection reference light image. When the white light J1 is irradiated, the rotary filter 122 has an IR band filter 122C disposed in the optical path of the white light J1, and when the excitation light J2 is irradiated, the wide band filter 122A and the narrow band filter 122B are turned on. The filter rotating device 124 is controlled by the controller 150 so as to be sequentially arranged in the optical path of the excitation light J2.

【0073】CCD撮像素子125は、500×500
画素の撮像素子であり、コントローラ150の制御によ
りIR反射参照光画像を撮像する際には、通常の読み出
しを行うが、蛍光画像を撮像する際には、1画素当たり
の受光光量を増加させるるために、5×5個分の画素の
出力を加算した上で読み出すビニング読み出しを行う。
このため、蛍光画像を撮像する際には、見かけ上は10
0×100画素の撮像素子として動作する。
The CCD image pickup device 125 is 500 × 500
This is an image sensor of pixels, and performs normal reading when capturing an IR reflected reference light image under the control of the controller 150, but increases the amount of received light per pixel when capturing a fluorescent image. For this purpose, binning reading is performed after adding outputs of 5 × 5 pixels.
For this reason, when capturing a fluorescent image, an apparent 10
It operates as an image sensor of 0 × 100 pixels.

【0074】このように、読み出し方法が異なるため、
IR反射参照光画像を構成する画素数は500×500
画素であるのに対し、狭帯域蛍光画像および広帯域蛍光
画像を構成する画素数は100×100画素となる。
As described above, since the reading method is different,
The number of pixels constituting the IR reflection reference light image is 500 × 500.
The number of pixels constituting the narrow band fluorescent image and the wide band fluorescent image is 100 × 100 pixels.

【0075】組織性状画像作成ユニット130は、回転
フィルタ122を通して撮像されA/D変換回路126
によってデジタル化された3種類の画像信号(狭帯域蛍
光画像、広帯域蛍光画像およびIR反射参照光画像)を
記憶する画像メモリ127、上記2種類の蛍光画像間の
除算を行ない(すなわち、上記2種類の蛍光画像間の比
率を求め)この除算により求められた規格化蛍光強度の
値を、予め内部に記憶されているルックアップテーブル
によって色に対応させ、可視画像として表示させるとき
の色信号に変換して出力する色演算部131、IR反射
参照光画像の値を予め内部に記憶されているルックアッ
プテーブルによって輝度に対応させ、可視画像として表
示させるときの輝度信号に変換して出力する輝度演算部
132、色信号と輝度信号とに基づいて組織性状画像を
作成する組織性状画像作成部133、およびこの組織性
状画像を記憶する組織性状画像メモリ134から構成さ
れている。
The tissue property image creation unit 130 is imaged through the rotation filter 122 and is subjected to an A / D conversion circuit 126
The image memory 127 stores the three types of image signals (narrow band fluorescent image, wide band fluorescent image and IR reflection reference light image) digitized by the above, and performs division between the two types of fluorescent images (that is, the two types of fluorescent images). The value of the normalized fluorescence intensity obtained by this division is made to correspond to the color by a look-up table stored in advance and converted into a color signal for displaying as a visible image. A color calculating unit 131 for outputting the value of the IR reflected reference light image in correspondence with the luminance by a look-up table stored in advance therein, converting the value into a luminance signal for displaying as a visible image, and outputting the luminance signal Unit 132, a tissue property image creating unit 133 that creates a tissue property image based on the color signal and the luminance signal, and stores the tissue property image And a woven texture image memory 134.

【0076】なお、画像メモリ127は、図示省略した
狭帯域蛍光画像記憶領域、広帯域蛍光画像記憶領域およ
びIR反射参照光画像記憶領域から構成されており、広
帯域フィルタ122Aを光路中に配置した状態において
励起光J2を照射して撮像した蛍光画像はA/D変換回
路126によってデジタル値に変換され広帯域蛍光画像
として広帯域蛍光画像記憶領域に保存され、狭帯域フィ
ルタ122Bが光路中に配置された状態において励起光
J2を照射して撮像した蛍光画像はA/D変換回路12
6によってデジタル値に変換されて狭帯域蛍光画像とし
て狭帯域蛍光画像記憶領域に保存される。また、IR帯
域フィルタ122Cが光路中に配置された状態において
白色光J1を照射して撮像した反射参照光画像はA/D
変換回路126によってデジタル値に変換されてIR反
射参照光画像としてIR反射参照光画像記憶領域に保存
される。
The image memory 127 includes a narrow-band fluorescent image storage area, a broad-band fluorescent image storage area, and an IR reflection reference light image storage area (not shown). When the wide-band filter 122A is arranged in the optical path, The fluorescence image captured by irradiating the excitation light J2 is converted into a digital value by the A / D conversion circuit 126, stored as a broadband fluorescence image in the broadband fluorescence image storage area, and in a state where the narrowband filter 122B is arranged in the optical path. The fluorescent image captured by irradiating the excitation light J2 is converted into an A / D converter circuit 12
The digital value is converted into a digital value by 6 and stored in a narrow-band fluorescence image storage area as a narrow-band fluorescence image. The reflected reference light image captured by irradiating the white light J1 with the IR bandpass filter 122C disposed in the optical path is A / D
The data is converted into a digital value by the conversion circuit 126 and stored in the IR reflection reference light image storage area as an IR reflection reference light image.

【0077】画像判定ユニット180は、上記狭帯域蛍
光画像内の規定値以上の光量を受光した領域を判定する
有効測定範囲判定器181、広帯域蛍光画像内の規定値
以上の光量を受光した領域を判定する有効測定範囲判定
器182およびIR反射参照光画像内の規定値以上の光
量を受光した領域を判定するオーバーフロー判定器18
3、これら3つの個別の判定器による判定結果に基づき
異常受光領域を判定する異常受光領域判定器184、異
常受光領域の判定結果である異常受光領域の位置情報を
記憶する異常受光領域メモリ185を備えている。
The image determination unit 180 determines an effective measurement range determiner 181 for determining an area in the narrow-band fluorescence image that receives a light amount equal to or more than a specified value. An effective measurement range determiner 182 for determining an overflow and an overflow determiner 18 for determining an area in the IR reflection reference light image that receives a light amount equal to or more than a specified value.
3, an abnormal light receiving area determiner 184 that determines an abnormal light receiving area based on the determination results of these three individual determiners, and an abnormal light receiving area memory 185 that stores the position information of the abnormal light receiving area that is the determination result of the abnormal light receiving area. Have.

【0078】画像合成器190は、組織性状画像メモリ
134に記憶された組織性状画像と異常受光領域メモリ
185に記憶された異常受光領域の位置情報とを入力
し、組織性状画像上に異常受光領域が表示されている画
像を合成して合成画像として出力する。
The image synthesizer 190 inputs the tissue property image stored in the tissue property image memory 134 and the position information of the abnormal light receiving area stored in the abnormal light receiving area memory 185, and places the abnormal light receiving area on the tissue property image. Are combined and output as a combined image.

【0079】通常画像処理ユニット140は、CCD撮
像素子107で撮像された画像信号をデジタル化するA
/D変換回路142、デジタル化された通常画像を保存
する通常画像メモリ143、通常画像メモリ143から
出力された通常画像および上記画像合成器190から出
力された合成画像をビデオ信号に変換するビデオ信号発
生回路144を備えている。
The normal image processing unit 140 digitizes an image signal picked up by the CCD image pickup device 107.
A / D conversion circuit 142, a normal image memory 143 for storing a digitized normal image, a video signal for converting the normal image output from the normal image memory 143 and the synthesized image output from the image synthesizer 190 into a video signal A generation circuit 144 is provided.

【0080】以下、上記構成による蛍光内視鏡装置90
0の作用について説明する。まず、通常画像を撮像し表
示する場合を説明し、次に反射参照光画像の撮像および
蛍光画像の撮像を行なう場合を説明する。その後、合成
画像を形成し表示する場合について説明する。
Hereinafter, the fluorescence endoscope apparatus 90 having the above configuration will be described.
The operation of 0 will be described. First, a case where a normal image is captured and displayed will be described, and then a case where a reflected reference light image and a fluorescent image are captured will be described. Thereafter, a case where a composite image is formed and displayed will be described.

【0081】蛍光内視鏡装置900においては、通常画
像およびIR反射参照光画像の撮像と、蛍光画像の撮像
とを時分割することにより順次行う。通常画像およびI
R反射参照光画像の撮像時には、コントローラ150か
ら出力された信号に基づき電源112が駆動され、白色
光光源111から参照光である近赤外光を含む白色光J
1が射出される。白色光J1は、レンズ113を通して
白色光ライトガイド101Aに入射し、内視鏡挿入部の
先端100Aまで導光された後、照明レンズ104から
生体組織1に向けて照射される。
In the fluorescence endoscope apparatus 900, imaging of a normal image and an IR reflection reference light image and imaging of a fluorescence image are sequentially performed by time-sharing. Normal image and I
At the time of capturing the R-reflected reference light image, the power supply 112 is driven based on the signal output from the controller 150, and the white light source 111 emits white light J including near-infrared light as reference light.
1 is fired. The white light J1 enters the white light guide 101A through the lens 113, is guided to the distal end 100A of the endoscope insertion portion, and is emitted from the illumination lens 104 toward the living tissue 1.

【0082】生体組織1によって反射された白色光J1
の反射光J4は対物レンズ105によって集光され、プ
リズム108の斜面によって反射されてカラーモザイク
フィルタを通してCCD撮像素子107上に結像され撮
像される。CCD撮像素子107によって撮像された通
常画像は、A/D変換回路142によってデジタル値に
変換された後、通常画像メモリ143に保存される。通
常画像メモリ143に保存された通常画像は、ビデオ信
号発生回路144によってビデオ信号に変換され、映像
モニタ160によって可視画像として表示される。上記
一連の動作は、コントローラ150によって制御され
る。
The white light J1 reflected by the living tissue 1
Is reflected by the objective lens 105, reflected by the inclined surface of the prism 108, formed into an image on the CCD image sensor 107 through a color mosaic filter, and imaged. The normal image picked up by the CCD image pickup device 107 is converted into a digital value by the A / D conversion circuit 142 and then stored in the normal image memory 143. The normal image stored in the normal image memory 143 is converted into a video signal by the video signal generation circuit 144 and displayed as a visible image by the video monitor 160. The above series of operations are controlled by the controller 150.

【0083】一方、上記生体組織1によって反射され集
光レンズ106により集光された近赤外光を含む白色光
J1の反射光J5は、イメージファイバ103の端面に
入射し、イメージファイバ103を通過してレンズ12
8により集光され、励起光カットフィルタ121および
回転フィルタ122のIR帯域フィルタ122Cを透過
してCCD撮像素子125上に結像される。
On the other hand, the reflected light J5 of the white light J1 including the near-infrared light reflected by the living tissue 1 and collected by the condenser lens 106 is incident on the end face of the image fiber 103 and passes through the image fiber 103. And lens 12
The light is condensed by 8, and passes through the excitation light cut filter 121 and the IR bandpass filter 122C of the rotation filter 122 to form an image on the CCD image sensor 125.

【0084】IR帯域フィルタ122Cは、波長帯域7
50nm〜900nmの光のみを透過させるバンドパス
フィルタなので、反射光J5がIR帯域フィルタ122
Cを透過すると、反射参照光のみが抽出されCCD撮像
素子125上にはIR反射参照光像のみが結像される。
The IR band filter 122C has the wavelength band 7
The reflected light J5 is a band-pass filter that transmits only light having a wavelength of 50 nm to 900 nm.
When transmitted through C, only the reflected reference light is extracted, and only the IR reflected reference light image is formed on the CCD image sensor 125.

【0085】CCD撮像素子125上に結像され撮像さ
れたIR反射参照光像は、光電変換されA/D変換回路
126によってデジタル信号に変換された後、画像メモ
リ127のIR反射参照光画像記憶領域に保存される。
The IR reflected reference light image formed and imaged on the CCD image sensor 125 is photoelectrically converted and converted into a digital signal by the A / D conversion circuit 126, and then stored in the image memory 127. Stored in the area.

【0086】次に、蛍光像を撮像する場合について説明
する。コントローラ150から出力された信号に基づい
て電源115が駆動され、GaN系半導体レーザ114
から波長410nmの励起光J2が射出される。励起光
J2は、レンズ116を通して励起光ライトガイド10
1Bに入射し、内視鏡挿入部の先端100Aまで導光さ
れた後、照明レンズ104を通して生体組織1に向けて
照射される。
Next, a case where a fluorescent image is picked up will be described. The power supply 115 is driven based on the signal output from the controller 150 and the GaN-based semiconductor laser 114 is driven.
, An excitation light J2 having a wavelength of 410 nm is emitted. The excitation light J2 is transmitted through the lens 116 to the excitation light
1B, is guided to the distal end 100A of the endoscope insertion section, and is then emitted toward the living tissue 1 through the illumination lens 104.

【0087】励起光J2の照射を受けて生体組織1から
発生した蛍光J3は、集光レンズ106によって集光さ
れてイメージファイバ103の先端に入射し、イメージ
ファイバ103を伝播してレンズ128によって集光さ
れ、励起光カットフィルタ121を通して回転フィルタ
122の広帯域フィルタ122Aと狭帯域フィルタ12
2Bとを順次時分割して透過する。
The fluorescent light J 3 generated from the living tissue 1 by the irradiation of the excitation light J 2 is condensed by the condensing lens 106, enters the tip of the image fiber 103, propagates through the image fiber 103, and is collected by the lens 128. The broadband filter 122A of the rotary filter 122 and the narrowband filter 12
2B are sequentially time-divisionally transmitted.

【0088】広帯域フィルタ122Aを透過した蛍光お
よび狭帯域フィルタ122Bを透過した蛍光は、順次時
分割してCCD撮像素子125によって受光され、光電
変換された後、ビニング読み出しにより5×5画素分の
信号が加算されて読み出され、A/D変換回路126に
よってデジタル信号に変換される。デジタル信号に変換
された広帯域蛍光画像および狭帯域蛍光画像は画像メモ
リ127の広帯域蛍光画像記憶領域および狭帯域蛍光画
像記憶領域に保存される。上記のようにビニング読み出
しを行なうことにより光強度の弱い蛍光像を精度良く撮
像することができるが、撮像された画像の画素数は、通
常読み出しを行った場合の1/25である100×10
0画素となる。
The fluorescence transmitted through the wide band filter 122A and the fluorescence transmitted through the narrow band filter 122B are sequentially time-divisionally received by the CCD image pickup device 125, photoelectrically converted, and then subjected to binning readout to obtain a signal of 5 × 5 pixels. Are added and read out, and converted into a digital signal by the A / D conversion circuit 126. The broadband fluorescent image and the narrowband fluorescent image converted into digital signals are stored in the broadband fluorescent image storage area and the narrowband fluorescent image storage area of the image memory 127. By performing the binning readout as described above, a fluorescent image having a low light intensity can be captured with high accuracy. However, the number of pixels of the captured image is 100 × 10, which is 1/25 that of the normal readout.
It becomes 0 pixels.

【0089】以下、合成画像を作成する場合について説
明する。まず、組織性状画像作成ユニット130の色演
算部131では、画像メモリ127に記憶されている狭
帯域蛍光画像と広帯域蛍光画像とを入力し、各対応する
画素毎に狭帯域蛍光画像の値を広帯域蛍光画像の値で除
算して規格化蛍光強度を求め、予め色演算部131内に
記憶されている色ルックアップテーブルを参照して規格
化蛍光強度の値を色信号に変換し、その後、一つの画素
に対応する色信号を、5×5個の画素に対応する色信号
に変換し、画素数を100×100画素から500×5
00画素に戻した色信号から構成される色信号画像とし
て出力する。
Hereinafter, a case where a composite image is created will be described. First, the color calculating unit 131 of the tissue property image creating unit 130 inputs the narrow band fluorescent image and the wide band fluorescent image stored in the image memory 127, and converts the value of the narrow band fluorescent image for each corresponding pixel into a wide band. The normalized fluorescence intensity is obtained by dividing by the value of the fluorescence image, and the value of the normalized fluorescence intensity is converted into a color signal with reference to a color lookup table stored in advance in the color calculation unit 131. A color signal corresponding to one pixel is converted into a color signal corresponding to 5 × 5 pixels, and the number of pixels is changed from 100 × 100 pixels to 500 × 5 pixels.
It is output as a color signal image composed of color signals returned to 00 pixels.

【0090】輝度演算部132では、画像メモリ127
のIR反射参照光画像記憶領域に保存されているIR反
射参照光画像の値を予め画像メモリ127の内部に記憶
されている輝度ルックアップテーブルを参照して各画素
毎に輝度信号に変換し、これらの輝度信号から構成され
る輝度信号画像として出力する。
The luminance calculation section 132 includes an image memory 127
The value of the IR reflected reference light image stored in the IR reflected reference light image storage area is converted into a luminance signal for each pixel with reference to a luminance look-up table stored in advance in the image memory 127, The luminance signal is output as a luminance signal image composed of these luminance signals.

【0091】組織性状画像作成部133は、上記色信号
画像と輝度信号画像とを入力し、これらの画像に基づい
て組織性状画像を作成し、この組織性状画像は組織性状
画像メモリ134に記憶される。
The tissue property image creating section 133 receives the color signal image and the luminance signal image, creates a tissue property image based on these images, and stores the tissue property image in the tissue property image memory 134. You.

【0092】次に、画像判定ユニット180および画像
合成器190の作用について説明する。
Next, the operation of the image determination unit 180 and the image synthesizer 190 will be described.

【0093】A/D変換回路126によってデジタル値
に変換されて出力された狭帯域蛍光画像、広帯域蛍光画
像およびIR反射参照光画像は、上記画像メモリ127
に入力されると共に、それぞれ有効測定範囲判定器18
1、有効測定範囲判定器182、およびオーバーフロー
判定器183にも入力される。
The narrow band fluorescent image, the wide band fluorescent image and the IR reflected reference light image which have been converted into digital values by the A / D conversion circuit 126 and output are stored in the image memory 127.
And an effective measurement range determiner 18
1, the effective measurement range determiner 182 and the overflow determiner 183 are also input.

【0094】有効測定範囲判定器181に入力された狭
帯域蛍光画像および有効測定範囲判定器182に入力さ
れた広帯域蛍光画像は有効測定範囲の限界に基づいて定
められた規定値と比較され限界越領域が求められる。こ
の規定値は予め次のような方式によって求められ、有効
測定範囲判定器181および有効測定範囲判定器182
に記憶されている。
The narrow-band fluorescence image input to the effective measurement range determiner 181 and the broadband fluorescence image input to the effective measurement range determiner 182 are compared with prescribed values determined based on the limit of the effective measurement range, and are exceeded. An area is required. The specified value is obtained in advance by the following method, and the effective measurement range determiner 181 and the effective measurement range determiner 182
Is stored in

【0095】すなわち、蛍光内視鏡装置900を用いて
生体組織から発生する蛍光を観察するときに受光する最
大の光量は、蛍光内視鏡装置の内視鏡挿入部の先端10
0Aを仕様に基づき生体組織に最も接近させたときに生
体の正常組織から発生する蛍光を受光したときの光量で
あり、蛍光内視鏡装置900によって生体の組織性状を
観察する場合の生体組織に先端100Aを接近させる距
離の限界は蛍光内視鏡装置900の仕様によって予め2
mmと定められており、それ以上生体組織に接近した場
合には、正確に生体の組織性状を観察することができな
くなる。
That is, the maximum amount of light received when observing the fluorescent light generated from the living tissue using the fluorescent endoscope apparatus 900 depends on the amount of light emitted from the distal end 10 of the endoscope insertion portion of the fluorescent endoscope apparatus.
0A is the amount of light when the fluorescent light generated from the normal tissue of the living body is received when it is closest to the living tissue based on the specification. The limit of the distance at which the tip 100A approaches is 2 in advance depending on the specifications of the fluorescent endoscope apparatus 900.
mm, and if it approaches the living tissue any longer, it becomes impossible to accurately observe the tissue properties of the living body.

【0096】したがって、内視鏡挿入部の先端100A
を生体組織に接近させたときに正常組織から受光される
蛍光の受光光量が、仕様上の有効測定範囲において想定
される最大の受光光量を超えた場合には、先端100A
と生体組織との距離が2mm以内に接近したとみなさ
れ、この領域は正確に生体の組織性状を観察することが
できない限界越領域とされる。
Therefore, the distal end 100A of the endoscope insertion portion
When the received light amount of the fluorescent light received from the normal tissue when approaching the living tissue exceeds the maximum received light amount assumed in the effective measurement range in the specification, the tip 100A
It is considered that the distance between the body and the living tissue has approached within 2 mm, and this region is regarded as a region beyond the limit where the tissue properties of the living body cannot be accurately observed.

【0097】この限界越領域を定めるための規定値は、
予め別の方式によって正常組織と判定されている所定距
離離れた位置に存在する生体組織へ励起光を照射し、こ
の励起光の照射によって上記生体組織から発せられた蛍
光の強度を検出し、この検出値の平均値に、検出値のバ
ラツキを表す値を加算することによって定められる。す
なわち、この規定値は、内視鏡挿入部の先端100Aを
生体の正常組織から仕様上の接近限界である2mm離し
た状態において、励起光を複数回この正常組織に向けて
照射し、この励起光の照射を受けた正常組織から発生し
た蛍光の強度を測定したときの平均値Mとその標準偏差
σとから求められ、E=M+2σの式によって定めるこ
とができる。
The prescribed value for determining this over-limit area is:
Irradiating the living tissue existing at a position separated by a predetermined distance that has been determined to be a normal tissue by another method in advance with excitation light, and detecting the intensity of the fluorescence emitted from the living tissue by the irradiation of the excitation light, It is determined by adding a value representing the variation of the detection value to the average value of the detection values. That is, the specified value is obtained by irradiating the normal tissue several times with the excitation light in a state where the distal end 100A of the endoscope insertion portion is separated from the normal tissue of the living body by 2 mm which is an access limit in specification. It is obtained from the average value M when measuring the intensity of the fluorescence generated from the normal tissue irradiated with light and the standard deviation σ thereof, and can be determined by the equation of E = M + 2σ.

【0098】有効測定範囲判定器181に記憶されてい
る規定値は、上記方式を正常組織から発せられた波長帯
域430nm〜530nmの蛍光の検出に適用して求め
たものであり、この規定値によって狭帯域蛍光画像にお
ける有効測定範囲の限界が定められる。有効測定範囲判
定器182に記憶されている規定値は、上記方式を正常
組織から発せられた波長帯域430nm〜730nmの
蛍光の検出に適用して求めたものであり、この規定値に
よって広帯域蛍光画像における有効測定範囲の限界が定
められる。
The specified value stored in the effective measurement range determiner 181 is obtained by applying the above method to the detection of fluorescence in a wavelength band of 430 nm to 530 nm emitted from normal tissue. The limit of the effective measurement range in the narrow band fluorescent image is defined. The specified value stored in the effective measurement range determiner 182 is obtained by applying the above method to the detection of fluorescence in a wavelength band of 430 nm to 730 nm emitted from normal tissue. The limits of the effective measurement range in are defined.

【0099】一方、オーバーフロー判定器183に入力
されたIR反射参照光画像はこの反射参照光画像の検出
の限界に基づいて定められた規定値と比較されて限界越
領域が求められる。このIR反射参照光画像の検出の限
界は、IR反射参照光画像を検出する撮像素子の出力の
飽和値に相当するものとして定められ、この検出の限界
に基づく規定値は、予め次のような方式によって求めら
れオーバーフロー判定器183に記憶されている。
On the other hand, the IR reflected reference light image input to the overflow determiner 183 is compared with a specified value determined based on the detection limit of the reflected reference light image, and an area beyond the limit is obtained. The limit of the detection of the IR reflected reference light image is determined to correspond to the saturation value of the output of the image sensor for detecting the IR reflected reference light image. The specified value based on the detection limit is determined in advance as follows. It is obtained by the method and stored in the overflow determiner 183.

【0100】すなわち、撮像ユニット120から出力さ
れるIR反射参照光画像を表す信号は、CCD撮像素子
125から出力されるIR反射参照光画像を表すアナロ
グ信号をA/D変換回路126によってデジタル値に変
換したものであるが、このA/D変換回路が入力したア
ナログ信号の値が(すなわち検出された反射参照光の強
度が)このA/D変換回路が変換可能なアナログ信号の
値以上となり、デジタル出力が飽和した値となったとき
には、その画像領域は正確に生体の組織性状を観察する
ことができない領域とみなされるので、このデジタル出
力の飽和値が検出の限界に基づく規定値として定められ
る。例えば10ビットのA/D変換回路を用いる場合に
は飽和値は1024となるので、この値がオーバーフロ
ー判定器183の規定値として定められる。
That is, the signal representing the IR reflected reference light image output from the imaging unit 120 is converted into a digital value by the A / D conversion circuit 126 from an analog signal representing the IR reflected reference light image output from the CCD image sensor 125. The value of the analog signal input by the A / D conversion circuit (ie, the intensity of the detected reflected reference light) is equal to or greater than the value of the analog signal convertible by the A / D conversion circuit, When the digital output becomes a saturated value, the image area is regarded as an area where the tissue properties of the living body cannot be observed accurately, so the saturation value of the digital output is determined as a specified value based on the detection limit. . For example, when a 10-bit A / D conversion circuit is used, the saturation value is 1024, and this value is determined as the specified value of the overflow determiner 183.

【0101】図11に示すように、上記有効測定範囲判
定器181、有効測定範囲判定器182、およびオーバ
ーフロー判定器183によって、それぞれの規定値を参
照して取得された限界越領域U1、U2、U3を含む画
像H1、H2、H3は、異常受光領域判定器184に入
力されると、それぞれの画像に含まれる限界越領域の論
理積が求められて異常受光領域U4が定められる。異常
受光領域判定器184によって定められた異常受光領域
の位置情報は異常受光領域メモリ185に記憶される。
As shown in FIG. 11, the over-limit areas U 1, U 2, U 1, U 2, When the images H1, H2, and H3 including U3 are input to the abnormal light receiving region determiner 184, the logical product of the over-limit regions included in each image is obtained, and the abnormal light receiving region U4 is determined. The position information of the abnormal light receiving area determined by the abnormal light receiving area determiner 184 is stored in the abnormal light receiving area memory 185.

【0102】画像合成器190は、異常受光領域メモリ
185に記憶されている異常受光領域の位置情報と、組
織性状画像メモリ134に記憶されている組織性状画像
とを入力し、図12に示すようにカラー表示される組織
性状画像S中に、異常受光領域U4´を白色で表示させ
るように合成画像を形成する。
The image synthesizer 190 inputs the position information of the abnormal light receiving area stored in the abnormal light receiving area memory 185 and the tissue property image stored in the tissue property image memory 134, as shown in FIG. A composite image is formed such that the abnormal light receiving area U4 'is displayed in white in the tissue property image S displayed in color in (1).

【0103】合成された合成画像は画像合成器190か
ら出力され、ビデオ信号発生回路144に入力される。
ビデオ信号発生回路144によってビデオ信号に変換さ
れた上記合成画像は、映像モニタ170に表示される。
上記一連の動作は、コントローラ150によって制御さ
れる。
The synthesized image is output from the image synthesizer 190 and input to the video signal generation circuit 144.
The composite image converted into a video signal by the video signal generation circuit 144 is displayed on the video monitor 170.
The above series of operations are controlled by the controller 150.

【0104】なお、上記ビデオ信号発生回路144は、
上記合成画像の信号処理および通常画像メモリ143か
ら出力される通常画像の信号処理の両方の処理を行うも
のである。
Note that the video signal generation circuit 144
It performs both the signal processing of the composite image and the signal processing of the normal image output from the normal image memory 143.

【0105】上記のように表示された合成画像の色は規
格化蛍光強度、すなわち生体組織の病変化を表し、一
方、輝度は生体組織によって反射された光の強度、すな
わち生体組織の形状を表すので、1枚の画像に、生体組
織の病変化に関する情報と形状に関する情報とを合成し
て表示することができる。
The color of the synthesized image displayed as described above indicates the normalized fluorescence intensity, that is, the disease change of the living tissue, while the luminance indicates the intensity of the light reflected by the living tissue, that is, the shape of the living tissue. Therefore, it is possible to combine and display information relating to a disease change of a living tissue and information relating to a shape on one image.

【0106】さらに、上記のように映像モニタ170に
カラー表示された生体の組織性状を表す映像中に生体の
組織性状を正確に表していない異常受光領域が白色で表
示されるので、観察者が生体の組織性状を誤って判断す
ることを防止することができ、信頼性の高い生体の組織
性状の観察を行なうことができる。
Further, since the abnormal light receiving area which does not accurately represent the tissue properties of the living body is displayed in white in the video representing the tissue properties of the living body displayed in color on the video monitor 170 as described above, the observer can see the abnormal light receiving area. It is possible to prevent erroneous determination of the tissue property of the living body, and it is possible to observe the tissue property of the living body with high reliability.

【0107】また、励起光J2の光源として、GaN系
半導体レーザ112を用いたため、安価で小型な光源に
より励起光を照射することができる。また、励起光の波
長を、410nmとしたため、生体組織1から効率良く
蛍光が発せられる。
Further, since the GaN-based semiconductor laser 112 is used as the light source of the excitation light J2, the excitation light can be irradiated by a cheap and small light source. Further, since the wavelength of the excitation light is set to 410 nm, the living tissue 1 efficiently emits fluorescence.

【0108】なお、上記規格化蛍光強度を用いる代わり
に、広帯域蛍光画像の画素の値をIR反射参照光画像の
画素の値で除算して求めた蛍光収率の値を色信号に割り
当て、IR反射参照光画像の画素の値を輝度信号に割り
当てて組織性状画像を作成してもよい。
Instead of using the above-mentioned normalized fluorescence intensity, the value of the fluorescence yield obtained by dividing the pixel value of the broadband fluorescence image by the pixel value of the IR reflection reference light image is assigned to the color signal, The tissue property image may be created by assigning the pixel values of the reflected reference light image to the luminance signal.

【0109】また、組織性状画像作成ユニット130に
おける組織性状画像の作成は、必ずしも色演算部131
と輝度演算部132の両方を用いて、色信号と輝度信号
とからなる組織性状画像を作成する必要はなく、色演算
部131を用いずに、狭帯域蛍光画像の画素の値を広帯
域蛍光画像の対応する画素の値で除算して求めたた規格
化蛍光強度の値、あるいは広帯域蛍光画像の画素の値を
IR反射参照光画像の画素の値で除算して求めた蛍光収
率の値を輝度信号に割り当てて組織性状画像を作成し、
組織性状画像を無彩色のモノクロ表示させ、異常受光領
域をカラー表示させるように画像合成器190によって
合成画像を作成することもできる。
The tissue property image creation unit 130 creates the tissue property image by the color calculation unit 131.
It is not necessary to create a tissue property image composed of the color signal and the luminance signal using both the luminance calculation unit 132 and the luminance calculation unit 132. The value of the normalized fluorescence intensity obtained by dividing by the value of the corresponding pixel, or the value of the fluorescence yield obtained by dividing the value of the pixel of the broadband fluorescent image by the value of the pixel of the IR reflection reference light image Create a tissue characterization image by assigning it to a luminance signal,
A composite image can also be created by the image synthesizer 190 so that the tissue property image is displayed in an achromatic monochrome display and the abnormal light receiving area is displayed in color.

【0110】また、上記各画像の画素の値の色信号また
は輝度信号への割り当ては、閾値を設けて各画素の値を
2値化して2値表示させることもできるし、上記実施の
形態のように、各画素の値を連続値として割り当てるこ
とにより連続した色または輝度の変化として表示させる
こともできる。
Further, the value of the pixel of each image can be assigned to a color signal or a luminance signal by setting a threshold value to binarize the value of each pixel and displaying it in binary. As described above, by assigning the value of each pixel as a continuous value, it can be displayed as a continuous change in color or luminance.

【0111】また、画像判定ユニット180によって定
められる限界越領域は、各画像(すなわち第2の蛍光画
像である狭帯域蛍光画像、第1の蛍光画像である広帯域
蛍光画像、反射参照光画像であるIR反射参照光画像)
と、有効測定範囲の限界や検出の限界等をどのように組
み合わせて求めたものであってもよく、また有効測定範
囲の限界や検出の限界以外にも正反射光の存在を示す反
射参照光の強度に基づいて限界越領域を定めてもよい。
また異常受光領域判定器184によって定められる異常
受光領域は、上記のような各限界越領域の論理積によっ
て定める場合に限らず、各限界越領域の論理和によって
定めたり、特定の限界越領域に基づいて定めてもよい。
The marginal areas determined by the image determination unit 180 are the images (namely, the narrow-band fluorescent image as the second fluorescent image, the broad-band fluorescent image as the first fluorescent image, and the reflected reference light image). IR reflection reference light image)
And the limit of the effective measurement range, the limit of detection, etc., may be obtained in any combination.In addition to the limit of the effective measurement range or the limit of detection, the reflected reference light indicating the presence of specularly reflected light May be determined based on the intensity of the threshold.
Further, the abnormal light receiving area determined by the abnormal light receiving area determiner 184 is not limited to the case of being determined by the logical product of the over-limit areas as described above, but may be determined by the logical sum of the over-limit areas, or may be determined by a specific over-limit area. It may be determined based on this.

【0112】また、画像合成器190による組織性状画
像への異常受光領域の合成を、合成画像を静止画像とし
て表示しているときにのみ行ない、映像モニタ170上
に生体の組織性状が静止画像として表示されているとき
には異常受光領域が表示されるが、映像モニタ170上
に生体の組織性状が動画像として表示されているときに
は異常受光領域が表示されないようにすることもでき
る。上記静止画像と動画像との切り替えは蛍光内視鏡装
置を操作するときの手元スイッチやフットスイッチによ
って行なうようにすることができる。
Further, the abnormal light receiving area is combined with the tissue property image by the image synthesizer 190 only when the combined image is displayed as a still image, and the tissue property of the living body is displayed on the video monitor 170 as a still image. When displayed, the abnormal light receiving area is displayed. However, when the tissue property of the living body is displayed as a moving image on the video monitor 170, the abnormal light receiving area may not be displayed. The switching between the still image and the moving image can be performed by a hand switch or a foot switch when operating the fluorescent endoscope apparatus.

【0113】また、図13に示すように蛍光内視鏡装置
に異常受光領域の表示と非表示とを手動で切り替える表
示切替手段である表示切替スイッチ191を設け、異常
受光領域を表示させたくないときには、表示切替スイッ
チ191を非表示側に切り替えることにより、異常受光
領域が表示されないようにすることもできる。すなわ
ち、表示切替スイッチ191を非表示側に切り替える
と、この表示切替スイッチ191から非表示信号が出力
され、この非表示信号を入力した画像合成器190は、
組織性状画像内への異常受光領域の合成を中断し、組織
性状画像のみが画像合成器190から合成画像として出
力されるようにすることもできる。なお、このとき非表
示信号はコントローラ150にも出力され、非表示信号
を入力したコントローラ150は画像判定ユニット18
0を制御し、画像判定ユニット180で行なわれている
異常受光領域を定めるための処理も中断されるようにし
てもよい。これにより画像判定ユニット180内で行な
われる処理の負担を軽減することができる。
Further, as shown in FIG. 13, the fluorescence endoscope apparatus is provided with a display changeover switch 191 which is a display changeover means for manually switching between display and non-display of the abnormal light receiving area, and does not want to display the abnormal light receiving area. At times, the display changeover switch 191 can be switched to the non-display side so that the abnormal light receiving area is not displayed. That is, when the display changeover switch 191 is switched to the non-display side, a non-display signal is output from the display changeover switch 191, and the image synthesizer 190 that has received the non-display signal outputs
The composition of the abnormal light receiving region in the tissue property image may be interrupted, and only the tissue property image may be output from the image synthesizer 190 as a combined image. At this time, the non-display signal is also output to the controller 150.
0 may be controlled so that the process for determining the abnormal light receiving area performed by the image determination unit 180 is also interrupted. Thereby, the load of the processing performed in the image determination unit 180 can be reduced.

【0114】また、映像モニタ170上に表示される異
常受光領域が観察者の希望する形態(色、形、模様、点
滅の有無等)で表示されるように、組織性状画像と異常
受光領域とを画像合成器190によって合成するときに
異常受光領域の表示形態を観察者が選択できるようにし
てもよい。
Further, the tissue characterization image and the abnormal light receiving area are displayed such that the abnormal light receiving area displayed on the video monitor 170 is displayed in a form desired by the observer (color, shape, pattern, blinking, etc.). When the images are combined by the image combiner 190, the display form of the abnormal light receiving area may be selectable by the observer.

【0115】なお、有効測定範囲判定器、オーバーフロ
ー判定器、および異常受光領域判定器等における判定
は、各画素単位で行うことに限定されず、観察者の所望
する任意の縦横n×m画素単位で行ったり、あるいは演
算量を考慮して、適当に画素を間引いて比較を行なうよ
うにすることもできる。画素を間引いた場合などには、
近傍の判定結果により補完表示を行えばよい。また、観
察者が注目している領域のみの判定を行なうようにする
こともでき、判定を行なっていない領域の表示色を特定
の色で表示するようにすれば、注目している領域を明確
に表示できる。
The determination by the effective measuring range determiner, the overflow determiner, the abnormal light receiving area determiner, and the like is not limited to being performed on a pixel-by-pixel basis. Alternatively, the comparison may be performed by appropriately thinning out the pixels in consideration of the amount of calculation. In the case of thinning out pixels,
Complementary display may be performed based on the determination result of the vicinity. Also, it is possible to determine only the region of interest of the observer. If the display color of the region where no determination is made is displayed in a specific color, the region of interest can be clearly identified. Can be displayed.

【0116】また、通常画像と合成画像とを、映像モニ
タ160と映像モニタ170とに別々に表示する形態と
なっているが、1つの映像モニタ上に両者を表示するよ
うにしてもよい。その際、通常画像と合成画像の表示の
切換えは、動画像と静止画像との切替えに同期させて自
動的に行ってもよいし、観察者が適当な切替手段で、任
意に切り換える形態であってもよい。
Although the normal image and the composite image are displayed separately on the video monitor 160 and the video monitor 170, both may be displayed on one video monitor. At this time, the switching between the display of the normal image and the display of the composite image may be automatically performed in synchronization with the switching between the moving image and the still image, or may be arbitrarily switched by an observer using appropriate switching means. You may.

【0117】また、GaN系半導体レーザおよび白色光
光源を別個の構成としたが、適当な帯域フィルタを利用
して、励起光源と白色光光源とを1つの光源で代替する
こともできる。
Although the GaN-based semiconductor laser and the white light source are configured separately, the excitation light source and the white light source can be replaced with one light source by using an appropriate bandpass filter.

【0118】また、通常画像撮像用のCCD撮像素子1
07を蛍光内視鏡の先端部100Aに設置する実施の形
態としたが、イメージファイバを用いることにより撮像
ユニット内に通常像を導いてからCCD撮像素子によっ
て撮像してもよい。さらに回転フィルタ122の変更
や、多色モザイクフィルタの撮像素子への設置等によ
り、通常画像撮像用、蛍光画像撮像用および反射画像撮
像用のイメージファイバと撮像素子と共用するようにし
てもよい。
Further, a CCD image pickup device 1 for normal image pickup
Although the embodiment is described in which the reference numeral 07 is provided at the distal end portion 100A of the fluorescent endoscope, a normal image may be guided into the image pickup unit by using an image fiber, and then the image may be picked up by the CCD image pickup device. Further, by changing the rotation filter 122 or installing a multicolor mosaic filter on the image sensor, the image fiber and the image sensor for normal image capturing, fluorescent image capturing, and reflection image capturing may be shared.

【0119】また、多色モザイクフィルタがオンチップ
された撮像素子を蛍光内視鏡の先端部に設置することに
より、通常画像撮像用と蛍光画像撮像用と反射画像撮像
用の撮像素子を1つの撮像素子によって兼用することも
できる。
Further, by installing an image pickup device having a multicolor mosaic filter on-chip at the tip of the fluorescent endoscope, one image pickup device for normal image pickup, one for fluorescent image pickup, and one for reflection image pickup is provided. It can also be shared by an image sensor.

【0120】また、上記実施の形態は、画像判定ユニッ
ト180および組織性状画像作成ユニット130におけ
る演算がそれぞれ独立して行なわれるものとしたが、画
像判定ユニット180において定められた異常受光領域
に関しては組織性状画像作成ユニット130において演
算を行なわないように制御するようにしてもよく、これ
により組織性状画像作成ユニット130内で行なわれる
画像処理の時間を短縮することができる。
In the above embodiment, the calculations in the image determination unit 180 and the tissue property image creation unit 130 are performed independently of each other. Control may be performed so that the operation is not performed in the property image creating unit 130, whereby the time of image processing performed in the tissue property image creating unit 130 can be reduced.

【図面の簡単な説明】[Brief description of the drawings]

【図1】第1の実施の形態による蛍光内視鏡装置の概略
構成図
FIG. 1 is a schematic configuration diagram of a fluorescence endoscope apparatus according to a first embodiment.

【図2】回転フィルタの構造を示す図FIG. 2 is a diagram showing a structure of a rotary filter.

【図3】各波長領域の光を照射するタイミング示すタイ
ミングチャート図
FIG. 3 is a timing chart showing the timing of irradiating light in each wavelength region.

【図4】正反射光領域を閾値Qの値で区切って認識する
ことを示す図
FIG. 4 is a diagram showing recognition of a specularly reflected light area by dividing the area by a threshold value Q;

【図5】反射参照光像Zn(a)、蛍光像Zk(b)お
よび面順次光像Zm(c)を示す図
FIG. 5 is a diagram showing a reflection reference light image Zn (a), a fluorescence image Zk (b), and a plane sequential light image Zm (c).

【図6】各画像を重ね合わせる処理の概念図FIG. 6 is a conceptual diagram of a process of superimposing images.

【図7】表示される組織性状画像の概略を示す図FIG. 7 is a diagram schematically showing a tissue property image to be displayed.

【図8】蛍光像Zk等を撮像する他の方式の概略を示す
FIG. 8 is a diagram schematically showing another method for capturing a fluorescent image Zk and the like.

【図9】第1の実施の形態による蛍光内視鏡装置の概略
構成図
FIG. 9 is a schematic configuration diagram of a fluorescence endoscope apparatus according to the first embodiment.

【図10】回転フィルタの構造を示す図FIG. 10 is a diagram showing a structure of a rotary filter.

【図11】各画像の限界越領域の論理積により異常受光
領域を求める様子を示す図
FIG. 11 is a diagram showing a state in which an abnormal light receiving area is obtained by a logical product of the over-limit areas of each image.

【図12】組織性状画像中に異常受光領域を表示させる
合成画像を形成する様子を示す図
FIG. 12 is a diagram showing a state in which a composite image for displaying an abnormal light receiving area in a tissue property image is formed.

【図13】異常受光領域の表示と非表示とを手動で切り
替える表示切替手段を示す図
FIG. 13 is a diagram showing display switching means for manually switching between display and non-display of an abnormal light receiving area.

【符号の説明】[Explanation of symbols]

1 生体組織 11 白色光光源 12 励起光光源 13 モータ 14 回転フィルタ 15 ダイクロイックミラー 16 集光レンズ 17 反射ミラー 21 照射光ファイバ 21a 端面 21b 端面 22 照射レンズ 23 対物レンズ 24 励起光カットフィルタ 25 撮像素子 26 ケーブル 31 A/D変換器 32 反射参照光画像メモリ 33 蛍光画像メモリ 34 面順次光画像メモリ 41 正反射光領域認識器 42 正反射光領域メモリ 43 蛍光収率演算器 44 蛍光収率画像メモリ 45 組織性状画像合成器 46 映像信号処理回路 100 光源ユニット 200 内視鏡ユニット 201 先端部 202 操作部 300 中継ユニット 400 演算ユニット 500 映像信号は表示器 800 蛍光内視鏡装置 Dk 蛍光画像データ Dm 面順次光画像データ Dn 反射参照光画像データ Dsh 正反射光領域データ Dss 蛍光収率画像データ Lb 青色光 Le 励起光 Lg 緑色光 Lm 面順次光 Ln 参照光(近赤外光) Lr 赤色光 Lw 白色光 Zh 反射光像 Zk 蛍光像 Zm 面順次光像 Zn 反射参照光像 DESCRIPTION OF SYMBOLS 1 Living tissue 11 White light source 12 Excitation light source 13 Motor 14 Rotation filter 15 Dichroic mirror 16 Condensing lens 17 Reflection mirror 21 Irradiation optical fiber 21a End face 21b End face 22 Irradiation lens 23 Objective lens 24 Excitation light cut filter 25 Image sensor 26 Cable 31 A / D converter 32 Reflection reference light image memory 33 Fluorescence image memory 34 Surface-sequential light image memory 41 Regular reflection light area recognizer 42 Regular reflection light area memory 43 Fluorescence yield calculator 44 Fluorescence yield image memory 45 Tissue property Image synthesizer 46 Video signal processing circuit 100 Light source unit 200 Endoscope unit 201 Tip unit 202 Operation unit 300 Relay unit 400 Operation unit 500 Video signal is display 800 Fluorescent endoscope device Dk Fluorescent image data Dm Surface-sequential optical image data Dn Reflected reference light image data Dsh Regular reflected light region data Dss Fluorescence yield image data Lb Blue light Le Excitation light Lg Green light Lm Surface-sequential light Ln Reference light (near infrared light) Lr Red light Lw White light Zh Reflected light image Zk Fluorescence image Zm plane sequential light image Zn reflection reference light image

───────────────────────────────────────────────────── フロントページの続き (72)発明者 阿賀野 俊孝 神奈川県足柄上郡開成町宮台798番地 富 士写真フイルム株式会社内 Fターム(参考) 2G043 AA03 BA16 CA05 EA01 EA14 FA01 GA04 GA08 GB18 GB19 GB21 HA01 HA05 HA09 JA02 JA03 KA01 KA02 KA05 LA03 NA01 NA06 4C061 AA00 BB01 BB08 CC06 DD00 LL02 MM01 MM02 NN01 NN05 QQ02 QQ04 RR04 RR14 RR18 WW04 WW08 WW17 5B057 AA07 BA02 CA01 CA08 CA12 CA16 CB01 CB08 CB12 CB16 CE08 CE17 DA07 DA08 DB02 DB06 DB09 DC22 5L096 AA02 AA06 BA06 CA02 CA14 DA01 FA14 GA08 JA11 LA04 LA05  ────────────────────────────────────────────────── ─── Continued on the front page (72) Inventor Toshitaka Agano 798, Miyadai, Kaisei-cho, Ashigara-gun, Kanagawa F-Term in Fuji Photo Film Co., Ltd. (reference) 2G043 AA03 BA16 CA05 EA01 EA14 FA01 GA04 GA08 GB18 GB19 GB21 HA01 HA05 HA09 JA02 JA03 KA01 KA02 KA05 LA03 NA01 NA06 4C061 AA00 BB01 BB08 CC06 DD00 LL02 MM01 MM02 NN01 NN05 QQ02 QQ04 RR04 RR14 RR18 WW04 WW08 WW17 5B057 AA07 BA02 CA01 CA08 CA12 CA08 CB01 DB08 A08 CA02 CA14 DA01 FA14 GA08 JA11 LA04 LA05

Claims (15)

【特許請求の範囲】[Claims] 【請求項1】 励起光の照射を受けた生体組織から発せ
られた蛍光を特定の波長領域において検出することによ
り得られた第1の蛍光画像と、前記蛍光を前記特定の波
長領域とは異なる波長領域において検出することにより
得られた第2の蛍光画像もしくは参照光の照射を受けた
前記生体組織によって反射された反射参照光を検出する
ことにより得られた反射参照光画像とに基づく演算によ
り、前記生体組織までの距離を補正した前記生体組織の
組織性状を表す組織性状画像を作成し、該組織性状画像
を表示する蛍光画像表示方法において、 前記組織性状画像に含まれる各画像領域について、該領
域が規定値以上の光量を受光した異常受光領域である
か、あるいは前記規定値未満の光量を受光した正常受光
領域であるかを前記各画像のいずれかに基づいて判定
し、前記異常受光領域を前記正常受光領域とは異なる形
態で表示することを特徴とする蛍光画像表示方法。
1. A first fluorescence image obtained by detecting fluorescence emitted from a living tissue irradiated with excitation light in a specific wavelength region, and the first fluorescence image is different from the specific wavelength region. Calculation based on a second fluorescence image obtained by detecting in the wavelength region or a reflected reference light image obtained by detecting reflected reference light reflected by the living tissue irradiated with the reference light. In the fluorescence image display method for creating a tissue property image representing the tissue property of the living tissue with the distance to the living tissue corrected, and displaying the tissue property image, for each image region included in the tissue property image, Which of the above images indicates whether the area is an abnormal light receiving area receiving a light amount equal to or more than a specified value or a normal light receiving area receiving a light amount less than the specified value. Fluorescence image display method is determined, and displaying in different forms from the normal light-receiving region of the abnormal light receiving area based on.
【請求項2】 励起光の照射を受けた生体組織から発せ
られた蛍光を特定の波長領域において検出することによ
り得られた第1の蛍光画像と、前記蛍光を前記特定の波
長領域とは異なる波長領域において検出することにより
得られた第2の蛍光画像もしくは参照光の照射を受けた
前記生体組織によって反射された反射参照光を検出する
ことにより得られた反射参照光画像とに基づく演算によ
り、前記生体組織までの距離を補正した前記生体組織の
組織性状を表す組織性状画像を作成し、該組織性状画像
を表示する蛍光画像表示装置において、 前記組織性状画像に含まれる各画像領域について、該領
域が規定値以上の光量を受光した異常受光領域である
か、あるいは前記規定値未満の光量を受光した正常受光
領域であるかを前記各画像のいずれかに基づいて判定す
る判定手段と、該判定手段の出力に応じて前記異常受光
領域を前記正常受光領域とは異なる形態で表示する異常
領域表示手段とを備えたことを特徴とする蛍光画像表示
装置。
2. A first fluorescence image obtained by detecting fluorescence emitted from a living tissue irradiated with excitation light in a specific wavelength region, and the first fluorescence image is different from the specific wavelength region. Calculation based on a second fluorescence image obtained by detecting in the wavelength region or a reflected reference light image obtained by detecting reflected reference light reflected by the living tissue irradiated with the reference light. In the fluorescence image display device that creates a tissue property image representing the tissue property of the living tissue with the distance to the living tissue corrected, and displays the tissue property image, for each image region included in the tissue property image, Which of the above images indicates whether the area is an abnormal light receiving area receiving a light amount equal to or more than a specified value or a normal light receiving area receiving a light amount less than the specified value. A fluorescent image display device, comprising: a determination unit that determines based on the condition; and an abnormal region display unit that displays the abnormal light receiving region in a form different from the normal light receiving region in accordance with an output of the determining unit. .
【請求項3】 前記規定値が、前記反射参照光画像にお
ける正反射光の存在を示す反射参照光の強度に基づいて
定められたものであることを特徴とする請求項2記載の
蛍光画像表示装置。
3. The fluorescent image display according to claim 2, wherein the specified value is determined based on the intensity of the reflected reference light indicating the presence of the specularly reflected light in the reflected reference light image. apparatus.
【請求項4】 前記規定値が、前記各画像のいずれかに
おける前記検出の限界に基づいて定められたものである
ことを特徴とする請求項2記載の蛍光画像表示装置。
4. The fluorescent image display device according to claim 2, wherein the specified value is determined based on the detection limit in any one of the images.
【請求項5】 前記規定値が、前記各画像のいずれかに
おける有効測定範囲の限界に基づいて定められたもので
あることを特徴とする請求項2記載の蛍光画像表示装
置。
5. The fluorescent image display device according to claim 2, wherein the specified value is determined based on a limit of an effective measurement range in any one of the images.
【請求項6】 前記異常領域表示手段が、前記組織性状
画像が静止画像として表示されたときにのみ、前記異常
受光領域を前記正常受光領域とは異なる形態で表示する
ものであることを特徴とする請求項2から5のいずれか
1項記載の蛍光画像表示装置。
6. The abnormal area display means displays the abnormal light receiving area in a form different from the normal light receiving area only when the tissue characterization image is displayed as a still image. The fluorescent image display device according to any one of claims 2 to 5.
【請求項7】 前記組織性状画像が蛍光収率を表すもの
であることを特徴とする請求項2から6のいずれか1項
記載の蛍光画像表示装置。
7. The fluorescence image display device according to claim 2, wherein the tissue property image indicates a fluorescence yield.
【請求項8】 前記組織性状画像が規格化蛍光強度を表
すものであることを特徴とする請求項2から6のいずれ
か1項記載の蛍光画像表示装置。
8. The fluorescence image display device according to claim 2, wherein the tissue property image represents a normalized fluorescence intensity.
【請求項9】 前記各画像の内少なくとも1つが撮像素
子によって光電的に光を検出することにより得られたも
のであり、 前記検出の限界が、前記撮像素子の出力の飽和値に相当
するものであることを特徴とする請求項4、6または7
項記載の蛍光画像表示装置。
9. At least one of the images is obtained by photoelectrically detecting light by an image sensor, and the limit of the detection corresponds to a saturation value of an output of the image sensor. 8. The method according to claim 4, wherein
Item 7. The fluorescent image display device according to Item 1.
【請求項10】 前記有効測定範囲の限界に基づく規定
値が、所定距離離れた前記正常組織への前記励起光の照
射により該正常組織から発せられた蛍光の検出により得
られた前記第1の蛍光画像と前記第2の蛍光画像の少な
くとも一方の検出値の平均値に該検出値のバラツキを表
す値を加算した値に基づいて定められたものであること
を特徴とする請求項5、6または7項記載の蛍光画像表
示装置。
10. The first value obtained by detecting a fluorescence emitted from a normal tissue by irradiating the excitation light to the normal tissue at a predetermined distance, wherein the specified value based on a limit of the effective measurement range is obtained. 7. The method according to claim 5, wherein the value is determined based on a value obtained by adding a value representing a variation of the detected value to an average value of detected values of at least one of the fluorescent image and the second fluorescent image. Or the fluorescent image display device according to item 7.
【請求項11】 前記異常領域表示手段が、前記正常受
光領域がモノクロ表示されている場合には前記異常受光
領域をカラー表示させ、前記正常受光領域がカラー表示
されている場合には前記異常受光領域をモノクロ表示さ
せるものであることを特徴とする請求項2から10のい
ずれか1項記載の蛍光画像表示装置。
11. The abnormal area display means displays the abnormal light receiving area in color when the normal light receiving area is displayed in monochrome, and displays the abnormal light receiving when the normal light receiving area is displayed in color. The fluorescent image display device according to any one of claims 2 to 10, wherein the region is displayed in monochrome.
【請求項12】 前記異常領域表示手段が、前記異常受
光領域の表示を点滅させるものであることを特徴とする
請求項2から11のいずれか1項記載の蛍光画像表示装
置。
12. The fluorescent image display device according to claim 2, wherein the abnormal area display means blinks the display of the abnormal light receiving area.
【請求項13】 前記異常受光領域の表示と非表示とを
手動で切り替える表示切替手段を備えたことを特徴とす
る請求項2から12のいずれか1項記載の蛍光画像表示
装置。
13. The fluorescent image display device according to claim 2, further comprising a display switching unit for manually switching between display and non-display of the abnormal light receiving area.
【請求項14】 前記蛍光画像表示装置が生体内に挿入
する内視鏡挿入部を有する内視鏡装置であることを特徴
とする請求項2から13のいずれか1項記載の蛍光画像
表示装置。
14. The fluorescent image display device according to claim 2, wherein the fluorescent image display device is an endoscope device having an endoscope insertion portion for inserting the fluorescent image display device into a living body. .
【請求項15】 前記励起光を射出する光源を備え、該
光源が、GaN系の半導体レーザであることを特徴とす
る請求項2から14のいずれか1項記載の蛍光画像表示
装置。
15. The fluorescent image display device according to claim 2, further comprising a light source that emits the excitation light, wherein the light source is a GaN-based semiconductor laser.
JP2000299397A 2000-01-13 2000-09-29 Fluorescent image display method and apparatus Expired - Fee Related JP4298151B2 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2000299397A JP4298151B2 (en) 2000-01-13 2000-09-29 Fluorescent image display method and apparatus
US09/758,126 US20020138008A1 (en) 2000-01-13 2001-01-12 Method and apparatus for displaying fluorescence images and method and apparatus for acquiring endoscope images
US10/756,276 US20040148141A1 (en) 2000-01-13 2004-01-14 Method and apparatus for displaying fluorescence images and method and apparatus for acquiring endoscope images

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2000004939 2000-01-13
JP2000-4939 2000-01-13
JP2000299397A JP4298151B2 (en) 2000-01-13 2000-09-29 Fluorescent image display method and apparatus

Publications (2)

Publication Number Publication Date
JP2001258820A true JP2001258820A (en) 2001-09-25
JP4298151B2 JP4298151B2 (en) 2009-07-15

Family

ID=26583459

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000299397A Expired - Fee Related JP4298151B2 (en) 2000-01-13 2000-09-29 Fluorescent image display method and apparatus

Country Status (1)

Country Link
JP (1) JP4298151B2 (en)

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003339530A (en) * 2002-05-23 2003-12-02 Matsushita Electric Ind Co Ltd Rice cooker
JP2004000478A (en) * 2002-03-28 2004-01-08 Fuji Photo Film Co Ltd Method and system for fluorescence determination
JP2004237081A (en) * 2003-01-14 2004-08-26 Morita Mfg Co Ltd Diagnostic imaging apparatus
JP2005012802A (en) * 2003-06-19 2005-01-13 Tektronix Japan Ltd Gamut improper color display apparatus and method
JP2005081079A (en) * 2003-09-11 2005-03-31 Pentax Corp Endoscope system
JP2005168520A (en) * 2003-12-05 2005-06-30 Morita Mfg Co Ltd Photography device for diagnosis
JP2008224311A (en) * 2007-03-09 2008-09-25 Olympus Corp Fluorescence observation device
JP2009134383A (en) * 2007-11-29 2009-06-18 Sony Corp Image processing device, method, and program
US7570984B2 (en) 2003-01-14 2009-08-04 J. Morita Manufacturing Corporation Diagnostic imaging apparatus
WO2010021160A1 (en) * 2008-08-22 2010-02-25 オリンパスメディカルシステムズ株式会社 Imaging system and endoscope system
JP2011161046A (en) * 2010-02-10 2011-08-25 Olympus Corp Fluorescence endoscope
WO2011118263A1 (en) * 2010-03-23 2011-09-29 オリンパス株式会社 Fluorescence imaging device
JP2012050602A (en) * 2010-08-31 2012-03-15 Fujifilm Corp Electronic endoscope system
WO2012046530A1 (en) * 2010-10-07 2012-04-12 Hoya株式会社 Diagnostic system
WO2012164991A1 (en) 2011-05-27 2012-12-06 オリンパスメディカルシステムズ株式会社 Medical device
EP2599429A1 (en) * 2011-03-15 2013-06-05 Olympus Medical Systems Corp. Medical device
JPWO2014091964A1 (en) * 2012-12-13 2017-01-05 オリンパス株式会社 Fluorescence observation equipment
JP2017116555A (en) * 2007-12-19 2017-06-29 シンギュレックス・インコーポレイテッド Scanning analyzer for single molecule detection and methods of use
JP2019042156A (en) * 2017-09-01 2019-03-22 富士フイルム株式会社 Medical image processing apparatus, endoscope apparatus, diagnosis support apparatus, and medical service support apparatus
WO2019087790A1 (en) 2017-10-31 2019-05-09 富士フイルム株式会社 Inspection assistance device, endoscope device, inspection assistance method, and inspection assistance program
WO2019230095A1 (en) * 2018-05-31 2019-12-05 パナソニックIpマネジメント株式会社 Camera apparatus, image processing method, and camera system
JP2022000662A (en) * 2014-02-27 2022-01-04 インテュイティブ サージカル オペレーションズ, インコーポレイテッド System and method for specular reflection detection and reduction

Cited By (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004000478A (en) * 2002-03-28 2004-01-08 Fuji Photo Film Co Ltd Method and system for fluorescence determination
JP2003339530A (en) * 2002-05-23 2003-12-02 Matsushita Electric Ind Co Ltd Rice cooker
JP2004237081A (en) * 2003-01-14 2004-08-26 Morita Mfg Co Ltd Diagnostic imaging apparatus
US7570984B2 (en) 2003-01-14 2009-08-04 J. Morita Manufacturing Corporation Diagnostic imaging apparatus
JP2005012802A (en) * 2003-06-19 2005-01-13 Tektronix Japan Ltd Gamut improper color display apparatus and method
JP2005081079A (en) * 2003-09-11 2005-03-31 Pentax Corp Endoscope system
JP2005168520A (en) * 2003-12-05 2005-06-30 Morita Mfg Co Ltd Photography device for diagnosis
JP4521180B2 (en) * 2003-12-05 2010-08-11 株式会社モリタ製作所 Diagnostic camera
JP2008224311A (en) * 2007-03-09 2008-09-25 Olympus Corp Fluorescence observation device
US8238652B2 (en) 2007-11-29 2012-08-07 Sony Corporation Image processing apparatus and method, and program
JP2009134383A (en) * 2007-11-29 2009-06-18 Sony Corp Image processing device, method, and program
JP2017116555A (en) * 2007-12-19 2017-06-29 シンギュレックス・インコーポレイテッド Scanning analyzer for single molecule detection and methods of use
WO2010021160A1 (en) * 2008-08-22 2010-02-25 オリンパスメディカルシステムズ株式会社 Imaging system and endoscope system
US9211057B2 (en) 2008-08-22 2015-12-15 Olympus Corporation Image pickup system and endoscope system
JP2010046346A (en) * 2008-08-22 2010-03-04 Olympus Medical Systems Corp Imaging system and endoscope system
JP2011161046A (en) * 2010-02-10 2011-08-25 Olympus Corp Fluorescence endoscope
JP2011194165A (en) * 2010-03-23 2011-10-06 Olympus Corp Fluorescence observation apparatus
US9332897B2 (en) 2010-03-23 2016-05-10 Olympus Corporation Fluorescence-imaging apparatus
WO2011118263A1 (en) * 2010-03-23 2011-09-29 オリンパス株式会社 Fluorescence imaging device
JP2012050602A (en) * 2010-08-31 2012-03-15 Fujifilm Corp Electronic endoscope system
WO2012046530A1 (en) * 2010-10-07 2012-04-12 Hoya株式会社 Diagnostic system
GB2498491A (en) * 2010-10-07 2013-07-17 Hoya Corp Diagnostic system
JP2012080939A (en) * 2010-10-07 2012-04-26 Hoya Corp Diagnostic system
GB2498491B (en) * 2010-10-07 2016-08-24 Univ Kyushu Nat Univ Corp Diagnostic system
US9468381B2 (en) 2010-10-07 2016-10-18 Kyushu University, National University Corporation Diagnostic system
EP2599429A4 (en) * 2011-03-15 2014-08-20 Olympus Medical Systems Corp Medical device
EP2599429A1 (en) * 2011-03-15 2013-06-05 Olympus Medical Systems Corp. Medical device
WO2012164991A1 (en) 2011-05-27 2012-12-06 オリンパスメディカルシステムズ株式会社 Medical device
JPWO2014091964A1 (en) * 2012-12-13 2017-01-05 オリンパス株式会社 Fluorescence observation equipment
JP2022000662A (en) * 2014-02-27 2022-01-04 インテュイティブ サージカル オペレーションズ, インコーポレイテッド System and method for specular reflection detection and reduction
JP7267373B2 (en) 2014-02-27 2023-05-01 インテュイティブ サージカル オペレーションズ, インコーポレイテッド Systems and methods for specular reflection detection and reduction
US11937899B2 (en) 2014-02-27 2024-03-26 Intuitive Surgical Operations, Inc. System and method for specular reflection detection and reduction
JP2019042156A (en) * 2017-09-01 2019-03-22 富士フイルム株式会社 Medical image processing apparatus, endoscope apparatus, diagnosis support apparatus, and medical service support apparatus
WO2019087790A1 (en) 2017-10-31 2019-05-09 富士フイルム株式会社 Inspection assistance device, endoscope device, inspection assistance method, and inspection assistance program
US11302092B2 (en) 2017-10-31 2022-04-12 Fujifilm Corporation Inspection support device, endoscope device, inspection support method, and inspection support program
WO2019230095A1 (en) * 2018-05-31 2019-12-05 パナソニックIpマネジメント株式会社 Camera apparatus, image processing method, and camera system
JPWO2019230095A1 (en) * 2018-05-31 2021-06-24 パナソニックi−PROセンシングソリューションズ株式会社 Camera device, image processing method and camera system
JP7272670B2 (en) 2018-05-31 2023-05-12 i-PRO株式会社 Camera device, image processing method and camera system

Also Published As

Publication number Publication date
JP4298151B2 (en) 2009-07-15

Similar Documents

Publication Publication Date Title
JP4298151B2 (en) Fluorescent image display method and apparatus
CN110325100B (en) Endoscope system and method of operating the same
JP3862582B2 (en) Fluorescence image acquisition method, apparatus and program
JP4321697B2 (en) Fluorescent image display method and apparatus
EP2229870B1 (en) Endoscope system, endoscope video processor and method of driving endoscope system
JP4311607B2 (en) Fluorescence diagnostic information generation method and apparatus
JP4689767B2 (en) Fluorescence imaging apparatus and method of operating fluorescence imaging apparatus
US20120302847A1 (en) Endoscope system and method for assisting in diagnostic endoscopy
JP2001157658A (en) Fluorescent image display device
JP2006175052A (en) Fluorescent image capturing apparatus
US10856805B2 (en) Image processing device, living-body observation device, and image processing method
JP7335399B2 (en) MEDICAL IMAGE PROCESSING APPARATUS, ENDOSCOPE SYSTEM, AND METHOD OF OPERATION OF MEDICAL IMAGE PROCESSING APPARATUS
US20100076304A1 (en) Invisible light irradiation apparatus and method for controlling invisible light irradiation apparatus
JP7374280B2 (en) Endoscope device, endoscope processor, and method of operating the endoscope device
JP2004024656A (en) Fluorescent endoscope equipment
JP7130043B2 (en) MEDICAL IMAGE PROCESSING APPARATUS, ENDOSCOPE SYSTEM, AND METHOD OF OPERATION OF MEDICAL IMAGE PROCESSING APPARATUS
JP2002345739A (en) Image display device
JP3881142B2 (en) Fluorescence display method and apparatus
JP4109132B2 (en) Fluorescence determination device
JP2002045328A (en) Device displaying fluorescent diagnostic image
JP2004008230A (en) Fluorescent diagnostic information producing apparatus
JP2002078670A (en) Fluorescent imaging system
JP2003159209A (en) Method for displaying fluorescent diagnostic image and display unit thereof
JP4109133B2 (en) Fluorescence determination device
CN111568549A (en) Visualization system with real-time imaging function

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050912

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20061202

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081007

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081118

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090127

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090316

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090414

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090415

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120424

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120424

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130424

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130424

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140424

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees