JP6103824B2 - 蛍光内視鏡装置 - Google Patents
蛍光内視鏡装置 Download PDFInfo
- Publication number
- JP6103824B2 JP6103824B2 JP2012126814A JP2012126814A JP6103824B2 JP 6103824 B2 JP6103824 B2 JP 6103824B2 JP 2012126814 A JP2012126814 A JP 2012126814A JP 2012126814 A JP2012126814 A JP 2012126814A JP 6103824 B2 JP6103824 B2 JP 6103824B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- light
- fluorescence
- types
- imaging
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/043—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for fluorescence imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000094—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/0002—Operational features of endoscopes provided with data storages
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0638—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0646—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements with illumination filters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0661—Endoscope light sources
- A61B1/0684—Endoscope light sources using light emitting diodes [LED]
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Pathology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Biophysics (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Radiology & Medical Imaging (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Signal Processing (AREA)
- Endoscopes (AREA)
- Microelectronics & Electronic Packaging (AREA)
Description
図10の蛍光内視鏡装置は、光源部51と、撮像部52及び画像処理部54を有する。図10(a)中、53はライトガイド等の導光手段、54aはフレームメモリ、55は画像表示装置、56は内視鏡先端挿入部である。
光源部51は、光源51aと、回転フィルタ51bを有する。光源51aは、観察対象59の形態を観察するための白色光と観察対象59内に存在する複数種類の蛍光物質を励起するための複数種類の励起光とを含む光を出射させる。回転フィルタ51bは、光源51aを出射した光のうち白色光成分を透過させる白色光成分透過部51b2,51b4と複数種類の励起光成分をそれぞれ透過させる複数種類の励起光成分透過部51b1,51b3とを同一の円周方向に備えてなる。
撮像部52及び画像処理部54は、観察対象59で反射した白色光と観察対象59における蛍光物質集積部59aが発した複数種類の蛍光を夫々受光し、夫々の蛍光画像の出力の間に白色光画像の出力を挟むように、回転フィルタ51bの1回転ごとに1フレームの白色光画像、1フレームの第1の蛍光画像、1フレームの白色光画像、1フレームの第2の蛍光画像を時系列に出力することで、白色光画像のフレームレートが夫々の蛍光画像のフレームレートよりも大きくなるように構成されている。
これに対し、複数種類の蛍光画像及び白色光画像を順に時分割で出力するようにすれば、蛍光画像のフレーレートの低下を抑えることができるが、白色光画像のフレームレートが低下してしまう。白色光画像のフレームレートが低下すると、コマ飛びの大きな画像となり、形態情報が把握し難くなってしまう。
本発明の蛍光内視鏡装置は、RGBのうちの2種類の波長領域を合わせた領域に属する2種類の波長帯域の光と、RGBのうちの1種類の波長領域に属する狭帯域の光のうちのいずれかの光と、2種類の励起光のうちのいずれかの励起光とを組み合せてなる、複数種類の照射パターンの光を時分割で出射する光源部と、前記光源部により時分割で出射される夫々の光が観察対象を照射したときの、該観察対象で反射した光と該観察対象内に存在する2種類の蛍光物質が発した2種類の蛍光を受光する撮像部と、前記撮像部により受光された光を用いて白色光画像と2種類の蛍光画像を出力する画像処理部とを有し、前記撮像部は、3種類の撮像領域を有し、第1の撮像領域で前記2種類の蛍光を夫々受光するとともに、第2及び第3の撮像領域で2種類の波長帯域の反射光及び第1の撮像領域近傍の狭帯域の反射光を受光し、前記画像処理部は、前記撮像部により受光された前記2種類の蛍光の受光情報を用いて第1及び第2の蛍光画像を夫々出力するとともに、前記2種類の波長帯域の反射光及び前記第1の撮像領域近傍の狭帯域の反射光の受光情報を用いて擬似的な白色光画像を出力する。
このようにすると、白色光画像を取得するために用いる1フレーム分の処理を、蛍光画像の取得にも用いることができる。その結果、簡易な構成でありながら、2種類の蛍光画像と白色光画像とを出力するために要するフレーム数を1フレーム減らすことができ、しかも、白色光画像のフレームレートを低下させることなく、複数種類の蛍光画像のフレームレートを格段に向上させることができる。
図1は本発明の蛍光内視鏡装置の効果を概念的に示す説明図で、(a)は比較例にかかる蛍光内視鏡装置における、白色光画像と2種類の蛍光画像の取得タイミングの一例を概念的に示すタイミングチャート、(b)は本発明の蛍光内視鏡装置における、白色光画像と2種類の蛍光画像の取得タイミングの一例を概念的に示すタイミングチャート、(c)は本発明の蛍光内視鏡装置における、白色光画像と2種類の蛍光画像の取得タイミングの他の例を概念的に示すタイミングチャートである。なお、図1のタイミングチャートでは、上段に画像取得処理(撮像素子で撮像し、フレームメモリに記憶するまでの処理)のタイミングチャート、下段に画像出力処理(フレームメモリに記憶された画像情報を用いて画像を生成・出力する処理)のタイミングチャートを示してある。
例えば、比較例の蛍光内視鏡装置で白色光画像と2種類の蛍光画像を取得する場合、図1(a)に示すように、第1の蛍光画像(蛍光1)、白色光画像、第2の蛍光画像(蛍光2)、白色光画像の順で、画像が繰り返し出力される。
この場合、2種類の蛍光画像と白色光画像とを出力するために、3フレーム分の画像出力処理を要する。
そして、第1の蛍光画像(蛍光1)は、例えば、ある時点t1で出力後、次の出力時点t5までに、白色光画像、第2の蛍光画像(蛍光2)、白色光画像を出力するための3フレーム分の画像出力処理を要する。同様に、第2の蛍光画像は、例えば、ある時点t3で出力後、次の出力時点t7までに、白色光画像、第1の蛍光画像(蛍光1)、白色光画像を出力するための3フレーム分の画像出力処理を要する。
一方、白色光画像は、例えば、ある時点t2(t4)で出力後、次の出力時点t4(t6)までに、第1の蛍光画像(蛍光1)(第2の蛍光画像(蛍光2))を出力するための1フレーム分の画像出力処理で足りる。
このように、比較例の蛍光内視鏡装置の場合、白色光画像のフレームレートは、高い状態に維持できるが、複数種類の蛍光画像のフレームレートは、夫々の次の同じ種類の蛍光画像の出力までの白色光画像出力のためのフレーム数が増えるため、低下する。
なお、図1(b)の例では、白色光画像は、第1の蛍光画像(蛍光1)の出力の際に取得されていたR及びBの波長領域を合わせた領域における所定波長帯域の反射光を、第2の蛍光画像(蛍光2)の出力の際に取得される第2の蛍光の波長帯域近傍の狭帯域の反射光と合成することによって、第2の蛍光画像(蛍光2)と同時に出力されるものとする。
この場合、2種類の蛍光画像と白色光画像とを出力するために、2フレーム分の画像出力処理で足り、図1(a)に示した比較例の蛍光内視鏡装置に比べて、フレーム数が減る。
そして、第1の蛍光画像(蛍光1)は、例えば、ある時点t1で出力後、次の出力時点t3までに、白色光画像及び第2の蛍光画像(蛍光2)を出力するための1フレーム分の画像出力処理で足りる。同様に、第2の蛍光画像(蛍光2)は、例えば、ある時点t2で出力後、次の出力時点t4までに、第1の蛍光画像(蛍光1)を出力するための1フレーム分の画像出力処理で足りる。
また、白色光画像は、例えば、ある時点t2(t4)で出力後、次の出力時点t4(t6)までに、第1の蛍光画像(蛍光1)(第2の蛍光画像(蛍光2))を出力するための1フレーム分の画像出力処理t3(t5)で足りる。
このため、図1(b)に示す本発明の蛍光内視鏡装置によれば、1つの撮像部を用いた簡易な構成でありながら、白色光画像のフレームレートを低下させることなく、複数種類の蛍光画像のフレームレートを格段に向上させることができる。
図1(c)の例では、白色光画像は、第1の蛍光画像(蛍光1)の出力の際に取得されていたRGBのうちの2種類の波長領域を合わせた領域における所定波長帯域の反射光を、第2の蛍光画像(蛍光2)の出力の際に取得される第2の蛍光の波長帯域近傍の狭帯域の反射光と合成することによって、第2の蛍光画像(蛍光2)と同時に出力されることに加えて、第2の蛍光画像(蛍光2)の出力の際に取得されていた第2の蛍光の波長帯域近傍の狭帯域の反射光を、次の第1の蛍光画像(蛍光1)の出力の際に取得されるRGBのうちの2種類の波長領域を合わせた領域における所定波長帯域の反射光と合成することによって、第1の蛍光画像(蛍光1)と同時に出力される。
即ち、図1(c)に示す蛍光内視鏡装置では、異なる種類の蛍光画像を出力するごとに、その直前の蛍光出力時に取得されていた反射光を、当該蛍光出力時に取得される反射光と合成することによって白色光画像を出力する。
図1(c)の例の蛍光内視鏡装置によれば、図1(b)の例と同様、複数種類の蛍光画像のフレームレートを格段に向上させることができるという効果に加えて、更に、白色光画像を常時出力し続けることができるので、白色光画像のフレームレートを格段に向上させることができる。
このようにすれば、回転フィルタを備えなくて済み、照射パターンの時分割制御が容易になる。
このようにすれば、1つの光源で複数種類の照射パターンを時分割制御できる。
このようにすれば、撮像部を1つ用いるだけで、第1の撮像領域で2種類の蛍光を夫々受光し、夫々の蛍光の受光情報を用いて第1及び第2の蛍光画像を夫々出力するとともに、第2及び第3の撮像領域で2種類の波長帯域の反射光及び第1の撮像領域近傍の狭帯域の反射光を受光し、これらのすべての反射光の受光情報を用いて擬似的な白色光画像を出力することができ、撮像部を小型化、低価格化できる。
このようにすれば、第1の撮像領域で2種類の蛍光を夫々受光し、夫々の蛍光の受光情報を用いて第1及び第2の蛍光画像を夫々出力するとともに、第2及び第3の撮像領域で2種類の波長帯域の反射光及び第1の撮像領域近傍の狭帯域の反射光を受光し、これらのすべての反射光の受光情報を用いて擬似的な白色光画像を出力することができ、しかも、モザイク方式の単板式カラー撮像素子を用いた場合に比べて、高解像度で色再現性の良い画像が得られる。
このようにすれば、例えば、観察対象内に存在する血管を観察する場合に特に有効となる。というのは、内視鏡を用いて体腔内を観察する場合、600nmを境界として画像の見え方の違いに影響を及ぼす主要因が酸化ヘモグロビンであって、酸化ヘモグロビンの吸光度が顕著に減るのが600nmよりも長い波長領域においてであり、600nmを境界として、観察対象を撮像したときの画像の見え方が大きく異なってくるからである。
図2は波長ごとの酸化ヘモグロビンの吸光度と画像との関係を示す説明図で、(a)は波長に対する酸化ヘモグロビンの吸収特性を示すグラフ、(b)は観察対象である酸化ヘモグロビンを含んでいる血管の写真、(c)〜(f)は酸化ヘモグロビンを含んでいる血管を夫々異なる波長で撮像したときの画像を概念的に示す図で、(c)はBの領域(400nm〜470nm)の光による画像、(d)はGの領域(470nm〜580nm)の光による画像、(e)はRの領域に属し且つ600nmよりも短い狭帯域(580nm〜600nm)の光による画像、(f)はRの領域に属し且つ600nmよりも長い帯域(600nm〜700nm)の光による画像である。
このため、例えば、図2(b)に示すような、血管を含む組織を観察対象として400nm〜470nm、470nm〜580nm、580nm〜600nm、600nm〜700nmの光を夫々照射して撮像した場合、600nmまでの光では、血液中の酸化ヘモグロビンの吸光度が高いため、図2(c)〜図2(e)に示すように、太い血管のみならず細い血管でも多量の光が吸収され、画像中において血管以外の組織とのコントラストがついて観察されるが、600nmよりも長波長の光では、血液中の酸化ヘモグロビンの吸光度が低いため、図2(f)に示すように、太い血管のみ画像中において血管以外の組織とのコントラストがつき、細い血管は吸収される光量が極めて少なく、画像中において血管以外の組織とのコントラストがつかない。
ここで、580nm〜700nmはRの波長領域に属するが、図2(e)、図2(f)に示したように、600nmを境界として画像中の血管の見え方が異なる。
例えば、590nmの光で撮像した画像は470nm〜580nmの光で撮像した画像に近似した見え方となる。
上述のように、第1の撮像領域で2種類の蛍光を受光し、第2の撮像領域で2種類の波長帯域の反射光のうちの第1の波長帯域の反射光を受光し、第3の撮像領域で2種類の波長帯域の反射光のうちの第2の波長帯域の反射光及び第2の蛍光の波長帯域近傍の狭帯域の反射光を受光する構成において、例えば、第3の撮像領域で受光する2種類の反射光のうちの一方の反射光の波長が600nmよりも長く、他方の反射光の波長が600nmよりも短くなるように撮像部を構成すれば、第3の撮像領域で受光するこれらの反射光が580nm〜700nmのRの波長帯域に属する光であっても、600nmよりも短い波長を擬似的なGの反射光成分とすることができる。なお、580nm〜600nmの波長領域の光を擬似的なGの反射光成分とする場合、擬似的なGの反射光成分を用いて出力される白色光画像が、擬似的でないGの反射光成分を用いて出力したときの白色光画像に極力近似したものとなるように、できるだけGの波長領域寄りの波長の光を用いるのが好ましい。
また、例えば、470nm〜580nmに加えて680nm〜700nmの波長を第3の撮像領域で受光するようにして、第3の撮像領域で受光する2種類の反射光のうちの一方の反射光の波長が600nmよりも長く、他方の反射光の波長が600nmよりも短くなるように撮像部を構成すれば、600nmよりも長く、蛍光波長帯域から外れた波長を擬似的なRの反射光成分とすることができる。なお、600nmよりも長く、蛍光波長帯域から外れた波長を擬似的なRの反射光成分とする場合、擬似的なRの反射光成分を用いて出力される白色光画像が、擬似的でないRの反射光成分を用いて出力したときの白色光画像に極力近似したものとなるように、できるだけRの波長領域寄りの波長の光を用いるのが好ましい。
図3は本発明の第1実施形態にかかる蛍光内視鏡装置の全体構成を概略的に示すブロック図である。図4は第1実施形態の蛍光内視鏡装置において用いられているフィルタ等の光学特性を示す説明図で、(a)は単板式カラー撮像素子に備わる各撮像領域に備わるフィルタの透過波長領域、(b)は励起光カットフィルタの透過波長帯域及び第1及び第2の蛍光物質が発する第1及び第2の蛍光波長帯域、(c)は第1の照射パターンにおける照射光の波長帯域、(d)は第2の照射パターンにおける照射光の波長帯域を夫々示している。図5は第1実施形態の蛍光内視鏡装置における、白色光画像と2種類の蛍光画像の取得タイミングを概念的に示すタイミングチャートで、(a)はその一例、(b)は他の例、を夫々示している。
なお、第1実施形態の蛍光内視鏡装置では、510nm〜570nmでピーク波長が520nmの蛍光(図4(b)における蛍光1)を発する蛍光物質を第1の蛍光物質、520nm〜580nmでピーク波長が550nmの蛍光(図4(b)における蛍光2)を発する蛍光物質を第2の蛍光物質、に夫々用いた場合の蛍光観察に好適な構成を前提としている。
光源部10は、RGBのうちの2種類の波長領域を合わせた領域に属する2種類の波長帯域の光と、RGBのうちの1種類の波長領域に属する狭帯域の光のうちのいずれかの光と、2種類の励起光のうちのいずれかの励起光とを組み合わせてなる、複数種類の照射パターンの光を時分割で出射する。なお、ここでは、便宜上、照射パターンを2種類有するものとして説明する。
詳しくは、光源部10は、第1の照射パターンのタイミングにおいて、図4(c)に示すように、Bに属する400nm〜450nmの光と、Gに属する480nmの第1の励起光と、Rに属する590〜680nmの光とを、夫々別個に出射し、第2の照射パターンのタイミングにおいて、図4(d)に示すように、Gに属する500nmの第2の励起光と、Rに属する590nmの狭帯域の光とを、夫々別個に出射する、LED又はLD等の複数種類のダイオード光源を有して構成されている。
単板式カラー撮像素子20は、個々の受光素子の上に、RGBの夫々の波長領域(図4(a)の例では、B:400nm〜470nm、G:470nm〜580nm、R:580nm〜700nm)に対応する透過特性を持つ色フィルタを例えばベイヤー配列等して構成されており、夫々異なる透過特性を持つ色フィルタによりRGBの夫々の波長領域に対応する3つの撮像領域を備えている。
画像取得部30aは、単板式カラー撮像素子20の夫々の撮像領域で受光した電気信号を、撮像領域ごとの画像情報に変換する。
メモリ30b1,30b2は、画像取得部30aが変換した撮像領域ごとの画像情報を照射パターンごとに記憶する。図4の例では、メモリ30b1は、図4(c)に示すように、第1の照射パターンにおいて単板式カラー撮像素子20によって撮像され画像取得部30aによって変換された、400nm〜450nmの反射光の画像情報と、510nm〜570nmでピーク波長が520nmの第1の蛍光の画像情報と、590nm〜680nmの反射光の画像情報とを記憶する。また、メモリ30b2は、図4(d)に示すように、第2の照射パターンにおいて単板式カラー撮像素子20によって撮像され画像取得部30aによって変換された、520nm〜580nmでピーク波長が550nmの第2の蛍光の画像情報と、590nmの狭帯域の反射光の画像情報とを記憶する。
ここで、590nmの狭帯域の反射光の画像情報は、Gの領域の反射光の画像情報と擬似化できる。その理由は、上述したように、酸化ヘモグロビンの吸光度が顕著に減るのが600nmよりも長い波長領域においてであり、600nmを境界として、観察対象を撮像したときの画像の見え方が大きく異なってくるからである。このため、例えば、図4(a)の第3の撮像領域で受光する2種類の反射光のうちの一方の反射光の波長が600nmよりも長く、他方の反射光の波長が600nmよりも短い場合には、これらの反射光が580nm〜700nmのRの波長領域に属する光であっても、600nmよりも短い波長を擬似的なGの反射光成分とすることができる。
詳しくは、例えば、タイミング制御部30dは、光源部10が第1の照射パターンに切り替えられたときのタイミングで、撮像部20が反射光及び第1の蛍光を受光するとともに画像処理部30が第1の蛍光画像を生成・出力し、光源部10が第2の照射パターンに切り替えられたときのタイミングで、撮像部20が反射光及び第2の蛍光を受光するとともに画像処理部30が第2の蛍光画像及び白色光画像を生成・出力するように、光源部10、撮像部20及び画像処理部30の駆動タイミングを制御する。
なお、タイミング制御部30dは、撮像部20及び画像処理部30における白色光画像の生成・出力タイミングに関し、照射パターンが切り替わるごとに、現時点における反射光の画像情報と直前の時点における反射光の画像情報とを用いて白色光画像を生成・出力するように、光源部10、撮像部20及び画像処理部30の駆動タイミングを制御してもよい。
出力された画像は、表示装置の表示部30に表示される。
図6は本発明の第2実施形態にかかる蛍光内視鏡装置の全体構成を概略的に示すブロック図である。図7は第2実施形態の蛍光内視鏡装置において用いられているフィルタ等の光学特性を示す説明図で、(a)は3板式撮像素子に備わる各撮像領域の透過波長帯域、(b)は励起光カットフィルタの透過波長帯域及び第1及び第2の蛍光物質が発する第1及び第2の蛍光波長帯域、(c)は第1の照射パターンにおける照射光の波長帯域、(d)は第2の照射パターンにおける照射光の波長帯域を夫々示している。図8は第2実施形態の蛍光内視鏡装置における、白色光画像と2種類の蛍光画像の取得タイミングの一例を概念的に示すタイミングチャートである。図8は第2実施形態の蛍光内視鏡装置における、白色光画像と2種類の蛍光画像の取得タイミングを概念的に示すタイミングチャートで、(a)はその一例、(b)は他の例、を夫々示している。
なお、第2実施形態の蛍光内視鏡装置では、590nm〜640nmでピーク波長が610nmの蛍光(図7(b)における蛍光1)を発する蛍光物質を第1の蛍光物質、600nm〜660nmでピーク波長が620nmの蛍光(図7(b)における蛍光2)を発する蛍光物質を第2の蛍光物質、に夫々用いた場合の蛍光観察に好適な構成を前提としている。
光源部10は、第1の照射パターンのタイミングにおいて、図7(c)に示すように、Bに属する400nm〜450nmの光と、Gに属する500nm〜540nmの光と、Gに属する560nmの第1の励起光とを、夫々別個に出射し、第2の照射パターンのタイミングにおいて、図7(d)に示すように、Gに属する570nmの第2の励起光と、Rに属する700nmの狭帯域の光とを、夫々別個に出射する、LED又はLD等の複数種類のダイオード光源を有して構成されている。
3板式撮像素子20’は、例えば、第1のプリズム20a’と、Bの波長領域(400nm〜470nm)の光を反射し、G,Bの波長領域(470nm〜580nm、580nm〜700nm)の光を透過する青色反射ダイクロイックミラー20b’と、第2のプリズム20c’と、Rの波長領域のうち580nm〜680nmの波長の光を反射し、Gの波長領域(470nm〜580nm)とRの波長領域のうち680nm〜700nmの波長の光を透過する赤色反射ダイクロイックミラー20d’と、第3のプリズム20e’とを有してなる3色分解光学素子の各出射面にそれぞれの撮像領域に対応した撮像素子20f’,20g’,20h’を備えて構成されている。第3の撮像領域用撮像素子20g’は、470nm〜580nmと680nm〜700nmの波長の光を撮像する。
ここで、700nmの狭帯域の反射光は、第3の撮像領域用撮像素子20g’で撮像されたものであるが、その画像情報は、Rの領域の反射光の画像情報と擬似化できる。その理由は、上述したように、酸化ヘモグロビンの吸光度が顕著に減るのが600nmより長い波長領域においてであり、600nmを境界として、観察対象を撮像したときの画像の見え方が大きく異なるからである。このため、例えば、図7(a)の第3の撮像領域で受光する2種類の反射光のうちの一方の反射光の波長が600nmよりも長く、他方の反射光の波長が600nmよりも短い場合には、これらの反射光が第3の撮像領域で受光される光であっても、600nmよりも長い波長を擬似的なRの反射光成分とすることができる。
その他の構成は、第1実施形態の蛍光画像装置と略同じである。
出力された画像は、表示装置の表示部40に表示される。
例えば、第1実施形態及び第2実施形態の内視鏡装置におけるそれぞれの照射パターンを組み合わせて構成してもよい。
図9は本発明のさらに他の実施形態として、第1及び第2の実施形態におけるそれぞれの照射パターンを組み合わせた蛍光内視鏡装置の効果を概念的に示す説明図で、(a)は比較例にかかる蛍光内視鏡装置における、白色光画像と4種類の蛍光画像の取得タイミングを概念的に示すタイミングチャート、(b)は本発明の蛍光内視鏡装置における白色光画像と4種類の蛍光画像の取得タイミングの一例を概念的に示すタイミングチャートである。
なお、図9の例では、第1実施形態の蛍光内視鏡装置の蛍光観察に用いた蛍光物質および蛍光と区別するため、第2実施形態の蛍光内視鏡装置の蛍光観察に用いた第1及び第2の蛍光物質から発する蛍光1、蛍光2を、第3及び第4の蛍光物質から発する蛍光3、蛍光4と夫々称することとする。
比較例の蛍光内視鏡装置で白色光画像と4種類の蛍光画像を取得する場合、図9(a)に示すように、第1の蛍光画像(蛍光1)、白色光画像、第2の蛍光画像(蛍光2)、白色光画像、第3の蛍光画像(蛍光3)、白色光画像、第4の蛍光画像(蛍光4)、白色光画像の順で、画像が繰り返し出力される。
この場合、4種類の蛍光画像と白色光画像とを出力するために、7フレーム分の画像出力処理を要する。
そして、第1の蛍光画像(蛍光1)は、例えば、ある時点t1で出力後、次の出力時点t9までに、白色光画像、第2の蛍光画像(蛍光2)、白色光画像、第3の蛍光画像(蛍光3)、白色光画像、第4の蛍光画像(蛍光4)、白色光画像、を出力するための7フレーム分の画像出力処理を要する。第2の蛍光画像(蛍光2)、第3の蛍光画像(蛍光3)、第4の蛍光画像(蛍光4)も、第1の蛍光画像と同様、ある時点での出力後、次の出力時点までに、7フレーム分の画像出力処理を要する。
なお、図9(b)の例では、白色光画像は、第2の蛍光画像(蛍光2)、第4の蛍光画像(蛍光4)のそれぞれと、同時に出力されるものとする。より詳しくは、白色光画像は、第1の蛍光画像(蛍光1)の出力の際に取得されていたR及びBの波長領域を合わせた領域における所定波長帯域の反射光を、第2の蛍光画像(蛍光2)の出力の際に取得される第2の蛍光の波長帯域近傍の狭帯域の反射光と合成することによって、出力される。また、白色光画像は、第3の蛍光画像(蛍光3)の出力の際に取得されていたB及びGの波長領域を合わせた領域における所定波長帯域の反射光を、第4の蛍光画像(蛍光4)の出力の際に取得される第4の蛍光の波長帯域近傍の狭帯域の反射光と合成することによって、出力される。
そして、第1の蛍光画像(蛍光1)は、例えば、ある時点t1で出力後、次の出力時点t5までに、白色光画像及び第2の蛍光画像(蛍光2)、第3の蛍光画像(蛍光3)、白色光画像及び第4の蛍光画像(蛍光4)を出力するための3フレーム分の画像出力処理で足りる。第2の蛍光画像(蛍光2)、第3の蛍光画像(蛍光3)、第4の蛍光画像(蛍光4)も、第1の蛍光画像と同様、ある時点での出力後、次の出力時点までに、3フレーム分の画像出力処理で足りる。
このため、図9(b)に示す本発明の蛍光内視鏡装置によっても、1つの撮像部を用いた簡易な構成でありながら、白色光画像のフレームレートを低下させることなく、複数種類の蛍光画像のフレームレートを格段に向上させることができる。
15 導光手段
20 単板式カラー撮像素子(撮像部)
20’ 3板式撮像素子(撮像部)
20a’ 第1のプリズム
20b’ 青色反射ダイクロイックミラー
20c’ 第2のプリズム
20d’ 赤色反射ダイクロイックミラー
20e’ 第3のプリズム
20f’ 第1の撮像領域用撮像素子
20g’ 第3の撮像領域用撮像素子
20h’ 第2の撮像領域用撮像素子
25 内視鏡挿入部
25’ 硬性鏡挿入部
26 カメラヘッド
30 画像処理部
30a 画像取得部
30b1、30b2 メモリ
30c 画像生成部
30d タイミング制御部
40 表示装置の表示部
45 被観察体
51a 光源
51b 回転フィルタ
51b2、51b4 白色光成分透過部
51b1、51b3 励起光成分透過部
52 撮像部
53 導光手段
54 画像処理部
54a フレームメモリ
55 画像表示装置
56 内視鏡先端部
59 観察対象
59a 蛍光物質集積部
Claims (7)
- RGBのうちの2種類の波長領域を合わせた領域に属する2種類の波長帯域の光と、RGBのうちの1種類の波長領域に属する狭帯域の光のうちのいずれかの光と、2種類の励起光のうちのいずれかの励起光とを組み合せてなる、複数種類の照射パターンの光を時分割で出射する光源部と、
前記光源部により時分割で出射される夫々の光が観察対象を照射したときの、該観察対象で反射した光と該観察対象内に存在する2種類の蛍光物質が発した2種類の蛍光を受光する撮像部と、
前記撮像部により受光された光を用いて白色光画像と2種類の蛍光画像を出力する画像処理部とを有し、
前記撮像部は、3種類の撮像領域を有し、
第1の撮像領域で前記2種類の蛍光を夫々受光するとともに、第2及び第3の撮像領域で2種類の波長帯域の反射光及び第1の撮像領域近傍の狭帯域の反射光を受光し、
前記画像処理部は、前記撮像部により受光された前記2種類の蛍光の受光情報を用いて第1及び第2の蛍光画像を夫々出力するとともに、前記2種類の波長帯域の反射光及び前記第1の撮像領域近傍の狭帯域の反射光の受光情報を用いて擬似的な白色光画像を出力することを特徴とする蛍光内視鏡装置。 - 前記光源部は、前記RGBのうちの2種類の波長領域を合わせた領域に属する2種類の波長帯域の光と、RGBのうちの1種類の波長領域に属する狭帯域の光と、前記2種類の励起光の夫々を別個に出射するダイオード光源を有してなることを特徴とする請求項1に記載の蛍光内視鏡装置。
- 前記光源部は、
白色光と2種類の励起光とを含む光を出射させる光源と、
前記光源を出射した光のうち前記RGBのうちの2種類の波長領域を合わせた領域に属する2種類の波長帯域の光及び第1の励起光を透過させる第1の透過部と、該光源を出射した光のうち前記第1の撮像領域近傍の狭帯域光及び第2の励起光を透過させる第2の透過部とを、同一の円周方向に備えてなる透過部の組を、少なくとも1組、同一の円周方向に有する回転フィルタとからなることを特徴とする請求項1に記載の蛍光内視鏡装置。 - 前記撮像部は、単板式カラー撮像素子からなり、
前記画像処理部は、
前記単板式カラー撮像素子の夫々の撮像領域で受光した電気信号を、撮像領域ごとの画像情報に変換する画像取得部と、
前記画像取得部が変換した撮像領域ごとの画像情報を前記照射パターンごとに記憶するメモリと、
前記照射パターンごとに前記メモリに記憶された撮像領域ごとの画像情報を用いて白色光画像及び蛍光画像を生成・出力する画像生成部と、
前記光源部の照射パターンの切替速度に対応して前記白色光画像及び蛍光画像の生成・出力タイミングを制御するタイミング制御部と、
を有してなることを特徴とする請求項1〜3のいずれかに記載の蛍光内視鏡装置。 - 前記撮像部は、3板式撮像素子からなり、
前記画像処理部は、
前記3板式撮像素子の夫々の撮像領域で受光した電気信号を、撮像領域ごとの画像情報に変換する画像取得部と、
前記画像取得部が変換した撮像領域ごとの画像情報を前記照射パターンごとに記憶するメモリと、
前記照射パターンごとに前記メモリに記憶された撮像領域ごとの画像情報を用いて白色光画像及び蛍光画像を生成・出力する画像生成部と、
前記光源部の照射パターンの切替速度に対応して前記白色光画像及び蛍光画像の生成・出力タイミングを制御するタイミング制御部と、
を有してなることを特徴とする請求項1〜3のいずれかに記載の蛍光内視鏡装置。 - 前記撮像部は、第1の撮像領域で前記2種類の蛍光を受光し、第2の撮像領域で前記2種類の波長帯域の反射光のうちの第1の波長帯域の反射光を受光し、第3の撮像領域で前記2種類の波長帯域の反射光のうちの第2の波長帯域の反射光及び前記第1の撮像領域近傍の狭帯域の反射光を受光することを特徴とする請求項4又は5のいずれかに記載の蛍光内視鏡装置。
- 前記撮像部は、前記第3の撮像領域で受光する前記第2の波長帯域の反射光及び前記第1の撮像領域近傍の狭帯域の反射光のうちの一方の反射光の波長が600nmよりも長く、他方の反射光の波長が600nmよりも短くなるように構成されていることを特徴とする請求項6に記載の蛍光内視鏡装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012126814A JP6103824B2 (ja) | 2012-06-04 | 2012-06-04 | 蛍光内視鏡装置 |
US13/908,116 US9271635B2 (en) | 2012-06-04 | 2013-06-03 | Fluorescence endoscope apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012126814A JP6103824B2 (ja) | 2012-06-04 | 2012-06-04 | 蛍光内視鏡装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013248319A JP2013248319A (ja) | 2013-12-12 |
JP6103824B2 true JP6103824B2 (ja) | 2017-03-29 |
Family
ID=49756508
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012126814A Expired - Fee Related JP6103824B2 (ja) | 2012-06-04 | 2012-06-04 | 蛍光内視鏡装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US9271635B2 (ja) |
JP (1) | JP6103824B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019124739A1 (ko) * | 2017-12-21 | 2019-06-27 | 한국전기연구원 | 다중 영상 내시경 시스템 |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109567724A (zh) | 2012-02-23 | 2019-04-05 | 史密夫和内修有限公司 | 视频内窥镜*** |
JP6042798B2 (ja) * | 2013-12-19 | 2016-12-14 | オリンパス株式会社 | 画像処理装置及び内視鏡システム |
JP6460631B2 (ja) * | 2014-02-19 | 2019-01-30 | オリンパス株式会社 | 撮像装置、内視鏡装置及び顕微鏡装置 |
WO2017047142A1 (ja) * | 2015-09-18 | 2017-03-23 | オリンパス株式会社 | 内視鏡装置及び内視鏡システム |
WO2017110492A1 (ja) * | 2015-12-24 | 2017-06-29 | オリンパス株式会社 | 撮像システム及び画像処理装置 |
WO2017175452A1 (ja) | 2016-04-04 | 2017-10-12 | ソニー株式会社 | 画像処理装置、撮像装置、および画像処理方法、並びにプログラム |
EP3251578A1 (en) * | 2016-05-30 | 2017-12-06 | Leica Instruments (Singapore) Pte. Ltd. | Medical device for the observation of a partly fluorescent object, using a filter system with a transmission window |
JP2018027272A (ja) | 2016-08-19 | 2018-02-22 | ソニー株式会社 | 撮像システム |
WO2018051558A1 (ja) * | 2016-09-16 | 2018-03-22 | オリンパス株式会社 | 内視鏡用光源装置 |
EP3585044A4 (en) | 2017-02-20 | 2020-01-15 | Sony Corporation | IMAGE PROCESSING DEVICE, IMAGE PROCESSING METHOD AND PROGRAM |
WO2018225122A1 (ja) * | 2017-06-05 | 2018-12-13 | オリンパス株式会社 | 内視鏡装置 |
US11730340B2 (en) * | 2019-05-01 | 2023-08-22 | Karl Storz Imaging, Inc. | Video display system having an adaptive overlay |
JP2019122865A (ja) * | 2019-05-10 | 2019-07-25 | 富士フイルム株式会社 | 内視鏡光源装置、内視鏡システム、及び内視鏡光源装置の作動方法 |
Family Cites Families (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7179222B2 (en) * | 1996-11-20 | 2007-02-20 | Olympus Corporation | Fluorescent endoscope system enabling simultaneous achievement of normal light observation based on reflected light and fluorescence observation based on light with wavelengths in infrared spectrum |
US6293911B1 (en) * | 1996-11-20 | 2001-09-25 | Olympus Optical Co., Ltd. | Fluorescent endoscope system enabling simultaneous normal light observation and fluorescence observation in infrared spectrum |
US6008889A (en) * | 1997-04-16 | 1999-12-28 | Zeng; Haishan | Spectrometer system for diagnosis of skin disease |
ATE391451T1 (de) * | 1998-01-26 | 2008-04-15 | Massachusetts Inst Technology | Endoskop zur erfassung von fluoreszenzbilder |
EP1148810B1 (en) * | 1999-01-26 | 2005-11-16 | Newton Laboratories, Inc. | Autofluorescence imaging system for endoscopy |
US20020138008A1 (en) * | 2000-01-13 | 2002-09-26 | Kazuhiro Tsujita | Method and apparatus for displaying fluorescence images and method and apparatus for acquiring endoscope images |
US6697652B2 (en) * | 2001-01-19 | 2004-02-24 | Massachusetts Institute Of Technology | Fluorescence, reflectance and light scattering spectroscopy for measuring tissue |
KR100800120B1 (ko) * | 2003-12-08 | 2008-02-01 | 가부시끼가이샤 모리다 세이사꾸쇼 | 치과 진료 장치 |
JP4575720B2 (ja) * | 2004-07-23 | 2010-11-04 | Hoya株式会社 | 電子内視鏡システム |
JP4555093B2 (ja) * | 2005-01-05 | 2010-09-29 | Hoya株式会社 | 電子内視鏡システム |
JP2006263044A (ja) * | 2005-03-23 | 2006-10-05 | Fuji Photo Film Co Ltd | 蛍光検出システム |
JP2006296635A (ja) * | 2005-04-19 | 2006-11-02 | Olympus Corp | 内視鏡装置 |
JP4734074B2 (ja) * | 2005-09-30 | 2011-07-27 | オリンパスメディカルシステムズ株式会社 | 内視鏡装置 |
US7420151B2 (en) * | 2005-10-17 | 2008-09-02 | Novadaq Technologies Inc. | Device for short wavelength visible reflectance endoscopy using broadband illumination |
US8498695B2 (en) * | 2006-12-22 | 2013-07-30 | Novadaq Technologies Inc. | Imaging system with a single color image sensor for simultaneous fluorescence and color video endoscopy |
US20090289200A1 (en) * | 2008-05-22 | 2009-11-26 | Fujifilm Corporation | Fluorescent image obtainment method and apparatus, fluorescence endoscope, and excitation-light unit |
US8300093B2 (en) * | 2009-01-12 | 2012-10-30 | Fujifilm Corporation | Endoscope image processing method and apparatus, and endoscope system using the same |
JP5489785B2 (ja) * | 2010-03-03 | 2014-05-14 | オリンパス株式会社 | 蛍光内視鏡装置 |
JP5506472B2 (ja) * | 2010-03-12 | 2014-05-28 | オリンパス株式会社 | 蛍光内視鏡装置 |
JP5489806B2 (ja) * | 2010-03-24 | 2014-05-14 | オリンパス株式会社 | 蛍光内視鏡装置 |
DE102010013307B4 (de) * | 2010-03-29 | 2022-12-15 | Karl Storz Se & Co. Kg | Lichtquelleneinrichtung für endoskopische oder exoskopische Anwendungen |
JP5405445B2 (ja) * | 2010-12-17 | 2014-02-05 | 富士フイルム株式会社 | 内視鏡装置 |
JP2014039571A (ja) * | 2010-12-27 | 2014-03-06 | Olympus Corp | 蛍光内視鏡装置 |
CN103260500B (zh) * | 2011-05-27 | 2016-08-10 | 奥林巴斯株式会社 | 医疗装置 |
WO2014125724A1 (ja) * | 2013-02-12 | 2014-08-21 | オリンパスメディカルシステムズ株式会社 | 内視鏡装置 |
-
2012
- 2012-06-04 JP JP2012126814A patent/JP6103824B2/ja not_active Expired - Fee Related
-
2013
- 2013-06-03 US US13/908,116 patent/US9271635B2/en active Active
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019124739A1 (ko) * | 2017-12-21 | 2019-06-27 | 한국전기연구원 | 다중 영상 내시경 시스템 |
Also Published As
Publication number | Publication date |
---|---|
US9271635B2 (en) | 2016-03-01 |
JP2013248319A (ja) | 2013-12-12 |
US20130338438A1 (en) | 2013-12-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6103824B2 (ja) | 蛍光内視鏡装置 | |
JP4554944B2 (ja) | 内視鏡装置 | |
JP4951256B2 (ja) | 生体観測装置 | |
US8007433B2 (en) | Electronic endoscope | |
WO2011074447A1 (ja) | 光制御装置、制御装置、光学スコープ及び光走査型光学装置 | |
WO2011074448A1 (ja) | 光制御装置、制御装置、光学スコープ及び光走査型光学装置 | |
JP5358368B2 (ja) | 内視鏡システム | |
JP2015029841A (ja) | 撮像装置および撮像方法 | |
US10722105B2 (en) | Medical imaging device, medical image acquisition system, and endoscope apparatus | |
JP2008188196A (ja) | 撮像装置 | |
JP2006187598A5 (ja) | ||
JP5506472B2 (ja) | 蛍光内視鏡装置 | |
JP6234621B2 (ja) | 内視鏡装置 | |
JP7219208B2 (ja) | 内視鏡装置 | |
JP2012078504A (ja) | 照明装置および観察システム | |
US11412152B2 (en) | Speckle removal in a pulsed hyperspectral imaging system | |
JP5489785B2 (ja) | 蛍光内視鏡装置 | |
JP2011067486A (ja) | 画像取得方法および装置 | |
JP2017225736A (ja) | 内視鏡装置 | |
JP5570352B2 (ja) | 画像撮像装置 | |
JP5489806B2 (ja) | 蛍光内視鏡装置 | |
JP6203124B2 (ja) | 内視鏡装置、内視鏡装置の作動方法 | |
CN110731748A (zh) | 一种电子内窥镜 | |
JP2018126174A (ja) | 内視鏡装置 | |
JP6138386B1 (ja) | 内視鏡装置及び内視鏡システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150414 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160328 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160419 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160531 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160913 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161020 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170221 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170228 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6103824 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |