JP5623469B2 - 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡用制御プログラム - Google Patents

内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡用制御プログラム Download PDF

Info

Publication number
JP5623469B2
JP5623469B2 JP2012152641A JP2012152641A JP5623469B2 JP 5623469 B2 JP5623469 B2 JP 5623469B2 JP 2012152641 A JP2012152641 A JP 2012152641A JP 2012152641 A JP2012152641 A JP 2012152641A JP 5623469 B2 JP5623469 B2 JP 5623469B2
Authority
JP
Japan
Prior art keywords
oxygen saturation
light
image
signal
normal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2012152641A
Other languages
English (en)
Other versions
JP2014014438A (ja
Inventor
加來 俊彦
俊彦 加來
村山 任
任 村山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2012152641A priority Critical patent/JP5623469B2/ja
Priority to US13/934,476 priority patent/US10016152B2/en
Priority to EP13175345.1A priority patent/EP2682044B1/en
Publication of JP2014014438A publication Critical patent/JP2014014438A/ja
Application granted granted Critical
Publication of JP5623469B2 publication Critical patent/JP5623469B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/043Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for fluorescence imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0638Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0653Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements with wavelength conversion
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0655Control therefor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/145Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/1455Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
    • A61B5/14551Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters for measuring blood gases
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/145Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/1455Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
    • A61B5/1459Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters invasive, e.g. introduced into the body by a catheter
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/05Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Biophysics (AREA)
  • Veterinary Medicine (AREA)
  • Optics & Photonics (AREA)
  • Pathology (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Signal Processing (AREA)
  • Endoscopes (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Description

本発明は、内視鏡を用いて血中ヘモグロビンの酸素飽和度などの血液に関する情報を取得する内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡用制御プログラムに関するものである。
近年の内視鏡分野においては、診断時に使用する観察画像として、白色光の照明によって得られる通常画像の他に、血中ヘモグロビンの酸素飽和度の変化を疑似カラー等で画像化した酸素飽和度画像が用いられつつある。
通常画像は、主として、血管や凹凸など粘膜の状態を詳細に観察することを目的とする画像である。そのため、通常画像には、相当の解像度が必要となる。一方、酸素飽和度画像では、ガンの存在を示す低酸素領域は、一定の広がりを持つ領域として分布しているため、解像度はそれほど要求されていない。しかしながら、酸素飽和度画像では、反射光の光量に応じて酸素飽和度が決められるため、反射光は感度良く的確に捉える必要がある。そのため、酸素飽和度画像の生成には、LD・LEDやそれに匹敵する高光量の狭帯域光の照明が必要となり、また、高光量の照明光を使用しない場合には、高感度の撮像素子が必要となる。
そこで、特許文献1に示すような、通常センサと高感度の高感度センサを備えた2センサタイプの内視鏡スコープを用いることで、高解像度が要求される通常画像については通常センサの画像信号に基づいて生成し、高感度が要求される酸素飽和度画像については高感度センサの画像信号に基づいて生成することが考えられる。
特開2010−227256号公報
特許文献1の内視鏡スコープは、微弱な自家蛍光を感度良く検出することを目的としているため、自家蛍光については常に高感度センサで検出する必要がある。これに対して、酸素飽和度画像の生成に必要な照明光(酸素飽和度用照明光)は特定の波長域に狭帯域化しているため(例えば473±10nm)、白色光などの広帯域光と比較して光量は落ちるものの、自家蛍光ほど光量は低くない。例えば、近景状態では、酸素飽和度の変化を捉えるのに十分な光量を確保できると考えられる。このように、酸素飽和度用照明光の光量を十分に確保できる状況下においても、解像度の高い通常センサではなく、解像度の低い高感度センサで酸素飽和度画像を生成した場合には、通常センサを使用していれば得られたはずの解像度を取得することができない。
本発明は、血中ヘモグロビンの酸素飽和度の変化を捉えるために必要な感度を確保しつつ、可能な限りの解像度を持つ酸素飽和度画像を取得することができる内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡用制御プログラムを提供することを目的としている。
本発明の内視鏡システムは、酸化、還元ヘモグロビンの吸光係数が異なる異吸収波長域を含む酸素飽和度用照明光を、被検体に照射する照明手段と、酸素飽和度用照明光の反射光の光量を検出する光量検出手段と、酸素飽和度用照明光が照明された被検体の反射像を撮像素子で撮像する撮像手段であって、撮像素子は互いに感度が異なる第1及び第2撮像素子からなり、第1及び第2撮像素子のうち酸素飽和度用照明光の反射光の光量に応じて決められた撮像素子に切り替えて、切り替えた撮像素子で被検体の反射像を撮像して、酸素飽和度用信号を取得する撮像手段と酸素飽和度用信号を高感度化するための高感度化手段と、酸素飽和度用照明光の反射光の光量が所定の条件を満たす場合には、高感度化しない酸素飽和度用信号に基づいて、酸素飽和度を画像化した酸素飽和度画像を生成し、酸素飽和度用照明光の反射光の光量が所定の条件を満たさない場合は、高感度化した酸素飽和度用信号に基づいて、酸素飽和度画像を生成する画像生成手段とを備えることを特徴とする。
高感度化手段は、酸素飽和度用信号の高感度化を行っていない場合には、酸素飽和度用照明光の反射光の光量が第1閾値を下回ったときに、高感度化を開始させ、酸素飽和度用信号の高感度化を行っている場合には、酸素飽和度用照明光の反射光の光量が、第1閾値よりも大きい第2閾値を上回ったときに、高感度化を停止させる制御部を有することが好ましい。
撮像手段は、酸素飽和度用R光、酸素飽和度用G光、酸素飽和度用B光で照明された被検体の反射像を撮像することによって、酸素飽和度用R光に対応する酸素飽和度用R信号、酸素飽和度用G光に対応する酸素飽和度用G信号、酸素飽和度用B光に対応する酸素飽和度用B信号を取得し、光量検出手段は、酸素飽和度用R信号、酸素飽和度用G信号、酸素飽和度用B信号のうち少なくともいずれかの輝度値に基づいて、酸素飽和度用照明光の反射光の光量を定めてもよい。また、撮像手段は、被検体の反射像の撮像によって、複数の色成分を有する画像を取得し、光量検出手段は、画像の複数の色成分に対して重み付けして得られた値に基づいて、酸素飽和度用照明光の反射光の光量を定めてもよい。
高感度化手段は、酸素飽和度用信号をビニング処理するビニング処理部であることが好ましい。酸素飽和度用照明光の反射光の光量に応じて、ビニング処理のレベルを変化させることがより好ましい。また、ビニング処理は、第1撮像素子よりも高感度の第2撮像素子で行われることがより好ましい。また、照明手段は、酸素飽和度用照明光に加えて、広帯域の波長成分を有する通常画像の生成に用いられる通常用照明光を、被検体に順次照射し、撮像手段は、通常光用照明光の反射像を第1撮像素子で撮像することにより通常用信号を取得するとともに、酸素飽和度用照明光の反射像を第2撮像素子で撮像することにより酸素飽和度用信号を取得し、画像生成手段は、通常用信号に基づいて通常画像を生成するとともに、通常用信号の一部と酸素飽和度用信号に基づいて酸素飽和度画像を生成することがより好ましい。また、酸素飽和度用照明光の反射光の光量が所定の条件を満たさない場合に、ビニング処理部は、酸素飽和度用信号をビニング処理し、画像生成手段は、酸素飽和度画像を生成する際、通常用信号の一部とビニング処理後の酸素飽和度用信号の表示領域を揃えることがさらに好ましい。
また、高感度化手段は、酸素飽和度用照明光の反射光の光量が所定の条件を満たさない場合は、第1撮像素子よりも高感度の第2撮像素子における露光時間を、所定の条件を満たすときの露光時間よりも長くする露光時間制御部であることが好ましい。また、酸素飽和度用照明光の反射光の光量に応じて、露光時間を変化させることが好ましい。
本発明は、酸化、還元ヘモグロビンの吸光係数が異なる異吸収波長域を含む酸素飽和度用照明光を被検体に照射し、その反射像を互いに感度が異なる第1及び第2撮像素子のうちいずれかの撮像素子で撮像する内視鏡に接続された内視鏡システムのプロセッサ装置において、酸素飽和度用照明光が照明された被検体像の撮像により得られる酸素飽和度用信号に基づいて、酸素飽和度用照明光の反射光の光量を検出する光量検出手段と、酸素飽和度用信号を高感度化するための高感度化手段と、酸素飽和度用照明光の反射光の光量が所定の条件を満たす場合には、高感度化しない酸素飽和度用信号に基づいて、酸素飽和度を画像化した酸素飽和度画像を生成し、酸素飽和度用照明光の反射光の光量が所定の条件を満たさない場合は、高感度化した酸素飽和度用信号に基づいて、酸素飽和度画像を生成する画像生成手段とを備え、酸素飽和度用照明光の反射光の光量に応じて、反射像を撮像する撮像素子を切り替えることを特徴とする。
本発明は、酸化、還元ヘモグロビンの吸光係数が異なる異吸収波長域を含む酸素飽和度用照明光を被検体に照射し、その反射像を互いに感度が異なる第1及び第2撮像素子のうちいずれかの撮像素子で撮像する内視鏡に接続された内視鏡システムのプロセッサ装置にインストールされる内視鏡用制御プログラムにおいて、コンピュータを、酸素飽和度用照明光が照明された被検体像の撮像により得られる酸素飽和度用信号に基づいて、酸素飽和度用照明光の反射光の光量を検出する光量検出手段と、酸素飽和度用信号を高感度化するための高感度化手段と、酸素飽和度用照明光の反射光の光量が所定の条件を満たす場合には、高感度化しない酸素飽和度用信号に基づいて、酸素飽和度を画像化した酸素飽和度画像を生成し、酸素飽和度用照明光の反射光の光量が所定の条件を満たさない場合は、高感度化した酸素飽和度用信号に基づいて、酸素飽和度画像を生成する画像生成手段として機能させ、酸素飽和度用照明光の反射光の光量に応じて、反射像を撮像する撮像素子を切り替える機能を付与することを特徴とする。
本発明によれば、酸素飽和度用照明光の反射光の光量が所定の条件を満たさない場合にのみ、酸素飽和度用信号を高感度化した上で酸素飽和度画像を生成しているため、酸素飽和度の変化を捉えるために必要な感度を確保しつつ、可能な限りの解像度を持つ酸素飽和度画像を取得することができる。
本発明の内視鏡システムの外観図である。 第1実施形態の内視鏡システムの機能的構成を示すブロック図である。 第1実施形態の回転フィルタを示す図である。 通常用フィルタの透過特性と広帯域光BBの発光強度を示すグラフである。 第1実施形態における通常観察モード時の発光パターンを示す図である。 第1実施形態における酸素飽和度観察モード時の発光パターンを示す図である。 酸化、還元ヘモグロビンの吸光係数を示すグラフである。 通常撮像系、高感度撮像系を示す図である。 モノクロ通常センサの受光面を示す図である。 第1実施形態におけるビニング処理を説明するための図である。 第1実施形態におけるビニング処理の開始・停止を説明するための図である。 モノクロ高感度センサの受光面を示す図である。 モノクロ通常センサとモノクロ高感度センサにおける有効部の設定を説明するための図である。 第1実施形態において酸素飽和度用照明光の検出をモノクロ通常センサで行う場合の撮像タイミングを説明するための図である。 第1実施形態において酸素飽和度用照明光の検出をモノクロ通常センサで行う場合の撮像信号の読出を説明するための図である。 第1実施形態において、FIT方式、IT方式のモノクロ通常センサで酸素飽和度用照明光の検出を行う場合の撮像タイミングを説明するための図である。 第1実施形態において酸素飽和度用照明光をモノクロ高感度センサで行う場合の撮像タイミングを説明するための図である。 第1実施形態において酸素飽和度用照明光をモノクロ高感度センサで行う場合の撮像信号の読出を説明するための図である。 第1実施形態において、FIT方式、IT方式のモノクロ高感度センサで酸素飽和度用照明光の検出を行う場合の撮像タイミングを説明するための図である。 モノクロ通常センサとモノクロ高感度センサの切替を説明するための図である。 酸素飽和度画像処理部の機能的構成を示すブロック図である。 輝度比B/G、R/Gと酸素飽和度と相関関係を示すグラフである。 図17の相関関係を用いた酸素飽和度の算出を説明するための図である。 通常画像と酸素飽和度画像を並列表示したモニタの図である。 通常画像と酸素飽和度画像を選択的に表示するモニタの図である。 第2実施形態の回転フィルタを表す図である。 第2実施形態における酸素飽和度観察モード時の発光パターンを示す図である。 通常撮像系、高感度撮像系と、通常用DSP、高感度用DSPとの間の撮像信号の入出力関係を説明するための図である。 第2実施形態におけるビニング処理を説明するための図である。 モノクロ高感度センサでビニング処理済みの信号と、モノクロ通常センサの信号とで画素数を揃える処理を説明するための図である。 第2実施形態において酸素飽和度用照明光をモノクロ通常センサで行う場合の撮像タイミングを説明するための図である。 第2実施形態において酸素飽和度用照明光をモノクロ通常センサで行う場合の撮像信号の読出を説明するための図である。 第2実施形態において、FIT方式、IT方式のモノクロ通常センサで酸素飽和度用照明光の検出を行う場合の撮像タイミングを説明するための図である。 第2実施形態において酸素飽和度用照明光の検出をモノクロ高感度センサで行う場合の撮像タイミングを説明するための図である。 第2実施形態において酸素飽和度用照明光の検出をモノクロ高感度センサで行う場合の撮像信号の読出を説明するための図である。 第2実施形態において、FIT方式、IT方式のモノクロ高感度センサで酸素飽和度用照明光の検出を行う場合の撮像タイミングを説明するための図である。 図20とは異なる第2実施形態の回転フィルタを示す図である。 図27の回転フィルタを用いた場合におけるモノクロ通常センサの撮像タイミングを説明するための図である。 図27の回転フィルタを用いた場合におけるモノクロ通常センサ、モノクロ高感度センサの撮像タイミングを説明するための図である。 酸素飽和度用B光の発光期間を長くする場合のFIT方式、IT方式のモノクロ通常センサの撮像タイミングを説明するための図である。 酸素飽和度用B光の発光期間を長くする場合のFIT方式、IT方式のモノクロ通常センサ、モノクロ高感度センサの撮像タイミングを説明するための図である。 酸素飽和度用照明光が低光量となった場合の露光時間の延長を説明するための図である。 露光時間延長の開始・停止を説明するための図である。 レーザ光源を備えた内視鏡システムの機能的構成を示すブロック図である。 通常用照明光、酸素飽和度用照明光の発光スペクトルを示すグラフである。 図31の内視鏡システムにおける通常観察モード時の発光パターンを示す図である。 図31の内視鏡システムにおける酸素飽和度観察モード時の発光パターンを示す図である。 酸素飽和度用照明光をモノクロ通常センサで行う場合の撮像タイミングを説明するための図である。 酸素飽和度用照明光をモノクロ通常センサで行う場合の撮像信号の読出を説明するための図である。 酸素飽和度用照明光をモノクロ高感度センサで行う場合の撮像タイミングを説明するための図である。 酸素飽和度用照明光をモノクロ高感度センサで行う場合の撮像信号の読出を説明するための図である。 輝度比S1/S3、S2/S3と、血管深さ、酸素飽和度との相関関係を示すグラフである。 図36の相関関係を用いた酸素飽和度の算出を説明するための図である。
図1に示すように、本発明の第1実施形態の内視鏡システム10は、被検体内の観察部位を撮像する内視鏡11と、撮像により得られた信号に基づいて観察部位の観察画像を生成するプロセッサ装置12と、観察部位を照射する光を供給する光源装置13と、観察画像を表示するモニタ14とを備えている。プロセッサ装置12には、キーボードやマウスなどの操作入力部であるコンソール15が設けられている。
この内視鏡システム10は、可視被検体像を観察するための通常観察モードと、血中ヘモグロビンの酸素飽和度を観察するための酸素飽和度観察モードの2つの動作モードを備えている。このモードの切替は、コンソール15や内視鏡11の操作部16に設けられたモード切替スイッチ16aにより行われる。コンソール15及びモード切替スイッチ16aは、プロセッサ装置12内のMPU70に接続されている。
内視鏡11は、被検体内に挿入される可撓性の挿入部17と、挿入部17の基端部分に設けられた操作部16と、操作部16とプロセッサ装置12及び光源装置13との間を連結するユニバーサルコード18とを備えている。
挿入部17は、先端部19、湾曲部20、可撓管部21からなり、これらが先端から基端にかけて順に連設されている。先端部19の先端面には、観察部位に照明光を照射する照明窓22、観察部位で反射した像光が入射する観察窓23(図3参照)の他、観察窓23を洗浄するために送気・送水を行うための送気・送水ノズルや鉗子や電気メスといった処置具を突出させる鉗子出口などが設けられている(いずれも図示省略)。観察窓23の奥には、結像用の光学系、通常撮像系47、高感度撮像系49など(図2参照)が内蔵されている。
湾曲部20は、連結された複数の湾曲駒からなり、操作部16のアングルノブ26を操作することにより、上下左右方向に湾曲動作する。湾曲部20が湾曲することにより、先端部19の向きが所望の方向に向けられる。可撓管部21は、食道や腸など曲がりくねった管道に挿入できるように可撓性を有している。挿入部17には、通常撮像系47、高感度撮像系49と通信を行うための通信ケーブルや、光源装置13から供給される照明光を照明窓22に導光するライトガイド43(図2参照)が挿通されている。
操作部16には、アングルノブ26の他、処置具を挿入するための鉗子口27、送気・送水操作を行う送気・送水ボタン、静止画像を撮影するためのレリーズボタンなどが設けられている。
ユニバーサルコード18には、挿入部17から延設される通信ケーブルやライトガイド43が挿通されており、プロセッサ装置12および光源装置13側の端部には、コネクタ28が取り付けられている。コネクタ28は、通信用コネクタと光源用コネクタからなる複合タイプのコネクタであり、通信用コネクタには通信ケーブルの一端が、光源用コネクタにはライトガイド43の一端がそれぞれ配設される。内視鏡11は、このコネクタ28を介して、プロセッサ装置12および光源装置13に着脱自在に接続される。
光源装置13は、白色光源ユニット30、回転フィルタ31、モータ32、シフト部33を備えている。白色光源ユニット30は、光源30aと、絞り30bとからなる。光源30aは、キセノンランプ、ハロゲンランプ、メタルハライドランプなどからなり、波長域が400nm〜700nmの広帯域光BB(図4参照)を発光する。絞り30bは、プロセッサ装置12内のMPU70により駆動されて広帯域光BBの光量を調整する。
図3に示すように、回転フィルタ31は、回転軸31aを中心に回転自在に設けられている。モータ32により回転軸31aを回転させることによって、回転フィルタ31は回転する。回転フィルタ31は回転軸31aに近い内側領域35と、回転軸31aから遠い外側領域37とを備えている。シフト部33は、回転フィルタ31を径方向に移動させる。通常観察モード時には、シフト部33により、内側領域35を広帯域光BBの光路上に挿入する内側位置へ回転フィルタ31を移動させ、酸素飽和度観察モード時には、外側領域37を広帯域光BBの光路上に挿入する外側位置へ回転フィルタ31を移動させる。
内側領域35には、通常用Rフィルタ(図3では「通R」と表記)40r、通常用Gフィルタ(図3では「通G」と表記)40g、通常用Bフィルタ(図3では「通B」と表記)40bの3つのフィルタが、周方向に沿って配置されている。各フィルタ40r、40g、40bの間は広帯域光BBを遮光する遮光部となっている。一方、外側領域37には、通常用Rフィルタ40r、酸素飽和度用Rフィルタ(図3では「酸R」と表記)42r、通常観察用Gフィルタ40g、酸素飽和度用Gフィルタ(図3では「酸G」と表記)42g、通常観察用Bフィルタ40b、酸素飽和度用Bフィルタ(図3では「酸B」と表記)42bの合計6つのフィルタが、周方向に沿って配置されている。各フィルタ40r、42r、40g、42g、40b、42bの間は広帯域光BBを遮光する遮光部となっている。
図4に示すように、通常用Rフィルタ、Gフィルタ、Bフィルタ40r、40g、40bは、広帯域光BBのうち、通常画像の生成に必要な波長域の光を透過させる。通常用Rフィルタ40rは、広帯域光BBのうち波長域が580nm〜760nmの通常用R光を通過させる。通常用Gフィルタ40gは、広帯域光BBのうち波長域が450nm〜630nmの通常用G光を通過させる。通常用Bフィルタ40bは、広帯域光BBのうち波長域が380nm〜500nmの通常用B光を通過させる。
酸素飽和度用Rフィルタ、Gフィルタ、Bフィルタ42r、42g、42bは、広帯域光BBのうち、酸素飽和度画像の生成に必要な波長域の光を透過させる。酸素飽和度用Rフィルタ42rは、600〜700nmの波長域を含む酸素飽和度用R光を透過させ、酸素飽和度用Gフィルタ42gは、500〜590nmの波長域を含む酸素飽和度用G光を透過させ、酸素飽和度用Bフィルタ42bは、波長域が473±10nmを含む青色狭帯域の酸素飽和度用B光を通過させる。
したがって、通常観察モード時には、内側位置にセットされた回転フィルタ31が回転することで、図5Aに示すように、通常用R光(図5Aでは「通常R」と表記。以下同様。)が被検体に照射された後に、一定の遮光期間を経た上で、通常用G光(図5Aでは「通常G」と表記。以下同様。)が照射される。その後に、一定の遮光期間を経た上で、通常用B光(図5Aでは「通常B」と表記。以下同様。)が被検体に照射される。これら光は、集光レンズ38及びロッドインテグレータ39を通して、ライトガイド43に入射する。
また、酸素飽和度観察モード時には、外側位置にセットされた回転フィルタ31が回転することで、図5Bに示すように、通常用R光が被検体に照射された後、一定の遮光期間を経た上で、酸素飽和度用R光(図5Bでは「酸素R」と表記。以下同様。)が被検体に照射される。その後に、一定の遮光期間を経た上で、通常用G光が被検体に照射される。その後に、一定の遮光期間を経た上で、酸素飽和度用G光(図5Bでは「酸素G」と表記。以下同様。)が被検体に照射される。その後に、一定の遮光期間を経た上で、通常用B光が被検体に照射される。その後に、一定の遮光期間を経た上で、酸素飽和度用B光(図5Bでは「酸素B」と表記。以下同様。)が被検体に照射される。これら光は、集光レンズ38及びロッドインテグレータ39を通して、ライトガイド43に入射する。
ここで、図6に示すように、酸素飽和度用B光に含まれる473±10nmの波長域は、酸化ヘモグロビン(HbO2)の吸光係数が還元ヘモグロビン(Hb)の吸光係数よりも高くなっている。したがって、酸素飽和度用B光が血管に照射されたときには、その反射光は、酸素飽和度が高くなるほど、低くなる(すなわち、高酸素状態になるほど血管が暗くなる)。なお、酸素飽和度用Rフィルタ、Gフィルタ42r、42gの透過帯域については、狭帯域化して酸化、還元ヘモグロビンの吸光係数の大小関係が同じ波長域にしてもよい(吸光係数の大小関係が異なる波長域を含まないようにする。)。
図2に示すように、内視鏡11は、ライトガイド43、光線分離部45、通常撮像系47、高感度撮像系49を備えている。ライトガイド43は大口径光ファイバ、バンドルファイバなどであり、ライトガイド43の入射端を有するコネクタ28が光源装置13に接続されたときに、その入射端は、光源装置13のロッドインテグレータ39の出射端と対向する。
照明窓22の奥には、照明光の配光角を調整する照射レンズ48が配置されている。ライトガイド43からの光は、照明窓22を通して、観察部位に照射される。観察部位で反射した光は、観察窓23を通して、結像レンズ51に入射する。結像レンズ51から出射した光は、光線分離部45によって2つの光に分離される。光線分離部45は、図7に示すように、プリズム52から構成される。このプリズム52は、入射光を分離する光線分離面52aを有している。この光線分離面52aで分離された光のうち、一方は通常撮像系47のモノクロ通常センサ53に入射し、他方は高感度撮像系49のモノクロ高感度センサ60に入射する。
通常撮像系47、高感度撮像系49では、CCDイメージセンサで撮像を行う。したがって、以下においては、CCDイメージセンサを例に説明を行う。通常撮像系47は、モノクロ通常センサ53とAFE55を有している。この通常撮像系の全体的な駆動制御はMPU70により行われる。モノクロ通常センサ53は、例えば30f/sや60f/sで撮像可能なFT(フレームトランスファ)方式、FIT(フレームインターライントランスファ)方式、IT(インターライントランスファ)方式のCCDイメージセンサからなる。モノクロ通常センサ53は、プリズム52からの光が入射する受光面56を有しており、この受光面56には、フォトダイオードなどの画素を構成する複数の光電変換素子がマトリックスに配列されている。モノクロ通常センサ53は、受光面56で受光した光を光電変換して、各画素においてそれぞれの受光量に応じた信号電荷を蓄積する。信号電荷はアンプによって電圧信号に変換されて読み出される。電圧信号は撮像信号として読み出されて、撮像信号はAFE55に送られる。なお、FT方式のCCDイメージセンサを使用する場合には、図3に示す遮光部付きの回転フィルタ31を使用する必要があるが、FIT方式やIT方式の場合には、遮光部無しの回転フィルタを使用してもよい。
モノクロ通常センサ53の受光面56の反対側には、冷却用ペルチェ58が設けられている。冷却用ペルチェ58は、モノクロ通常センサ53で生じた熱を逃がすことにより、モノクロ通常センサ53を冷却する。この冷却によって、図8に示す受光面56のうち有効部56a以外からの出力(暗出力)が減少する。したがって、撮像信号において、有効部56aからの出力が占める割合が増加するため、感度が向上する。例えば、モノクロ通常センサ53の温度を8度低下させることで、感度が約2倍となる。なお、感度を向上させない場合には、モノクロ通常センサ53には冷却用ペルチェ58を設けなくてもよい。
AFE55は、相関二重サンプリング回路及びアナログデジタルコンバータから構成されるCDS−ADC55aと、TG(タイミングジェネレータ)55bとを備えている。CDS−ADC55aは、モノクロ通常センサ53から出力される撮像信号に対して相関二重サンプリング処理を施し、モノクロ通常センサ53の駆動により生じたノイズを除去する。そして、ノイズが除去された撮像信号を、所定のビット数のデジタルな撮像信号に変換してプロセッサ装置13の通常用DSP72に入力する。TG55bは、撮像タイミングなどモノクロ通常センサ53の駆動を制御するための駆動信号を生成する。生成された駆動信号は、モノクロ通常センサ53に送られる。
高感度撮像系49は、モノクロ高感度センサ60とAFE55を有しており、通常撮像系47と同様、MPU70により駆動制御される。モノクロ高感度センサ60は、アバランシェ増幅(電子増倍)を行うセンサであるため、モノクロ通常センサ53よりも高感度で撮像を行うことができる。例えば、モノクロ高感度センサ60は、モノクロ通常センサ53に対して、2〜200倍程度までの増幅が可能である。即ち、モノクロ通常センサ53とモノクロ高感度センサ60との感度比を、1:200程度にまですることができる。
なお、モノクロ高感度センサ60は、モノクロ通常センサ53と同様、FT(フレームトランスファ)方式、FIT(フレームインターライントランスファ)方式、IT(インターライントランスファ)方式のCCDイメージセンサからなる。このモノクロ高感度センサ60は、モノクロ通常センサ53以下のフレームレートでの撮像も可能である(例えば、モノクロ通常センサ53のフレームレートを30f/sとした場合に、モノクロ高感度センサ60のフレームレートを15f/sや7.5f/sにする)。このように、モノクロ高感度センサ60のフレームレートを落とした場合には、電荷蓄積時間を長くすることができる。そして、電荷蓄積時間を長くすることに加えて、ペルチェなどでモノクロ高感度センサ60を冷却することによって、S/Nを向上させることができる。また、モノクロ高感度センサ60は、モノクロ通常センサ53に対して、総画素数は1/n、感度はnとなる。
モノクロ高感度センサ60は、ビニング処理によって、酸素飽和度画像の生成に使用する撮像信号を高感度化する。このビニング処理は、図9に示すように、MPU70内のビニング処理部70bがモノクロ高感度センサ60を制御することにより行われる。なお、ビニング処理としては、センサ内で画素加算をするハードウエアビニングを行うが、センサから出力した信号に対して画素加算を行うソフトウエアビニングを行ってもよい。ここで、ハードウエアビニングの場合には、モノクロ高感度センサ60を駆動する駆動信号は、ビニングに合わせて変更される。また、ビニング処理は、画素加算する縦と横の画素が同じ(正方)である必要はなく、例えば、縦2画素、横1画素でビニングしてもよく、また縦4画素、横1画素でビニングしてもよい。
ビニング処理部70bは、後述のプロセッサ75内の光量判定部78で検出された酸素飽和度用R光、G光、B光の光量に基づいて、ビニング処理の制御を行う。酸素飽和度用R光、G光、B光の光量は、各光を照射したときに得られる画像から算出される画素換算平均値で定められる。そして、光量判定部78は、画素換算平均値と予め設定した閾値との比較を行う。閾値には、ビニング処理が行われていない場合に用いられるビニング開始用閾値と、ビニング処理が行われている場合に用いられるビニング停止用閾値とがある。ビニング停止用閾値はビニング開始用閾値よりも大きく設定することが好ましい。例えば、ビニング停止用閾値は、「ビニング開始用閾値×16+10」にする。仮に、これら2つの閾値の差を小さくした場合には、画素換算平均値が2つの閾値付近に近づくと、ビニング有り・無しの切替が頻繁に起こるようになるが、上記のように、2つの閾値の差を実質的に大きくすることで、ビニング有り・無しの切替は頻繁に起こらなくなる。
図10に示すように、ビニング停止中は、モノクロ高感度センサ60で得られた画像(高感度センサ画像)の画素換算平均値がビニング開始用閾値を上回っている限り、画素加算無しの1画素×1画素の読出単位で、撮像信号の読出が行われる。そして、ビニング開始用閾値を下回った場合には、画素加算有りの4画素×4画素の読出単位で、撮像信号の読出が行われる。即ち、ビニング処理が開始する。ビニング実行中は、高感度センサ画像の画素換算平均値がビニング停止用閾値を下回っている限り、ビニング処理が継続する。そして、ビニング停止用閾値を上回った場合に、ビニング処理は停止する。即ち、画素加算無しの1画素×1画素の読出単位での読出に復帰する。
なお、ビニング処理のレベル(撮像信号の読出単位(縦x画素×横y画素(x、yは自然数)))は、高感度センサ画像の画素換算平均値に応じて、任意に切り替えてもよい。即ち、高感度センサ画像の画素換算平均値が小さくなるほど、ビニング処理のレベルを大きくする。例えば、高感度センサ画像の画素換算平均値が最高感度の1/25を下回ったら2画素×2画素のビニング処理を行い、更に、最高感度の1/50を下回ったら4画素×4画素のビニング処理を行う。
モノクロ高感度センサ60は、図11に示すように、プリズム52からの光が入射する受光面62を有している。この受光面62には、フォトダイオードなどの画素を構成する複数の光電変換素子がマトリックスに配列されている。モノクロ高感度センサ60は、モノクロ通常センサ53と同様、受光面62で受光した光を光電変換処理し、それにより得られる撮像信号を読み出す。読み出した撮像信号は、AFE55に送られる。AFE55は、通常撮像系47のAFE55と同様の機能を有しており、AFE55からの撮像信号をプロセッサ装置13の高感度用DSP73に入力する。
モノクロ高感度センサ60の受光面62の反対側には、冷却用ペルチェ58が設けられている。冷却用ペルチェ58は、モノクロ高感度センサ60で生じた熱を逃がすことにより、モノクロ高感度センサ60を冷却する。この冷却ペルチェ58の冷却によって、モノクロ高感度センサ60の感度を向上させることができる。例えば、冷却用ペルチェにより40℃に冷却したモノクロ高感度センサ60は、冷却しない場合と比較して、約32倍の感度を得ることができる。
なお、モノクロ通常センサ53とモノクロ高感度センサ60の画素数は、同じでもよく、異なってもよい。また、モノクロ通常センサ53の画素とモノクロ高感度センサ60の画素は正方形であってもよく、その他の形でもよい。また、図8及び11に示すように、モノクロ通常センサ53とモノクロ高感度センサ60のアスペクト比(縦横比)は同じでもよく、異なってもよい。
また、モノクロ通常センサ53とモノクロ高感度センサ60は、モノクロ通常センサ53の受光面56上に結像される被写体像とモノクロ高感度センサ60の受光面62上に結像される被写体像とがほぼ同じになるように、配置する必要がある。そのためには、光線分離部45を出射してモノクロ通常センサ53に入射まで光の光路と、モノクロ高感度センサ60に入射するまでの光の光路とがほぼ等価にすることが好ましい。
ただし、互いの光路が等価でない場合には、図12に示すように、モノクロ通常センサ53の領域Aに写し出される被写体像と、モノクロ高感度センサ60の領域Bに写し出される被写体像とは、一部共通するものの、全体としては異なる。そこで、領域A、Bのうち、同じ被写体像が写り込んでいる同一被写体領域C(領域Aの一部分A´、受光領域Bの一部分B´)を有効部56a,62aとする。即ち、領域Aの同一被写体領域A´が有効部56aとなり、領域Bの同一被写体領域B´が有効部62aとなる。このとき、モノクロ通常センサ53の有効部56aの画素数をn1×m1とし、モノクロ高感度センサ60の有効部62aの画素数をn2×m2とする。なお、それぞれの有効部の画素数は、光線分離部45などの光学系調整後に、モノクロ通常センサ53の出力画像とモノクロ高感度センサ60の出力画像をモニタ14上で確認した上で、決定することが好ましい。また、モノクロ高感度センサ60がモノクロ通常センサ53より解像度が低い場合、モノクロ高感度センサ60の画像は多少ボケてもよいので、モノクロ高感度センサ60に至るまでの光路長を多少長くすることができる。
図2に示すように、プロセッサ装置12は、MPU(Micro Processing Unit)70の他、通常用と高感度用のDSP(Digital Signal Processor)72,73と、プロセッサ75とを備えている。MPU70はプロセッサ装置12の各部を制御する他、内視鏡11及び光源装置13の制御も行う。このMPU70は、制御プログラムや制御に必要な設定データを記憶する制御プログラム用メモリ70aを備えており、この制御プログラム用メモリ70aから本発明の酸素飽和度用制御プログラムを読み出して実行することにより、各種制御を行う。なお、制御プログラムは書き換え可能であり、酸素飽和度用制御プログラムに代えて、例えば、AFI(Auto Fluorescence Imaging)用の制御プログラムをインストールしてもよい。
通常用DSP72は、通常撮像系47が出力する撮像信号を取得する。通常用DSP72は、取得した撮像信号に対して、ガンマ補正やホワイトバランス補正などの信号処理を施すことにより通常センサ画像を生成する。通常センサ画像は、通常用R光、G光、B光の発光・撮像時に得られる通常用R信号、G信号、B信号から生成される第1通常センサ画像と、酸素飽和度用R光、G光、B光の発光・撮像時に得られる酸素飽和度用R信号、G信号、B信号から生成される第2通常センサ画像で構成される。第1及び第2通常センサ画像は、プロセッサ75に送信される。高感度用DSP73についても、同様の処理を行うことにより、高感度センサ画像を生成する。高感度センサ画像は、酸素飽和度用R光、G光、B光の発光・撮像時に得られる酸素飽和度用R信号、G信号、B信号から生成される。生成された高感度センサ画像は、プロセッサ75に送信される。
なお、通常用DSP72及び高感度用DSP73においては、第1及び第2通常センサ画像(有効部画素数n1×m1)と高感度センサ画像(有効部画素数n2×m2)に対して画素数変換処理を行う。画素数変換処理では、スプライン関数等により画素ピッチを変換することにより、第1及び第2通常センサ画像と高感度センサ画像の画素数をn×mに揃える。n×mは、n1×m1と等しくしてもよく、もしくは、n2×m2と等しくしてもよい。また、n×mは規定の値であってもよい。なお、画素数変換後の画素は画素数変換後の画素は画素数変換前のアスペクト比を有していることが好ましいが、長方形でもよく、画素数変換後に、撮像有効部と同じ画角となるようにする。
プロセッサ75は、光量判定部78、通常画像処理部79、酸素飽和度画像処理部80を備えている。光量判定部78は、酸素飽和度観察モードに設定されている場合に、第2通常センサ画像または高感度センサ画像から、酸素飽和度用R光、G光、B光(以下、これらを総称して「酸素飽和度用照明光」とする。)の光量(各色の反射光の光量)を検出する。そして、光量判定部78は、検出した酸素飽和度用照明光の光量が、酸素飽和度画像上で酸素飽和度の変化を確実に観察するために十分な光量に達しているか否か(低光量か否か)を判定する。なお、酸素飽和度用照明光のうち酸素飽和度用B光についてのみ、光量のみを検出し、低光量か否かを判定してもよい(この場合、酸素飽和度用B信号の輝度値に基づいて光量検出する)。
光量判定部78では、酸素飽和度用照明光の光量を、第2通常センサ画像または高感度センサ画像の1画面全体あるいは中央部(面積1/4程度)から出力された出力信号の画素換算平均値に基づいて、定める。その際、高感度センサ画像については、増幅率設定も加味して定める必要がある。この画素換算平均値は、大きくなればなるほど、照明光の光量も高くなる。そして、光量判定部78は、画素換算平均値と予め設定した1つの閾値との比較によって、酸素飽和度用照明光の光量が低光量か否かを判定する。ここで、閾値はモノクロ通常センサ53の最高感度の1/50にすることが好ましい(最高感度が10bit1024の場合には閾値を20にする)。
なお、酸素飽和度用照明光の光量については、画素換算平均値に代えて、第2通常センサ画像または高感度センサ画像の特定の色成分の画素値で定めてもよく(例えば、B画像の画素値の平均値)、また、第2通常センサ画像または高感度センサ画像の複数の色成分に対して任意の重み付けした値で定めてもよい(例えば、B画像の画素値、G画像の画素値、R画像の画素値を、2:1:1で重み付けした値)。
そして、図13Aに示すように、酸素飽和度用照明光が低光量でないと判定される限り、通常用R光、G光、B光(以下、これらを総称して「通常用照明光」とする)及び酸素飽和度用照明光のいずれも、モノクロ通常センサ53で検出される。モノクロ通常センサ53は、各照明光の発光期間に被検体像の撮像を行い、各照明光の発光期間の間に設けられた遮光期間に各撮像信号の読出を行う。これにより、図13Bに示すように、モノクロ通常センサ53からは、通常用R信号、酸素飽和度用R信号、通常用G信号、酸素飽和度用G信号、通常用B信号、酸素飽和度用B信号が、この順で読み出される。
そして、光量判定部78が、酸素飽和度用照明光が低光量であると判定した場合には、図14Aに示すように、通常用照明光をモノクロ通常センサ53で検出する一方で、酸素飽和度用照明光をモノクロ高感度センサ60で検出する。モノクロ通常センサ53は、各通常用照明光の発光期間に被検体像の撮像を行い、通常用照明光の発光後に設けられた遮光期間に撮像信号の読出を行う。また、モノクロ通常センサ53は、酸素飽和度用照明光の発光後に設けられた遮光期間に、酸素飽和度用照明光の光電変換により発生した電荷の排出を行う。一方、モノクロ高感度センサ60は、各酸素飽和度用照明光の発光期間に被検体像の撮像を行い、通常用照明光の発光後に設けられた遮光期間に撮像信号の読出を行う。また、モノクロ高感度センサ60は、通常用照明光の発光後に設けられた遮光期間に、通常用照明光の光電変換により発生した電荷の排出を行う。
以上により、図14Bに示すように、モノクロ通常センサ53からは、通常用R信号、通常用G信号、通常用B信号が読み出され、モノクロ高感度センサ60からは、酸素飽和度用R信号、酸素飽和度用G信号、酸素飽和度用B信号が読み出される。
以上においては、通常撮像系47、高感度撮像系49でCCDイメージセンサを使用した場合について説明を行ったが、CMOSイメージセンサを使用した場合も上記と同様の考え方で実施することができる。
なお、光量判定部78では、予め設定した1つの閾値を用いて、酸素飽和度用照明光の光量が低光量か否かを判定したが、図15に示すように、予め設定した2つの閾値1、2を用いて判定を行ってもよい。この場合、閾値2を閾値1よりも大きく設定する(例えば、閾値2を最高感度の1/25とし、閾値1を最高感度の1/50とする)。そして、モノクロ通常センサ53で酸素飽和度用照明光を検出しているときには、第2通常センサ画像の画素換算平均値が閾値1以下となった場合に、酸素飽和度用照明光の検出をモノクロ高感度センサ60に切り替える。一方、モノクロ高感度センサ60で酸素飽和度用照明光の検出を行っている場合には、高感度センサ画像の画素換算平均値が閾値2以上となった場合に、酸素飽和度用照明光の検出をモノクロ通常センサ53に切り替える。
なお、モノクロ通常センサ53とモノクロ高感度センサ60の切替用の閾値に加えて、上記ビニング処理の停止及び開始に用いた閾値(ビニング開始用閾値及びビニング停止用閾値)を用いることで、酸素飽和度用照明光の光量の低下に合わせて、モノクロ通常センサ→モノクロ高感度センサ→ビニング処理と切り替えてもよい。
なお、図13A、B及び図14A、Bは、FT方式のように、各照明光の発光期間の間に遮光期間を設ける必要(電荷転送のため)がある場合の撮像制御を表している。一方、FIT方式やIT方式の場合であれば、図13C及び図14Cに示すように、遮光期間は不要である。ここで、図13Cは、図13Aに対応しており、酸素飽和度用照明光が低光量でない場合の撮像制御を示している。また、図14Cは、図14Aに対応しており、酸素飽和度用照明光が低光量である場合の撮像制御を示している。
図2に示すように、通常画像処理部79は、通常用DSP72からの第1通常センサ画像(通常用B信号、G信号、R信号から生成されるカラー画像)のうち、B画像をモニタ14のBチャンネルに、G画像をモニタ14のGチャンネルに、R画像をモニタ14のRチャンネルに割り当てる処理を行うことにより、通常画像を生成する。なお、第1通常センサ画像のB画像、G画像、R画像は異なるタイミングで取得しているため、互いの画像をパターンマッチングなどで位置合わせした後に、通常画像を生成することが好ましい。
図16に示すように、酸素飽和度画像処理部80は、位置合わせ部81と、輝度比算出部82と、相関関係記憶部83と、酸素飽和度算出部84と、酸素飽和度画像生成部85とを備えている。位置合わせ部81は、酸素飽和度用照明光をモノクロ通常センサ53で検出した場合は、第2通常センサ画像のB画像、G画像、R画像(以下これらを総称して「酸素飽和度用画像のB画像、G画像、R画像」という)間の位置合わせを行い、酸素飽和度用照明光をモノクロ高感度センサ60で検出した場合は、高感度センサ画像のB画像、G画像、R画像(以下、これらも「酸素飽和度用画像のB画像、G画像、R画像」という)。位置合わせは、例えば、各画像の血管パターンが一致するように、マッチング処理することが好ましい。
輝度比算出部82は、酸素飽和度用画像のB画像とG画像間の輝度比B/Gと、酸素飽和度用画像のG画像とR画像間の輝度比R/Gとを求める。輝度比算出部82では、輝度比を求める際、各画像において同じ位置にある画素間の輝度比を算出する。また、輝度比は画像信号の全ての画素に対して算出される。なお、輝度比は血管部分の画素のみ求めてもよい。この場合、血管部分は、血管部分の画素値とそれ以外の部分の画素値との差に基づいて特定される。
相関関係記憶部83は、輝度比B/G及びR/Gと酸素飽和度との相関関係を記憶している。この相関関係は、図17に示すように、二次元空間上に酸素飽和度の等高線を定義した2次元テーブルで記憶されている。この等高線の位置、形は光散乱の物理的なシミュレーションで得られ、血液量に応じて変わるように定義されている。例えば、血液量の変化があると、各等高線間の間隔が広くなったり、狭くなったりする。なお、輝度比B/G,R/Gはlogスケールで記憶されている。
上記相関関係は、酸化ヘモグロビンHbO2や還元ヘモグロビンHbの吸光特性や粘膜の光散乱特性と密接に関連性し合っている(図6参照)。例えば、473nmのように酸化、還元ヘモグロビンの吸光係数の差が大きい波長では、酸素飽和度の情報を取り易い。しかしながら、473nmの波長成分を含む酸素飽和度用画像のB画像は、酸素飽和度だけでなく血液量にも依存度が高い。そこで、B画像に加え、主として血液量に依存して変化する光に対応する酸素飽和度用画像のR画像と、B画像とR画像のリファレンス画像(規格化用信号)となる酸素飽和度用画像のG画像を用いることで、血液量に依存することなく、酸素飽和度を正確に求めることができる。
なお、図17に示すように、輝度比R/Gが大きくなるのに従って、輝度比B/Gの信号値も大きくなるの(酸素飽和度=0%限界の等高線が斜め上方にスライドする)は、以下の理由からである。輝度比R/Gは血液量と相関関係があるため、輝度比R/Gが大きくなるほど血液量も大きくなる。酸素飽和度用画像のB画像、G画像、R画像の中で、血液量の増加によって信号値の低下が一番大きくなるのは、G画像であり、その次がB画像である。これは、G画像に含まれる波長成分の540〜580nmの吸光係数が、B画像に含まれる波長成分の470nm付近の吸光係数よりも高いためである(図6参照)。したがって、輝度比B/Gにおいては、血液量が大きくなるほど、分子のBの輝度値の低下よりも分母のGの輝度値の低下の方が大きくなる。即ち、輝度比B/Gは、血液量が大きくなるにつれて、大きくなる。
酸素飽和度算出部84は、相関関係記憶部83に記憶された相関関係と輝度比算出部82で求めた輝度比B/G、R/Gとを用いて、酸素飽和度用画像の各画素における酸素飽和度を求める。この酸素飽和度算出部84では、酸素飽和度画像処理部80に入力された酸素飽和度用画像について、各画素毎に酸素飽和度を算出する。ここで、酸素飽和度用画像のうち、B画像、G画像、R画像の所定画素の輝度値を、それぞれB、G、Rとする。まず、輝度比算出部82は、輝度値Bと輝度値Gから輝度比B/Gを求めるとともに、輝度値Rと輝度値Gから輝度比R/Gを求める。
そして、図18に示すように、相関関係記憶部83に記憶した相関関係から、輝度比算出部82で求めた輝度比B/G、R/Gに対応する対応点Pを特定する。そして、対応点Pが酸素飽和度=0%限界の下限ライン87と酸素飽和度=100%限界の上限ライン88との間にある場合に、その対応点Pが示すパーセント値を酸素飽和度とする。例えば、図18の場合であれば、対応点Pは60%の等高線上に位置するため、酸素飽和度は60%となる。
一方、対応点が下限ライン87と上限ライン88との間から外れている場合、対応点が下限ライン87よりも上方に位置するときには酸素飽和度を0%とし、対応点が上限ライン88よりも下方に位置するときには酸素飽和度を100%とする。なお、対応点が下限ライン87と上限ライン88との間から外れている場合には、その画素における酸素飽和度の信頼度を下げてモニタ14上に表示しないようにしてもよい。
酸素飽和度画像生成部85は、酸素飽和度算出部84で求めた酸素飽和度に基づき、酸素飽和度画像を生成する。生成された酸素飽和度画像はモニタ14に表示される。生成される酸素飽和度画像としては、例えば、酸素飽和度に応じて異なる色(通常画像で使う色とは異なる疑似色を使うため「疑似カラー」と呼ばれる)で表した完全疑似カラー画像の他、酸素飽和度が一定値を下回った低酸素領域にのみ疑似カラーで表し、それ以外の領域については通常画像の色(通常光画像で使用する色)で表した一部疑似カラー画像などがある。また、酸素飽和度画像の表示方法としては、図19Aに示すように、通常画像90と酸素飽和度画像91をモニタ14上に並列に配置して同時に表示してもよく、また、図19Bに示すように、モニタ14上で、通常画像90と酸素飽和度画像91を交互に切り替えて表示してもよい。
なお、第1実施形態では、酸素飽和度観察モード時に、通常用R光、酸素飽和度用R光、通常用G光、酸素飽和度用G光、通常用B光、酸素飽和度用B光の順で照射するが、これに限定されない。例えば、通常用R光、G光、B光を照射した後に、酸素飽和度用R光、G光、B光の順で照射してもよい。
なお、第1実施形態では、モノクロ高感度センサでビニング処理を行ったが、モノクロ通常センサ53のビニング処理を行ってもよい。この場合、酸素飽和度用照明光が入射したときのみビニング処理を行う。また、モノクロ通常センサでビニング処理を開始するために用いる閾値は、上記ビニング開始用閾値(モノクロ高感度センサでビニング処理を開始するために用いる閾値)よりも高めに設定することが好ましい。
第2実施形態では、酸素飽和度画像の生成に必要な照明光として、第1実施形態の酸素飽和度用G光、R光に代えて、通常用G光、R光を使用する。それ以外については、第1実施形態と同様であるので、第1実施形態と第2実施形態とで異なる部分についてのみ以下説明を行う。
図20に示すように、回転フィルタ90は、第1実施形態と同様、内側領域35と外側領域37を備えており、通常観察モード時には、内側領域35を広帯域光BBの光路上に挿入する内側位置へ回転フィルタ90を移動させ、酸素飽和度観察モード時には、外側領域37を広帯域光BBの光路上に挿入する外側位置へ回転フィルタ90を移動させる。内側領域35のフィルタ構成については、第1実施形態の回転フィルタ31と同様である。なお、FT方式のCCDイメージセンサを使用する場合には、図20に示す遮光部付きの回転フィルタ90を使用する必要があるが、FIT方式やIT方式の場合には、遮光部無しの回転フィルタを使用してもよい。
これに対して、外側領域37には、第1実施形態の回転フィルタ31と異なり、酸素飽和度用Rフィルタ42rと酸素飽和度用Gフィルタ42gが設けられていない。即ち、通常用Rフィルタ40r、通常観察用Gフィルタ40g、通常観察用Bフィルタ40b、酸素飽和度用Bフィルタ42bの合計4つのフィルタが、周方向に沿って配置されている。そして、各フィルタ40r、40g、40b、42bの間は広帯域光BBを遮光する遮光部となっている。
したがって、酸素飽和度観察モード時には、外側位置にセットされた回転フィルタ90が回転することで、図21に示すように、通常用R光が被検体に照射された後、一定の遮光期間を経た上で、通常用G光が被検体に照射される。その後に、一定の遮光期間を経た上で、通常用B光が被検体に照射される。その後に、一定の遮光期間を経た上で、酸素飽和度用B光が被検体に照射される。
図22に示すように、第2実施形態では、通常撮像系47のAFE55は、第1実施形態と異なり、撮像信号を通常用DSP72に入力するだけでなく、高感度用DSP73に入力する。そして、第2実施形態の通常用DSP72は、第1通常センサ画像については、第1実施形態と同様に、通常用R信号、通常用G信号、通常用B信号から生成する一方、第2通常センサ画像については、第1実施形態と異なり、通常撮像系47のAFE55から入力された通常用R信号、通常用G信号、酸素飽和度用B信号から生成する。一方、第2実施形態の高感度用DSP73は、第1実施形態と異なり、通常撮像系47のAFE55から入力された通常用R信号、通常用G信号に加えて、高感度撮像系49のAFE55から入力された酸素飽和度用B信号から生成される。
第2実施形態の光量判定部78では、酸素飽和度観察モードに設定されている場合に、第2通常センサ画像のB画像または高感度センサ画像のB画像から、酸素飽和度用B光の光量を検出する。そして、光量判定部78は、検出した酸素飽和度用B光の光量が、酸素飽和度画像上で酸素飽和度の変化を確実に観察するために十分な光量に達しているか否か(低光量か否か)を判定する。
第2実施形態におけるビニング処理は、以下のようにして行われる。図23に示すように、光量判定部78は、酸素飽和度用B光の照射により得られる高感度センサ画像に基づいて、画素換算平均値を算出する。そして、この算出した画素平均値とビニング開始用閾値及びビニング停止用閾値とを比較することによって、上記第1実施形態と同様のビニング処理の開始・停止の制御を行う。
ここで、第2実施形態では、モノクロ高感度センサ60でビニング処理を行った場合には、モノクロ通常センサ53から出力した通常用R信号、G信号の画素数と、モノクロ高感度センサ60から出力した酸素飽和度用B信号の画素数と揃える必要がある。これは、酸素飽和度画像の生成に、酸素飽和度用B信号に加えて、通常用R信号、通常用G信号を用いるためである。以上のように、通常用R信号、G信号と酸素飽和度用B信号とで画素数を揃えることによって、通常用R信号、G信号上での被検体像と酸素飽和度用B信号上での被検体像とがほぼ一致する(すなわち各信号における表示領域が合うようになる)。
例えば、図24に示すように、2画素×2画素のビニング処理が施された酸素飽和度用B信号の画素数は、通常用R信号、G信号の画素数Nの1/4となっている。この場合、酸素飽和度用B信号の画素数を4倍にする拡大処理を行う(または通常用R信号、G信号の画素数を1/4にする縮小処理を行う)ことによって、各信号間の画素数を揃える。そして、画素数が揃った通常用R信号、G信号及び酸素飽和度用B信号に基づいて、酸素飽和度画像の生成を行う。
また、第2実施形態では、モノクロ通常センサ53とモノクロ高感度センサ60の切替は、以下のようにして行われる。図25Aに示すように、酸素飽和度用照明光が低光量でないと判定される限り、酸素飽和度用B光は、モノクロ通常センサ53で検出される。これにより、図25Bに示すように、モノクロ通常センサ53からは、通常用R信号、通常用G信号、通常用B信号、酸素飽和度用B信号が、この順で読み出される。
そして、光量判定部78が、酸素飽和度用B光が低光量であると判定した場合には、図26Aに示すように、酸素飽和度用B光の検出をモノクロ高感度センサ60に切り替える。モノクロ通常センサ53は、第1実施形態と同様、通常用R光、G光、B光の各発光期間に被検体の撮像を行い、各発光期間の後の遮光期間に撮像信号の読出を行う。また、モノクロ通常センサ53は、酸素飽和度用B光が発光された後の遮光期間に、酸素飽和度用B光の光電変換により発生した電荷を排出する。一方、モノクロ高感度センサ60は、第1実施形態と異なり、酸素飽和度用B光の発光期間にのみ被検体像の撮像を行い、酸素飽和度用B光の発光後に設けられた遮光期間に撮像信号の読出を行う。また、モノクロ高感度センサ60は、通常用B光の発光された後の遮光期間に、通常用B光の光電変換により発生した電荷を排出する。
これにより、図26Bに示すように、モノクロ通常センサ53からは、通常用R信号、通常用G信号、通常用B信号が読み出され、モノクロ高感度センサ60からは、酸素飽和度用B信号が読み出される。そして、通常用R信号、通常用G信号、通常用B信号に基づいて通常画像が生成され、通常用R信号、通常用G信号、酸素飽和度用B信号に基づいて、酸素飽和度画像が生成される。通常画像及び酸素飽和度画像の生成方法は、第1実施形態と同様である。
なお、図25A、B及び図26A、Bは、FT方式のように、各照明光の発光期間の間に遮光期間を設ける必要(電荷転送のため)がある場合の撮像制御を表している。一方、FIT方式やIT方式の場合であれば、図25C及び図26Cに示すように、遮光期間は不要である。ここで、図25Cは、図25Aに対応しており、酸素飽和度用照明光が低光量でない場合の撮像制御を示している。また、図26Cは、図26Aに対応しており、酸素飽和度用照明光が低光量である場合の撮像制御を示している。
第2実施形態においては、回転フィルタ90に代えて、図27に示すように、酸素飽和度用Bフィルタ42bのフィルタ面積が大きい回転フィルタ91を用いてもよい。この回転フィルタ91を用いることで、酸素飽和度用B光の発光期間が、他の通常用R光、G光、B光の各発光期間よりも長くなる。これにより、酸素飽和度用B光の発光時には、高感度で撮像を行うことができる。ここで、FT方式のCCDイメージセンサを使用する場合には、図27に示す遮光部付きの回転フィルタ91を使用する必要があるが、FIT方式やIT方式の場合には、遮光部無しの回転フィルタを使用してもよい。
なお、回転フィルタ91を用いた場合、図28A及びBに示すように、酸素飽和度用B光の発光時には、モノクロ通常センサ53及びモノクロ高感度センサ60ともに、通常用R光、G光、B光の発光時の撮像期間よりも長い撮像期間で撮像を行う。これら図28A、Bは、FT方式のように、各照明光の発光期間の間に遮光期間を設ける必要(電荷転送のため)がある場合の撮像制御を表している。一方、FIT方式やIT方式の場合であれば、図28C及び図28Dに示すように、遮光期間は不要である。ここで、図28A,Cは、酸素飽和度用照明光が低光量でない場合の撮像制御を示しており、図28B、Dは、酸素飽和度用照明光が低光量である場合の撮像制御を示している。
なお、第2実施形態では、酸素飽和度観察モード時に、通常用R光、通常用G光、通常用B光、酸素飽和度用B光の順で照射するが、照射順は、これに限定されない。
第3実施形態では、モノクロ高感度センサにおける露光時間を延長することによって、酸素飽和度画像の生成に使用する撮像信号を高感度化する。そのため、第3実施形態においては、図29に示すように、光線分離部45とモノクロ高感度センサ60との間に、露光時間を調整するシャッタ95が設けられている。シャッタ95は、MPU70内の露光時間制御部70cによって駆動制御される。
以下においては、酸素飽和度用R信号、G信号、B信号から酸素飽和度画像を生成する場合(第1実施形態参照)の露光時間調整について説明を行うが、通常用R信号、G信号及び酸素飽和度用B信号から酸素飽和度画像を生成する場合(第2実施形態参照)についても同様の手順で露光時間調整を行うことができる。なお、第3実施形態は、ビニング処理を行う以外は第1及び第2実施形態と同様であるので、第1及び第2実施形態と共通する部分については説明を省略する。
図29に示すように、プロセッサ75の光量判定部78は、高感度センサ画像(酸素飽和度用R信号、G信号、B信号から生成される画像)に基づいて、画素換算平均値を算出する。そして、算出した画素換算平均値と予め設定した閾値との比較を行う。閾値には、露光時間延長が行われていない場合に用いられる露光時間延長開始用閾値と、露光時間延長が行われている場合に用いられる露光時間延長停止用閾値とがある。露光時間延長停止用閾値は露光時間延長開始用閾値よりも大きく設定することが好ましい。例えば、露光時間延長停止用閾値は、露光時間延長開始用閾値×4にする。
したがって、図30に示すように、露光時間延長停止中は、高感度センサ画像の画素換算平均値がビニング開始用閾値を上回っている限り、1/30の露光時間で撮像が行われる。そして、露光時間延長開始用閾値を下回った場合には、露光時間が1/30から1/7.5に延長される(シャッタ95が空いている時間が長くなる)。即ち、露光時間延長が開始する。露光時間延長実行中は、高感度センサ画像の画素換算平均値が露光時間延長停止用閾値を下回っている限り、露光時間1/7.5での撮像が継続する。そして、露光時間延長停止用閾値を上回った場合に、露光時間延長は停止する。即ち、露光時間1/30での撮像に復帰する。なお、露光時間の延長の程度は、高感度センサ画像の画素換算平均値に応じて、任意に切り替えてもよい。
なお、第3実施形態においては、露光時間延長開始用閾値及び露光時間延長停止用閾値に加えて、第1実施形態に示すモノクロ通常センサとモノクロ高感度センサの切替用の閾値を用いることで、酸素飽和度用照明光の光量の低下に合わせて、モノクロ通常センサ→モノクロ高感度センサ→露光時間延長と切り替えてもよい。さらには、これら閾値に加えて、第3実施形態に示すビニング処理開始用閾値及びビニング処理停止用閾値を用いることにより、酸素飽和度用照明光の光量の低下に合わせて、モノクロ通常センサ→モノクロ高感度センサ→露光時間延長、ビニング処理のいずれか一方→露光時間延長とビニング処理の併用と切り替えてもよい。
なお、第3実施形態では、モノクロ高感度センサで露光時間の延長を行ったが、モノクロ通常センサから出力した酸素飽和度用R信号、G信号、B信号で酸素飽和度画像を生成する場合には、モノクロ通常センサで露光時間の延長を行ってもよい。この場合、上記と同様、光線分離部45とモノクロ通常センサ53との間にシャッタ95を設け、酸素飽和度用B照明光が入射したときのみ露光時間の延長を行う。モノクロ通常センサで露光時間延長を開始するために用いる閾値は、上記露光時間延長開始用閾値よりも高めに設定することが好ましい。
なお、露光時間延長とビニング処理は、いずれかを選択的に行ってもよい。この場合、観察距離(遠景or近景)に応じて、ビニング処理、露光時間延長のいずれかを選択する。例えば遠景の場合には、解像度が低下するビニング処理ではなく、露光時間延長を選択することが好ましい。これに対して、近景の場合には、ビニング処理を行うことが好ましい。
なお、上記実施形態では、回転フィルタを備えた光源装置13を用いて、各種照明光を生成したが、この光源装置13に代えて、図31に示すように、レーザ光源LD1、2、蛍光体98、レーザ光源LD1、LD2の駆動を制御する光源制御部102を備えた光源装置100を用いて、各種照明光を生成してもよい。なお、この光源装置100を用いた場合には、内視鏡の通常撮像系においては、モノクロ通常センサ53に代えて、RGBのカラーフィルタが設けられた同時式カラー通常センサ110が用いられ、同様にして、高感度撮像系においては、モノクロ高感度センサ60に代えて、RGBのカラーフィルタが設けられた同時式カラー高感度センサ112が用いられる。これらカラー通常センサ110及びカラー高感度センサ112は、電子シャッタを有するIT(インターライントランスファ)方式の撮像素子である。
図32に示すように、レーザ光源LD1は、波長域が440±10nmに制限された狭帯域光N1を発光する。レーザ光源LD2は、波長域が470±10nmに制限された狭帯域光N2を発光する。レーザ光源LD1、LD2としては、InGaN系、InGaNAs系、GaNAs系のレーザダイオードを用いることができる。レーザ光源LD1、LD2が発光する光は、光ファイバ104によってコンバイナ106に導光される。コンバイナ106は、各光ファイバ104からの光を合波する機能を持つ光学部材であり、選択的に入射する各光ファイバ104からの光の光軸を1つに結合する。コンバイナ106の下流には、蛍光体98が設けられている。なお、レーザ光源に代えて、LED(Light Emitting Diode)を用いてもよい。
蛍光体98は、狭帯域光N1によって励起されて、緑色領域から赤色領域にわたる波長域の蛍光FL1を発光する。この蛍光FL1と蛍光体98を透過した狭帯域光N1によって通常用照明光が生成される。また、蛍光体98は、狭帯域光N2にも励起され、緑色領域から赤色領域にわたる蛍光FL2を発光する。この蛍光FL2は蛍光FL1よりも若干光量が低くなっている。そして、蛍光FL2と蛍光体98を透過した狭帯域光N2によって、酸素飽和度用照明光が生成される。なお、蛍光体としては、青色の励起光で緑色領域から赤色領域にわたる波長域の蛍光を励起発光するものであれば、特に限定されない。例えばマイクロホワイト(登録商標)を用いてもよい。
光源制御部102は、通常観察モード時には、図33Aに示すように、レーザ光源LD1のみを駆動させることで、被検体に通常用照明光を常時照射する。一方、光源制御部102は、酸素飽和度観察モード時には、図33Bに示すように、レーザ光源LD1とレーザ光源LD2を交互に駆動することによって、通常用照明光と酸素飽和度用照明光とを交互に被検体に照射する。これら通常用照明光、酸素飽和度用照明光は、集光レンズ38及びロッドインテグレータ39を通して、ライドガイド43に入射される。
光源装置100を用いた場合の通常撮像系及び高感度撮像系の駆動制御を、以下に示す。上記第1実施形態と同様に、酸素飽和度用照明光が低光量でない場合には、図34Aに示すように、通常用照明光及び酸素飽和度用照明光のいずれも、カラー通常センサ110で検出される。カラー通常センサ110は、各照明光の発光期間に被検体像の撮像を行い、撮像後に各撮像信号の読出を行う。また、通常用照明光の発光期間と酸素飽和度用照明光の発光期間の間には、電子シャッタが作動して、センサ内の電荷が排出される。以上から、図34Bに示すように、カラー通常センサ110からは、通常用照明光の発光・撮像時に、通常用R信号、通常用G信号、通常用B信号が読み出され、酸素飽和度用照明光の発光・撮像時に、酸素飽和度用R信号、酸素飽和度用G信号、酸素飽和度用B信号が読み出される。
そして、酸素飽和度用照明光が低光量となった場合には、図35Aに示すように、通常用照明光をカラー通常センサ110で検出する一方で、酸素飽和度用照明光をカラー高感度センサ112で検出する。カラー通常センサ110は、通常用照明光の発光期間に被検体像の撮像を行い、撮像後に撮像信号の読出を行う。同様にして、カラー高感度センサ112は、酸素飽和度用照明光の発光期間に被検体の撮像を行い、撮像後に撮像信号の読出しを行う。これにより、図35Bに示すように、カラー通常センサ110からは、通常用R信号、通常用G信号、通常用B信号が読み出され、カラー高感度センサ112からは、酸素飽和度用R信号、酸素飽和度用G信号、酸素飽和度用B信号が読み出される。
なお、光源装置100では、蛍光と青色の狭帯域光とを組み合わせて通常用照明光や酸素飽和度用照明光を生成したが、これに代えて、キセノンランプの光とレーザ光の組み合わせで生成してもよく、また、キセノンランプの光とLED光の組み合わせで生成してもよい。
なお、上記実施形態では、酸素飽和度画像の生成に、473nmの狭帯域成分を有する酸素飽和度用B光を用いたが、その他の波長域の照明光を用いてもよい。例えば、高感度センサに励起光バリアフィルタが設けられたAFI内視鏡用スコープを、上記実施形態のプロセッサ装置12及び光源装置13に装着する場合には、バリアフィルタの透過波長域内(例えば、500〜630nm)で、酸化、還元ヘモグロビンの吸光係数に差がある波長域(例えば、560±10nm)の光を用いることが好ましい。
なお、上記実施形態では、473nmの狭帯域成分を有する酸素飽和度用B信号と、緑色広帯域成分を有する酸素飽和度用G信号と、赤色広帯域成分を有する酸素飽和度用R信号を用いて、血液量に依存しない酸素飽和度の算出を行ったが、445nmの狭帯域成分を有する第1酸素飽和度用B信号、473nmの狭帯域成分を有する第2酸素飽和度用B信号、405nmの狭帯域成分を有する第3酸素飽和度用B信号を用いて、血管深さに依存しない酸素飽和度の算出を行ってもよい。この場合、回転フィルタ31の外側領域37の酸素飽和度用Gフィルタ42gを、445±10nmの狭帯域光を透過させるフィルタに変更し、酸素飽和度用Rフィルタ42rを、405±10nmの狭帯域光を透過させるフィルタに変更する。
血管深さに依存しない酸素飽和度の算出には、図36に示す血管深さと酸素飽和度の相関関係が用いられる。図36において、輝度座標系120は、XYの2軸を持つXY座標系であり、第1酸素飽和度用B信号及び第3酸素飽和度用B信号間の第1輝度比S1/S3がX軸に割り当てられ、第2酸素飽和度用B信号及び第3酸素飽和度用B信号間の第2輝度比S2/S3がY軸に割り当てられている。血管情報座標系121は、輝度座標系120上に設けられたUVの2軸を持つUV座標系であり、U軸は血管深さDに、V軸は酸素飽和度StO2に割り当てられている。
U軸は血管深さが輝度座標系120に対して正の相関関係があることから、正の傾きを有している。このU軸に関して、右斜め上にいくほど血管が浅い位置にあることを、左斜め下に行くほど血管が深い位置にあることを示している。一方、V軸は、酸素飽和度が輝度座標系120に対して負の相関関係を有することから、負の傾きを有している。このV軸に関して、左斜め上に行くほど酸素飽和度StO2が低いことを、右斜め下に行くほど、酸素飽和度StO2が高いことを示している。また、血管情報座標系121においては、U軸とV軸とは交点Pで直交している。
そして、実際に酸素飽和度を算出する際には、被検体の撮像によって得られる第1酸素飽和度用B信号及び第3酸素飽和度用B信号間の第1輝度比をS1/S3を算出するとともに、第2酸素飽和度用B信号及び第3酸素飽和度用B信号間の第2輝度比をS2/S3を算出する。そして、図37に示すように、輝度座標系120において、第1及び第2輝度比S1/S3,S2/S3に対応する座標(X,Y)を特定する。座標(X,Y)が特定されたら、血管情報座標系121において、特定した座標(X,Y)を、酸素飽和度の座標軸であるV軸と、血管深さの座標軸であるU軸にそれぞれ射影して、座標(U,V)を特定する。これにより、1つの画素について、血管深さ情報U及び酸素飽和度情報Vが求まる。こうした処理を1画面分の全画素について繰り返して、全画素に対する血管深さ情報及び酸素飽和度情報を求める。この求めた酸素飽和度情報に基づいて、酸素飽和度画像を生成する。
10 内視鏡システム
11 内視鏡
47 通常撮像系
49 高感度撮像系
53 モノクロ通常センサ
60 モノクロ高感度センサ
70 MPU
70b ビニング処理部
70c 露光時間制御部
78 光量判定部
80 酸素飽和度画像処理部
110 カラー通常センサ
112 カラー高感度センサ

Claims (13)

  1. 酸化、還元ヘモグロビンの吸光係数が異なる異吸収波長域を含む酸素飽和度用照明光を、被検体に照射する照明手段と、
    前記酸素飽和度用照明光の反射光の光量を検出する光量検出手段と、
    前記酸素飽和度用照明光が照明された被検体の反射像を撮像素子で撮像する撮像手段であって、前記撮像素子は互いに感度が異なる第1及び第2撮像素子からなり、前記第1及び第2撮像素子のうち前記酸素飽和度用照明光の反射光の光量に応じて決められた撮像素子に切り替えて、切り替えた前記撮像素子で前記被検体の反射像を撮像して、酸素飽和度用信号を取得する撮像手段と
    記酸素飽和度用信号を高感度化するための高感度化手段と、
    前記酸素飽和度用照明光の反射光の光量が所定の条件を満たす場合には、高感度化しない酸素飽和度用信号に基づいて、酸素飽和度を画像化した酸素飽和度画像を生成し、前記酸素飽和度用照明光の反射光の光量が所定の条件を満たさない場合は、高感度化した酸素飽和度用信号に基づいて、前記酸素飽和度画像を生成する画像生成手段とを備えることを特徴とする内視鏡システム。
  2. 前記高感度化手段は、
    前記酸素飽和度用信号の高感度化を行っていない場合には、前記酸素飽和度用照明光の反射光の光量が第1閾値を下回ったときに、前記高感度化を開始させ、
    前記酸素飽和度用信号の高感度化を行っている場合には、前記酸素飽和度用照明光の反射光の光量が、前記第1閾値よりも大きい第2閾値を上回ったときに、前記高感度化を停止させる制御部を有することを特徴とする請求項記載の内視鏡システム。
  3. 前記撮像手段は、酸素飽和度用R光、酸素飽和度用G光、酸素飽和度用B光で照明された被検体の反射像を撮像することによって、前記酸素飽和度用R光に対応する酸素飽和度用R信号、前記酸素飽和度用G光に対応する酸素飽和度用G信号、前記酸素飽和度用B光に対応する酸素飽和度用B信号を取得し、
    前記光量検出手段は、前記酸素飽和度用R信号、前記酸素飽和度用G信号、前記酸素飽和度用B信号のうち少なくともいずれかの輝度値に基づいて、前記酸素飽和度用照明光の反射光の光量を定めることを特徴とする請求項1または2記載の内視鏡システム。
  4. 前記撮像手段は、前記被検体の反射像の撮像によって、複数の色成分を有する画像を取得し、
    前記光量検出手段は、前記画像の複数の色成分に対して重み付けして得られた値に基づいて、前記酸素飽和度用照明光の反射光の光量を定めることを特徴とする請求項1または2記載の内視鏡システム。
  5. 前記高感度化手段は、前記酸素飽和度用信号をビニング処理するビニング処理部であることを特徴とする請求項1ないし4のうちいずれか1項記載の内視鏡システム。
  6. 前記酸素飽和度用照明光の反射光の光量に応じて、ビニング処理のレベルを変化させることを特徴とする請求項記載の内視鏡システム。
  7. 前記ビニング処理は、前記第1撮像素子よりも高感度の第2撮像素子で行われることを特徴とする請求項5または6記載の内視鏡システム。
  8. 前記照明手段は、酸素飽和度用照明光に加えて、広帯域の波長成分を有する通常画像の生成に用いられる通常用照明光を、前記被検体に順次照射し、
    前記撮像手段は、前記通常光用照明光の反射像を前記第1撮像素子で撮像することにより通常用信号を取得するとともに、前記酸素飽和度用照明光の反射像を前記第2撮像素子で撮像することにより前記酸素飽和度用信号を取得し、
    前記画像生成手段は、前記通常用信号に基づいて通常画像を生成するとともに、前記通常用信号の一部と酸素飽和度用信号に基づいて酸素飽和度画像を生成することを特徴とする請求項5ないし7のうちいずれか1項記載の内視鏡システム。
  9. 前記酸素飽和度用照明光の反射光の光量が所定の条件を満たさない場合に、
    前記ビニング処理部は、前記酸素飽和度用信号をビニング処理し、
    前記画像生成手段は、前記酸素飽和度画像を生成する際、前記通常用信号の一部とビニング処理後の酸素飽和度用信号の表示領域を揃えることを特徴とする請求項記載の内視鏡システム。
  10. 前記高感度化手段は、前記酸素飽和度用照明光の反射光の光量が所定の条件を満たさない場合は、前記第1撮像素子よりも高感度の第2撮像素子における露光時間を、前記所定の条件を満たすときの露光時間よりも長くする露光時間制御部であることを特徴とする請求項1ないしのうちいずれか1項記載の内視鏡システム。
  11. 前記酸素飽和度用照明光の反射光の光量に応じて、前記露光時間を変化させることを特徴とする請求項10記載の内視鏡システム。
  12. 酸化、還元ヘモグロビンの吸光係数が異なる異吸収波長域を含む酸素飽和度用照明光を被検体に照射し、その反射像を互いに感度が異なる第1及び第2撮像素子のうちいずれかの撮像素子で撮像する内視鏡に接続された内視鏡システムのプロセッサ装置において、
    前記酸素飽和度用照明光が照明された被検体像の撮像により得られる酸素飽和度用信号に基づいて、前記酸素飽和度用照明光の反射光の光量を検出する光量検出手段と、
    前記酸素飽和度用信号を高感度化するための高感度化手段と、
    前記酸素飽和度用照明光の反射光の光量が所定の条件を満たす場合には、高感度化しない酸素飽和度用信号に基づいて、酸素飽和度を画像化した酸素飽和度画像を生成し、前記酸素飽和度用照明光の反射光の光量が所定の条件を満たさない場合は、高感度化した酸素飽和度用信号に基づいて、前記酸素飽和度画像を生成する画像生成手段とを備え
    前記酸素飽和度用照明光の反射光の光量に応じて、前記反射像を撮像する撮像素子を切り替えることを特徴とする内視鏡システムのプロセッサ装置。
  13. 酸化、還元ヘモグロビンの吸光係数が異なる異吸収波長域を含む酸素飽和度用照明光を被検体に照射し、その反射像を互いに感度が異なる第1及び第2撮像素子のうちいずれかの撮像素子で撮像する内視鏡に接続された内視鏡システムのプロセッサ装置にインストールされる内視鏡用制御プログラムにおいて、
    コンピュータを、
    前記酸素飽和度用照明光が照明された被検体像の撮像により得られる酸素飽和度用信号に基づいて、前記酸素飽和度用照明光の反射光の光量を検出する光量検出手段と、
    前記酸素飽和度用信号を高感度化するための高感度化手段と、
    前記酸素飽和度用照明光の反射光の光量が所定の条件を満たす場合には、高感度化しない酸素飽和度用信号に基づいて、酸素飽和度を画像化した酸素飽和度画像を生成し、前記酸素飽和度用照明光の反射光の光量が所定の条件を満たさない場合は、高感度化した酸素飽和度用信号に基づいて、前記酸素飽和度画像を生成する画像生成手段として機能させ
    前記酸素飽和度用照明光の反射光の光量に応じて、前記反射像を撮像する撮像素子を切り替える機能を付与することを特徴とする内視鏡用制御プログラム。
JP2012152641A 2012-07-06 2012-07-06 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡用制御プログラム Active JP5623469B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2012152641A JP5623469B2 (ja) 2012-07-06 2012-07-06 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡用制御プログラム
US13/934,476 US10016152B2 (en) 2012-07-06 2013-07-03 Endoscope system, processor device thereof, and method for controlling endoscope system
EP13175345.1A EP2682044B1 (en) 2012-07-06 2013-07-05 Endoscope system and processor device for controlling the endoscope system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012152641A JP5623469B2 (ja) 2012-07-06 2012-07-06 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡用制御プログラム

Publications (2)

Publication Number Publication Date
JP2014014438A JP2014014438A (ja) 2014-01-30
JP5623469B2 true JP5623469B2 (ja) 2014-11-12

Family

ID=48790206

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012152641A Active JP5623469B2 (ja) 2012-07-06 2012-07-06 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡用制御プログラム

Country Status (3)

Country Link
US (1) US10016152B2 (ja)
EP (1) EP2682044B1 (ja)
JP (1) JP5623469B2 (ja)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9232956B2 (en) 2013-04-16 2016-01-12 Calcula Technologies, Inc. Device for removing kidney stones
US10219864B2 (en) 2013-04-16 2019-03-05 Calcula Technologies, Inc. Basket and everting balloon with simplified design and control
US10188411B2 (en) 2013-04-16 2019-01-29 Calcula Technologies, Inc. Everting balloon for medical devices
CN105324064B (zh) * 2013-05-30 2017-10-27 Hoya株式会社 生成示出生物组织中生物物质浓度分布图像的方法和装置
KR102587513B1 (ko) 2014-03-17 2023-10-11 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드 조직 접촉 검출과 자동-노출 및 조명 제어를 위한 시스템 및 방법
WO2015146972A1 (ja) * 2014-03-28 2015-10-01 富士フイルム株式会社 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法
WO2015163942A1 (en) * 2014-04-23 2015-10-29 Calcula Technologies, Inc. Integrated medical imaging system
JP6204314B2 (ja) 2014-09-03 2017-09-27 Hoya株式会社 電子内視鏡システム
WO2017064990A1 (ja) * 2015-10-14 2017-04-20 オリンパス株式会社 内視鏡用光源装置及び内視鏡システム
US9963630B2 (en) 2015-11-18 2018-05-08 Cnpc Usa Corporation Method for a fracturing fluid system at high temperatures
JP2017123997A (ja) * 2016-01-13 2017-07-20 オリンパス株式会社 撮像システムおよび処理装置
US11244478B2 (en) * 2016-03-03 2022-02-08 Sony Corporation Medical image processing device, system, method, and program
JP6654117B2 (ja) * 2016-08-31 2020-02-26 富士フイルム株式会社 内視鏡システム及び内視鏡システムの作動方法
JP2020062063A (ja) * 2017-03-31 2020-04-23 国立大学法人九州大学 ヘモグロビン定量装置、ヘモグロビン定量方法及びヘモグロビン定量プログラム
EP3838110A4 (en) * 2018-08-13 2021-09-08 Sony Group Corporation MEDICAL SYSTEM, MEDICAL LIGHT SOURCE DEVICE, AND METHOD FOR MEDICAL LIGHT SOURCE DEVICE

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5590660A (en) * 1994-03-28 1997-01-07 Xillix Technologies Corp. Apparatus and method for imaging diseased tissue using integrated autofluorescence
JP4315489B2 (ja) * 1998-07-31 2009-08-19 オリンパス株式会社 内視鏡装置
JP4321697B2 (ja) * 2000-08-02 2009-08-26 富士フイルム株式会社 蛍光画像表示方法および装置
DE10214809A1 (de) * 2002-04-04 2003-10-23 Wolf Gmbh Richard Festkörpervideokamera und Helligkeitsregelung dafür
JP4095330B2 (ja) * 2002-04-17 2008-06-04 ペンタックス株式会社 自動調光機能を備えた電子内視鏡装置
DE10224756B4 (de) * 2002-06-04 2009-07-30 Siemens Ag Verfahren und Vorrichtung zur Erzeugung einer kombinierten Parameterkarte
JP4315748B2 (ja) * 2003-07-07 2009-08-19 オリンパス株式会社 内視鏡装置
JP2005348902A (ja) * 2004-06-09 2005-12-22 Olympus Corp 内視鏡装置
JP4545503B2 (ja) 2004-07-14 2010-09-15 オリンパス株式会社 画像生成装置およびその方法
JP4391998B2 (ja) * 2006-03-07 2009-12-24 オリンパス株式会社 内視鏡装置
ES2378956T5 (es) * 2006-06-28 2019-10-09 Medtronic Ardian Luxembourg Sistemas para la neuromodulación renal térmicamente inducida
JP2008043742A (ja) * 2006-07-20 2008-02-28 Pentax Corp 電子内視鏡システム
US7973820B2 (en) * 2007-05-17 2011-07-05 Panasonic Corporation Motion detector and image capture device, interchangeable lens and camera system including the motion detector
DE102007026337B4 (de) * 2007-06-06 2016-11-03 Arnold & Richter Cine Technik Gmbh & Co. Betriebs Kg Digitale Kamera
JP2009034224A (ja) * 2007-07-31 2009-02-19 Olympus Medical Systems Corp 医療装置
US20100149393A1 (en) * 2008-05-22 2010-06-17 Panavision Imaging, Llc Increasing the resolution of color sub-pixel arrays
JP5449816B2 (ja) 2009-03-26 2014-03-19 オリンパス株式会社 画像処理装置、画像処理プログラムおよび画像処理装置の作動方法
JP5389742B2 (ja) * 2009-09-30 2014-01-15 富士フイルム株式会社 電子内視鏡システム、電子内視鏡用のプロセッサ装置、及び電子内視鏡システムの作動方法
JP5113139B2 (ja) 2009-11-26 2013-01-09 東芝ホームテクノ株式会社 電気湯沸かし器
JP5356191B2 (ja) * 2009-11-26 2013-12-04 オリンパス株式会社 蛍光観察装置
JP2012016545A (ja) * 2010-07-09 2012-01-26 Fujifilm Corp 内視鏡装置
JP5496852B2 (ja) * 2010-10-26 2014-05-21 富士フイルム株式会社 電子内視鏡システム、電子内視鏡システムのプロセッサ装置、及び電子内視鏡システムの作動方法

Also Published As

Publication number Publication date
JP2014014438A (ja) 2014-01-30
US10016152B2 (en) 2018-07-10
EP2682044B1 (en) 2017-11-15
US20140012113A1 (en) 2014-01-09
EP2682044A1 (en) 2014-01-08

Similar Documents

Publication Publication Date Title
JP5623469B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡用制御プログラム
JP5623470B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡用制御プログラム
JP5303012B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置及び内視鏡システムの作動方法
JP5460506B2 (ja) 内視鏡装置の作動方法及び内視鏡装置
US9629527B2 (en) Endoscope system, processor device of endoscope system, and image processing method
US10335014B2 (en) Endoscope system, processor device, and method for operating endoscope system
US9918613B2 (en) Endoscope system and operating method thereof
JP5654511B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法
JP5757891B2 (ja) 電子内視鏡システム、画像処理装置、画像処理装置の作動方法及び画像処理プログラム
JP5753105B2 (ja) 電子内視鏡システム、画像処理装置及び画像処理装置の作動方法
JP2013150713A (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、及び画像処理方法
JP2012147927A (ja) 内視鏡装置
JP5774531B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、内視鏡システムの作動方法、及び画像処理プログラム
JP5419930B2 (ja) 電子内視鏡システム、光源装置、及び電子内視鏡システムの作動方法
JP6100674B2 (ja) 内視鏡用光源装置及び内視鏡システム
JP2013039215A (ja) 内視鏡システム、光源装置、及び内視鏡システムの制御方法
WO2014156604A1 (ja) 内視鏡システム及びその作動方法並びにプロセッサ装置
JP2014166590A (ja) 内視鏡システム及び内視鏡システムの作動方法
JP5829568B2 (ja) 内視鏡システム、画像処理装置、画像処理装置の作動方法、及び画像処理プログラム
JP2012125402A (ja) 内視鏡システム、内視鏡システムのプロセッサ装置及び機能情報取得方法
JP6277068B2 (ja) 内視鏡用光源装置及び内視鏡システム
JP5948191B2 (ja) 内視鏡用プローブ装置及び内視鏡システム
JP2015231576A (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、及び画像処理方法
JP5965028B2 (ja) 内視鏡システム
JP6970777B2 (ja) 内視鏡システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140204

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140604

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140606

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140801

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140827

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140924

R150 Certificate of patent or registration of utility model

Ref document number: 5623469

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250