JP5914496B2 - 内視鏡システム及びプロセッサ装置並びに内視鏡システムの作動方法 - Google Patents

内視鏡システム及びプロセッサ装置並びに内視鏡システムの作動方法 Download PDF

Info

Publication number
JP5914496B2
JP5914496B2 JP2013532600A JP2013532600A JP5914496B2 JP 5914496 B2 JP5914496 B2 JP 5914496B2 JP 2013532600 A JP2013532600 A JP 2013532600A JP 2013532600 A JP2013532600 A JP 2013532600A JP 5914496 B2 JP5914496 B2 JP 5914496B2
Authority
JP
Japan
Prior art keywords
image
oxygen saturation
image signal
light
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2013532600A
Other languages
English (en)
Other versions
JPWO2013035694A1 (ja
Inventor
孝明 齋藤
孝明 齋藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of JPWO2013035694A1 publication Critical patent/JPWO2013035694A1/ja
Application granted granted Critical
Publication of JP5914496B2 publication Critical patent/JP5914496B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/145Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/14542Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue for measuring blood gases
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/063Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements for monochromatic or narrow-band illumination
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0638Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0646Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements with illumination filters
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0653Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements with wavelength conversion
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/145Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/1455Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
    • A61B5/1459Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters invasive, e.g. introduced into the body by a catheter
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/742Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/7425Displaying combinations of multiple images regardless of image source, e.g. displaying a reference anatomical image with a live image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/001Texturing; Colouring; Generation of texture or colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00163Optical arrangements
    • A61B1/00186Optical arrangements with imaging filters
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10068Endoscopic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30101Blood vessel; Artery; Vein; Vascular

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Biomedical Technology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Biophysics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Optics & Photonics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Signal Processing (AREA)
  • Endoscopes (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Description

本発明は、血中ヘモグロビンの酸素飽和度に関する情報を酸素飽和度画像として画像化する内視鏡システム及びプロセッサ装置並びに画像表示方法に関する。
近年の医療においては、光源装置、内視鏡装置、プロセッサ装置を備えた内視鏡システムが広く用いられている。内視鏡システムを用いた検体内の観察としては、照明光として広帯域光の白色光を用いる通常光観察の他、波長を狭帯域化した狭帯域光を用いて、検体内の血管を強調表示等させる血管強調観察も行われるようになってきている。
また、血管強調観察の他に、血管の吸光特性や生体組織の散乱特性を利用して、内視鏡装置で得られた画像信号から血中ヘモグロビンの酸素飽和度や血管深さなどの血管に関する生体機能情報を取り出し、それを画像化することも行われている。例えば、特許文献1では、酸素飽和度の大小に応じて異なる色を割り当て、その割り当てた色に基づいて疑似カラーの酸素飽和度画像を作成している。このような酸素飽和度画像を用いることで、例えば、酸素飽和度が特異的に低くなる癌の発見が容易になるため、診断能が向上する。
特許2648494号公報
一般に、生体組織の光の反射率は、血中ヘモグロビンの酸素飽和度、血管の深さ、血液量(血管の太さあるいは血管の密度に対応)の3つの要因に依存して変化する。従って、特許文献1では、酸素飽和度の分布を画像化して表示することはできるが、血管の深さ及び血液量の変化が酸素飽和度に与える影響が考慮されていない。したがって、特許文献1の場合には、血中ヘモグロビンの酸素飽和度が正確に画像化されていない信頼性の低い画像が表示されることがあった。
本発明は、血中ヘモグロビンの酸素飽和度が正確に画像化された信頼性の高い画像を表示することができる内視鏡システム及びプロセッサ装置並びに画像表示方法を提供することを目的とする。
上記目的を達成するために、本発明の内視鏡システムは、検体を照明する照明部と、照明部で照明された検体からの反射光を受光して撮像することにより、血中ヘモグロビンの酸素飽和度に応じて吸光係数が変化する青色帯域の第1の波長範囲を含む第1の反射光に対応する第1の画像信号、赤色帯域の第2の波長範囲を含む第2の反射光に対応する第2の画像信号、及び第1の画像信号と第2の画像信号の規格化に用いられ、第1及び第2の波長範囲と異なる緑色帯域の第3の波長範囲を含む第3の反射光に対応する第3の画像信号を取得する画像信号取得部と、第1ないし第3の画像信号に基づき、酸素飽和度を画像化した酸素飽和度画像を作成する画像作成部と、酸素飽和度画像を表示する表示部とを備え、画像信号取得部は、青色狭帯域光で照明された検体をカラー撮像素子で撮像することにより第1の画像信号を取得し、白色光で照明された検体をカラー撮像素子で撮像することにより、第2及び第3の画像信号を取得することを特徴とする。第1又は第2の波長範囲は、460〜700nmの範囲内に含まれていることが好ましい。第1の波長範囲は460〜480nmであり、第2の波長範囲は590〜700nmであり、第3の波長範囲は540〜580nmであることが好ましい。
第1の画像信号を第3の画像信号で規格化して第1規格化信号を取得するとともに、第2の画像信号を第3の画像信号で規格化して第2規格化信号を取得する規格化信号取得部を備え、画像作成部は、第1及び第2規格化信号と第1色情報とを対応付けた相関関係を用いて、酸素飽和度画像を作成することが好ましい。更に、画像作成部は、第1ないし第3の画像信号に基づき、血液量に依存しない酸素飽和度を求める酸素飽和度算出部と、酸素飽和度算出部で求めた酸素飽和度に基づいて、酸素飽和度画像を作成する酸素飽和度画像作成部と、を有することが好ましい。
白色光は、特定波長の励起光を波長変換部材に当てることによって生成される疑似白色光であることが好ましい。
照明部は、第1の波長範囲を有する第1の照明光、第2の波長範囲を有する第2の照明光、及び第3の波長範囲を有する第3の照明光を検体に順次照射することが好ましい。この場合には、画像信号取得部は、順次照射される第1ないし第3の照明光の反射光をモノクロの撮像素子で受光して撮像することにより、第1ないし第3の画像信号を順次取得する。
照明部は、第1の波長範囲を有する第1の照明光と、第2の波長範囲及び第3の波長範囲を有する第4の照明光を検体に同時照射することが好ましい。この場合には、画像信号取得部は、同時照射された第1及び第4の照明光の反射光をカラーの撮像素子で受光して撮像することにより、第1ないし第3の画像信号を取得する。
本発明の内視鏡システムは、検体を照明する照明部と、照明部で照明された検体からの反射光を受光して撮像することにより、血中ヘモグロビンの酸素飽和度に応じて吸光係数が変化する緑色帯域の第1の波長範囲を含む第1の反射光に対応する第1の画像信号、赤色帯域の第2の波長範囲を含む第2の反射光に対応する第2の画像信号、及び第1の画像信号と第2の画像信号の規格化に用いられ、第1及び第2の波長範囲と異なる緑色帯域の第3の波長範囲を含む第3の反射光に対応する第3の画像信号を取得する画像信号取得部と、第1ないし第3の画像信号に基づき、酸素飽和度を画像化した酸素飽和度画像を作成する画像作成部と、酸素飽和度画像を表示する表示部と、を備えることを特徴とする。第1の波長範囲は530〜550nmであり、第2の波長範囲は590〜700nmであり、第3の波長範囲は555〜565nmであることが好ましい。
本発明の内視鏡システムは、検体を照明する照明部と、照明部で照明された検体からの反射光を受光して撮像することにより、血中ヘモグロビンの酸素飽和度に応じて吸光係数が変化する青色帯域の第1の波長範囲を含む第1の反射光に対応する第1の画像信号、赤色帯域の第2の波長範囲を含む第2の反射光に対応する第2の画像信号、及び第1の画像信号と第2の画像信号の規格化に用いられ、第1及び第2の波長範囲と異なる緑色帯域の第3の波長範囲を含む第3の反射光に対応する第3の画像信号を取得する画像信号取得部と、第1の画像信号を第3の画像信号で規格化して第1規格化信号を取得し、第2の画像信号を第3の画像信号で規格化して第2規格化信号を取得する規格化信号取得部と、第1規格化信号と第1色情報とを対応付けた第1相関関係を用いて、酸素飽和度を画像化した酸素飽和度画像を作成することに加えて、第2規格化信号と第2色情報とを対応付けた第2相関関係を用いて、血液量を画像化した血液量画像を作成する画像作成部と、酸素飽和度画像と血液量画像とを表示する表示部とを備え、画像信号取得部は、青色狭帯域光で照明された検体をカラー撮像素子で撮像することにより第1の画像信号を取得し、白色光で照明された検体をカラー撮像素子で撮像することにより、第2及び第3の画像信号を取得することを特徴とする。
本発明の内視鏡システムは、検体を照明する照明部と、照明部で照明された検体からの反射光を受光して撮像することにより、血中ヘモグロビンの酸素飽和度に応じて吸光係数が変化する青色帯域の第1の波長範囲を含む第1の反射光に対応する第1の画像信号、及び第1の画像信号の規格化に用いられ、第1と異なる緑色帯域の第3の波長範囲を含む第3の反射光に対応する第3の画像信号を取得する画像信号取得部と、第1の画像信号を第3の画像信号で規格化して第1規格化信号を取得する規格化信号取得部と、第1規格化信号と第1色情報とを対応付けた第1相関関係を用いて、酸素飽和度を画像化した酸素飽和度画像を作成する画像作成部と、酸素飽和度画像を表示する表示部と、を備えることを特徴とする。
本発明は、照明部で照明された検体からの反射光を受光して撮像することにより、血中ヘモグロビンの酸素飽和度に応じて吸光係数が変化する青色帯域の第1の波長範囲を含む第1の反射光に対応する第1の画像信号、赤色帯域の第2の波長範囲を含む第2の反射光に対応する第2の画像信号、及び第1の画像信号と第2の画像信号の規格化に用いられ、第1及び第2の波長範囲と異なる緑色帯域の第3の波長範囲を含む第3の反射光に対応する第3の画像信号を取得する内視鏡装置であって、第1の画像信号は、青色狭帯域光で照明された検体をカラー撮像素子で撮像することにより得られ、第2及び第3の画像信号は、白色光で照明された検体をカラー撮像素子で撮像することにより得られる内視鏡装置とともに用いられるプロセッサ装置において、内視鏡装置から第1ないし第3の画像信号を受信する受信部と、第1ないし第3の画像信号に基づき、酸素飽和度を画像化した酸素飽和度画像を作成する画像作成部と、を備えることを特徴とする。
本発明の内視鏡システムの作動方法は、照明部が照明光を発光する照明ステップと、画像信号取得部が、検体からの反射光を受光して撮像することにより、血中ヘモグロビンの酸素飽和度に応じて吸光係数が変化する青色帯域の第1の波長範囲を含む第1の反射光に対応する第1の画像信号、赤色帯域の第2の波長範囲を含む第2の反射光に対応する第2の画像信号、及び第1の画像信号と第2の画像信号の規格化に用いられ、第1及び第2の波長範囲と異なる緑色帯域の第3の波長範囲を含む第3の反射光に対応する第3の画像信号を取得する画像信号取得ステップと、酸素飽和度画像作成部が、第1ないし第3の画像信号に基づき、酸素飽和度を画像化した酸素飽和度画像を作成する画像作成ステップと、表示部が、酸素飽和度画像を表示する表示ステップとを有し、画像信号取得ステップでは、画像信号取得部が、青色狭帯域光で照明された検体をカラー撮像素子で撮像することにより第1の画像信号を取得し、白色光で照明された検体をカラー撮像素子で撮像することにより、第2及び第3の画像信号を取得することを特徴とする。
血中ヘモグロビンの酸素飽和度に応じて吸光係数が変化する第1の波長範囲を含む第1の反射光に対応する第1の画像信号、前記第1の波長範囲と異なり、前記血中ヘモグロビンの量を示す血液量に応じて吸光係数が変化する第2の波長範囲を含む第2の反射光に対応する第2の画像信号、及び第1及び第2の画像信号の規格化に用いられ、第1及び第2の波長範囲とは異なる第3の波長範囲を含む第3の反射光に対応する第3の画像信号に基づいて、酸素飽和度を画像化した酸素飽和度画像を作成するとともに、その作成した酸素飽和度画像に基づいて表示を行っていることから、血中ヘモグロビンの酸素飽和度が正確に画像化された信頼性の高い画像を表示することができる。
第1実施形態の内視鏡システムの外観図である。 内視鏡システムの概略図である。 スコープ先端部の正面図である。 酸素飽和度測定光及び白色光の発光スペクトルを表すグラフである。 RGBのカラーフィルタの分光透過率を示すグラフである。 通常光観察モードにおける撮像素子の撮像制御を示す説明図である。 生体機能情報観察モードにおける撮像素子の撮像制御を示す説明図である。 血液量と信号比R2/G2との相関関係を示すグラフである。 酸素飽和度と信号比B1/G2、R2/G2との相関関係を示すグラフである。 ヘモグロビンの吸光係数を示すグラフである。 図7のグラフにおいて信号比から血液量を求める方法を示す説明図である。 図8のグラフにおいて信号比から酸素飽和度を求める方法を示す説明図である。 血液量と色差信号との関係を示すグラフである。 酸素飽和度と色差信号との関係を示すグラフである。 血液量画像と酸素飽和度画像を並列表示する表示装置の画像図である。 血液量画像と酸素飽和度画像のいずれか一方を表示する表示装置の画像図である。 本発明の作用を示すフローチャートである。 血液量画像及び酸素飽和度画像の作成手順を示すブロック図である。 第2実施形態における内視鏡システムの概略を示すブロック図である。 第3実施形態における内視鏡システムの概略を示すブロック図である。 白色光の発光スペクトルを表すグラフである。 回転フィルタの正面図である。 図20の回転フィルタとは異なる透過特性を有する回転フィルタの正面図である。 図20,21の回転フィルタとは異なる透過特性を有する回転フィルタの正面図である。 第4実施形態における内視鏡システムの概略を示すブロック図である。 信号比B1/G2と色差信号とを関係を示すカラーテーブルである。 信号比R2/G2が一定値以上の場合における信号比B1/G2と色差信号とを関係を示すカラーテーブルである。 信号比R2/G2が一定値を下回る場合における信号比B1/G2と色差信号とを関係を示すカラーテーブルである。
図1に示すように、第1実施形態の内視鏡システム10は、検体内を照明する光を発生する光源装置11と、光源装置11から発生する光を導光して検体の観察領域に照明光として照射するとともに、観察領域を撮像する内視鏡装置12と、内視鏡装置12で得られた内視鏡画像を画像処理するプロセッサ装置13と、画像処理によって得られた内視鏡画像等を表示する表示装置14と、キーボード等で構成される入力装置15とを備えている。
内視鏡システム10は、波長範囲が青色から赤色に及ぶ可視光の検体像からなる通常光画像を表示装置14に表示する通常光観察モードと、検体における血中ヘモグロビンの酸素飽和度と血液量の情報が疑似カラーで表された酸素飽和度画像及び血液量画像を表示装置14に表示する生体機能情報観察モードを備えている。これら観察モードは、内視鏡装置の切り替えスイッチ17や入力装置15から入力される指示に基づき、適宜切り替えられる。
内視鏡スコープ32には、操作部35側から順に、軟性部38、湾曲部39、スコープ先端部40が設けられている。軟性部38は、可撓性を有しているため、内視鏡スコープ挿入時には検体内で屈曲することができる。湾曲部39は、操作部35に配置されたアングルノブ35aの回動操作により湾曲する。この湾曲部39は、検体の部位等に応じて、上下左右方向で、任意の角度に湾曲させることができるため、スコープ先端部40を所望の観察部位に向けることができる。
図2に示すように、光源装置11は、2種のレーザ光源LD1,LD2と、光源制御部20と、コンバイナ21と、カプラ22とを備えている。レーザ光源LD1は、酸素飽和度の測定に用いられる狭帯域光(酸素飽和度測定光)を発生させる。レーザ光源LD2は、内視鏡装置の先端部に配置された蛍光体50から白色光(疑似白色光)を発生させるための励起光を発生させる。各レーザ光源LD1,LD2から発せられる光は、集光レンズ(図示省略)を介してそれぞれ対応する光ファイバ24,25に入射する。なお、レーザ光源LD1,LD2は、ブロードエリア型のInGaN系レーザダイオードが使用でき、また、InGaNAs系レーザダイオードやGaNAs系レーザダイオード等を用いることもできる。
光源制御部20は、レーザ光源LD1,LD2を制御することによって、各レーザ光源LD1,LD2の発光タイミングや各レーザ光源LD1,LD2間の光量比を調節する。本実施形態では、通常光観察モードのときには、レーザ光源LD1をオフにし、レーザ光源LD2をオンにする。一方、生体機能情報観察モードのときには、レーザ光源LD1とレーザ光源LD2のオンとオフを、一定時間毎に交互に切り替える。
コンバイナ21は、各光ファイバ24,25からの光を合波させる。合波した光は、分波器であるカプラ22によって4系統の光に分波される。分波された4系統の光のうち、レーザ光源LD1からの光はカプラ22によってライトガイド26,27で伝送され、レーザ光源LD2からの光はカプラ22によってライトガイド28、29で伝送される。ライトガイド26〜29は多数の光ファイバを束ねたバンドルファイバなどから構成される。なお、コンバイナ21及びカプラ22を用いずに、各レーザ光源LD1,LD2からの光を直接ライトガイド26〜29に入れる構成としてもよい。
内視鏡装置12は電子内視鏡であり、内視鏡スコープ32(図1参照)と、ライトガイド26〜29で伝送される4系統(4灯)の光を照射する照明部33と、観察領域を撮像する1系統の撮像部34と、内視鏡スコープ32の先端部の湾曲操作や観察のための操作を行う操作部35と、内視鏡スコープ32と光源装置11及びプロセッサ装置13とを着脱自在に接続するコネクタ部36を備えている。
スコープ先端部40には照明部33と撮像部34が設けられている。撮像部34は、スコープ先端部40の略中心位置に、被写体領域からの反射光が入射する1つの観察窓42を備えている。照明部33は、撮像部34の両脇に設けられた2つの照明窓43,44を備えており、各照明窓43,44は、酸素飽和度測定光と白色光のいずれか一方の光を観察領域に向けて照射する。
一方の照明窓43の奥には2つの投光ユニット46,47が収納されている。一方の投光ユニット46では、ライトガイド26からの酸素飽和度測定光を、レンズ48を介して観察領域に向けて照射する。もう一方の投光ユニット47では、ライトガイド28からの励起光を蛍光体50に当てて白色光を励起発光させ、その白色光をレンズ51を介して観察領域に向けて照射する。なお、他方の照明窓44の奥にも、上記投光ユニット46と同様の投光ユニット53と、上記投光ユニット47と同様の投光ユニット54の2つが収納されている。
観察窓42の奥には、検体の観察領域の像光を取り込むための対物レンズユニット等の光学系が設けられており、さらにその対物レンズユニットの奥には、観察領域の像光を受光して観察領域を撮像するCCD(Charge Coupled Device)やCMOS(Complementary Metal-Oxide Semiconductor)などの撮像素子60が設けられている。
撮像素子60は、対物レンズユニットからの光を受光面(撮像面)で受光し、受光した光を光電変換して撮像信号(アナログ信号)を出力する。この撮像素子60は撮像制御部70によって撮像が制御される。撮像素子60から出力される撮像信号(アナログ信号)は、スコープケーブル67を通じてA/D変換器68に入力される。A/D変換器68は、撮像信号をその電圧レベルに対応する画像信号(デジタル信号)に変換する。変換後の画像信号は、コネクタ部36を介して、プロセッサ装置13の画像処理部73に入力される。
プロセッサ装置13は、制御部72と、画像処理部73と、記憶部74とを備えており、制御部72には表示装置14及び入力装置15が接続されている。制御部72は、内視鏡装置12の切り替えスイッチ17や入力装置15から入力される観察モード等の指示に基づいて、画像処理部73、光源装置11の光源制御部20、内視鏡装置12の撮像制御部70、及び表示装置14の動作を制御する。
図3に示すように、照明窓43,44は、スコープ先端部40において、観察窓42を挟んでその両側に配置されている。また、4つの投光ユニット46,47,53,54は、蛍光体50を備える投光ユニット47,54の出射面間を結ぶ直線L1と、蛍光体50を備えていない投光ユニット46,53の出射面間を結ぶ直線L2とが、観察窓42の中心部で交差するように、互い違いに配置されている。このような配置にすることによって、照明ムラの発生を防止することができる。
蛍光体50は、レーザ光源LD2からの励起光の一部を吸収して緑色〜赤色に励起発光する複数種の蛍光物質(例えばYAG系蛍光物質、或いはBAM(BaMgAl1017)等の蛍光物質)を含んで構成される。励起光が蛍光体50に照射されると、蛍光体50から発せられる緑色〜赤色の励起発光光(蛍光)と、蛍光体50により吸収されず透過した励起光とが合わされて、白色光(疑似白色光)が生成される。なお、蛍光体は、商品名としてマイクロホワイト(登録商標)(Micro White(MW))とも呼ばれている。
したがって、蛍光体50を備える投光ユニット47,54から発せられる白色光は、図4に示すように、中心波長445nmの励起光の波長範囲と、その励起光によって励起発光する蛍光において発光強度が増大する概ね450nm〜700nmの波長範囲とを有する発光スペクトルとなる。一方、蛍光体50を備えていない投光ユニット46,53から発せられる酸素飽和度測定光は、中心波長473nmの近傍に波長範囲を有する発光スペクトルとなる。
なお、ここで、本発明でいう白色光とは、厳密に可視光の全ての波長成分を含むものに限らず、例えば、上述した疑似白色光を始めとして、基準色であるR(赤),G(緑),B(青)等、特定の波長帯の光を含むものであればよい。つまり、本発明のいう白色光には、例えば、緑色から赤色にかけての波長成分を含む光や、青色から緑色にかけての波長成分を含む光等を含む意味で使用している。
撮像素子60はカラーCCDであり、その受光面には、R色のカラーフィルタが設けられたR画素、G色のカラーフィルタが設けられたG画素、B色のカラーフィルタが設けられたB画素を1組とする画素群が、マトリックス状に多数配列されている。B色、G色、R色のカラーフィルタは、それぞれ図5に示す曲線63,64,65で表される分光透過率を有している。したがって、観察領域からの反射光等のうち白色光はR色、G色、B色のカラーフィルタの全てを透過するため、撮像素子60のR画素、G画素、B画素から出力される信号に、白色光の反射像の情報が含まれている。一方、酸素飽和度測定光は、中心波長が473nmであるため、主としてB画素又はG画素からから出力される信号に、酸素飽和度測定光の反射像の情報が含まれている。
撮像素子60は、撮像制御部70によって、観察モード毎に異なる撮像制御が行われる。図6Aに示すように、通常光観察モード時には、1フレーム期間内で、白色光(445nm+蛍光体(本実施形態では445nmの励起光を蛍光体50に当てて白色光を発生させるため、このように表記する))を光電変換して得られる電荷を蓄積するステップと、蓄積した電荷を読み出すステップの合計2ステップが行われる。これは通常光観察モードに設定されている間、繰り返し行われる。
一方、生体機能情報観察モード時には、図6Bに示すように、1フレーム期間内で、酸素飽和度測定光(473nmの狭帯域光)を光電変換して得られる電荷を蓄積するステップと、蓄積した電荷を読み出すステップの合計2ステップが行われる(1フレーム目)。そして、その次に、1フレーム期間内で、白色光(445nm+MW)を光電変換して得られる電荷を蓄積するステップと、蓄積した電荷を読み出すステップの合計2ステップが行われる(2フレーム目)。これら合計2フレームの撮像制御は、生体機能情報観察モードに設定されている間、繰り返し行われる。
なお、1フレーム目の画像信号は、撮像素子60のB画素から出力される青色信号B1と、G画素から出力される緑色信号G1と、R画素から出力される赤色信号R1とから構成される。また、2フレーム目の画像信号は通常光観察モード時に得られる画像信号と同じであり、B画素から出力される青色信号B2と、G画素から出力される緑色信号G2と、R画素から出力される赤色信号R2とから構成される。
なお、図示はしていないが、内視鏡装置12における操作部35及び内視鏡スコープ32の内部には、組織採取用処置具等を挿入する鉗子チャンネルや、送気・送水用のチャンネル等、各種のチャンネルが設けられている。
図2に示すように、画像処理部73は通常光画像処理部80と機能画像処理部82とを備えており、内視鏡装置12からの画像信号に対して、所定の画像処理を施す。通常光画像処理部80は、通常光観察モード時に得られた画像信号に対して所定の画像処理を施すことによって、通常光画像を作成する。
機能画像処理部82は、内視鏡装置から入力される画像信号に基づき検体の血液量及び血中ヘモグロビンの酸素飽和度の情報を算出するとともに、算出した血液量を疑似カラー画像化した血液量画像と酸素飽和度を疑似カラー画像化した酸素飽和度画像を作成する。機能画像処理部82は、信号比算出部84と、相関関係記憶部85と、血液量及び酸素飽和度算出部86と、血液量画像作成部87と、酸素飽和度画像作成部88とを備えている。
信号比算出部84は、生体機能情報観察モード時に取得する画像信号のうち、1フレーム目の青色信号B1と2フレーム目の緑色信号G2との信号比B1/G2と、2フレーム目の緑色信号G2と赤色信号R2との信号比R2/G2とを求める。これにより、青色信号B1及び赤色信号R2は緑色信号G2で規格化される。信号比は画像信号の全ての画素に対して算出される。なお、信号比は画像信号のうち血管部分の画素のみ求めてもよい。この場合、血管部分は、血管部分の画像信号とそれ以外の部分の画像信号との差に基づいて特定される。
相関関係記憶部85は、信号比B1/G2及びR2/G2と血液量及び酸素飽和度との相関関係を記憶している。信号比と血液量との相関関係は、図7に示すように、信号比R2/G2が大きくなればなるほど血液量も大きくなるように定義されている1次元テーブルで記憶されている。なお、信号比R2/G2はlogスケールで表わされる。
一方、信号比と酸素飽和度との相関関係は、図8に示す二次元空間上に酸素飽和度の等高線を定義した2次元テーブルで記憶されている。この等高線の位置、形は光散乱の物理的なシミュレーションで得られ、血液量に応じて変わるように定義されている。例えば、血液量の変化があると、各等高線間の間隔が広くなったり、狭くなったりする。なお、信号比B1/G2,R2/G2はlogスケールで表わされる。
上記相関関係は、図9に示す酸化ヘモグロビンや還元ヘモグロビンの吸光特性や光散乱特性と密接に関連性し合っている。図9において、曲線90は酸化ヘモグロビンの吸光係数を示しており、曲線91は還元ヘモグロビンの吸光係数を示している。この図9が示すように、例えば、473nmのように吸光係数の差が大きい波長では、酸素飽和度の情報を取り易い。しかしながら、473nmの光に対応する信号を含む青色信号は、酸素飽和度だけでなく血液量にも依存度が高い。そこで、青色信号B1に加え、主として血液量に依存して変化する光に対応する赤色信号R2と、青色信号B1と赤色信号R2を規格化するための緑色信号G2から得られる信号比B1/G2及びR2/G2を用いて、血液量及び酸素飽和度を正確に求めている。
また、血中ヘモグロビンの吸光係数の波長依存性から、以下の3つのことが言える。
(1)波長470nm近辺(例えば、中心波長470nm±10nmの青色の波長領域)では酸素飽和度の変化に応じて吸光係数が大きく変化する。
(2)540〜580nmの緑色の波長範囲で平均すると、酸素飽和度の影響を受けにくい。
(3)590〜700nmの赤色の波長範囲では、酸素飽和度によって一見吸光係数が大きく変化するように見えるが、吸光係数の値自体が非常に小さいので、結果的に酸素飽和度の影響を受けにくい。
また、470〜700nmの波長範囲の光は、粘膜組織内での散乱係数が小さく、かつ波長依存性が小さいという性質がある。このため、この波長範囲の光を照明光として用いることによって、血管の深さの影響を低減しつつ、血液量および酸素飽和度の情報を含む血液情報を得ることができる。
血液量及び酸素飽和度算出部86は、相関関係記憶部85に記憶された相関関係と信号比算出部84で求めた信号比B1/G2、R2/G2とを用いて、各画素における血液量及び酸素飽和度の両方を求める。ここで、信号比として、B1/G2、R2/G2が得られたケース1の場合と、このケース1と同じB1/G2、ケース1と異なるR2**/G2**が得られた場合のケース2について、血液量及び酸素飽和度の算出方法を説明する。
まず、ケース1(B1/G2、R2/G2)の場合について説明する。図10Aに示す相関関係から、信号比R2/G2に対応する血液量H1を求める。そして、図10Bに示す相関関係から、信号比B1/G2が示す酸素飽和度(0%〜略80%)のうち、血液量H1に対応する酸素飽和度を求める。この求めた酸素飽和度は60%である。
一方、ケース2(B1/G2、R2**/G2**)の場合について説明する。図10Aに示すように、信号比R2**/G2**に対応する血液量H2を求める。この血液量H2は、ケース1の血液量H1よりも小さい。そして、ケース1の場合と同様に、図10Bに示す相関関係から、信号比B1/G2が示す酸素飽和度(0%〜略80%)のうち、血液量H2に対応する酸素飽和度を求める。この求めた酸素飽和度は、ケース1の場合よりもかなり小さい20%である。
以上のように、酸化ヘモグロビンと還元ヘモグロビンの吸光係数に差がある波長成分を含む信号比B1/G2は酸素飽和度に関する多く情報を含んでいるが、血液量にも依存するため、0%〜80%の間で大きく変動する。例えば、ケース1とケース2の場合であれば、信号比B1/G2は全く同じであるにもかかわらず、血液量に差があるため、酸素飽和度の差が40%もある。即ち、信号比B1/G2には、血液量と酸素飽和度の両方の情報を含まれているため、信号比B1/G2自体が示す酸素飽和度の値は正確ではない。そこで、本発明のように、まず、信号比R2/G2から血液量を求めた上で、この血液量に対応する酸素飽和度を信号比B1/G2が示す酸素飽和度の中から求める。これにより、血液量に依存しない酸素飽和度を算出することができる。
なお、図10Bに示すように、信号比B1/G2とR2/G2の対応点P1が下限ライン93よりも上方に位置するときには酸素飽和度を0%とし、対応点P2が上限ライン94よりも下方に位置するときには酸素飽和度を100%とする。なお、対応点が下限ライン93と上限ライン94との間から外れている場合には、その画素における酸素飽和度を表示しなくてもよい。
血液量画像作成部87は、血液量及び酸素飽和度算出部86で求めた血液量を疑似カラーで表した血液量画像を作成する。血液量画像は、輝度Yと色差信号Cb,Crからなる映像信号で構成される。輝度Yには、緑色信号G2が割り当てられる。この緑色信号G2は、ヘモグロビンによる吸収がやや強い波長帯域の反射光に対応しているので、これに基づく画像からは粘膜の凹凸や血管などを視認できる。したがって、緑色信号G2を輝度に割り当てることで、疑似カラー画像の全体的な明るさを定義することができる。
一方、色差信号Cb,Crは、カラーテーブル87aに従って、血液量に応じた信号値が割り当てられる。カラーテーブル87aは、図11に示すように、色差信号Cbについては血液量が大きくなるほど信号値が低下するように定義され、色差信号Crについては血液量が大きくなるほど信号値が増加するように定義されている。したがって、血液量画像は、血液量が多いところでは赤味が増加し、血液量が低くなるにつれて赤味の彩度が下がりモノクロに近づいていく。なお、カラーテーブル87aは信号比R2/G2と色差信号Cb、Crとの関係も示しているため、血液量を算出することなく、信号比R2/G2に基づいて血液量画像を作成してもよい。
酸素飽和度画像作成部88は、血液量及び酸素飽和度算出部87で求めた酸素飽和度を疑似カラーで表す酸素飽和度画像を作成する。酸素飽和度画像は、血液量画像と同様、輝度Yと色差信号Cb,Crからなる映像信号で構成される。輝度Yには、緑色信号G2が割り当てられる。色差信号Cb,Crは、カラーテーブル88aに従い、酸素飽和度に応じた信号値が割り当てられる。
カラーテーブル88aは、図12に示すように、高酸素飽和度下では色差信号Crの信号値が正、色差信号Cbの信号値が負となるように定義され、低酸素飽和度下では、反対に色差信号Crの信号値が負、色差信号Cbの信号値が正となるように定義されている。そして、中酸素飽和度下において、色差信号Crの信号値と色差信号Cbの信号値の大小関係が逆転するように定義されている。したがって、酸素飽和度が低い方から高い方に行くにつれて、酸素飽和度画像の色味は青→水色→緑→黄色→橙→赤と変化する。
以上のように作成された血液量画像及び酸素飽和度画像は表示装置14に表示される。表示方法としては、図13に示すように、酸素飽和度画像と血液量画像を縮小し、それら縮小した画像を並列して同時に表示してもよい。あるいは、入力装置15に設けられた画像選択手段をユーザが操作することによって、図14に示すように、酸素飽和度画像と血液量画像のいずれか一方を選択し、その選択した画像を表示装置14に表示する。このように血液量画像と酸素飽和度画像の両方を用いて内視鏡診断を行うことができるため、酸素飽和度と血液量の両方に特徴を有する未分化型早期胃癌などの病変部に対する診断能を向上させることができる。
次に、本発明の作用について図15のフローチャート及び図16のブロック図を参照して説明する。なお、通常光観察モードの元では、内視鏡スコープ32を体内、例えば消化管内に挿入する。アングルノブ35aの操作によって、所望の観察部位にスコープ先端部40をセットし、通常光観察を行う。この通常観察では、白色光で照明された観察領域のカラーの通常光画像が表示装置14に表示される。
そして、観察部位が病変部と推測される場合は、内視鏡装置の切り替えスイッチ17によって、生体機能情報観察モードに切り替える。この生体機能情報観察モードに切り替えられると、スコープ先端部40から中心波長473nmの狭帯域光である酸素飽和度測定光が検体内に照射される。検体からの反射光等は、B画素、G画素、R画素からなるカラーCCDである撮像素子60で撮像される。これにより、青色信号B1、緑色信号G1、赤色信号R1からなる1フレーム目の画像信号が得られる。
1フレーム目の画像信号が得られると、中心波長445nmの励起光で励起発光される白色光が、スコープ先端部40から検体内に照射される。検体からの反射光等を撮像素子60で撮像することにより、青色信号B2、緑色信号G2、赤色信号R2からなる2フレーム目の画像信号(通常光画像信号)が得られる。
2フレーム目の画像信号が得られると、信号比算出部84は、信号比B1/G2、R2/G2を求める。信号比が求まると、血液量及び酸素飽和度算出部86は、相関関係記憶部85に記憶している相関関係から、信号比算出部84で求めた信号比R2/G2に対応する血液量を求めるとともに、信号比算出部84で求めた信号比B1/G2、R2/G2に対応する酸素飽和度を求める。血液量及び酸素飽和度は、全ての画素について求められる。
全ての画素について血液量及び酸素飽和度が求まると、血液量画像作成部87内のカラーテーブル87aを参照し、血液量に対応する色差信号Cb,Crを求める。そして、この求めた色差信号Cb,Crと、緑色信号G2が割り当てられた輝度Yとから、血液量が疑似カラーで表された血液量画像が作成される。また、同様に、カラーテーブル88aを用いて、酸素飽和度が疑似カラーで表された酸素飽和度画像を作成する。作成された血液量画像及び酸素飽和度画像は、表示装置14に表示される。
なお、第1実施形態においては、中心波長473nmの狭帯域光を照射したときのフレーム1の画像信号と中心波長445nmの励起光で蛍光体から励起発光させた白色光を照射したときのフレーム2の画像信号の合計2フレームを使って、血液量及び酸素飽和度の算出を行っている。これに代えて、図17に示す第2実施形態のように、レーザ光源LD1の中心波長473nmの励起光を用いて蛍光体50から白色光を励起発光させ、その白色光を検体内に照射及び撮像したときに得られる1フレーム分の画像信号から、血液量及び酸素飽和度を求めてもよい。なお、内視鏡システム100は、4つの投光ユニット46,47,53,54から4系統の光を照射する内視鏡システム10と異なり、蛍光体50を有する2つの投光ユニット47,54から2系統の光を照射する。
このとき画像信号の青色信号Bには、中心波長473nmの励起光に対応する信号と、蛍光体50から励起発光光のうち少量の光に対応する信号とを含む。また、緑色信号Gには、蛍光体50からの励起発光光のうち主として540〜580nmの波長範囲の分光照明に対応する信号が含まれている。また、赤色信号Rには、少量の励起光に対応する信号と、励起発光光のうち590〜700nmの波長範囲の分光照明に対応する信号とが含まれている。
したがって、血液量の算出に用いられる信号比はR/Gとなり、酸素飽和度の算出に用いられる信号比はB/G、R/Gとなる。R/Gは上記信号比R2/G2に対応し、B/Gは上記信号比B1/G2に対応する。血液量及び酸素飽和度の算出方法は、上記と同様であるため、説明を省略する。なお、疑似カラー画像の血液量画像及び酸素飽和度画像を作成する際には、緑色信号Gを輝度に割り当てる。
図18に示すように、第3実施形態の内視鏡システム120は、光源装置11に回転フィルタ方式を採用する。したがって、内視鏡システム120には、第3実施形態におけるレーザ光源LD1,LD2、光源制御部20、及びコンバイナ21に代えて、図19に示す分光強度を有する白色光を発する広帯域光源121(例えばキセノンランプ等)と、白色光のうち酸素飽和度測定光の波長成分または白色光をそのまま透過させる回転フィルタ122と、回転フィルタを透過した光が入射する光ファイバ123と、回転フィルタ122の回転を制御する回転制御部124が設けられている。
光ファイバ123に入射した光は、カプラ22で2系統の光に分波され、分波された光はそれぞれライトガイド26及び27を介して、投光ユニット46及び53から検体内に照射される。なお、これら以外については、内視鏡システム120は図2に示す内視鏡システム10と同様の構成を有しているので、説明を省略する。
図20に示すように、回転フィルタ122は、白色光のうち波長範囲が460〜480nmの酸素飽和度測定光(図4参照)を透過させるバンドフィルタ125と、白色光をそのまま透過させる開口部126とからなる。したがって、回転フィルタ122が回転することで、酸素飽和度測定光と白色光とが交互に検体内に照射される。このとき、第1実施形態と同様に、酸素飽和度測定光が照射されたときに1フレーム目の画像信号B1、G1、R1を取得し、白色光が照射されたときに2フレーム目の画像信号B2、G2、R2を取得する。これら取得した2フレーム分の画像信号から、第1実施形態と同様に、酸素飽和度画像を作成する。
この第3実施形態においては、1フレーム目では、青色信号B1に、460〜480nmの波長範囲の光に対応する信号が含まれる。一方、2フレーム目では、青色信号B2には400nm〜530nmの波長範囲の光に対応する信号が含まれ、緑色信号G2には540nm〜580nmの波長範囲の光に対応する信号が含まれ、赤色信号R2には590nm〜700nmの波長範囲の光に対応する信号が含まれる。なお、血液量及び酸素飽和度の算出方法は、第1実施形態と同様であるため、説明を省略する。
なお、第3実施形態では、図20に示す回転フィルタ122に代えて、図21に示すような回転フィルタ130を用いてもよい。この回転フィルタ130の第1透過部131は広帯域光源121からの白色光のうち460〜480nmの波長範囲の第1透過光を透過させ、第2透過部132は白色光のうち540〜580nmの波長範囲の第2透過光を透過させ、第3透過部133は白色光のうち590〜700nmの波長範囲の第3透過光を透過させる。この回転フィルタ130が回転すると、第1〜第3透過光が順次検体に照射される。
回転フィルタ130を用いる場合には、モノクロの撮像素子127によって、各透過光が照射される毎に撮像を行う。したがって、第1〜第3透過光の照射により、3フレーム分の画像信号が得られる。これら画像信号のうち、第1透過光を照射したときに得られる画像信号を青色信号Bとし、第2透過光を照射したときに得られる画像信号を緑色信号Gとし、第3透過光を照射したときに得られる画像信号を赤色信号Rとする。
したがって、血液量の算出に用いられる信号比はR/Gとなり、酸素飽和度の算出に用いられる信号比はB/G、R/Gとなる。R/Gは第1実施形態の信号比R2/G2に対応し、B/Gは第1実施形態の信号比B1/G2に対応する。血液量及び酸素飽和度の算出方法は、第1実施形態と同様であるため、説明を省略する。なお、疑似カラー画像の血液量画像及び酸素飽和度画像を作成する際には、緑色信号Gを輝度に割り当てる。
なお、第3実施形態では、図21に示す回転フィルタ130の代わりに、図22に示すように、各透過部における透過率が回転フィルタ130と異なる回転フィルタ150を用いてもよい。回転フィルタ150の第1透過部は白色光のうち530〜550nmの波長範囲の第1透過光を透過させ、第2透過部は白色光のうち555〜565nmの波長範囲の第2透過光を透過させ、第3透過部は白色光のうち590〜700nmの第3透過光を透過させる。この回転フィルタ150が回転すると、第1〜第3透過光が順次検体に照射される。
回転フィルタ150を用いる場合には、モノクロの撮像素子127によって各透過光が照射される毎に撮像を行う。第1及び第2透過光に対しては撮像素子60のG画素が主として感応するため、第1及び第2透過光を照射したときには、画像信号として緑色信号Ga,Gbが得られる。一方、第3透過光に対しては撮像素子60のR画素が主として感応するため、画像信号として赤色信号Rcが得られる。ここで、Ga及びRcは血中ヘモグロビンの酸素飽和度に応じて吸光係数が変化する2つの波長範囲の反射光に対応する画像信号であり、Gbは吸光係数が変化しない1つの波長範囲の反射光に対応する画像信号である。したがって、Ga/Gbが酸素飽和度及び血液量に依存して変化し、Rc/Gbが主に血液量に依存して変化する。
そのため、血液量の算出に用いられる信号比はRc/Gbとなり、酸素飽和度の算出に用いられる信号比はGa/Gb、Rc/Gbとなる。Rc/Gbは第1実施形態の信号比R2/G2に対応し、Ga/Gbは第1実施形態の信号比B1/G2に対応する。血液量及び酸素飽和度の算出方法は、第1実施形態と同様であるため、説明を省略する。なお、疑似カラーの血液量画像及び酸素飽和度画像を作成する際には、緑色信号GaまたはGbを輝度に割り当てる。
図23に示すように、第4実施形態の内視鏡システム200は、第3実施形態で示した回転フィルタ122の代わりに、ハーフミラー201、反射ミラー202、狭帯域フィルタ203,204を用いて、血液量及び酸素飽和度の算出に用いられる光を作成する。そして、検体内をカラーの撮像素子60で撮像する。それ以外については、内視鏡システム200は、第3実施形態の内視鏡システム120と同様の構成を有している。
光源装置11では、広帯域光源121で発せられる白色光は、ハーフミラー201において、2系統の白色光に分波される。分波された一方の白色光は狭帯域フィルタ203に入射し、もう一方の白色光は、反射ミラー202で反射して、狭帯域フィルタ204に入射する。狭帯域フィルタ203は白色光のうち460〜480nmの波長範囲の光を透過させ、狭帯域フィルタ204は白色光のうち540〜700nmの波長範囲の光を透過させる。各狭帯域フィルタ203,204を透過した光は、レンズ203a,204a及びライトガイド26,27を介して、検体内に同時に照射される。
したがって、撮像により得られる画像信号の青色信号Bには460〜480nmの光に対応する信号が、緑色信号Gには540〜580nmの光に対応する信号が、赤色信号Rには590〜700nmの光に対応する信号が含まれる。
そのため、血液量の算出に用いられる信号比はR/Gとなり、酸素飽和度の算出に用いられる信号比はB/G、R/Gとなる。R/Gは第1実施形態の信号比R2/G2に対応し、B/Gは第1実施形態の信号比B1/G2に対応する。血液量及び酸素飽和度の算出方法は、第1実施形態と同様であるため、説明を省略する。なお、疑似カラー画像の血液量画像及び酸素飽和度画像を作成する際には、緑色信号Gを輝度に割り当てる。
なお、上記実施形態では、血液量画像及び酸素飽和度画像を作成する際に、血液量及び酸素飽和度に関する情報を疑似カラー画像化しているが、これに代えて、血液量及び酸素飽和度に関する情報をモノクロ画像化(白と黒のモノクロで濃淡の変化をさせる)してもよい。
なお、上記実施形態では、血中ヘモグロビンの酸素飽和度に応じて吸光係数が変化する波長成分を含む青色信号B1と血中ヘモグロビンの量を示す血液量に応じて吸光係数が変化する波長成分を含む赤色信号R2の規格化を、緑色信号G2で除算しているが、青色信号B1及び赤色信号R2の規格化はこれに限られない。
なお、上記実施形態では、相関関係記憶部85に記憶した相関関係から信号比B1/G2、R2/G2から酸素飽和度を算出し、その算出した酸素飽和度に基づいて酸素飽和度画像を作成しているが、酸素飽和度を算出せずに、信号比B1/G2に基づいて酸素飽和度画像を作成してもよい。この場合には、図24に示すような、信号比B1/G2と色差信号Cr、Cbとを対応付けたカラーテーブル300を用いて酸素飽和度画像を作成する(輝度信号Yには、上記実施形態と同様に、G2を割り当てる。)。
ここで、信号比B1/G2のうち、「B1」は、酸化ヘモグロビンの吸光係数が還元ヘモグロビンの吸光係数よりも大きい波長成分(中心波長473nmの波長成分)を有しているため、酸素飽和度が低くなるほど、「B1」の信号値は大きくなる。一方、「G2」は、酸化ヘモグロビンの吸光係数と還元ヘモグロビンの吸光係数の大小関係が頻繁に入れ替わる波長成分(540〜580nmの波長成分)を有しているため、酸素飽和度が変化しても、「G2」の信号値は変化しない。
以上から、「B1」を「G2」で除した信号比B1/G2の信号値は、酸素飽和度が低くなるほど、大きくなる。したがって、酸素飽和度の低下に合わせて、酸素飽和度画像上での血管の色を「赤→橙→黄色→緑→水色→青」と変化させるために、図24のカラーテーブル300では、信号比B1/G2が小さい場合(高酸素飽和度)には、色差信号Crの信号値が正、色差信号Cbの信号値が負となるように定義される。そして、信号比B1/G2が中間値の場合(中酸素飽和度)には、色差信号Crの信号値と色差信号Cbの信号値の大小関係が逆転するように定義されている。そして、信号比B1/Gが大きくなる場合(低酸素飽和度)には、色差信号Crの信号値が負、色差信号Cbの信号値が正となるように定義されている。
また、酸素飽和度を算出せずに、信号比B1/G2、R2/G2に基づいて酸素飽和度画像を作成してもよい(輝度信号Yには、上記実施形態と同様に、G2を割り当てる。)。この場合には、図25A及び図25Bに示すように、信号比B1/G2、R2/G2と色差信号Cr、Cbとを対応付けたカラーテーブル302、303が用いられる。カラーテーブル302は、信号比R2/G2の信号値が予め定めた一定値以上の場合に用いられ、カラーテーブル303は、信号比R2/G2の信号値が前記一定値を下回る場合に用いられる。
生体組織内における光散乱特性や、酸化ヘモグロビン及び還元ヘモグロビンの吸光特性を鑑みると、信号比R2/G2が一定値以上になるような場合(血液量が大きい場合)には、信号比B1/G2の信号値が変化する範囲は、信号比R2/G2が一定値を下回る場合(血液量が小さい場合)と比較して、広くなっている。これに伴い、カラーテーブル302における信号比B1/G2の範囲Ra(最小値La〜最大値Ma)は、カラーテーブル303における信号比B1/G2の範囲Rb(最小値Lb〜最大値Mb)よりも広くなっている。なお、カラーテーブル302,303を用いた場合における血管の色の変化は、カラーテーブル300を用いた場合と同様である。
なお、上記においては、酸素飽和度の画像化を行っているが、これに代えて又は加えて、「血液量(酸化ヘモグロビンと還元ヘモグロビンの和)×酸素飽和度(%)」から求まる酸化ヘモグロビンインデックスの画像化や、「血液量×(100−酸素飽和度)(%)」から求まる還元ヘモグロビンインデックスの画像化を行ってもよい。
10,100,120,200 内視鏡システム
11 光源装置
12 内視鏡装置
13 プロセッサ装置
14 表示装置
32 内視鏡スコープ
33 照明部
34 撮像部
50 蛍光体
60 撮像素子

Claims (9)

  1. 検体を照明する照明部と、
    前記照明部で照明された検体からの反射光を受光して撮像することにより、血中ヘモグロビンの酸素飽和度に応じて吸光係数が変化する青色帯域の第1の波長範囲を含む第1の反射光に対応する第1の画像信号、赤色帯域の第2の波長範囲を含む第2の反射光に対応する第2の画像信号、及び前記第1の画像信号と前記第2の画像信号の規格化に用いられ、前記第1及び第2の波長範囲と異なる緑色帯域の第3の波長範囲を含む第3の反射光に対応する第3の画像信号を取得する画像信号取得部と、
    前記第1ないし第3の画像信号に基づき、前記酸素飽和度を画像化した酸素飽和度画像を作成する画像作成部と、
    前記酸素飽和度画像を表示する表示部とを備え、
    前記画像信号取得部は、青色狭帯域光で照明された検体をカラー撮像素子で撮像することにより前記第1の画像信号を取得し、白色光で照明された検体を前記カラー撮像素子で撮像することにより、前記第2及び第3の画像信号を取得することを特徴とする内視鏡システム。
  2. 前記第1の画像信号を前記第3の画像信号で規格化して第1規格化信号を取得するとともに、前記第2の画像信号を前記第3の画像信号で規格化して第2規格化信号を取得する規格化信号取得部を備え、
    前記画像作成部は、前記第1及び第2規格化信号と第1色情報とを対応付けた相関関係を用いて、前記酸素飽和度画像を作成する、
    ことを特徴とする請求項1記載の内視鏡システム。
  3. 前記画像作成部は、
    前記第1ないし第3の画像信号に基づき、血液量に依存しない酸素飽和度を求める酸素飽和度算出部と、
    前記酸素飽和度算出部で求めた酸素飽和度に基づいて、前記酸素飽和度画像を作成する酸素飽和度画像作成部と、
    を有することを特徴とする請求項1記載の内視鏡システム。
  4. 前記白色光は、特定波長の励起光を波長変換部材に当てることによって生成される疑似白色光であることを特徴とする請求項記載の内視鏡システム。
  5. 前記第1又は第2の波長範囲は、460〜700nmの範囲内に含まれていることを特徴とする請求項1ないしいずれか1項記載の内視鏡システム。
  6. 前記第1の波長範囲は460〜480nmであり、前記第2の波長範囲は590〜700nmであり、前記第3の波長範囲は540〜580nmであることを特徴とする請求項1ないしいずれか1項記載の内視鏡システム。
  7. 検体を照明する照明部と、
    前記照明部で照明された検体からの反射光を受光して撮像することにより、血中ヘモグロビンの酸素飽和度に応じて吸光係数が変化する青色帯域の第1の波長範囲を含む第1の反射光に対応する第1の画像信号、赤色帯域の第2の波長範囲を含む第2の反射光に対応する第2の画像信号、及び前記第1の画像信号と前記第2の画像信号の規格化に用いられ、前記第1及び第2の波長範囲と異なる緑色帯域の第3の波長範囲を含む第3の反射光に対応する第3の画像信号を取得する画像信号取得部と、
    前記第1の画像信号を前記第3の画像信号で規格化して第1規格化信号を取得し、前記第2の画像信号を第3の画像信号で規格化して第2規格化信号を取得する規格化信号取得部と、
    前記第1規格化信号と第1色情報とを対応付けた第1相関関係を用いて、前記酸素飽和度を画像化した酸素飽和度画像を作成することに加えて、前記第2規格化信号と第2色情報とを対応付けた第2相関関係を用いて、血液量を画像化した血液量画像を作成する画像作成部と、
    前記酸素飽和度画像と前記血液量画像とを表示する表示部とを備え、
    前記画像信号取得部は、青色狭帯域光で照明された検体をカラー撮像素子で撮像することにより前記第1の画像信号を取得し、白色光で照明された検体を前記カラー撮像素子で撮像することにより、前記第2及び第3の画像信号を取得することを特徴とする内視鏡システム。
  8. 照明部で照明された検体からの反射光を受光して撮像することにより、血中ヘモグロビンの酸素飽和度に応じて吸光係数が変化する青色帯域の第1の波長範囲を含む第1の反射光に対応する第1の画像信号、赤色帯域の第2の波長範囲を含む第2の反射光に対応する第2の画像信号、及び前記第1の画像信号と前記第2の画像信号の規格化に用いられ、前記第1及び第2の波長範囲と異なる緑色帯域の第3の波長範囲を含む第3の反射光に対応する第3の画像信号を取得する内視鏡装置であって、前記第1の画像信号は、青色狭帯域光で照明された検体をカラー撮像素子で撮像することにより得られ、前記第2及び第3の画像信号は、白色光で照明された検体を前記カラー撮像素子で撮像することにより得られる内視鏡装置とともに用いられるプロセッサ装置において、
    前記内視鏡装置から前記第1ないし第3の画像信号を受信する受信部と、
    前記第1ないし第3の画像信号に基づき、前記酸素飽和度を画像化した酸素飽和度画像を作成する画像作成部と、
    を備えることを特徴とするプロセッサ装置。
  9. 照明部が照明光を発光する照明ステップと、
    画像信号取得部が、検体からの反射光を受光して撮像することにより、血中ヘモグロビンの酸素飽和度に応じて吸光係数が変化する青色帯域の第1の波長範囲を含む第1の反射光に対応する第1の画像信号、赤色帯域の第2の波長範囲を含む第2の反射光に対応する第2の画像信号、及び前記第1の画像信号と前記第2の画像信号の規格化に用いられ、前記第1及び第2の波長範囲と異なる緑色帯域の第3の波長範囲を含む第3の反射光に対応する第3の画像信号を取得する画像信号取得ステップと、
    酸素飽和度画像作成部が、前記第1ないし第3の画像信号に基づき、前記酸素飽和度を画像化した酸素飽和度画像を作成する画像作成ステップと、
    表示部が、前記酸素飽和度画像を表示する表示ステップとを有し、
    前記画像信号取得ステップでは、前記画像信号取得部が、青色狭帯域光で照明された検体をカラー撮像素子で撮像することにより前記第1の画像信号を取得し、白色光で照明された検体を前記カラー撮像素子で撮像することにより、前記第2及び第3の画像信号を取得することを特徴とする内視鏡システムの作動方法。
JP2013532600A 2011-09-05 2012-09-04 内視鏡システム及びプロセッサ装置並びに内視鏡システムの作動方法 Active JP5914496B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2011193184 2011-09-05
JP2011193184 2011-09-05
PCT/JP2012/072462 WO2013035694A1 (ja) 2011-09-05 2012-09-04 内視鏡システム及びプロセッサ装置並びに画像表示方法

Publications (2)

Publication Number Publication Date
JPWO2013035694A1 JPWO2013035694A1 (ja) 2015-03-23
JP5914496B2 true JP5914496B2 (ja) 2016-05-11

Family

ID=47832139

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013532600A Active JP5914496B2 (ja) 2011-09-05 2012-09-04 内視鏡システム及びプロセッサ装置並びに内視鏡システムの作動方法

Country Status (5)

Country Link
US (1) US9801573B2 (ja)
EP (1) EP2754381B1 (ja)
JP (1) JP5914496B2 (ja)
CN (1) CN103732116B (ja)
WO (1) WO2013035694A1 (ja)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9456735B2 (en) * 2012-09-27 2016-10-04 Shahinian Karnig Hrayr Multi-angle rear-viewing endoscope and method of operation thereof
JP5972312B2 (ja) * 2014-03-24 2016-08-17 富士フイルム株式会社 医用画像処理装置及びその作動方法
WO2017188121A1 (ja) * 2016-04-27 2017-11-02 旭化成株式会社 推定装置
CN105919543A (zh) * 2016-05-31 2016-09-07 深圳市中科康医疗科技有限公司 一种多光谱内窥镜成像图像的获取方法及其***
GB201610594D0 (en) * 2016-06-17 2016-08-03 Ucl Business Plc Method and apparatus for estimating the value of a physical parameter in a biological tissue
CN109475283B (zh) * 2016-09-02 2020-06-12 Hoya株式会社 内窥镜***
US10806335B2 (en) * 2016-09-02 2020-10-20 Hoya Corporation Endoscope system
JPWO2018070474A1 (ja) * 2016-10-14 2019-06-24 Hoya株式会社 内視鏡システム
JP6392486B1 (ja) * 2017-02-01 2018-09-19 オリンパス株式会社 内視鏡システム
US11039795B2 (en) 2017-06-28 2021-06-22 Welch Allyn, Inc. Physiological monitoring and related methods
US10772508B2 (en) * 2017-11-22 2020-09-15 MediVisionTech Co., Ltd. Method for determining upper gastrointestinal bleeding course
US10772509B2 (en) * 2017-11-22 2020-09-15 MediVisionTech Co., Ltd. Method for determining emptying of upper gastrointestinal tract
JP6891304B2 (ja) * 2018-02-09 2021-06-18 富士フイルム株式会社 内視鏡システム
CN111803085A (zh) * 2020-08-06 2020-10-23 深圳市德光浦科技有限公司 一种基于颜色特性的无创血红蛋白浓度水平测量装置
AU2021336270A1 (en) * 2020-09-01 2023-02-23 Boston Scientific Scimed, Inc. Image processing systems and methods of using the same

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5001556A (en) * 1987-09-30 1991-03-19 Olympus Optical Co., Ltd. Endoscope apparatus for processing a picture image of an object based on a selected wavelength range
US4914512A (en) * 1988-01-19 1990-04-03 Kabushiki Kaisha Toshiba Electronic endoscope apparatus capable of displaying hemoglobin concentration on color image
JP2648494B2 (ja) 1988-05-02 1997-08-27 オリンパス光学工業株式会社 内視鏡装置
JP2761238B2 (ja) * 1989-04-20 1998-06-04 オリンパス光学工業株式会社 内視鏡装置
JP2810718B2 (ja) * 1989-05-09 1998-10-15 オリンパス光学工業株式会社 内視鏡装置
JP3050569B2 (ja) * 1990-05-10 2000-06-12 オリンパス光学工業株式会社 内視鏡用画像処理装置
US5512940A (en) * 1993-03-19 1996-04-30 Olympus Optical Co., Ltd. Image processing apparatus, endoscope image sensing and processing apparatus, and image processing method for performing different displays depending upon subject quantity
JP2978053B2 (ja) * 1994-05-06 1999-11-15 オリンパス光学工業株式会社 生体撮像装置、及び血液情報演算処理回路
JP2003135393A (ja) * 2001-10-30 2003-05-13 Olympus Optical Co Ltd 内視鏡システムの自動調整方法
US6899675B2 (en) * 2002-01-15 2005-05-31 Xillix Technologies Corp. Fluorescence endoscopy video systems with no moving parts in the camera
AU2003222052B2 (en) * 2002-03-22 2008-07-10 Ethicon Endo-Surgery, Inc. An integrated visualization system
JP4391998B2 (ja) * 2006-03-07 2009-12-24 オリンパス株式会社 内視鏡装置
CN100463644C (zh) * 2007-03-23 2009-02-25 天津大学 近红外漫射光无创早期***检测***
US8761855B2 (en) * 2008-07-15 2014-06-24 Nellcor Puritan Bennett Ireland Systems and methods for determining oxygen saturation
US8668636B2 (en) * 2009-09-30 2014-03-11 Fujifilm Corporation Electronic endoscope system, processor for electronic endoscope, and method of displaying vascular information
WO2011079148A1 (en) * 2009-12-22 2011-06-30 Integrated Endoscopy, Inc. Systems and methods for endoscope imaging with monochromatic detector

Also Published As

Publication number Publication date
WO2013035694A1 (ja) 2013-03-14
EP2754381A1 (en) 2014-07-16
CN103732116A (zh) 2014-04-16
EP2754381B1 (en) 2023-08-09
EP2754381A4 (en) 2015-05-13
CN103732116B (zh) 2016-04-13
JPWO2013035694A1 (ja) 2015-03-23
US9801573B2 (en) 2017-10-31
US20140155717A1 (en) 2014-06-05

Similar Documents

Publication Publication Date Title
JP5914496B2 (ja) 内視鏡システム及びプロセッサ装置並びに内視鏡システムの作動方法
JP5222934B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法
US11062442B2 (en) Vascular information acquisition device, endoscope system, and vascular information acquisition method
JP5303012B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置及び内視鏡システムの作動方法
JP5309120B2 (ja) 内視鏡装置
JP5302984B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置及び内視鏡システムの作動方法
JP5405445B2 (ja) 内視鏡装置
JP5887350B2 (ja) 内視鏡システム及びその作動方法
US8944996B2 (en) Electronic endoscope system with oxygen saturation enhancing image region
JP5611892B2 (ja) 内視鏡システム及び内視鏡システムの作動方法
JP5231511B2 (ja) 内視鏡診断装置
JP5702755B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法
EP2474265B1 (en) Endoscope diagnosis system
JP2012066066A (ja) 電子内視鏡システム及び血管情報取得方法
JP5611891B2 (ja) 内視鏡システム及び内視鏡システムの作動方法
JP5558331B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置及び内視鏡システムの作動方法

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150826

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151020

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160323

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160404

R150 Certificate of patent or registration of utility model

Ref document number: 5914496

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250