JPWO2015151929A1 - 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法 - Google Patents

内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法 Download PDF

Info

Publication number
JPWO2015151929A1
JPWO2015151929A1 JP2016511563A JP2016511563A JPWO2015151929A1 JP WO2015151929 A1 JPWO2015151929 A1 JP WO2015151929A1 JP 2016511563 A JP2016511563 A JP 2016511563A JP 2016511563 A JP2016511563 A JP 2016511563A JP WO2015151929 A1 JPWO2015151929 A1 JP WO2015151929A1
Authority
JP
Japan
Prior art keywords
illumination light
illumination
signal
imaging
pixel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016511563A
Other languages
English (en)
Other versions
JP6166841B2 (ja
Inventor
小柴 賢明
賢明 小柴
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of JPWO2015151929A1 publication Critical patent/JPWO2015151929A1/ja
Application granted granted Critical
Publication of JP6166841B2 publication Critical patent/JP6166841B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/145Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/1455Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
    • A61B5/14551Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters for measuring blood gases
    • A61B5/14552Details of sensors specially adapted therefor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/043Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for fluorescence imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/045Control thereof
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/05Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
    • A61B1/051Details of CCD assembly
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B23/00Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
    • G02B23/24Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
    • G02B23/2407Optical details
    • G02B23/2461Illumination
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B5/00Optical elements other than lenses
    • G02B5/20Filters
    • G02B5/201Filters in the form of arrays
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00Special procedures for taking photographs; Apparatus therefor
    • G03B15/02Illuminating scene
    • G03B15/03Combinations of cameras with lighting apparatus; Flash units
    • G03B15/05Combinations of cameras with electronic flash apparatus; Electronic flash units
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B33/00Colour photography, other than mere exposure or projection of a colour film
    • G03B33/02Colour photography, other than mere exposure or projection of a colour film by two-colour separation records, e.g. red-aspect and white complete records; using Land effect
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G03B37/005Photographing internal surfaces, e.g. of pipe
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/012Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor characterised by internal passages or accessories therefor
    • A61B1/018Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor characterised by internal passages or accessories therefor for receiving instruments
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/041Capsule endoscopes for imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/12Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with cooling or rinsing arrangements
    • A61B1/126Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with cooling or rinsing arrangements provided with means for cleaning in-use

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Surgery (AREA)
  • Optics & Photonics (AREA)
  • General Physics & Mathematics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biophysics (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Astronomy & Astrophysics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Endoscopes (AREA)
  • Instruments For Viewing The Inside Of Hollow Bodies (AREA)

Abstract

特殊観察モード時に得られる通常観察画像の輝度及びS/N比を向上させることを可能とする内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法を提供する。特殊観察モード時には、第1照明光を照射した後、撮像素子(39)の複数の画素行のうちの一部を一括してリセットする。照明光を第1照明光から第2照明光に切り替え、第2照明光を照射した後、消灯状態とする。この消灯期間中に、全画素行から順に信号読み出しを行う。画像処理部(44)は、リセットが行われずに第1及び第2照明光で露光された画素行から読み出された第1撮像信号に基づいて通常観察画像を生成する。また、画像処理部(44)は、リセットが行われて第2照明光のみで露光された画素行から読み出された第2撮像信号と、第1撮像信号とに基づいて酸素飽和度画像を生成する。

Description

本発明は、特殊観察モードを有する内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法に関する。
医療分野において、光源装置、内視鏡、プロセッサ装置を備える内視鏡システムを用いた診断等が広く行われている。内視鏡システムには、生体内の観察部位に分光特性が異なる第1照明光と第2照明光を照射して観察を行う特殊観察モードを有するものがある。
特殊観察モードでは、第1照明光と第2照明光とが、光源装置から交互に内視鏡に供給され、内視鏡の先端部から観察部位に照射される。例えば、第1照明光は白色光(通常光)であり、第2照明光は血中ヘモグロビンの吸光係数が高い光を含む特殊光である。第1照明光により照明された観察部位を撮像することにより通常観察画像が生成され、第2照明光により照明された観察部位を撮像することにより特殊観察画像が生成される。
従来の内視鏡システムでは、内視鏡の撮像素子としてCCD(Charge Coupled Device)型の撮像素子が用いられているが、近年ではCMOS(Complementary Metal-Oxide Semiconductor)型の撮像素子が用いられつつある(特許文献1参照)。これは、CMOS型の撮像素子は、CCD型の撮像素子に比べて低消費電力であることや、ADC(Analog-to-Digital Converter)回路等の周辺回路を撮像部と同一の基板上に形成することが可能であるためである。このCMOS型の撮像素子では、基本的に、撮像部に構成された複数の画素行を、一画素行ずつ順にリセットと信号読み出しを行うローリングシャッタ方式が採用されている。各画素行のリセットから信号読み出しまでの期間が露光期間である。
ローリングシャッタ方式では露光タイミングが一画素行ずつ順にずれるため、ローリングシャッタ方式で撮像素子を駆動しながら、照明光を第1照明光から第2照明光に間断なく切り替えると、いくつかの画素行の露光期間が照明光の切り替えを跨いでしまい、第1照明光と第2照明光とが混じり合った光を撮像してしまう。このため、特許文献1では、照明光を切り替える際に消灯期間を設け、この消灯期間中に信号読み出しを行うことが提案されている。
特開2010−68992号公報
上記のように、第1照明光と第2照明光とを切り替える際に単純に消灯期間を設けると、消灯期間を設けた分だけ撮像素子のフレームレートが低下する。このため、特許文献1では、第1及び第2照明光の各照射時間(露光時間)を短くし、かつ、撮像素子から信号読み出しを行う画素数を間引いて読み出し時間を短くすることにより、フレームレートの低下を防止している。
しかしながら、特許文献1に記載の内視鏡システムは、通常観察モードでは、第1照明光を常時照射してローリングシャッタ方式で撮像素子を駆動するが、特殊観察モードでは、フレームレートの低下させないように露光時間を短くするので、特殊観察モード時に得られる通常観察画像は、通常観察モード時に得られる通常観察画像に比べて、輝度及びS/N(Signal-to-Noise)比が低下するという問題がある。
本発明は、特殊観察モード時に得られる通常観察画像の輝度及びS/N比を向上させることを可能とする内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法を提供することを目的とする。
上記目的を達成するために、本発明の内視鏡システムは、照明部と、内視鏡と、制御部と、画像処理部とを備える。照明部は、分光特性が異なる第1及び第2照明光を検体に照射する。内視鏡は、照明部により照明された検体を、列方向に配列された複数の画素行により撮像するCMOS型の撮像素子を有する。制御部は、照明部から第1照明光を照射した後、複数の画素行のうちの一部を一括してリセットし、照明部から第2照明光を照射した後、照明部を消灯して、画素行の全てから信号読み出しを行う第1撮像方式を、照明部及び撮像素子に実行させる。画像処理部は、リセットが行われずに第1及び第2照明光で露光された画素行から読み出された第1撮像信号に基づいて通常観察画像を生成し、少なくともリセットが行われて第2照明光のみで露光された画素行から読み出された第2撮像信号に基づいて特殊観察画像を生成する。
を備える。
撮像素子は、ベイヤー配列のカラーフィルタアレイを有している。この場合、制御部は、複数の画素行のうちの半分に対してリセットを行うことが好ましい。
第1照明光または第2照明光は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる異吸光波長光を含んでいる。この場合、画像処理部は、特殊観察画像として、酸素飽和度の情報を含む酸素飽和度画像を生成することが好ましい。
画像処理部は、第1及び第2撮像信号に基づいて酸素飽和度を算出し、通常観察画像を酸素飽和度に基づいて画像処理することにより酸素飽和度画像を生成することが好ましい。
制御部は、照明部から第1照明光を照射した後、照明部を消灯して信号読み出しを行い、照明部から第2照明光を照射した後、照明部を消灯して信号読み出しを行う第2撮像方式を、照明部及び撮像素子に実行させることを可能とすることが好ましい。
制御部は、第2撮像方式の実行時には、第1照明光の照射後に信号読み出しを行った後、複数の画素行のいずれもリセットせずに第2照明光を照射することが好ましい。
制御部は、第2撮像方式の実行時には、間引き読み出しにより、複数の画素行のうちの一部から信号読み出しを行うことが好ましい。この場合、制御部は、第1照明光の照射後の信号読み出しと、第2照明光の照射後の信号読み出しとで、間引き読み出しを行う画素行を変更することが好ましい。
検体の明るさを検出する明るさ検出部を備える。この場合、制御部は、明るさが一定値より小さい場合に第1撮像方式を実行させ、明るさが一定値以上である場合に第2撮像方式を実行させることが好ましい。
本発明の内視鏡システムのプロセッサ装置は、制御部と、画像処理部とを備える。制御部は、照明部から第1照明光を照射した後、複数の画素行のうちの一部を一括してリセットし、照明部から第2照明光を照射した後、照明部を消灯して、画素行の全てから信号読み出しを行う第1撮像方式を、照明部及び撮像素子に実行させる。画像処理部は、リセットが行われずに第1及び第2照明光で露光された画素行から読み出された第1撮像信号に基づいて通常観察画像を生成し、少なくともリセットが行われて第2照明光のみで露光された画素行から読み出された第2撮像信号に基づいて特殊観察画像を生成する。
本発明の内視鏡システムの作動方法は、第1ステップと、第2ステップとを備える。第1ステップでは、制御部が、照明部から第1照明光を照射した後、複数の画素行のうちの一部を一括してリセットし、照明部から第2照明光を照射した後、照明部を消灯して、画素行の全てから信号読み出しを行う第1撮像方式を、照明部及び撮像素子に実行させる。第2ステップでは、リセットが行われずに第1及び第2照明光で露光された画素行から読み出された第1撮像信号に基づいて通常観察画像を生成し、少なくともリセットが行われて第2照明光のみで露光された画素行から読み出された第2撮像信号に基づいて特殊観察画像を生成する。
本発明によれば、特殊観察モード時に、撮像素子を第1照明光で露光した後、複数の画素行のうちの一部を一括してリセットし、撮像素子を第2照明光で露光した後、照明部を消灯して、画素行の全てから信号読み出しを行い、リセットが行われずに第1及び第2照明光で露光された画素行から読み出された第1撮像信号に基づいて通常観察画像を生成し、少なくともリセットが行われて第2照明光のみで露光された画素行から読み出された第2撮像信号に基づいて特殊観察画像を生成するので、特殊観察モード時に得られる通常観察画像の輝度及びS/N比を向上させることができる。
内視鏡システムの外観図である。 内視鏡の先端部の正面図である。 内視鏡システムの電気的構成を示すブロック図である。 第1及び第2照明光の強度スペクトルを示すグラフである。 撮像素子の電気的構成を示す図である。 カラムADC回路の動作を説明する図である。 画素アレイの構成を示す図である。 カラーフィルタアレイの構成を示す図である。 カラーフィルタの分光透過特性を示す図である。 通常観察モード時の駆動タイミングを説明する図である。 特殊観察モード時の駆動タイミングを説明する図である。 画像処理部の構成を示すブロック図である。 信号比と酸素飽和度の相関関係を示すグラフである。 酸化ヘモグロビン及び還元ヘモグロビンの吸光係数を示すグラフである。 内視鏡システムの作用を示すフローチャートである。 第2撮像方式による駆動タイミングを説明する図である。 第1及び第2撮像方式の切り替え方法を説明するフローチャートである。 カプセル内視鏡の構成を示す図である。
図1において、内視鏡システム10は、生体内の観察部位(検体)を撮像する内視鏡11と、撮像により得られた撮像信号に基づいて観察部位の表示画像を生成するプロセッサ装置12と、観察部位を照射するための照明光を内視鏡11に供給する光源装置13と、表示画像を表示するモニタ14とを備えている。プロセッサ装置12には、モニタ14の他、キーボードやマウス等の入力部15が接続されている。
内視鏡11は、生体の消化管内に挿入される挿入部16と、挿入部16の基端部分に設けられた操作部17と、内視鏡11をプロセッサ装置12及び光源装置13に接続するためのユニバーサルコード18とを備えている。挿入部16は、先端部19、湾曲部20、可撓管部21で構成されており、先端側からこの順番に連結されている。
操作部17には、アングルノブ22a、モード切替スイッチ22bなどが設けられている。アングルノブ22aは、湾曲部20を湾曲させる操作に用いられる。このアングルノブ22aの操作により、先端部19を所望の方向に向けることができる。
モード切替SW22bは、通常観察モードと、特殊観察モードの2種類の観察モード間の切り替え操作に用いられる。通常観察モードは、白色光により観察対象をフルカラーで撮像して得られる通常観察画像をモニタ14に表示するモードである。特殊観察モードは、観察対象の血中ヘモグロビンの酸素飽和度を求め、酸素飽和度に基づいて通常観察画像を画像処理して得られる酸素飽和度画像をモニタ14に表示するモードである。
図2において、先端部19の先端面には、観察部位に照明光を照射する照明窓23と、観察部位の像を取り込むための観察窓24と、観察窓24を洗浄するために送気・送水を行う送気・送水ノズル25と、鉗子や電気メス等の処置具を突出させて各種処置を行うための鉗子出口26とが設けられている。観察窓24の奥には、撮像素子39(図3参照)が内蔵されている。
湾曲部20は、連結された複数の湾曲駒で構成されており、操作部17のアングルノブ22aの操作に応じて、上下左右方向に湾曲する。湾曲部20を湾曲させることにより、先端部19が所望の方向に向けられる。可撓管部21は、可撓性を有しており、食道や腸等の曲がりくねった管道に挿入可能である。挿入部16には、撮像素子39を駆動するための制御信号や、撮像素子39が出力する撮像信号を伝達する信号ケーブルや、光源装置13から供給される照明光を照明窓23に導光するライトガイド35(図3参照)が挿通されている。
操作部17には、アングルノブ22a、モード切替スイッチ22bの他に、処置具を挿入するための鉗子口27、送気・送水ノズル25から送気・送水を行う際に操作される送気・送水ボタン28、静止画像を撮影するためのフリーズボタン(図示せず)等が設けられている。
ユニバーサルコード18には、挿入部16から延設される通信ケーブルやライトガイド35が挿通されており、プロセッサ装置12及び光源装置13側の一端には、コネクタ29が取り付けられている。コネクタ29は、通信用コネクタ29aと光源用コネクタ29bからなる複合タイプのコネクタである。通信用コネクタ29aと光源用コネクタ29bとはそれぞれ、プロセッサ装置12と光源装置13とに着脱自在に接続される。通信用コネクタ29aには通信ケーブルの一端が配置されている。光源用コネクタ29bにはライトガイド35の入射端35a(図3参照)が配置されている。
図3において、光源装置13は、第1及び第2レーザダイオード(LD:Laser Diode)30a,30bと、光源制御部31と、第1及び第2光ファイバ32a,32bと、光カプラ33とを有している。第1LD30aは、中心波長445nmの第1青色レーザ光を発する。第2LD30bは、中心波長473nmの第2青色レーザ光を発する。第1及び第2青色レーザ光の半値幅は、それぞれ±10nm程度である。第1及び第2LD30a,30bには、ブロードエリア型のInGaN系レーザダイオードや、InGaNAs系レーザダイオード、GaNAs系レーザダイオードなどが用いられる。
光源制御部31は、第1及び第2LD30a,30bの点灯・消灯を個別に制御する。光源制御部31は、通常観察モードの場合には、第1LD30aを点灯させる。特殊観察モードの場合には、第1LD30aと第2LD30bとを順に点灯させる。
第1光ファイバ32aには、第1LD30aから発せられた第1青色レーザ光が入射する。第2光ファイバ32bには、第2LD30bから発せられた第2青色レーザ光が入射する。第1及び第2光ファイバ32a,32bは、光カプラ33に接続されている。光カプラ33は、第1及び第2光ファイバ32a,32bの光路を統合し、第1及び第2青色レーザ光をそれぞれ内視鏡11のライトガイド35の入射端35aに入射させる。
内視鏡11は、ライトガイド35と、蛍光体36と、照明光学系37と、撮像光学系38と、撮像素子39と、信号送信部40とを有している。ライトガイド35は、各照明窓23に対して1本ずつ設けられている。このライトガイド35としては、マルチモードファイバを使用することができる。例えば、コア径105μm、クラッド径125μm、外皮となる保護層を含めた径が0.3〜0.5mmの細径なファイバケーブルを使用することができる。
光源用コネクタ29bが光源装置13に接続されたときに、光源用コネクタ29bに配置された各ライトガイド35の入射端35aが光カプラ33の出射端に対向する。先端部19に位置する各ライトガイド35の出射端に対向して蛍光体36が配置されている。蛍光体36には、ライトガイド35を介して第1青色レーザ光または第2青色レーザ光が入射する。
蛍光体36は、複数種類の蛍光体物質(例えばYAG系蛍光体、あるいはBAM(BaMgAl1017)等の蛍光体)を、バインダに分散させて直方体状としたものである。蛍光体36は、ライトガイド35から入射したレーザ光(第1青色レーザ光または第2青色レーザ光)の一部を吸収して励起され、緑色から赤色の波長帯域を有する蛍光を発する。また、蛍光体36に入射したレーザ光の一部は、蛍光体36に吸収されずにそのまま蛍光体36を通過する。したがって、蛍光体36からは、蛍光と、レーザ光の一部とが射出される。
具体的には、第1LD30aが点灯し、蛍光体36に第1青色レーザ光が入射した場合には、蛍光体36からは、図4に示すスペクトルを有する第1照明光が射出される。この第1照明光は、第1青色レーザ光と、第1青色レーザ光により蛍光体36から励起発光された第1蛍光とを含んでいる。また、第2LD30bが点灯し、蛍光体36に第2青色レーザ光が入射した場合には、蛍光体36からは、図4に示すスペクトルを有する第2照明光が射出される。この第2照明光は、第2青色レーザ光と、第2青色レーザ光により蛍光体36から励起発光された第2蛍光とを含んでおり、第1照明光とは分光特性が異なる。第1蛍光と第2蛍光とのスペクトル形状は、ほぼ同一である。すなわち、波長λにおける第1蛍光の強度I1(λ)と第2蛍光の強度I2(λ)との比は、ほぼ一定である。
蛍光体36からの射出される第1及び第2照明光は、照明光学系37により集光され、照明窓23を介して生体内の観察部位に照射される。この観察部位からの反射光は、観察窓24を通して撮像光学系38に入射し、撮像光学系38によって撮像素子39の撮像面39aに結像される。本実施形態では、光源装置13、ライトガイド35、蛍光体36、及び照明光学系37が特許請求の範囲に記載の照明部に対応している。
撮像素子39は、CMOS型であり、プロセッサ装置12からから供給される撮像制御信号に基づいて、観察部位からの反射光を撮像して撮像信号を出力する。
信号送信部40は、撮像素子39により得られる撮像信号を、それぞれ周知の低電圧作動シグナリング伝送方式でプロセッサ装置12に送信する。また、内視鏡11に設けられた前述のモード切替スイッチ22bが操作された際に、モード切替スイッチ22bからモード切替操作信号が、プロセッサ装置12に送信される。
プロセッサ装置12は、制御部41と、信号受信部42と、デジタル信号処理部(DSP:Digital Signal Processor)43と、画像処理部44と、表示制御部45とを有する。制御部41は、プロセッサ装置12内の各部の制御と、内視鏡11の撮像素子39及び光源装置13の光源制御部31の制御を行う。
信号受信部42は、内視鏡11の信号送信部40から送信される撮像信号を受信する。DSP43は、信号受信部42により受信された撮像信号に対して、欠陥補正処理、ゲイン補正処理、ホワイトバランス処理、ガンマ変換、同時化処理等の信号処理を施す。
画像処理部44は、通常観察モード時には、第1照明光が照射された観察部位からの反射光を撮像素子39が撮像することにより得られ、DSP43により信号処理が施された撮像信号に対して、色変換処理、色彩強調処理、構造強調処理等を行うことにより通常観察画像を生成する。
また、画像処理部44は、特殊観察モード時には、第1及び第2照明光が照射された観察部位からの反射光を撮像素子39が撮像することにより得られ、DSP43により信号処理が施された撮像信号に基づいて酸素飽和度を算出するとともに通常観察画像を算出し、この通常観察画像を酸素飽和度に基づいて画像処理することにより、酸素飽和度の情報を含む酸素飽和度画像(特殊観察画像)を生成する。
表示制御部45は、画像処理部44により生成された画像を、表示用形式の信号に変換してモニタ14に表示させる。
図5において、撮像素子39は、画素アレイ部50と、行走査回路51と、行方向に複数のADC(Analog-to-Digital Converter)が配列されたカラムADC回路52と、ラインメモリ53と、列走査回路54と、タイミングジェネレータ(TG:Timing Generator)55とを有する。画素アレイ部50は、複数の画素50aが行方向(X方向)及び列方向(Y方向)にマトリクス状に2次元配列されたものであり、前述の撮像面39aに設けられている。画素アレイ部50には、行方向に沿って行選択線L1及び行リセット線L2が配線されており、列方向に沿って列信号線L3が配線されている。各画素50aは、行選択線L1、行リセット線L2、及び列信号線L3に接続されている。TG55は、プロセッサ装置12の制御部41から入力される制御信号に基づいて各部を制御する。
画素50aは、フォトダイオードD1と、アンプトランジスタM1と、画素選択トランジスタM2と、リセットトランジスタM3とを有する。フォトダイオードD1は、入射光を光電変換して入射光量に応じた信号電荷を生成し、これを蓄積する。アンプトランジスタM1は、フォトダイオードD1に蓄積された信号電荷を電圧値(画素信号PS)に変換する。画素選択トランジスタM2は、行選択線L1により制御され、アンプトランジスタM1により生成された画素信号PSを、列信号線L3に出力させる。リセットトランジスタM3は、行リセット線L2により制御され、フォトダイオードD1に蓄積された信号電荷を電源線に破棄(リセット)する。
行走査回路51は、TG55から入力されるタイミング信号に基づいて、行選択信号S1及びリセット信号S2を発生する。行走査回路51は、信号読み出し動作時に、行選択線L1に行選択信号S1を与えることにより、該行選択線L1に接続された画素50aの画素信号PSを列信号線L3に出力させる。また、行走査回路51は、リセット動作時に、行リセット線L2にリセット信号S2を与えることにより、該行リセット線L2に接続された画素50aをリセットする。
カラムADC回路52は、コンパレータ52aと、カウンタ52bと、参照信号生成部52cとを有している。コンパレータ52a及びカウンタ52bは、各列信号線L3に接続されている。参照信号生成部52cは、TG55から入力されるクロック信号に基づいて、図6(a)に示すように、時間とともにリニアに増加する参照信号VREFを生成する。各コンパレータ52aには、行選択線L1から画素信号PSが入力され、参照信号生成部52cから参照信号VREFが入力される。
コンパレータ52aは、画素信号PSと参照信号VREFとを比較し、図6(b)に示すように、両者の電圧値の大小関係を表す信号CSを出力する。この出力信号CSは、カウンタ52bに入力される。カウンタ52bは、TG55から入力されるクロック信号に基づき、図6(c)に示すように、参照信号VREFの増加開始とともにカウント動作を開始する。そして、カウンタ52bは、画素信号PSと参照信号VREFとの電圧値が一致し、出力信号CSがロウレベルからハイレベルに変化した際にカウント動作を停止する。このカウンタ52bがカウント動作を停止した際のカウント値が、画素信号PSに対応する。このカウント値はデジタル信号であり、デジタル化された画素信号PSDとしてカラムADC回路52からラインメモリ53に出力される。
ラインメモリ53は、カラムADC回路52によりデジタル化された一行分の画素信号PSDを一括して保持する。列走査回路54は、TG55から入力されるタイミング信号に基づいて、ラインメモリ53を走査することにより、画素信号PSDを出力端子Voutから順に出力させる。出力端子Voutから出力される1フレーム分の画素信号PSDが前述の撮像信号である。
TG55は、プロセッサ装置12の制御部41から入力される撮像制御信号に基づいてタイミング信号を発生する。撮像信号の読み出し時には、行走査回路51により行選択線L1が順に選択されながら行選択信号S1が与えられる。これにより、図7に示す先頭画素行「0」から最終画素行「N」まで、1画素行ずつ順に信号読み出しが行われる。ここで、画素行とは、行方向に並んだ一行分の画素50aを指している。
また、リセット方式として、「順次リセット方式」、「一括リセット方式」、及び「部分リセット方式」が実行可能である。順次リセット方式では、行走査回路51により行リセット線L2が順に選択されながらリセット信号S2が与えられる。これにより、順次リセット方式では、先頭画素行「0」から最終画素行「N」まで、1画素行ずつ順にリセットが行われる。
一括リセット方式では、行走査回路51により全ての行リセット線L2が選択され、全ての行リセット線L2に一括してリセット信号S2が与えられる。これにより、画素アレイ部50の全画素行が一括して同時にリセットされる。
部分リセット方式では、行走査回路51により、全画素行のうちの一部である2,3,6,7,10,11,・・・,N−1,Nの画素行の行リセット線L2に一括してリセット信号S2が与えられる。これにより、画素アレイ部50の半分の画素行が一括して同時にリセットされる。以下、0,1,4,5,8,9,・・・,N−3,N−2の画素行を第1画素行群という。また、2,3,6,7,10,11,・・・,N−1,Nの画素行を第2画素行群という。
図8に示すように、画素アレイ部50の光入射側には、カラーフィルタアレイ60が設けられている。カラーフィルタアレイ60は、緑色(G)フィルタ60a、青色(B)フィルタ60b、及び赤色(R)フィルタ60cを有している。これらのフィルタのうちいずれか1つが各画素50a上に配置されている。カラーフィルタアレイ60の色配列は、ベイヤー配列であり、Gフィルタ60aが市松状に1画素おきに配置され、残りの画素上に、Bフィルタ60bとRフィルタ60cとがそれぞれ正方格子状となるように配置されている。
図9に示すように、Gフィルタ60aは、約450〜630nmの波長域に対して高い透過率を有している。Bフィルタ60bは、約380〜560nmの波長域に対して高い透過率を有している。Rフィルタ60cは、約580〜760nmの波長域に対して高い透過率を有している。以下、Gフィルタ60aが配置された画素50aをG画素と称し、Bフィルタ60bが配置された画素50aをB画素と称し、Rフィルタ60cが配置された画素50aをR画素と称する。このうち、後述する異吸光波長光に対して最も感度が高い画素群は、B画素である。
第1照明光の照射時には、B画素には第1青色レーザ光と第1蛍光の短波長側成分が入射し、G画素には第1蛍光の主波長成分が入射し、R画素には第1蛍光の長波長側成分が入射する。同様に、第2照明光の照射時には、B画素には第2青色レーザ光と第2蛍光の短波長側成分が入射し、G画素には第2蛍光の主波長成分が入射し、R画素には第2蛍光の長波長側成分が入射する。なお、第1及び第2青色レーザ光の発光強度は、それぞれ第1及び第2蛍光よりも発光強度が大きいので、B画素に入射する光の大部分は第1青色レーザ光または第2青色レーザ光の成分である。
このように撮像素子39は、単板方式のカラーイメージセンサであるので、撮像信号は、それぞれG,B,Rの各画素信号に分けられる。
次に、観察モードに応じた制御部41の制御について説明する。図10に示すように、通常観察モード時には、制御部41は、光源制御部31を制御して、第1LD30aを点灯させることにより、内視鏡11の照明窓23から第1照明光を射出させる。そして、第1照明光が射出された状態で、撮像素子39を制御して、ローリングシャッタ方式で駆動させる。
具体的には、まず、順次リセット方式により、先頭画素行「0」から最終画素行「N」まで1画素行ずつ順にリセットを行う。この順次リセットの開始から露光時間ETが経過した後、順次読み出し方式より、先頭画素行「0」から最終画素行「N」まで1画素行ずつ順に信号読み出しを行う。この結果、撮像素子39から1フレーム分の撮像信号が出力される。このローリングシャッタ方式の駆動が、通常観察モードの間繰り返し実行され、1フレーム時間FT(例えば、1/60秒)毎に1フレーム分の撮像信号が得られる。
制御部41は、通常観察モード中にモード切替スイッチ22bが操作され、通常観察モードから特殊観察モードへの切り替えを指示するモード切替操作信号を受信すると、光源制御部31を制御して、第1及び第2LD30a,30bを順に点灯させることにより、図11に示すように、内視鏡11の照明窓23から第1及び第2照明光を1フレーム時間FP毎に順に射出させる。第2照明光の照射後には、第1及び第2LD30a,30bを消灯させる消灯期間を設ける。
具体的には、まず、内視鏡11の照明窓23から第1照明光を射出させた状態で、一括リセット方式により、全画素行を同時にリセットする。この一括リセットの実行から、前述の露光時間ETの半分の時間(ET/2)が経過した後、第1照明光の射出を停止させるとともに、部分リセット方式により、前述の第2画素行群をリセットし、照明光を第2照明光に切り替える。そして、第2照明光の照射開始から露光時間ETの半分の時間(ET/2)が経過した後、第2照明光の射出を停止させる。
この後、第1及び第2LD30a,30bを共に消灯状態とする。そして、この消灯期間中、順次読み出し方式により、先頭画素行「0」から最終画素行「N」まで1画素行ずつ順に信号読み出しを行う。この結果、1フレーム分の撮像信号が得られる。この全画素行のうち、第1画素行群は、リセットが行われていないので、第1及び第2照明光により露光が行われている。一方の第2画素行群は、リセットが行われているため、第2照明光のみにより露光が行われている。
以下、第1画素行群からの撮像信号を第1撮像信号といい、第2画素行群からの撮像信号を第2撮像信号という。また、第1撮像信号に含まれるG,B,Rの各画素信号をそれぞれ、G1画素信号、B1画素信号、R1画素信号という。第2撮像信号に含まれるG,B,Rの各画素信号をそれぞれ、G2画素信号、B2画素信号、R2画素信号という。
このように、本実施形態の特殊観察モードでは、第1及び第2照明光の照射後に1フレーム分の信号読み出しのみを行うので、読み出し時間は、従来のように各照明光の照射後に画素間引き読み出しを行うのと同等である。このため、本実施形態の特殊観察モードは、通常観察モードからフレームレートを低下させずに実行することができる。
以上のように特殊観察モードでは、第1及び第2撮像信号がDSP43に入力される。DSP43では、同時化処理及び補間処理を行い、1画素につき1組のB1,G1,R1画素信号と1組のB2,G2,R2画素信号とを生成する。
図12において、プロセッサ装置12の画像処理部44は、信号比算出部71と、相関関係記憶部72と、酸素飽和度算出部73と、通常観察画像生成部74と、ゲイン補正部75とを有している。
信号比算出部71には、DSP43から画像処理部44に入力される第1及び第2撮像信号のうち、G1画素信号、R1画素信号、B2画素信号、G2画素信号、R2画素信号が入力される。信号比算出部71は、画素毎に、G1画素信号からG2画素信号を減算した第1減算値(G1−G2)と、R1画素信号からR2画素信号を減算した第2減算値(R1−R2)とを算出する。そして、画素毎に、B2画素信号と第1減算値(G1−G2)との信号比B2/(G1−G2)と、第2減算値(R1−R2)と第1減算値(G1−G2)との信号比(R1−R2)/(G1−G2)とを算出する。ここで、第1減算値(G1−G2)及び第2減算値(R1−R2)は、第1照明光のみを照射した場合のG画素信号値及びR画素信号値に相当する。
相関関係記憶部72は、信号比B2/(G1−G2)及び信号比(R1−R2)/(G1−G2)と、酸素飽和度との相関関係を記憶している。この相関関係は、図13に示すように、二次元空間上に酸素飽和度の等値線を定義した2次元テーブルで記憶されている。信号比B2/(G1−G2)及び信号比(R1−R2)/(G1−G2)に対する等値線の位置及び形状は、光散乱の物理的なシミュレーションによって予め得られ、各等値線の間隔は、血液量(信号比(R1−R2)/(G1−G2))に応じて変化する。なお、信号比B2/(G1−G2)及び信号比(R1−R2)/(G1−G2)と、酸素飽和度との相関関係はlogスケールで記憶されている。
上記相関関係は、図14に示す酸化ヘモグロビンの吸光特性(一点鎖線76)及び還元ヘモグロビンの吸光特性(実線77)に密接に関連している。酸素飽和度は、第2青色レーザ光の中心波長473nmのように、酸化ヘモグロビンによる吸光係数と還元ヘモグロビンによる吸光係数との差が大きい波長の光(異吸光波長光)を用いることにより算出可能である。しかし、主として第2青色レーザ光に依存するB2画素信号は、酸素飽和度だけでなく、血液量にも大きく依存する。これに対して、第1照明光のみを照射した場合のR画素信号値に相当する第2減算値(R1−R2)は、主として血液量に依存する。
このため、B2画素信号と第2減算値(R1−R2)とを、それぞれ第1減算値(G1−G2)をリファレンスとして割った値(信号比B2/(G1−G2)及び信号比(R1−R2)/(G1−G2))を用いることにより、血液量に対する依存性を低減して、酸素飽和度を精度よく求めることができる。なお、酸素飽和度の算出に必須の信号は、B2画素信号であるので、B2画素信号のみから酸素飽和度を算出しても良い。
酸素飽和度算出部73は、相関関係記憶部72に記憶された相関関係を参照し、信号比算出部71で算出された信号比B2/(G1−G2)及び信号比(R1−R2)/(G1−G2)に対応する酸素飽和度を画素毎にそれぞれ算出する。酸素飽和度の算出値は、0%を下回ることや、100%を上回ることは殆どない。もし、算出値が0%を下回った場合には酸素飽和度を0%とし、100%を上回った場合には酸素飽和度を100%とすればよい。
通常観察画像生成部74は、第1撮像信号に含まれるB1,G1,R1画素信号を用いて通常観察画像を生成する。第1撮像信号は、第1及び第2照明光により露光が行われた撮像信号であるので、通常観察画像生成部74により、輝度及びS/N比が通常観察モードと同等の通常観察画像が得られる。
ゲイン補正部75は、通常観察画像の各画素を構成するB1,G1,R1画素信号のそれぞれに対して、酸素飽和度に応じたゲイン補正を施す。例えば、補正酸素飽和度が60%以上の画素では、B1,G1,R1画素信号のいずれにもゲインを「1」とする。これに対して、補正酸素飽和度が60%未満の画素では、B1画素信号に対してゲインを「1」未満とし、G1,R1画素信号に対してゲインを「1」以上とする。そして、ゲイン補正後のB1,G1,R1画素信号を用いて画像を生成する。このようにゲイン補正を行った通常観察画像が、酸素飽和度画像である。この酸素飽和度画像では、高酸素領域(酸素飽和度が60〜100%の領域)は、通常観察画像と同一の色であるが、低酸素領域(酸素飽和度が0〜60%の領域)は、青色に変色される。
次に、内視鏡システム10の作用を図15のフローチャートに沿って説明する。まず、操作者が生体内に内視鏡11を挿入し、通常観察モードで観察部位の観察が行われる(ステップS10)。この通常観察モードでは、図10に示すように、観察部位に第1照明光が照射された状態で、ローリングシャッタ方式で撮像素子39が駆動され、1フレーム時間毎に撮像素子39から撮像信号が読み出される。この撮像信号に基づいて画像処理部44により通常観察画像が生成され、モニタ14に表示される(ステップS11)。モニタ14の表示フレームレートは、撮像素子39のフレームレートと同一であり、モニタ14に表示される通常観察画像は、1フレーム時間毎に更新される。
操作者が通常観察モードでの観察により病変の可能性がある部位を発見し、モード切替SW22bを操作して、観察モードの切り替えが行われると(ステップS12でYES)、特殊観察モードに移行する(ステップS13)。特殊観察モードでは、図11に示すように、観察部位に、第1及び第2照明光が順に照射された後、消灯される。撮像素子39は、第1照明光の照射開始時に一括リセットが行われ、第1照明光から第2照明光に切り替えられる際に、第2画素行群のみを対象とした部分リセットが行われる。そして、消灯期間に全画素行を対象として順次に信号読み出しが行われ、前述の第1及び第2撮像信号が出力される。
この第1及び第2撮像信号は、1フレーム時間毎に得られる。第1及び第2撮像信号が得られるたびに、画像処理部44により、第1撮像信号に基づいて通常観察画像が生成されてモニタ14に表示され(ステップS14)、第1及び第2撮像信号に基づいて酸素飽和度画像が生成されてモニタ14に表示される(ステップS15)。通常観察画像及び酸素飽和度画像は、例えば、モニタ14の画面上に並べて同時に表示される。
この通常観察画像及び酸素飽和度画像の生成及び表示は、操作者によりモード切替SW22bが再度操作されるか、診断を終了する操作が行われるまで繰り返し行われる。モード切替SW22bが操作されると(ステップS16でYES)、通常観察モードに戻り(ステップS10)、同様の動作が実行される。一方、モード切替SW22bが操作されずに、診断を終了する操作が行われると(ステップS17でYES)、内視鏡システム10の動作が終了する。
なお、上記実施形態では、特殊観察モード時に、第1及び第2照明光を照射した後、先頭画素行「0」から最終画素行「N」まで1画素行ずつ順に信号読み出しを行っているが、第1画素行群の画素行を順に読み出した後、第2画素行群の画素行を順に読み出しても良い。逆に、第2画素行群の画素行を順に読み出した後、第1画素行群の画素行を順に読み出しても良い。
また、上記実施形態では、第1照明光を、第1青色レーザ光を有する光とし、第2照明光を、第2青色レーザ光(異吸光波長光)を有する光としているが、逆に、第1照明光を、第2青色レーザ光(異吸光波長光)を有する光とし、第2照明光を、第1青色レーザ光を有する光としても良い。信号比(B1−B2)/G2と、信号比R2/G2とに基づいて酸素飽和度を算出すれば良い。
また、上記実施形態では、酸素飽和度に基づいて通常観察画像を画像処理することにより酸素飽和度画像を生成しているが、酸素飽和度の情報を画像化したものを酸素飽和度画像としても良い。
また、上記実施形態では、図11に示すように、第1照明光の照射開始時に一括リセットを行っているが、この一括リセットを行わずに、第1照明光の照射開始前の消灯期間内に順次リセット方式でリセットを行っても良い。例えば、消灯期間において、信号が読み出された直後の画素行を順にリセットすれば良い。
また、上記実施形態では、特殊観察モード時には、図11に示す撮像方式(以下、第1撮像方式という)により光源装置13及び撮像素子39を駆動しているが、これとは別に、図16に示す従来の撮像方式(以下、第2撮像方式という)により光源装置13及び撮像素子39を駆動可能としても良い。
この第2撮像方式では、第1及び第2照明光を、消灯期間を介して交互に照射させ、各消灯期間に間引き読み出し方式で信号読み出しが行われる。また、各照明光の照射開始時に一括リセット方式により全画素行が一括して同時にリセットされる。信号読み出しは、例えば、画素アレイ部50から前述の第1画素行群のみを読み出すことにより画素間引きが行われる。第2撮像方式のフレームレートは、第1撮像方式と同一である。
第2撮像方式では、通常観察画像は、第1照明光の照射後に読み出された撮像信号に基づいて生成される。酸素飽和度画像は、第1照明光の照射後に読み出された撮像信号と、第2照明光の照射後に読み出された撮像信号とに基づいて生成される。酸素飽和度画像は、第2照明光の照射後に読み出された撮像信号のみで生成することも可能である。この第2撮像方式では、通常観察画像は、通常観察モード時の通常観察画像と同様に第1照明光により得られた撮像信号に基づいて生成されるので、DSP43で行われるホワイトバランス処理等を通常観察モード時と同一とすることができる。
また、第1撮像方式では通常観察画像の明るさ及びS/N比が向上する反面、第2撮像方式に比べて露光時間が長く、被写体ブレや手ブレ等が生じやすい。このため、検体の明るさに応じて第1撮像方式と第2撮像方式とを切り替えても良い。
具体的には、図17に示すように、通常観察モードから特殊観察モードに切り替えられた後、検体の明るさを検出する。この検体の明るさは、撮像信号に基づいてDSP43により算出される。例えば、1フレーム分の撮像信号から平均輝度値を算出することにより、検体の明るさが求められる。すなわち、DSP43が、明るさ検出部に相当する。この明るさ検出は、第1撮像方式による撮像信号、第2撮像方式による撮像信号のいずれを用いても良い。
検体の明るさが検出された後、明るさが一定値以上の場合には、第2撮像方式を選択し、明るさが一定値より小さい場合には第1撮像方式を選択する。なお、検体の明るさは、通常観察モード時に算出しておき、特殊観察モードに切り替えられた際に、通常観察モード時に算出された明るさに基づいて撮像方式を選択しても良い。
また、検体の明るさに代えて、撮像信号のS/N比が低く、DSP43等で一定以上のゲインが必要であるか否かを判断し、一定以上のゲインが必要となる場合に第1撮像方式を選択し、一定以上のゲインが必要出ない場合に第2撮像方式を選択するようにしても良い。
また、第2撮像方式においても、各照明光の照射開始時に一括リセットを行わずに、消灯期間内に順次リセット方式でリセットを行っても良い。
さらに、第2撮像方式において、第1照明光の照射後に信号読み出しを行った後、全画素行のいずれにもリセットを行わずに第2照明光の照射を行った後、信号読み出しを行っても良い。この場合には、第1照明光の照射後の信号読み出しと、第2照明光の照射後の信号読み出しとで、間引き読み出しを行う画素行を変更することが好ましい。
例えば、第1照明光の照射後の消灯期間に第1画素行群のみを読み出す間引き読み出しを行い、第2照明光の照射後の消灯期間に第1画素行群のみを読み出す間引き読み出しを行う。これにより、第1照明光で露光が行われた第1画素行群から第1撮像信号が読み出され、第1及び第2照明光で露光が行われた第2画素行群から第2撮像信号が読み出される。
この第2撮像信号に基づいて通常観察画像を生成することにより、上記実施形態と同様に、輝度及びS/N比が向上する。酸素飽和度画像は、第1及び第2撮像信号に基づいて生成すれば良い。なお、第1照明光を、異吸光波長光を有する光とした場合には、第1撮像信号のみに基づいて酸素飽和度画像を生成することも可能である。
上記実施形態では、原色型のカラーフィルタアレイ60を用いているが、これに代えて、補色型のカラーフィルタアレイを用いても良い。
上記実施形態では、第1及び第2LD30a,30bから射出される第1及び第2レーザ光を、蛍光体36に照射することにより第1及び第2照明光を生成しているが、特開2013−165776号公報に開示されているように、キセノンランプ等の白色光源と、波長分離フィルタとにより第1及び第2照明光を生成しても良い。さらに、LED(Light-Emitting Diode)(例えば、R,G,Bの光を発する3種のLED)と波長選択フィルタとを用いて第1及び第2照明光を生成することも可能である。
上記実施形態では、第1照明光として白色光を用い、第2照明光として血中ヘモグロビンの吸光係数が高い光を含む特殊光を用いることにより、特殊観察画像として酸素飽和度画像を生成しているが、第2照明光として血中ヘモグロビンの吸光係数が高い狭帯域光(例えば、中心波長405nmの紫色狭帯域光)を用いることにより、特殊観察画像として生体組織表層の血管が強調された血管強調観察画像を生成しても良い。
上記実施形態では、光源装置とプロセッサ装置とを別体構成としているが、光源装置とプロセッサ装置と1つの装置で構成しても良い。
本発明は、消化管内を通過しながら画像を撮影し、撮影画像を記録装置に転送するカプセル内視鏡に適用可能である。例えば、図17に示すように、カプセル内視鏡80は、照明部81と、レンズ82と、撮像素子83と、信号処理部84と、メモリ85と、送信部86と、制御部87と、電源88と、これらを収容するカプセルハウジング89とで構成されている。
照明部81は、LED及び波長選択フィルタを有し、前述の第1及び第2照明光を検体に照射する。撮像素子83は、CMOS型であり、第1及び第2照明光で照明された検体からの反射光を、レンズ82を介して撮像し、前述の第1及び第2撮像信号を出力する。信号処理部84は、第1及び第2撮像信号に対して、上記実施形態のDSP43及び画像処理部44が行う信号処理を行い、通常観察画像及び酸素飽和度画像を生成する。メモリ85は、各画像を記憶する。送信部86は、メモリ85に記憶された各画像を、外部の記録装置(図示せず)に無線送信する。制御部87は、各部を制御する。
なお、送信部86から第1及び第2撮像信号を外部装置(図示せず)に送信し、この外部装置で通常観察画像及び酸素飽和度画像の生成を行っても良い。
また、本発明は、照明光の観察部位の反射光をイメージガイドで導光するファイバスコープや、撮像素子と超音波トランスデューサが先端部に内蔵された超音波内視鏡を用いた内視鏡システムにも適用可能である。
10 内視鏡システム
11 内視鏡
12 プロセッサ装置
13 光源装置
30a 第1レーザダイオード
30b 第2レーザダイオード
35 ライトガイド
36 蛍光体
39 撮像素子
41 制御部
50 画素アレイ部
50a 画素

Claims (11)

  1. 分光特性が異なる第1及び第2照明光を検体に照射する照明部と、
    前記照明部により照明された前記検体を、列方向に配列された複数の画素行により撮像するCMOS型の撮像素子を有する内視鏡と、
    前記照明部から前記第1照明光を照射した後、前記複数の画素行のうちの一部を一括してリセットし、前記照明部から前記第2照明光を照射した後、前記照明部を消灯して、前記画素行の全てから信号読み出しを行う第1撮像方式を、前記照明部及び前記撮像素子に実行させる制御部と、
    前記リセットが行われずに前記第1及び第2照明光で露光された前記画素行から読み出された第1撮像信号に基づいて通常観察画像を生成し、少なくとも前記リセットが行われて前記第2照明光のみで露光された前記画素行から読み出された第2撮像信号に基づいて特殊観察画像を生成する画像処理部と、
    を備えることを特徴とする内視鏡システム。
  2. 前記撮像素子は、ベイヤー配列のカラーフィルタアレイを有しており、
    前記制御部は、前記複数の画素行のうちの半分に対して前記リセットを行うことを特徴とする請求項1に記載の内視鏡システム。
  3. 前記第1照明光または前記第2照明光は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる異吸光波長光を含んでおり、
    前記画像処理部は、前記特殊観察画像として、酸素飽和度の情報を含む酸素飽和度画像を生成することを特徴とする請求項1または2に記載の内視鏡システム。
  4. 前記画像処理部は、前記第1及び第2撮像信号に基づいて前記酸素飽和度を算出し、前記通常観察画像を前記酸素飽和度に基づいて画像処理することにより前記酸素飽和度画像を生成することを特徴とする請求項3に記載の内視鏡システム。
  5. 前記制御部は、前記照明部から前記第1照明光を照射した後、前記照明部を消灯して信号読み出しを行い、前記照明部から前記第2照明光を照射した後、前記照明部を消灯して信号読み出しを行う第2撮像方式を、前記照明部及び前記撮像素子に実行させることを可能とすることを特徴とする請求項1から4のうちいずれか1項に記載の内視鏡システム。
  6. 前記制御部は、前記第2撮像方式の実行時には、前記第1照明光の照射後に前記信号読み出しを行った後、前記複数の画素行のいずれもリセットせずに前記第2照明光を照射することを特徴とする請求項5に記載の内視鏡システム。
  7. 前記制御部は、前記第2撮像方式の実行時には、間引き読み出しにより、前記複数の画素行のうちの一部から前記信号読み出しを行うことを特徴とする請求項6に記載の内視鏡システム。
  8. 前記制御部は、前記第2撮像方式の実行時には、前記第1照明光の照射後の前記信号読み出しと、前記第2照明光の照射後の前記信号読み出しとで、前記間引き読み出しを行う前記画素行を変更することを特徴とする請求項7に記載の内視鏡システム。
  9. 前記検体の明るさを検出する明るさ検出部を備え、
    前記制御部は、前記明るさが一定値より小さい場合に前記第1撮像方式を実行させ、前記明るさが前記一定値以上である場合に前記第2撮像方式を実行させることを特徴とする請求項5から8のうちいずれか1項に記載の内視鏡システム。
  10. 分光特性が異なる第1及び第2照明光を検体に照射する照明部と、
    前記照明部により照明された前記検体を、列方向に配列された複数の画素行により撮像するCMOS型の撮像素子を有する内視鏡と、を備える内視鏡システムのプロセッサ装置において、
    前記照明部から前記第1照明光を照射した後、前記複数の画素行のうちの一部を一括してリセットし、前記照明部から前記第2照明光を照射した後、前記照明部を消灯して、前記画素行の全てから信号読み出しを行う第1撮像方式を、前記照明部及び前記撮像素子に実行させる制御部と、
    前記リセットが行われずに前記第1及び第2照明光で露光された前記画素行から読み出された第1撮像信号に基づいて通常観察画像を生成し、少なくとも前記リセットが行われて前記第2照明光のみで露光された前記画素行から読み出された第2撮像信号に基づいて特殊観察画像を生成する画像処理部と、
    を備えることを特徴とする内視鏡システムのプロセッサ装置。
  11. 分光特性が異なる第1及び第2照明光を検体に照射する照明部と、
    前記照明部により照明された前記検体を、列方向に配列された複数の画素行により撮像するCMOS型の撮像素子を有する内視鏡と、を備える内視鏡システムの作動方法において、
    制御部が、前記照明部から前記第1照明光を照射した後、前記複数の画素行のうちの一部を一括してリセットし、前記照明部から前記第2照明光を照射した後、前記照明部を消灯して、前記画素行の全てから信号読み出しを行う第1撮像方式を、前記照明部及び前記撮像素子に実行させる第1ステップと、
    画像処理部が、前記リセットが行われずに前記第1及び第2照明光で露光された前記画素行から読み出された第1撮像信号に基づいて通常観察画像を生成し、少なくとも前記リセットが行われて前記第2照明光のみで露光された前記画素行から読み出された第2撮像信号に基づいて特殊観察画像を生成する第2ステップと、
    を備えることを特徴とする内視鏡システムの作動方法。
JP2016511563A 2014-03-31 2015-03-24 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法 Active JP6166841B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2014074268 2014-03-31
JP2014074268 2014-03-31
PCT/JP2015/058898 WO2015151929A1 (ja) 2014-03-31 2015-03-24 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法

Publications (2)

Publication Number Publication Date
JPWO2015151929A1 true JPWO2015151929A1 (ja) 2017-04-13
JP6166841B2 JP6166841B2 (ja) 2017-07-19

Family

ID=54240256

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016511563A Active JP6166841B2 (ja) 2014-03-31 2015-03-24 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法

Country Status (4)

Country Link
US (1) US10561350B2 (ja)
EP (1) EP3127466B1 (ja)
JP (1) JP6166841B2 (ja)
WO (1) WO2015151929A1 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3673787A4 (en) * 2017-08-23 2020-08-19 FUJIFILM Corporation LIGHT SOURCE DEVICE AND ENDOSCOPIC SYSTEM
US10445956B2 (en) * 2017-09-05 2019-10-15 OpenPath Security Inc. Access control reader for secure handsfree access with mobile devices
JP7057381B2 (ja) * 2018-02-06 2022-04-19 富士フイルム株式会社 内視鏡システム
JP6925501B2 (ja) * 2018-03-02 2021-08-25 富士フイルム株式会社 画像処理装置及び内視鏡システム
CN109998456A (zh) * 2019-04-12 2019-07-12 安翰科技(武汉)股份有限公司 胶囊型内窥镜及其控制方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010068992A (ja) * 2008-09-18 2010-04-02 Fujifilm Corp 電子内視鏡システム
WO2012043771A1 (ja) * 2010-09-30 2012-04-05 オリンパスメディカルシステムズ株式会社 撮像装置
JP2013188244A (ja) * 2012-03-12 2013-09-26 Fujifilm Corp 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡動画表示方法

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8498695B2 (en) * 2006-12-22 2013-07-30 Novadaq Technologies Inc. Imaging system with a single color image sensor for simultaneous fluorescence and color video endoscopy
JP2009136447A (ja) * 2007-12-05 2009-06-25 Hoya Corp 光源制御システム、シャッタ制御システム。内視鏡プロセッサ、および内視鏡システム
JP5137546B2 (ja) * 2007-12-05 2013-02-06 Hoya株式会社 撮像素子制御ユニット、電子内視鏡、および内視鏡システム
JP5012823B2 (ja) * 2009-01-28 2012-08-29 ソニー株式会社 撮像装置および撮像方法
US8734333B2 (en) * 2009-03-18 2014-05-27 Fujifilm Corporation Endoscope system, endoscope video processor and method of driving endoscope system
JP5544231B2 (ja) * 2010-07-15 2014-07-09 富士フイルム株式会社 内視鏡光源装置及び内視鏡システム
JP5302984B2 (ja) * 2011-01-12 2013-10-02 富士フイルム株式会社 内視鏡システム、内視鏡システムのプロセッサ装置及び内視鏡システムの作動方法
JP5855358B2 (ja) * 2011-05-27 2016-02-09 オリンパス株式会社 内視鏡装置及び内視鏡装置の作動方法
JP5623348B2 (ja) * 2011-07-06 2014-11-12 富士フイルム株式会社 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法
JP5426620B2 (ja) * 2011-07-25 2014-02-26 富士フイルム株式会社 内視鏡システムおよび内視鏡システムの作動方法
CN103260499B (zh) * 2011-08-15 2016-01-20 奥林巴斯株式会社 摄像装置
US9119544B2 (en) * 2012-09-19 2015-09-01 Omnivision Technologies, Inc. Acquiring global shutter-type video images with CMOS pixel array by strobing light during vertical blanking period in otherwise dark environment
US9332193B2 (en) * 2011-11-14 2016-05-03 Omnivision Technologies, Inc. Synchronization of image acquisition in multiple image sensors with a synchronization clock signal
JP5735479B2 (ja) * 2012-12-14 2015-06-17 富士フイルム株式会社 内視鏡及装置びその作動方法
WO2016002257A1 (ja) * 2014-07-02 2016-01-07 オリンパス株式会社 撮像素子、撮像装置、内視鏡、内視鏡システムおよび撮像素子の駆動方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010068992A (ja) * 2008-09-18 2010-04-02 Fujifilm Corp 電子内視鏡システム
WO2012043771A1 (ja) * 2010-09-30 2012-04-05 オリンパスメディカルシステムズ株式会社 撮像装置
JP2013188244A (ja) * 2012-03-12 2013-09-26 Fujifilm Corp 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡動画表示方法

Also Published As

Publication number Publication date
EP3127466A4 (en) 2017-05-17
WO2015151929A1 (ja) 2015-10-08
JP6166841B2 (ja) 2017-07-19
US10561350B2 (en) 2020-02-18
EP3127466B1 (en) 2018-08-22
US20170014059A1 (en) 2017-01-19
EP3127466A1 (en) 2017-02-08

Similar Documents

Publication Publication Date Title
JP6224819B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法
JP6151850B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法
JP5623469B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡用制御プログラム
JP6166841B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法
JP5623470B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡用制御プログラム
JP2012130629A (ja) 内視鏡診断装置
JP2011092683A (ja) 電子内視鏡装置
JP6444450B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法
JP2012217673A (ja) 内視鏡診断装置
JP2012081048A (ja) 電子内視鏡システム、電子内視鏡、及び励起光照射方法
JP6560968B2 (ja) 内視鏡システム及びその作動方法
JP6277068B2 (ja) 内視鏡用光源装置及び内視鏡システム
JP5734060B2 (ja) 内視鏡システム及びその駆動方法
WO2015025595A1 (ja) 内視鏡システム及び作動方法
JP5525991B2 (ja) 電子内視鏡システム、電子内視鏡システムのプロセッサ装置、及び電子内視鏡システムの作動方法
JP2007037785A (ja) 内視鏡
JP6120758B2 (ja) 医用システム
JP6572065B2 (ja) 内視鏡用光源装置
JP6227077B2 (ja) 内視鏡システム及びその作動方法
JP6005794B2 (ja) 内視鏡システム及びその駆動方法
JP2019042275A (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170614

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170623

R150 Certificate of patent or registration of utility model

Ref document number: 6166841

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250