JP4679013B2 - 内視鏡用画像処理装置 - Google Patents
内視鏡用画像処理装置 Download PDFInfo
- Publication number
- JP4679013B2 JP4679013B2 JP2001302788A JP2001302788A JP4679013B2 JP 4679013 B2 JP4679013 B2 JP 4679013B2 JP 2001302788 A JP2001302788 A JP 2001302788A JP 2001302788 A JP2001302788 A JP 2001302788A JP 4679013 B2 JP4679013 B2 JP 4679013B2
- Authority
- JP
- Japan
- Prior art keywords
- light
- image
- filter
- image processing
- endoscope
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Images
Landscapes
- Color Television Image Signal Generators (AREA)
- Closed-Circuit Television Systems (AREA)
- Optical Filters (AREA)
- Endoscopes (AREA)
- Studio Devices (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
Description
【発明の属する技術分野】
本発明は、1つの撮像素子で通常画像モードと、蛍光画像モードとの2つのモードの画像を撮像する内視鏡を用い、通常画像モードと、蛍光画像モードとを切り換えて観察画像を得る内視鏡用画像処理装置に関する。
【0002】
【従来の技術】
近年、内視鏡装置は、医療用分野及び工業用分野で広く用いられる。上記内視鏡装置は、挿入部先端側に撮像手段を備えた電子内視鏡を用いたものがある。上記内視鏡装置は、上記電子内視鏡で得た撮像信号を信号処理してモニタ等の表示手段に内視鏡画像を表示させる内視鏡用画像処理装置を備えている。
また、内視鏡装置は、医療用分野において、通常の白色光による通常画像を得る内視鏡装置の他に、蛍光画像を得る内視鏡装置も実現されている。
【0003】
上記蛍光画像を得る内視鏡装置は、例えば、特開平8−140928号公報や特開平8−140929号公報に記載されているように通常画像と蛍光画像とを切り換え、又は同時に表示手段に表示させるものが提案されている。
上記特開平8−140928号公報や特開平8−140929号公報に記載の内視鏡装置は、挿入部先端側に通常画像用撮像素子及び蛍光画像用撮像素子の2つの撮像素子が配置される内視鏡を用いている。
【0004】
上記蛍光画像用撮像素子の前面には、青色を遮光するカットフィルタが配置されている。そして、上記内視鏡装置は、光源からR(赤色),G(緑色),B(青色)の照明光が順次供給される。そして、上記内視鏡装置は、B(青色)の照明光が供給されたとき、蛍光画像用の観察像を撮像するようになっている。
しかしながら、上記特開8−140928号公報や特開平8−140929号公報に記載の内視鏡装置は、通常画像と蛍光画像との両方を観察可能にするため、内視鏡の挿入部先端側に2つの撮像素子を配置すると、挿入部先端側が太くなる問題や、コストが高くなる問題等が有る。
【0005】
これを解消にするために、内視鏡装置は、挿入部先端側に1つの撮像素子を設けた内視鏡を用いるものが考えられる。
この場合、上記内視鏡は、上記撮像素子の前面に青色を遮光するカットフィルタを配置して、通常画像モードと蛍光画像モードとの両方の観察画像を得られるように構成される。
【0006】
【発明が解決しようとする課題】
しかしながら、上記1つの撮像素子を設けた内視鏡を用いる内視鏡装置は、上記撮像素子の前面に青色を遮光するカットフィルタを配置しているので、通常画像モード時に、上記撮像素子で撮像される通常画像用の観察像に青色が欠けてしまう。この場合、上記内視鏡装置に用いられる従来の内視鏡用画像処理装置は、青色が欠けた通常画像用の観察像を撮像した撮像信号を画像処理することになるので、正しい色再現を行うことが困難となる。
【0007】
本発明は、これらの事情に鑑みてなされたものであり、1つの撮像素子で通常画像モードと、蛍光画像モードとの2つのモードの画像を撮像する内視鏡を用い、通常画像モード時に際しても良好な観察画像を得られる内視鏡用画像処理装置を提供することを目的とする。
【0008】
【課題を解決するための手段】
上記目的を達成するため、本発明の内視鏡用画像処理装置は、青色の少なくとも一部の波長帯域を遮光する帯域フィルタが撮像素子の前面に配置された内視鏡の前記撮像素子から出力される信号を画像処理して白色光による通常画像モードと、蛍光情報を含む蛍光画像モードとを切り換えてカラー画像信号を発生する内視鏡用画像処理装置において、前記通常画像モード時において、赤色の色信号と、青色または緑色の色信号とを用いて所定の色素量を算出する色素量算出手段と、前記通常画像モード時に、前記色素量算出手段により算出された所定の色素量に基づいて、前記カラー画像信号のうち、所定の色信号のゲインを調整する調整手段と、を具備したことを特徴とする。
【0009】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態を説明する。
(第1の実施の形態)
図1ないし図10は本発明の第1の実施の形態に係り、図1は第1の実施の形態を備えた内視鏡装置の全体構成図、図2は通常観察用フィルタと蛍光観察用フィルタが設けられた切替フィルタの構成を示す説明図、図3はフィルタの波長に対する透過特性を示す特性図であり、図3(A)は通常観察用フィルタの透過特性図、図3(B)は蛍光観察用フィルタの透過特性図、図3(C)は励起光カットフィルタの透過特性図、図4は通常画像モードで白い被写体を観察した場合のCCDで受光した光強度の波長に対する特性を示す特性図、図5は生体組織に含まれるヘモグロビンの吸光度の波長に対する特性を示す特性図、図6は図1の画像処理回路の構成を示す回路ブロック図、図7はヘモグロビン濃度に対するゲイン調整量の関係を示すグラフ、図8は図6の画像処理回路の変形例を示す回路ブロック図、図9は500−700nmの波長帯域を透過する励起光カットフィルタの透過特性を示す特性図、図10は図9の励起光カットフィルタにおける通常画像モード時のCCDで受光した光強度の波長に対する特性を示す特性図である。
【0010】
図1に示す本発明の第1の実施の形態の通常画像モード及び蛍光画像モードとを備えた内視鏡装置1Aは、体腔内に挿入して観察するための電子内視鏡2Aと、通常観察用の光及び励起用の光を発する光源装置3Aと、通常観察画像と蛍光画像を構築する画像処理を行う内視鏡用画像処理装置としての(以下、画像処理装置)4Aと、通常光による画像と蛍光による画像を表示するモニタ5とにより構成される。
【0011】
電子内視鏡2Aは、体腔内に挿入される細長の挿入部7を有している。この挿入部7の先端部8は、照明手段及び撮像手段を内蔵している。
挿入部7は、通常観察のための照明光及び励起光を伝送するライトガイドファイバ9が挿通され、このライトガイドファイバ9の手元側の入射端に設けた光源用コネクタ10は光源装置3Aに着脱自在に接続される。
【0012】
光源装置3Aは、ランプ駆動回路11により発光するように駆動され、赤外波長帯域から可視光帯域を含む光を放射するランプ12と、このランプ12による照明光路上に設けられ、ランプ12からの光量を制限する光源絞り13と、照明光路上に設けられた切替フィルタ部14と、この切替フィルタ部14を通った光を集光するコンデンサレンズ15とを備えている。
【0013】
この切替フィルタ部14は回転用モータ16により回転されると共に、移動用モータ20により光路上に配置されるフィルタが切り替えられる切替フィルタ17と、回転用モータ16に取り付けたラック18に螺合するピニオン19を回転駆動することにより、回転用モータ16と共に切替フィルタ17を光軸に垂直な方向に移動する移動用モータ20とを備えている。
【0014】
切替フィルタ17は、図2に示すように内周側と外周側とに同心状に通常観察用のRGBフィルタ21と蛍光観察用フィルタ22とが設けている。切替フィルタ17は、前記移動用モータ20を駆動することにより光路上に通常照明用フィルタ21を設定して通常画像モードでの動作状態に設定したり、通常照明用フィルタ21から蛍光照明用フィルタ22に切り換えて蛍光画像モード(蛍光モードともいう)に設定した動作状態に切り替えができるようにしている。
【0015】
上記RGBフィルタ21は、周方向にR(赤)、G(緑)、B(青)の各波長帯域の光をそれぞれ透過するRフィルタ21a、Gフィルタ21b、Bフィルタ21cが3等分するように設けてあり、回転モータ16で回転駆動されることによりそれぞれが光路中に順次、略連続的に介挿される。
【0016】
また、Rフィルタ21a、Gフィルタ21b、Bフィルタ21cの透過特性は図3(A)に示すように、600−700nm、500−600nm、400−500nmの各波長帯の光をそれぞれ透過するフィルタ特性を有する。図3等では符号21a、21b、21cの代わりに、そのフィルタ透過特性に対応する符号R、G、Bを用いて示している(後述する蛍光観察用フィルタ22においても、同様である)。
【0017】
また、蛍光観察用フィルタ22は、周方向に狭帯域の赤(R1)、狭帯域の緑(G1)、狭帯域の励起光をそれぞれ透過するR1フィルタ22a、G1フィルタ22b、E1フィルタ22cが3等分するように設けてあり、回転用モータ16で回転駆動されることによりそれぞれが光路中に順次介挿される。
また、R1フィルタ22a、G1フィルタ22b、E1フィルタ22cの透過特性は図3(B)に示すように600−620nm、540−560nm、390−445nmを各波長帯域の光をそれぞれ透過するフィルタ特性を有する。
【0018】
光源装置3Aからの照明光はライトガイドファイバ9により、電子内視鏡2Aの挿入部7の先端側に伝送(導光)される。このライトガイドファイバ9は蛍光観察のための光と通常観察のための光を少ない伝送ロスで伝送する。このライトガイドファイバ9としては、例えば多成分系ガラスファイバ、石英ファイバ等で構成される。
【0019】
ライトガイドファイバ9の先端面に伝送された光は、その先端面に対向する照明窓に取り付けた照明レンズ24を経て、拡開して体腔内の観察対象部位を照明するようになっている。
【0020】
先端部8は、この照明窓に隣接して観察窓が設けている。この観察窓の後端側は、光学像を結ぶための対物レンズ系25と、励起光をカットする励起光カットフィルタ27と、蛍光及び反射光の各画像を撮像する撮像素子として例えばモノクロ撮像(或いは白黒撮像)を行う電荷結合素子(CCDと略記)28とが配置されている。
蛍光及び反射画像を撮像する撮像素子としては、CCD28の代わりにCMD (Charged Modulation Device) 撮像素子、CMOS( Complementary Metal-Oxide Semiconductor )撮像素子、AMI(Amplified MOS Imager)、BCCD(Back Illuminated CCD)でも良い。
【0021】
励起光カットフィルタ27は蛍光観察時に、蛍光を発生させるために励起される励起光を遮光するフィルタである。この励起光カットフィルタ27の特性を図3(C)に示す。この図3(C)に示すように470−700nmの波長帯域を透過する、つまり、青色帯域の一部の波長(400−470nm)を除いた可視光を透過する特性を有する。
【0022】
尚、この電子内視鏡2Aは、蛍光画像モードと通常画像モードとを選択する指示操作や、フリーズ、レリーズの指示操作を行うためのスコープスイッチ29が設けてあり、その操作信号は制御回路37に入力され、制御回路37はその操作信号に対応した制御動作を行う。
【0023】
例えばスコープスイッチ29におけるモード切換スイッチの通常モードスイッチを操作すると、光源装置3Aはライトガイドファイバ9に通常画像モードの照明光、つまりR、G、Bの光を順次供給する状態となり、また画像処理装置4Aも通常画像モードに対応した信号処理を行う状態になる。
【0024】
また、モード切換スイッチの蛍光モードスイッチを操作すると、光源装置3Aはライトガイドファイバ9に蛍光モードの照明光、つまりR1、G1、E1の光を順次供給する状態となり、また画像処理装置4Aも蛍光モードに対応した信号処理を行う状態になる。
【0025】
CCD28は画像処理装置4A内に設けたCCD駆動回路31からのCCD駆動信号により駆動されるようになっている。このCCD28は、結像された光学像を光電変換して画像信号を出力するようになっている。
【0026】
この画像信号は、画像処理装置4A内に設けたプリアンプ32で増幅され、更にオートゲインコントロール(AGC)回路33で所定レベルまで増幅された後、A/D変換回路34によりアナログ信号からデジタル信号(画像データ)に変換され、各画像データは切換を行うマルチプレクサ35を経て、第1フレームメモリ36a、第2フレームメモリ36b及び第3フレームメモリ36cに一時格納(記憶)されるようになっている。
尚、CCD駆動回路31は、制御回路37により制御される。具体的には、制御回路37は、蛍光モードにおいて、E1フィルタ22cにより励起光を照射して蛍光画像を得る期間におけるCCD28で受光される光量がR1フィルタ22a、G1フィルタ22bで照明を行った場合の反射光の場合よりもはるかに低下するので、CCD駆動回路31を制御してCCD28の電子シャッタ機能を動作させる。
【0027】
また、制御回路37は選択されたモードに応じて移動用モータ20を制御するようになっている。また、回転用モータ16は制御回路37により制御されると共に、この回転用モータ16の回転軸等に取り付けた図示しないエンコーダの出力は制御回路37に入力され、制御回路37はこのエンコーダの出力に同期してCCD駆動回路31やマルチプレクサ35の切換等を制御する。
【0028】
また、制御回路37は、マルチプレクサ35の切換を制御し、通常画像モードではRフィルタ21a、Gフィルタ21b、Bフィルタ21cの照明のもとで撮像した各画像データをそれぞれ第1フレームメモリ36a、第2フレームメモリ36b、第3フレームメモリ36cに順次記憶させるように制御する。
【0029】
また、蛍光モードにおいても、制御回路37は、マルチプレクサ35の切換を制御し、R1フィルタ22a、G1フィルタ22b、E1フィルタ22cの照明のもとで撮像した各信号をそれぞれ第1フレームメモリ36a、第2フレームメモリ36b、第3フレームメモリ36cに順次記憶させるように制御する。
上記フレームメモリ36a〜36cに格納された画像データは画像処理回路38に入力され、マトリクス演算などが施された後、D/A変換回路39によりアナログのRGB信号に変換されてモニタ5に出力される。
【0030】
また、この画像処理装置4Aは、プリアンプ32を通した信号に基づいて光源装置3A内の光源絞り13の開口量を自動的に制御する調光回路40が設けてある。また、この調光回路40は、制御回路37により制御される。
また、この制御回路37は、ランプ駆動回路11のランプ12を発光駆動するランプ電流を制御する。また、この制御回路37はスコープスイッチ29の操作に応じた制御動作を行う。
【0031】
また、この画像処理装置4Aは、例えば電子内視鏡2Aの他に図示しない2つの撮像素子を内蔵した機種等が異なる電子内視鏡でも使用できるように、接続されたスコープの識別情報を識別するための機種検知回路48が設けてある。
【0032】
一方、スコープ2Aは、種類(機種)を含む固有の識別情報を発生するスコープID回路47aを有する。尚、スコープID回路47aは、スコープ2Aの機種を含む情報が書き込まれたメモリ素子で構成されるが、これに限定されるものでなく、例えば複数のスイッチからなるディップスイッチ等で構成することもできる。
【0033】
機種検知回路48は、検知された機種情報を制御回路37に送信し、制御回路37は検出された機種に応じてその機種のスコープに適した蛍光モード及び通常画像モードで観察できるように光源装置3Aを制御するようになっている。
尚、スコープ2Aは、その機種を含む固有のID(識別情報)を発生するスコープID回路47aを備えた構成であるが、単に機種情報を画像処理装置4Aにそれぞれ入力しても良い。
【0034】
また、この画像処理装置4Aは、スコープID回路47aを設けていないスコープにも対応可能である。この場合、スコープID回路47aを設けていないスコープが画像処理装置4Aに接続されたとき、スコープIDを発生しないので、機種検知回路48の出力により制御回路37はスコープID回路47aを設けていない機種であると判断して、対応する制御動作を行うこともできる。
【0035】
このような構成の内視鏡装置1Aでは、光源装置3Aの切替フィルタ17のRGBフィルタ21、蛍光観察用フィルタ22及び、電子内視鏡2Aの撮像光路中に設けた励起光カットフィルタ27のフィルタ特性を図3(A)〜図3(C)に示すように設定したことが特徴の1つになっている。
【0036】
この特徴を図4等を参照して以下に説明する。図4は通常画像モードにより、白い紙等の白い被写体を撮像した場合におけるCCD28の受光面(撮像面)での光強度を示す。
この場合、図3(A)に示す特性のRフィルタ21a、Gフィルタ21b、Bフィルタ21cによりR,G,B光の照明が行われ、一方CCD28の前に配置された励起光カットフィルタ27のフィルタ特性は図3(C)に示すようにG、Rの光は全て透過するが、Bの光に対してはその長波長側の一部を透過する特性である。このため、CCD28の受光面(撮像面)での光強度は、図4で2点鎖線で示すBの短波長側がカットされたものとなる。つまり、CCD28は、Bの光に対して実線で示すようにその長波長側の一部のみが受光面(撮像面)で受光されることになる。
【0037】
従って、Bフィルタ21cによるB光での照明期間において、CCD28は、受光面(撮像面)で受光される光量が他のRフィルタ21a、Gフィルタ21bによるR光、G光での照明期間の場合よりも低下することになる。
このため、通常画像モードにおいて、Bフィルタ21cによる照明期間における撮像時、Rフィルタ21a、Gフィルタ21bによる照明期間における撮像の場合に比べて、その照明光量を増大したり、信号処理系側で増幅率を増大させてホワイトバランスのとれた通常画像が得られるようにしている。
【0038】
ここで、通常画像モード時に白色反射板等を撮像してモニタ上に反射板を白く表示させる際に、B光の強度が低下するので、RGBの各信号出力が均一になるように調整すると、B信号の信号出力は一部の光が制限されなかった場合に対して、B信号のゲインが高く設定されるようになる。
【0039】
また、図5に示すようにヘモグロビンの吸光度は、短波長になるに従い大きくなる。特に、ヘモグロビンの吸光度は、B光の遮断される波長帯域(400〜470nm)に大きなピーク(solet帯)を持つ。
【0040】
従って、通常画像モード時に生体体腔内を観察すると、図5に示すようにB光がヘモグロビンの吸収により大きく減衰される。しかしながら、470〜500nmに制限されたB光では、ヘモグロビンの吸収が小さく、CCD28に到達するB光の強度が高くなる。このため、通常画像モード時に470〜500nmに制限されたB光と、R光、G光で生体体腔内を観察すると、色調が変化することになる。
【0041】
そこで、本実施の形態では、通常画像モード時に470〜500nmに制限されたB光からの信号のゲインを一定値減衰させるように構成する。
図6に示すように画像処理回路38は、RGBの各信号の出力強度が一定値になるようにゲイン調整を行うホワイトバランス部50と、このホワイトバランス部50でのRGBのゲイン調整値をメモリすると共に、Bチャンネルのゲインを一定値減衰させるホワイトバランス設定部51と、前記ホワイトバランス部50でゲイン調整されたRGBの信号に対し、所定のマトリクス演算を施して蛍光画像信号又は通常画像信号を生成するマトリクス回路52と、前記制御回路37からモード信号を得て、マトリクス回路52に蛍光画像用のパラメータを出力するか、又は、通常観察用のパラメータを出力するか判断し、モードに適したパラメータを出力するパラメータ設定部53と、前記マトリクス回路52で生成された画像信号をモニタに表示するためのゲイン調整を行うγ補正回路54とから構成される。
以上の構成にすることで、通常画像モードでの良好な通常観察画像、蛍光モードでの明るい蛍光画像を実現できるようにしている。
【0042】
このような構成による本実施の形態の作用を以下に説明する。
図1に示すように電子内視鏡2Aの光源用コネクタ10を光源装置3Aに接続し、また、電子内視鏡2Aの図示しない信号用コネクタを画像処理装置4Aに接続する。そして、図1に示すような接続状態に設定して、各装置の電源を投入し、動作状態に設定する。すると、制御回路37は初期設定の動作を行い、この初期設定の状態では例えば通常画像モードで動作するように設定する制御を行う。
【0043】
この通常画像モードでは、制御回路37は光源装置3Aの移動用モータ20を制御して、切替フィルタ17をその内周側のRGBフィルタ21が照明光路中に位置するように設定する。
【0044】
そして、回転モータ16を回転させる。ランプ12の白色光は切替フィルタ17のRフィルタ21a、Gフィルタ21b、Bフィルタ21cが順次照明光路中に配置されるようになり、観察対象側へR、G、Bの照明光が出射される。
通常画像モードでは切替フィルタによる(観察対象側への)照明光は上記のようにRフィルタ21a、Gフィルタ21b、Bフィルタ21cが順次照明光路中に配置される。
【0045】
R、G、Bの光で照明され、CCD28で撮像された信号は、増幅、A/D変換された後、マルチプレクサ35が制御回路37で順次切り換えられることにより、第1フレームメモリ36a、第2フレームメモリ36b、第3フレームメモリ36cに順次格納される。
【0046】
これらフレームメモリ36a〜36cに格納されたR、G、Bの色成分の画像データは所定のフレーム期間(例えば33ms、つまり1/30秒)で同時に読み出され、画像処理回路38でマトリクス演算等がされ、D/A変換回路39を経てアナログの標準的な映像信号、ここではRGB信号にされてモニタ5に出力され、モニタ5の表示面には(白色光を照射した場合に、直接被写体を観察した場合のカラー色調を反映した)通常観察画像がカラー表示される。
【0047】
上述したように、Bフィルタ21cを通して照明を行った場合における被写体側での反射光量は励起光カットフィルタ27によりその短波長側がカットされてCCD28で受光される。このため、そのB光の色成分画像の受光量が他のR、G光の色成分画像の受光量より少なくなる(低下する)ので、RGBの各信号出力が均一になるように調整すると、B信号の信号出力は一部の光が制限されなかった場合に対して、B信号のゲインが高く設定される。
【0048】
この状態で、通常画像モード時に生体体腔内を観察すると、B光がヘモグロビンの吸収により大きく減衰されるが、励起光カットフィルタ27により470〜500nmに制限されたB光では、ヘモグロビンの吸収が小さく、CCD28に到達するB光の強度が高くなってしまう。すると、モニタに表示される通常画像モード時の生体体腔内の観察画像は、赤みがかったものとなる。
【0049】
これを防止するために、画像処理回路38は、ホワイトバランス部50でRGBの各信号の出力強度が一定値になるようにゲイン調整を行う。このとき、ホワイトバランス設定部51は、ホワイトバランス部50でのRGBのゲイン調整値をメモリすると共に、Bチャンネルのゲインを一定値減衰させる。
【0050】
このBチャンネルのゲイン調整量は、図7に示すように生体体腔内のヘモグロビン濃度に依存する。このヘモグロビン濃度は、部位、臓器、組織の状態により変化する。
本実施の形態では、ヘモグロビン濃度1%〜4%に対してBチャンネルのゲイン調整量を15%〜30%の範囲として一定の値を設定している。
【0051】
そして、このようにゲインを調整されたB光と、R及びG光とは、マトリクス回路52に入力される。マトリクス回路52は、制御回路37からモード信号を得たパラメータ設定部53により、モードに適したパラメータを出力され、ゲイン調整されたRGBの信号に対し、所定のマトリクス演算を施して通常画像信号を生成し、出力する。
【0052】
マトリクス回路52で生成された通常画像信号は、γ補正回路54でゲイン調整され、D/A変換回路39でD/A変換されてモニタに出力され、通常画像としてモニタに表示される。
【0053】
このようにして通常画像モードで被写体を観察でき、例えば注目する患部部位等の被写体に対して蛍光観察を行いたい場合には、スコープスイッチ29のモード切換スイッチの蛍光モードスイッチを操作する。すると、この操作信号を受けて、制御回路37は光源装置3Aは移動用モータ20を駆動して、切替フィルタ17を移動させ、蛍光観察用フィルタ22が照明光路上に配置される状態に設定し、蛍光モードに切り換える。
【0054】
蛍光モードに設定されると、電子内視鏡2Aのライトガイドファイバ9には蛍光モードの照明光、つまりR1、G1、E1の光が順次供給される状態となる。
そして、被写体にはR1、G1、E1の光が順次照射される。R1、G1の照明の場合には、通常画像モードでのR、Gの光が順次照射された場合と同様の動作となる。つまり、この場合にはR1、G1の被写体での反射光をCCD28で受光する。この場合、励起光カットフィルタ27による影響を受けないで、CCD28は撮像することになる。
【0055】
これに対し、励起光E1を照射した場合には、その励起光E1の反射光は励起光カットフィルタ27で殆ど完全に遮光され、かつこの励起光カットフィルタ27の透過帯域内の被写体側からの蛍光を受光する。この蛍光の強度は、R1、G1の被写体での反射光の強度に比べてはるかに小さいので、通常画像モードでのR、Gの照明、Bの照明及びそれらの場合の信号処理と類似した動作を行い、モニタに蛍光画像が表示される。このように蛍光モードにおいても、良好な蛍光画像が得られる。
【0056】
この結果、本実施の形態の画像処理装置は、1つの撮像素子で通常画像モードと、蛍光画像モードとの2つのモードの画像を撮像する内視鏡を用い、通常画像モード時に際しても良好な観察画像を得られる。
【0057】
また、上述した図6の画像処理回路38は、ホワイトバランス部50でRGBの各信号の出力強度が一定値になるように通常画像モード時のゲイン調整を行うように構成されているが、図8に示すようにホワイトバランス部50でホワイトバランスを行った後、マトリクス回路52で通常画像モード時のゲイン調整を行うように構成しても良い。図8は、本発明の第1の実施の形態の変形例を示す回路ブロック図である。
【0058】
図8に示すように画像処理回路38Bは、通常画像モード時のゲイン調整を所定のマトリクス演算により行うマトリクス回路52bと、このマトリクス回路52bに対して、モードに適したパラメータを出力するパラメータ設定部53bと、前記γ補正回路とから構成される。尚、ホワイトバランス部50bは、ホワイトバランス設定部51bで設定された値に基づき、通常のホワイトバランスを行うようになっている。
【0059】
前記マトリクス回路52bは、ホワイトバランス部50bで通常のホワイトバランスが行われた後、上記マトリクス演算を行うようになっている。
このマトリクス演算は、例えば、以下に示すような3行3列の行列式で演算が行われる。
【0060】
【式1】
また、B光のゲインを落とさずにR光及びG光のゲインをアップさせるようにしても良い。この場合、このマトリクス演算は、例えば、以下に示すような行列式で演算が行われる。
【0061】
【式2】
これら行列式に基づきマトリクス回路52bは、RGBの信号に対してマトリクス演算を行うことで、通常画像モード時のゲイン調整が可能となり、モニタに表示される通常画像モード時の生体体腔内の観察画像が良好なものとなる。
この結果、本変形例の画像処理部38Bは、上記第1の実施の形態と同様な効果を得る。
【0062】
また、電子内視鏡2Aは、図9に示すように500−700nmの波長帯域を透過するフィルタ特性の励起光カットフィルタ27bを用いても良い。この場合、励起光カットフィルタ27bは、青色帯域の波長(400−500nm)を除いた可視光を透過する特性を有している。
このため、CCD28の受光面(撮像面)での光強度は、図10に示すように2点鎖線で示すB光全体がカットされたものとなる。
【0063】
この場合、画像処理装置4Aに出力される信号は、R光と、G光の信号のみなので、図4、図8で画像処理部38,38Bは、B’光の信号をG光の信号に割り当て、R,G,Gとして上述した信号処理を施すように構成しても良い。更に、具体的に説明すると、例えば、画像処理部38は、R光,G光,G光の信号がホワイトバランス部50に入力され、このホワイトバランス部50でB’光の信号の代わりに割り当てたG光のゲインを調整する。この場合、ホワイトバランス設定部51で設定される減衰量は、40%となる。それ以外の構成は、上記第1の実施の形態と同様である。
【0064】
(第2の実施の形態)
図11は本発明の第2の実施の形態の画像処理回路の構成を示す回路ブロック図である。
本第2の実施の形態は、上記第1の実施の形態の構成に加え、ヘモグロビン濃度1%〜4%に応じて青色信号を生成してBチャンネルのゲイン調整量を修正するように構成する。それ以外の構成は上記第1の実施の形態と同様なので説明を省略し、同じ構成には同じ符号を付して説明する。
【0065】
即ち、図11に示すように本第2の実施の形態の画像処理回路38Cは、470〜500nmに制限されたB’光とR光を用いて(又はR光とG光を用いて)、ヘモグロビン量を算出する色素算出部61と、この色素算出部61で算出されるヘモグロビン量に基づき、モードに適したパラメータを設定するパラメータ設定部53cと、このパラメータ設定部53cで設定されたパラメータに基づき、Bチャンネルのゲイン調整量を修正するマトリクス回路52cと、前記γ補正回路54とから構成される。
【0066】
前記パラメータ設定部53cは、通常画像モード時、前記色素算出部61から出力されるヘモグロビン量に基づき、B信号のゲインを減衰されるようにパラメータを設定し、これを前記マトリクス回路52cに出力するようになっている。
【0067】
前記色素算出部61での演算は、以下の色信号を用い、励起光カットフィルタ27で制限を受けないB光から形成される信号のゲインを以下の式に基づいて予測するようになっている。
【0068】
生体から反射した光の強度は、以下の式で定義される。
IB=I0exp(−cdεB) ・・・(1)
IB'=I0exp(−cdεB') ・・・(2)
IR=k・I0exp(−cdεR) ・・・(3)
I0:ホワイトバランス後の出力信号
IB:励起光カットフィルタ27で光が遮断されなかったときのBの反射光強度
IB':励起光カットフィルタ27で一部の光が遮断されたときのBの反射光強度
IR:R光の反射光強度
εB:B光帯域のヘモグロビンの吸光度
εB':B’光帯域のヘモグロビンの吸光度
εR:R光帯域のヘモグロビンの吸光度
c:ヘモグロビン濃度
d:光路長
尚、kは、ホワイトバランス取得時の係数である。本演算では、ホワイトバランス後であるので、k=1が成り立つ。従って、kは、演算式中より、削除される。
【0069】
ここで、IRとIB'との値からIBの値を算出する。
(2)、(3)式からcdを求める。
【0070】
cd=(logIR−logIB')/(εB'−εR)
cdを(1),(2)より求められる下式に代入する。
よって、IR/IBとIR/IB'との関係式は以下の式で求まる。
IR/IB=(IR/IB'){(εB−εR)/(εB’−εR)} ・・・(4)
上記関係式により、B光帯域で遮断されなかったときのB光の反射光強度が求まる。
【0071】
尚、上記関係式は、R光とB’光との関係により、B光の強度を予測したが、R光とG光との関係により、B光の強度を予測しても良い。
次に、R光とG光とで色素量を求める場合は、上記(1)〜(3)の関係式でB’がGに変更となる。
IB=I0exp(−cdεB) ・・・(1)
IG=I0exp(−cdεG) ・・・(2’)
IR=k・I0exp(−cdεR) ・・・(3)
IG:G光の反射光強度
εG:G光帯域のヘモグロビンの吸光度
ここで、IRとIGとの値からIBの値を算出する。
(2’)、(3)式からcdを求める。
cd=(logIR−logIG)/(εG−εR)
cdを(1),(2’)より求められる下式に代入する。
よって、IR/IBとIR/IGとの関係式は以下の式で求まる。
IR/IB=(IR/IG){(εB−εR)/(εG−εR)} ・・・(5’)
上記関係式により、B光帯域で遮断されなかったときのB光の反射光強度が求まる。
【0072】
色素算出部61は、上述した関係式(5)、(5’)で算出されたB光の反射光強度に基づいてヘモグロビン量を算出し、この算出値をパラメータ設定部53cに出力する。
パラメータ設定部53cは、色素算出部61で算出されたヘモグロビン量に基づき、モードに適したパラメータを設定してマトリクス回路52cに出力する。
【0073】
マトリクス回路52cは、パラメータ設定部53cで設定されたパラメータに基づき、青色信号を生成してBチャンネルのゲイン調整量を修正するようマトリクス演算を行うようになっている。
このマトリクス演算は、例えば、以下に示すような3行3列の行列式で演算が行われる。
【0074】
【式3】
尚、式3中のCは、色素演算部61で算出されたヘモグロビン量に基づき、決められるゲイン調整量である。
【0075】
そして、マトリクス回路52cで生成された通常画像信号は、γ補正回路54でゲイン調整され、D/A変換回路39でD/A変換されてモニタに出力され、通常画像としてモニタに表示される。
【0076】
この結果、本第2の実施の形態の画像処理装置は、上記第1の実施の形態の画像処理装置の効果に加え、通常画像モード時にヘモグロビン量に応じて良好な観察画像を得られる。
【0077】
尚、本発明は、以上述べた実施形態のみに限定されるものではなく、発明の要旨を逸脱しない範囲で種々変形実施可能である。
【0078】
[付記]
(付記項1) 青色の少なくとも一部の波長帯域を遮光する帯域フィルタが撮像素子の前面に配置された内視鏡の前記撮像素子から出力される信号を画像処理して白色光による通常画像モードと、蛍光情報を含む蛍光画像モードとを切り換えてカラー画像信号を発生する内視鏡用画像処理装置において、
前記通常画像モード時に、前記カラー画像信号のうち、所定の色信号のゲインを調整する調整手段を設けたことを特徴とする内視鏡用画像処理装置。
【0079】
(付記項2) 前記通常画像モード時に、前記カラー画像信号のうち、所定の色信号を用いて青色信号を生成する生成手段を設けたことを特徴とする付記項1に記載の内視鏡用画像処理装置。
【0080】
(付記項3) 前記調整手段は、青色のゲインを減衰させることを特徴とする付記項1に記載の内視鏡用画像処理装置。
【0081】
(付記項4) 前記調整手段は、赤色及び緑色のゲインを増幅させることを特徴とする付記項1に記載の内視鏡用画像処理装置。
【0082】
(付記項5) 前記調整手段は、赤色と青色又は緑色の色信号を用いて色素量を算出し、ゲインの調整量を設定することを特徴とする付記項1に記載の内視鏡用画像処理装置。
【0083】
(付記項6) 前記生成手段は、所定の色信号のゲインを調整して青色信号とすることを特徴とする付記項2に記載の内視鏡用画像処理装置。
【0084】
(付記項7) 接続される前記内視鏡の種類に関する情報を入力され、この情報に基づき、前記調整手段又は前記生成手段を制御する制御手段を有することを特徴とする付記項1又は2に記載の内視鏡用画像処理装置。
【0085】
(付記項8) 前記ゲインの減衰量は、15%〜30%の範囲であることを特徴とする付記項3に記載の内視鏡用画像処理装置。
【0086】
(付記項9) 前記ゲインの増幅量は、18%〜42%の範囲であることを特徴とする付記項4に記載の内視鏡用画像処理装置。
【0087】
(付記項10) 前記生成手段でゲインを調整される所定の色信号は、緑色であることを特徴とする付記項6に記載の内視鏡用画像処理装置。
【0088】
(付記項11) 前記ゲインの調整量は、40%に減衰することを特徴とする付記項10に記載の内視鏡用画像処理装置。
【0089】
【発明の効果】
以上説明したように本発明によれば、1つの撮像素子で通常画像モードと、蛍光画像モードとの2つのモードの画像を撮像する内視鏡を用い、通常画像モード時に際しても良好な観察画像を得られる内視鏡用画像処理装置を実現できる。
【図面の簡単な説明】
【図1】第1の実施の形態を備えた内視鏡装置の全体構成図
【図2】通常観察用フィルタと蛍光観察用フィルタが設けられた切替フィルタの構成を示す説明図
【図3】フィルタの波長に対する透過特性を示す特性図
【図4】通常画像モードで白い被写体を観察した場合のCCDで受光した光強度の波長に対する特性を示す特性図
【図5】生体組織に含まれるヘモグロビンの吸光度の波長に対する特性を示す特性図
【図6】図1の画像処理回路の構成を示す回路ブロック図
【図7】ヘモグロビン濃度に対するゲイン調整量の関係を示すグラフ
【図8】図6の画像処理回路の変形例を示す回路ブロック図
【図9】500−700nmの波長帯域を透過する励起光カットフィルタの透過特性を示す特性図
【図10】図9の励起光カットフィルタにおける通常画像モード時のCCDで受光した光強度の波長に対する特性を示す特性図
【図11】本発明の第2の実施の形態の画像処理回路の構成を示す回路ブロック図
【符号の説明】
1A…内視鏡装置
2A…電子内視鏡
3A…光源装置
4A…画像処理装置
5…モニタ
7…挿入部
8…先端部
14…切替フィルタ部
16…回転用モータ
17…切替フィルタ
21…RGBフィルタ
22…蛍光観察用フィルタ
27…励起光カットフィルタ
28…CCD
37…制御回路
50…ホワイトバランス部
51…ホワイトバランス設定部
52…マトリクス回路
53…パラメータ設定部
54…γ補正回路
Claims (2)
- 青色の少なくとも一部の波長帯域を遮光する帯域フィルタが撮像素子の前面に配置された内視鏡の前記撮像素子から出力される信号を画像処理して白色光による通常画像モードと、蛍光情報を含む蛍光画像モードとを切り換えてカラー画像信号を発生する内視鏡用画像処理装置において、
前記通常画像モード時において、赤色の色信号と、青色または緑色の色信号とを用いて所定の色素量を算出する色素量算出手段と、
前記通常画像モード時に、前記色素量算出手段により算出された所定の色素量に基づいて、前記カラー画像信号のうち、所定の色信号のゲインを調整する調整手段と、
を具備したことを特徴とする内視鏡用画像処理装置。 - 前記色素量は、ヘモグロビン量であることを特徴とする請求項1に記載の内視鏡用画像処理装置。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2001302788A JP4679013B2 (ja) | 2001-09-28 | 2001-09-28 | 内視鏡用画像処理装置 |
EP02010182A EP1258220B1 (en) | 2001-05-16 | 2002-05-14 | Endoscope with image processing device |
DE60228165T DE60228165D1 (de) | 2001-05-16 | 2002-05-14 | Endoskop mit Bildverarbeitungseinrichtung |
US10/145,966 US6960165B2 (en) | 2001-05-16 | 2002-05-14 | Endoscope with a single image pick-up element for fluorescent and normal-light images |
US10/647,405 US7204803B2 (en) | 2001-05-16 | 2003-08-25 | Endoscope device, endoscope and image processing device for endoscope |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2001302788A JP4679013B2 (ja) | 2001-09-28 | 2001-09-28 | 内視鏡用画像処理装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2003102680A JP2003102680A (ja) | 2003-04-08 |
JP4679013B2 true JP4679013B2 (ja) | 2011-04-27 |
Family
ID=19122974
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2001302788A Expired - Lifetime JP4679013B2 (ja) | 2001-05-16 | 2001-09-28 | 内視鏡用画像処理装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4679013B2 (ja) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4610970B2 (ja) * | 2004-09-07 | 2011-01-12 | オリンパス株式会社 | 着脱フィルタ装置および内視鏡装置 |
JP4786910B2 (ja) * | 2005-02-07 | 2011-10-05 | Hoya株式会社 | 電子内視鏡 |
JP4709606B2 (ja) * | 2005-07-28 | 2011-06-22 | オリンパスメディカルシステムズ株式会社 | 生体観測装置 |
JP2007143624A (ja) * | 2005-11-24 | 2007-06-14 | Hamamatsu Photonics Kk | 蛍光観察装置 |
JP2009201540A (ja) * | 2008-02-26 | 2009-09-10 | Fujinon Corp | 撮像システム及び内視鏡システム |
JP5579001B2 (ja) * | 2010-09-17 | 2014-08-27 | 株式会社キーエンス | 光学情報読取装置 |
JP5581157B2 (ja) * | 2010-09-17 | 2014-08-27 | 株式会社キーエンス | 光学情報読取装置の照明設定支援装置 |
GB2487940B (en) * | 2011-02-09 | 2014-12-17 | Tel Hashomer Medical Res Infrastructure & Services Ltd | Methods and devices suitable for imaging blood-containing tissue |
JP6349202B2 (ja) * | 2014-08-29 | 2018-06-27 | シスメックス株式会社 | 蛍光検出装置、被検物質検出装置、及び蛍光検出方法 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS63155984A (ja) * | 1986-12-19 | 1988-06-29 | Olympus Optical Co Ltd | 電子内視鏡用ホワイトバランス回路 |
JPH02181591A (ja) * | 1989-01-06 | 1990-07-16 | Fuji Photo Optical Co Ltd | 電子内視鏡装置 |
JPH0469615A (ja) * | 1990-07-10 | 1992-03-04 | Olympus Optical Co Ltd | 内視鏡用ホワイトバランス調整具 |
JPH07275191A (ja) * | 1994-04-11 | 1995-10-24 | Olympus Optical Co Ltd | 光源内蔵型撮像装置 |
JPH10151104A (ja) * | 1996-11-25 | 1998-06-09 | Olympus Optical Co Ltd | 蛍光内視鏡装置 |
JPH10309282A (ja) * | 1997-05-13 | 1998-11-24 | Olympus Optical Co Ltd | 蛍光観察装置 |
JP2000270265A (ja) * | 1999-03-17 | 2000-09-29 | Ekapot Bhunachet | Chargecoupleddevice(CCD)にて蛍光の映像と背景の映像を融合させ、同時にかつ同じ画面で見る方法 |
JP2001104237A (ja) * | 1999-10-05 | 2001-04-17 | Fuji Photo Film Co Ltd | 蛍光判定方法および装置 |
JP2001137174A (ja) * | 1999-11-16 | 2001-05-22 | Fuji Photo Film Co Ltd | 蛍光画像表示方法および装置 |
-
2001
- 2001-09-28 JP JP2001302788A patent/JP4679013B2/ja not_active Expired - Lifetime
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS63155984A (ja) * | 1986-12-19 | 1988-06-29 | Olympus Optical Co Ltd | 電子内視鏡用ホワイトバランス回路 |
JPH02181591A (ja) * | 1989-01-06 | 1990-07-16 | Fuji Photo Optical Co Ltd | 電子内視鏡装置 |
JPH0469615A (ja) * | 1990-07-10 | 1992-03-04 | Olympus Optical Co Ltd | 内視鏡用ホワイトバランス調整具 |
JPH07275191A (ja) * | 1994-04-11 | 1995-10-24 | Olympus Optical Co Ltd | 光源内蔵型撮像装置 |
JPH10151104A (ja) * | 1996-11-25 | 1998-06-09 | Olympus Optical Co Ltd | 蛍光内視鏡装置 |
JPH10309282A (ja) * | 1997-05-13 | 1998-11-24 | Olympus Optical Co Ltd | 蛍光観察装置 |
JP2000270265A (ja) * | 1999-03-17 | 2000-09-29 | Ekapot Bhunachet | Chargecoupleddevice(CCD)にて蛍光の映像と背景の映像を融合させ、同時にかつ同じ画面で見る方法 |
JP2001104237A (ja) * | 1999-10-05 | 2001-04-17 | Fuji Photo Film Co Ltd | 蛍光判定方法および装置 |
JP2001137174A (ja) * | 1999-11-16 | 2001-05-22 | Fuji Photo Film Co Ltd | 蛍光画像表示方法および装置 |
Also Published As
Publication number | Publication date |
---|---|
JP2003102680A (ja) | 2003-04-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP1258220B1 (en) | Endoscope with image processing device | |
JP4855586B2 (ja) | 内視鏡装置 | |
JP5372356B2 (ja) | 内視鏡装置及び内視鏡装置の作動方法 | |
JP5534997B2 (ja) | 電子内視鏡システム | |
JP4891990B2 (ja) | 内視鏡装置 | |
JP3869324B2 (ja) | 蛍光観察用画像処理装置 | |
JP5226403B2 (ja) | 光源装置及びこの光源装置を用いた内視鏡装置 | |
US8866893B2 (en) | Imaging apparatus | |
US20060155166A1 (en) | Endoscope device | |
JP2009034224A (ja) | 医療装置 | |
JP5308815B2 (ja) | 生体観測システム | |
JP2005013279A (ja) | 内視鏡装置 | |
JP2005131129A (ja) | 撮像装置及び内視鏡装置 | |
US8878921B2 (en) | Imaging system | |
JP5467971B2 (ja) | 電子内視鏡システム、電子内視鏡システムのプロセッサ装置及び電子内視鏡システムの作動方法 | |
JP4679013B2 (ja) | 内視鏡用画像処理装置 | |
JP4315748B2 (ja) | 内視鏡装置 | |
JP3884265B2 (ja) | 内視鏡装置 | |
JP4716801B2 (ja) | 内視鏡撮像システム | |
JP5331394B2 (ja) | 内視鏡装置 | |
JP4242578B2 (ja) | 内視鏡装置 | |
JP5467970B2 (ja) | 電子内視鏡システム | |
JP2004305382A (ja) | 特殊光観察システム | |
JP4526322B2 (ja) | 内視鏡装置 | |
JP4504040B2 (ja) | 内視鏡装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20071011 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100506 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20101026 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20101227 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110125 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110201 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 4679013 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140210 Year of fee payment: 3 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |