JP7463507B2 - 内視鏡画像処理装置 - Google Patents

Description

本発明は、ＡＩ（Artificial Intelligence）を用いた認識処理を行う内視鏡画像処理装置に関する。

医療分野においては、内視鏡、光源装置、及びプロセッサ装置を有する内視鏡システムのように、医療画像について処理を行う医療画像処理システムが普及している。また、近年は、病変の見落とし防止やユーザーの負担軽減を目的として、医療画像から病変部を検出したり（例えば、特許文献１）、病変を認識して病変の種類を分類するために、ＡＩ技術が使われ始めている。

国際公開第２０１７／０７３３３８号 特開２０１２－１５２３３３号公報

病変の認識処理を行う医療画像処理システムにおいて、認識処理を正しく行うために、実際に観察されたシーンである部位や臓器に対応するパラメータあるいは内部処理を選択する場合がある。そのために、画像の特徴に基づいてシーンの認識処理を行う場合がある。しかし、シーンの認識処理においても、観察するシーンによっては、実際のシーンと異なるシーンが認識される場合がある。例えば、食道、胃、大腸などの消化管において誤認識される場合がある。

なお、特許文献２には、内視鏡により観察を行う際に、撮影された画像データから食道、噴門、胃などの部位を判別し、各部位に適した照明を行うために、自動的に各部位に対応する照明モードに切り替える技術が開示されている。

従来の技術においては、特許文献１のように、観察画像から病変部を検出するためには、観察画像のシーンが特定されている必要がある。しかし、スクリーニング検査のように多くの観察画像が取得される場合には、都度適切なシーンであるか否かを判断することは、ユーザーの負担が大きいという問題があった。また、特許文献２のように、自動的にシーンが認識され、シーンの認識に基づいて次の処理が行われる場合には、シーンの認識に誤りがあると、ユーザーの意図しない処理が行われてしまう問題があった。

本発明は、病変認識処理で使用するシーンを正確に認識することができる内視鏡画像処理装置を提供することを目的とする。

上記課題を解決するために、本発明の内視鏡画像処理装置は、プロセッサを備える内視鏡画像処理装置であって、プロセッサは、被検体の体腔内に挿入される挿入部を有する内視鏡により撮影された体腔内の観察画像である内視鏡観察画像を取得し、内視鏡観察画像を用いてシーンを認識し、プロセッサにより認識された認識済みシーンが挿入部の挿入時に認識される第１特定シーンである場合は、認識済みシーンを第１特定シーンとして特定シーンメモリに記憶し、特定シーンメモリに第１特定シーンが記憶され、且つ、認識済みシーンが第１特定シーンよりも挿入部の移動方向における奥側のシーンである場合は、認識済みシーンを変更せずに出力し、特定シーンメモリに第１特定シーンが記憶され、且つ、認識済みシーンが第１特定シーンよりも挿入部の移動方向における手前側のシーンである場合は、認識済みシーンを変更して出力する。

プロセッサは、認識済みシーンを変更する場合に、認識済みシーンを第１特定シーンよりも奥側のシーンに変更することが好ましい。

プロセッサは、特定シーンメモリに第１特定シーンが記憶され、且つ、認識済みシーンが第１特定シーンに対応づけられたシーンでない場合は、認識済みシーンを第１特定シーンよりも奥側のシーンに変更することが好ましい。

プロセッサは、特定シーンメモリに第１特定シーンが記憶され、且つ、認識済みシーンが第１特定シーンに対応づけられたシーンでない場合は、認識済みシーンを第１特定シーンに対応づけられたシーンに変更することが好ましい。

プロセッサは、認識済みシーンを第１特定シーンよりも奥側のシーンのうち確信度の高いシーンに変更することが好ましい。

認識済みシーンが、挿入部の移動方向において挿入部が折り返す第２特定シーンである場合は、認識済みシーンを第２特定シーンとして特定シーンメモリに記憶することが好ましい。

プロセッサは、特定シーンメモリに第２特定シーンが記憶されている場合は、認識済みシーンを変更せずに出力することが好ましい。

認識済みシーンが挿入部の抜去時に認識される第３特定シーンである場合は、認識済みシーンを第３特定シーンとして特定シーンメモリに記憶することが好ましい。

プロセッサは、認識済みシーンが第３特定シーンよりも奥側のシーンである場合は、認識済みシーンを変更して出力することが好ましい。

プロセッサは、認識済みシーンを変更する場合に、プロセッサにより変更された認識済みシーンを用いて、認識済みシーンを変更することが好ましい。

シーンには、少なくとも咽頭、食道、食道胃接合部、胃、または十二指腸のいずれかが含まれることが好ましい。

第１特定シーンは、挿入部の挿入時における食道、食道胃接合部、または胃のいずれかであることが好ましい。

第２特定シーンは、十二指腸であることが好ましい。

第３特定シーンは、挿入部の抜去時における食道、食道胃接合部、または胃のいずれかであることが好ましい。

プロセッサは、出力された認識済みシーンを用いて、内視鏡観察画像に含まれる病変を検出するための認識処理である病変認識処理を行うことが好ましい。

本発明によれば、病変認識処理で使用するシーンを正確に認識することができる。

内視鏡システムの外観図である。 内視鏡画像処理装置の機能を示すブロック図である。 上部消化管を示す説明図である。 食道、食道胃接合部、胃の観察画像を時系列に沿って示す説明図である。 往路におけるシーン認識部とシーン出力部の機能を示す説明図である。 第１特定シーンが特定シーンメモリに記憶されている場合にシーン出力部が認識済みシーンを変更する説明図である。 第１特定シーンが特定シーンメモリに記憶されている場合にシーン出力部が認識済みシーンを変更しない説明図である。 第１特定シーンが特定シーンメモリに記憶されていない場合にシーン出力部が認識済みシーンを変更しない説明図である。 シーン出力部が確信度を用いて認識済みシーンを変更する場合の説明図である。 シーン出力部が変更後の認識済みシーンを用いて認識済みシーンを変更する場合の説明図である。 胃、十二指腸、胃の観察画像を時系列に沿って示す説明図である。 第１特定シーン及び第２特定シーンが特定シーンメモリに記憶されている場合のシーン出力部の機能を示す説明図である。 復路におけるシーン認識部とシーン出力部の機能を示す説明図である。 第１、第２、及び第３特定シーンが特定シーンメモリに記憶されている場合にシーン出力部が認識済みシーンを変更する説明図である。 往路におけるシーン出力部の機能を示すフローチャートである。 往路における上部消化管の検査順序を示す説明図である。 シーン出力部が検査順序に基づいて認識済みシーンを変更する場合の説明図である。

図１に示すように、内視鏡システム１０は、内視鏡１２と光源装置１５と内視鏡画像処理装置１６とモニタ１８とコンソール１９とを有する。内視鏡１２は、被検体の体腔内に挿入する挿入部１３と内視鏡１２を操作するための操作部１４とを有する。操作部１４を操作することにより、挿入部１３の先端部１３ａが所望の方向に向けられ、先端部１３ａに内蔵された、ＣＣＤ(Charge Coupled Device)などの撮像素子を有する撮影部（図示しない）によって、被検体の体腔内を撮影した観察画像を取得する。光源装置１５は、観察対象の照明に用いる通常光や特殊光などの照明光の制御を行う。内視鏡画像処理装置１６は、モニタ１８及びコンソール１９と電気的に接続している。モニタ１８は、内視鏡画像処理装置１６から出力された観察画像や観察画像に付帯する情報などを表示する。コンソール１９は、関心領域の指定や機能設定などの入力操作を受け付ける。

図２に示すように、内視鏡画像処理装置１６は、観察画像取得部２０とシーン認識部２１と特定シーンメモリ２２とシーン出力部２３と病変認識処理部２４とを有する。内視鏡画像処理装置１６には、病変認識処理に関するプログラムがプログラム用メモリに組み込まれている。プロセッサによって構成される制御部（図示しない）によってそのプログラムが動作することで、観察画像取得部２０、シーン認識部２１、特定シーンメモリ２２、シーン出力部２３、及び病変認識処理部２４の機能が実現する。

観察画像取得部２０は、観察対象を撮影した観察画像を取得する。シーン認識部２１は、観察画像のシーンを認識する。特定シーンメモリ２２は、シーン認識部２１により認識した認識済みシーンが往路Ｆの第１特定シーンである場合は、認識済みシーンを第１特定シーンとして記憶する。シーン出力部２３は、特定シーンメモリ２２に第１特定シーンが記憶され、且つ、認識済みシーンが第１特定シーンよりも挿入部１３の移動方向における奥側のシーンである場合は、認識済みシーンを変更せずに出力し、特定シーンメモリ２２に第１特定シーンが記憶され、且つ、認識済みシーンが第１特定シーンよりも挿入部１３の移動方向における手前側のシーンである場合は、認識済みシーンを変更して出力する。病変認識処理部２４は、シーン出力部２３から出力した認識済みシーンが入力され、入力された認識済みシーンを用いて、各シーンに対応する病変認識処理を行う。なお、往路Ｆとは、挿入部１３の移動方向において、挿入部１３を挿入する方向のことを指す。

図３に示すように、内視鏡１２による上部消化管のスクリーニングは、内視鏡１２の先端部１３ａを被検体の口から押し込むように挿入し、往路Ｆの検査を、咽頭Ｂ１、食道Ｂ２、食道胃接合部（esophagogastric junction:EGJ）Ｂ３、胃Ｂ４、十二指腸Ｂ５の順序で行う。内視鏡１２の先端部１３ａが十二指腸Ｂ５まで到達したら、内視鏡１２の先端部１３ａを引き抜くようにして、復路Ｒの検査を、十二指腸Ｂ５、胃Ｂ４、食道胃接合部Ｂ３、食道Ｂ２、咽頭Ｂ１の順序で行う。なお、復路Ｒとは、挿入部１３を挿入する方向に対して反対方向であり、挿入部１３を抜去する方向のことを指す。

ユーザーは、内視鏡１２の先端部１３ａを押し込んでいくことにより上部消化管内の各部位を通過させながら、各部位の観察画像を撮影する。観察画像取得部２０は撮影された観察画像を取得する。図４は、ある時刻ｔにおける観察画像である。時刻ｔ１、ｔ２、ｔ３において、観察画像取得部２０が取得した観察画像には、それぞれ食道Ｂ２、食道胃接合部Ｂ３、胃Ｂ４の画像が撮影されている。なお、時刻ｔに付される数字は、大きくなるほど、時間的に後であることを示している。

シーン認識部２１は、各時刻に得られた観察画像に対して、シーンを認識することによって、認識済みシーンを取得する。シーン認識部２１は、色調や形状など粘膜の見え方の違いに基づいて認識済みシーンを取得するが、観察画像内に病変が存在し色調が通常と異なる場合などに適正なシーンを認識できない場合がある。適正な認識済みシーンが得られない場合には、シーン出力部２３は、認識済みシーンを変更する。なお、適正な認識済みシーンである場合は、シーン出力部２３は、認識済みシーンを変更せずに出力する。

病変認識処理部２４は、観察画像取得部２０により取得された観察画像に対して、シーン出力部２３から出力されたシーン用に設定された病変認識処理を行う。病変認識処理は、観察画像について病変の有無や悪性度などを検出するものである。病変認識処理としては、機械学習などに基づく学習モデルを用いた処理であってもよい。機械学習としては、CNN（Convolutional Neural Network）を用いることが好ましい。本実施形態においては、シーン出力部２３から実際のシーンに適した正確な認識済みシーンが病変認識処理部２４に入力されるため、病変認識処理部２４では、実際のシーンに合った適切な病変認識処理を行うことができる。なお、内視鏡１２によりスクリーニングする際に、観察画像が取得されるのと並行して、病変認識処理が行われることが好ましい。

以下、シーン認識部２１とシーン出力部２３の詳細を説明する。特定シーンメモリ２２は、シーン認識部２１が観察画像のシーンを特定のシーンである特定シーンとして認識した場合に、いずれの特定シーンを認識したかを記憶する。特定シーンメモリ２２には、第１特定シーンとして往路Ｆの食道胃接合部Ｂ３、第２特定シーンとして十二指腸Ｂ５、第３特定シーンとして復路Ｒの食道胃接合部Ｂ３が、記憶される。

内視鏡１２が挿入され、図５の時刻ｔ１において、内視鏡１２の先端部１３ａが食道胃接合部Ｂ３に到達していない間は、シーン認識部２１は食道胃接合部Ｂ３を認識しないため、特定シーンメモリ２２はいずれの特定シーンも記憶しない。図５の時刻ｔ２において、内視鏡１２の先端部１３ａが食道胃接合部Ｂ３に到達し、シーン認識部２１が食道胃接合部Ｂ３を認識すると、特定シーンメモリ２２は、食道胃接合部Ｂ３を第１特定シーンとして記憶する。

食道胃接合部Ｂ３を通過した後は、シーン認識部２１は、図５の時刻ｔ３のように、シーンが胃Ｂ４であると認識するが、画像内に病変などが存在する場合などに、適正なシーンを認識しない場合がある。例えば、図５の時刻ｔ４では、実際には胃Ｂ４が撮影されているが、シーン認識部２１は、食道Ｂ２であると誤認識している。

そこで、第１特定シーンを特定シーンメモリ２２に記憶した後は、シーン出力部２３は、特定シーンメモリ２２が第１特定シーンを記憶している場合であっても、認識済みシーンが、第１特定シーンよりも奥側である場合には、時刻ｔ４の認識済みシーンの変更は行わない。一方、シーン出力部２３は、特定シーンメモリ２２に第１特定シーンが記憶されており、且つ、認識済みシーンが、第１特定シーンよりも手前側である場合には、時刻ｔ４における観察画像の認識済みシーンを、食道Ｂ２から実際の撮影シーンである胃Ｂ４に変更する。このように、シーン出力部２３は、シーン認識部２１から認識済みシーンの情報を受け取り、特定シーンメモリ２２を参照して、認識済みシーンと第１特定シーンとを比較することにより、最終的なシーンを出力する。

より具体的には、図６に示すように、図５の時刻ｔ４において、シーン出力部２３は、特定シーンメモリ２２に第１特定シーンが記憶されており、且つ、シーン認識部２１から受け取る認識済みシーンが食道Ｂ２である場合、食道Ｂ２は第１特定シーンの食道胃接合部Ｂ３の手前側であることから、認識済みシーンを食道Ｂ２から胃Ｂ４に変更する。

一方、図７に示すように、図５の時刻ｔ３において、シーン出力部２３は、特定シーンメモリ２２に第１特定シーンが記憶されており、且つ、シーン認識部２１から受け取る認識済みシーンが胃Ｂ４である場合、胃Ｂ４は第１特定シーンの食道胃接合部Ｂ３より奥側のシーンであることから、認識済みシーンの変更は行わない。

また、図８に示すように、図５の時刻ｔ１においては、内視鏡１２の先端部１３ａが、第１特定シーンである食道胃接合部Ｂ３を通過する前であり、特定シーンメモリ２２に何も記憶されていない場合には、シーン出力部２３は、認識済みシーンを変更せずに出力する。

図９に示すように、シーン出力部２３は、シーンの確からしさを表す確信度を用いて、認識済みシーンを変更してもよい。例えば、第１特定シーンとして食道胃接合部Ｂ３が特定シーンメモリ２２に記憶され、且つ、認識済みシーンが食道Ｂ２である場合は、シーン出力部２３は、食道胃接合部Ｂ３より奥側のシーンのうち、確信度が高いシーンに変更する。

食道胃接合部Ｂ３より奥側のシーンとしては、胃Ｂ４または十二指腸Ｂ５がある。シーン認識部２１は、観察画像に基づいてシーンの確信度を算出する。図９に示すように、胃Ｂ４である確信度が「７０％」、十二指腸Ｂ５である確信度が「３０％」である場合には、確信度の高い胃Ｂ４に認識済みシーンを変更することが好ましい。確信度としては、各部位毎の色調を数値化したものを用いることができる。例えば、胃と十二指腸の表面の色調を比較すると、胃の表面は赤味が強く十二指腸は黄色味が強いといった各部位の特徴があり、このような色情報に基づいて確信度を算出することができる。他の方法として、内視鏡１２の挿入長と被検体の身長など体格に関する情報とを対応付けた対応関係に基づいて確信度を算出してもよい。

図１０に示すように、シーン出力部２３は、認識済みシーンを変更する場合に、シーン出力部２３によって変更された認識済みシーンの情報を用いることができる。例えば、時刻ｔ４の認識済みシーンが食道Ｂ２から胃Ｂ４に変更された場合には、シーン出力部２３は、時刻ｔ４の次の時刻ｔ５の認識済みシーン（食道Ｂ２）と時刻ｔ４の認識済みシーン（胃）とを比較して異なっている場合には、時刻ｔ５の認識済みシーンを時刻ｔ４の認識済みシーンに変更するようにしてもよい。

図１１に示すように、内視鏡１２の先端部１３ａが、往路Ｆの折り返しとなる十二指腸Ｂ５まで到達すると、十二指腸Ｂ５を、往路の折り返しに対応する第２特定シーンとして、特定シーンメモリ２２に記憶する。図１２に示すように、シーン出力部２３は、特定シーンメモリ２２に第１特定シーン及び第２特定シーンが記憶されている場合には、認識済みシーンを変更しない。例えば、時刻ｔ６の認識済みシーンである胃Ｂ４は、変更しない。

内視鏡１２の先端部１３ａが、復路Ｒの食道胃接合部Ｂ３に到達すると、食道胃接合部Ｂ３を復路Ｒの第３特定シーンとして記憶する。図１３及び図１４に示すように、シーン出力部２３は、特定シーンメモリ２２に第１特定シーンと第２特定シーンと第３特定シーンとが記憶され、且つ、時刻ｔ７の認識済みシーンが、第３特定シーンよりも奥側の胃Ｂ４である場合には、認識済みシーンを、第３特定シーンよりも手前側の食道Ｂ２または咽頭Ｂ１のいずれかのシーンに変更する。一方、シーン出力部２３は、特定シーンメモリ２２に第１特定シーンと第２特定シーンと第３特定シーンとが記憶されている場合であっても、認識済みシーンが第３特定シーンよりも手前側である場合には、時刻ｔ７の認識済みシーンの変更を行わない。なお、特定シーンメモリ２２に第１特定シーンと第２特定シーンと第３特定シーンとが記憶されている場合の認識済みシーンの変更についても、前述したような方法で、確信度を用いて可能性の高いシーンに変更することや、シーン出力部２３によって変更された認識済みシーンを用いて、その後に認識された認識済みシーンを変更することができる。

図１５は、往路Ｆにおけるシーン出力部２３の処理の流れをフローチャートで示したものである。なお、復路Ｒにおいても同様の処理が行われるため、ここでは往路Ｆについてのみ説明する。まず、認識済みシーンが、シーン認識部２１からシーン出力部２３に入力される（ステップＳ１）。シーン出力部２３は、特定シーンメモリ２２の記憶情報に第１特定シーンが記憶されているか否かを判定する（ステップＳ２）。特定シーンが記憶されていない場合、認識済みシーンが、第１特定シーンであれば特定シーンメモリ２２に記憶し（ステップＳ３及びＳ４）、第１特定シーンでなければ認識済みシーンを変更せずに出力する（ステップＳ７）。第１特定シーンが記憶されている場合、または特定シーンメモリ２２に第１特定シーンを記憶した後で、認識済みシーンと第１特定シーンの順序を比較し（ステップＳ５）、認識済みシーンが第１特定シーンよりも手前側のシーンであれば、認識済みシーンを変更して出力する（ステップＳ６）。また、認識済みシーンが第１特定シーンよりも奥側のシーンであれば、認識済みシーンを変更せずに出力する（ステップＳ７）。

なお、上部消化管のスクリーニングは、例えば、往路Ｆにおいては、手前側にある咽頭Ｂ１から奥側の十二指腸Ｂ５に向かうように、一定の方向に行われるから、観察するシーンの順序を検査順序３０として記憶し、特定シーンと認識済みシーンの順序が検査順序３０に従うように、認識済みシーンを変更してもよい。図１６に示すように、往路Ｆの検査順序３０において、第１特定シーンである食道胃接合部Ｂ３の次のシーンは胃Ｂ４である。図１７に示すように、第１特定シーンとして食道胃接合部Ｂ３が記憶され、且つ、認識済みシーンが第１特定シーンより手前側である場合に、検査順序３０に基づいて、認識済みシーンを食道Ｂ２から胃Ｂ４に変更する。なお、検査順序３０は、内視鏡画像処理装置１６内部の病変認識処理部２４や、内視鏡画像処理装置１６に設けたメモリに記憶してもよいし、外部の内視鏡情報管理システムなどに記憶してもよい。

なお、シーン認識部２１が、第１特定シーンとして食道胃接合部Ｂ３を認識した後の認識済みシーンが第１特定シーンに対応付けられたシーンでない場合に、認識済みシーンを第１特定シーンより奥側のシーンに変更することが好ましい。例えば、食道胃接合部Ｂ３に対応付けられたシーンが胃Ｂ４及び十二指腸Ｂ５である場合に、第１特定シーンとして食道胃接合部Ｂ３を認識した後の認識済みシーンを、胃Ｂ４または十二指腸Ｂ５に変更することが好ましい（図３等参照）。また、例えば、上部消化管のスクリーニング検査をしているときに、シーン認識部２１が、認識済みシーンとしてＳ状結腸など上部消化管以外のシーンを認識した場合は、シーン出力部２３は、認識済みシーンを上部消化管に含まれる胃Ｂ４または十二指腸Ｂ５に変更することが好ましい。

また、例えば、食道胃接合部Ｂ３に対応付けられたシーンが胃Ｂ４である場合に、先端部１３ａが十二指腸Ｂ５に到達するまでの間は、第１特定シーンとして食道胃接合部Ｂ３を認識した後の認識済みシーンが胃Ｂ４と異なる場合は、認識済みシーンを胃Ｂ４に変更してもよい（図３等参照）。同様に、復路Ｒの検査においても、十二指腸Ｂ５に対応付けられたシーンが胃Ｂ４である場合に、先端部１３ａが食道胃接合部Ｂ３に到達するまでの間は、第２特定シーンとして十二指腸Ｂ５を認識した後の認識済みシーンが胃Ｂ４と異なる場合は、認識済みシーンを胃Ｂ４に変更してもよい。

なお、本実施形態においては、往路Ｆの第１特定シーンと復路Ｒの第３特定シーンとを同じ食道胃接合部Ｂ３としているが、第１特定シーンを食道胃接合部Ｂ３、第３特定シーンを食道Ｂ２とするように、第１特定シーンと第３特定シーンとが異なっていてもよい。

本実施形態において、観察画像取得部２０、シーン認識部２１、シーン出力部２３、病変認識処理部２４といった各種の処理を実行する処理部（processing unit)のハードウェア的な構造は、次に示すような各種のプロセッサ（processor）である。各種のプロセッサには、ソフトウエア（プログラム）を実行して各種の処理部として機能する汎用的なプロセッサであるＣＰＵ（Central Processing Unit)、ＧＰＵ（Graphical Processing Unit）、ＦＰＧＡ (Field Programmable Gate Array) などの製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device:ＰＬＤ）、各種の処理を実行するために専用に設計された回路構成を有するプロセッサである専用電気回路などが含まれる。

１つの処理部は、これら各種のプロセッサのうちの１つで構成されてもよいし、同種または異種の２つ以上のプロセッサの組み合せ（例えば、複数のＦＰＧＡ、ＣＰＵとＦＰＧＡの組み合わせ、またはＣＰＵとＧＰＵの組み合わせなど）で構成されてもよい。また、複数の処理部を１つのプロセッサで構成してもよい。複数の処理部を１つのプロセッサで構成する例としては、第１に、クライアントやサーバなどのコンピュータに代表されるように、１つ以上のＣＰＵとソフトウエアの組み合わせで１つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。第２に、システムオンチップ（System On Chip:ＳｏＣ）などに代表されるように、複数の処理部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の処理部は、ハードウェア的な構造として、上記各種のプロセッサを１つ以上用いて構成される。

さらに、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子などの回路素子を組み合わせた形態の電気回路（circuitry）である。また、記憶部のハードウェア的な構造はＨＤＤ（Hard Disc Drive）やＳＳＤ（Solid State Drive）などの記憶装置である。

１０ 内視鏡システム
１２ 内視鏡
１３ 挿入部
１３ａ 先端部
１４ 操作部
１５ 光源装置
１６ 内視鏡画像処理装置
１８ モニタ
１９ コンソール
２０ 観察画像取得部
２１ シーン認識部
２２ 特定シーンメモリ
２３ シーン出力部
２４ 病変認識処理部
３０ 検査順序

Claims (13)

1. プロセッサを備える内視鏡画像処理装置であって、
   前記プロセッサは、
   被検体の体腔内に挿入される挿入部を有する内視鏡により撮影された前記体腔内の観察画像である内視鏡観察画像を取得し、
   前記内視鏡観察画像を用いてシーンを認識し、
   前記プロセッサにより認識された認識済みシーンが前記挿入部の挿入時に認識される第１特定シーンである場合は、前記認識済みシーンを前記第１特定シーンとして特定シーンメモリに記憶し、
   前記特定シーンメモリに前記第１特定シーンが記憶され、且つ、前記認識済みシーンが前記第１特定シーンよりも前記挿入部の移動方向における奥側の前記シーンである場合は、前記認識済みシーンを変更せずに出力し、前記特定シーンメモリに前記第１特定シーンが記憶され、且つ、前記認識済みシーンが前記第１特定シーンよりも前記挿入部の前記移動方向における手前側の前記シーンである場合は、前記認識済みシーンを前記第１特定シーンよりも前記奥側の前記シーンに変更して出力する内視鏡画像処理装置。
2. 前記プロセッサは、前記特定シーンメモリに前記第１特定シーンが記憶され、且つ、前記認識済みシーンが前記第１特定シーンに対応づけられた前記シーンでない場合は、前記内視鏡の先端部が、前記第１特定シーンに対応づけられた前記シーンよりも奥側の部位に達するまでの間、前記認識済みシーンを前記第１特定シーンに対応づけられた前記シーンに変更する請求項１に記載の内視鏡画像処理装置。
3. 前記プロセッサは、前記認識済みシーンを前記第１特定シーンよりも前記奥側の前記シーンのうち確信度の高い前記シーンに変更する請求項１記載の内視鏡画像処理装置。
4. 前記プロセッサは、前記認識済みシーンが、前記挿入部の前記移動方向において前記挿入部が折り返す第２特定シーンである場合は、前記認識済みシーンを前記第２特定シーンとして前記特定シーンメモリに記憶する請求項１から３のいずれか一項に記載の内視鏡画像処理装置。
5. 前記プロセッサは、前記特定シーンメモリに前記第２特定シーンが記憶されている場合は、前記認識済みシーンを変更せずに出力する請求項４に記載の内視鏡画像処理装置。
6. 前記プロセッサは、前記認識済みシーンが前記挿入部の抜去時に認識される第３特定シーンである場合は、前記認識済みシーンを前記第３特定シーンとして前記特定シーンメモリに記憶する請求項１から５のいずれか一項に記載の内視鏡画像処理装置。
7. 前記プロセッサは、前記認識済みシーンが前記第３特定シーンよりも前記奥側の前記シーンである場合は、前記認識済みシーンを変更して出力する請求項６に記載の内視鏡画像処理装置。
8. 前記プロセッサは、前記認識済みシーンを変更する場合に、前記プロセッサにより変更された前記認識済みシーンを用いて、前記認識済みシーンを変更する請求項１から７のいずれか一項に記載の内視鏡画像処理装置。
9. 前記シーンには、少なくとも咽頭、食道、食道胃接合部、胃、十二指腸が含まれる請求項１から８のいずれか一項に記載の内視鏡画像処理装置。
10. 前記第１特定シーンは、前記挿入部の前記挿入時における食道、食道胃接合部、胃のいずれかである請求項１から９のいずれか一項に記載の内視鏡画像処理装置。
11. 前記第２特定シーンは、十二指腸である請求項４または５に記載の内視鏡画像処理装置。
12. 前記第３特定シーンは、前記挿入部の前記抜去時における食道、食道胃接合部、胃のいずれかである請求項６または７に記載の内視鏡画像処理装置。
13. 前記プロセッサは、出力された前記認識済みシーンを用いて、前記内視鏡観察画像に含まれる病変を検出するための認識処理である病変認識処理を行う請求項１から１２のいずれか一項に記載の内視鏡画像処理装置。
    

Images