JP4274854B2

JP4274854B2 - 内視鏡挿入形状解析装置

Info

Publication number: JP4274854B2
Application number: JP2003162844A
Authority: JP
Inventors: 克己平川
Original assignee: Olympus Corp
Current assignee: Olympus Corp
Priority date: 2003-06-06
Filing date: 2003-06-06
Publication date: 2009-06-10
Anticipated expiration: 2023-06-06
Also published as: JP2004358095A

Description

【０００１】
【発明の属する技術分野】
本発明は、内視鏡挿入部の体腔内での挿入形状を解析して、この挿入形状データを用いて内視鏡の挿入操作性を向上させる内視鏡挿入形状解析装置に関する。
【０００２】
【従来の技術】
一般に電子内視鏡は、先端に電子撮像素子を設けた細長で可撓性を有する挿入部を有し、この挿入部を被検体である体腔内の管腔に外部から挿入し、挿入部先端の電子撮像素子で撮像生成した画像信号を基にモニタ画面に再生される画像から管腔内を観察したり、及び挿入部に設けられた鉗子チャンネルから挿入された処置用鉗子で生体組織の採取や治療処置を行うようになっている。
【０００３】
ところで、体腔内の管腔は、例えば、大腸や小腸等のように曲がった管腔内に内視鏡を挿入観察する際に、内視鏡挿入部が管腔のどの位置まで挿入されているか、あるいは内視鏡挿入部がどのような形状になっているか判明すると、内視鏡による観察処置の操作性が向上する。
【０００４】
このため内視鏡の挿入部が管腔内に挿入された位置や、挿入形状等を被検体である人体に無害で、いかなる管腔でも使用できる内視鏡の形状検出装置が提案されている。
【０００５】
例えば、複数の第１のコイルからなるソースコイルと、このソースコイルの複数の第１のコイルからの磁界を検出する複数の第２のコイルからなるセンスコイルと、前記ソースコイルまたはセンスコイルのいずれか一方を体腔内に挿入される内視鏡の挿入部に配置し、前記センスコイルで検出したソースコイルの磁界に基づいて、内視鏡挿入部の形状を推定する形状推定手段とを有する内視鏡形状検出装置において、前記形状推定手段で推定した挿入部形状からループ形状を検出し、そのループ形状が検出されると警告を発生する内視鏡形状検出装置がある (例えば、特許文献１参照)。
【０００６】
【特許文献１】
特開２０００−１７５８６１号公報（カラム００１１乃至カラム００４９、図１乃至図１０）。
【０００７】
【発明が解決しようとする課題】
従来、内視鏡による被検体の検査における術者の意識は、主に管腔の観察部位を撮像生成した内視鏡画像に集中し、必要に応じて内視鏡挿入部の形状検出装置で生成表示される挿入部形状画像を見るというスタイルが一般的である。
【０００８】
この内視鏡検査において、挿入部の形状がループを形成した際に、そのループが形成されたことを検出して警告を発して術者に注意を促す内視鏡挿入支援機能を有する内視鏡形状検出装置が上記特許文献１に提案されている。
【０００９】
更に、挿入性を向上すべく、実際に挿入される内視鏡挿入部の動きに応じた情報提供を行ったり、内視鏡の挿入方法や操作指示等を示す情報提供を行うことが望まれている。
【００１０】
本発明は、これらの事情に鑑みてなされたもので、内視鏡挿入部の挿入形状を解析し、内視鏡の挿入性の向上につながる、大腸内での内視鏡挿入操作による大腸伸展の有無の情報、内視鏡挿入操作を行っている際内視鏡先端に一定以上の角度を与えた状態であるか否かの情報、内視鏡挿入部にループが形成された際にこのループを解除するループ解除方法に関する情報の何れかの情報の提供を行うことができる内視鏡挿入形状解析装置を提供することを目的とする。
【００１１】
【課題を解決するための手段】
前記目的を達成するため本発明の一態様による内視鏡挿入形状解析装置は、体腔内に挿入された内視鏡挿入部の特定の位置を複数検出する位置検出手段と、
前記位置検出手段により検出した位置を時系列的に記憶する位置記憶手段と、
前記位置記憶手段に記憶された位置を基に、内視鏡挿入部の特定の位置の時間的な変動を解析すると共に、内視鏡挿入部の形状を解析する形状解析手段と、
前記解析手段による解析の結果に応じて、大腸内での内視鏡挿入操作による大腸伸展の有無の情報、内視鏡挿入操作を行っている際内視鏡先端に一定以上の角度を与えた状態であるか否かの情報、内視鏡挿入部にループが形成された際にこのループを解除するループ解除方法に関する情報の何れかを提供する情報提供手段と、
を備え、
前記内視鏡挿入部のループ解除方法の情報は、前記内視鏡挿入部の挿入操作時にループが形成された際に、そのループ状態を認識表示すると共に、このループ状態を解除して内視鏡挿入部の直線化を行うための直線化操作方法の情報である
ことを特徴とする。
【００１６】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態について詳細に説明する。本発明に係る内視鏡挿入形状解析装置の第１の実施形態について図１乃至図６を用いて説明する。
【００１７】
図１は本発明に係る内視鏡挿入形状解析を行う画像処理装置を用いた電子内視鏡システムの全体構成を示すブロック図、図２は本発明に係る電子内視鏡システムの画像処理装置における挿入位置座標系を説明する説明図、図３は本発明に係る電子内視鏡システムの内視鏡挿入形状観測装置で生成される挿入位置検出データのデータ構造を説明する説明図、図４は本発明に係る電子内視鏡システムの画像処理装置の第１の実施形態である内視鏡画像や挿入形状データ等の処理作用を説明するフローチャート、図５は本発明に係る電子内視鏡システムの画像処理装置の第１の実施形態である被検体の伸展検出作用を説明するフローチャート、図６は本発明に係る電子内規鏡システムの画像処理装置において、内視鏡検査時にディスプレイに表示される表示画面を説明する説明図である。
【００１８】
最初に本発明の第１の実施形態に係る内視鏡挿入形状を解析する画像処理装置を用いた電子内視鏡システム１を図１を用いて説明する。
【００１９】
電子内視鏡システム１は、内視鏡装置２と、内視鏡挿入形状観測装置３、及び画像処理装置４から構成されている。
【００２０】
内視鏡装置２は、電子内視鏡１２、ビデオプロセッサ１０、光源装置１１、及び観察モニタ１４からなっている。
【００２１】
電子内視鏡１２は、図示していないが、被検体である体腔の管腔内に挿入される細長の挿入部先端に電子撮像素子が設けられ、その電子撮像素子を駆動制御して管腔内の観察部位の撮像映像信号を生成出力させると共に、挿入部内に設けたライトガイドにより管腔内の観察部位を照明する観察光が照射されるようになっている。
【００２２】
更に、電子内視鏡１２の挿入部の先端部分には、湾曲部が設けられ、挿入部基端に設けられた操作部から湾曲操作可能になっている。
【００２３】
更にまた、電子内視鏡１２の操作部には、レリーズスイツチ１２ａが設けられ、かつ、ビデオプロセッサ１０との間で電子撮像素子を駆動制御したり、撮像生成された撮像映像信号を送受信するケーブルと、光源装置１１からの観察光をライトガイドに導くライトガイドケーブル等が設けられている。
【００２４】
また、電子内視鏡１２は、図示していないが、管腔での挿入部の挿入位置や形状を検出するための検出機能が設けられている。この挿入の位置や形状検出機能は、図示していない、内視鏡の挿入部に所定の間隔で設けられた複数のソースコイルと、内視鏡挿入形状観測装置３に設けられた複数のセンスコイルを有するセンスコイルユニット１９からなっている。
【００２５】
ビデオプロセッサ１０は、前記電子内視鏡１２の電子撮像素子を駆動制御すると共に、電子撮像素子で光電変換して撮像生成された動画の映像信号を所定の信号処理を行い、輝度信号や色信号からなるＹ／Ｃ信号、またはＲＧＢ信号等を生成する。
【００２６】
このビデオプロセッサ１０で生成された輝度信号と色信号からなるＹ／Ｃ信号またはＲＧＢ信号は、観察モニタ１４と、画像処理装置１５へと直接出力されるようになっている。
【００２７】
また、前記レリーズスイッチ１２ａが操作されると、撮像画像の静止画像の出力指示が可能となっている。
【００２８】
なお、ビデオプロセッサ１０には、図示していないが、内視鏡検査に関する検査情報を入力する機能を有している。
【００２９】
光源装置１１は、照明光源であるランプと、そのランプの点灯回路等からなり、ランプ点灯時に投射された照明光を前記電子内視鏡１２のライトガイドヘと供給し、挿入部先端から管腔の観察部位へと投射される。
【００３０】
観察モニタ１４は、前記ビデオプロセッサ１０で生成されたＹ／Ｃ信号またはＲＧＢ信号等を基に内視鏡画像を表示するものである。
【００３１】
内視鏡挿入形状観測装置３は、内視鏡装置２の周辺装置であり、電子内視鏡１２に設けられたソースコイルからの磁界を検出するセンスコイルユニット１９と、このセンスコイルユニット１９によって検出された磁界に基づいて内視鏡挿入部の形状を推定する形状処理装置１３と、この形状処理装置１３によって推定された内視鏡挿入部の形状を表示するモニタ（ディスプレイ）１３ｂからなっている。
【００３２】
形状処理装置１３は、ソースコイルを駆動する駆動信号を電子内視鏡１２に出力してソースコイルに磁界を発生させ、この磁界を検出するセンスコイルユニット１９からの検出信号に基づいて、各ソースコイルの位置座標データの算出や、その算出された位置座標データから内視鏡挿入部の形状を推定している。また、推定した内視鏡挿入部の形状をモニタ１３ｂに表示するための挿入部形状画像信号を生成すると共に、画像処理装置４に出力する内視鏡挿入部の形状を示す３次元座標情報、及び形状表示属性等の挿入形状データを生成するように構成されている。
【００３３】
なお、この内視鏡挿入形状観測装置３は、形状処理装置１３で処理生成されてモニタ１３ｂに表示される挿入部形状画像の回転角、拡大縮小率等の形状表示属性を、図示していない操作パネルからの指示入力により、変更可能となっている。
【００３４】
前記形状処理装置１３で生成された挿入形状データは、画像処理装置４へ出力可能となっている。
【００３５】
なお、この内視鏡挿入形状観測装置３は、内視鏡検査中、挿入形状データを連続的に画像処理装置４へ出力すると共に、前記電子内視鏡１２に設けられているレリーズスイツチ１２ａの操作時の挿入形状データのみを出力させることもできる。
【００３６】
画像処理装置４は、パーソナルコンピュータ（以下、単にＰＣと称する）１５と、このＰＣ１５に各種指示入力するためのマウス１６とキーボード１７と、及びＰＣ１５で処理された各種情報データや画像情報を再生表示するディスプレイ１８からなっている。
【００３７】
更に、ＰＣ１５には、前記内視鏡挿入形状観測装置３の形状処理装置１３の通信ポート１３ａから出力される挿入形状データを取り込む通信ポート１５ａ、前記内視鏡装置２のビデオプロセッサ１０の通信ポート１０ａから出力される内視鏡検査情報を取り込む通信ポート１５ｂと、及び前記内視鏡２のビデオプロセッサ１０で生成された動画映像信号を所定の圧縮画像データに変換する動画像入力ボード１５ｃを有している。
【００３８】
つまり、画像処理装置４の動画像入力ボード１５ｃには、前記ビデオプロセッサ１０で生成された動画像の映像信号が入力されて、その動画像の映像信号を所定の圧縮動画映像信号データ、例えば、ＭＪＰＥＧ形式の圧縮画像データに変換して、ＰＣ１５の図示していない記録装置に保存される。
【００３９】
なお、一般的には、内視鏡検査開始前には、ビデオプロセッサ１０から、内視鏡検査に関連する検査情報が入力され、その入力された検査情報データを基に観察モニタ１４に文字や数字の形式で表示されると共に、その検査情報データは、通信ポート１０ａから通信ポート１５ｂを介して、画像処理装置４に送信記録することも可能である。
【００４０】
なお、検査情報とは、例えば、患者の氏名、生年月日、性別、年齢、患者コード、及び検査日時などである。
【００４１】
つまり、画像処理装置４は、必要に応じてビデオプロセッサ１０と接続して、ビデオプロセッサ１０からの各種情報データを受信保存するようになっている。
【００４２】
このような構成の電子内視鏡システム１における内視鏡挿入形状観測装置３における挿入形状データの生成について図２と図３を用いて説明する。
【００４３】
内視鏡挿入形状観測装置３は、前記電子内視鏡１２の電子撮像素子で撮像生成される撮像映像信号の１フレーム毎に電子内視鏡１２の挿入部に内蔵されたＭ個のソースコイルの３次元座標を含む挿入形状データを生成する。この挿入形状データを基に挿入部形状画像を生成して、ディスプレイ１３ｂに表示すると共に、挿入形状データは画像処理装置４に出力供給する。
【００４４】
この内視鏡挿入形状観測装置３で検出するソースコイルの座標系は、図２に示すように、電子内視鏡１２の挿入部に挿入形状推定のためのＭ個のソースコイルが内蔵されており、第ｊフレームの挿入部先端から数えてｉ番目（ただし、ｉ＝０、１、…、Ｍ−１）のソースコイルの３次元座標（Ｘ^ｊ _ｉ，Ｙ^ｊ _ｉ，Ｚ^ｊ _ｉ）を表すようになっている。
【００４５】
この内視鏡挿入形状観測装置３で検出したソースコイルの座標系を示す挿入形状データの構造は、図３に示すように、１つのフレームに関係するデータが１つのパケットとして送信される。１つのパケット内には、挿入形状データの取得作成時刻、表示属性情報、付属情報、ソースコイル座標等のデータからなっている。このソースコイル座標データは、電子内視鏡１２の挿入部に内蔵されているソースコイルの３次元座標が挿入部先端から挿入部の基端に設けられている操作部側に向かって順に並んで配置されるようになっている。尚、内視鏡挿入形状観測装置３の検出範囲外のソースコイルの座標は、所定の定数が設定されるようになっているものとする。
【００４６】
次に、前記画像処理装置４における前記内視鏡装置２のビデオプロセッサ１０からの検査情報と内視鏡画像、及び前記内視鏡挿入形状観測装置３の形状処理装置１３からの挿入形状データの取得記録処理作用、並びに被検体である大腸の伸展検出について、図４乃至図６を用いて説明する。
【００４７】
この処理動作は、画像処理装置４に設けられた検査用アプリケーションをＰＣ１５に展開駆動させることで実現する。
【００４８】
内視鏡検査を始めるにあたり、ビデオプロセッサ１０では検査情報を入力し、画像処理装置４のＰＣ１５では検査用アプリケーションが起動される。この検査用アプリケーションを起動されるとディスプレイ１８には、図６に示す検査ウィンドウ１００と内視鏡画像ウィンドウ１０５が表示されるようになっている。
【００４９】
この画像処理装置４のＰＣ１５に検査用アプリケーションが展開駆動し、前記ディスプレィ１８に検査ウィンドウ１００が表示されると、ＰＣ１５はステップＳ１で、ビデオプロセッサ１０からの検査情報及び内視鏡画像データ、内視鏡挿入形状観測装置３の形状処理装置１３からの挿入形状データを受信保存するモードに設定される。
【００５０】
次に、ＰＣ１５はステップＳ２で、術者がマウス１６またはキーボード１７を操作して、前記検査ウィンドウ１００に表示された検査開始ボタン（図中ＳｔａｒｔＥｘａｍ．と表記）１０１がオン操作されたかどうか判断する。検査開始ボタン１０１がオン操作されるまで待機し、オン操作されるとステップＳ３以降が実行される。
【００５１】
ＰＣ１５はステップＳ３で、通信ポート１５ａを開き、内視鏡挿入形状観測装置３の形状処理装置１３との通信を開始し、ステップＳ４で、通信ポート１５ｂを開き、ビデオプロセッサ１０との通信を開始する。
【００５２】
ＰＣ１５はステップＳ５で、ビデオプロセッサ１０に対して、検査情報の取得コマンドを通信ポート１５ｂからビデオプロセッサ１０の通信ポート１０ａに送信し、この検査情報取得コマンドを受信したビデオプロセッサ１０は、検査情報をＰＣ１５へと送信する。
【００５３】
このステップＳ５でビデオプロセッサ１０から送信され検査情報をＰＣ１５は、ステップＳ６で図示していない記録装置に記録保存する。
【００５４】
次に、ＰＣ１５はステップＳ７で、通信ポート１５ａから形状処理装置１３の通信ポート１３ａに対して挿入形状データの取得コマンドを送信し、その挿入形状データ取得コマンドを受信した形状処理装置１３は、挿入形状データの送信出力を開始する。この送信は、ＰＣ１５と形状処理装置１３の間の通信が終了し、通信ポート１５ａが閉じられるまで続けられる。
【００５５】
ＰＣ１５はステップＳ８で、前記ステップＳ７で形状処理装置１３から送信出力された挿入形状データを受信し、前記ステップＳ６で記録保存した検査情報と関連づけて、ＰＣ１５に設けられている図示していないハードディスクにファイル記録保存する（以下、挿入形状ファイルと称する）。
【００５６】
次に、ＰＣ１５はステップＳ９で、動画像入力ボード１５ｃに前記ビデオプロセッサ１０から入力された動画映像信号をＭＪＰＥＧ形式の圧縮画像データに変換して、前記ステップＳ６で記録保存した検査情報と関連付けて、ＰＣ１５の図示していないハードディスクにファイル記録保存する（以下、画像ファイルと称する）と共に、前記動画像入力ボード１５ｃに入力されている動画像を図６に示す内視鏡画像ウィンドウ１０５の内視鏡画像領域１０６に表示させる。
【００５７】
次に、ＰＣ１５はステップＳ１０で、図５に示すステップＳ２１以降の警告処理が実行されて、この警告処理が終了すると、ＰＣ１５はステップＳ１１で、検査ウィンドウ１００の検査終了ボタン（図中ＥｎｄＥｘａｍ．と表記）１０２が操作されたか判断し、検査終了ボタン１０２が操作されていないと判定されると前記ステップＳ８に戻り、検査終了ボタン１０２が操作されたと判定されると、ステップＳ１２で、通信ポート１５ａ、１５ｂを閉じて形状処理装置１３とビデオプロセッサ１０との情報データの通信を終了させる。
【００５８】
前記ステップＳ１０の警告処理について、図５を用いて説明する。このステップＳ１０の警告処理は、被検体である大腸の伸展検出処理である。前記電子内視鏡１２の挿入部先端がほぼ停止した状態で、内視鏡挿入部の大腸内での挿人長が伸びていれば大腸が伸展していると考えられるために、内視鏡挿入部の挿人長検出により大腸伸展を検出するものである。
【００５９】
前記ＰＣ１５はステップＳ２１で、前記ステップＳ８で取得記録した現時点のフレームの挿入形状データの前のフレームにおける挿入形状データが取得されているか判定し、前フレームの挿入形状データが取得されてないと判定されると、ステップＳ１１以降の処理に移行する。
【００６０】
前記ステップＳ２１で、前フレームの挿入形状データが取得されていると判定されると、ＰＣ１５はステップＳ２２で、前フレームと現時点フレームの挿入形状データから、電子内視鏡１２の挿入部先端の移動量ｄｉｆを数式１から算出する。
【００６１】
【数１】

この数式１により算出される移動量ｄｉｆは、挿入部の先端からｍ個のデータのみを使用している。この移動量ｄｉｆの算出は、数式１に限定されるものではなく、たとえばユークリッド距離を用いてもよい。
【００６２】
前記ステップＳ２２において数式１で算出した移動量ｄｉｆである挿入部先端の移動距離は、ステップＳ２３で所定の閾値と比較され、移動量ｄｉｆである移動距離が所定の閾値より大きいと挿入部先端は挿入移動中と判定してステップＳ１１以降の処理に移行し、閾値よりも小さいと挿入部先端は停止状態と判定されて、ステップＳ２４以降が実行される。
【００６３】
ＰＣ１５はステップＳ２４で、挿入形状観測装置３の形状処理装置１３で検知している現時点のフレームの電子内視鏡１２の挿入部の長さを求める。この電子内視鏡１２の挿入部の長さは、例えば、形状処理装置１３で生成する挿入形状データの有効なソースコイル座標データ数を基に内視鏡挿入部の長さを算出する。
【００６４】
次に、ＰＣ１５はステップＳ２５で、前記ステップＳ２４で算出した現時点のフレームの挿入部の長さと、この現時点のフレームの前のフレームの内視鏡挿入部の長さとを比較する。このステップＳ２５の比較の結果、現フレームの内視鏡挿入部の長さが前フレームの内視鏡挿入部の長さよりも長いと挿入部は挿入移動中と判定してステップＳ１１以降の処理に移行し、現フレームの内視鏡挿入部の長さが前フレームの内視鏡挿入部の長さよりも短いと挿入部は停止もしくは引き抜き状態と判定されて、ステップＳ２６以降が実行される。
【００６５】
ＰＣ１５は前記ステップＳ２５で前フレーム時の挿入部の長さよりも現フレームの挿入部の長さが短いことは、大腸の伸展が生じていないと判定し、ステップＳ２６において、内視鏡の挿入部先端が停止し、かつ、現フレームの内視鏡挿入部の長さが前フレーム時の長さの方が長いことが所定のフレーム数続いたかどうか判定する。
【００６６】
このステップＳ２６で、前記電子内視鏡の挿入部先端が停止状態で、前フレームの挿入部の長さの増加状態が所定のフレーム数続いていないと大腸伸展は生じていないと判定されて、前記ステップＳ１１以降の処理が実行され、前記電子内視鏡の挿入部先端が停止状態で、挿入部の長さの増加状態が所定のフレーム数継続すると大腸伸展が生じたと判定されて、ステップＳ２７が実行される。
【００６７】
ＰＣ１５はステップＳ２７で、大腸の伸展が生じたことを警告するための警告信号を生成して、内視鏡挿入部の形状に関する情報の提供として、警告音を発生したり、図６の検査ウィンドウ１００の警告表示部１１０に警告メッセージを表示させる。尚、警告表示は文字だけでなく、警告図形表示部１１１へのアイコン等の図形表示や、あるいは警告表示を点滅表示させる。
【００６８】
以上説明したように、本発明の画像処理装置は、現フレームと前フレームの複数の挿入形状データにより、実際に挿入されている内視鏡挿入部の動きに応じて内視鏡挿入部の形状に関する情報を提供することができ、観察部位である大腸等の伸展も素早く容易に検出判定して術者に対して速やかに警告認知させることができる。
【００６９】
なお、この画像処理装置４では、挿入形状観測装置３からの挿入形状データを基に、大腸の伸展を検出警告についてのみ説明したが、内視鏡画像と挿入形状データの閲覧を可能とするビューアを用意し、指定した挿入形状データに対して大腸の伸展を検出することも可能である。
【００７０】
次に、電子内視鏡システム１の原|像処理装置４の第２の実施形態を図７乃至図８を用いて説明する。
【００７１】
この第２の実施形態の電子内視鏡システム１の構成は、前述した第１の実施形態と同様で、かつ、画像処理装置４における内視鏡装置２と内視鏡挿入形状観測装置３からの内視鏡画像や挿入形状データの処理方法は、基本的に同じである。
【００７２】
この第２の実施形態で前述した第１の実施形態との相違は、画像処理装置４によるステップＳ１０の警告処理の処理方法が異なり、このステップＳ１０における第２の実施形態の警告処理は、図７に示すステップＳ４１以降の処理が実行される。
【００７３】
前記ＰＣ１５はステップＳ４１で、前記ステップＳ８で取得記録した現時点のフレームの挿入形状データの前のフレームにおける挿入形状データが取得されているか判定し、前フレームの挿入形状データが取得されてないと判定されると、ステップＳ１１以降の処理に移行する。
【００７４】
前記ステップＳ４１で、前フレームの挿入形状データが取得されていると判定されると、ＰＣ１５はステップＳ４２で、前フレームと現時点フレームの挿入形状データから、電子内視鏡１２の挿入部先端の移動量ｄｉｆ１を数式２から算出する。
【００７５】
【数２】

この数式２により算出される移動量ｄｉｆ１は、挿入部の先端からｍ１個のデータのみを使用している。この移動量ｄｉｆ１の算出は、数式２に限定されるものではなく、たとえばユークリッド距離を用いてもよい。
【００７６】
前記ステップＳ４２で数式２で算出した移動量ｄｉｆ１である挿入部先端の移動距離は、ステップＳ４３で所定の閾値と比較され、移動量ｄｉｆ１である移動距離が所定の閾値より大きいと挿入部先端は挿入移動中と判定してステップＳ１１以降の処理に移行し、閾値よりも小さいと挿入部先端は停止状態と判定されて、ステップＳ４４以降が実行される。
【００７７】
ＰＣ１５はステップＳ４４で、前記ステップＳ４２と同様に、前フレームと現時点フレームの挿入形状データから、電子内視鏡１２の挿入部の操作部側からの移動量ｄｉｆ２を数式３から算出する。
【００７８】
【数３】

このステップＳ４４で数式３で算出した移動量ｄｉｆ２である挿入部の操作部側の移動距離は、ステップＳ４５で所定の閾値と比較され、移動量ｄｉｆ２である移動距離が所定の閾値より小さいと挿入部の操作部側は停止中と判定してステップＳ１１以降の処理に移行し、閾値よりも大きいと挿入部の操作部側は移動中と判定されて、ステップＳ４６以降が実行される。
【００７９】
次に、ＰＣ１５はステップＳ４６で、数式４により図８に示すように、現フレームである第ｊフレームと前フレームである第ｊ−１フレームの第ｉ番目のコイル座標を使って挿入部先端の移動の向きと、前フレームである第ｊ−１フレームの第ｉ番目と第ｉ十１番目のコイル座標により挿入部の向きの成す角度Ａｎｇ^ｊ _１を求める。
【００８０】
【数４】

すなわち、図８において（Ｘ^ｊ−１ _ｉ，Ｙ^ｊ−１ _ｉ，Ｚ^ｊ−１ _ｉ）と（Ｘ^ｊ−１ _ｉ−１，Ｙ^ｊ−１ _ｉ−１，Ｚ^ｊ−１ _ｉ−１）が成すベクトルＶｅｃ２の向きが挿入部の向き、（Ｘ^ｊ−１ _ｉ，Ｙ^ｊ−１ _ｉ，Ｚ^ｊ−１ _ｉ）と（Ｘ^ｊ _ｉ，Ｙ^ｊ _ｉ，Ｚ^ｊ _ｉ）が成すベクトルＶｅｃ１の向きが挿入部先端の移動の向きを表す。ここで、ｉはあらかじめ与えているコイル番号を用いる。
【００８１】
次に、ＰＣ１５はステップＳ４７で、前記ステップＳ４６で求めた角度Ａｎｇ^ｊ _１を所定の閾値と比較して電子内視鏡１２の挿入部が挿入部の向きに挿入されているかを判断する。この挿入部の先端の移動方向と、挿入部先端の方向との成す角Ａｎｇ^ｊ _１が、所定の閾値より小さい場合は、術者が電子内視鏡１２の挿入操作を行っている判断して、ステップＳ４８以降が実行され、所定の閾値よりも大きい場合は、電子内視鏡１２の挿入操作が行われていないと判断して前記ステップＳ１１以降の処理に移行する。
【００８２】
前記ステップＳ４７で電子内視鏡１２の挿入操作が行われていると判断されると、ＰＣ１５はステップＳ４８で、電子内視鏡１２の挿入操作を行っている状態が所定のフレーム数続いているかどうかを判断し、所定フレーム数続いていないと判断されると、前記ステップＳ１１以降の処理の移行し、所定フレーム数続いていると判断されると大腸の伸展が起きていると判定されて、ステップＳ４９で、内視鏡挿入部の形状に関する情報の提供として警告を発生させる。警告方法は、たとえば、ＰＣ１５により警告音を発生させたり、図６に示す検査ウィンドウの警告表示部１１０に警告メッセージを表示させるなどが考えられる。また、警告表示は、文字だけでなく、アイコンなどの図形でもよく、かつ、それら文字図形を点滅表示させてもよい。
【００８３】
これにより、被検体である患者の違和感の原因となる可能性がある大腸の伸展の検出が容易となる。
【００８４】
なお、画像処理装置４で、挿入形状観測装置３からの挿入形状データを受信する際に、大腸の伸展を検出警告についてのみ説明したが、内視鏡画像と挿入形状データの閲覧を可能とするビューアを用意し、指定した挿入形状データに対して大腸の伸展を検出することも可能である。
【００８５】
次に、本発明に係る電子内視鏡システムの画像処理装置の第３の実施形態を図９乃至図１０を用いて説明する。
【００８６】
この第３の実施形態の電子内視鏡システム１の構成は、前述した第１の実施形態と同様で、かつ、画像処理装置４における内視鏡装置２と内視鏡挿入形状観測装置３からの内視鏡画像や挿入形状データの処理方法は、基本的に同じである。
【００８７】
この第３の実施形態の前述した第１の実施形態との相違は、電子内視鏡１２の挿入部先端にある角度（アングル）を与えた状態で挿入操作を行った場合の検出処理である。内視鏡挿入部先端にアングルを与えた状態で内視鏡挿入部の挿入方向を観察せずに内視鏡の挿入操作されると、被検体の患者に不快感を与えることになる。この内視鏡挿入先端にアングルを与えた状態での挿入操作を警告するものである。
【００８８】
この内視鏡挿入部先端にアングルを与えた状態での挿入操作の検出は、前述の第１の実施形態と同様に画像処理装置４で設けられる検査アプリケーションとして実現される。この検査アプリケーションがＰＣ１５に起動されると、ディスプレイ１８には図６に示す検査ウィンドウ１００が表示されるが、この検査アプリケーションの動作は、前記ステップＳ１〜Ｓ１２の動作と同じである。ただし、ステップＳ１０で実行する警告処理が図９に示すステップＳ６１以降の処理となる。
【００８９】
前記ＰＣ１５はステップＳ６１で、前記ステップＳ８で取得記録した現時点のフレームの挿入形状データの前のフレームにおける挿入形状データが取得されているか判定し、前フレームの挿入形状データが取得されてないと判定されると、ステップＳ１１以降の処理に移行する。
【００９０】
前記ステップＳ６１で、前フレームの挿入形状データが取得されていると判定されると、ＰＣ１５はステップＳ６２で、前フレームと現時点フレームの挿入形状データから、電子内視鏡１２の挿入部先端の角度Ａｎｇ^ｊ _１を求める。この角度Ａｎｇ^ｊ _１は、数式５により図１０に示すように、内視鏡挿入部先端からｍ個のソースコイルの座標のうち連続した３点を順に選択して角度Ａｎｇ^ｊ _１を求める。なお、Ｖｅｃ３とＶｅｃ４の始点をそろえて考えた角度が大きい方が挿入部先端の屈曲が大きい。
【００９１】
【数５】

次に、ＰＣ１５はステップＳ６３で、前記ステップＳ６２で複数求めた角度Ａｎｇ^ｊ _１を所定の閾値と比較して、その角度Ａｎｇ^ｊ _１のうち所定の閾値よりも大きい値のものがあれば、内視鏡挿入部先端にアングルが与えられていると判断されて、ステップＳ６４以降が実行され、所定閾値よりも大きい角度Ａｎｇ^ｊ _１の値を示すものがないと判断されると前記ステップＳ１１以降の処理に移行する。
【００９２】
前記ステップＳ６３で所定の閾値よりも大きい値を示す角度Ａｎｇ^ｊ _１が存在し、内視鏡挿入部先端にアングルが与えられていると判断されると、ＰＣ１５はステップＳ６４で、挿入形状観測装置３の形状処理装置１３で検知している現時点のフレームの電子内視鏡１２の挿入部の長さを求める。この電子内視鏡１２の挿入部の長さは、例えば、形状処理装置１３で生成する挿入形状データの有効なソースコイル座標データ数を基に内視鏡挿入部の長さを算出する。
【００９３】
次に、ＰＣ１５はステップＳ６５で、前記ステップＳ６４で算出した現時点のフレームの挿入部の長さと、この現時点のフレームの前のフレームの内視鏡挿入部の長さとを比較する。このステップＳ６５の比較の結果、現フレームの内視鏡挿入部の長さが前フレームの内視鏡挿入部の長さよりも長いと挿入部は器官の奥へ挿入移動中と判定してステップＳ６６以降の処理に移行し、現フレームの内視鏡挿入部の長さが前フレームの内視鏡挿入部の長さよりも短いと挿入部は停止もしくは挿入部引き抜き状態と判定されて、ステップＳ１１以降が実行される。
【００９４】
ＰＣ１５は前記ステップＳ６６で、内視鏡挿入部の長さ増加が所定のフレーム数続いたかどうか判定する。
【００９５】
このステップＳ６６で、挿入部の長さの増加状態が所定のフレーム数続いていないと判定されると、前記ステップＳ１１以降の処理に移行し、所定フレーム続いていると判定されると、ステップＳ６７で、内視鏡挿入部先端にアングルを与えた状態で挿入していることを警告するための警告信号を生成して、内視鏡挿入部の形状に関する情報の提供をして警告音を発生したり、図６の検査ウィンドウ１００の警告表示部１１０に警告メッセージを表示させる。尚、警告表示は文字だけでなく、アイコン等の図形表示や、あるいは点滅表示させる。
【００９６】
これにより、現フレームと前フレームの複数の挿入形状データにより、実際に挿入されている内視鏡挿入部の動きに応じて内視鏡挿入部の形状に関する情報を提供することができ、患者の不快感の要因となる内視鏡挿入部先端にアングルを与えた状態での挿入操作を検出警告することが可能となる。また、アングルを与えた状態の挿入操作警告は、画像と形状データの閲覧を可能とするビューアを用意し、指定した挿入形状データに対して同様の警告することも可能である。
【００９７】
次に、本発明に係る内視鏡挿入形状解析装置の第４の実施形態を図１１乃至図１２を用いて説明する。
【００９８】
この第４の実施形態の電子内視鏡システム１の構成は、前述した第１の実施形態と同様で、かつ、画像処理装置４における内視鏡装置２と内視鏡挿入形状観測装置３からの内視鏡画像や挿入形状データの処理方法も基本的に同じである。
【００９９】
この第４の実施形態は、前述した第３の実施形態とは、異なる電子内視鏡１２の挿入部先端に異なるアングルを与えた状態で挿入操作を行った場合の検出処理である。
【０１００】
この内視鏡挿入部先端にアングルを与えた状態での挿入操作の検出は、前述の第３の実施形態と同様に画像処理装置４で設けられる検査アプリケーションとして実現される。この検査アプリケーションがＰＣ１５に起動されると、ディスプレイ１８には図６に示す検査ウィンドウ１００が表示されるが、この検査アプリケーションの動作は、前記ステップＳ１〜Ｓ１２の動作は同じである。ただし、ステップＳ１０で実行する処理が図１１に示すステップＳ８１以降の処理となる。
【０１０１】
前記ＰＣ１５はステップＳ８１で、前記ステップＳ８で取得記録した現時点のフレームの挿入形状データの前のフレームにおける挿入形状データが取得されているか判定し、前フレームの挿入形状データが取得されてないと判定されると、ステップＳ１１以降の処理に移行する。
【０１０２】
前記ステップＳ８１で、前フレームの挿入形状データが取得されていると判定されると、ＰＣ１５はステップＳ８２で、前フレームと現時点フレームの挿入形状データから、電子内視鏡１２の挿入部先端の角度Ａｎｇ^ｊ _１を数式５により図１０に示すように内視鏡挿入部先端からｍ個のソースコイルの座標のうち連続した３点を順に選択して角度Ａｎｇ^ｊ _１を求める。
【０１０３】
次に、ＰＣ１５はステップＳ８３で、前記ステップＳ８２で複数求めた角度Ａｎｇ^ｊ _１を所定の閾値と比較して、その角度Ａｎｇ^ｊ _１のうち所定の閾値よりも大きい値のものがあれば、内視鏡挿入部先端にアングルが与えられていると判断されて、ステップＳ８４以降が実行され、所定閾値よりも大きい角度Ａｎｇ^ｊ _１の値を示すものがないと判断されると前記ステップＳ１１以降の処理に移行する。
【０１０４】
前記ステップＳ８３で所定の閾値よりも大きい値を示す角度Ａｎｇ^ｊ _１が存在し、内視鏡挿入部先端にアングルが与えられていると判断されると、ＰＣ１５はステップＳ８４で、前フレームと現時点フレームの挿入形状データから、電子内視鏡１２の挿入部の操作部の移動の向きと、挿入部操作部側の向きの成す角度を数式４により図８に示すように、現フレームである第ｊフレームと前フレームである第ｊ−１フレームの第ｉ番目のコイル座標を使って挿入部操作部の移動の向きと、前フレームである第ｊ−１フレームの第ｉ番目と第ｉ十１番目のコイル座標により挿入部操作部の向きの成す角度Ａｎｇ^ｊ _１を求める。
【０１０５】
すなわち、図８において（Ｘ^ｊ−１ _ｉ，Ｙ^ｊ−１ _ｉ，Ｚ^ｊ−１ _ｉ）と（Ｘ^ｊ−１ _ｉ−１，Ｙ^ｊ−１ _ｉ−１，Ｚ^ｊ−１ _ｉ−１）が成すベクトルＶｅｃ２の向きが挿入部の向き、（Ｘ^ｊ−１ _ｉ，Ｙ^ｊ−１ _ｉ，Ｚ^ｊ−１ _ｉ）と（Ｘ^ｊ _ｉ，Ｙ^ｊ _ｉ，Ｚ^ｊ _ｉ）が成すベクトルＶｅｃ１の向きが挿入部先端の移動の向きを表す。ここで、ｉはあらかじめ与えているコイル番号を用いる。
【０１０６】
次に、ＰＣ１５はステップＳ８５で、前記ステップＳ８４で求めた角度Ａｎｇ^ｊ _１から電子内視鏡１２の挿入部の操作部が挿入されているか所定の閾値と比較して判断する。この挿入部操作部の移動方向と、挿入部操作部の移動方向との成す角Ａｎｇ^ｊ _１が、所定の閾値より小さい場合は、術者が電子内視鏡１２の挿入部の操作部を挿入操作を行っている判断して、ステップＳ８６以降が実行され、所定の閾値よりも大きい場合は、電子内視鏡１２の挿入部操作部の挿入操作が行われていないと判断して前記ステップＳ１１以降の処理に移行する。
【０１０７】
前記ステップＳ８５で、電子内視鏡１２の挿入部操作部が挿入操作されていると判断されると、ＰＣ１５はステップＳ８６で、数式４により図８に示すように現フレームである第ｊフレームと前フレームである第ｊ−１フレームの第ｉ番目のコイル座標を使って挿入部先端の移動の向きを、前フレームである第ｊ−１フレームの第１番目と第ｉ十１番目のコイル座標により挿入部の向きの成す角度Ａｎｇ^ｊ _１を求める。
【０１０８】
すなわち、図８において（Ｘ^ｊ−１ _ｉ，Ｙ^ｊ−１ _ｉ，Ｚ^ｊ−１ _ｉ）と（Ｘ^ｊ−１ _ｉ−１，Ｙ^ｊ−１ _ｉ−１，Ｚ^ｊ−１ _ｉ−１）が成すベクトルＶｅｃ２の向きが挿入部の向き、（Ｘ^ｊ−１ _ｉ，Ｙ^ｊ−１ _ｉ，Ｚ^ｊ−１ _ｉ）と（Ｘ^ｊ _ｉ，Ｙ^ｊ _ｉ，Ｚ^ｊ _ｉ）が成すベクトルＶｅｃ１の向きが挿入部先端の移動の向きを表す。ここで、ｉはあらかじめ与えているコイル番号を用いる。
【０１０９】
次に、ＰＣ１５はステップＳ８７で、前記ステップＳ８６で求めた角度Ａｎｇ^ｊ _１から電子内視鏡１２の挿入部先端が観察方向と異なる別の方向へ挿入されているかを判断する。この挿入部先端の移動方向の判断は、挿入部先端の方向との成す角Ａｎｇ^ｊ _１が、所定の閾値より大きい場合は、内視鏡の挿入部先端が観察方向と異なる方向に挿入されていると判断する。このステップＳ８７で、内視鏡の挿入部先端が観察方向と異なる方向に挿入されていると判断されるとステップＳ８８以降が実行され、内視鏡の挿入先端が観察方向に挿入されていると判断されると前記ステップＳ１１以降の処理に移行する。
【０１１０】
前記ステップＳ８７で内視鏡の挿入部先端が観察方向と異なる方向に挿入されていると判断されると、ＰＣ１５はステップＳ８８で、観察方向と異なる別の方向への挿入操作が所定のフレーム数続いているどうかを判断し、所定フレーム数続いていないと判断されると、前記ステップＳ１１以降の処理に移行し、所定フレーム数続いていると判断されると内視鏡の操作部が挿入操作され挿入部先端にアングルを与えた状態で挿入操作していると判定されて、ステップＳ８９で、警告を発生させる。警告方法は、たとえば、ＰＣ１５により警告音を発生させたり、図６に示す検査ウィンドウ１００の警告表示部１１０に警告メッセージを表示させるなどが考えられる。また、警告表示は、文字だけでなく、アイコンなどの図形でもよく、かつ、それら文字図形を点滅表示させてもよい。
【０１１１】
これにより、被検体である患者の違和感の原因となるアングルを与えた状態での挿入の検出が容易となる。
【０１１２】
なお、画像処理装置４で、挿入形状観測装置３からの挿入形状データを受信する際に、挿入部先端にアングルを与えた状態の挿入を検出警告についてのみ説明したが、内視鏡画像と挿入形状データの閲覧を可能とするビューアを用意し、指定した挿入形状データに対して同様な警告をすることも可能である。
【０１１３】
次に、本発明に係る内視鏡挿入形状解析装置の第５の実施形態を図１２乃至図１８を用いて説明する。
【０１１４】
この第５の実施形態の電子内視鏡システム１の構成は、前述した第１の実施形態と同様で、かつ、画像処理装置４における内視鏡装置２と内視鏡挿入形状観測装置３からの内視鏡画像や挿入形状データの処理方法は、基本的と同じである。
【０１１５】
この第５の実施形態は、例えば、大腸内視鏡において、内視鏡の挿入部を大腸に挿入していく過程でループを形成することがある。このループは、その形状によりαループ、Ｎループ、γループ等と称せられている。
【０１１６】
このようなループにより被検体である患者に与える違和感を軽減したり、挿入部の挿人性を向上する目的のため、内視鏡挿入部のループを解除して直線化させる操作が行われる。
【０１１７】
このような内視鏡挿入部の挿入操作時にループが形成された際に、そのループ状態を認識表示すると共に、内視鏡挿入部の直線化操作方法を表示することにより、内視鏡挿入部の挿入性の向上と内視鏡検査の時間の短縮化、及び患者の不快感軽減を図るものである。
【０１１８】
この内視鏡挿入部先端に形成されたループの検出は、前述の第１の実施形態と同様に画像処理装置４で設けられる検査アプリケーションとして実現される。この検査アプリケーションがＰＣ１５に起動されると、ディスプレイ１８には図６に示す検査ウィンドウ１００が表示されるが、この検査アプリケーションの動作は、前記ステップＳ１〜Ｓ１２の動作は同じである。ただし、ステップＳ１０で実行する処理が図１２に示すステップＳ１０１以降の処理となる。
【０１１９】
ここで、この第５の実施形態で内視鏡挿入部のループ状態を認識し、直線化させるための内視鏡操作を行う例として、（１）ループが時計、または反時計まわりであるか。ループの回転の向きは、内視鏡挿入部の先端から操作部側に沿った向きと考える。（２）内視鏡挿入部のループ形成部分の先端側と操作部側のどちらが視点側にあるか。の２つを用いる。
【０１２０】
尚、内視鏡挿入形状は、曲線と考えることができるため、ループの認識、回転の向きの判定には、曲線の特徴抽出技術が使用できる。
【０１２１】
そのために、この実施形態の説明においては、簡単のため挿入形状をＸ，Ｙ軸に投影した２次元曲線で考え、例えば、Ｐ形フーリエ記述子を使用する。Ｐ形フーリエ記述子は、電子情報通信学会論文誌Ｖｏｌ．ｊ６７−ＡＮｏ．３に詳述されている。
【０１２２】
この手法は、まず曲線をＶｎ個（Ｖｎは分割数で正数）の線分で分割し、その線分の端点を複素表示して、各点での全曲率関数を定義し、全曲率関数をフーリエ変換して得られたパワースペクトルを曲線の特徴としている。
【０１２３】
また、時計回り及び反時計回りの円状のループ形状のＰ形フーリエ記述子による特徴をあらかじめ記憶しておき、それぞれの形状のパワースペクトルをＣｑ（ｋ）、（ｋ＝０、…、Ｖｎ−１）とする。ｑ＝０は時計回り、ｑ＝１は反時計回りとする。
【０１２４】
ＰＣ１５はステップＳ１０１で、ループ形成候補を決定する。円状のループを形成している場合は、ソースコイルとソースコイルが接近しているため、２つのソースコイルの距離が所定の閾値より小さい部分をループ形成候補とする。
【０１２５】
次に、ＰＣ１５はステップＳ１０２で、ループ形成候補の曲線をＶｎ個の線分に分割し、Ｐ形フーリエ記述子によりパワースペクトルＣ（ｋ）、（ｋ＝０、…、Ｖｎ−１）を求める。Ｖｎ個の線分の端点を挿入部先端側から（Ｐｘ０，Ｐｙ０，Ｐｚ０）、…、（ＰｘＶｎ，ＰｙＶｎ，ＰｚＶｎ）とする。Ｐ形フーリエ記述子では、ｘｙ成分のみを用いる。
【０１２６】
次に、ＰＣ１５はステップＳ１０３で、パワースペクトルＣｑ（ｋ）とパワースペクトルＣ（ｋ）のユークリッド距離を求める。このステップＳ１０３で求められたユークリッド距離は、ステップＳ１０４で、所定の閾値と比較され、求められたユークリッド距離が閾値よりも小さい場合は、ループを形成していると判断される。このループ判断において、Ｃ０（ｋ）とＣ１（ｋ）の両方が閾値より小さければ、小さい方への回転方向と判断する。ループがない場合は、前記ステップＳ１１以降の処理に移行する。
【０１２７】
前記ステップＳ１０４でループがあると判断されると、ＰＣ１５はステップＳ１０５において、（ＰｘＶｎ，ＰｙＶｎ，ＰｚＶｎ）、（ＰｘＶｎ−１，ＰｙＶｎ−１，ＰｚＶｎ−１）、（ＰｘＶｎ−２，ＰｙＶｎ−２，ＰｚＶｎ−２）を用いてループが形成されている平面Ｓを決定する。次に、ステップＳ１０６で、前記平面Ｓの法線ベクトルを求め、内視鏡挿入部を観察する向きを示す視線ベクトルと成す角θを求める。次に、ステップＳ１０７で、挿入部先端側の（Ｐｘ０、Ｐｙ０、Ｐｚ０）の座標を平面Ｓの式に代入して、平面Ｓに対して視点側にあるのか、または視点と反対側にあるのか決定する。
【０１２８】
この平面Ｓの視点側にあるのか、または視点と反対側にあるのかの判断方法は、（１）角θが９０度より大きく、代入結果が正であれば視点側（図１３参照）、（２）角θが９０度より大きく、代入結果が負であれば視点と反対側（図１３参照）、（３）角θが９０度以下であり、代入結果が正であれば視点と反対側（図１４参照）、（４）角θが９０度以下であり、代入結果が負であれば視点側（図１４参照）となる。
【０１２９】
前記ステップＳ１０７のループの方向と挿入部先端と平面Ｓとの関係からステップＳ１０８で、内視鏡の操作方法、つまりループ解除方法を決定する。このループ解除方法の判断基準の例は、次の通りである。
【０１３０】
（１）反時計回りで先端部が視点と反対側の場合、時計回りに内視鏡を回転操作する（図１５参照）、（２）時計回りで先端部が視点側の場合、時計回りに内視鏡を回転操作する（図１６参照）、（３）時計回りで先端部が視点と反対側の場合、反時計回りに内視鏡を回転操作する（図１７参照）、（４）反時計回りで先端部が視点側の場合、反時計回りに内視鏡を回転操作する（図１８参照）。
【０１３１】
次に、ＰＣ１５はステップＳ１０９で、前記ステップＳ１０８で設定されたループ解除方法を内視鏡操作の情報（操作を促す情報）の提供として前記検査ウィンドウ１００の操作方法表示部１１１に表示させる。
【０１３２】
なお、この操作方法表示部１１１の表示は、図６に示すように、矢印などで時計回りや反時計回りに内視鏡回転操作を示す図形やアイコン、または操作説明言葉で表示したり、あるいは、音声による指示を用いることもできる。
【０１３３】
また、画像処理装置４で、挿入形状観測装置３からの挿入形状データを受信する際の解除操作表示を示したが、内視鏡画像と挿入形状データの閲覧を可能とするビューアを用意し、指定した挿入形状データに対して同様な表示を行うことも可能である。
【０１３４】
このように、挿入形状を認識し、ループの状態を認識表示し、その挿入操作の提示により、内視鏡の挿人性向上と内視鏡検査の時間の短縮化、及び患者に与える苦痛軽減となる。
【０１３５】
なお、前記した第１乃至第５の実施形態を実現させる画像処理装置４は、電子内視鏡システム１を構成する１つの機能としたり、もしくは内視鏡挿入形状観測装置３に搭載しても良い。または、前記挿入形状観測装置３、および電子内視鏡システム１を構成する統合した機能とすることもできる。
【０１３６】
さらに、前述の第１と乃至第５の実施形態では、内視鏡挿入部の形状を推定する機構としては、磁気を発生するソースコイル群と磁気を検出するセンスコイル群のうち、いずれか一方を内視鏡挿入部に搭載し、センスコイル群により検出した磁気により形状を推定する例を用いて説明したが、例えば、曲げることにより伝送損失が生じる光ファイバを利用し、この光ファイバを内視鏡挿入部に設けて、光ファイバを透過する光量の変化に応じて挿入部の曲げを検出する方法や、フレキシブル基板に特殊インクを塗布し、基板の曲げに比例して抵抗値が変化する特性を利用する等のその他の検出方法を用いても良い。
【０１３７】
[付記]
以上詳述した本発明の実施形態によれば、以下のごとき構成を得ることができる。
【０１３８】
(付記１) 体腔内に挿入する挿入部を有する内視鏡と、
前記内視鏡挿入部の形状を検出する形状検出手段と、
前記形状検出手段で検出した内視鏡挿入部の形状を複数記憶する形状記憶手段と、
前記形状記憶手段に記憶された複数の内視鏡挿入部の形状を基に、内視鏡挿入部の形状を解析する形状解析手段と、
前記形状解析手段による解析の結果に応じて、内視鏡挿入部の形状に関する情報を提供する情報提供手段と、
を備えたことを特徴とする内視鏡挿入形状解析装置。
【０１３９】
（付記２）体腔内に挿入する挿入部を有する内視鏡と、
前記内視鏡挿入部の形状を検出する形状検出手段と、
前記形状検出手段で検出された内視鏡挿入部の形状を解析する形状解析手段と、
前記形状解析手段による解析の結果に応じて、内視鏡操作の情報を提供する情報提供手段と、
を備えたことを特徴とする内視鏡挿入形状解析装置。
【０１４０】
（付記３）体腔内に挿入する挿入部を有する内視鏡と、
前記内視鏡挿入部の形状を検出する形状検出ステップと、
前記形状検出ステップで検出され,た内視鏡挿入部の形状を複数記憶する形状記憶ステップと、
前記形状記憶ステップで記憶され,た複数の内視鏡の挿入部の形状を基に、内視鏡挿入部の形状を解析する形状解析ステップと、
前記形状解析ステップによる解析の結果に応じて、内視鏡挿入部の形状に関する情報を提供する情報提供ステップと、
を備えたことを特徴とする内視鏡挿入形状解析方法。
【０１４１】
（付記４）体腔内に挿入する挿入部を有する内視鏡と、
前記内視鏡挿入部の形状を検出する形状検出ステップと、
前記形状検出ステップで検出された内視鏡挿入部の形状を解析する形状解析ステップと、
前記形状解析ステップによる解析の結果に応じて、内視鏡操作の情報を提供する情報提供ステップと、
を備えたことを特徴とする内視鏡挿入形状解析方法。
【０１４２】
（付記５）前記形状検出手段は磁界を発生する複数の磁界発生手段と、前記磁界発生手段の磁界を検出する複数の磁界検出手段と、前記磁界発生手段又は磁界検出手段を挿入部に配置し、
前記磁界検出手段の検出結果に基づいて、挿入部の形状を推定する形状推定手段と、からなることを特徴とする付記１又は付記２のいずれかに記載の内視鏡挿入形状解析装置。
【０１４３】
（付記６）前記形状検出手段は、挿入部の特定部分の物理量を検出する手段を複数配置し、前記検出された物理量の結果と配置位置に基づいて挿入部の形状を推定する形状推定手段と、からなることを特徴とする付記１又は付記２のいずれかに内視鏡挿入形状解析装置。
【０１４４】
（付記７）前記挿入部の特定部分の物理量を検出する手段は、複数の歪みを検出するセンサからなることを特徴とする付記６の内視鏡挿入形状解析装置。
【０１４５】
（付記８）前記挿入部の特定部分の物理量を検出する手段は、複数の圧力を検出するセンサからなることを特徴とする付記６の内視鏡挿入形状解析装置。
【０１４６】
（付記９）前記挿入部の特定部分の物理量を検出する手段は、複数の変位を検出するセンサからなることを特徴とする付記項６の内視鏡挿入形状解析装置。
【０１４７】
（付記１０）前記形状解析手段は、前記挿入部の特定部分の移動量を算出する手段と、前記挿入部の特定部分の移動量から挿入部の状態を推定する手段と、からなることを特徴とする付記１の内視鏡挿入形状解析装置。
【０１４８】
（付記１１）前記形状解析手段は、挿入部のループ形状を検出する手段からなることを特徴とする付記２の内視鏡挿入形状解析装置。
【０１４９】
（付記１２）前記情報提供手段は、前記解析手段の結果の情報を表示装置に表示することを特徴とする付記１に記載の内視鏡挿入形状解析装置。
【０１５０】
（付記１３）前記情報提供手段は、前記解析手段の結果の情報を音又は音声によって提示することを特徴とする付記１又は付記１２のいずれかに記載の内視鏡挿入形状解析装置。
【０１５１】
（付記１４）前記操作情報提供手段は、前記解析手段の結果に応じてループ解除の方法の情報を提供することを特徴とする付記２の内視鏡挿入形状解析装置。
【０１５２】
（付記１５）前記操作情報提供手段は、前記解析手段の結果に応じて内視鏡操作の情報を表示装置に表示することを特徴とする付記２又は付記項１４の内視鏡挿入形状解析装置。
【０１５３】
(付記１６) 前記操作情報提供手段は、前記解析手段の結果に応じて内視鏡操作の情報を音又は音声によって提示することを特徴とする付記２、付記１４又は付記１５のいずれかに記載の内視鏡挿入形状解析装置。
【０１５４】
(付記１７) 前記表示装置に表示する情報が文字及び／又は図形であることを特徴とする付記１２又は付記１５のいずれかに記載の内視鏡挿入形状解析装置。
【０１５５】
【発明の効果】
以上説明したように本発明によれば、内視鏡挿入部の挿入形状を解析し、内視鏡の挿入性の向上につながる、大腸内での内視鏡挿入操作による大腸伸展の有無の情報、内視鏡挿入操作を行っている際内視鏡先端に一定以上の角度を与えた状態であるか否かの情報、内視鏡挿入部にループが形成された際にこのループを解除するループ解除方法に関する情報の何れかの情報の提供を行うことができる効果を有する。
【図面の簡単な説明】
【図１】本発明に係る内視鏡挿入形状解析を行う画像処理装置を用いた電子内視鏡システムの全体構成を示すブロック図。
【図２】本発明に係る電子内視鏡システムの画像処理装置における挿入位置座標系を説明する説明図。
【図３】本発明に係る電子内視鏡システムの内視鏡挿入形状観測装置で生成される挿入位置検出データのデータ構造を説明する説明図。
【図４】本発明に係る電子内視鏡システムの画像処理装置の第１の実施形態である内視鏡画像や挿入形状データ等の処理作用を説明するフローチャート。
【図５】本発明に係る電子内視鏡システムの画像処理装置の第１の実施形態である被検体の伸展検出作用を説明するフローチャート。
【図６】本発明に係る電子内視鏡システムの画像処理装置において、内視鏡検査時にディスプレイに表示される表示画面を説明する説明図。
【図７】本発明に係る電子内視鏡システムの画像処理装置の第２の実施形態における内視鏡先端部のアングル検出作用を説明するフローチャート。
【図８】本発明に係る電子内視鏡システムの画像処理装置の第２の実施形態における内視鏡挿入部の向きと挿入部移動向きのなす角を説明する説明図。
【図９】本発明に係る電子内視鏡システムの画像処理装置の第３の実施形態における内視鏡先端部のアングル検出及び警告作用を説明するフローチャート。
【図１０】本発明に係る電子内視鏡システムの画像処理装置の第３の実施形態における内視鏡先端部のアングル検出を説明する説明図。
【図１１】本発明に係る電子内視鏡システムの画像処理装置の第４の実施形態における内視鏡先端部のアングル検出及び警告作用を説明するフローチャート。
【図１２】本発明に係る電子内視鏡システムの画像処理装置の第５の実施形態における内視鏡挿入部のループ検出及びループ解除方法表示作用を説明するフローチャート。
【図１３】本発明に係る電子内視鏡システムの画像処理装置の第５の実施形態における内視鏡挿入部のループの状態を説明する説明図。
【図１４】本発明に係る電子内視鏡システムの画像処理装置の第５の実施形態における内視鏡挿入部のループの状態を説明する説明図。
【図１５】本発明に係る電子内視鏡システムの画像処理装置の第５の実施形態における内視鏡挿入部のループ解除方法を説明する説明図。
【図１６】本発明に係る電子内視鏡システムの画像処理装置の第５の実施形態における内視鏡挿入部のループ解除方法を説明する説明図。
【図１７】本発明に係る電子内視鏡システムの画像処理装置の第５の実施形態における内視鏡挿入部のループ解除方法を説明する説明図。
【図１８】本発明に係る電子内視鏡システムの画像処理装置の第５の実施形態における内視鏡挿入部のループ解除方法を説明する説明図。
【符号の説明】
１…電子内視鏡システム
２…内視鏡装置
３…内視鏡挿入形状観測装置
４…画像処理装置
１０…ビデオプロセッサ
１１…光源装置
１２…電子内視鏡
１３…形状処理装置
１４…観察モニタ
１５…パーソナルコンピュータ（ＰＣ）
１６…マウス
１７…キーボード
１８…ディスプレイ

Claims

体腔内に挿入された内視鏡挿入部の特定の位置を複数検出する位置検出手段と、
前記位置検出手段により検出した位置を時系列的に記憶する位置記憶手段と、
前記位置記憶手段に記憶された位置を基に、内視鏡挿入部の特定の位置の時間的な変動を解析すると共に、内視鏡挿入部の形状を解析する形状解析手段と、
前記解析手段による解析の結果に応じて、大腸内での内視鏡挿入操作による大腸伸展の有無の情報、内視鏡挿入操作を行っている際内視鏡先端に一定以上の角度を与えた状態であるか否かの情報、内視鏡挿入部にループが形成された際にこのループを解除するループ解除方法に関する情報の何れかを提供する情報提供手段と、
を備え、
前記内視鏡挿入部のループ解除方法の情報は、前記内視鏡挿入部の挿入操作時にループが形成された際に、そのループ状態を認識表示すると共に、このループ状態を解除して内視鏡挿入部の直線化を行うための直線化操作方法の情報である
ことを特徴とする内視鏡挿入形状解析装置。
前記形状解析手段は、前記内視鏡挿入部の挿入操作時にループが形成された際に、そのループが形成されたループ形成部の回転の方向と大きさを算出してこのループ形成部のループを検出すると共に、この検出したループ形成部のループが形成される平面の方向を算出しこの算出結果を用いて前記内視鏡挿入部の先端部が前記平面に対して視点側にあるのか又はこの視点側とは反対側にあるのかを判定し、
前記情報提供手段は、前記形状解析手段による前記ループ形成部のループ検出結果と、前記先端部が前記平面に対して視点側にあるのか又はこの視点側とは反対側にあるのかの判定結果を用いて、前記内視鏡挿入部のループ状態を解除して内視鏡挿入部の直線化を行うための直線化操作方法を決定することを特徴とする請求項１に記載の内視鏡挿入形状解析装置。
前記情報提供手段は、反時計回りで前記先端部が視点と反対側にある場合には時計回りに内視鏡を回転操作し、時計回りで前記先端部が視点側にある場合には時計回りに内視鏡を回転操作し、時計回りで前記先端部が視点と反対側にある場合には反時計回りに内視鏡を回転操作し、反時計回りで前記先端部が視点側にある場合には反時計回りに内視鏡を回転操作するといった内視鏡挿入部の直線化操作方法の内のいずれか１つの決定した直線化操作方法を表示装置に文字又は文字及び図形で表示し、又は音又は音声によって提示することを特徴とする請求項２に記載の内視鏡挿入形状解析装置。