JP2011511652A - トラックされた超音波の自動較正のためのシステム及び方法 - Google Patents

トラックされた超音波の自動較正のためのシステム及び方法 Download PDF

Info

Publication number
JP2011511652A
JP2011511652A JP2010533687A JP2010533687A JP2011511652A JP 2011511652 A JP2011511652 A JP 2011511652A JP 2010533687 A JP2010533687 A JP 2010533687A JP 2010533687 A JP2010533687 A JP 2010533687A JP 2011511652 A JP2011511652 A JP 2011511652A
Authority
JP
Japan
Prior art keywords
ultrasound
image
calibration mechanism
calibration
localizer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2010533687A
Other languages
English (en)
Inventor
シェン シュ
ヨヘン クルッケン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV, Koninklijke Philips Electronics NV filed Critical Koninklijke Philips NV
Publication of JP2011511652A publication Critical patent/JP2011511652A/ja
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/52Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00
    • G01S7/52017Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00 particularly adapted to short-range imaging
    • G01S7/5205Means for monitoring or calibrating
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/42Details of probe positioning or probe attachment to the patient
    • A61B8/4245Details of probe positioning or probe attachment to the patient involving determining the position of the probe, e.g. with respect to an external reference frame or to the patient
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/42Details of probe positioning or probe attachment to the patient
    • A61B8/4245Details of probe positioning or probe attachment to the patient involving determining the position of the probe, e.g. with respect to an external reference frame or to the patient
    • A61B8/4254Details of probe positioning or probe attachment to the patient involving determining the position of the probe, e.g. with respect to an external reference frame or to the patient using sensors mounted on the probe
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/48Diagnostic techniques
    • A61B8/483Diagnostic techniques involving the acquisition of a 3D volume of data
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/58Testing, adjusting or calibrating the diagnostic device
    • A61B8/585Automatic set-up of the device
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/88Sonar systems specially adapted for specific applications
    • G01S15/89Sonar systems specially adapted for specific applications for mapping or imaging
    • G01S15/8906Short-range imaging systems; Acoustic microscope systems using pulse-echo techniques
    • G01S15/8934Short-range imaging systems; Acoustic microscope systems using pulse-echo techniques using a dynamic transducer configuration
    • G01S15/8936Short-range imaging systems; Acoustic microscope systems using pulse-echo techniques using a dynamic transducer configuration using transducers mounted for mechanical movement in three dimensions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/58Testing, adjusting or calibrating the diagnostic device
    • A61B8/582Remote testing of the device
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/52Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00
    • G01S7/52017Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00 particularly adapted to short-range imaging
    • G01S7/52053Display arrangements
    • G01S7/52057Cathode ray tube displays
    • G01S7/52074Composite displays, e.g. split-screen displays; Combination of multiple images or of images and alphanumeric tabular information
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10132Ultrasound image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Surgery (AREA)
  • Public Health (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Acoustics & Sound (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Abstract

空間ローカライザ16を用いて超音波振動子又はプローブ12をトラッキングするシステム及び方法は、従来のシステムによって必要とされるものに最小限のハードウェアの追加を伴って自動較正を実現する。画像ベーストラッキングアルゴリズムは画像空間Iにおいて制御点の位置を特定する。無制限数の点が超音波較正のために使用されることができ、高い較正精度を可能にする。提案される較正システム10は単純かつ低コストである。較正は高速であり自動的に実行されることができる。

Description

本出願は、本発明の譲受人に譲渡された2007年11月14日出願のSheng Xu他の"トラックされた超音波の自動較正のためのシステム及び方法"と題する先願の仮出願第60/987809号の利益を主張する。
本発明の実施形態は概して医療システムに関し、より具体的には、トラックされた超音波の自動較正のための方法及び装置に関する。
空間ローカライザを用いて超音波プローブをトラッキングすることは、例えばライブの超音波画像と他の画像モダリティとの融合のために、外科手術及びインターベンショナル処置のナビゲーションで応用される。こうした応用を可能にするためには、トラックされた超音波の較正、すなわちライブの超音波画像と付属された空間トラッカとの空間的関係を決定することが必要である。多くの従来の較正方法は、超音波画像内の制御点を特定するために人の相互作用を必要とするため、時間がかかる。こうした手動方法は、手動で得られた制御点を多く必要とし得るため、高精度を実現することが困難である。一部の最近の較正方法は自動的に較正を実行することができるが、それらは不都合なことに複雑なファントムに依存する。
手術ナビゲーションのために超音波を使用することは、グローバル座標系における振動子のトラッキングを必要とする。通常は光学又は電磁トラッキングセンサーが超音波振動子に付属され、振動子の位置及び方向がトラックされることを可能にする。超音波較正とは、超音波画像と、超音波振動子に付属されるトラッキングデバイス又はセンサとの間の固定変換を決定するための手順をあらわす。
従って、当技術分野におけるこの問題を克服するための改良された方法とシステムが望まれる。
図1は、本開示の一実施形態にかかるトラックされた超音波の自動較正のためのシステムの部分ブロック図である。 図2は、本開示の一実施形態にかかるトラックされた超音波の自動較正のための方法を図示する簡略化された略フロー図である。 図3は、本開示の別の実施形態にかかる画像ベーストラッキングを介して得られる超音波ボリュームの3つの多断面再構成画像ビューを図示する画面表示ビューである。
図面では、類似する参照数字は類似する要素をあらわす。加えて、図面は縮尺通りに描かれていないかもしれないことに留意されたい。
本明細書で使用されるように、トラックされた超音波の較正とは、ライブの超音波画像と付属された空間トラッカとの空間的関係を決定することを意味する。言い換えれば、超音波較正とは、超音波画像と付属されたトラッキングデバイスとの間の固定変換を決定する手順をあらわす。当技術分野における問題に応えて、本開示の実施形態はトラックされた超音波の完全自動較正のための方法を有利に提供する。
図1は本開示の一実施形態にかかるトラックされた超音波の自動較正を実施するための超音波画像システム10の部分ブロック図である。超音波画像システム10は、超音波振動子12、超音波振動子に結合されるトラッカ14、ローカライザ(参照数字16によって全体的に示される)、較正機構18、容器20、及びシステムコントローラ22を有する。トラッカ14は超音波振動子12のエネルギー放出面24に対して所与の位置と方向で超音波プローブ12に結合される。超音波振動子又はプローブ12は、本開示の実施形態を実施するため、及び所与の超音波画像応用の要件を実行するために構成されることができる、任意の適切な手持ち式超音波振動子又はプローブを含むことができる。超音波プローブ12は、画像フィールド(参照数字26によって全体的に示される)における所望の超音波エネルギーの放出のために、表面24に隣接して、その筐体内に位置する超音波振動子(図示せず)を含む。参照数字28で示される機構によってまとめてあらわされる様々な電力及び信号線が、例えば必要に応じて、本明細書に記載された様々な機能及びステップを実行するために、超音波プローブ12、トラッカ14、及びシステムコントローラ22の間に結合される。
較正機構18は、所与のトラックされた超音波較正の要件に従って、液体、ゲル、又は他の適切な水性媒体(参照数字30によって全体的にあらわされる)の体積内、及び様々な位置と方向において、少なくとも部分的に浸漬され、かつ移動可能である。液体、ゲル、又は他の適切な水性媒体の体積30は適切な容器又はタンク20内に包含される。容器又はタンク20は、超音波振動子がエネルギーを放出して、超音波プローブ12の表面24が表面32に接触することに応じて、超音波エネルギーの透過に適した少なくとも1つの表面32を含む。
ローカライザ16はトラッキングジェネレータ34を含み、このトラッキングジェネレータ34は、トラッカ14と較正対象18と関連して使用するためにトラッキングエネルギーを放出するように構成される。一実施形態では、トラッキングジェネレータ34は電磁場発生器を有し、この発生器は参照数字36によって示されるように固定された方向と位置を基準とする。電磁場発生器34は、参照数字38によって全体的に示される、所与のローカライザ空間又は関心体積とも称される関心領域内に電磁場を作り出す。
システムコントローラ22は任意の適切なコンピュータ及び/又は超音波振動子インターフェースを有することができ、このコントローラはさらに、本明細書で論じられるトラックされた超音波の自動較正を実行することに関する本明細書で論じられる様々な機能を実行するための適切な命令をプログラムされる。システムコントローラ22は、例えば(ii)超音波画像システム10の他の要素、又は(ii)超音波画像システム10の外側の1つ以上の遠隔コンピュータシステムに電子的に結合するために、40及び42などの様々な入力/出力信号線を含んでもよい。適切な表示装置44が、例えば所与のトラックされた超音波の自動較正中のシステムオペレータによる使用のために、システムコントローラ22に結合される。さらに、例えば入力/出力装置、ポインティングデバイスなど(図示せず)の追加装置が、必要に応じて、所与のトラックされた超音波の自動較正の実施の1つ以上の部分を実行する上で使用するために、提供されてもよい。加えて、ストレージ(例えば所与のモダリティから事前に得られた画像を含むメモリ又はストレージデバイス)からの画像収集、又はリアルタイム画像収集(例えば所与のモダリティ収集デバイスからのリアルタイム画像)を得るための手段46がシステムコントローラ46に結合される。
本開示の一実施形態によれば、超音波較正の方法は点ベースレジストレーション問題を解くことを含み、ここでは共通点集合の超音波画像座標Pがローカライザ空間におけるそれらの対応座標Pにレジストレーションされる。図1は本明細書で示されるトラックされた超音波の自動較正を実施するために適用可能な様々な座標系の図を含み、ローカライザ空間として座標系L、トラッカ空間として座標系T、及び超音波画像空間として座標系Iを含む。さらに図1に図示されるように、全変換は次式によって与えられる同次変換行列の乗法として表現されることができる。
・P (1)
ここでPとPはそれぞれローカライザ空間と超音波画像の座標系における制御点の座標である。項は、超音波画像内で制御点が特定される時点における、超音波振動子に付属されたトラッカに対するローカライザのリアルタイムトラッキング結果である。項はトラッカと画像間の固定変換である。十分な数の点(N≧3)を仮定すると、は特異値分解(SVD)を用いて解かれることができる。
しかしながら、多くの従来の超音波較正手法は、制御点の画像座標を特定するために人の相互作用を必要とする。この手動手順は時間がかかり、これは不都合なことに超音波誘導システムを商品化する際に問題を引き起こす可能性がある。加えて、正確な超音波較正は多数の制御点を必要とする可能性がある。従って、完全自動較正手法が強く望まれる。加えて、一部の最近の較正手法は完全自動化を実現しているが、そうした較正手法は不都合なことに複雑なファントムに依存する。本開示の実施形態によれば、超音波較正の方法は較正手順と統合された画像処理アルゴリズムを使用することを含む。結果として、超音波較正手順の完全自動化を実現するために、人の相互作用も追加の複雑なハードウェアも必要とされない。
本開示の一実施形態によれば、超音波較正のための方法は、超音波画像空間内の多数の制御点集合の位置を特定するために画像処理アルゴリズムを使用することを含む。結果として、無制限数の制御点が超音波較正のために使用されることができ、それによって高い較正精度を可能にする。加えて、超音波較正の方法を実施するためのシステムは単純かつ低コストである。さらに、超音波較正は高速であり自動的に実行される(すなわち、制御点の手動決定がない)。
実施形態は三次元超音波較正に関して本明細書に記載されるが、実施形態は二次元超音波較正にも使用されることができる。加えて、別の実施形態によれば、リアルタイム(二次元又は三次元)超音波画像は、超音波較正手順の1つ以上の部分を実施するために、超音波診断画像システムから離れたコンピュータに(例えば適切なビデオストリーミング技術を用いて)ストリームされることができる。さらに、超音波画像が二次元である場合は、超音波診断画像システム10の超音波スキャナ又はシステムコントローラ22のビデオ出力信号に含まれる画像のフレーム取込みを介して画像が収集されることができる。
一実施形態によれば、トラックされた針18の少なくとも先端19がゲル又は水30のタンク20の中に沈められる。6自由度(6DOF)トラッカ14が超音波振動子12に取り付けられ、振動子の位置と方向が外部ローカライザ16によってトラックされることを可能にする。同様に、1つのトラッカが針18を備え、例えば、針先端19に一体化される小型センサを使用する。針、特に少なくとも、小型センサを含む針先端19は、振動子に対してタンク内で動かされ、超音波ボリュームにおいて針先端の位置変化をもたらす。針の新しい画像位置を決定するために、ボリューム内の前の位置から新しい位置への針の運動後に、超音波ボリュームの超音波フレームが処理される。加えて、ローカライザ16はこの手順中に(i)針及び(ii)超音波振動子のトラッカの両方をトラックする。
自動超音波較正の方法はさらに、超音波ボリューム内で針先端を特定するために画像レジストレーションを使用することを含む。図2は画像処理アルゴリズム50の一実施例を図示し、その各々は針先端19のテンプレートを、対応する超音波フレーム(52、54、56、及び58)における針先端の現在画像と照合する。フレームの数はN≧3を有する。初期フレーム52に対して、関心体積(VOI)を有するテンプレート62が設定される。画像処理アルゴリズムは次のフレーム54に進み、画像処理を用いて、(フレーム52からの)針先端のテンプレートをフレーム54の画像と照合する。これは参照数字64によって示される照合1に対応する。このプロセスはフレーム56を続け、画像処理を用いて、(初期フレーム52及びフレーム54からの)針先端のテンプレートをフレーム56の画像と照合する。これは参照数字66によって示される照合2に対応する。このプロセスはこのようにして同様に続き、フレーム58を経て、画像処理を用いて、(初期フレーム52、フレーム54、フレーム56、及び任意の追加の介在フレームからの)針先端のテンプレートをフレーム58の画像と照合する。これは参照数字68によって示される照合Nに対応する。
加えて、針の運動は、例えば純平行移動、剛体、又はアフィン変換などのパラメータ化変換によってモデル化されることができる。例えば針が手動で動かされる場合、超音波画像における針の平行移動、回転、及びアーチファクト変化を説明するために剛体又はアフィン変換が使用され得る。針を動かすために3つの直動関節を持つロボットが利用可能な場合は、運動トラッキングアルゴリズムのロバスト性と精度を増加するために、平行移動モデルが使用されるべきである。針の運動が連続的であると仮定すれば、1つの超音波フレームの運動パラメータは、次のフレームの運動を推定するために使用されることができる。局所画像レジストレーション問題は、数値最適化(例えばガウス・ニュートン法)を用いて各個別フレームにおいて解かれる。トラッキングアルゴリズムは高速であり、リアルタイムに実行されることができる。ある実施形態における平均処理時間は、2ギガバイト(2G)のランダムアクセスメモリ(RAM)を持つ3.2GHzワークステーションを用いてフレームあたり約35ms(すなわち28.6Hz)である。適切な運動トラッキングアルゴリズムのある実施例の詳細は、S.Xu,J.Kruecker,S.Settlemier and B.J.Wood,"Real‐time motion tracking using 3D ultrasound"Proc.SPIE Vol.6509,65090X(Mar.21,2007)に見られる。
図2はさらに、参照数字60によって示される変換T(μ)、並びに、変換の推定を確立し(ステップ72)、所与のフレームNにおいて運動トラッキングし(ステップ74)、k≧1として値Nを次の値N+kへ増加し(ステップ76)、及びステップ72においてこのフローを繰り返すための簡略化されたフロー図70を図示する。フレームNのトラッキング結果は、例えば適切な運動トラッキングアルゴリズムを用いて、フレームN+kの運動を推定するために使用される。このサイクルは所望の数のフレームが互いにレジストレーションされるまで繰り返す。
図3は針の先端のソフトウェアトラッキングの一実施形態のスクリーンショット80を示す。3つの画像ビュー(82、84、及び86)は超音波ボリュームの多断面再構成である。ビュー82は所与のフレームのXY断面に対する超音波ボリュームの多断面再構成をあらわす。ビュー84は所与のフレームのZY断面に対する超音波ボリュームの多断面再構成をあらわす。ビュー86は所与のフレームのXZ断面に対する超音波ボリュームの多断面再構成をあらわす。本明細書で論じられるテンプレートマッチング及び画像処理技術を用いて、針先端が自動的に特定され、3つのビュー全てに表示される。様々な画像ビューについて、患者に対する固定座標系に関連して様々な記号が画像ビューに与えられることができる。例えば記号Lは左をあらわすことができ、Rは右をあらわすことができ、Fは足をあらわすことができ、Hは頭部をあらわすことができるなど。三次元画像を見る際に一般的に使用されるように、異なる画像ビュー又はビュー断面間の対応を示すために、照準線も与えられることができる。右下のビュー(又はウィンドウ)88は各超音波フレームにおける(一連のフレームにわたる)テンプレートマッチングの残差を示す。図3のビュー88では、現在の運動トラッキングの残差はその値として17.5を持つと決定された。この値は運動トラッキングの精度を示し、これは許容範囲の外側で起こるトラッキング結果を持つ(すなわち不正確なトラッキング結果に対応する)フレームを含むことを避けるために較正手順で使用されることができる。
加えて、式(1)の記号を用いると、針先端の位置は画像ベーストラッキングの場合Pであり、ローカライザベーストラッキングの場合Pである。そのような点の対の1つは、各超音波画像フレームに対して自動的に計算されることができ、何百又は何千もの点の対の収集を可能にし、これは手動方法と比較して著しく高い精度をもたらす。収集された各フレームにおけるPの手動特定では、点の数が典型的には10から50の範囲に限定される。三次元における針先端の正確な手動特定は約30から60秒かかるため、点の対あたりの時間の節約は約1000倍である。
別の実施形態によれば、超音波較正方法は三次元超音波較正について記載されているが、この方法は二次元超音波較正にも適用可能である。二次元超音波較正の場合、この方法はさらに、例えば針ガイド、又は針の運動を画像面に制限するための他の適切な手段を用いて、針の運動を二次元超音波振動子の画像面に制限することを含む。
別の実施形態によれば、画像ベースアルゴリズムは針と振動子の間の相対運動を検出する。この実施形態では、針は固定位置にあり、超音波振動子が針に対して動かされる。
さらなる実施形態によれば、超音波画像内に安定な特徴を作り出すために適切な任意の器具が、針の代わりに使用されることができる。加えて、さらに別の実施形態では、画像処理アルゴリズムが、各超音波画像における特徴を分割することによって、安定な特徴の位置を特定する。画像分割とは、デジタル画像を多重領域(又は画素の集合)に分割するプロセスをあらわす。一般的に、1つの領域は1つの対象物に対応する。適切な器具の例は、球体、立方体、又は超音波画像内に正確に位置付けられることができる他のものを含むことができる。
さらに、画像処理アルゴリズムは組織運動と器具運動の両方をトラックすることができる。本開示のこの実施形態は、画像誘導手術、特に、超音波画像のガイダンスと融合を必要とする外科的介入の分野に適用されることができる。
既におわかりのように、トラックされた超音波の自動較正のための方法は、(i)ローカライザ空間内の超音波振動子の位置及び方向をトラックし、(ii)ローカライザ空間内の較正機構の位置及び方向をトラックするようにローカライザを構成するステップを有する。超音波の透過に適した超音波ボリュームが提供され、超音波ボリュームはローカライザ空間内に位置付けられる。較正機構は超音波ボリューム内に配置され、超音波振動子及び較正機構の相対位置及び方向が変化するにつれて、超音波プローブを用いて超音波ボリュームの一連の超音波画像が収集される。この方法は、一連の超音波画像の各フレーム内の較正機構の画像ベースの位置及び方向を決定するために、画像処理を利用する。この方法はさらに、(i)一連の超音波画像内の較正機構の画像ベースの位置及び方向、(ii)一連の超音波画像の各選択されたフレームに対するローカライザがトラックした超音波振動子の対応する位置及び方向、並びに(iii)一連の超音波画像の各フレームに対するローカライザがトラックした較正機構の対応する位置及び方向の関数として、トラックされた超音波較正の変換パラメータを計算するステップを含み、変換パラメータはローカライザ座標空間を超音波画像空間に空間的に関連付ける。
一実施形態によれば、ローカライザは、(i)ローカライザ空間内の超音波振動子の位置及び方向をトラックし、(ii)ローカライザ空間内の較正機構の位置及び方向をトラックするように構成される。一実施形態では、超音波振動子は振動子に結合されるトラッカを含み、ローカライザはローカライザ空間内でこのトラッカをトラックする。加えて、較正機構は超音波画像内に少なくとも1つの安定な特徴を作り出すために適切な任意の器具を有する。別の実施形態では、較正機構は針を有し、前記画像処理が、一連の超音波画像の各画像内の針の先端の位置及び方向を決定する。
別の実施形態によれば、この方法は超音波の透過に適した超音波ボリュームを利用し、超音波ボリュームはローカライザ空間内に位置付けられる。超音波ボリュームは、例えば、ゲル及び水から成る群から選択される少なくとも1つを包含するタンクを含むことができる。
超音波ボリューム内に較正機構を配置するステップは、超音波ボリュームを介して較正機構を動かすステップによって、超音波ボリューム内に較正機構を配置するステップを含むことができる。一実施形態では、較正機構を動かすステップは、超音波ボリュームを介して較正機構を動かすために3つの直動関節を持つロボットアームを使用するステップを含む。
一実施形態では、超音波振動子及び較正機構の相対位置及び方向が変化するにつれて、超音波プローブを用いて超音波ボリュームの一連の超音波画像を収集するステップは、一連の超音波画像がNフレームを含み、Nは3以上である(N≧3)ことを有する。一実施形態では、超音波画像は三次元画像を有する。別の実施形態では、超音波画像は二次元画像を有し、この方法はさらに、超音波ボリュームを介する較正機構の運動を二次元画像の画像面に制限するステップを有する。例えば、運動を制限するステップは、その運動を二次元画像面に制限するガイドを使用するステップを含む。さらに別の実施形態では、超音波ボリュームを介して較正機構を動かしながら、超音波振動子を固定されたまま維持することによって、超音波振動子及び較正機構の相対位置及び方向が変化される。
別の実施形態では、一連の超音波画像の各フレーム内の較正機構の画像ベースの位置及び方向を決定するために画像処理を利用するステップは、各フレームに対して、較正機構の画像位置及び画像方向を決定するために超音波画像を処理することによって、較正機構の画像ベースの位置及び方向を決定するステップを有することができる。このステップはさらに、較正機構の画像位置及び画像方向を決定するステップが、較正機構のテンプレートを、一連の超音波画像の画像の各フレーム内の較正機構の現在画像と照合するステップを含むことを有することができる。
さらに別の実施形態では、トラックされた超音波較正の変換パラメータを計算するステップは、(i)一連の超音波画像内の較正機構の画像ベースの位置及び方向、(ii)一連の超音波画像の各フレームに対するローカライザがトラックした超音波振動子の対応する位置及び方向、並びに(iii)一連の超音波画像の各フレームに対するローカライザがトラックした較正機構の対応する位置及び方向の関数として計算するステップを有し、変換パラメータはローカライザ座標空間を超音波画像空間に空間的に関連付ける。計算するステップは、特異値分解(SVD)を用いて変換パラメータを解くステップを含むことができる。加えて、計算するステップはさらに、各超音波画像フレームに対して点の対を自動的に計算するステップを含むことができ、点の対は(i)較正機構の特定可能部分の画像ベーストラッキング点P及び(ii)超音波振動子のローカライザベーストラッキング点Pを含む。別の実施形態では、較正機構は針を有し、針の特定可能部分は針の先端を有する。
なおもさらなる実施形態では、較正機構の運動は連続運動であるように構成され、この方法はさらに、較正機構の運動をパラメータ化変換によってモデル化するステップを有する。この実施形態では、1つの超音波画像フレームの運動パラメータが、その次の超音波画像フレーム内の較正機構の運動を推定するために使用される。加えて、運動をモデル化するステップは、数値最適化を用いて各個別超音波画像フレームにおける局所画像レジストレーション問題を解くステップを含む。
加えて、本開示の実施形態は、本明細書に開示される方法に従ってトラックされた超音波の自動較正を実施するように構成される診断超音波画像システムを含む。
いくつかの例示的な実施形態のみが上記に詳細に記載されているが、本開示の実施形態の新たな教示及び利点から著しく逸脱することなく、例示的な実施形態において多くの変更が可能であることを、当業者は容易に理解するだろう。例えば、本開示の実施形態は、ローカライザと一体化されたいかなる超音波スキャナにも適用されることができる。従って、そうした全ての変更は、以下の請求項において定義される本開示の実施形態の範囲内に含まれることが意図される。請求項においては、means‐plus‐function節は、列挙された機能を実施するように本明細書に記載された構造、及び構造的均等物だけでなく、均等構造をも包含することが意図される。
加えて、1つ以上の請求項において括弧内に置かれたいかなる参照記号も、その請求項を限定するものと解釈されてはならない。"comprising"及び"comprises"などの語は、任意の請求項又は明細書全体において列挙されたもの以外の要素又はステップの存在を除外しない。ある要素の単数形はその要素の複数形を除外せず、逆もまた同様である。実施形態のうちの1つ以上は、複数の異なる要素を有するハードウェアを用いて、及び/又は適切にプログラムされたコンピュータを用いて実装されてもよい。複数の手段を列挙するデバイスの請求項では、これらの手段のいくつかがハードウェアの1つの同じ項目によって具体化されてもよい。特定の手段が互いに異なる従属請求項に列挙されているという単なる事実は、これらの手段の組み合わせが有利に使用されることができないことを示すものではない。

Claims (20)

  1. トラックされた超音波の自動較正のための方法であって、
    (i)ローカライザ空間内の超音波振動子の位置及び方向をトラックし、(ii)前記ローカライザ空間内の較正機構の位置及び方向をトラックするようにローカライザを構成するステップと、
    前記ローカライザ空間内に位置付けられる、超音波の透過に適した超音波ボリュームをもうけるステップと、
    前記超音波ボリューム内に前記較正機構を配置するステップと、
    前記超音波振動子及び較正機構の相対位置及び方向が変化するにつれて、前記超音波振動子を用いて前記超音波ボリュームの一連の超音波画像を収集するステップと、
    前記一連の超音波画像の各フレーム内の前記較正機構の画像ベースの位置及び方向を決定するために画像処理を利用するステップと、
    (i)前記一連の超音波画像の各々における前記較正機構の前記画像ベースの位置及び方向、(ii)前記一連の超音波画像の各選択されたフレームに対する前記ローカライザがトラックした超音波振動子の対応する位置及び方向、並びに(iii)前記一連の超音波画像の各フレームに対する前記ローカライザがトラックした較正機構の対応する位置及び方向の関数として、前記トラックされた超音波較正の変換パラメータを計算するステップであって、前記変換パラメータはローカライザ座標空間を超音波画像空間に空間的に関連付けることを特徴とするステップとを有する、トラックされた超音波の自動較正のための方法。
  2. 前記超音波振動子が前記振動子に結合されるトラッカを含み、前記ローカライザが前記ローカライザ空間内で前記トラッカをトラックする、請求項1に記載の方法。
  3. 前記較正機構が、超音波画像内に少なくとも1つの安定な特徴を作り出すために適切な任意の器具を有する、請求項1に記載の方法。
  4. さらに前記較正機構が針を有し、前記画像処理が、前記一連の超音波画像の各画像内の前記針の先端の位置及び方向を決定する、請求項3に記載の方法。
  5. 前記超音波ボリュームが、ゲル及び水から成る群から選択される少なくとも1つを包含するタンクを含む、請求項1に記載の方法。
  6. 前記超音波ボリューム内に前記較正機構を配置するステップが、前記超音波ボリュームを介して前記較正機構を動かすステップを含む、請求項1に記載の方法。
  7. さらに前記較正機構を動かすステップが、前記超音波ボリュームを介して前記較正機構を動かすために3つの直動関節を持つロボットアームを使用するステップを含む、請求項6に記載の方法。
  8. 前記一連の超音波画像がNフレームを含み、Nは3以上である(N≧3)、請求項1に記載の方法。
  9. 前記超音波画像が三次元画像を有する、請求項1に記載の方法。
  10. 前記超音波画像が二次元画像を有し、前記方法がさらに、前記超音波ボリュームを介する前記較正機構の運動を前記二次元画像の画像面に制限するステップを有する、請求項1に記載の方法。
  11. さらに前記運動を制限するステップが、前記運動を前記二次元画像面に制限するガイドを使用するステップを含む、請求項10に記載の方法。
  12. 前記超音波振動子及び較正機構の相対位置及び方向が、前記超音波ボリュームを介して前記較正機構を動かしながら、前記超音波振動子を固定されたまま維持することによって変化される、請求項1に記載の方法。
  13. 前記較正機構の前記画像ベースの位置及び方向を決定するステップが、各フレームに対して、前記較正機構の画像位置及び画像方向を決定するために前記超音波画像を処理するステップを含む、請求項1に記載の方法。
  14. さらに前記較正機構の画像位置及び画像方向を決定するステップが、前記較正機構のテンプレートを、前記一連の超音波画像の前記画像の各フレーム内の前記較正機構の現在画像と照合するステップを含む、請求項1に記載の方法。
  15. 前記計算するステップが、特異値分解を用いて前記変換パラメータを解くステップを含む、請求項1に記載の方法。
  16. 前記計算するステップがさらに、各超音波画像フレームに対して点の対を自動的に計算するステップを含み、前記点の対が(i)前記較正機構の特定可能部分の画像ベーストラッキング点及び(ii)前記超音波振動子のローカライザベーストラッキング点を含む、請求項1に記載の方法。
  17. 前記較正機構が針を有し、前記針の前記特定可能部分が前記針の先端を有する、請求項16に記載の方法。
  18. 前記較正機構の運動が連続的であり、前記方法がさらに、前記較正機構の前記運動をパラメータ化変換によってモデル化するステップを有し、1つの超音波画像フレームの運動パラメータが、その次の超音波画像フレーム内の前記較正機構の運動を推定するために使用される、請求項1に記載の方法。
  19. 前記運動をモデル化するステップが、数値最適化を用いて各個別超音波画像フレームにおける局所画像レジストレーション問題を解くステップを含む、請求項18に記載の方法。
  20. 請求項1に記載の方法に従ってトラックされた超音波の自動較正を実施するように構成される診断超音波画像システム。
JP2010533687A 2007-11-14 2008-11-05 トラックされた超音波の自動較正のためのシステム及び方法 Withdrawn JP2011511652A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US98780907P 2007-11-14 2007-11-14
US3578408P 2008-03-12 2008-03-12
PCT/IB2008/054619 WO2009063360A1 (en) 2007-11-14 2008-11-05 System and method for automatic calibration of tracked ultrasound

Publications (1)

Publication Number Publication Date
JP2011511652A true JP2011511652A (ja) 2011-04-14

Family

ID=40386145

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010533687A Withdrawn JP2011511652A (ja) 2007-11-14 2008-11-05 トラックされた超音波の自動較正のためのシステム及び方法

Country Status (6)

Country Link
US (1) US20100249595A1 (ja)
EP (1) EP2223150A1 (ja)
JP (1) JP2011511652A (ja)
CN (1) CN101861526A (ja)
RU (1) RU2478980C2 (ja)
WO (1) WO2009063360A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013529531A (ja) * 2010-06-28 2013-07-22 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Emキャリブレーションのリアルタイム品質管理
JP2014522683A (ja) * 2011-06-27 2014-09-08 コーニンクレッカ フィリップス エヌ ヴェ 超音波画像誘導システム及びボリューム運動に基づく較正方法

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7379769B2 (en) 2003-09-30 2008-05-27 Sunnybrook Health Sciences Center Hybrid imaging method to monitor medical device delivery and patient support for use in the method
US7940047B2 (en) 2007-11-23 2011-05-10 Sentinelle Medical, Inc. Microcontroller system for identifying RF coils in the bore of a magnetic resonance imaging system
WO2010140075A2 (en) * 2009-06-05 2010-12-09 Koninklijke Philips Electronics, N.V. System and method for integrated biopsy and therapy
EP2445413B1 (en) 2009-06-23 2020-02-12 Invivo Corporation Variable angle guide holder for a biopsy guide plug
EP3960075A1 (en) * 2009-11-27 2022-03-02 Hologic, Inc. Systems and methods for tracking positions between imaging modalities and transforming a displayed three-dimensional image corresponding to a position and orientation of a probe
US20130289407A1 (en) * 2010-09-14 2013-10-31 Samsung Medison Co., Ltd. 3d ultrasound system for extending view of image and method for operating the 3d ultrasound system
US9332926B2 (en) 2010-11-25 2016-05-10 Invivo Corporation MRI imaging probe
KR101270639B1 (ko) 2011-11-29 2013-06-03 삼성메디슨 주식회사 진단 장치 및 그 동작 방법
WO2013140315A1 (en) * 2012-03-23 2013-09-26 Koninklijke Philips N.V. Calibration of tracked interventional ultrasound
CN104507394B (zh) * 2012-07-27 2017-10-20 皇家飞利浦有限公司 对点的从超声图像到跟踪***的准确且快速的映射
CN102860841B (zh) * 2012-09-25 2014-10-22 陈颀潇 超声图像引导下穿刺手术的辅助导航***
GB201304798D0 (en) * 2013-03-15 2013-05-01 Univ Dundee Medical apparatus visualisation
EP2973217B1 (en) 2013-03-15 2023-10-25 Hologic, Inc. System and method for reviewing and analyzing cytological specimens
EP3013246B1 (en) * 2013-06-28 2021-08-11 Koninklijke Philips N.V. Acoustic highlighting of interventional instruments
EP3082612A2 (en) * 2013-12-18 2016-10-26 Koninklijke Philips N.V. Electromagnetic tracker based ultrasound probe calibration
US20150173723A1 (en) * 2013-12-20 2015-06-25 General Electric Company Method and system for automatic needle recalibration detection
EP3122268B1 (en) * 2014-03-24 2019-01-02 Koninklijke Philips N.V. Quality assurance and data coordination for electromagnetic tracking systems
WO2016023599A1 (en) 2014-08-14 2016-02-18 Brainlab Ag Ultrasound calibration device
US10930007B2 (en) * 2015-12-14 2021-02-23 Koninklijke Philips N.V. System and method for medical device tracking
CN106344153B (zh) * 2016-08-23 2019-04-02 深圳先进技术研究院 一种柔性穿刺针针尖自动跟踪装置及方法
US11642097B2 (en) 2017-06-19 2023-05-09 Koninklijke Philips N.V. Interleaved imaging and tracking sequences for ultrasound-based instrument tracking
EP3648674A1 (en) 2017-07-07 2020-05-13 Koninklijke Philips N.V. Robotic instrument guide integration with an acoustic probe
JP7453695B2 (ja) * 2018-12-11 2024-03-21 レスピノル アーエス 超音波呼吸監視における運動補償のためのシステムおよび方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5255680A (en) * 1991-09-03 1993-10-26 General Electric Company Automatic gantry positioning for imaging systems
RU2142211C1 (ru) * 1995-06-05 1999-11-27 Государственное предприятие "Всероссийский научно-исследовательский институт физико-технических и радиотехнических измерений" Способ калибровки ультразвукового преобразователя
RU2152007C1 (ru) * 1995-06-05 2000-06-27 Государственное предприятие "Всероссийский научно-исследовательский институт физико-технических и радиотехнических измерений" Способ измерения ультразвуковой мощности излучения
RU2232547C2 (ru) * 2002-03-29 2004-07-20 Общество с ограниченной ответственностью "АММ - 2000" Способ и устройство для получения ультразвуковых изображений структур и сосудов головного мозга
US7090639B2 (en) * 2003-05-29 2006-08-15 Biosense, Inc. Ultrasound catheter calibration system
US20060241432A1 (en) * 2005-02-15 2006-10-26 Vanderbilt University Method and apparatus for calibration, tracking and volume construction data for use in image-guided procedures
ATE457778T1 (de) * 2005-07-18 2010-03-15 Nucletron Bv System zur durchführung einer strahlenbehandlung auf einen vorgewählten anatomischen teil eines körpers
US7912258B2 (en) * 2005-09-27 2011-03-22 Vanderbilt University Method and apparatus for standardizing ultrasonography training using image to physical space registration of tomographic volumes from tracked ultrasound

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013529531A (ja) * 2010-06-28 2013-07-22 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Emキャリブレーションのリアルタイム品質管理
JP2014522683A (ja) * 2011-06-27 2014-09-08 コーニンクレッカ フィリップス エヌ ヴェ 超音波画像誘導システム及びボリューム運動に基づく較正方法

Also Published As

Publication number Publication date
US20100249595A1 (en) 2010-09-30
EP2223150A1 (en) 2010-09-01
RU2478980C2 (ru) 2013-04-10
CN101861526A (zh) 2010-10-13
WO2009063360A1 (en) 2009-05-22
RU2010123952A (ru) 2011-12-20

Similar Documents

Publication Publication Date Title
JP2011511652A (ja) トラックされた超音波の自動較正のためのシステム及び方法
Wang et al. Video see‐through augmented reality for oral and maxillofacial surgery
US8108072B2 (en) Methods and systems for robotic instrument tool tracking with adaptive fusion of kinematics information and image information
US8073528B2 (en) Tool tracking systems, methods and computer products for image guided surgery
US8147503B2 (en) Methods of locating and tracking robotic instruments in robotic surgical systems
US9978141B2 (en) System and method for fused image based navigation with late marker placement
Boctor et al. A novel closed form solution for ultrasound calibration
Stoyanov et al. A practical approach towards accurate dense 3D depth recovery for robotic laparoscopic surgery
US11504095B2 (en) Three-dimensional imaging and modeling of ultrasound image data
EP2452649A1 (en) Visualization of anatomical data by augmented reality
JP7515795B2 (ja) 画像処理システム、及び、画像処理方法、並びに、画像処理プログラム
JP2015100712A (ja) 光学認識機能を有する外科手術システム用の縫合針
US20110153254A1 (en) System And Method For Calibration For Image-Guided Surgery
CN108366778B (zh) 移动解剖体和设备的多视图、多源配准
US10078906B2 (en) Device and method for image registration, and non-transitory recording medium
Bø et al. Versatile robotic probe calibration for position tracking in ultrasound imaging
Meza et al. Three-dimensional multimodal medical imaging system based on freehand ultrasound and structured light
Li et al. A framework for fast automatic robot ultrasound calibration
JP2017506537A (ja) 超音波ガイド処置に対するゾーン視覚化
Yang et al. Image mapping of untracked free‐hand endoscopic views to an ultrasound image‐constructed 3D placenta model
Carriere et al. Needle shape estimation in soft tissue based on partial ultrasound image observation
US20240008845A1 (en) Ultrasound simulation system
Ronchetti et al. PRO-TIP: phantom for RObust automatic ultrasound calibration by TIP detection
US20230276016A1 (en) Real time augmentation
Decker et al. Performance evaluation and clinical applications of 3D plenoptic cameras

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20111102

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130516

A761 Written withdrawal of application

Free format text: JAPANESE INTERMEDIATE CODE: A761

Effective date: 20130603