JP6727140B2 - 異なる撮像モダリティのレジストレーションのための撮像機器 - Google Patents

異なる撮像モダリティのレジストレーションのための撮像機器 Download PDF

Info

Publication number
JP6727140B2
JP6727140B2 JP2016574243A JP2016574243A JP6727140B2 JP 6727140 B2 JP6727140 B2 JP 6727140B2 JP 2016574243 A JP2016574243 A JP 2016574243A JP 2016574243 A JP2016574243 A JP 2016574243A JP 6727140 B2 JP6727140 B2 JP 6727140B2
Authority
JP
Japan
Prior art keywords
image data
imaging
cavity
model
abdominal cavity
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016574243A
Other languages
English (en)
Other versions
JP2017518826A (ja
Inventor
タイズ エレンバース
タイズ エレンバース
べスコス ハビアー オリヴァン
べスコス ハビアー オリヴァン
エバーハルト セバスチャン ハンシス
エバーハルト セバスチャン ハンシス
カーステン ヘレナ ズールモンド
カーステン ヘレナ ズールモンド
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of JP2017518826A publication Critical patent/JP2017518826A/ja
Application granted granted Critical
Publication of JP6727140B2 publication Critical patent/JP6727140B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/38Registration of image sequences
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/05Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • A61B5/055Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves  involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03Computed tomography [CT]
    • A61B6/032Transmission computed tomography [CT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/149Segmentation; Edge detection involving deformable models, e.g. active contour models
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10081Computed x-ray tomography [CT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10088Magnetic resonance imaging [MRI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10116X-ray image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30008Bone

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • General Health & Medical Sciences (AREA)
  • Radiology & Medical Imaging (AREA)
  • Pathology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Software Systems (AREA)
  • Pulmonology (AREA)
  • Optics & Photonics (AREA)
  • Quality & Reliability (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)

Description

本発明は、異なる撮像モダリティのレジストレーションのための撮像機器と、異なる撮像モダリティのレジストレーションのための撮像システムと、異なる撮像モダリティのレジストレーションのための方法と、そのような機器を制御するためのコンピュータプログラム要素と、そのようなコンピュータプログラム要素を格納したコンピュータ可読媒体と、に関する。
複数の撮像モダリティ、例えばCT及びライブX線を使用する処置の間に、医師はこれらのモダリティをレジストレーションする必要がある。手動の2D−3Dレジストレーションを使用する一般的なアプリケーションでは、これは次の態様で実施される。医師は、例えば骨盤など、レジストレーションのために使用され得る体内のランドマークについて鮮明な視野をもたらす特定の角度までCアームを動かす。次いで、医師は、身体への暴露の実行又は単写画像を取得する。次に、医師は、十分に異なる(45度超異なる)別の角度までCアームを動かし、別の暴露又は単写撮影で撮影を行う。
どちらのX線の実行もアプリケーションの異なるビューポートに表示され、CTボリュームの適切に回転されたボリュームビューと混合される。医師はここで、両方のビューにおいて、CTをライブX線と最適に重なるように動かす。医師が最適な重ね合わせを判断するのに使用する視覚的な目印は、通常、骨盤、脊椎、又は胸郭などの、骨のランドマークである。
国際公開第2013/132402A2号は、ここに画像レジストレーションのためのシステムを開示している。当該システムは、第1の画像の内在的ランドマークを識別するように構成される、画像特徴検出モジュールを含む。画像レジストレーション及び変換モジュールが、レジストレーション変換を計算するように構成されて、表面ランドマークに基づいて第2の画像を第1の画像とレジストレーションして、レジストレーションされた画像をもたらす。ランドマーク識別モジュールが、レジストレーション変換を用いて内在的なランドマークを第2の画像上に重ね合わせ、重ね合わされたランドマークの各々を仮想オブジェクト内部に包含して、レジストレーションされた画像において対応するランドマーク対を識別し、識別されたランドマークを有するレジストレーションされた画像を用いて第2の画像を第1の画像とレジストレーションするように構成される。
従って、複数の異なる撮像モダリティによって取得された腹腔の画像データのレジストレーションを向上させる、異なる撮像モダリティのレジストレーションのための撮像機器を提供する必要があり得る。
本発明の課題は独立請求項の主題によって解決され、更なる実施形態が従属請求項に組み込まれている。以降に記載される本発明の態様は、異なる撮像モダリティのレジストレーションのための撮像機器と、異なる撮像モダリティのレジストレーションのための撮像システムと、異なる撮像モダリティのレジストレーションのための方法と、コンピュータプログラム要素と、コンピュータ可読媒体と、にも適用されることに留意されたい。
本発明に従って、異なる撮像モダリティをレジストレーションするための撮像機器が提示される。異なる撮像モダリティをレジストレーションするための撮像機器は、モデル提供部、第1の画像データ提供部、処理部、第2の画像データ提供部、及びレジストレーション部を備える。以下では、これらの構成要素の簡単な概要が示され、その次に更に詳細な説明が続く。
モデル提供部は、腹腔の空胴モデルを提供するように構成される。即ち、例えば、胸腔、腹腔、及び骨盤腔内の臓器のモデル表現を組み込んだ、腹腔の変形可能モデルが提供され得る。従って、このモデルは、肺又は腎臓などの、胸部及び/又は腹部の少なくとも1つの臓器を含むことが好ましい。
そのような変形可能モデルは、関心対象の特徴部が手動でセグメント化されているか又は注釈をつけられている、1つ又は複数のトレーニング画像データセットから、最初に生成されることができる。モデルの位置推定のためのランドマーク検出、エッジ特徴検出、及び典型的形状変化が、同様にトレーニングデータから学習され得る。
第1の画像データ提供部は、第1のモダリティによって患者の関心領域を示している第1の画像データを提供するように構成される。一例では、第1のモダリティの第1の画像データは、CT又はMR画像データである。
処理部は、空胴モデルを第1の画像データに対してレジストレーションし、第1の画像データに基づいて空胴モデルを適合させるように構成される。それによって、適合された空洞モデルが達成される。この適合は、臓器などのモデル内に表わされた特徴部が、画像データ中の対応する特徴部に最適な態様で適合されるように、画像データに基づいて、例えば変形可能モデルと関連付けられたエネルギーパラメータを最小化することを通じて、達成されることができる。
処理部は、適合された空胴モデルに基づいて、第1の画像データにおいて腹腔の少なくとも一部をマスクするように構成される。それによって、マスクされた第1の画像データが達成される。
第2の画像データ提供部は、第2のモダリティによって患者の関心領域の少なくとも一部を示している第2の画像データを提供するように構成される。一例では、第2のモダリティの第2の画像データはライブX線画像データである。
レジストレーション部は、マスクされた第1の画像データと第2の画像データとをレジストレーションするように構成される。一例では、ライブX線データ上へのCT又はMR画像データの重ね合わせが達成される。
換言すると、本発明は、胸部領域及び/又は腹部領域における最適なレジストレーションのために異なる撮像モダリティをレジストレーションするための撮像機器に関する。
ライブX線及び3Dボリュームにおいては骨盤の骨を区別するのは比較的容易であるが、脊椎及び胸郭については、区別するのがより困難である。これは、他の要因の中でも、CTにおいてこれらの構造体に対する視野を乱す、腹腔の内部のしばしば造影された脈管構造と組織とに起因する。
本発明に従う撮像機器は、そのような骨の構造に対するより明瞭な視野を得ることを有利にも可能にする。特に、脊椎及び胸郭の視認性が、腹腔内部の構造、とりわけ(造影された)管構造をマスクするおかげで、向上されることができる。
異なる画像データセット間のレジストレーションは、通常、ランドマークに基づき、CT又はMRデータセットとライブX線データとをレジストレーションする場合には、レジストレーションは通常、骨盤、脊椎、又は胸郭などの骨のランドマークを必要とする。
本発明に従って、第1の画像データにおける情報の総量はマスクがけのおかげで減少するが、それによってユーザはランドマーク及び特に、異なる撮像モダリティ同士のランドマークに対応する画像情報の重なり合う部分をより良く区別できるようになり、最適なレジストレーションを可能にする。
本発明に従った撮像機器は、骨ランドマークのサブボリュームを選択的にレンダリングできるようにすることが好ましい。従って、例えば、最適なレジストレーションのために、脊椎、骨盤の骨、又は肋骨若しくは胸郭のレンダリングを有効にしたり又は無効にしたりすることが可能である。従って、撮像機器は、レジストレーションが最小限の時間を消費し、可能な限り正確になるように、手動の又は自動の2D−3Dレジストレーション中に、ランドマーク構造の選択的な可視化を可能にする。
一例では、第1の画像データにおける腹腔が、空胴モデルの適合に基づいてセグメント化される。従って、モデルベースのセグメント化が、当技術分野で一般的に知られているように実施される。
腹腔のセグメント化には、胸部及び/又は腹部の少なくとも1つの臓器を含むことができ、その臓器の表現はモデルに含まれている。セグメント化は、腹腔の外側表面のモデルベースのセグメント化を含むことができ、これは腹腔の表面モデルをもたらす。
第1の画像データに基づいて、空胴モデルの適合が、完全に自動的に実施されることができる。
マスクされた第1の画像データと第2の画像データとのレジストレーションは、手動で、半自動的に、又は完全に自動的に、実施されることができる。このために、例えばX線へのCTの位置合わせが、既知の2D−3Dレジストレーション方法を用いて実施されることができる。
ユーザには、自動のセグメント化を初期化するか、又は後で修正するかの選択肢が与えられることができる。とりわけ、造影剤の充填及び脈管構造の詳細な外形が、例えばCT画像などの第1の画像と例えばX線画像などの第2の画像との間で異なっているために、自動のレジストレーションのための基準として骨のランドマークを使用することにより、レジストレーションの堅牢性及び精度が向上する。
一例では、処理部は、適合された空胴モデルに基づいて、第1の画像データにおいて組織及び/又は脈管構造をマスクするように構成される。組織及び/又は脈管構造は、第1の画像データにおいて造影されていることがある。腹腔内部の全てのボクセルをマスクがけすることにより、(造影された)脈管構造及び腹腔の他の内容物が、第1の画像データの可視化から除去される。
一例では、処理部は、適合された空胴モデルの少なくとも1つのパラメータに基づいて、第1の画像データにおける骨ランドマークのサブボリュームを推定するように構成される。とりわけ、脊椎、胸郭、及び骨盤骨の領域のボリュームが、腹腔の外側表面によって囲われたボリュームなど、1つ又は複数のモデルパラメータから推定されることができる。従って、これらの骨ランドマーク構造の各々についてのサブボリュームのマスクが、それに応じて生成されることができる。
一例では、処理部は、対応するサブボリュームマスクのうちの1つ又は複数に基づいて、第1の画像データにおける骨ランドマークを選択的にレンダリングするように構成される。これらのサブボリュームのうちの1つ又は複数を選択的にレンダリングすることにより、例えば、脊椎だけ、又は脊椎及び胸郭、などが、例えばCTボリュームの可視化において表示されることができる。これは、3Dボリュームと例えばX線画像のような第2の画像データとにおける骨構造同士及び/又はランドマーク同士の重なり合いが最適かどうかについて、ユーザにより良く示すように作用し、それによって、医師が最適なレジストレーションを達成するのを更に支援する。
本発明に従って、異なる撮像モダリティをレジストレーションするための撮像システムも提示される。異なる撮像モダリティをレジストレーションするための撮像システムは、第1の撮像モダリティ、第2の撮像モダリティ、及び上述されたような異なる撮像モダリティをレジストレーションするための撮像機器を含む。第1及び第2の撮像モダリティが、第1及び第2の画像データ提供部によって提供される第1及び第2の画像データを取得する。
一例では、異なる撮像モダリティをレジストレーションするための撮像システムは、レジストレーションされた画像データと、レジストレーションされた画像内のランドマークとを可視化して、レジストレーションの検査を可能にするように構成された、表示部を更に含む。ランドマークは、骨構造に基づくことでもよい。
一例では、異なる撮像モダリティをレジストレーションするための撮像システムは、囲われたボリュームの可視化又はサブボリュームの可視化を選択するように構成されるセレクタを更に含む。サブボリュームは、例えば、脊椎のサブボリューム及び/又は胸郭のサブボリュームであり得る。セレクタとやり取りすることにより、ユーザは、例えば、完全なボリューム、脊椎及び胸郭の可視化及び/又は脊椎のみのボリュームのような、ボリュームの可視化を選択することができる。
一例では、異なる撮像モダリティをレジストレーションするための撮像システムは、セグメント化及び/又はレジストレーションの位置合わせを制御するように構成される入力機器を更に含む。セグメント化及び/又はレジストレーションの位置合わせは、囲われたボリュームの可視化又はサブボリュームの可視化の選択に基づくことでもよい。入力機器を使用することにより、ユーザは、選択的なCT可視化をガイドラインとして使用して、例えばCTとX線の画像データセットを位置合わせすることができる。
一例では、異なる撮像モダリティをレジストレーションするための撮像システムは、第2の画像データ、及び特に2DのX線画像データにおける骨及び/又は骨ランドマークの可視化を強化させるように構成された骨強調部を更に含む。骨を強調することにより、レジストレーションが、より時間のかからない、大幅により正確なものになる。
本発明に従って、異なる撮像モダリティをレジストレーションするための方法も提示される。これは、以下のステップを含む、即ち、
腹腔の空胴モデルを提供するステップと、
第1の画像データを提供するステップと、
第1の画像データに基づいて、空胴モデルを適合させるステップと、
適合された空胴モデルに基づいて、第1の画像データにおける骨以外の構造をマスクがけするステップと、
マスクされた第1の画像データと第2の画像データとをレジストレーションするステップと、を含む。
異なる撮像モダリティをレジストレーションするための方法は、腹腔のセグメント化によって、好ましくは腹腔の表面のモデルベースのセグメント化によって、空胴モデルを生成するステップを更に含むことができる。
異なる撮像モダリティをレジストレーションするための方法は、好ましくは、適合された空胴モデルに基づいて第1の画像データにおいて造影された、組織及び/又は脈管構造をマスクするステップを更に含むことができる。
異なる撮像モダリティをレジストレーションするための方法は、適合された空胴モデルの外形に基づいて、第1の画像データにおける骨構造の囲われたボリューム又はサブボリュームを推定するステップを更に含むことができる。
異なる撮像モダリティをレジストレーションするための方法は、第1の画像データにおける囲われたボリューム又はサブボリュームを選択的にレンダリングするステップを更に含むことができる。
本発明に従って、コンピュータプログラム要素も提示され、このコンピュータプログラム要素は、撮像機器を制御しているコンピュータ上でコンピュータプログラムが実行されたときに、独立機器請求項で定義される撮像機器に独立方法請求項で定義されるレジストレーションするための方法のステップを実行させるためのプログラムコード手段を含む。
独立請求項に従った、異なる撮像モダリティをレジストレーションするための撮像機器、異なる撮像モダリティをレジストレーションするための撮像システム、異なる撮像モダリティをレジストレーションするための方法、そのような機器を制御するためのコンピュータプログラム要素、及びそのようなコンピュータプログラム要素を格納したコンピュータ可読媒体は、とりわけ従属請求項で規定されるのと類似のかつ/又は同一の好ましい実施形態を有することを理解されたい。本発明の好ましい実施形態は、従属請求項とそれぞれの独立請求項との任意の組み合わせとすることもできることを、更に理解されたい。
本発明のこれらの及び他の態様が、以降に記載される実施形態から明らかになり、以降に記載される実施形態を参照して説明されるであろう。
本発明の例示的な実施形態が、添付の図面を参照して以下に説明される。
異なる撮像モダリティをレジストレーションするための撮像システムの一例の概略図を示す。 第1及び第2の画像データとしてのCT及びX線の重ね合わせを概略的にかつ例示的に示す。 第1及び第2の画像データとしてのCT及びX線の重ね合わせを概略的にかつ例示的に示す。 第1及び第2の画像データとしてのCT及びX線の重ね合わせを概略的にかつ例示的に示す。 第1及び第2の画像データとしてのCT及びX線の重ね合わせを概略的にかつ例示的に示す。 異なる撮像モダリティをレジストレーションするための方法の一例の基本ステップを示す。
図1は、本発明に従って、異なる撮像モダリティをレジストレーションするための撮像システム1の実施形態を概略的かつ例示的に示す。異なる撮像モダリティをレジストレーションするための撮像システム1は、第1の撮像モダリティ2、第2の撮像モダリティ3、及び異なる撮像モダリティをレジストレーションするための撮像機器10を含む。
異なる撮像モダリティをレジストレーションするための撮像機器10は、モデル提供部11、第1の画像データ提供部12、処理部13、第2の画像データ提供部14、及びレジストレーション部15を備える。
モデル提供部11は、腹腔の空胴モデルを提供する。即ち、例えば、胸腔、腹腔、及び骨盤腔内の臓器、例えば肺又は腎臓などのモデル表現を組み込んだ、腹腔の変形可能モデルが提供され得る。第1の画像データ提供部12は、第1の撮像モダリティ2によって取得された患者の関心領域を示している第1の画像データを提供する。ここで、第1の撮像モダリティ2の第1の画像データはCT画像データである。
処理部13は、空胴モデルを第1の画像データに対してレジストレーションし、第1の画像データに基づいて空胴モデルを適合させる。それによって、適合された空洞モデルが達成される。処理部13は、モデル提供部11及び第1の画像データ提供部12に接続されている。第1の画像データに基づいて、空胴モデルの適合が、完全に自動的に実施される。
処理部13は、適合されたモデルに基づいて、モデルベースのセグメント化を第1の画像データに適用するように更に構成されることができる。即ち、肺などの、適合されたモデルに表現される特徴部に対応した第1の画像データ中の特徴部が、画像データにおいてセグメント化されることができる。
処理部13は、骨構造と骨以外の構造とで異なり、適合された空胴モデルに基づいて、第1の画像データにおける特に腹腔などの骨以外の構造をマスクする。それによって、マスクされた第1の画像データが達成される。
第2の画像データ提供部14は、第2の撮像モダリティ3によって取得された患者の関心領域を示している第2の画像データを提供する。ここで、第2の撮像モダリティ3の第2の画像データはライブX線画像データである。
レジストレーション部15は、マスクされた第1の画像データと、第2の画像データとをレジストレーションする。ここで、ライブX線データ上へのCT画像データの重ね合わせが達成される。レジストレーション部15は、処理部13及び第2の画像データ提供部14に接続されている。ここで、レジストレーションが自動的に実施されるが、ユーザには、自動セグメント化を初期化するか又は後で修正するという選択肢が与えられる。
処理部13は、適合された空胴モデルの外形に基づいて、第1の画像データにおける特定の骨ランドマーク、とりわけ、脊椎、骨盤、及び/又は肋骨のサブボリュームを更に推定することができる。即ち、これらのサブボリュームが、適合されたモデルの1つ又は複数のパラメータから導出されることができる。更に、処理部13は第1の画像データにおけるこれらのサブボリュームを選択的にレンダリングするように構成されることができる。換言すると、これらのランドマーク構造のレンダリングは、好ましくはユーザとのやり取りによって、有効にされたり無効にされたりすることができる。
処理部13は、適合された空胴モデルに基づいて、第1の画像データにおいて組織及び/又は脈管構造をマスクするように更に構成される。特に、例えば造影された脈管構造を含む、腹腔の内部の少なくとも一部が、マスクがけされることができる。結果として、特定の骨ランドマークの視認性が向上される。
異なる撮像モダリティをレジストレーションするための撮像システム1は、表示部4を更に含み、レジストレーションされた画像データと、レジストレーションされた画像内のランドマークとを可視化して、レジストレーションの検査を可能にする。ランドマークは、骨構造に基づくことでもよい。
異なる撮像モダリティをレジストレーションするための撮像システム1は、囲われたボリュームの可視化又はサブボリュームの可視化を選択するためのセレクタ5を更に含む。サブボリュームは、例えば、脊椎のサブボリューム及び/又は胸郭のサブボリュームであり得る。セレクタ5を使用することにより、ユーザは、例えば、完全なボリューム、脊椎及び胸郭の可視化及び/又は脊椎のみのボリュームのような、ボリュームの可視化を選択することができる。
異なる撮像モダリティをレジストレーションするための撮像システム1は、セグメント化及び/又はレジストレーションの位置合わせを制御するように構成される入力機器6を更に含む。セグメント化及び/又はレジストレーションの位置合わせは、囲われたボリュームの可視化又はサブボリュームの可視化の選択に基づくことでもよい。入力機器6を使用することにより、ユーザは、選択的なCT可視化をガイドラインとして使用して、例えばCTとX線との画像データセットを位置合わせすることができる。
異なる撮像モダリティをレジストレーションするための撮像システム1は、第2の画像データ、及び特に2DのX線画像データにおける骨ランドマークの可視化を強化させるように構成された骨強調器7を更に含む。即ち、関心対象の構造の視認性を高める、コントラスト及び/又はエッジ強調アルゴリズムなどの画像処理アルゴリズムが、2DのX線画像データに適用される。
表示部4、セレクタ部5、入力機器6、及び骨強調器7が、レジストレーション部15に接続されている。
図2〜図5は、APから見た(左)及び60度の回転角度で見た(右)、第1及び第2の画像データとしてのCT及びX線の異なる重ね合わせを概略的にかつ例示的に示している。図2は、従来技術に相当する。このボリュームにおける脊椎及び胸郭がどれ程良くX線データと位置が揃っているかを見分けるのは、困難である。図3〜図5は、本発明に従った、CTとX線との重ね合わせを示す。
図3は、脊椎のみのCTを重ね合わせたX線を示す。これで、脊柱(境界線細片で示されている)を解釈し位置合わせすることがはるかに容易になる。図4は、脊椎及び胸郭の骨(両方とも境界線細片により示されている)のCTと重ね合わせたX線を示す。肋骨が脊椎に対する視野を部分的に妨げることがあるが、ボリュームの回転位置を揃えるのに役立つことがある。図5は、脊椎のみのCT重ね合わせ(境界線細片により示されている)を有する、骨が強調されたX線を示す。X線の骨を強調することと、骨を3Dで選択的に表示することとの組み合わせにより、レジストレーションがより時間のかからない、大幅により正確なものになる。
図6は、異なる撮像モダリティをレジストレーションするための方法のステップの概略的な概要を示す。この方法は、以下のステップを、必ずしもこの順序とは限らないが、含む、即ち、
−第1のステップS1において、腹腔の空胴モデルを提供することと、
−第2のステップS2において、第1の画像データを提供することと、
−第3のステップS3において、第1の画像データに基づいて、空胴モデルを適合させることと、
−第4のステップS4において、適合された空胴モデルに基づいて、第1の画像データにおける骨以外の構造をマスクすることと、
−第5のステップS5において、マスクされた第1の画像データと第2の画像データとをレジストレーションすることと、を含む。
本発明の別の例示的な実施形態では、適切なシステム上で、前述の実施形態のうちの1つに従った方法の方法ステップを実行するように適合されることを特徴とする、コンピュータプログラム又はコンピュータプログラム要素が提供される。
従って、コンピュータプログラム要素は、コンピュータユニット上に格納されることでもよく、これもまた、本発明の実施形態の一部であり得る。このコンピュータユニットは、上述した方法のステップを実行するか又は実行を誘導するように、適合されることでもよい。更に、このコンピュータユニットは、上述した装置の構成要素を動作させるように適合されてもよい。コンピュータユニットは、自動的に動作するように、かつ/又はユーザによる指示を実行するように適合されることができる。コンピュータプログラムは、データプロセッサのワーキングメモリにロードされることができる。従って、データプロセッサは、本発明の方法を実行するように装備されることがあり得る。
本発明の例示的な実施形態は、始めから本発明を使用するコンピュータプログラムと、更新によって既存のプログラムを本発明を使用するプログラムに変換するコンピュータプログラムとの両方をカバーする。
更に、コンピュータプログラム要素は、上述した方法の例示の実施形態の手順を履行するために必要な全てのステップを提供することができる。
本発明の更なる例示的な実施形態に従って、CD−ROMなどのコンピュータ可読媒体が提示され、このコンピュータ可読媒体はそこに格納されるコンピュータプログラム要素を有し、このコンピュータプログラム要素は前述の段落で説明されている。
コンピュータプログラムは、他のハードウェアと共に又はその一部として供給される光学記憶媒体又は固体媒体などの適切な媒体上に格納される、かつ/又は配布されることができるが、インターネット又は他の有線の若しくは無線の電気通信システムを介してなど、他の形態で配布されることもできる。
しかしながら、コンピュータプログラムは、ワールドワイドウェブのようなネットワークを介して提示されることもでき、そのようなネットワークからデータプロセッサのワーキングメモリにダウンロードされることができる。本発明の更なる例示的な実施形態に従って、コンピュータプログラム要素をダウンロード可能にするための媒体が提供され、このコンピュータプログラム要素は、本発明の前述された実施形態のうちの1つに従った方法を実施するように構成される。
本発明の実施形態は、異なる主題を参照して説明されることに留意されたい。特に、幾つかの実施形態は方法タイプの請求項を参照して説明され、一方、他の実施形態は機器タイプの請求項を参照して説明される。しかしながら、当業者は、上述の及び以下の記載から、特に断りの無い限り、ある1つのタイプの主題に属する機能同士の任意の組み合わせに加えて、異なる主題に関連する機能同士の任意の組み合わせも本出願で開示されているとみなされると、判断するであろう。しかしながら、全ての機能が組み合わされると、機能の単純な合計以上の相乗効果をもたらすことができる。
本発明が、図面及び前述の説明において詳細に図示され説明されたが、そのような図示及び説明は例証的又は例示的であって制限的ではないとみなされるべきである。本発明は、開示された実施形態に限定されない。開示された実施形態への他の変形例が、図面、明細、及び従属請求項の研究から、特許請求された本発明を実施する際に当業者によって理解され実施されることができる。
請求項において、単語「含む(comprising)」は他の構成要素又はステップを排除するものではなく、不定冠詞「1つの(a)」又は「1つの(an)」は、複数を排除するものではない。単一のプロセッサ又は他のユニットが、特許請求の範囲に記載される幾つかの項目の機能を実現することができる。特定の処置が互いに異なる従属請求項に記載されているという単なる事実は、これらの処置の組み合わせが利益を得るように使用され得ないということを示すものではない。請求項におけるいかなる参照符号も、範囲を限定するものとして解釈されるべきではない。

Claims (14)

  1. 異なる撮像モダリティをレジストレーションするための撮像機器であって、
    モデル提供部と、
    第1の画像データ提供部と、
    処理部と、
    第2の画像データ提供部と、
    レジストレーション部と、を備え、
    前記モデル提供部は、腹腔の空胴モデルを提供し、
    前記第1の画像データ提供部は、第1のモダリティによって患者の関心領域を示している第1の画像データを提供し、前記関心領域は前記腹腔を含み、
    前記処理部は、(i)前記空胴モデルを前記第1の画像データに対してレジストレーションし、(ii)前記第1の画像データに基づいて前記空胴モデルを適合させ、(iii)適合された前記空胴モデルに基づいて前記第1の画像データにおける前記腹腔の少なくとも一部をマスクし、
    前記第2の画像データ提供部は、第2のモダリティによって患者の前記関心領域の少なくとも一部を示している第2の画像データを提供し、
    前記レジストレーション部は、マスクされた前記第1の画像データと、前記第2の画像データとをレジストレーションする、撮像機器。
  2. 前記第1の画像データにおける前記腹腔が、前記適合された空胴モデルに基づいてセグメント化される、請求項1に記載の撮像機器。
  3. 前記腹腔の空胴モデルが、胸部及び/又は腹部の少なくとも1つの臓器を含む、請求項1又は2に記載の撮像機器。
  4. 前記第1のモダリティの前記第1の画像データがCT又はMR画像データであり、前記第2のモダリティの前記第2の画像データがライブX線画像データである、請求項1乃至3の何れか一項に記載の撮像機器。
  5. 前記第1の画像データにおいてマスクされた前記腹腔の前記少なくとも一部が、造影された脈管構造を含む、請求項1乃至4の何れか一項に記載の撮像機器。
  6. 前記処理部が、前記適合された空胴モデルの少なくとも1つのパラメータに基づいて、前記第1の画像データにおける少なくとも1つの骨ランドマークのサブボリュームを推定する、請求項1乃至5の何れか一項に記載の撮像機器。
  7. 前記処理部が、前記第1の画像データにおけるサブボリュームを選択的にレンダリングする、請求項1乃至6の何れか一項に記載の撮像機器。
  8. 異なる撮像モダリティをレジストレーションするための撮像システムであって、
    第1の撮像モダリティと、
    第2の撮像モダリティと、
    請求項1乃至7の何れか一項に記載の撮像機器と、を含み、
    前記第1及び前記第2の撮像モダリティが、前記第1及び前記第2の画像データ提供部によって提供されることになる前記第1及び前記第2の画像データを取得する、撮像システム。
  9. レジストレーションされた画像データと、前記レジストレーションされた画像データの内部の骨ランドマークとを可視化する表示部を更に含む、請求項8に記載の撮像システム。
  10. 前記サブボリュームの可視化を選択的に有効又は無効にするセレクタを更に含む、請求項7に従属する請求項8又は9に記載の撮像システム。
  11. 前記第2の画像データにおける前記骨ランドマークの可視化を高める骨強調器を更に含む、請求項9又は請求項9に従属する請求項10に記載の撮像システム。
  12. 異なる撮像モダリティをレジストレーションするための方法であって、
    腹腔の空胴モデルを提供するステップと、
    前記腹腔を含む関心領域の第1の画像データを提供するステップと、
    前記空胴モデルを前記第1の画像データに対してレジストレーションした後に前記第1の画像データに基づいて前記空胴モデルを適合させるステップと、
    適合された前記空胴モデルに基づいて、前記第1の画像データにおける前記腹腔をマスクするステップと、
    第2のモダリティによって患者の前記関心領域の少なくとも一部を示している第2の画像データを提供するステップと、
    マスクされた前記第1の画像データと、前記第2の画像データとをレジストレーションするステップと、を含む、方法。
  13. 処理部によって実行される際に、請求項12に記載の方法のステップを実施する、請求項1乃至7の何れか一項に記載の機器又は請求項8乃至11の何れか一項に記載のシステムを制御するための、コンピュータプログラム。
  14. 請求項13に記載のコンピュータプログラムを格納した、コンピュータ可読媒体。
JP2016574243A 2014-06-25 2015-06-25 異なる撮像モダリティのレジストレーションのための撮像機器 Active JP6727140B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP14173817 2014-06-25
EP14173817.9 2014-06-25
PCT/EP2015/064401 WO2015197770A1 (en) 2014-06-25 2015-06-25 Imaging device for registration of different imaging modalities

Publications (2)

Publication Number Publication Date
JP2017518826A JP2017518826A (ja) 2017-07-13
JP6727140B2 true JP6727140B2 (ja) 2020-07-22

Family

ID=51059289

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016574243A Active JP6727140B2 (ja) 2014-06-25 2015-06-25 異なる撮像モダリティのレジストレーションのための撮像機器

Country Status (5)

Country Link
US (1) US10535149B2 (ja)
EP (1) EP3161786B1 (ja)
JP (1) JP6727140B2 (ja)
CN (1) CN106462971B (ja)
WO (1) WO2015197770A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10092361B2 (en) 2015-09-11 2018-10-09 AOD Holdings, LLC Intraoperative systems and methods for determining and providing for display a virtual image overlaid onto a visual image of a bone
EP3503026A1 (en) * 2017-12-20 2019-06-26 Koninklijke Philips N.V. Device, system and method for interacting with vessel images
CN111386555B (zh) * 2018-10-30 2024-03-29 西安大医集团股份有限公司 图像引导方法及装置、医疗设备、计算机可读存储介质
KR102513565B1 (ko) * 2021-10-08 2023-03-24 주식회사 피맥스 폐 영역 자동 정합 방법 및 이를 위한 장치

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62186381A (ja) * 1986-02-12 1987-08-14 Hitachi Ltd 画像位置合わせ方式
US6950689B1 (en) * 1998-08-03 2005-09-27 Boston Scientific Scimed, Inc. Dynamically alterable three-dimensional graphical model of a body region
DE19843408C2 (de) * 1998-09-22 2000-10-26 Siemens Ag Verfahren zur Wiedergabe von Röntgenbildern beim Positionieren eines in ein Gefäß eingeführten Katheters und Vorrichtung zur Durchführung des Verfahrens
US8244007B2 (en) 2004-11-10 2012-08-14 Koninklijke Philips Electronics N.V. System and method for registration of medical images based on insufficiently similar image areas
WO2006063141A2 (en) 2004-12-07 2006-06-15 Medical Metrx Solutions, Inc. Intraoperative c-arm fluoroscope datafusion system
JP2009515635A (ja) * 2005-11-18 2009-04-16 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 三次元画像における所定の構造の描画方法
JP2011510415A (ja) * 2008-01-24 2011-03-31 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ インタラクティブ画像セグメンテーション
US9280837B2 (en) 2008-10-10 2016-03-08 Koninklijke Philips N.V. Angiographic image acquisition system and method with automatic shutter adaptation for yielding a reduced field of view covering a segmented target structure or lesion for decreasing X-radiation dose in minimally invasive X-ray-guided interventions
JP2010246883A (ja) * 2009-03-27 2010-11-04 Mitsubishi Electric Corp 患者位置決めシステム
JP5404277B2 (ja) * 2009-09-24 2014-01-29 株式会社Aze 医用画像データ位置合せ装置、方法およびプログラム
US8315812B2 (en) * 2010-08-12 2012-11-20 Heartflow, Inc. Method and system for patient-specific modeling of blood flow
RU2595766C2 (ru) * 2010-10-27 2016-08-27 Конинклейке Филипс Электроникс Н.В. Идентификация и уменьшение искажения изображения
US8644575B2 (en) * 2011-02-28 2014-02-04 Kabushiki Kaisha Toshiba Processing of abdominal images
WO2012169344A1 (ja) * 2011-06-10 2012-12-13 株式会社日立メディコ 画像診断支援装置、及び方法
US8963919B2 (en) * 2011-06-15 2015-02-24 Mistretta Medical, Llc System and method for four dimensional angiography and fluoroscopy
JP2013017781A (ja) * 2011-07-14 2013-01-31 Aze Ltd 医用画像抽出装置および医用画像抽出プログラム
US9058664B2 (en) * 2011-09-07 2015-06-16 Siemens Aktiengesellschaft 2D-2D fusion for interventional guidance in trans-catheter aortic valve implantation
US8675944B2 (en) 2012-01-12 2014-03-18 Kabushiki Kaisha Toshiba Method of registering image data
US9336592B2 (en) * 2012-02-03 2016-05-10 The Trustees Of Dartmouth College Method and apparatus for determining tumor shift during surgery using a stereo-optical three-dimensional surface-mapping system
CN104160424B (zh) 2012-03-08 2017-09-19 皇家飞利浦有限公司 用于改进多模态图像融合中的配准准确度的智能标志选择
EP2667352B1 (en) * 2012-05-23 2020-01-01 Stryker European Holdings I, LLC Virtual 3D overlay as reduction aid for complex fractures
WO2014031531A1 (en) 2012-08-21 2014-02-27 Convergent Life Sciences, Inc. System and method for image guided medical procedures
BR112015004061B1 (pt) 2012-08-30 2021-12-14 Koninklijke Philips N.V. Sistema de geração de imagens por ultrassom para a inspeção de um objeto em um volume, e método para a provisão de uma imagem por ultrassom tridimensional de um objeto em um volume.
US9761014B2 (en) * 2012-11-15 2017-09-12 Siemens Healthcare Gmbh System and method for registering pre-operative and intra-operative images using biomechanical model simulations
DE102012111385B4 (de) * 2012-11-23 2018-05-03 Diers Engineering Gmbh Bestimmen der räumlichen Lage und Orientierung der Wirbelkörper der Wirbelsäule
JP5974238B2 (ja) 2012-12-25 2016-08-23 東芝メディカルシステムズ株式会社 画像処理システム、装置、方法及び医用画像診断装置
EP2967349B1 (en) * 2013-03-15 2021-09-22 Synaptive Medical Inc. Apparatus and method for surgical hyperspectral imaging
CN103345741B (zh) * 2013-06-13 2016-07-06 华中科技大学 一种非刚性多模医学图像精确配准方法

Also Published As

Publication number Publication date
US10535149B2 (en) 2020-01-14
CN106462971A (zh) 2017-02-22
EP3161786A1 (en) 2017-05-03
WO2015197770A1 (en) 2015-12-30
JP2017518826A (ja) 2017-07-13
CN106462971B (zh) 2021-01-26
EP3161786B1 (en) 2019-10-30
US20170148180A1 (en) 2017-05-25

Similar Documents

Publication Publication Date Title
CN107106043B (zh) 椎体特征识别
US9990744B2 (en) Image registration device, image registration method, and image registration program
US20130038629A1 (en) Method and device for visualizing the registration quality of medical image datasets
US10055838B2 (en) Registration of medical images
US9968319B2 (en) Generating an at least three-dimensional display data set
JP6727140B2 (ja) 異なる撮像モダリティのレジストレーションのための撮像機器
JP2007516744A (ja) 弾力的な画像位置合わせ
JP7337556B2 (ja) 医用画像処理装置、x線診断装置及び医用画像処理方法
EP3714792A1 (en) Positioning of an x-ray imaging system
EP2903528B1 (en) Bone suppression in x-ray imaging
JP2007275318A (ja) 画像表示装置、画像表示方法およびそのプログラム
Fang et al. 3D shape reconstruction of lumbar vertebra from two X-ray images and a CT model
JP2007105352A (ja) 差分画像表示装置、差分画像表示方法およびそのプログラム
JP2003263498A (ja) 検査されるべき対象の様々な画像を形成する方法
KR102271614B1 (ko) 3차원 해부학적 기준점 검출 방법 및 장치
US11291424B2 (en) Device and a corresponding method for providing spatial information of an interventional device in a live 2D X-ray image
EP3326536B1 (en) Improved visualization of anatomical cavities
JP6472112B2 (ja) 投影x線画像の改善された視覚化
EP3889896A1 (en) Model-based virtual cleansing for spectral virtual colonoscopy
EP3326537B1 (en) Visualization of distances to walls of anatomical cavities
KR101513229B1 (ko) 수술전 호흡 레벨과 수술장 호흡 레벨을 비교하는 방법

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180620

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181119

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20181114

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20190218

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190510

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190924

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20191219

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200601

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200630

R150 Certificate of patent or registration of utility model

Ref document number: 6727140

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250