DE102005017628A1 - Verfahren und System zum Registrieren von präprozeduralen Bildern mit intraprozeduralen Bilder unter Verwendung einer vorberechneten Informationsdatenbank - Google Patents

Verfahren und System zum Registrieren von präprozeduralen Bildern mit intraprozeduralen Bilder unter Verwendung einer vorberechneten Informationsdatenbank Download PDF

Info

Publication number
DE102005017628A1
DE102005017628A1 DE102005017628A DE102005017628A DE102005017628A1 DE 102005017628 A1 DE102005017628 A1 DE 102005017628A1 DE 102005017628 A DE102005017628 A DE 102005017628A DE 102005017628 A DE102005017628 A DE 102005017628A DE 102005017628 A1 DE102005017628 A1 DE 102005017628A1
Authority
DE
Germany
Prior art keywords
preoperative
images
intraoperative
signature
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE102005017628A
Other languages
English (en)
Inventor
Chenyang Xu
Nassir Navab
Frank Sauer
Ali Khame
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens Medical Solutions USA Inc
Original Assignee
Siemens Corporate Research Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens Corporate Research Inc filed Critical Siemens Corporate Research Inc
Publication of DE102005017628A1 publication Critical patent/DE102005017628A1/de
Withdrawn legal-status Critical Current

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/05Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • A61B5/055Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves  involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03Computed tomography [CT]
    • A61B6/032Transmission computed tomography [CT]

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Physics & Mathematics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Pulmonology (AREA)
  • Optics & Photonics (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Image Analysis (AREA)

Abstract

Es werden ein System und ein Verfahren zum Registrieren von präoperativen Bildern eines Objekts mit einem intraoperativen Bild des Objekts offenbart. Vor einem operativen Vorgang werden digital rekonstruierte Radiogramme (DRRs) für die präoperativen Bilder jedes individuellen Patienten erzeugt. Signaturen werden aus den DRRs extrahiert. Die Signaturen werden in einer Informationsdatenbasis gespeichert. Während des operativen Vorgangs wird eine Signatur aus dem intraoperativen Bild extrahiert. Die intraoperative Signatur wird mit den gespeicherten präoperativen Signaturen verglichen. Ein präoperatives Bild, das eine optimale Signaturübereinstimmung mit der intraoperativen Signatur aufweist, wird abgerufen. Das abgerufene präoperative Bild wird mit dem intraoperativen Bild registriert.

Description

  • Querverweis auf verwandte Anmeldungen
  • Diese Anmeldung beansprucht Priorität der vorläufigen US-Anmeldung mit der Seriennummer 60/564,508, eingereicht am 22. April 2004, die unter Bezugnahme auf ihre Gesamtheit miteinbezogen ist.
  • Gebiet der Erfindung
  • Die vorliegende Erfindung betrifft ein Verfahren und ein System zum Registrieren von präprozeduralen Bildern mit intraprozeduralen Bildern, und insbesondere ein System und ein Verfahren zum Registrieren von präprozeduralen Bildern mit intraprozeduralen Bildern unter Verwendung einer vorberechneten Informationsdatenbasis der präprozeduralen Bilddaten.
  • Hintergrund der Erfindung
  • Medizinische Experten verwerten seit einiger Zeit präoperative oder präprozedurale Bilder und intraoperative oder intraprozedurale Bilder, um ein nützlicheres und preiswertes registriertes Bild eines Organs bereitzustellen, das Gegenstand eines minimal-invasiven therapeutischen Eingriffs ist. Zum Beispiel kann ein Tumor sowohl präoperativ unter Verwendung eines CT-Systems als auch intraoperativ unter Verwendung eines Röntgensystems abgebildet werden. Digital rekonstruierte Radiogramme (Digitally Reconstructed Radiographs; DRRs) werden aus den CT-Bildern rekonstruiert, um die Röntgenbilder zu modellieren. Die präoperativen DRRs und die intraoperativen Bilder werden registriert und zusammengefasst, um sowohl strukturelle als auch funktionale Informationen über den Tumor und das betroffene Organ bereitzustellen. Nachfolgende Bilder, die intraoperativ unter Verwendung des Röntgensystems gemacht wurden, können anschließend mit dem präoperativen Bild im Zeitablauf zusammengeführt werden, um dem Arzt eine Hilfestellung zu geben. Die präoperativen Bilder können Details über die Anatomie bereitstellen, die Gegenstand des Arbeitsverfahrens ist. Dreidimensionale Bildgebungsverfahrensweisen wie zum Beispiel Computertomographie (CT) und Kernspintomographie (MRI) enthalten hochauflösende Informationen über die abgebildete Anatomie.
  • Die intraoperativen Bilder sind typischerweise zweidimensionale Bilder, die verfügbar sind, um dem Arzt eine Indikation des momentanen Zustandes der fraglichen Anatomie bereitzustellen. Röntgen- und Durchleuchtungsbilder werden typischerweise für diese Zwecke verwendet. Zweidimensionale (2D-) Bilder nehmen erheblich weniger Erfassungszeit in Anspruch als dreidimensionale (3D-) Bilder und sind weniger schädigend für den Arzt. Die Auflösung und das Detail der 2D-Bilder sind jedoch denen von dessen 3D-Gegenstück unterlegen. Mittels Kombinieren der präoperativen und intraoperativen Bilder durch Registrieren der zwei Bilder kann der Arzt das Detail der präoperativen Bilder und den augenblicklichen Zustand des Patienten über die intraoperativen Bilder nutzen.
  • Zur herkömmlichen Registrierung eines Projektionsbildes auf einen volumetrischen Datensatz gehören drei Schritte. Erstens wird die Berechnung eines simulierten Projektionsbildes (z.B. digital rekonstruierter Radiogramme (DRR)) durchgeführt, wobei die momentane relative Position eines Röntgenquellbildes und das Volumen gegeben sind. Zweitens wird die Berechnung des Ähnlichkeitsmaßes und/oder Unterschiedsmaßes durchgeführt, das eine Metrik zum Vergleichen des Röntgen- oder Portalbildes mit dem DRR quantifiziert. Drittens wird ein Optimierungsmodell angewandt, das den Parameterraum (z.B. sechsdimensionale Festkörperbewegung) durchsucht, um das Ähnlichkeitsmaß zu maximieren oder das Unterschiedsmaß zu minimieren. Sobald die optimale Position gefunden ist, sollte das DRR-Bild mit dem Röntgenbild übereinstimmen.
  • Die Registrierung von zweidimensionalen (2D) und dreidimensionalen (3D) Bildern ist eine wohlbekannte Technik. Es ist wichtig, das DRR so zu berechnen, dass es mit dem realen Röntgenbild sowohl hinsichtlich Helligkeit als auch Kontrast übereinstimmt. Zusätzlich sollte ein sich gut verhaltendes Ähnlichkeitsmaß ausgewählt werden, das eine Metrik für die Bilder stabil charakterisieren kann. Um solch einen Algorithmus brauchbar zu machen, muss die Rechenzeit reduziert werden. Auf Grundlage des derzeitigen Standes der Technik weisen die Implementierungen derartiger Techniken für typische 3D-Volumendatensätze eine Rechenzeit von wenigen Minuten auf. Die meiste Rechenzeit wird bei der Erzeugung von DRRs verbraucht. Ein weiterer Faktor, der die Rechenzeit beeinflusst, ist die Anzahl der Iterationen, die berechnet werden müssen.
  • Ein Ansatz zur Reduzierung der Rechenzeit ist, zufällig Proben der DRRs zu nehmen und nur diese Proben für die Durchführung der Berechnungen zu verwenden, wodurch die Rechenkomplexität verringert wird. Ein Nachteil diese Ansatzes ist jedoch, dass die Stabilität der Ergebnisse beeinträchtigt wird, da weniger Daten für den Optimierer zur Verfügung stehen, um einen richtigen Schritt auf ein globale Lösung hin voran zu gehen. Für viele praktische Anwendungen, insbesondere bei Eingriffsszenarien, ist die Registrierungszeit entscheidend. Es wäre wünschenswert, in der Lage zu sein, Registrierungen in Echtzeit oder nahe an der Echtzeit durchzuführen.
  • Zusammenfassung der Erfindung
  • Die vorliegende Erfindung betrifft ein System und Verfahren zum Registrieren von präoperativen Bildern eines Objekts zusammen mit einem intraoperativen Bild des Objekts. Vor einem operativen Vorgang werden digital rekonstruierte Radiogramme (DRRs) für die präoperativen Bilder jedes individuellen Patienten erzeugt. Signaturen werden aus den DRRs extrahiert. Die Signaturen werden in einer Informationsdatenbasis gespeichert. Während des operativen Vorgangs wird eine Signatur aus dem intraoperativen Bild extrahiert. Die intraoperative Signatur wird mit den gespeicherten präoperativen Signaturen verglichen. Ein präoperatives Bild, das eine beste Signaturübereinstimmung mit der intraoperativen Signatur aufweist, wird abgerufen. Das abgerufene präoperative Bild wird zusammen mit dem intraoperativen Bild registriert.
  • Kurze Beschreibung der Figuren
  • Bevorzugte Ausführungsformen der vorliegenden Erfindung werden im Nachfolgenden detaillierter beschrieben, wobei gleiche Bezugszeichen gleiche Elemente unter Bezugnahme auf die beigefügten Figuren kennzeichnen:
  • 1 ist ein schematisches Blockschaltbild eines veranschaulichenden Systems zum Implementieren eines Verfahrens zum Registrieren von präoperativen Bildern mit intraoperativen Bildern gemäß der vorliegenden Erfindung;
  • 2 ist ein Flussdiagramm, das ein Verfahren zum Registrieren von präoperativen Bildern mit intraoperativen Bildern gemäß der vorliegenden Erfindung veranschaulicht; und
  • 3 veranschaulicht ein Verfahren zum Registrieren eines präoperativen mit einem intraoperativen Bild gemäß der vorliegenden Erfindung.
  • Detaillierte Beschreibung
  • Die vorliegende Erfindung betrifft ein Verfahren zum Registrieren von präoperativen hochauflösenden Bildern mit intraoperativen niedrigauflösenden Bildern. Gemäß der vorliegenden Erfindung werden digital rekonstruierte Radiogramme (DRRs) in verschiedenen Stellungen für die präoperativen Bilder jedes individuellen Patienten vorberechnet und mit den Bildern in einer Datenbank gespeichert. Da die DRRs vor dem Eingriffsablauf berechnet werden, wurde der Großteil der Komplexität und der Rechenzeit aus dem typischen Registrierungsprozess eliminiert. Auf diese Weise kann die Registrierung eines präoperativen und eines intraoperativen Bildes auf eine extrem schnelle und wirksame Art und Weise verarbeitet werden. Registrierungstechniken des Standes der Technik benötigen bis zu einer Minute Rechenzeit. Durch Implementieren des Verfahrens der vorliegenden Erfindung kann eine Registrierung in Echtzeit (bis zu 20 Vollbilder pro Sekunde) erreicht werden.
  • 1 stellt ein schematisches Blockschaltbild eines veranschaulichenden Systems zum Implementieren des Verfahrens der vorliegenden Erfindung dar. Die vorliegende Erfindung verwertet die präoperativen Bilder und intraoperativen Bilder, um ein nützlicheres und preiswerteres registriertes Bild eines Organs zur Verfügung zu stellen, das Gegenstand eines minimalinvasiven therapeutischen Eingriffs ist. Zum Beispiel kann ein Tumor sowohl präoperativ unter Verwendung eines dreidimensionalen Bildgebungssystems wie zum Beispiel eines Computertomographie- (CT-) Systems oder eines Kernspintomographie- (MRI-) Systems und interoperativ unter Verwendung eines zweidimensionalen Bildgebungssystems wie zum Beispiel einer Röntgen- oder Durchleuchtungsvorrichtung abgebildet werden. Die Bilder werden registriert und zusammengefügt, um sowohl strukturelle als auch funktionale Informationen über den Tumor und das betroffene Organ zur Verfügung zu stellen. Nachfolgende Bilder, die intraoperativ erstellt wurden, können anschließend mit dem präoperativen Bild mit der Zeitzusammengefügt werden, um dem Arzt eine Hilfestellung zu geben.
  • Gemäß der vorliegenden Erfindung wird eine Datenbank 110 basierend auf den präoperativen volumetrischen Daten erzeugt. Die konstruierte Datenbank 110 umfasst die Positionsdaten (z.B. Stellung) jedes Eintrags und ebenfalls einen Satz von Signaturen oder zu dem speziellen Bild gehörenden Merkmalen, die aus dem digital rekonstruierten Radiogramm (d.h. DRR) an derselben Position extrahiert werden. Beispiele solcher Signaturen umfassen ein Intensitätshistogramm, aus mehrfach skalierten Gauss-Filtern oder Gabor-Filtern abgeleitete Invarianten, das Bild selbst usw. Diese Merkmale könnten in einer hierarchischen Art und Weise verwendet werden, die in der Reihenfolge ihrer Abfragewirksamkeit geordnet ist. Wie im Nachfolgenden detaillierter beschrieben werden wird, wird anschließend die Übereinstimmung des Eingriffs(intraoperativen) Bildraums mit dem präoperativen diagnostischen Raum auf die Stellung und der Abruf der extrahierten Signatur des aktuellen Projektionsbildes innerhalb der Datenbank 110 reduziert.
  • Ein Bild eines gewünschten Gewebebereichs oder eines Organs wird durch Anwendung eines Bildgebungssystems 102 wie zum Beispiel einer CT- oder MRI-Vorrichtung erhalten. Die Daten werden für die Bilder des Gewebebereichs oder Organs gesammelt und zur weiteren Verarbeitung durch den Prozessor 1080 gespeichert. Diese Bilder werden vor irgendeinem operativen Vorgang erstellt. Andere Organe oder interne Strukturen können ebenfalls je nach Notwendigkeit abgebildet werden. Die Bilder werden anschließend in DRRs rekonstruiert und die obige Informationsdatenbasis wird erzeugt und in der Datenbank 110 für jedes DRR gespeichert.
  • Bilder desselben gewünschten Gewebebereichs oder Organs werden anschließend durch Verwendung eines intraoperativen Bildgebungssystems 104 erhalten, das auch eine Röntgenvorrichtung oder ein Linearbeschleuniger sein kann. Während des operativen Vorgangs wird ein Anfangsbild erhalten und im Prozessor 108 gespeichert. Die starre Registrierung des Bildes aus dem intraoperativen Bildgebungssystem und der Bilder aus dem präoperativen Bildgebungssystem wird durchgeführt. Vorzugsweise wird das Bild, das von dem intraoperativen Bildgebungssystem erstellt wurde, an ein präoperativ erstelltes Bild angepasst, das die gleiche Stellung aufweist und in einem relativ ähnlichen Zustand ist. Zum Beispiel sollte ein inneres Organ, das abgebildet wird, für beide Bildgebungsverfahren in annähernd demselben Zustand sein, um eine ordentliche Registrierung zu gewährleisten. Das Identifizieren von präoperativen Bildern, die die gleiche Stellung und Signaturen aufweisen, wird erheblich vereinfacht, da eine Übereinstimmung durch Durchführen einer Abfrage in der Informationsdatenbasis leicht gefunden werden kann.
  • Zwei Szenarien können betrachtet werden. Zunächst kann bei abdominalen und den Brustraum betreffenden Verfahren die Starrheit der Bewegung des inneren Organs unter Verwendung entweder von Atemanhaltetechniken oder Gating-Techniken gewährleistet werden (z.B. wird sowohl der präprozedurale als auch der erste Datensatz des interprozeduralen Bildes bei vollständiger Einatmung erstellt). Zum Zweiten gibt es für neurochirurgische Verfahren, nur nach einer Kraniotomie, eine gewisse deformierbare Bewegung der Struktur, die man Brainshift nennt. Dadurch ist die Starrheitsannahme für diese Stufe recht angemessen.
  • Wie oben gezeigt werden die Bilddaten aus dem präoperativen Bildgebungssystem 102 und dem intraoperativen Bildgebungssystem 104 in den Prozessor 108 eingegeben. Der Prozessor 108 kann eine graphische Benutzeroberfläche (GUI) umfassen, die es einem Benutzer ermöglicht, manuell eine Grenze oder eine Kontur um einen interessierenden Bereich in den Bildern zu zeichnen. Alternativ kann ein Segmentierungsalgorithmus angewandt werden, um interessierende Bereiche zu differenzieren und Konturen für Bilder ohne Benutzerinteraktion zu zeichnen. Es können Segmentierungsalgorithmen verwendet werden, die dem Fachmann bekannt sind. Die Datenbank 110 speichert die Bilder.
  • Eine Anzeige 106 ist zum Anzeigen der Bilder und der registrierten Bilder beinhaltet. Eine Schnittstellenvorrichtung oder -vorrichtungen 112 sind ebenfalls umfasst, wie zum Beispiel eine Tastatur, eine Maus oder andere bekannte Vorrichtungen.
  • 2 ist ein Flussdiagramm, das ein beispielhaftes Verfahren zum Registrieren von präoperativen Bildern zusammen mit intraoperativen Bildern gemäß der vorliegenden Erfindung darstellt. Präoperative Bilder eines Patienten erhält man unter Verwendung eines dreidimensionalen (3D)-Bildgebungssystems (Schritt 202). Eine Informationsdatenbasis wird aus dem präoperativen volumetrischen Datensatz erzeugt, der mit den 3D-Bildern assoziiert ist (Schritt 204). Die Informationsdatenbasis umfasst Tausende von DRR-Bildern, die aus dem Volumen für alle bestimmten Stellungen unter Verwendung von Standard-DRR-Algorithmen berechnet werden, die entweder in Soft- oder Hardware implementiert sind. Jede Stellung ist durch die Projektionsmatrix definiert, die die tatsächliche Projektionsmatrix des als Ziel gesetzten C-Arm-Systems für 2D-Fluoro-Bilderfassung imitiert. Die Stellung wird mit einer bestimmten Abtastauflösung variiert, so dass alle Orientierungen in 3D so gleichmäßig wie möglich abgetastet werden.
  • Die Informationsdatenbasis weist Einträge auf, die die Informationen über das DRR bei unterschiedlichen Stellungen und die tatsächliche Position und Orientierung des Objekts, das abgebildet wird, kodieren. Typischerweise werden diese Bilder in medizinischen Anwendungen zur Untersuchung von verschiedenen menschlichen Organen nach medizinischen Zuständen oder nach Tumoren verwendet. Die Art der Informationen, die aus den DRRs in jeder Stellung extrahiert wird, kann je nach Anwendung variieren. Es ist ebenfalls möglich, das gesamte DRR-Bild zusammen mit der Stellungsinformation als einen Dateneintrag zu speichern. Jeder Dateneintrag in der Informationsdatenbasis ist eine kompakte Repräsentation eines DRRs in einer bestimmten Stellung. Merkmale oder Signaturen des DRRs wie zum Beispiel die maximalen Intensitätsgrenzwerte des Bildes können ebenfalls gespeichert werden.
  • Die Informationsdatenbasis ist in einer baumartigen Struktur aufgebaut und ist basierend auf den Positions- und Orientierungsinformationen angeordnet, in denen die Umgebungen definiert werden können. Gemäß der vorliegenden Erfindung wird die Informationsdatenbasis auf der Stellung basierendaufgesetzt. Ähnliche Stellungen werden der gleichen Umgebung zugeordnet. Dies macht den Abruf eines Eintrags in der entsprechenden Stellung schneller und leichter.
  • Die Informationsdatenbasis muss groß genug sein, um Diskrepanzen des Parameterraums bis zu einem gewissen Grad zu berücksichtigen. Je größer der Umfang der Informationsdatenbasis hinsichtlich der Stellung, desto größer ist die Funktionsbasis des Algorithmus als ganzem. Der Abstand. und/oder die Auflösung der Stellungen, die in der Informationsdatenbasis gespeichert sind, kann je nach Anwendung variieren. Eine Implementierung kann berücksichtigen, dass sie eine kompaktere Informationsdatenbasis zu Lasten eines größeren Abstandes zwischen den Stellungen (d.h. eine geringere Stellungsauflösung) aufweist. Diese Art von Implementierung wird dann mit einem Verfeinerungsschritt gekoppelt, wobei ein herkömmlicher Ansatz verwendet werden kann, um eine bessere Genauigkeit zu erzielen und um die verlorene Auflösung in der Informationsdatenbasis zu kompensieren.
  • Die nächsten intraoperativen Bilder desselben Patienten werden erstellt (Schritt 206). Eine Röntgen- oder Durchleuchtungsvorrichtung wird zum Erzeugen der Bilder verwendet. Die Signaturen des Bildes werden auf die gleiche Art und Weise extrahiert, wie die Informationsdatenbasis erzeugt wurde (Schritt 208). Eine Metrik wird definiert, um ein Abstandsmaß innerhalb der Dateneinträge und dem gegebenen intraoperativen Bild bereitzustellen. Die Definition des Abstandsmaßes hängt davon ab, wie die Signaturen definiert werden. Für eine einfache Metrik wie zum Beispiel ein Histogramm könnte eine Summe der quadratischen Abstände verwendet werden, wohingegen für eine aus Gauss- und Gabor-Filtern abgeleitete Bildmetrik man ein Abstandsmaß verwenden könnte, das aus Kreuzkorrelationen und gemeinsamen Daten der beiden Bilder abgeleitet wird. Der Datenabruf wird über die Informationsdatenbasis durchgeführt, um die beste Signaturübereinstimmung eines präoperativen Bildes mit dem momentanen intraoperativen Bild abzurufen (Schritt 210). Die Stellung des sich ergebenden Eintrags würde die Registrierungsinformation tragen. Da die Erzeugung der Informationsdatenbasis vor dem Erhalt der intraoperativen Bilder berechnet wird, können die Extraktion der Signaturen der Röntgenbilder und die Suche und der Abruf der volumetrischen Daten in der Datenbank sehr effizient durchgeführt werden.
  • 3 veranschaulicht das Verfahren zum Registrieren von präoperativen Bildern zusammen mit intraoperativen Bildern gemäß der vorliegenden Erfindung. Vor einem medizinischen Vorgang erhält man 3D-präoperative Bilder 302 des Patienten, in diesem Fall Carotidgefäße, in der oben beschriebenen Art und Weise. DRRs werden in verschiedenen Stellungen für die Bilder vorberechnet und in der Datenbank 306 gespeichert. Als nächstes werden während des medizinischen Vorgangs 2D-intraoperative Bilder 304 der Carotidgefäße erfasst. Vorzugsweise sind Lage und Winkel, in denen die intraoperativen Bilder erfasst werden, dieselben wie die für die präoperativen Bilder. Diese Bilder werden ebenfalls zur Datenbank 306 gesendet. Als Nächstes werden die präoperativen Bilder aus der Datenbank abgerufen und es findet eine Online-Registrierung der präoperativen und intraoperativen Bilder in Echtzeit statt. Das resultierende registrierte Bild 308 wird angezeigt, das im Wesentlichen eine vereinigte Version der 2D- und 3D-Bilder ist.
  • Nach Beschreibung der Ausführungsformen für ein Verfahren zum Registrieren von präoperativen DRRs mit intraoperativen Bildern wird angemerkt, dass Modifikationen und Änderungen durch den Fachmann angesichts der obigen Lehre durchgeführt werden können. Es versteht sich deshalb, dass Änderungen in den besonderen Ausführungsformen der offenbarten Erfindung vollzogen werden können, die innerhalb des Wesens und des Geistes der durch die beigefügten Ansprüche definierten Erfindung liegen. Nachdem hiermit die Erfindung mit den durch das Patentrecht erforderlichen Details und Besonderheiten beschrieben wurde, wird das, was beansprucht ist und durch das Patent geschützt werden soll, in den beigefügten Ansprüchen dargelegt.

Claims (22)

  1. Verfahren zum Registrieren von präoperativen Bildern eines Objekts mit einem intraoperativen Bild des Objekts mit den folgenden Schritten: Erzeugen von digital rekonstruierten Radiogrammen (Digitally Reconstructed Radiographs; DRRs) vor einem operativen Vorgang für die präoperativen Bilder in verschiedenen Stellungen für jeden Patienten; Extrahieren von Signaturen aus den DRRs; Speichern der Signaturen in einer Informationsdatenbasis; Extrahieren einer Signatur aus dem intraoperativen Bild während des operativen Vorgangs; Vergleichen der intraoperativen Signatur mit den gespeicherten präoperativen Signaturen; Abrufen eines präoperativen Bildes, das eine optimale Signaturübereinstimmung mit der intraoperativen Signatur aufweist; und Registrieren des abgerufenen präoperativen Bildes mit dem intraoperativen Bild.
  2. Verfahren nach Anspruch 1, wobei die präoperativen Bilder dreidimensionale (3D-) Bilder sind.
  3. Verfahren nach Anspruch 2, wobei die präoperativen Bilder Computertomographie-Bilder sind.
  4. Verfahren nach Anspruch 2, wobei die präoperativen Bilder Kernspintomographie-Bilder sind.
  5. Verfahren nach Anspruch 1, wobei das intraoperative Bild eine zweidimensionales (2D-) Bild ist.
  6. Verfahren nach Anspruch 5, wobei das intraoperative Bild ein Röntgenbild ist.
  7. Verfahren nach Anspruch 5, wobei das intraoperative Bild ein Durchleuchtungsbild ist.
  8. Verfahren nach Anspruch 1, wobei mindestens eine Signatur ein Histogramm ist.
  9. Verfahren nach Anspruch 1, wobei mindestens eine Signatur eine aus Gauss-Filtern mit mehrfacher Skala abgeleitete Invariante ist.
  10. Verfahren nach Anspruch 1, wobei mindestens eine Signatur eine aus Gabor-Filtern mit mehrfacher Skala abgeleitete Invariante ist.
  11. Verfahren nach Anspruch 1, wobei ein Abstandsmaß verwendet wird, um die intraoperative Signatur mit den präoperativen Signaturen zu vergleichen.
  12. Verfahren nach Anspruch 1, wobei das Objekt ein Patient ist.
  13. System zum Registrieren von präoperativen Bildern eines Objekts mit einem intraoperativen Bild des Objekts umfassend: ein zweidimensionales (2D-) Bildgebungssystem; einen Prozessor zur Durchführung der folgenden Schritte: i). Empfangen von durch ein dreidimensionales (3D-) Bildgebungssystem erzeugten präoperativen Bildern; ii). Erzeugen von digital rekonstruierten Radiogrammen (DRRs) der präoperativen Bilder; iii). Empfangen von durch das 2D-System erzeugten interoperativen Bildern und Extrahieren von Signaturen aus den Bildern; iv). Extrahieren von Signaturen aus den DRRs; v). Vergleichen der intraoperativen Signatur mit den präoperativen Signaturen; vi). Identifizieren eines präoperativen Bildes, das eine optimale Signaturübereinstimmung mit der intraoperativen Signatur aufweist; und vii). Registrieren des identifizierten präoperativen Bildes mit dem intraoperativen Bild; eine Datenbank zum Speichern der präoperativen, der intraoperativen und der registrierten Bilder; und eine Anzeige zum Anzeigen der Bilder.
  14. System nach Anspruch 13, wobei die präoperativen Bilder Computertomographie-Bilder sind.
  15. System nach Anspruch 13, wobei die präoperativen Bilder Kernspintomographie-Bilder sind.
  16. System nach Anspruch 13, wobei das intraoperative Bild ein Röntgenbild ist.
  17. System nach Anspruch 13, wobei das intraoperative Bild ein Durchleuchtungsbild ist.
  18. System nach Anspruch 13, wobei mindestens eine Signatur ein Histogramm ist.
  19. System nach Anspruch 13, wobei mindestens eine Signatur eine aus Gauss-Filtern mit mehrfacher Skala abgeleitete Invariante ist.
  20. System nach Anspruch 13, wobei mindestens eine Signatur eine aus Gabor-Filtern mit mehrfacher Skala abgeleitete Invariante ist.
  21. System nach Anspruch 13, wobei ein Abstandsmaß verwendet wird, um die intraoperative Signatur mit den präoperativen Signaturen zu vergleichen.
  22. System nach Anspruch 13, wobei das Objekt ein Patient ist.
DE102005017628A 2004-04-22 2005-04-15 Verfahren und System zum Registrieren von präprozeduralen Bildern mit intraprozeduralen Bilder unter Verwendung einer vorberechneten Informationsdatenbank Withdrawn DE102005017628A1 (de)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US56450804P 2004-04-22 2004-04-22
US60/564,508 2004-04-22
US11/104,831 US7620223B2 (en) 2004-04-22 2005-04-13 Method and system for registering pre-procedural images with intra-procedural images using a pre-computed knowledge base
US11/104,831 2005-04-13

Publications (1)

Publication Number Publication Date
DE102005017628A1 true DE102005017628A1 (de) 2005-11-17

Family

ID=35160459

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102005017628A Withdrawn DE102005017628A1 (de) 2004-04-22 2005-04-15 Verfahren und System zum Registrieren von präprozeduralen Bildern mit intraprozeduralen Bilder unter Verwendung einer vorberechneten Informationsdatenbank

Country Status (2)

Country Link
US (1) US7620223B2 (de)
DE (1) DE102005017628A1 (de)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102011005634A1 (de) * 2011-03-16 2012-09-20 Friedrich-Alexander-Universität Erlangen-Nürnberg Verfahren zum Bereitstellen eines nachbearbeiteten 3D-Bilddatensatzes, insbesondere zu einer Gefäßstruktur
CN108475436A (zh) * 2015-12-29 2018-08-31 皇家飞利浦有限公司 使用轮廓标志的外科手术图像采集设备的配准

Families Citing this family (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1890261B1 (de) * 2006-08-14 2009-02-18 BrainLAB AG Registrierung von MR-Daten anhand generischer Modelle
US7231076B2 (en) * 2004-06-30 2007-06-12 Accuray, Inc. ROI selection in image registration
US7522779B2 (en) * 2004-06-30 2009-04-21 Accuray, Inc. Image enhancement method and system for fiducial-less tracking of treatment targets
US7366278B2 (en) * 2004-06-30 2008-04-29 Accuray, Inc. DRR generation using a non-linear attenuation model
US7453984B2 (en) * 2006-01-19 2008-11-18 Carestream Health, Inc. Real-time target confirmation for radiation therapy
DE602007012886D1 (de) * 2006-04-12 2011-04-14 Nassir Navab Virtuelle penetrierende spiegelvorrichtung zur visualisierung von virtuellen objekten in angiografischen anwendungen
WO2007115826A2 (en) * 2006-04-12 2007-10-18 Nassir Navab Virtual penetrating mirror device for visualizing of virtual objects within an augmented reality environment
US7822254B2 (en) * 2006-04-21 2010-10-26 Siemens Medical Solutions Usa, Inc. Automatic positioning of matching multi-planar image reformatting (MPR) views of multiple 3D medical images
WO2007128377A1 (en) * 2006-05-04 2007-11-15 Nassir Navab Virtual penetrating mirror device for visualizing virtual objects in endoscopic applications
US7848592B2 (en) * 2006-07-31 2010-12-07 Carestream Health, Inc. Image fusion for radiation therapy
FR2936890B1 (fr) * 2008-10-03 2010-12-03 Univ Grenoble 1 Procede de traitement d'image pour estimer une deformation d'un cerveau d'un patient
US8457437B2 (en) * 2010-03-23 2013-06-04 Raytheon Company System and method for enhancing registered images using edge overlays
US8526700B2 (en) * 2010-10-06 2013-09-03 Robert E. Isaacs Imaging system and method for surgical and interventional medical procedures
US9785246B2 (en) 2010-10-06 2017-10-10 Nuvasive, Inc. Imaging system and method for use in surgical and interventional medical procedures
US11231787B2 (en) 2010-10-06 2022-01-25 Nuvasive, Inc. Imaging system and method for use in surgical and interventional medical procedures
CN104106095A (zh) 2012-02-10 2014-10-15 皇家飞利浦有限公司 临床驱动的图像融合
US10070828B2 (en) 2013-03-05 2018-09-11 Nview Medical Inc. Imaging systems and related apparatus and methods
US10846860B2 (en) 2013-03-05 2020-11-24 Nview Medical Inc. Systems and methods for x-ray tomosynthesis image reconstruction
US9999772B2 (en) * 2014-04-03 2018-06-19 Pacesetter, Inc. Systems and method for deep brain stimulation therapy
US20160012206A1 (en) * 2014-07-10 2016-01-14 Siemens Medical Solutions Usa, Inc. Pictorial report of a medical procedure
US9986983B2 (en) 2014-10-31 2018-06-05 Covidien Lp Computed tomography enhanced fluoroscopic system, device, and method of utilizing the same
GB2536650A (en) 2015-03-24 2016-09-28 Augmedics Ltd Method and system for combining video-based and optic-based augmented reality in a near eye display
US10674982B2 (en) 2015-08-06 2020-06-09 Covidien Lp System and method for local three dimensional volume reconstruction using a standard fluoroscope
US10716525B2 (en) 2015-08-06 2020-07-21 Covidien Lp System and method for navigating to target and performing procedure on target utilizing fluoroscopic-based local three dimensional volume reconstruction
US10702226B2 (en) 2015-08-06 2020-07-07 Covidien Lp System and method for local three dimensional volume reconstruction using a standard fluoroscope
US11172895B2 (en) 2015-12-07 2021-11-16 Covidien Lp Visualization, navigation, and planning with electromagnetic navigation bronchoscopy and cone beam computed tomography integrated
US10716631B2 (en) 2016-03-13 2020-07-21 Vuze Medical Ltd. Apparatus and methods for use with skeletal procedures
US11051886B2 (en) 2016-09-27 2021-07-06 Covidien Lp Systems and methods for performing a surgical navigation procedure
US10434335B2 (en) * 2017-03-30 2019-10-08 Shimadzu Corporation Positioning apparatus and method of positioning by generation of DRR image from X-ray CT image data
US10699448B2 (en) 2017-06-29 2020-06-30 Covidien Lp System and method for identifying, marking and navigating to a target using real time two dimensional fluoroscopic data
WO2019012520A1 (en) 2017-07-08 2019-01-17 Vuze Medical Ltd. APPARATUS AND METHODS FOR USE WITH IMAGE-GUIDED SKELETAL PROCEDURES
CN111373448B (zh) 2017-09-22 2023-12-08 尼维医疗公司 使用机器学习正则化器的图像重建
US10893843B2 (en) 2017-10-10 2021-01-19 Covidien Lp System and method for identifying and marking a target in a fluoroscopic three-dimensional reconstruction
US10905498B2 (en) 2018-02-08 2021-02-02 Covidien Lp System and method for catheter detection in fluoroscopic images and updating displayed position of catheter
WO2019211741A1 (en) 2018-05-02 2019-11-07 Augmedics Ltd. Registration of a fiducial marker for an augmented reality system
US11766296B2 (en) 2018-11-26 2023-09-26 Augmedics Ltd. Tracking system for image-guided surgery
DE102019203192A1 (de) * 2019-03-08 2020-09-10 Siemens Healthcare Gmbh Erzeugung eines digitalen Zwillings für medizinische Untersuchungen
US11980506B2 (en) 2019-07-29 2024-05-14 Augmedics Ltd. Fiducial marker
US11382712B2 (en) 2019-12-22 2022-07-12 Augmedics Ltd. Mirroring in image guided surgery
CN111429491B (zh) * 2020-03-11 2024-02-20 上海嘉奥信息科技发展有限公司 脊柱术前三维影像与术中二维影像配准的方法与***
US11896445B2 (en) 2021-07-07 2024-02-13 Augmedics Ltd. Iliac pin and adapter
WO2024057210A1 (en) 2022-09-13 2024-03-21 Augmedics Ltd. Augmented reality eyewear for image-guided medical intervention

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6347240B1 (en) * 1990-10-19 2002-02-12 St. Louis University System and method for use in displaying images of a body part
US6614453B1 (en) * 2000-05-05 2003-09-02 Koninklijke Philips Electronics, N.V. Method and apparatus for medical image display for surgical tool planning and navigation in clinical environments
US6782287B2 (en) * 2000-06-27 2004-08-24 The Board Of Trustees Of The Leland Stanford Junior University Method and apparatus for tracking a medical instrument based on image registration
US6837892B2 (en) * 2000-07-24 2005-01-04 Mazor Surgical Technologies Ltd. Miniature bone-mounted surgical robot
US7570791B2 (en) * 2003-04-25 2009-08-04 Medtronic Navigation, Inc. Method and apparatus for performing 2D to 3D registration

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102011005634A1 (de) * 2011-03-16 2012-09-20 Friedrich-Alexander-Universität Erlangen-Nürnberg Verfahren zum Bereitstellen eines nachbearbeiteten 3D-Bilddatensatzes, insbesondere zu einer Gefäßstruktur
CN108475436A (zh) * 2015-12-29 2018-08-31 皇家飞利浦有限公司 使用轮廓标志的外科手术图像采集设备的配准

Also Published As

Publication number Publication date
US20050272991A1 (en) 2005-12-08
US7620223B2 (en) 2009-11-17

Similar Documents

Publication Publication Date Title
DE102005017628A1 (de) Verfahren und System zum Registrieren von präprozeduralen Bildern mit intraprozeduralen Bilder unter Verwendung einer vorberechneten Informationsdatenbank
DE102015221998B4 (de) Verfahren zur Unterstützung eines Befunders bei der Ortsbeschreibung einer Zielstruktur in einer Brust, Vorrichtung und Computerprogramm
DE60319288T2 (de) Verfahren und vorrichtung zum identifizieren von pathologien in gehirnbildern
DE19851597B4 (de) Verfahren und Gerät zur Erzeugung verbesserter Bilder von Kranzarterien
DE102008037424A1 (de) Verbessertes System und Verfahren für auf Volumen basierende Registrierung
DE102004055767A1 (de) Verfahren und Vorrichtung zum Verarbeiten von Bilddaten, um die Erfassung einer Erkrankung zu untersützen
DE102006038485A1 (de) System und Verfahren für die auf Merkmalen hervorstechender Bereiche basierende 3D-Multimodalitäts-Registrierung von medizinischen Bildern
DE102005038326A1 (de) Verfahren und Vorrichtung zur Planung medizinischer Eingriffsprozeduren und zur Lokalisierung und Navigation eines Eingriffswerkzeugs
DE10048029A1 (de) Verfahren zur Berechnung einer zwei Abbildungen verbindenden Transformation
DE19946429A1 (de) Kontinuierliche Erfassung und Analyse von Gewebeveränderungen
DE112016006137T5 (de) Synthetische Darstellung einer Gefäßstruktur
DE102006058941A1 (de) Verfahren und Vorrichtung zum Auswählen computergestützter Algorithmen, basierend auf dem Protokoll und/oder Parametern eines Akquisitionssystems
DE10054814A1 (de) Verfahren und Vorrichtung zur Registrierung von Bildern
US8331635B2 (en) Cartesian human morpho-informatic system
DE102010018261B4 (de) Verfahren und Computersystem zur automatischen Vektorisierung eines Gefäßbaumes
DE112004001691T5 (de) Verfahren und System zur automatischen Ausrichtung von lokalen Visualisierungstechniken für vaskuläre Strukturen
DE102014201321A1 (de) Bestimmung von Läsionen in Bilddaten eines Untersuchungsobjekts
DE112019004300T5 (de) Ähnlichkeitsbestimmungsvorrichtung, ähnlichkeitsbestimmungsverfahren und ähnlichkeitsbestimmungsprogramm
DE102019216745A1 (de) Anonymisierung von medizinischen Bilddaten
DE102019217576B4 (de) Identifizieren und Bereitstellen von Fehlausrichtungsbildmerkmalen
DE102007028906B4 (de) Verwendung eines Bildakquisitions-, Bildarchivierungs- und Bildvisualisierungssystems und Verfahren zur Unterstützung eines unter nuklearmedizinischer oder radiologischer Bildgebung durchgeführten Stagings oder Restagings zur Registrierung und Beurteilung der Entwicklung räumlich und/oder strukturell veränderlicher pathologischer Strukturen
DE112020005870T5 (de) Unterstützungsvorrichtung für dokumentenerstellung, unterstützungsverfahren für dokumentenerstellung und unterstützungsprogramm für dokumentenerstellung
DE10254943A1 (de) Verfahren zum Herstellen eines Volumendatensatzes
DE102007001116A1 (de) Verfahren und Vorrichtung zur Registrierung von zumindest drei unterschiedlichen Bilddatensätzen eines Objektes
EP1363242B1 (de) Verfahren und Vorrichtung zum Lokalisieren einer Struktur in einem gemessenen Datensatz

Legal Events

Date Code Title Description
OP8 Request for examination as to paragraph 44 patent law
8127 New person/name/address of the applicant

Owner name: SIEMENS MEDICAL SOLUTIONS USA, INC., MALVERN, PA.,

8139 Disposal/non-payment of the annual fee