DE102005017628A1 - Verfahren und System zum Registrieren von präprozeduralen Bildern mit intraprozeduralen Bilder unter Verwendung einer vorberechneten Informationsdatenbank - Google Patents
Verfahren und System zum Registrieren von präprozeduralen Bildern mit intraprozeduralen Bilder unter Verwendung einer vorberechneten Informationsdatenbank Download PDFInfo
- Publication number
- DE102005017628A1 DE102005017628A1 DE102005017628A DE102005017628A DE102005017628A1 DE 102005017628 A1 DE102005017628 A1 DE 102005017628A1 DE 102005017628 A DE102005017628 A DE 102005017628A DE 102005017628 A DE102005017628 A DE 102005017628A DE 102005017628 A1 DE102005017628 A1 DE 102005017628A1
- Authority
- DE
- Germany
- Prior art keywords
- preoperative
- images
- intraoperative
- signature
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000000034 method Methods 0.000 title claims abstract description 45
- 238000003384 imaging method Methods 0.000 claims description 14
- 238000002591 computed tomography Methods 0.000 claims description 9
- 238000002595 magnetic resonance imaging Methods 0.000 claims description 5
- 238000001356 surgical procedure Methods 0.000 abstract description 2
- 210000000056 organ Anatomy 0.000 description 10
- 206010028980 Neoplasm Diseases 0.000 description 5
- 210000003484 anatomy Anatomy 0.000 description 3
- 238000013459 approach Methods 0.000 description 3
- 238000013479 data entry Methods 0.000 description 3
- 238000011524 similarity measure Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 230000003187 abdominal effect Effects 0.000 description 1
- 230000001010 compromised effect Effects 0.000 description 1
- 238000007428 craniotomy Methods 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000001225 therapeutic effect Effects 0.000 description 1
- 238000002560 therapeutic procedure Methods 0.000 description 1
- 210000000115 thoracic cavity Anatomy 0.000 description 1
- 210000001835 viscera Anatomy 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves
- A61B5/055—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
- A61B6/03—Computed tomography [CT]
- A61B6/032—Transmission computed tomography [CT]
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Medical Informatics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Physics & Mathematics (AREA)
- Radiology & Medical Imaging (AREA)
- Molecular Biology (AREA)
- Biophysics (AREA)
- Veterinary Medicine (AREA)
- Public Health (AREA)
- Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- High Energy & Nuclear Physics (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Pulmonology (AREA)
- Optics & Photonics (AREA)
- Theoretical Computer Science (AREA)
- Processing Or Creating Images (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Image Analysis (AREA)
Abstract
Es werden ein System und ein Verfahren zum Registrieren von präoperativen Bildern eines Objekts mit einem intraoperativen Bild des Objekts offenbart. Vor einem operativen Vorgang werden digital rekonstruierte Radiogramme (DRRs) für die präoperativen Bilder jedes individuellen Patienten erzeugt. Signaturen werden aus den DRRs extrahiert. Die Signaturen werden in einer Informationsdatenbasis gespeichert. Während des operativen Vorgangs wird eine Signatur aus dem intraoperativen Bild extrahiert. Die intraoperative Signatur wird mit den gespeicherten präoperativen Signaturen verglichen. Ein präoperatives Bild, das eine optimale Signaturübereinstimmung mit der intraoperativen Signatur aufweist, wird abgerufen. Das abgerufene präoperative Bild wird mit dem intraoperativen Bild registriert.
Description
- Querverweis auf verwandte Anmeldungen
- Diese Anmeldung beansprucht Priorität der vorläufigen US-Anmeldung mit der Seriennummer 60/564,508, eingereicht am 22. April 2004, die unter Bezugnahme auf ihre Gesamtheit miteinbezogen ist.
- Gebiet der Erfindung
- Die vorliegende Erfindung betrifft ein Verfahren und ein System zum Registrieren von präprozeduralen Bildern mit intraprozeduralen Bildern, und insbesondere ein System und ein Verfahren zum Registrieren von präprozeduralen Bildern mit intraprozeduralen Bildern unter Verwendung einer vorberechneten Informationsdatenbasis der präprozeduralen Bilddaten.
- Hintergrund der Erfindung
- Medizinische Experten verwerten seit einiger Zeit präoperative oder präprozedurale Bilder und intraoperative oder intraprozedurale Bilder, um ein nützlicheres und preiswertes registriertes Bild eines Organs bereitzustellen, das Gegenstand eines minimal-invasiven therapeutischen Eingriffs ist. Zum Beispiel kann ein Tumor sowohl präoperativ unter Verwendung eines CT-Systems als auch intraoperativ unter Verwendung eines Röntgensystems abgebildet werden. Digital rekonstruierte Radiogramme (Digitally Reconstructed Radiographs; DRRs) werden aus den CT-Bildern rekonstruiert, um die Röntgenbilder zu modellieren. Die präoperativen DRRs und die intraoperativen Bilder werden registriert und zusammengefasst, um sowohl strukturelle als auch funktionale Informationen über den Tumor und das betroffene Organ bereitzustellen. Nachfolgende Bilder, die intraoperativ unter Verwendung des Röntgensystems gemacht wurden, können anschließend mit dem präoperativen Bild im Zeitablauf zusammengeführt werden, um dem Arzt eine Hilfestellung zu geben. Die präoperativen Bilder können Details über die Anatomie bereitstellen, die Gegenstand des Arbeitsverfahrens ist. Dreidimensionale Bildgebungsverfahrensweisen wie zum Beispiel Computertomographie (CT) und Kernspintomographie (MRI) enthalten hochauflösende Informationen über die abgebildete Anatomie.
- Die intraoperativen Bilder sind typischerweise zweidimensionale Bilder, die verfügbar sind, um dem Arzt eine Indikation des momentanen Zustandes der fraglichen Anatomie bereitzustellen. Röntgen- und Durchleuchtungsbilder werden typischerweise für diese Zwecke verwendet. Zweidimensionale (2D-) Bilder nehmen erheblich weniger Erfassungszeit in Anspruch als dreidimensionale (3D-) Bilder und sind weniger schädigend für den Arzt. Die Auflösung und das Detail der 2D-Bilder sind jedoch denen von dessen 3D-Gegenstück unterlegen. Mittels Kombinieren der präoperativen und intraoperativen Bilder durch Registrieren der zwei Bilder kann der Arzt das Detail der präoperativen Bilder und den augenblicklichen Zustand des Patienten über die intraoperativen Bilder nutzen.
- Zur herkömmlichen Registrierung eines Projektionsbildes auf einen volumetrischen Datensatz gehören drei Schritte. Erstens wird die Berechnung eines simulierten Projektionsbildes (z.B. digital rekonstruierter Radiogramme (DRR)) durchgeführt, wobei die momentane relative Position eines Röntgenquellbildes und das Volumen gegeben sind. Zweitens wird die Berechnung des Ähnlichkeitsmaßes und/oder Unterschiedsmaßes durchgeführt, das eine Metrik zum Vergleichen des Röntgen- oder Portalbildes mit dem DRR quantifiziert. Drittens wird ein Optimierungsmodell angewandt, das den Parameterraum (z.B. sechsdimensionale Festkörperbewegung) durchsucht, um das Ähnlichkeitsmaß zu maximieren oder das Unterschiedsmaß zu minimieren. Sobald die optimale Position gefunden ist, sollte das DRR-Bild mit dem Röntgenbild übereinstimmen.
- Die Registrierung von zweidimensionalen (2D) und dreidimensionalen (3D) Bildern ist eine wohlbekannte Technik. Es ist wichtig, das DRR so zu berechnen, dass es mit dem realen Röntgenbild sowohl hinsichtlich Helligkeit als auch Kontrast übereinstimmt. Zusätzlich sollte ein sich gut verhaltendes Ähnlichkeitsmaß ausgewählt werden, das eine Metrik für die Bilder stabil charakterisieren kann. Um solch einen Algorithmus brauchbar zu machen, muss die Rechenzeit reduziert werden. Auf Grundlage des derzeitigen Standes der Technik weisen die Implementierungen derartiger Techniken für typische 3D-Volumendatensätze eine Rechenzeit von wenigen Minuten auf. Die meiste Rechenzeit wird bei der Erzeugung von DRRs verbraucht. Ein weiterer Faktor, der die Rechenzeit beeinflusst, ist die Anzahl der Iterationen, die berechnet werden müssen.
- Ein Ansatz zur Reduzierung der Rechenzeit ist, zufällig Proben der DRRs zu nehmen und nur diese Proben für die Durchführung der Berechnungen zu verwenden, wodurch die Rechenkomplexität verringert wird. Ein Nachteil diese Ansatzes ist jedoch, dass die Stabilität der Ergebnisse beeinträchtigt wird, da weniger Daten für den Optimierer zur Verfügung stehen, um einen richtigen Schritt auf ein globale Lösung hin voran zu gehen. Für viele praktische Anwendungen, insbesondere bei Eingriffsszenarien, ist die Registrierungszeit entscheidend. Es wäre wünschenswert, in der Lage zu sein, Registrierungen in Echtzeit oder nahe an der Echtzeit durchzuführen.
- Zusammenfassung der Erfindung
- Die vorliegende Erfindung betrifft ein System und Verfahren zum Registrieren von präoperativen Bildern eines Objekts zusammen mit einem intraoperativen Bild des Objekts. Vor einem operativen Vorgang werden digital rekonstruierte Radiogramme (DRRs) für die präoperativen Bilder jedes individuellen Patienten erzeugt. Signaturen werden aus den DRRs extrahiert. Die Signaturen werden in einer Informationsdatenbasis gespeichert. Während des operativen Vorgangs wird eine Signatur aus dem intraoperativen Bild extrahiert. Die intraoperative Signatur wird mit den gespeicherten präoperativen Signaturen verglichen. Ein präoperatives Bild, das eine beste Signaturübereinstimmung mit der intraoperativen Signatur aufweist, wird abgerufen. Das abgerufene präoperative Bild wird zusammen mit dem intraoperativen Bild registriert.
- Kurze Beschreibung der Figuren
- Bevorzugte Ausführungsformen der vorliegenden Erfindung werden im Nachfolgenden detaillierter beschrieben, wobei gleiche Bezugszeichen gleiche Elemente unter Bezugnahme auf die beigefügten Figuren kennzeichnen:
-
1 ist ein schematisches Blockschaltbild eines veranschaulichenden Systems zum Implementieren eines Verfahrens zum Registrieren von präoperativen Bildern mit intraoperativen Bildern gemäß der vorliegenden Erfindung; -
2 ist ein Flussdiagramm, das ein Verfahren zum Registrieren von präoperativen Bildern mit intraoperativen Bildern gemäß der vorliegenden Erfindung veranschaulicht; und -
3 veranschaulicht ein Verfahren zum Registrieren eines präoperativen mit einem intraoperativen Bild gemäß der vorliegenden Erfindung. - Detaillierte Beschreibung
- Die vorliegende Erfindung betrifft ein Verfahren zum Registrieren von präoperativen hochauflösenden Bildern mit intraoperativen niedrigauflösenden Bildern. Gemäß der vorliegenden Erfindung werden digital rekonstruierte Radiogramme (DRRs) in verschiedenen Stellungen für die präoperativen Bilder jedes individuellen Patienten vorberechnet und mit den Bildern in einer Datenbank gespeichert. Da die DRRs vor dem Eingriffsablauf berechnet werden, wurde der Großteil der Komplexität und der Rechenzeit aus dem typischen Registrierungsprozess eliminiert. Auf diese Weise kann die Registrierung eines präoperativen und eines intraoperativen Bildes auf eine extrem schnelle und wirksame Art und Weise verarbeitet werden. Registrierungstechniken des Standes der Technik benötigen bis zu einer Minute Rechenzeit. Durch Implementieren des Verfahrens der vorliegenden Erfindung kann eine Registrierung in Echtzeit (bis zu 20 Vollbilder pro Sekunde) erreicht werden.
-
1 stellt ein schematisches Blockschaltbild eines veranschaulichenden Systems zum Implementieren des Verfahrens der vorliegenden Erfindung dar. Die vorliegende Erfindung verwertet die präoperativen Bilder und intraoperativen Bilder, um ein nützlicheres und preiswerteres registriertes Bild eines Organs zur Verfügung zu stellen, das Gegenstand eines minimalinvasiven therapeutischen Eingriffs ist. Zum Beispiel kann ein Tumor sowohl präoperativ unter Verwendung eines dreidimensionalen Bildgebungssystems wie zum Beispiel eines Computertomographie- (CT-) Systems oder eines Kernspintomographie- (MRI-) Systems und interoperativ unter Verwendung eines zweidimensionalen Bildgebungssystems wie zum Beispiel einer Röntgen- oder Durchleuchtungsvorrichtung abgebildet werden. Die Bilder werden registriert und zusammengefügt, um sowohl strukturelle als auch funktionale Informationen über den Tumor und das betroffene Organ zur Verfügung zu stellen. Nachfolgende Bilder, die intraoperativ erstellt wurden, können anschließend mit dem präoperativen Bild mit der Zeitzusammengefügt werden, um dem Arzt eine Hilfestellung zu geben. - Gemäß der vorliegenden Erfindung wird eine Datenbank
110 basierend auf den präoperativen volumetrischen Daten erzeugt. Die konstruierte Datenbank110 umfasst die Positionsdaten (z.B. Stellung) jedes Eintrags und ebenfalls einen Satz von Signaturen oder zu dem speziellen Bild gehörenden Merkmalen, die aus dem digital rekonstruierten Radiogramm (d.h. DRR) an derselben Position extrahiert werden. Beispiele solcher Signaturen umfassen ein Intensitätshistogramm, aus mehrfach skalierten Gauss-Filtern oder Gabor-Filtern abgeleitete Invarianten, das Bild selbst usw. Diese Merkmale könnten in einer hierarchischen Art und Weise verwendet werden, die in der Reihenfolge ihrer Abfragewirksamkeit geordnet ist. Wie im Nachfolgenden detaillierter beschrieben werden wird, wird anschließend die Übereinstimmung des Eingriffs(intraoperativen) Bildraums mit dem präoperativen diagnostischen Raum auf die Stellung und der Abruf der extrahierten Signatur des aktuellen Projektionsbildes innerhalb der Datenbank110 reduziert. - Ein Bild eines gewünschten Gewebebereichs oder eines Organs wird durch Anwendung eines Bildgebungssystems
102 wie zum Beispiel einer CT- oder MRI-Vorrichtung erhalten. Die Daten werden für die Bilder des Gewebebereichs oder Organs gesammelt und zur weiteren Verarbeitung durch den Prozessor 1080 gespeichert. Diese Bilder werden vor irgendeinem operativen Vorgang erstellt. Andere Organe oder interne Strukturen können ebenfalls je nach Notwendigkeit abgebildet werden. Die Bilder werden anschließend in DRRs rekonstruiert und die obige Informationsdatenbasis wird erzeugt und in der Datenbank110 für jedes DRR gespeichert. - Bilder desselben gewünschten Gewebebereichs oder Organs werden anschließend durch Verwendung eines intraoperativen Bildgebungssystems
104 erhalten, das auch eine Röntgenvorrichtung oder ein Linearbeschleuniger sein kann. Während des operativen Vorgangs wird ein Anfangsbild erhalten und im Prozessor108 gespeichert. Die starre Registrierung des Bildes aus dem intraoperativen Bildgebungssystem und der Bilder aus dem präoperativen Bildgebungssystem wird durchgeführt. Vorzugsweise wird das Bild, das von dem intraoperativen Bildgebungssystem erstellt wurde, an ein präoperativ erstelltes Bild angepasst, das die gleiche Stellung aufweist und in einem relativ ähnlichen Zustand ist. Zum Beispiel sollte ein inneres Organ, das abgebildet wird, für beide Bildgebungsverfahren in annähernd demselben Zustand sein, um eine ordentliche Registrierung zu gewährleisten. Das Identifizieren von präoperativen Bildern, die die gleiche Stellung und Signaturen aufweisen, wird erheblich vereinfacht, da eine Übereinstimmung durch Durchführen einer Abfrage in der Informationsdatenbasis leicht gefunden werden kann. - Zwei Szenarien können betrachtet werden. Zunächst kann bei abdominalen und den Brustraum betreffenden Verfahren die Starrheit der Bewegung des inneren Organs unter Verwendung entweder von Atemanhaltetechniken oder Gating-Techniken gewährleistet werden (z.B. wird sowohl der präprozedurale als auch der erste Datensatz des interprozeduralen Bildes bei vollständiger Einatmung erstellt). Zum Zweiten gibt es für neurochirurgische Verfahren, nur nach einer Kraniotomie, eine gewisse deformierbare Bewegung der Struktur, die man Brainshift nennt. Dadurch ist die Starrheitsannahme für diese Stufe recht angemessen.
- Wie oben gezeigt werden die Bilddaten aus dem präoperativen Bildgebungssystem
102 und dem intraoperativen Bildgebungssystem104 in den Prozessor108 eingegeben. Der Prozessor108 kann eine graphische Benutzeroberfläche (GUI) umfassen, die es einem Benutzer ermöglicht, manuell eine Grenze oder eine Kontur um einen interessierenden Bereich in den Bildern zu zeichnen. Alternativ kann ein Segmentierungsalgorithmus angewandt werden, um interessierende Bereiche zu differenzieren und Konturen für Bilder ohne Benutzerinteraktion zu zeichnen. Es können Segmentierungsalgorithmen verwendet werden, die dem Fachmann bekannt sind. Die Datenbank110 speichert die Bilder. - Eine Anzeige
106 ist zum Anzeigen der Bilder und der registrierten Bilder beinhaltet. Eine Schnittstellenvorrichtung oder -vorrichtungen112 sind ebenfalls umfasst, wie zum Beispiel eine Tastatur, eine Maus oder andere bekannte Vorrichtungen. -
2 ist ein Flussdiagramm, das ein beispielhaftes Verfahren zum Registrieren von präoperativen Bildern zusammen mit intraoperativen Bildern gemäß der vorliegenden Erfindung darstellt. Präoperative Bilder eines Patienten erhält man unter Verwendung eines dreidimensionalen (3D)-Bildgebungssystems (Schritt202 ). Eine Informationsdatenbasis wird aus dem präoperativen volumetrischen Datensatz erzeugt, der mit den 3D-Bildern assoziiert ist (Schritt204 ). Die Informationsdatenbasis umfasst Tausende von DRR-Bildern, die aus dem Volumen für alle bestimmten Stellungen unter Verwendung von Standard-DRR-Algorithmen berechnet werden, die entweder in Soft- oder Hardware implementiert sind. Jede Stellung ist durch die Projektionsmatrix definiert, die die tatsächliche Projektionsmatrix des als Ziel gesetzten C-Arm-Systems für 2D-Fluoro-Bilderfassung imitiert. Die Stellung wird mit einer bestimmten Abtastauflösung variiert, so dass alle Orientierungen in 3D so gleichmäßig wie möglich abgetastet werden. - Die Informationsdatenbasis weist Einträge auf, die die Informationen über das DRR bei unterschiedlichen Stellungen und die tatsächliche Position und Orientierung des Objekts, das abgebildet wird, kodieren. Typischerweise werden diese Bilder in medizinischen Anwendungen zur Untersuchung von verschiedenen menschlichen Organen nach medizinischen Zuständen oder nach Tumoren verwendet. Die Art der Informationen, die aus den DRRs in jeder Stellung extrahiert wird, kann je nach Anwendung variieren. Es ist ebenfalls möglich, das gesamte DRR-Bild zusammen mit der Stellungsinformation als einen Dateneintrag zu speichern. Jeder Dateneintrag in der Informationsdatenbasis ist eine kompakte Repräsentation eines DRRs in einer bestimmten Stellung. Merkmale oder Signaturen des DRRs wie zum Beispiel die maximalen Intensitätsgrenzwerte des Bildes können ebenfalls gespeichert werden.
- Die Informationsdatenbasis ist in einer baumartigen Struktur aufgebaut und ist basierend auf den Positions- und Orientierungsinformationen angeordnet, in denen die Umgebungen definiert werden können. Gemäß der vorliegenden Erfindung wird die Informationsdatenbasis auf der Stellung basierendaufgesetzt. Ähnliche Stellungen werden der gleichen Umgebung zugeordnet. Dies macht den Abruf eines Eintrags in der entsprechenden Stellung schneller und leichter.
- Die Informationsdatenbasis muss groß genug sein, um Diskrepanzen des Parameterraums bis zu einem gewissen Grad zu berücksichtigen. Je größer der Umfang der Informationsdatenbasis hinsichtlich der Stellung, desto größer ist die Funktionsbasis des Algorithmus als ganzem. Der Abstand. und/oder die Auflösung der Stellungen, die in der Informationsdatenbasis gespeichert sind, kann je nach Anwendung variieren. Eine Implementierung kann berücksichtigen, dass sie eine kompaktere Informationsdatenbasis zu Lasten eines größeren Abstandes zwischen den Stellungen (d.h. eine geringere Stellungsauflösung) aufweist. Diese Art von Implementierung wird dann mit einem Verfeinerungsschritt gekoppelt, wobei ein herkömmlicher Ansatz verwendet werden kann, um eine bessere Genauigkeit zu erzielen und um die verlorene Auflösung in der Informationsdatenbasis zu kompensieren.
- Die nächsten intraoperativen Bilder desselben Patienten werden erstellt (Schritt
206 ). Eine Röntgen- oder Durchleuchtungsvorrichtung wird zum Erzeugen der Bilder verwendet. Die Signaturen des Bildes werden auf die gleiche Art und Weise extrahiert, wie die Informationsdatenbasis erzeugt wurde (Schritt208 ). Eine Metrik wird definiert, um ein Abstandsmaß innerhalb der Dateneinträge und dem gegebenen intraoperativen Bild bereitzustellen. Die Definition des Abstandsmaßes hängt davon ab, wie die Signaturen definiert werden. Für eine einfache Metrik wie zum Beispiel ein Histogramm könnte eine Summe der quadratischen Abstände verwendet werden, wohingegen für eine aus Gauss- und Gabor-Filtern abgeleitete Bildmetrik man ein Abstandsmaß verwenden könnte, das aus Kreuzkorrelationen und gemeinsamen Daten der beiden Bilder abgeleitet wird. Der Datenabruf wird über die Informationsdatenbasis durchgeführt, um die beste Signaturübereinstimmung eines präoperativen Bildes mit dem momentanen intraoperativen Bild abzurufen (Schritt210 ). Die Stellung des sich ergebenden Eintrags würde die Registrierungsinformation tragen. Da die Erzeugung der Informationsdatenbasis vor dem Erhalt der intraoperativen Bilder berechnet wird, können die Extraktion der Signaturen der Röntgenbilder und die Suche und der Abruf der volumetrischen Daten in der Datenbank sehr effizient durchgeführt werden. -
3 veranschaulicht das Verfahren zum Registrieren von präoperativen Bildern zusammen mit intraoperativen Bildern gemäß der vorliegenden Erfindung. Vor einem medizinischen Vorgang erhält man 3D-präoperative Bilder302 des Patienten, in diesem Fall Carotidgefäße, in der oben beschriebenen Art und Weise. DRRs werden in verschiedenen Stellungen für die Bilder vorberechnet und in der Datenbank306 gespeichert. Als nächstes werden während des medizinischen Vorgangs 2D-intraoperative Bilder304 der Carotidgefäße erfasst. Vorzugsweise sind Lage und Winkel, in denen die intraoperativen Bilder erfasst werden, dieselben wie die für die präoperativen Bilder. Diese Bilder werden ebenfalls zur Datenbank306 gesendet. Als Nächstes werden die präoperativen Bilder aus der Datenbank abgerufen und es findet eine Online-Registrierung der präoperativen und intraoperativen Bilder in Echtzeit statt. Das resultierende registrierte Bild308 wird angezeigt, das im Wesentlichen eine vereinigte Version der 2D- und 3D-Bilder ist. - Nach Beschreibung der Ausführungsformen für ein Verfahren zum Registrieren von präoperativen DRRs mit intraoperativen Bildern wird angemerkt, dass Modifikationen und Änderungen durch den Fachmann angesichts der obigen Lehre durchgeführt werden können. Es versteht sich deshalb, dass Änderungen in den besonderen Ausführungsformen der offenbarten Erfindung vollzogen werden können, die innerhalb des Wesens und des Geistes der durch die beigefügten Ansprüche definierten Erfindung liegen. Nachdem hiermit die Erfindung mit den durch das Patentrecht erforderlichen Details und Besonderheiten beschrieben wurde, wird das, was beansprucht ist und durch das Patent geschützt werden soll, in den beigefügten Ansprüchen dargelegt.
Claims (22)
- Verfahren zum Registrieren von präoperativen Bildern eines Objekts mit einem intraoperativen Bild des Objekts mit den folgenden Schritten: Erzeugen von digital rekonstruierten Radiogrammen (Digitally Reconstructed Radiographs; DRRs) vor einem operativen Vorgang für die präoperativen Bilder in verschiedenen Stellungen für jeden Patienten; Extrahieren von Signaturen aus den DRRs; Speichern der Signaturen in einer Informationsdatenbasis; Extrahieren einer Signatur aus dem intraoperativen Bild während des operativen Vorgangs; Vergleichen der intraoperativen Signatur mit den gespeicherten präoperativen Signaturen; Abrufen eines präoperativen Bildes, das eine optimale Signaturübereinstimmung mit der intraoperativen Signatur aufweist; und Registrieren des abgerufenen präoperativen Bildes mit dem intraoperativen Bild.
- Verfahren nach Anspruch 1, wobei die präoperativen Bilder dreidimensionale (3D-) Bilder sind.
- Verfahren nach Anspruch 2, wobei die präoperativen Bilder Computertomographie-Bilder sind.
- Verfahren nach Anspruch 2, wobei die präoperativen Bilder Kernspintomographie-Bilder sind.
- Verfahren nach Anspruch 1, wobei das intraoperative Bild eine zweidimensionales (2D-) Bild ist.
- Verfahren nach Anspruch 5, wobei das intraoperative Bild ein Röntgenbild ist.
- Verfahren nach Anspruch 5, wobei das intraoperative Bild ein Durchleuchtungsbild ist.
- Verfahren nach Anspruch 1, wobei mindestens eine Signatur ein Histogramm ist.
- Verfahren nach Anspruch 1, wobei mindestens eine Signatur eine aus Gauss-Filtern mit mehrfacher Skala abgeleitete Invariante ist.
- Verfahren nach Anspruch 1, wobei mindestens eine Signatur eine aus Gabor-Filtern mit mehrfacher Skala abgeleitete Invariante ist.
- Verfahren nach Anspruch 1, wobei ein Abstandsmaß verwendet wird, um die intraoperative Signatur mit den präoperativen Signaturen zu vergleichen.
- Verfahren nach Anspruch 1, wobei das Objekt ein Patient ist.
- System zum Registrieren von präoperativen Bildern eines Objekts mit einem intraoperativen Bild des Objekts umfassend: ein zweidimensionales (2D-) Bildgebungssystem; einen Prozessor zur Durchführung der folgenden Schritte: i). Empfangen von durch ein dreidimensionales (3D-) Bildgebungssystem erzeugten präoperativen Bildern; ii). Erzeugen von digital rekonstruierten Radiogrammen (DRRs) der präoperativen Bilder; iii). Empfangen von durch das 2D-System erzeugten interoperativen Bildern und Extrahieren von Signaturen aus den Bildern; iv). Extrahieren von Signaturen aus den DRRs; v). Vergleichen der intraoperativen Signatur mit den präoperativen Signaturen; vi). Identifizieren eines präoperativen Bildes, das eine optimale Signaturübereinstimmung mit der intraoperativen Signatur aufweist; und vii). Registrieren des identifizierten präoperativen Bildes mit dem intraoperativen Bild; eine Datenbank zum Speichern der präoperativen, der intraoperativen und der registrierten Bilder; und eine Anzeige zum Anzeigen der Bilder.
- System nach Anspruch 13, wobei die präoperativen Bilder Computertomographie-Bilder sind.
- System nach Anspruch 13, wobei die präoperativen Bilder Kernspintomographie-Bilder sind.
- System nach Anspruch 13, wobei das intraoperative Bild ein Röntgenbild ist.
- System nach Anspruch 13, wobei das intraoperative Bild ein Durchleuchtungsbild ist.
- System nach Anspruch 13, wobei mindestens eine Signatur ein Histogramm ist.
- System nach Anspruch 13, wobei mindestens eine Signatur eine aus Gauss-Filtern mit mehrfacher Skala abgeleitete Invariante ist.
- System nach Anspruch 13, wobei mindestens eine Signatur eine aus Gabor-Filtern mit mehrfacher Skala abgeleitete Invariante ist.
- System nach Anspruch 13, wobei ein Abstandsmaß verwendet wird, um die intraoperative Signatur mit den präoperativen Signaturen zu vergleichen.
- System nach Anspruch 13, wobei das Objekt ein Patient ist.
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US56450804P | 2004-04-22 | 2004-04-22 | |
US60/564,508 | 2004-04-22 | ||
US11/104,831 US7620223B2 (en) | 2004-04-22 | 2005-04-13 | Method and system for registering pre-procedural images with intra-procedural images using a pre-computed knowledge base |
US11/104,831 | 2005-04-13 |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102005017628A1 true DE102005017628A1 (de) | 2005-11-17 |
Family
ID=35160459
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102005017628A Withdrawn DE102005017628A1 (de) | 2004-04-22 | 2005-04-15 | Verfahren und System zum Registrieren von präprozeduralen Bildern mit intraprozeduralen Bilder unter Verwendung einer vorberechneten Informationsdatenbank |
Country Status (2)
Country | Link |
---|---|
US (1) | US7620223B2 (de) |
DE (1) | DE102005017628A1 (de) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102011005634A1 (de) * | 2011-03-16 | 2012-09-20 | Friedrich-Alexander-Universität Erlangen-Nürnberg | Verfahren zum Bereitstellen eines nachbearbeiteten 3D-Bilddatensatzes, insbesondere zu einer Gefäßstruktur |
CN108475436A (zh) * | 2015-12-29 | 2018-08-31 | 皇家飞利浦有限公司 | 使用轮廓标志的外科手术图像采集设备的配准 |
Families Citing this family (42)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1890261B1 (de) * | 2006-08-14 | 2009-02-18 | BrainLAB AG | Registrierung von MR-Daten anhand generischer Modelle |
US7231076B2 (en) * | 2004-06-30 | 2007-06-12 | Accuray, Inc. | ROI selection in image registration |
US7522779B2 (en) * | 2004-06-30 | 2009-04-21 | Accuray, Inc. | Image enhancement method and system for fiducial-less tracking of treatment targets |
US7366278B2 (en) * | 2004-06-30 | 2008-04-29 | Accuray, Inc. | DRR generation using a non-linear attenuation model |
US7453984B2 (en) * | 2006-01-19 | 2008-11-18 | Carestream Health, Inc. | Real-time target confirmation for radiation therapy |
DE602007012886D1 (de) * | 2006-04-12 | 2011-04-14 | Nassir Navab | Virtuelle penetrierende spiegelvorrichtung zur visualisierung von virtuellen objekten in angiografischen anwendungen |
WO2007115826A2 (en) * | 2006-04-12 | 2007-10-18 | Nassir Navab | Virtual penetrating mirror device for visualizing of virtual objects within an augmented reality environment |
US7822254B2 (en) * | 2006-04-21 | 2010-10-26 | Siemens Medical Solutions Usa, Inc. | Automatic positioning of matching multi-planar image reformatting (MPR) views of multiple 3D medical images |
WO2007128377A1 (en) * | 2006-05-04 | 2007-11-15 | Nassir Navab | Virtual penetrating mirror device for visualizing virtual objects in endoscopic applications |
US7848592B2 (en) * | 2006-07-31 | 2010-12-07 | Carestream Health, Inc. | Image fusion for radiation therapy |
FR2936890B1 (fr) * | 2008-10-03 | 2010-12-03 | Univ Grenoble 1 | Procede de traitement d'image pour estimer une deformation d'un cerveau d'un patient |
US8457437B2 (en) * | 2010-03-23 | 2013-06-04 | Raytheon Company | System and method for enhancing registered images using edge overlays |
US8526700B2 (en) * | 2010-10-06 | 2013-09-03 | Robert E. Isaacs | Imaging system and method for surgical and interventional medical procedures |
US9785246B2 (en) | 2010-10-06 | 2017-10-10 | Nuvasive, Inc. | Imaging system and method for use in surgical and interventional medical procedures |
US11231787B2 (en) | 2010-10-06 | 2022-01-25 | Nuvasive, Inc. | Imaging system and method for use in surgical and interventional medical procedures |
CN104106095A (zh) | 2012-02-10 | 2014-10-15 | 皇家飞利浦有限公司 | 临床驱动的图像融合 |
US10070828B2 (en) | 2013-03-05 | 2018-09-11 | Nview Medical Inc. | Imaging systems and related apparatus and methods |
US10846860B2 (en) | 2013-03-05 | 2020-11-24 | Nview Medical Inc. | Systems and methods for x-ray tomosynthesis image reconstruction |
US9999772B2 (en) * | 2014-04-03 | 2018-06-19 | Pacesetter, Inc. | Systems and method for deep brain stimulation therapy |
US20160012206A1 (en) * | 2014-07-10 | 2016-01-14 | Siemens Medical Solutions Usa, Inc. | Pictorial report of a medical procedure |
US9986983B2 (en) | 2014-10-31 | 2018-06-05 | Covidien Lp | Computed tomography enhanced fluoroscopic system, device, and method of utilizing the same |
GB2536650A (en) | 2015-03-24 | 2016-09-28 | Augmedics Ltd | Method and system for combining video-based and optic-based augmented reality in a near eye display |
US10674982B2 (en) | 2015-08-06 | 2020-06-09 | Covidien Lp | System and method for local three dimensional volume reconstruction using a standard fluoroscope |
US10716525B2 (en) | 2015-08-06 | 2020-07-21 | Covidien Lp | System and method for navigating to target and performing procedure on target utilizing fluoroscopic-based local three dimensional volume reconstruction |
US10702226B2 (en) | 2015-08-06 | 2020-07-07 | Covidien Lp | System and method for local three dimensional volume reconstruction using a standard fluoroscope |
US11172895B2 (en) | 2015-12-07 | 2021-11-16 | Covidien Lp | Visualization, navigation, and planning with electromagnetic navigation bronchoscopy and cone beam computed tomography integrated |
US10716631B2 (en) | 2016-03-13 | 2020-07-21 | Vuze Medical Ltd. | Apparatus and methods for use with skeletal procedures |
US11051886B2 (en) | 2016-09-27 | 2021-07-06 | Covidien Lp | Systems and methods for performing a surgical navigation procedure |
US10434335B2 (en) * | 2017-03-30 | 2019-10-08 | Shimadzu Corporation | Positioning apparatus and method of positioning by generation of DRR image from X-ray CT image data |
US10699448B2 (en) | 2017-06-29 | 2020-06-30 | Covidien Lp | System and method for identifying, marking and navigating to a target using real time two dimensional fluoroscopic data |
WO2019012520A1 (en) | 2017-07-08 | 2019-01-17 | Vuze Medical Ltd. | APPARATUS AND METHODS FOR USE WITH IMAGE-GUIDED SKELETAL PROCEDURES |
CN111373448B (zh) | 2017-09-22 | 2023-12-08 | 尼维医疗公司 | 使用机器学习正则化器的图像重建 |
US10893843B2 (en) | 2017-10-10 | 2021-01-19 | Covidien Lp | System and method for identifying and marking a target in a fluoroscopic three-dimensional reconstruction |
US10905498B2 (en) | 2018-02-08 | 2021-02-02 | Covidien Lp | System and method for catheter detection in fluoroscopic images and updating displayed position of catheter |
WO2019211741A1 (en) | 2018-05-02 | 2019-11-07 | Augmedics Ltd. | Registration of a fiducial marker for an augmented reality system |
US11766296B2 (en) | 2018-11-26 | 2023-09-26 | Augmedics Ltd. | Tracking system for image-guided surgery |
DE102019203192A1 (de) * | 2019-03-08 | 2020-09-10 | Siemens Healthcare Gmbh | Erzeugung eines digitalen Zwillings für medizinische Untersuchungen |
US11980506B2 (en) | 2019-07-29 | 2024-05-14 | Augmedics Ltd. | Fiducial marker |
US11382712B2 (en) | 2019-12-22 | 2022-07-12 | Augmedics Ltd. | Mirroring in image guided surgery |
CN111429491B (zh) * | 2020-03-11 | 2024-02-20 | 上海嘉奥信息科技发展有限公司 | 脊柱术前三维影像与术中二维影像配准的方法与*** |
US11896445B2 (en) | 2021-07-07 | 2024-02-13 | Augmedics Ltd. | Iliac pin and adapter |
WO2024057210A1 (en) | 2022-09-13 | 2024-03-21 | Augmedics Ltd. | Augmented reality eyewear for image-guided medical intervention |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6347240B1 (en) * | 1990-10-19 | 2002-02-12 | St. Louis University | System and method for use in displaying images of a body part |
US6614453B1 (en) * | 2000-05-05 | 2003-09-02 | Koninklijke Philips Electronics, N.V. | Method and apparatus for medical image display for surgical tool planning and navigation in clinical environments |
US6782287B2 (en) * | 2000-06-27 | 2004-08-24 | The Board Of Trustees Of The Leland Stanford Junior University | Method and apparatus for tracking a medical instrument based on image registration |
US6837892B2 (en) * | 2000-07-24 | 2005-01-04 | Mazor Surgical Technologies Ltd. | Miniature bone-mounted surgical robot |
US7570791B2 (en) * | 2003-04-25 | 2009-08-04 | Medtronic Navigation, Inc. | Method and apparatus for performing 2D to 3D registration |
-
2005
- 2005-04-13 US US11/104,831 patent/US7620223B2/en active Active
- 2005-04-15 DE DE102005017628A patent/DE102005017628A1/de not_active Withdrawn
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102011005634A1 (de) * | 2011-03-16 | 2012-09-20 | Friedrich-Alexander-Universität Erlangen-Nürnberg | Verfahren zum Bereitstellen eines nachbearbeiteten 3D-Bilddatensatzes, insbesondere zu einer Gefäßstruktur |
CN108475436A (zh) * | 2015-12-29 | 2018-08-31 | 皇家飞利浦有限公司 | 使用轮廓标志的外科手术图像采集设备的配准 |
Also Published As
Publication number | Publication date |
---|---|
US20050272991A1 (en) | 2005-12-08 |
US7620223B2 (en) | 2009-11-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE102005017628A1 (de) | Verfahren und System zum Registrieren von präprozeduralen Bildern mit intraprozeduralen Bilder unter Verwendung einer vorberechneten Informationsdatenbank | |
DE102015221998B4 (de) | Verfahren zur Unterstützung eines Befunders bei der Ortsbeschreibung einer Zielstruktur in einer Brust, Vorrichtung und Computerprogramm | |
DE60319288T2 (de) | Verfahren und vorrichtung zum identifizieren von pathologien in gehirnbildern | |
DE19851597B4 (de) | Verfahren und Gerät zur Erzeugung verbesserter Bilder von Kranzarterien | |
DE102008037424A1 (de) | Verbessertes System und Verfahren für auf Volumen basierende Registrierung | |
DE102004055767A1 (de) | Verfahren und Vorrichtung zum Verarbeiten von Bilddaten, um die Erfassung einer Erkrankung zu untersützen | |
DE102006038485A1 (de) | System und Verfahren für die auf Merkmalen hervorstechender Bereiche basierende 3D-Multimodalitäts-Registrierung von medizinischen Bildern | |
DE102005038326A1 (de) | Verfahren und Vorrichtung zur Planung medizinischer Eingriffsprozeduren und zur Lokalisierung und Navigation eines Eingriffswerkzeugs | |
DE10048029A1 (de) | Verfahren zur Berechnung einer zwei Abbildungen verbindenden Transformation | |
DE19946429A1 (de) | Kontinuierliche Erfassung und Analyse von Gewebeveränderungen | |
DE112016006137T5 (de) | Synthetische Darstellung einer Gefäßstruktur | |
DE102006058941A1 (de) | Verfahren und Vorrichtung zum Auswählen computergestützter Algorithmen, basierend auf dem Protokoll und/oder Parametern eines Akquisitionssystems | |
DE10054814A1 (de) | Verfahren und Vorrichtung zur Registrierung von Bildern | |
US8331635B2 (en) | Cartesian human morpho-informatic system | |
DE102010018261B4 (de) | Verfahren und Computersystem zur automatischen Vektorisierung eines Gefäßbaumes | |
DE112004001691T5 (de) | Verfahren und System zur automatischen Ausrichtung von lokalen Visualisierungstechniken für vaskuläre Strukturen | |
DE102014201321A1 (de) | Bestimmung von Läsionen in Bilddaten eines Untersuchungsobjekts | |
DE112019004300T5 (de) | Ähnlichkeitsbestimmungsvorrichtung, ähnlichkeitsbestimmungsverfahren und ähnlichkeitsbestimmungsprogramm | |
DE102019216745A1 (de) | Anonymisierung von medizinischen Bilddaten | |
DE102019217576B4 (de) | Identifizieren und Bereitstellen von Fehlausrichtungsbildmerkmalen | |
DE102007028906B4 (de) | Verwendung eines Bildakquisitions-, Bildarchivierungs- und Bildvisualisierungssystems und Verfahren zur Unterstützung eines unter nuklearmedizinischer oder radiologischer Bildgebung durchgeführten Stagings oder Restagings zur Registrierung und Beurteilung der Entwicklung räumlich und/oder strukturell veränderlicher pathologischer Strukturen | |
DE112020005870T5 (de) | Unterstützungsvorrichtung für dokumentenerstellung, unterstützungsverfahren für dokumentenerstellung und unterstützungsprogramm für dokumentenerstellung | |
DE10254943A1 (de) | Verfahren zum Herstellen eines Volumendatensatzes | |
DE102007001116A1 (de) | Verfahren und Vorrichtung zur Registrierung von zumindest drei unterschiedlichen Bilddatensätzen eines Objektes | |
EP1363242B1 (de) | Verfahren und Vorrichtung zum Lokalisieren einer Struktur in einem gemessenen Datensatz |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
OP8 | Request for examination as to paragraph 44 patent law | ||
8127 | New person/name/address of the applicant |
Owner name: SIEMENS MEDICAL SOLUTIONS USA, INC., MALVERN, PA., |
|
8139 | Disposal/non-payment of the annual fee |