CN105520716B - 荧光镜图像的实时模拟 - Google Patents
荧光镜图像的实时模拟 Download PDFInfo
- Publication number
- CN105520716B CN105520716B CN201510670220.XA CN201510670220A CN105520716B CN 105520716 B CN105520716 B CN 105520716B CN 201510670220 A CN201510670220 A CN 201510670220A CN 105520716 B CN105520716 B CN 105520716B
- Authority
- CN
- China
- Prior art keywords
- image
- fluoroscopic
- dimensional
- map
- dimensional image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000004088 simulation Methods 0.000 title abstract description 4
- 238000003384 imaging method Methods 0.000 claims abstract description 42
- 238000000034 method Methods 0.000 claims abstract description 39
- 210000000056 organ Anatomy 0.000 claims abstract description 20
- 230000005855 radiation Effects 0.000 claims description 13
- 239000000523 sample Substances 0.000 claims description 7
- 230000008676 import Effects 0.000 claims 1
- 210000003484 anatomy Anatomy 0.000 description 5
- 230000000747 cardiac effect Effects 0.000 description 4
- 238000002594 fluoroscopy Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 229910003460 diamond Inorganic materials 0.000 description 2
- 239000010432 diamond Substances 0.000 description 2
- 238000002595 magnetic resonance imaging Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 210000001367 artery Anatomy 0.000 description 1
- 210000005242 cardiac chamber Anatomy 0.000 description 1
- 238000002059 diagnostic imaging Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 210000002837 heart atrium Anatomy 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000003325 tomography Methods 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/12—Arrangements for detecting or locating foreign bodies
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/44—Constructional features of apparatus for radiation diagnosis
- A61B6/4429—Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units
- A61B6/4435—Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units the source unit and the detector unit being coupled by a rigid structure
- A61B6/4441—Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units the source unit and the detector unit being coupled by a rigid structure the rigid structure being a C-arm or U-arm
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/48—Diagnostic techniques
- A61B6/485—Diagnostic techniques involving fluorescence X-ray imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/48—Diagnostic techniques
- A61B6/486—Diagnostic techniques involving generating temporal series of image data
- A61B6/487—Diagnostic techniques involving generating temporal series of image data involving fluoroscopy
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/50—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/50—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
- A61B6/503—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications for diagnosis of the heart
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/54—Control of apparatus or devices for radiation diagnosis
- A61B6/547—Control of apparatus or devices for radiation diagnosis involving tracking of position of the device or parts of the device
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/60—Memory management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/08—Volume rendering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/20—Perspective computation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B23/00—Models for scientific, medical, or mathematical purposes, e.g. full-sized devices for demonstration purposes
- G09B23/28—Models for scientific, medical, or mathematical purposes, e.g. full-sized devices for demonstration purposes for medicine
- G09B23/30—Anatomical models
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
- A61B2034/101—Computer-aided simulation of surgical operations
- A61B2034/105—Modelling of the patient, e.g. for ligaments or bones
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
- A61B2034/107—Visualisation of planned trajectories or target regions
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2046—Tracking techniques
- A61B2034/2051—Electromagnetic tracking systems
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/37—Surgical systems with images on a monitor during operation
- A61B2090/376—Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy
- A61B2090/3762—Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy using computed tomography systems [CT]
- A61B2090/3764—Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy using computed tomography systems [CT] with a rotating C-arm having a cone beam emitting source
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10116—X-ray image
- G06T2207/10121—Fluoroscopy
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Medical Informatics (AREA)
- Physics & Mathematics (AREA)
- Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Veterinary Medicine (AREA)
- Public Health (AREA)
- Animal Behavior & Ethology (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Radiology & Medical Imaging (AREA)
- Pathology (AREA)
- Optics & Photonics (AREA)
- High Energy & Nuclear Physics (AREA)
- Biophysics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Robotics (AREA)
- Dentistry (AREA)
- Computer Graphics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Medicinal Chemistry (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- Cardiology (AREA)
- Chemical & Material Sciences (AREA)
- Business, Economics & Management (AREA)
- Algebra (AREA)
- Computational Mathematics (AREA)
- Mathematical Analysis (AREA)
- Mathematical Optimization (AREA)
- Mathematical Physics (AREA)
- Pure & Applied Mathematics (AREA)
- Geometry (AREA)
- Quality & Reliability (AREA)
Abstract
本公开涉及荧光镜图像的实时模拟。本发明公开了一种方法,包括将荧光镜成像***的第一坐标系和磁性位置跟踪***的第二坐标系对准。使用磁性位置跟踪***计算患者的器官的三维(3D)标测图。使用对准的第一坐标系和第二坐标系计算在第二坐标系中荧光镜成像***的视场(FOV)。基于3D标测图和所计算的FOV,创建模拟通过荧光镜成像***将生成的荧光镜图像的二维(2D)图像,并且显示模拟荧光镜图像的2D图像。
Description
技术领域
本发明一般涉及医学成像,并且特别是涉及用于在医学规程期间实时模拟荧光镜图像的方法和***。
背景技术
实时(RT)成像,诸如荧光镜图像,常常用于微创医学规程中,有时结合各种三维(3D)成像模式。若干技术处理RT图像与患者器官的3D模型和3D标测图的对准。例如,美国专利申请公布2010/0022874,其公开内容以引用方式并入本文,描述了包括存储器、***、处理器和显示器的图像引导的导航***。存储器存储多个CT图像和软件程序。***能够给外科手术区域指示方向,并且***指示的方向被定义为第一方向。处理器电连接到存储器和***。通过处理器执行软件程序,从多个CT图像中获得对应于第一方向的至少一个对应图像。至少一个对应图像包括至少一个模拟荧光镜图像。显示器能够示出至少一个对应图像。
美国专利8,515,527,其公开内容以引用方式并入本文,描述了用于将心脏解剖区域和跟踪***的3D模型与干涉荧光镜***的投影图像对准的方法和装置。
美国专利7,327,872,其公开内容以引用方式并入本文,描述了用于将3D模型与解剖区域的投影图像对准的方法和***。在患者解剖区域处采用导管的第一模式的第一图像采集***被配置成使用荧光镜透视检查来产生解剖区域的第一图像,所述第一图像包括一组荧光镜透视检查投影图像。第二不同模式的第二图像采集***被配置成生成解剖区域的3D模型。解剖参考***为第一图像采集***和第二图像采集***所共用。处理电路被配置成处理可执行指令,所述可执行指令用于响应于共用参考***和与所述第一图像采集***以及所述第二图像采集***两者中的导管相关联的可识别参数,将3D模型与荧光镜图像对准。
发明内容
本文所述的本发明的实施例提供了包括以下的方法:将荧光镜成像***的第一坐标系和磁性位置跟踪***的第二坐标系对准。使用磁性位置跟踪***计算患者的器官的三维(3D)标测图。使用对准的第一坐标系和第二坐标系计算在第二坐标系中荧光镜成像***的视场(FOV)。基于3D标测图和所计算的FOV,创建模拟通过荧光镜成像***将生成的荧光镜图像的二维(2D)图像,并且显示模拟荧光镜图像的2D图像。
在一些实施例中,该方法包括创建2D图像而无需通过荧光镜成像***施加辐射。在其它实施例中,该方法包括在不同的显示窗口中显示2D图像和3D标测图。在其它实施例中,该方法包括在用于显示3D标测图的显示窗口的子窗口中显示2D图像。
在一个实施例中,该方法包括辨别在3D标测图中器官的解剖特征结构,并且基于所计算的FOV在2D图像中模拟解剖特征结构的投影。在另一个实施例中,该方法包括辨别在3D标测图中的医疗探头,并且在2D图像中显示医疗探头。在一个实施例中,计算3D标测图包括将使用除了磁性位置跟踪之外的成像模式采集的一个或多个对象导入到3D标测图中。
根据本发明的实施例,本文另外提供了包括存储器和处理器的***。存储器被配置成存储患者的器官的三维(3D)标测图,所述三维(3D)标测图是通过磁性位置跟踪***产生的。处理器被配置成将荧光镜成像***的第一坐标系和磁性位置跟踪***的第二坐标系对准、使用磁性位置跟踪***计算3D标测图、使用对准的第一坐标系和第二坐标系计算在第二坐标系中荧光镜成像***的视场(FOV)、基于3D标测图和所计算的FOV创建模拟通过荧光镜成像***将生成的荧光镜图像的二维(2D)图像,以及显示模拟荧光镜图像的2D图像。
从以下结合附图的本发明实施例的详细说明,将更全面地理解本发明,在附图中:
附图说明
图1是根据本发明的实施例的荧光镜成像***和磁性位置跟踪***的示意性图解;以及
图2是根据本发明的实施例示意性地示出用于创建模拟二维(2D)荧光镜图像的方法的流程图。
具体实施方式
综述
微创医学规程常常使用成像能力,诸如磁性位置跟踪标测图。例如,Biosense-Webster有限公司(加利福尼亚州钻石吧)提供了CARTOTM***,其用于使用磁场位置跟踪使在患者心脏中的导管可视化。在一些情况下,存在对与磁性位置跟踪标测图平行的相同位置的实时(RT)荧光镜图像的需要。然而,荧光镜成像使患者和医务人员暴露于X射线辐射的潜在危险性剂量。在实践中,荧光镜***的视场(FOV)常常是狭窄的,并且当试图将荧光镜***定位以将患者体内的期望位置成像时,有相当一部分X射线辐射被施加。
本文所述的本发明的实施例提供用于共同操作荧光镜***和磁性位置跟踪***的改善的方法和***。在一些实施例中,磁性位置跟踪***的处理器将荧光镜***的坐标系和磁性位置跟踪***的坐标系对准,并且计算在磁性位置跟踪***的坐标系中荧光镜***的FOV。使用该信息,如果荧光镜成像***在该点处被激活,那么处理器创建模拟将生成的荧光镜图像的二维(2D)图像。
2D图像基于磁性位置跟踪***的所计算的3D标测图,并且完全不起源于荧光镜成像***。在本专利申请的上下文中并在权利要求书中,术语“3D标测图”是指使用磁性位置跟踪***和可能地导入的分段对象获得的3D模型,所述分段对象来自附加的成像模式,诸如计算机化断层扫描(CT)、磁共振成像(MRI)或任何其它合适的成像技术。此类模型可包括各种对象,诸如成像器官的形成轮廓和解剖特征结构、在器官中或器官周围的医疗探头或器械,和/或任何其它合适的对象。3D模型的任何此类对象可以用于产生2D图像和/或可出现在2D图像中。
即使2D图像不通过荧光镜成像***产生,2D图像在视觉上与荧光镜图像类似,并且如果它是活性的,那么涵盖将通过荧光镜成像***观察的相同的FOV。因此,医师可以具有显得像荧光镜成像但不涉及照射患者的实时显示。
本发明所公开的技术可协助医师将荧光镜***FOV定位在目标位置中,而无需使患者和医务人员暴露于X射线辐射,并且以高速和高准确度将荧光镜***FOV准确定位在目标上。荧光镜***通常仅在其FOV正确定位后激活。
***说明
图1是根据本发明的实施例在微创心脏规程期间的荧光镜成像***22和磁性位置跟踪***20的示意性图解。荧光镜成像***22经由接口56连接至磁性位置跟踪***20。***20包括控制台26和导管24,导管24具有如图1的插件32中所示的远侧端部34。
心脏病专家42(或任何其它用户)引导在患者心脏28中的导管24,直到远侧端部34到达在该器官中的期望位置,并且然后心脏病专家42使用远侧端部34执行医学规程。在其它实施例中,本发明所公开的技术可以与在任何其它器官中执行的规程一起使用,并且代替心脏病专家42,任何合适的用户(诸如相关的医师或被授权的技术人员)可以操作***。
该位置跟踪的方法是在例如由Biosense Webster有限公司(加利福尼亚州钻石吧)生产的CARTOTM***中实现的,并且详细地描述于美国专利5,391,199、6,690,963、6,484,118、6,239,724、6,618,612和6,332,089、PCT专利公布WO 96/05768,以及美国专利申请公布2002/0065455 A1、2003/0120150 A1和2004/0068178 A1中,这些专利的公开内容全文以引用方式并入本文。
控制台26包括处理器58、驱动电路60,和到***22的接口56、输入设备46和显示器40。驱动电路60驱动布置在患者30躯干下方的已知位置处的磁场发生器36。在需要荧光镜图像的情况下,心脏病专家42使用输入设备46和在显示器40上的合适的图形用户界面(GUI)以请求在患者心28中的荧光镜图像。
在一些实施例中,显示器40包括两个窗口,如图1的插件37中所示。3D CARTO标测图38窗口显示在远侧端部34的位置处的器官的3D磁性位置跟踪标测图。模拟2D荧光镜图像39窗口显示在***22的位置处的模拟的2D荧光镜图像。
在一个实施例中,模拟的2D荧光镜图像是基于3D磁性位置跟踪标测图而不是基于***22的参数创建的,如本文下面详细所述。
在图1的示例中呈现导管24。然而,一旦对准***20和***22,导管的存在就不是强制的。对准可以例如使用特殊的对准夹具来执行,并且可以在导管***到患者体内之前或之后完成。在一个实施例中,如果导管定位在覆盖的框架区域内,那么其出现在标测图38和图像39中。
在另一个实施例中,心脏病专家42可决定从图像39中排除导管24或任何其它对象,因为图像39是模拟图像。此类决定也可以通过***自动取得。换句话讲,处理器58可过滤在模拟2D图像中显示的对象。可以示出或隐藏的对象可包括例如附接件、标测图、导管和/或导入的分段图像等等。
图1中所示的***20的构造是纯粹为了概念清楚而选择的示例构造。在另选的实施例中,任何其它合适的构造可以用于实现***。***20的某些元件可以使用硬件诸如使用一个或多个专用集成电路(ASIC)或现场可编程门阵列(FPGA)或其它设备类型来实现。除此之外或另选地,***20的某些元件可以使用软件或使用硬件元件和软件元件的组合来实现。
处理器58通常包括通用计算机,该通用计算机以软件编程以执行本文描述的功能。软件可以电子形式经网络下载到计算机,例如,另选地或除此之外,或者软件可以被提供和/或存储在非临时性有形介质上,诸如磁性存储器、光学存储器或电子存储器。
模拟2D荧光镜图像的创建
在图1中呈现的示例中,***20的处理器58在显示器40上显示包括远侧端部34的患者心脏28的3D标测图,从而心脏病专家42知道相对于在心脏28中相关区域的远侧端部34的精确位置。在微创医学规程期间,心脏病专家42可需要在邻近远侧端部34的位置处的荧光镜图像。本文所述的实施例当采集3D荧光镜图像时满足对X射线照射最小化的需要。
按照惯例,在需要荧光镜图像的情况下,心脏病专家42通过定位***22限定期望区域以指出期望位置,并且然后激活***22以照射X射线以便定位荧光镜***从而将心脏28的期望区域成像。通常,***22的视场(FOV)常常是狭窄的,并且实际上不可覆盖心脏28的期望区域。在此类情况下,心脏病专家42必须重新定位***22并重新照射X射线以到达期望位置。该处理使患者和医务人员暴露于过量的X射线辐射。
在一些实施例中,呈现的技术在显示器40上示出两个图像(通常但不一定在两个窗口中):3D CARTO标测图38,示出在心脏28内的远侧端部34的3D位置跟踪标测图,以及在***22的位置处的图像39。
在典型的流程中,***20的处理器58基于***22和***20的坐标系的对准,计算通过在磁性位置跟踪***20的坐标系中的荧光镜成像***22将要照射的FOV。随后,处理器58使用在磁性位置跟踪***20的坐标系中的***22的所计算的FOV和3D标测图38以创建模拟2D图像(在图1中示为图像39),而无需通过***22照射X射线。
如图1中所展示,荧光镜成像***22定位在相对于磁性位置跟踪***20的坐标系的一些任意角处。然而,模拟2D图像39被显示为好像取自荧光镜成像***22的位置或任何其它所选择的角度,不管***22的当前位置如何,即使它是从位置跟踪***20的3D标测图计算出的。
在一个实施例中,心脏病专家42可以与在常规规程期间执行的方式相同的方式相对于患者30移动***22,但无需照射患者30。随着***22移动,处理器58连续地显示实时反映***22的正在改变的FOV的模拟2D图像。
在一些实施例中,处理器使用心脏的解剖特征结构以创建模拟2D荧光镜图像,所述心脏的解剖特征结构显示为在磁性位置跟踪***的3D标测图中的元件。例如,在心房和心室之间的接合部的3D标测图可以用于创建图像39。
需注意,创建图像39无需使用来自***22的辐射,并且图像39基于标测图38。因此,在***22的FOV超出***20的3D标测图38的情况下,图像39将不示出其当前位置的模拟图像,因为其不具有通过标测图38提供以创建所需的模拟图像的属性。
在一个实施例中,心脏病专家42使用模拟2D荧光镜图像和3D位置跟踪标测图以将***22定位在期望位置处,并且然后通过***22施加X射线并且采集真实的荧光镜图像。
通常,标测图38包括所考虑的器官的解剖特征结构,并且任选地包括在标测图38的FOV中的附加的元件诸如导管。在心脏成像中,此类对象可包括例如心腔、瓣膜、动脉和其它对象。在一些实施例中,处理器58标识在标测图38中的此类解剖特征结构(例如组织类型、解剖标志),并且计算当从***20的FOV观察时所述解剖特征结构将如何出现在2D中,以创建来自标测图38的图像39。
图像39模拟自标测图38,然而,图像39通常在视觉上与真实的荧光镜图像类似(例如,相同的灰度、相同的分辨率、相同的外观和感觉),即使它并没有起源于也不基于来自***22的成像属性。在一些实施例中,图像39可具有在基于辐射的荧光镜图像上的增强,诸如较高的分辨率、彩色显示和附加的模拟增强。
在图1的示例中,3D标测图和2D图像在独立显示窗口中显示。在另选的实施例中,模拟2D图像显示为“画中画”,即在用于显示3D标测图的窗口的子窗口中显示。在一个实施例中,响应于医师挤压磁性位置跟踪***的踏板或其它输入设备刷新2D图像。此类踏板具有与常常用于采集荧光镜图像的踏板类似的外观和感觉,但在本示例中是***20而不是***22的部件。
图2是根据本发明的实施例示意性地示出用于创建模拟二维(2D)荧光镜图像39的方法的流程图。该方法在坐标采集步骤100开始,其中处理器58采集***22和***20的坐标系。在坐标系对准步骤102,处理器58对准***22和***20的坐标系,以便匹配在两个***处患者30体内的相关器官的位置。
在位置跟踪展示步骤104,处理器58在显示器40上显示患者30的给定器官的3D位置跟踪标测图38。在一个实施例中,器官是心脏28,但在其它实施例中可以是患者30的任何相关器官。在FOV计算步骤106,处理器58使用***22和***20的坐标系的对准以计算***22在磁性位置跟踪***20的坐标系中的FOV。在一些实施例中,***22的位置是通过附接到***22的辐射头的位置传感器测量的。在另选的实施例中,与***22通信的TCP/IP可以用于提取几何信息和检测器设置。此类另选的实施例允许使用正确的放大(“缩放”),这当使用传感器时可以不适用。
在模拟步骤108,处理器58使用在磁性位置跟踪***20的坐标系中的荧光镜成像***22的计算出的FOV和3D CARTO标测图38,以创建模拟2D荧光镜图像(在图1中的图像39),而无需通过***22照射X射线并且无需使用***22的任何辐射参数。
在2D显示步骤110,处理器58在显示器40上显示图像39。
在一些实施例中,在接近如图1的插件37中所示的标测图38的窗口中显示图像39。在其它实施例中,并排或以任何其它合适的方式在标测图38的相同窗口处显示图像39。在决定步骤112,心脏病专家42相对于标测图38检查图像39并且决定***22是否定位在期望位置处以采集真实的荧光镜图像。在图像采集步骤116,如果心脏病专家42决定***22定位在期望位置处,那么他/她使用输入设备46和在显示器40上的GUI以命令***22(经由处理器58和接口56)采集荧光镜图像。在其它实施例中,心脏病专家可依靠模拟图像从而避免辐射,或可使用旧的荧光镜图像作为参考并将模拟图像用于跟踪导管。
需注意,在步骤116之前的所有方法步骤通常在荧光镜***22不发射X射线辐射时执行。
在重新定位步骤114,如果心脏病专家42决定***22没有定位在期望位置处,那么心脏病专家相对于患者重新定位荧光镜***。
这时候,在各种实施例中,该方法可以环回到处理的各种先前阶段。在一个实施例中,在使用与***22通信的TCP/IP跟踪***22的情况下,在***22的辐射头的运动期间可以显示模拟图像。
在其它实施例中,根据相对于患者30和磁性位置跟踪***20的***22的对准误差来源的性质,流程可环回到位置跟踪展示步骤104或坐标采集步骤100。
虽然本文所述实施例主要涉及使用荧光镜透视检查和磁性位置跟踪的心脏成像,但在另选的实施例中,本发明所公开的技术可以与其它成像技术(诸如磁共振成像(MRI))一起使用,并且应用在其它人类器官上。
因此应当理解,上述实施例均以举例的方式引用,并且本发明不受上文具体示出和描述的内容限制。相反,本发明的范围包括上文所述各种特征的组合与子组合,以及本领域技术人员在阅读上述说明时会想到且未在现有技术中公开的其变型和修改。以引用方式并入本专利申请的文献将视为本专利申请的整体部分,不同的是如果在这些并入的文献中定义的任何术语与在本说明书中明确或隐含地给出的定义相冲突,则应只考虑本说明书中的定义。
Claims (14)
1.一种方法,包括:
将荧光镜成像***的第一坐标系和磁性位置跟踪***的第二坐标系对准;
使用所述磁性位置跟踪***计算患者的器官的三维标测图;
使用所述对准的第一坐标系和第二坐标系,计算在所述第二坐标系中所述荧光镜成像***的视场;
基于所述三维标测图和所计算的视场创建模拟通过所述荧光镜成像***将生成的荧光镜图像的二维图像;以及
显示模拟所述荧光镜图像的所述二维图像。
2.根据权利要求1所述的方法,其中执行创建所述二维图像无需通过所述荧光镜成像***施加辐射。
3.根据权利要求1所述的方法,其中显示所述二维图像包括在不同的显示窗口中显示所述二维图像和所述三维标测图。
4.根据权利要求1所述的方法,其中显示所述二维图像包括在用于显示所述三维标测图的显示窗口的子窗口中显示所述二维图像。
5.根据权利要求1所述的方法,其中创建所述二维图像包括辨别在所述三维标测图中所述器官的解剖特征结构,并且基于所计算的视场在所述二维图像中模拟所述解剖特征结构的投影。
6.根据权利要求1所述的方法,其中创建所述二维图像包括辨别在所述三维标测图中的医疗探头,并且在所述二维图像中显示所述医疗探头。
7.根据权利要求1所述的方法,其中计算所述三维标测图包括将使用除了磁性位置跟踪之外的成像模式采集的一个或多个对象导入到所述三维标测图中。
8. 一种***,包括:
存储器,所述存储器被配置成存储患者的器官的三维标测图,所述三维标测图是通过磁性位置跟踪***产生的;以及
处理器,所述处理器被配置成将荧光镜成像***的第一坐标系和所述磁性位置跟踪***的第二坐标系对准、使用所述磁性位置跟踪***计算所述三维标测图、使用所述对准的第一坐标系和第二坐标系计算在所述第二坐标系中所述荧光镜成像***的视场、基于所述三维标测图和所计算的视场创建模拟通过所述荧光镜成像***将生成的荧光镜图像的二维图像、以及显示模拟所述荧光镜图像的所述二维图像。
9.根据权利要求8所述的***,其中所述处理器被配置成创建所述二维图像而无需通过所述荧光镜成像***施加辐射。
10.根据权利要求8所述的***,其中所述处理器被配置成在不同的显示窗口中显示所述二维图像和所述三维标测图。
11.根据权利要求8所述的***,其中所述处理器被配置成在用于显示所述三维标测图的显示窗口的子窗口中显示所述二维图像。
12.根据权利要求8所述的***,其中所述处理器被配置成通过辨别在所述三维标测图中的所述器官的解剖特征结构,并且基于所计算的视场在所述二维图像中模拟所述解剖特征结构的荧光镜投影来创建所述二维图像。
13.根据权利要求8所述的***,其中所述处理器被配置成辨别在所述三维标测图中的医疗探头,并且在所述二维图像中显示所述医疗探头。
14.根据权利要求8所述的***,其中所述处理器被配置成将使用除了磁性位置跟踪之外的成像模式采集的一个或多个对象导入到所述三维标测图中。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/513,343 US9721379B2 (en) | 2014-10-14 | 2014-10-14 | Real-time simulation of fluoroscopic images |
US14/513343 | 2014-10-14 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105520716A CN105520716A (zh) | 2016-04-27 |
CN105520716B true CN105520716B (zh) | 2020-03-20 |
Family
ID=54337129
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510670220.XA Active CN105520716B (zh) | 2014-10-14 | 2015-10-13 | 荧光镜图像的实时模拟 |
Country Status (7)
Country | Link |
---|---|
US (1) | US9721379B2 (zh) |
EP (1) | EP3009073B1 (zh) |
JP (1) | JP6559532B2 (zh) |
CN (1) | CN105520716B (zh) |
AU (1) | AU2015238800B2 (zh) |
CA (1) | CA2908279C (zh) |
IL (1) | IL241336B (zh) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016040614A1 (en) * | 2014-09-10 | 2016-03-17 | The University Of North Carolina At Chapel Hill | Radiation-free simulator system and method for simulating medical procedures |
WO2016096038A1 (en) * | 2014-12-19 | 2016-06-23 | Brainlab Ag | Method for optimising the position of a patient's body part relative to an irradiation source |
US10596392B2 (en) | 2016-05-11 | 2020-03-24 | Sensus Healthcare, Inc. | Dermatology radiotherapy system with hybrid imager |
AU2017221893A1 (en) * | 2016-09-08 | 2018-03-22 | Biosense Webster (Israel) Ltd. | Ent image registration |
US11894123B2 (en) | 2017-04-05 | 2024-02-06 | Sensus Healthcare, Inc. | Radiotherapy mobile and wireless device workflow management system |
US10699448B2 (en) * | 2017-06-29 | 2020-06-30 | Covidien Lp | System and method for identifying, marking and navigating to a target using real time two dimensional fluoroscopic data |
US10952795B2 (en) * | 2017-06-30 | 2021-03-23 | Biosense Webster (Israel) Ltd. | System and method for glass state view in real-time three-dimensional (3D) cardiac imaging |
WO2019165430A1 (en) * | 2018-02-26 | 2019-08-29 | Cornell University | Augmented reality guided system for cardiac interventional surgery |
EP3662834A1 (en) * | 2018-12-07 | 2020-06-10 | Koninklijke Philips N.V. | Positioning a medical x-ray imaging apparatus |
WO2020185556A1 (en) * | 2019-03-08 | 2020-09-17 | Musara Mubayiwa Cornelious | Adaptive interactive medical training program with virtual patients |
EP4197449A1 (en) * | 2021-12-20 | 2023-06-21 | Koninklijke Philips N.V. | Fluoroscopic positioning guidance |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1689516A (zh) * | 2004-04-27 | 2005-11-02 | 西门子公司 | 利用二维透视图像支持电生理学导管应用的方法和装置 |
JP2009207683A (ja) * | 2008-03-04 | 2009-09-17 | Toshiba Corp | X線装置および回転撮影方法 |
US8515527B2 (en) * | 2004-10-13 | 2013-08-20 | General Electric Company | Method and apparatus for registering 3D models of anatomical regions of a heart and a tracking system with projection images of an interventional fluoroscopic system |
CN103767683A (zh) * | 2012-10-19 | 2014-05-07 | 韦伯斯特生物官能(以色列)有限公司 | 3d标测图和荧光镜图像之间的整合 |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5391199A (en) | 1993-07-20 | 1995-02-21 | Biosense, Inc. | Apparatus and method for treating cardiac arrhythmias |
ATE188108T1 (de) | 1994-08-19 | 2000-01-15 | Biosense Inc | Medizinisches diagnose-, behandlungs- und darstellungssystem |
US6690963B2 (en) | 1995-01-24 | 2004-02-10 | Biosense, Inc. | System for determining the location and orientation of an invasive medical instrument |
EP0891152B1 (en) | 1996-02-15 | 2003-11-26 | Biosense, Inc. | Independently positionable transducers for location system |
IL125757A (en) | 1996-02-15 | 2003-09-17 | Biosense Inc | Medical procedures and apparatus using intrabody probes |
US6239724B1 (en) | 1997-12-30 | 2001-05-29 | Remon Medical Technologies, Ltd. | System and method for telemetrically providing intrabody spatial position |
US6484118B1 (en) | 2000-07-20 | 2002-11-19 | Biosense, Inc. | Electromagnetic position single axis system |
US7729742B2 (en) | 2001-12-21 | 2010-06-01 | Biosense, Inc. | Wireless position sensor |
US20040068178A1 (en) | 2002-09-17 | 2004-04-08 | Assaf Govari | High-gradient recursive locating system |
JP2004209055A (ja) * | 2003-01-07 | 2004-07-29 | Toshiba Corp | X線画像診断装置 |
US7327872B2 (en) | 2004-10-13 | 2008-02-05 | General Electric Company | Method and system for registering 3D models of anatomical regions with projection images of the same |
WO2006063141A2 (en) * | 2004-12-07 | 2006-06-15 | Medical Metrx Solutions, Inc. | Intraoperative c-arm fluoroscope datafusion system |
US7996059B2 (en) * | 2006-03-08 | 2011-08-09 | Biosense Webster, Inc. | Esophagus imaging enhancement device |
JP2009042811A (ja) * | 2007-08-06 | 2009-02-26 | Univ Of Tokyo | 3次元形状展開装置、3次元形状展開方法、および3次元形状展開用プログラム |
TW201004607A (en) | 2008-07-25 | 2010-02-01 | Been-Der Yang | Image guided navigation system and method thereof |
WO2012090148A1 (en) * | 2010-12-30 | 2012-07-05 | Mediguide Ltd | System and method for registration of fluoroscopic images in a coordinate system of a medical system |
US9489734B2 (en) * | 2011-01-12 | 2016-11-08 | Brainlab Ag | Determination of a body part position during radiation therapy |
US9265468B2 (en) * | 2011-05-11 | 2016-02-23 | Broncus Medical, Inc. | Fluoroscopy-based surgical device tracking method |
KR20150060735A (ko) * | 2012-08-27 | 2015-06-03 | 유니버시티 오브 휴스턴 | 이미지-안내 및 로봇-이용 수술을 위해 사용하는 로봇식 장치 및 시스템 소프트웨어, 하드웨어 및 방법 |
US9050056B2 (en) * | 2012-12-26 | 2015-06-09 | Biosense Webster (Israel) Ltd. | Reduced X-ray exposure by simulating images |
-
2014
- 2014-10-14 US US14/513,343 patent/US9721379B2/en active Active
-
2015
- 2015-09-08 IL IL241336A patent/IL241336B/en active IP Right Grant
- 2015-10-07 AU AU2015238800A patent/AU2015238800B2/en not_active Ceased
- 2015-10-13 EP EP15189512.5A patent/EP3009073B1/en active Active
- 2015-10-13 CN CN201510670220.XA patent/CN105520716B/zh active Active
- 2015-10-13 CA CA2908279A patent/CA2908279C/en active Active
- 2015-10-13 JP JP2015201783A patent/JP6559532B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1689516A (zh) * | 2004-04-27 | 2005-11-02 | 西门子公司 | 利用二维透视图像支持电生理学导管应用的方法和装置 |
US8515527B2 (en) * | 2004-10-13 | 2013-08-20 | General Electric Company | Method and apparatus for registering 3D models of anatomical regions of a heart and a tracking system with projection images of an interventional fluoroscopic system |
JP2009207683A (ja) * | 2008-03-04 | 2009-09-17 | Toshiba Corp | X線装置および回転撮影方法 |
CN103767683A (zh) * | 2012-10-19 | 2014-05-07 | 韦伯斯特生物官能(以色列)有限公司 | 3d标测图和荧光镜图像之间的整合 |
Also Published As
Publication number | Publication date |
---|---|
EP3009073A1 (en) | 2016-04-20 |
US9721379B2 (en) | 2017-08-01 |
CA2908279A1 (en) | 2016-04-14 |
AU2015238800A1 (en) | 2016-04-28 |
IL241336B (en) | 2019-03-31 |
EP3009073B1 (en) | 2017-12-27 |
CN105520716A (zh) | 2016-04-27 |
JP2016077893A (ja) | 2016-05-16 |
CA2908279C (en) | 2022-07-19 |
US20160104312A1 (en) | 2016-04-14 |
IL241336A0 (en) | 2015-11-30 |
JP6559532B2 (ja) | 2019-08-14 |
AU2015238800B2 (en) | 2020-07-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105520716B (zh) | 荧光镜图像的实时模拟 | |
JP7093801B2 (ja) | 手術中の位置調整および誘導を容易にするシステム | |
US7010080B2 (en) | Method for marker-free automatic fusion of 2-D fluoroscopic C-arm images with preoperative 3D images using an intraoperatively obtained 3D data record | |
JP6492188B2 (ja) | 追跡ベース3dモデルのエンハンスメント | |
RU2627147C2 (ru) | Отображение в реальном времени видов сосудистой сети для оптимального перемещения устройства | |
CN107847274B (zh) | 用于在机器人外科手术期间提供更新后的患者图像的方法和装置 | |
US20050027193A1 (en) | Method for automatically merging a 2D fluoroscopic C-arm image with a preoperative 3D image with one-time use of navigation markers | |
Nicolau et al. | A complete augmented reality guidance system for liver punctures: First clinical evaluation | |
CN108430376B (zh) | 提供投影数据集 | |
AU2015213326B2 (en) | Marking of fluoroscope field-of-view | |
KR20140120145A (ko) | 방사선 불투과성 반구형 입체 표지를 기반으로 하는 ct 혈관 조영 영상과 x-선 혈관 조영 영상 간의 정합 방법 | |
KR20160092799A (ko) | 혈관 정보를 포함하는 의료 영상을 디스플레이하는 장치 및 방법 | |
EP4287120A1 (en) | Guidance during medical procedures | |
Schwerter et al. | A novel approach for a 2D/3D image registration routine for medical tool navigation in minimally invasive vascular interventions | |
US20180153636A1 (en) | Method and apparatus to provide updated patient images during robotic surgery |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |