TWI624243B - 手術導引系統及其器械導引方法 - Google Patents

手術導引系統及其器械導引方法 Download PDF

Info

Publication number
TWI624243B
TWI624243B TW105141589A TW105141589A TWI624243B TW I624243 B TWI624243 B TW I624243B TW 105141589 A TW105141589 A TW 105141589A TW 105141589 A TW105141589 A TW 105141589A TW I624243 B TWI624243 B TW I624243B
Authority
TW
Taiwan
Prior art keywords
image
unit
item
patent application
projection
Prior art date
Application number
TW105141589A
Other languages
English (en)
Other versions
TW201821013A (zh
Inventor
楊炳德
Original Assignee
神農資訊股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 神農資訊股份有限公司 filed Critical 神農資訊股份有限公司
Priority to TW105141589A priority Critical patent/TWI624243B/zh
Priority to CN201711138259.2A priority patent/CN108210073B/zh
Priority to US15/829,949 priority patent/US20180168736A1/en
Application granted granted Critical
Publication of TWI624243B publication Critical patent/TWI624243B/zh
Publication of TW201821013A publication Critical patent/TW201821013A/zh

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/06Devices, other than using radiation, for detecting or locating foreign bodies ; determining position of probes within or on the body of the patient
    • A61B5/061Determining position of a probe within the body employing means separate from the probe, e.g. sensing internal probe position employing impedance electrodes on the surface of the body
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2048Tracking techniques using an accelerometer or inertia sensor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2051Electromagnetic tracking systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2055Optical tracking systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2055Optical tracking systems
    • A61B2034/2057Details of tracking cameras
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2059Mechanical position encoders
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2065Tracking using image or pattern recognition
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2068Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis using pointers, e.g. pointers having reference marks for determining coordinates of body points
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2074Interface software
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364Correlation of different images or relation of image positions in respect to the body
    • A61B2090/366Correlation of different images or relation of image positions in respect to the body using projection of images directly onto the body
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/374NMR or MRI
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/376Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy
    • A61B2090/3762Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy using computed tomography systems [CT]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/378Surgical systems with images on a monitor during operation using ultrasound
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/39Markers, e.g. radio-opaque or breast lesions markers
    • A61B2090/397Markers, e.g. radio-opaque or breast lesions markers electromagnetic other than visible, e.g. microwave
    • A61B2090/3975Markers, e.g. radio-opaque or breast lesions markers electromagnetic other than visible, e.g. microwave active
    • A61B2090/3979Markers, e.g. radio-opaque or breast lesions markers electromagnetic other than visible, e.g. microwave active infrared
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0062Arrangements for scanning
    • A61B5/0066Optical coherence imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/05Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • A61B5/055Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves  involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/06Devices, other than using radiation, for detecting or locating foreign bodies ; determining position of probes within or on the body of the patient
    • A61B5/061Determining position of a probe within the body employing means separate from the probe, e.g. sensing internal probe position employing impedance electrodes on the surface of the body
    • A61B5/062Determining position of a probe within the body employing means separate from the probe, e.g. sensing internal probe position employing impedance electrodes on the surface of the body using magnetic field
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03Computed tomography [CT]
    • A61B6/032Transmission computed tomography [CT]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/12Arrangements for detecting or locating foreign bodies
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A61B8/0833Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures
    • A61B8/0841Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures for locating instruments
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01RMEASURING ELECTRIC VARIABLES; MEASURING MAGNETIC VARIABLES
    • G01R33/00Arrangements or instruments for measuring magnetic variables
    • G01R33/20Arrangements or instruments for measuring magnetic variables involving magnetic resonance
    • G01R33/28Details of apparatus provided for in groups G01R33/44 - G01R33/64
    • G01R33/285Invasive instruments, e.g. catheters or biopsy needles, specially adapted for tracking, guiding or visualization by NMR
    • G01R33/287Invasive instruments, e.g. catheters or biopsy needles, specially adapted for tracking, guiding or visualization by NMR involving active visualization of interventional instruments, e.g. using active tracking RF coils or coils for intentionally creating magnetic field inhomogeneities

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Surgery (AREA)
  • Public Health (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Robotics (AREA)
  • Physics & Mathematics (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)
  • Radiology & Medical Imaging (AREA)
  • Anesthesiology (AREA)
  • Hematology (AREA)
  • Pulmonology (AREA)
  • Theoretical Computer Science (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Optics & Photonics (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Abstract

本發明提供一種手術導引系統及其器械導引方法,包括:取得一器械之預定器械路徑之三維空間資訊;將該三維空間資訊傳送至處理單元,以令處理單元利用一投影模型演算法將三維空間資訊轉換為二維空間資訊;以及令至少二影像式投影單元分別接收該二維空間資訊,以於一實體空間中分別投射至少二圖樣,其中,該二圖樣相交形成一交集區。

Description

手術導引系統及其器械導引方法
本發明係有關一種手術導引系統及其器械導引方法,尤指一種可提供光學導引以增加手術操作便利性之手術導引系統及其器械導引方法。
在現今許多微創外科手術中,醫生往往只能依據術前影像或即時影像的資料來進行手術,而此類輔助醫生進行手術之系統,可稱為手術導引系統。目前常見之手術導引系統例如有超音波成像(ultrasound imaging)或紅外線成像(Infrared imaging)搭配術前影像(如核磁共振影像、電腦斷層影像、X射線影像)之應用等。
然而,目前現有之手術導引系統在使用上,不論是術前影像或即時影像(例如:超音波能提供即時影像),醫生都必須同時專注於觀看手術導引系統所提供的影像畫面以及患者實體的手術空間位置,容易造成醫生手術上的不便,更甚者會增加手術操作上的誤差。
是以,如何提供一種可改善上述問題之手術導引系統及其器械導引方法,為目前亟待解決的課題之一。
為解決上述問題,本發明之一目的在於提供一種手術導引系統,包括:導航單元,用以取得一器械之預定器械路徑之三維空間資訊;處理單元,接收該三維空間資訊,以利用一投影模型演算法將該三維空間資訊轉換為二維空間資訊;以及至少二影像式投影單元,用以分別接收該二維空間資訊,以於一實體空間中分別投射至少二圖樣,其中,該二圖樣相交形成一交集區。
本發明之另一目的在於提供一種手術導引系統之器械導引方法,包括:令導航單元取得一器械之預定器械路徑之三維空間資訊;將該三維空間資訊傳送至處理單元,以令該處理單元利用一投影模型演算法將該三維空間資訊轉換為二維空間資訊;以及令至少二影像式投影單元分別接收該二維空間資訊,以於一實體空間中分別投射至少二圖樣,其中,該二圖樣相交形成一交集區。
藉由本發明之手術導引系統及其器械導引方法,透過至少二影像式投影單元將一器械之預定器械路徑之三維空間資訊所轉換之二維空間資訊,而可分別於一實體空間中投射至少二圖樣,該二圖樣的交集區即為手術器械之導引路徑,醫生不需同時專注於觀看手術導引系統所提供的影像畫面以及患者實體的手術空間位置,只需依據該手術器械之導引路徑即可便於施展手術,可增加手術操作便利性。
1‧‧‧手術導引系統
10‧‧‧導航單元
11‧‧‧第一影像式投影單元
111‧‧‧第一圖樣
12‧‧‧第二影像式投影單元
121‧‧‧第二圖樣
13‧‧‧第三影像式投影單元
14‧‧‧交集區
15‧‧‧顯示單元
16‧‧‧處理單元
17‧‧‧器械
171‧‧‧第一端
172‧‧‧第二端
19‧‧‧患者
20‧‧‧追蹤球
30‧‧‧切面
S11~S14‧‧‧步驟
第1圖係為本發明之手術導引系統之第一實施例之組 成示意圖;第2圖係為本發明之手術導引系統之第二實施例之組成示意圖;第3圖係為本發明之手術導引系統之第三實施例之組成示意圖;第4圖係為本發明之手術導引系統之運用示意圖;第5A圖係為本發明之手術導引系統之第四實施例之運用示意圖;第5B圖係為本發明之手術導引系統之第五實施例之運用示意圖;第6圖係為本發明之手術導引系統之第六實施例之運用示意圖;以及第7圖係為本發明之手術導引系統之器械導引方法之流程圖。
以下藉由特定之具體實施例加以說明本發明之實施方式,而熟悉此技術之人士可由本說明書所揭示之內容輕易地瞭解本發明之其他優點和功效,亦可藉由其他不同的具體實施例加以施行或應用。
請參閱第1圖,本發明之第一實施例之手術導引系統1包括有導航單元10、處理單元16及至少二影像式投影單元,本發明並不限制影像式投影單元之數量。以下以第一影像式投影單元11及第二影像式投影單元12為例進行說明。其中,第一影像式投影單元11及第二影像式投影單元 12可分別將小的矩陣影像投影至空間中,其可為數位光處理投影(Digital Light Processing,DLP)裝置、雷射光束掃描投影(Laser Beam Scanning,LBS)裝置或矽基液晶投影(Liquid Crystal on Silicon,LCoS)裝置等微型投影單元(pico projector),但本發明並不以此為限。
於本實施例中,第一影像式投影單元11及第二影像式投影單元12係裝設於導航單元10上,因此,第一影像式投影單元11及第二影像式投影單元12與導航單元10之間的座標系之轉換關係已固定且可於設計時得知。
該導航單元10用以取得一器械之預定器械路徑之三維空間資訊。於本實施例中,該器械之預定器械路徑之三維空間資訊係可利用光學追蹤器(例如:紅外線追蹤器)來取得,亦即,導航單元10可設有紅外線追蹤器,當該器械上裝有反光球標記時,能使導航單元10透過該紅外線追蹤器即時地偵測該器械的所在位置。於其他實施例中,該器械之預定器械路徑之三維空間資訊係可利用其他追蹤器(例如:電磁式追蹤器、機械式追蹤器)、超音波、電腦斷層、核磁共振或光學同調斷層掃描術(Optical Coherence Tomography,OCT)之方式來即時地取得。
更詳細地說,該器械之預定器械路徑之三維空間資訊係可在術前事先取得或術中即時取得。亦即,導航單元10可分為術前影像(pre-operative imaging)系統、術中影像(intra-operative imaging)系統及術中即時影像(intra-operative real-time imaging)系統。在術前影像系統 中,以紅外線追蹤器搭配術前影像(電腦斷層影像或核磁共振影像)為例子,則必須利用紅外線追蹤器將患者現在實際位置與電腦斷層或核磁共振所取得的影像位置進行對位,以進行註冊程序。在術中影像系統中,例如利用電腦斷層或核磁共振所取得的影像,則不需經由註冊程序,因病人是在電腦斷層設備或核磁共振設備中進行拍攝影像與手術,病人拍攝影像後仍固定不動,使得病人實際位置與影像位置已定位,故無須註冊。在術中即時影像系統中,例如利用超音波所取得的影像,並不需經由註冊程序。由於所屬技術領域中具有通常知識者已了解註冊程序之各種實施方式,故在此不再贅述。
上述以電腦斷層或核磁共振之方式所取得的影像,可僅提供作為術前影像,此時必須搭配追蹤器,以進行註冊;亦可提供作為術中影像,此時無須註冊。
在本實施例中,手術導引系統1係由導航單元10(如利用紅外線追蹤器)搭配術前影像(透過顯示單元15呈現)以提供手術導引方法。術前影像可由病人於手術前透過電腦斷層掃瞄、核磁共振掃瞄或其他醫學影像設備掃描而得到的影像。至於器械之預定器械路徑之三維空間資訊的取得,則有兩種不同的實施情境。於一實施情境中,手術導引系統1提供軟體介面以讓醫師能於手術前進行規劃,例如:透過術前影像之各個影像切面決定入刀點位置及角度。在手術時,則需利用紅外線追蹤器(即導航單元10)先將病人目前實際位置與術前影像位置進行註冊,並且取 得術前規劃之入刀點位置及角度(即透過軟體介面得到預定器械路徑之三維空間資訊),接著處理單元16利用投影模型演算法將三維空間資訊轉為二維空間資訊,使第一影像式投影單元11及第二影像式投影單元12能根據收到的二維空間資訊於實體空間投射圖樣,以指示手術入刀處及角度。
於另一實施情境中,手術入刀點位置及角度係在術中決定並取得。例如使用追蹤器的情況,於註冊程序完成後,醫生可手持裝設有如追蹤球的手術器械,使得導航單元10可透過該追蹤球追蹤並定位該手術器械,並於顯示單元15呈現術前影像以及目前手術器械的即時位置(即,目前手術器械的即時位置疊合於術前影像),而醫生則可邊觀看術前影像與目前手術器械的即時位置來模擬該手術器械要在患者身上進行手術的角度與位置。經醫生確認角度與位置後,可在導航單元10上輸入指令(例如按下手術器械上的確認按鈕、操作導航單元10的輸入裝置等),而此一角度與位置即是手術器械之預定器械路徑,該導航單元10可將該預定器械路徑轉換成三維空間資訊。
處理單元16用以接收三維空間資訊,以利用一投影模型演算法將該三維空間資訊轉換為二維空間資訊。
於一實施例中,該投影模型演算法為透視投影模型(perspective projection model),其公式為:,其中,M為器械路徑於導航單元10座標系統下之三維空間資訊,m為器械路徑於投影座標系統下 之二維空間資訊,s為縮放參數,P為投影矩陣,其包括,K為投影校準矩陣,R為旋轉矩陣,t為平移向量。因此,可藉由該演算法經由M來求出m,即將三維空間資訊回推至影像式投影單元之二維空間資訊。又於一實施例中,縮放參數通常可設為1,但本發明並不以此為限,且本發明亦不限制投影模型之演算法。
在本實施例中,第一影像式投影單元11及第二影像式投影單元12與導航單元10之間的座標系之轉換關係已固定且可事前得知,係指R與t是固定且已知。
在處理單元16轉換出二維空間資訊後,第一影像式投影單元11及第二影像式投影單元12可分別接收該二維空間資訊,以在一實體空間中投射分別投射至少二圖樣,例如第一影像式投影單元11投射第一圖樣111及第二影像式投影單元12投射第二圖樣121,該第一圖樣111與該第二圖樣121相交形成一交集區14,而此交集區14即為手術器械要在患者身上進行手術的角度與位置之指引。此部分於後將有詳細說明。
如第4圖所示,第一影像式投影單元11及第二影像式投影單元12分別投射第一圖樣111及第二圖樣121,而第一圖樣111及第二圖樣121在患者19上方欲進行手術的空間將相交形成一交集區14,其中,該交集區14為直線或曲線。以交集區14為直線為例,醫生可將器械17之第一端171抵接交集區14投射在患者19身上的點,接著可以第一端171為支點旋轉器械17之第二端172,以使得器械 17之第二端172與交集區14重疊,一旦重疊完成,即為器械17可進行手術的角度與位置。
於另一實施例中,本發明之手術導引系統1更包括介質散佈單元,介質散佈單元可被設置為一獨立裝置,且其具有無線訊號接收介面,可自手術導引系統1接收指令,用以根據該指令而散佈一介質於該實體空間中,以顯示該交集區14,輔助醫生辨識手術導引系統1所產生之交集區14,其中,該介質為具散射特性之物質(例如高濃度之二氧化矽、二氧化鈦、乾冰或其他具高散射係數特性且具滅菌考量之物質),該介質散佈單元可例如為噴霧裝置(sprayer)或其他具噴霧性質之裝置,但本發明並不以此為限。
又,本發明之手術導引系統1可包括連接該導航單元10之顯示單元15及處理單元16,該顯示單元15可用以顯示經處理單元16處理過後的患者的術前影像或術中即時影像。
請參閱第2圖,本發明之第二實施例之手術導引系統1亦包括有導航單元10、第一影像式投影單元11、第二影像式投影單元12以及處理單元16。以下僅敘述與第一實施例不同之處,相同之技術內容於此不再贅述。
第一影像式投影單元11及第二影像式投影單元12並非設於導航單元10,而是設於另一支撐件上。因此,第一影像式投影單元11及第二影像式投影單元12之間之座標系統的關係為固定,且第一影像式投影單元11及第二影像 式投影單元12與該導航單元10之間之座標系統的關係係不固定,亦即,影像式投影單元與導航單元10之間的座標系之轉換關係非固定且未知,必須定位影像式投影單元之位置後才能進行座標轉換(例如透過追蹤球20定位)。換言之,R與t是非固定,必須即時偵測影像式投影單元的位置來決定。而此實施例中,醫生可隨意移動支撐件,來調整第一影像式投影單元11及第二影像式投影單元12之進行投影之位置。
須說明者,可使用光學追蹤器、電磁追蹤器或機械式追蹤器(如陀螺儀與加速規)來定位各個影像式投影單元,以建立各個影像式投影單元與導航單元10之間的座標系轉換。舉例而言,在本實施例中,可在影像式投影單元上設置追蹤球20,以讓紅外線追蹤器(即導航單元10)能追蹤影像式投影單元,進而能建立導航單元10與影像式投影單元間之座標轉換關係。上述紅外線追蹤器與追蹤球僅為本發明之一實施例,本發明並不限制定位及被定位裝置之種類與設置方式。
請參閱第3圖,本發明之第三實施例之手術導引系統1亦包括有導航單元10、第一影像式投影單元11、第二影像式投影單元12、至少一個第三影像式投影單元13以及處理單元16。以下僅敘述與第一實施例不同之處,相同之技術內容於此不再贅述。
第一影像式投影單元11、第二影像式投影單元12及第三影像式投影單元13並非設於導航單元10,第一、第 二及第三影像式投影單元11、12、13為單獨之結構,而可方便醫生將第一、第二及第三影像式投影單元11、12、13依據現場手術環境任意擺放。在使用上,必須先計算第一、第二及第三影像式投影單元11、12、13與導航單元10之位置的相對關係後,才能令第一、第二及第三影像式投影單元11、12、13進行投影。亦即,該第一影像式投影單元11、該第二影像式投影單元12、該第三影像式投影單元13及該導航單元10各自之座標系統之間的關係並不固定,必須定位影像式投影單元之位置後才能進行座標轉換(例如透過追蹤球20定位)。換言之,R與t是非固定,必須即時偵測影像式投影單元的位置來決定。在本實施例中,本發明並不限制影像式投影單元之數量。由於定位各影像式投影單元之方法已於前述實施例提及,故在此不再贅述。
上述內容係說明導航單元10設有紅外線追蹤器之實施方式,以下將分別進一步說明導航單元10採用超音波、電腦斷層、核磁共振或光學同調斷層掃描術之方式的實施例。
請同時參閱第5A、5B圖,本發明第四實施例以及第五實施例之手術導引系統1亦包括有導航單元10、第一影像式投影單元11、第二影像式投影單元12以及處理單元(未圖示)。本實施例之第一、二影像式投影單元11、12之技術內容已如前詳述,於此不再贅述。以下僅說明本實施例之導航單元10與前述實施例之不同之處。
如第5A圖所示,導航單元10即為超音波探頭,其上 設有第一、二影像式投影單元11、12,為簡化示意,於第5A圖中並未繪示處理單元、顯示單元等相關元件。然,本領域具有通常知識者可根據上述說明了解處理單元如何於本實施例中實施。在本實施例中,係利用超音波之方式來即時取得影像,以使醫師在術中掃描到病人體內之一切面30時,即時決定入刀點位置及角度,例如,透過手術導引系統1所提供之軟體介面來讓醫師進行規劃,以令第一、二影像投影單元11、12根據所決定的入刀點位置及角度來投射至少二相交形成一交集區14之圖樣。
如第5B圖所示,則為另一種實施方式,可在導航單元10(即超音波探頭)上裝設追蹤球20,於第一、二影像式投影單元11、12上裝設紅外線追蹤器,以建立導航單元10與投影單元間的座標轉換關係。此時第一、二影像式投影單元11、12可為單獨之結構(如第3圖所示),亦可為設於另一支撐件上之實施態樣(如第2圖以及第5B圖所示),本發明並不以此為限。同樣地,於本圖中並未繪示處理單元、顯示單元等相關元件。然,本領域具有通常知識者可根據上述說明了解處理單元以及顯示單元如何於本實施例中實施。
請同時參閱第6圖,本發明第六實施例之手術導引系統1亦包括有導航單元10、第一影像式投影單元11、第二影像式投影單元12以及處理單元(未圖示)。本實施例之第一、二影像式投影單元11、12之技術內容已如前詳述,於此不再贅述。以下僅說明本實施例之導航單元10與前述 實施例之不同之處。
如第6圖所示,導航單元10可為電腦斷層(computed tomography;CT)掃描設備,第一、二影像式投影單元11、12則設於電腦斷層掃描設備上,病人在電腦斷層掃描設備上拍攝完CT影像後,醫師可直接在顯示影像的螢幕上規劃手術入刀路徑(即如前面所述利用軟體進行規劃),由於病人拍完CT影像後並未移動,故無須註冊,而可使第一、二影像式投影單元11、12根據所規劃之手術入刀路徑投射至少二相交形成一交集區14之圖樣。
同樣地,在導航單元10為超音波或電腦斷層之例子中,導航單元10與影像式投影單元之間座標轉換關係可為固定或非固定,為方便說明起見,前述僅部分例示(例如:第六實施例僅示意電腦斷層設備與影像式投影單元之間座標轉換關係為固定之態樣)。由於所屬領域具有通常知識者可依據第一實施例至第三實施例之說明而了解各實施情形,故於此不再贅述。應瞭解者,在導航單元10為超音波或電腦斷層之例子中,若導航單元10與影像式投影單元之間座標轉換關係為非固定時,可額外加裝定位裝置(例如:光學追蹤器、電磁追蹤器等)於超音波/電腦斷層設備上,以及裝上定位感應裝置(例如:追蹤球)於影像式投影單元,用以定位影像式投影單元。
請參閱第7圖,本發明之手術導引系統之器械導引方法之實施例,該方法係包含步驟S11~S14。於步驟S11中,係先取得一器械之預定器械路徑之三維空間資訊,其中, 該器械之預定器械路徑之三維空間資訊係以一導航單元透過追蹤器、超音波、電腦斷層或核磁共振或光學同調斷層掃描術之方式所得者,接著進至步驟S12。
於步驟S12中,將該三維空間資訊傳送至處理單元,於步驟S13中,令處理單元利用一投影模型演算法將該三維空間資訊轉換為二維空間資訊。
於一實施例中,該演算法為透視投影模型,其公式為:,其中,M為器械路徑於導航單元之座標系統下之三維空間資訊,m為器械路徑於投影座標系統下之二維空間資訊,s為縮放參數,P為投影矩陣,其包括,K為投影校準矩陣,R為旋轉矩陣,t為平移向量。接著進至步驟S14。
於步驟S14中,令至少二影像式投影單元接收二維空間資訊,以於一實體空間中分別投射至少二圖樣,其中,該二圖樣相交形成一交集區,其中,該交集區為直線或曲線。
在本實施例中,各影像式投影單元與導航單元之間之座標系統的關係不固定,或各影像式投影單元之間之座標系統的關係為固定,但各影像式投影單元與導航單元之間之座標系統的關係不固定。又,各影像式投影單元與導航系統之間之座標系統的關係為固定。
於本發明之另一實施例中,可透過一介質散佈單元散佈一介質於該實體空間中以顯示該交集區,其中,該介質可為具散射特性之物質(例如二氧化鈦、二氧化矽、乾冰 或其他具高散射係數特性且具滅菌考量之物質)。
藉由本發明之手術導引系統及其器械導引方法,透過處理單元將一器械之預定器械路徑之三維空間資訊轉換為二維空間資訊,而可令至少二影像式投影單元分別於一實體空間中投射至少二圖樣,該二圖樣的交集區即為手術器械之導引路徑,醫生不需同時專注於觀看手術導引系統所提供的影像畫面以及患者實體的手術空間位置,只需依據該手術器械之導引路徑即可便於施展手術,可增加手術操作便利性。此外,本發明之手術導引系統因採用微型投影元件,故所使用之構件皆可微型化,且本發明之影像式投影單元可形成投射影像平面,解決現有技術中僅能投射出點及線的問題,換言之,本發明之影像式投影單元如採用數位光處理投影(DLP)裝置或矽基液晶投影(LCoS)裝置,可形成有實體的投影平面,如採用雷射光束掃描投影(LBS)裝置,可透過光柵掃描(raster scanning)之MEMS快速掃描技術,在人視覺暫留時間內形成2D影像平面。又本發明之手術導引系統及其器械導引方法可避免額外設計手術工具,減少設計時受限滅菌考量的影響。
上述實施形態僅為例示性說明本發明之技術原理、特點及其功效,並非用以限制本發明之可實施範疇,任何熟習此技術之人士均可在不違背本發明之精神與範疇下,對上述實施形態進行修飾與改變。然任何運用本發明所教示內容而完成之等效修飾及改變,均仍應為下述之申請專利範圍所涵蓋。而本發明之權利保護範圍,應如下述之申請 專利範圍所列。

Claims (18)

  1. 一種手術導引系統,包括:導航單元,用以取得器械之預定器械路徑之三維空間資訊;處理單元,接收該三維空間資訊,以利用投影模型演算法將該三維空間資訊轉換為二維空間資訊;以及至少二影像式投影單元,用以分別接收該二維空間資訊,以於實體空間中分別投射至少二圖樣,其中,該二圖樣相交形成交集區,且其中,該至少二影像式投影單元為微型投影裝置。
  2. 如申請專利範圍第1項所述之手術導引系統,其中,該微型投影裝置為數位光處理投影裝置、雷射光束掃描投影裝置或矽基液晶投影裝置。
  3. 如申請專利範圍第1項所述之手術導引系統,其中,該影像式投影單元及該導航單元之間之座標系統的關係不固定。
  4. 如申請專利範圍第1項所述之手術導引系統,其中,該影像式投影單元之間之座標系統的關係為固定,且該影像式投影單元與該導航單元之間之座標系統的關係不固定。
  5. 如申請專利範圍第1項所述之手術導引系統,其中,該影像式投影單元及該導航單元之間之座標系統的關係為固定。
  6. 如申請專利範圍第1項所述之手術導引系統,其中,該導航單元係利用追蹤器、超音波、電腦斷層、核磁共振或光學同調斷層掃描術之方式來取得該器械之預定器械路徑之三維空間資訊。
  7. 如申請專利範圍第6項所述之手術導引系統,其中,該追蹤器為光學追蹤器、電磁式追蹤器或機械式追蹤器。
  8. 如申請專利範圍第1項所述之手術導引系統,其中,該交集區為直線或曲線。
  9. 如申請專利範圍第1項所述之手術導引系統,更包括介質散佈單元,用以散佈介質於該實體空間中,以顯示該交集區,其中,該介質為具散射特性之物質。
  10. 一種手術導引系統之器械導引方法,包括:令導航單元取得器械之預定器械路徑之三維空間資訊;將該三維空間資訊傳送至處理單元,以令該處理單元利用投影模型演算法將該三維空間資訊轉換為二維空間資訊;以及令至少二影像式投影單元分別接收該二維空間資訊,以於實體空間中分別投射至少二圖樣,其中,該二圖樣相交形成交集區,且其中,該至少二影像式投影單元為微型投影裝置。
  11. 如申請專利範圍第10項所述之器械導引方法,其中,該微型投影裝置為數位光處理投影裝置、雷射光束掃描投影裝置或矽基液晶投影裝置。
  12. 如申請專利範圍第10項所述之器械導引方法,其中,該器械之預定器械路徑之三維空間資訊係以該導航單元透過追蹤器、超音波、電腦斷層或核磁共振或光學同調斷層掃描術之方式所得者。
  13. 如申請專利範圍第12項所述之器械導引方法,其中,該追蹤器為光學追蹤器、電磁式追蹤器或機械式追蹤器。
  14. 如申請專利範圍第10項所述之器械導引方法,其中,該影像式投影單元及該導航單元之間之座標系統的關係不固定。
  15. 如申請專利範圍第10項所述之器械導引方法,其中,該影像式投影單元之間之座標系統的關係為固定,且該影像式投影單元與該導航單元之間之座標系統的關係不固定。
  16. 如申請專利範圍第10項所述之器械導引方法,其中,該影像式投影單元及該導航單元之間之座標系統的關係為固定。
  17. 如申請專利範圍第10項所述之器械導引方法,其中,該交集區為直線或曲線。
  18. 如申請專利範圍第10項所述之器械導引方法,更包括以介質散佈單元散佈介質於該實體空間中以顯示該交集區之步驟,其中,該介質為具散射特性之物質。
TW105141589A 2016-12-15 2016-12-15 手術導引系統及其器械導引方法 TWI624243B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
TW105141589A TWI624243B (zh) 2016-12-15 2016-12-15 手術導引系統及其器械導引方法
CN201711138259.2A CN108210073B (zh) 2016-12-15 2017-11-16 手术导引***及其器械导引方法
US15/829,949 US20180168736A1 (en) 2016-12-15 2017-12-03 Surgical navigation system and instrument guiding method for the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW105141589A TWI624243B (zh) 2016-12-15 2016-12-15 手術導引系統及其器械導引方法

Publications (2)

Publication Number Publication Date
TWI624243B true TWI624243B (zh) 2018-05-21
TW201821013A TW201821013A (zh) 2018-06-16

Family

ID=62556506

Family Applications (1)

Application Number Title Priority Date Filing Date
TW105141589A TWI624243B (zh) 2016-12-15 2016-12-15 手術導引系統及其器械導引方法

Country Status (3)

Country Link
US (1) US20180168736A1 (zh)
CN (1) CN108210073B (zh)
TW (1) TWI624243B (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019228530A1 (en) * 2018-05-31 2019-12-05 Shanghai United Imaging Healthcare Co., Ltd. Systems and methods for controllinig an x-ray imaging device
JP7258483B2 (ja) * 2018-07-05 2023-04-17 キヤノンメディカルシステムズ株式会社 医用情報処理システム、医用情報処理装置及び超音波診断装置
CN109602383B (zh) * 2018-12-10 2020-04-14 吴修均 一种多功能智能支气管镜检查***
WO2021007803A1 (zh) * 2019-07-17 2021-01-21 杭州三坛医疗科技有限公司 骨折复位闭合手术定位导航方法和用于该方法的定位装置
TWI790447B (zh) * 2020-06-10 2023-01-21 長庚大學 手術路徑定位方法、資訊顯示裝置、電腦可讀取的記錄媒體及特殊應用積體電路晶片
CN112618014A (zh) * 2020-12-14 2021-04-09 吴頔 非接触式颅内穿刺定位导航
CN113081744B (zh) * 2021-04-01 2022-12-23 湖南益佳生物科技有限公司 一种美容用皮肤护理装置
CN113180574A (zh) * 2021-04-06 2021-07-30 重庆博仕康科技有限公司 内窥镜的快插结构及内窥镜
CN117618104B (zh) * 2024-01-25 2024-04-26 广州信筑医疗技术有限公司 一种具有术中监测功能的激光手术***

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010039421A1 (en) * 1992-04-21 2001-11-08 Sofamor Danek Holdings, Inc. Apparatus and method for photogrammetric surgical localization
WO2004095378A1 (en) * 2003-04-24 2004-11-04 Koninklijke Philips Electronics N.V. Combined 3d and 2d views
TW200511968A (en) * 2003-09-26 2005-04-01 Ebm Technologies Inc Method of using tomography and reverse engineering for producing surgical introducing apparatus
CN1864635A (zh) * 2005-05-19 2006-11-22 西门子公司 相对于3d图像数据组记录2d投影图像的方法和装置
US20110040175A1 (en) * 1996-06-28 2011-02-17 Ramin Shahidi Method and Apparatus for Volumetric Image Navigation
TW201336469A (zh) * 2012-03-03 2013-09-16 Univ China Medical 手術影像導引定位裝置及其系統
CN102727232B (zh) * 2011-04-08 2014-02-19 上海优益基医疗器械有限公司 外科手术导航***定位精度检测装置及方法
US20140094687A1 (en) * 2010-04-12 2014-04-03 Inneroptic Technology, Inc. Image annotation in image-guided medical procedures
TW201420074A (zh) * 2012-11-26 2014-06-01 Univ Nat Central 手術導引系統之器械導引方法
US20150301439A1 (en) * 2014-04-16 2015-10-22 Eue Medical Technology Co., Ltd. Imaging Projection System

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4329431B2 (ja) * 2003-07-14 2009-09-09 株式会社日立製作所 位置計測装置
EP2874556B1 (en) * 2012-07-17 2019-03-13 Koninklijke Philips N.V. Augmented reality imaging system for surgical instrument guidance

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010039421A1 (en) * 1992-04-21 2001-11-08 Sofamor Danek Holdings, Inc. Apparatus and method for photogrammetric surgical localization
US20110040175A1 (en) * 1996-06-28 2011-02-17 Ramin Shahidi Method and Apparatus for Volumetric Image Navigation
WO2004095378A1 (en) * 2003-04-24 2004-11-04 Koninklijke Philips Electronics N.V. Combined 3d and 2d views
TW200511968A (en) * 2003-09-26 2005-04-01 Ebm Technologies Inc Method of using tomography and reverse engineering for producing surgical introducing apparatus
CN1864635A (zh) * 2005-05-19 2006-11-22 西门子公司 相对于3d图像数据组记录2d投影图像的方法和装置
US20140094687A1 (en) * 2010-04-12 2014-04-03 Inneroptic Technology, Inc. Image annotation in image-guided medical procedures
CN102727232B (zh) * 2011-04-08 2014-02-19 上海优益基医疗器械有限公司 外科手术导航***定位精度检测装置及方法
TW201336469A (zh) * 2012-03-03 2013-09-16 Univ China Medical 手術影像導引定位裝置及其系統
TW201420074A (zh) * 2012-11-26 2014-06-01 Univ Nat Central 手術導引系統之器械導引方法
US20150301439A1 (en) * 2014-04-16 2015-10-22 Eue Medical Technology Co., Ltd. Imaging Projection System

Also Published As

Publication number Publication date
CN108210073B (zh) 2020-08-28
TW201821013A (zh) 2018-06-16
CN108210073A (zh) 2018-06-29
US20180168736A1 (en) 2018-06-21

Similar Documents

Publication Publication Date Title
TWI624243B (zh) 手術導引系統及其器械導引方法
US11076133B2 (en) Medical tracking system comprising two or more communicating sensor devices
Gavaghan et al. A portable image overlay projection device for computer-aided open liver surgery
CN108601628B (zh) 将操作器械定位在患者身体内的导航、跟踪和引导***
US9918798B2 (en) Accurate three-dimensional instrument positioning
US11344180B2 (en) System, apparatus, and method for calibrating oblique-viewing rigid endoscope
JP2007136133A (ja) 拡張現実感呈示システム
Mewes et al. Projector‐based augmented reality system for interventional visualization inside mri scanners
KR20190078853A (ko) 레이저 표적 투영장치 및 그 제어방법, 레이저 표적 투영장치를 포함하는 레이저 수술 유도 시스템
Ma et al. Moving-tolerant augmented reality surgical navigation system using autostereoscopic three-dimensional image overlay
Liu et al. On-demand calibration and evaluation for electromagnetically tracked laparoscope in augmented reality visualization
Liu et al. Laparoscopic stereoscopic augmented reality: toward a clinically viable electromagnetic tracking solution
Liu et al. Hybrid electromagnetic-ArUco tracking of laparoscopic ultrasound transducer in laparoscopic video
Habert et al. RGBDX: First design and experimental validation of a mirror-based RGBD X-ray imaging system
US20150301439A1 (en) Imaging Projection System
Geurten et al. Endoscopic laser surface scanner for minimally invasive abdominal surgeries
Kang et al. Towards a clinical stereoscopic augmented reality system for laparoscopic surgery
Wengert et al. Endoscopic navigation for minimally invasive suturing
TWM484404U (zh) 成像投影系統設備應用
WO2022161610A1 (en) Positioning medical views in augmented reality
WO2022033656A1 (en) Microscope camera calibration
TW202222271A (zh) 影像定位系統之即時定位補償方法及可即時定位補償之影像定位系統
JP2022550876A (ja) 追跡の不正確性の補償
US10049480B2 (en) Image alignment device, method, and program
US11232861B1 (en) Systems and methods for displaying predetermined information for clinical use