TWI749921B

TWI749921B - 手術空間註冊系統與方法

Info

Publication number: TWI749921B
Application number: TW109142093A
Authority: TW
Inventors: 黃炳峰; 薛進原; 林志隆
Original assignee: 財團法人金屬工業研究發展中心
Priority date: 2020-11-30
Filing date: 2020-11-30
Publication date: 2021-12-11
Also published as: TW202222269A

Abstract

本揭露提出一種手術空間註冊系統，包括背架、電腦系統與機械手臂。背架包括多個定位標記，這些定位標記可在電腦斷層影像中成像，背架用以穿戴在患者身上。電腦系統用以計算定位標記在影像空間的影像座標。機械手臂的基座用以在產生電腦斷層影像後在手術空間中連接至背架。機械手臂用以在手術空間接觸定位標記，電腦系統用以取得機械手臂此時在機械手臂空間的機械手臂座標。電腦系統用以根據影像座標與機械手臂座標產生影像空間、手術空間以及機械手臂空間之間的轉換模型。

Description

手術空間註冊系統與方法

本揭露是關於註冊手術空間、影像空間與機械手臂空間的系統與方法。

隨這老化人口比例增加，再加上現代人生活特性影響，如肥胖、久坐等，其脊椎產生病變比例逐年增長；在保守性治療失效後，往往需要依靠植入物來協助脊椎減輕疼痛感並維持基本功能。脊椎承擔保護中樞神經基本功能，但是可施打植入物部位相當狹窄，如椎弓根骨釘，稍有不慎將損及中樞神經。市場上雖然已經有骨科微創手術，但由於脊椎的位置會隨著人的姿態一起改變，因此如何在手術中準確地追蹤脊椎的位置，為此領域技術人員所關心的議題。

本揭露的實施例提出一種手術空間註冊系統，包括背架、電腦系統與機械手臂。背架包括多個定位標記，這些定位標記可在電腦斷層影像中成像，背架用以穿戴在患者身上。電腦系統用以辨識電腦斷層影像中的定位標記，計算定位標記在影像空間的多個影像座標。機械手臂包括基座，此基座用以在產生電腦斷層影像後在手術空間中連接至背架。機械手臂用以在手術空間接觸定位標記，電腦系統用以取得機械手臂接觸定位標記時在一機械手臂空間的多個機械手臂座標。電腦系統用以根據影像座標與機械手臂座標產生影像空間、手術空間以及機械手臂空間之間的至少一個轉換模型。

在一些實施例中，背架包括多個束帶，這些束帶用以綁在患者的身體部位，每一個定位標記都設置於其中一個束帶之上。

在一些實施例中，背架還包括剛性結構，用以連接至基座。

在一些實施例中，電腦系統用以提供一導航介面，根據轉換模型將機械手臂在機械手臂空間的即時手臂位置轉換為在影像空間的即時影像位置，並在導航介面中根據即時影像位置顯示關於機械手臂的虛擬物件。

在一些實施例中，手術空間註冊系統還包括攝影機、脊椎定位標記與手臂定位標記。脊椎定位標記用以固定在患者的脊椎上，手臂定位標記用以固定在機械手臂上。攝影機用以拍攝影像，電腦系統用以辨識影像中的脊椎定位標記與手臂定位標記以計算在手術空間中脊椎定位標記相對於機械手臂的位置。

以另一個角度來說，本揭露的實施例提出一種手術空間註冊方法，適用於手術空間註冊系統，此手術空間註冊系統包括電腦系統。手術空間註冊方法包括：取得電腦斷層影像，辨識電腦斷層影像中的多個定位標記，並計算定位標記在影像空間的多個影像座標，其中定位標記設置於背架上，此背架用以穿戴在患者身上；控制機械手臂用在手術空間接觸定位標記，取得機械手臂接觸定位標記時在機械手臂空間的多個機械手臂座標，其中機械手臂包括基座，在產生電腦斷層影像後並且機械手臂接觸定位標記前基座在手術空間連接至背架；以及根據影像座標與機械手臂座標產生影像空間、手術空間以及機械手臂空間之間的轉換模型。

在一些實施例中，上述的手術空間註冊方法更包括：提供一導航介面；根據轉換模型將機械手臂在機械手臂空間的即時手臂位置轉換為在影像空間的即時影像位置；以及在導航介面中根據即時影像位置顯示關於機械手臂的虛擬物件。

在一些實施例中，手術空間註冊系統還包括攝影機、脊椎定位標記與手臂定位標記。脊椎定位標記用以固定在患者的脊椎上，手臂定位標記用以固定在機械手臂上，攝影機用以拍攝影像。手術空間註冊方法還包括：辨識影像中的脊椎定位標記與手臂定位標記以計算在手術空間中脊椎定位標記相對於機械手臂的位置。

在上述的系統與方法中，透過背架的使用可以簡化空間註冊的程序。

100:背架

110,120:束帶

130:定位標記

140:剛性結構

201~205:步驟

300:手術空間註冊系統

310:電腦系統

320:顯示器

321:虛擬物件

330:機械手臂

331:基座

332:尖端

410:影像空間

420:機械手臂空間

430:手術空間

T _CR,T _RH,T _HC:矩陣

510:相機

520:手臂定位標記

530:脊椎定位標記

為讓本發明的上述特徵和優點能更明顯易懂，下文特舉實施例，並配合所附圖式作詳細說明如下。

圖1是根據一實施例繪示背架的示意圖。

圖2是根據一實施例繪示手術空間註冊方法的流程圖。

圖3是根據一實施例繪示手術空間註冊系統的示意圖。

圖4是根據一實施例繪示多個空間的示意圖。

圖5是根據一實施例繪示手術空間註冊系統的示意圖。

在此揭露中提出了一種手術空間註冊系統，包括了電腦系統、機械手臂與一背架，此背架是用以穿戴在患者身上，背架上包括多個定位標記，透過以下提出的方法可以快速的計算出不同空間之間的轉換模型。

圖1是根據一實施例繪示背架的示意圖。圖2是根據一實施例繪示手術空間註冊方法的流程圖。請參照圖1與圖2，在步驟201中由患者穿戴背架100，在圖1的實施例中背架100包括多個束帶110、120，這些束帶110、120用以綁在患者的身體部位，在此實施例中是綁在軀幹部位，但在其他實施例中也可以綁在患者的手部、腳部等其他部位。束帶110、120上設置有多個定位標記130，定位標記130的材料例如包括金屬，可以在電腦斷層影像中成像。定位標記130的位置例如在軀幹的四個角落，避免在電腦斷層影像中遮蔽脊椎。然而，圖1的背架100僅為範例，在其他實施例中背架100可以依照需要而具有任意的材料、形狀、以及/或者結構，本揭露也不限制定位標記130的個數與位置。當患者穿上背架100以後，定位標記130與患者之間的相對位置是固定的。在一些實施例中，背架100具有剛性的框架，可以協助固定或支撐患者的脊椎。在一些實施例中，背架100是可形變的，當患者的姿態改變時這些定位標記130的位置也會跟著改變。換言之，藉由偵測定位標記130的位置可以計算出脊椎的位置。

在步驟202中，由患者穿戴背架拍攝電腦斷層影像。接著由電腦系統辨識電腦斷層影像中的定位標記130，計算這些定位標記130在一影像空間的多個影像座標，以下用X來表示這些影像座標，其中X為向量。在此，電腦系統可以透過任意的影像處理或電腦視覺方法來辨識電腦斷層影像中的定位標記130，舉例來說，定位標記130的形狀為已知，因此電腦系統可以根據一預設圖案在電腦斷層影像中尋找定位標記，並且記錄其位置做為上述的影像座標。

在步驟203中，讓背架連接機械手臂。請參照圖圖2與圖3，圖3是根據一實施例繪示手術空間註冊系統的示意圖。手術空間註冊系統300包括了電腦系統310、顯示器320與機械手臂330。機械手臂330上可設置一器具，此器具例如為鑽頭、銼刀、刮刀、鋸子、螺絲刀或其他通常用於外科手術中，通過鑽孔、打磨、切除或刮除等方式來修復或移除解剖部位的部分組織的工具。機械手臂330上可包括但不限於轉動關節、滑動關節、球關節、萬向關節、筒關節或其任意組合，以獲得所需的自由度。醫生可透過合適的裝置(例如具有6個自由度的控制器)來控制機械手臂330進行手術。機械手臂330包括基座331，此基座331用以在手術空間中連接至背架。舉例來說，背架包括了一個剛性結構140，此剛性結構140可連接至基座331。如此一來，背架與機械手臂330之間的相對位置會是固定的。

接下來在步驟204中，控制機械手臂在手術空間接觸定位標記。在此實施例中機械手臂330具有尖端332，操作人員可以控制機械手臂330，讓尖端332接觸每一個定位標記130，電腦系統310會取得機械手臂330接觸定位標記130時在機械手臂空間的機械手臂座標，以下表示為向量Y。

在步驟205，根據上述的影像座標與機械手臂座標產生影像空間、手術空間以及機械手臂空間之間的轉換模型。請參照圖4，圖4是根據一實施例繪示多個空間的示意圖。在此實施例中共有三個空間，分別是影像空間410、機械手臂空間420與手術空間430。上述的影像座標X在影像空間410中，上述的機械手臂座標Y在機械手臂空間420中。手術空間430也是真實世界的空間，定位標記130在手術空間430中的座標表示為向量Z。首先，透過配對影像座標X與機械手臂座標Y，可以計算出影像空間410與機械手臂空間420之間的轉換模型，表示為矩陣T _CR，也可表示為以下數學式1。

[數學式1]X=T _CR Y

另一方面，由於背架100透過剛性結構140連接至機械手臂330，因此背架100上定位標記130的位置是固定的。由於定位標記130在背架100上的位置是已知，在此可以設定一個合適的參考點作為真實空間430的原點，例如但不限於取四個定位標記130的質心位置做為原點，藉此可以計算出定位標記130在真實空間430中的座標Z。當機械手臂330接觸定位標記130時，便可以根據以下數學式2計算出機械手臂空間420與手術空間430之間的轉換模型，表示為矩陣T _RH。

[數學式2]Y=T _RH Z

將數學式2代入數學式1，可求得影像空間410與手術空間430之間的轉換模型，表示為矩陣T _HC，如以下數學式3所示。

[數學式3]X=T _HC Z T _HC=T _CR T _RH

如此一來，影像空間410、機械手臂空間420與手術空間430之間的座標可以任意轉換。請參照圖3與圖 4，電腦系統310可以根據上述的轉換模型來產生一導航介面，在此可以用任意的虛擬實境、擴增實境、替代實境或混和實境技術來產生導航介面，本揭露並不在此限。在此實施例中導航介面是顯示在顯示器320上，但在其他實施例中導航介面也可以顯示在任意的頭戴式裝置、平板電腦、或透明顯示器上。舉例來說，電腦系統可以依據影像處理技術將電腦斷層影像中的脊椎進行分割以產生關於脊椎的虛擬物件，並且在導航介面中顯示此虛擬物件。電腦系統310可以根據轉換模型T _CR將機械手臂330在機械手臂空間420的即時手臂位置轉換為在影像空間410的即時影像位置，然後在導航介面中根據即時影像位置顯示關於機械手臂330的虛擬物件321。如此一來，當機械手臂上的器具進入人體內後，醫生可以透過顯示器320上的導航介面得知器具在人體內的位置。在此實施例中，由於背架100會固定患者的姿態，而背架100透過剛性結構140連接至機械手臂330，因此患者的脊椎不容易移動，在導航介面中可以準確地顯示脊椎的位置。

圖5是根據一實施例繪示手術空間註冊系統的示意圖。在圖5的實施例中，系統還包括攝影機510、手臂定位標記520與脊椎定位標記530。脊椎定位標記530是用以固定在患者的脊椎上，例如在要動手術的脊椎骨上都設置了脊椎定位標記530。手臂定位標記520則是固定在機械手臂330上。攝影機510用以拍攝影像，在一些實施例中攝影機510可包括紅外線發射器、紅外線感測器、雙攝影機、結構光感測裝置或任意可以感測場景深度的裝置。電腦系統310用以辨識影像中的脊椎定位標記530與手臂定位標記520以計算在手術空間中該脊椎定位標記530相對於機械手臂330的位置。如此一來，電腦系統310也可以在顯示器320上顯示關於脊椎定位標記530的虛擬物件。在一些實施例中，背架100(為了簡化起見未繪示於圖5)是可形變的，在圖5的實施例中攝影機510也會拍攝到背架100上的定位標記130。電腦系統310可以辨識出影像中的定位標記130，藉此重新校正脊椎的位置。舉例來說，電腦系統310可以辨識出定位標記130的位移，藉此將電腦斷層影像做對應的形變，如此一來電腦斷層影像也可以基於患者的姿態而調整。

在上述的例子中手術空間註冊系統是用於脊椎手術，但在其他實施例中也可以用於胸腔手術或是其他合適的首度。換言之，上述圖2的各步驟之間也可以加入其他的步驟。

在上述的系統與方法中可以便利的註冊機械手臂、電腦斷層影像與患者的身體所屬的空間以提供導航系統，透過背架的使用可以簡化註冊的程序。

雖然本發明已以實施例揭露如上，然其並非用以限定本發明，任何所屬技術領域中具有通常知識者，在不脫離本發明的精神和範圍內，當可作些許的更動與潤飾，故本發明的保護範圍當視後附的申請專利範圍所界定者為準。