TWI803399B

TWI803399B - 醫療或美容的外觀重建方法

Info

Publication number: TWI803399B
Application number: TW111128011A
Authority: TW
Inventors: 陳俊龍
Original assignee: 薩摩亞商星世代股份有限公司
Priority date: 2022-07-26
Filing date: 2022-07-26
Publication date: 2023-05-21
Also published as: TW202405756A

Abstract

本發明是一種醫療或美容領域的外觀重建方法，先讓用戶與資料處理中心建立用戶帳號資料及用戶帳戶，並在不同時間點將原始與現況資料傳輸給資料處理中心，使得用戶帳號資料、原始人臉模型資料及現況人臉模型資料被儲存在資料處理中心的用戶帳戶；隨後資料處理中心依據重建請求比較兩人臉模型資料來產生多個差異部位；由用戶選擇多個差異部位的一者做為指定重建區域，讓指定重建區域中的兩人臉模型資料能被資料處理中心演算來產生原始重建數據。藉此，方便不同醫療院所的醫師都能取得正確的重建數據來進行手術，減少用戶在手術後與醫師發生醫療糾紛的情況。

Description

醫療或美容的外觀重建方法

本發明有關於一種幫助用戶重返最佳樣貌的醫療或美容方法，特別是指一種能對臉部外貌、頭骨形狀或是牙齒樣貌的其中至少一用戶特徵來進行外觀重建的方法。

愛美是女人的天性，幾乎所有女人都會對自身容貌十分在意，尤其是在年齡增長方面的抗衰老部分，然而，人體內部的膠原蛋白和彈性纖維都會受到時間影響而開始分解，造成臉部產生皺紋，且皮下脂肪的流失會造成臉部肌肉凹陷，使得臉部骨骼更加明顯。

因此，越來越多人會進行整形或是美容手術來維持外觀容貌，隨著科技的快速發展，醫療美容的進程也有著長足的進展，人臉的各部位相貌幾乎都可以透過整形或美容手術來達到需求，且拜科技發達所賜，醫學美容也漸漸從傳統手術轉向「微創」或是「非侵入性」。

然而，在醫療手術或者美容手術中，一部分人會要直接改變某些部位的樣貌來達到美觀效果，而另一部分的人是為了要將本身樣貌回復至最佳樣態，例如年輕時的膚色、五官樣貌、身材比例、臉部長度、牙齒狀態等等，然而，多數的被手術者僅能提供以前照片樣貌，而無法給予手術醫師更多的精確資料，往往造成後續醫療或美容手術無法達到被手術者以往的最佳樣態，失去了整形美容原本的價值和目的，進而發生出許多的醫療或美容糾紛。

有鑑於此，為了減少日後醫療或美容的手術糾紛，實有必要發展出一種醫療或美容的外觀重建方法，方便手術醫師協助被手術者將樣貌回復至年輕時的最佳樣態。

本發明的主要目的在於提供一種應用在醫療或美容領域的外觀重建方法，讓用戶過去取得的原始人臉模型以及當下取得的現況人臉模型都能傳輸至雲端的資料處理中心，並能選擇至少一在現況人臉模型與原始人臉模型之間的差異部位，讓醫師能透過雲端的儲存資料來快速取得醫療或美容用的重建數據。

本發明的次要目的在於每個不同人臉模型的儲存資料中同時具有臉部資料以及口腔資料，可讓用戶日後能夠依據臉部現況來自行選擇進行外觀容貌、臉部骨頭、臉部肌肉、臉頰肉厚、牙齒排列、缺牙植牙或是牙肉萎縮等劣化狀態來進行重建手術。

本發明的另一目的在於用戶除能取得將差異部位手術回復至最佳樣貌的原始重建數據之外，亦能對差異部位進行整形需求來取得調整重建數據，同時用戶可預覽由調整重建數據產生的指定人臉模型樣態，讓用戶能夠事先了解手術後的實際樣貌。

為達成上述目的，本發明醫療或美容的外觀重建方法包含：一帳戶建立步驟、一原始外觀建立步驟、一現況外觀建立步驟、一差異比對步驟以及一數據產生步驟；並可在該數據產生步驟後進一步包含一調整預覽步驟。

在該帳戶建立步驟中，一用戶連線一資料處理中心來建立一用戶帳號資料以及一用戶帳戶，使得該用戶帳號資料被儲存在該用戶帳戶。

在該原始外觀建立步驟中，取得該用戶的頭部特徵來產生一原始臉部模型資料以及一原始口腔模型資料，再把該用戶帳號資料、該原始臉部模型資料及該原始口腔模型資料傳輸至一資料處理中心，使得一由該原始臉部模型資料及該原始口腔模型資料結合成的原始人臉模型資料能被儲存在匹配該用戶帳號資料的該用戶帳戶儲存。

在該現況外觀建立步驟中，再次取得該用戶的頭部特徵來產生一現況臉部模型資料以及一現況口腔模型資料，再把一重建請求、該用戶帳號資料、該現況臉部模型資料以及該現況口腔模型資料傳輸至該資料處理中心，使得一由該現況臉部模型資料以及該現況口腔模型資料結合成的現況人臉模型資料能被儲存在匹配該用戶帳戶資料的該用戶帳戶。

在該差異比對步驟中，該資料處理中心依據該重建請求，比對該原始人臉模型資料以及該現況人臉模型資料來產生複數差異部位。

在該數據產生步驟中，該複數差異部位的其中一者被該用戶選定為一指定重建區域，且該指定重建區域的一區域現況數據以及一區域原始數據將被該資料處理中心演算來產生一原始重建數據，並讓該原始重建數據能被該用戶取得來進行外觀重建手術。

在該調整預覽步驟中，依據該用戶的一調整請求，該原始重建數據將被該資料處理中心變更為一調整重建數據，且一指定人臉模型將透過該調整重建數據而被產生，使得該用戶能從該資料處理中心取得該指定人臉模型來進行預覽。

其中，該資料處理中心包含一儲存伺服器、一影像結合裝置以及一重建比對裝置，該重建比對裝置包括一差異分析模組、一數據演算模組以及一調整預覽模組。該原始臉部模型資料以及該現況臉部模型資料皆包含一面容模組(facial feature)、一臉部肌肉模組(facial muscle)以及一頭骨模組；該原始口腔模型資料以及該現況口腔模型資料皆包含一牙齒模組、一牙肉模組以及一舌頭模組。

該牙齒模組包含一牙齒顏色數據、一牙齒形狀數據、一牙齒尺寸數據以及一牙齒咬合數據；該牙肉模組包含一牙肉顏色數據、一牙肉輪廓數據以及一牙肉尺寸數據；該舌頭模組具有一舌頭形狀數據以及一舌頭尺寸數據。

於一較佳實施例中，在該原始外觀建立步驟中，該用戶帳戶儲存有該原始人臉模型資料、該原始臉部模型資料以及該原始口腔模型資料三者；在該現況外觀建立步驟中，該用戶帳戶儲存有該現況人臉模型資料、該現況臉部模型資料以及該現況口腔模型資料三者。

該差異比對步驟是由該原始人臉模型資料產生一原始人臉模型，另由該現況人臉模型來產生一現況人臉模型，後續將該原始人臉模型的至少一處設定為比對基準點，該現況人臉模型在對齊該比對基準點後，由位在該現況人臉模型與該原始人臉模型之間的多個未重疊區域形成該複數差異部位。

該差異部位是在該現況人臉模型上顯示不同顏色來標示出差異性，而該原始重建數據包含一差異長度、一差異厚度、一差異體積、一差異截面積、一差異輪廓以及一差異顏色的其中至少一種。

在該原始臉外觀建立步驟中，對該用戶的一臉部的一第一狀態進行第一次拍攝，另對該臉部的一第二狀態進行第二次拍攝，藉以取得該臉部的複數照片檔案以及複數X光片檔案，並由該複數照片檔案來產生該面容模組、另由該複數X裝片檔案來產生該臉部肌肉模組以及該頭骨模組。其中，該第一狀態是指嘴巴閉合的放鬆情況，該第二狀態是指一嘴巴張開的微笑情況。

本發明的特點在於用戶可將醫美診所、牙科診所或是大型醫療院所等不同地方所產生一臉部模型資料以及一口腔模型資料，透過網際網路來傳輸到雲端的資料處理中心，讓資料處理中心在不同時間點產生一原始人臉模型資料以及一現況人臉模型資料，後續可再將原始人臉模型資料與現況人臉模型資料進行差異部位的比對，藉以產生一原始重建數據方便醫師進行醫療握美容手術，可大幅減少用戶在手術後與醫師發生醫療糾紛的情況。

1:用戶

10:用戶帳戶

11:用戶帳號資料

20:醫美診所

21:牙科診所

22:大型醫療院所

31:原始臉部模型資料

32:原始口腔模型資料

33:原始人臉模型資料

331:原始人臉模型

332:區域原始數據

34:現況臉部模型資料

35:現況口腔模型資料

36:現況人臉模型資料

361:現況人臉模型

362:區域現況數據

371:面容模組

372:臉部肌肉模組

373:頭骨模組

374:牙齒模組

375:牙肉模組

376:舌頭模組

38:比對基準點

4:資料處理中心

40:影像結合裝置

41:儲存伺服器

42:重建比對裝置

421:差異分析模組

422:數據演算模組

423:調整預覽模組

43:差異部位

44:指定重建區域

45:指定人臉模型

50:原始重建數據

51:調整重建數據

60:重建請求

61:調整請求

S1:帳戶建立步驟

S2:原始外觀建立步驟

S3:現況外觀建立步驟

S4:差異比對步驟

S5:數據產生步驟

S6:調整預覽步驟

圖1本發明外觀重建系統的架構圖；圖2是本發明外觀重建方法的流程圖；圖3是本發明帳戶建立步驟的示意圖；圖4是本發明原始外觀建立步驟的示意圖；圖5是圖4原始人臉模型資料的示意圖；圖6是本發明現況外觀建立步驟的示意圖；圖7是圖6原始人臉模型資料的示意圖；圖8為本發明資料傳輸步驟的示意圖；圖9是本發明差異比對步驟中進行資料分析的示意圖；圖10是本發明差異比對步驟中產生差異部位的示意圖；圖11是本發明數據產生步驟中選擇差異部位的示意圖；圖12是本發明數據產生步驟中驗算重建資料的示意圖；以及圖13是本發明調整預覽步驟的示意圖。

茲為便於更進一步對本創作之構造、使用及其特徵有更深一層明確、詳實的認識與瞭解，爰舉出較佳實施例，配合圖式詳細說明如下：請參閱圖1所示，本發明主要是讓一用戶1能從一醫美診所20、一牙科診所21或是一大型醫療院所22第一次取得人臉特徵資料來產生一原始臉部模型資料31以及一原始口腔模型資料32，並由一資料處理中心4儲存複數用戶1的該原始臉部模型資料31、該原始口腔模型資料32以及一原始人臉模型資料33。

之後，該用戶1再次取得人臉特徵資料來產生一現況臉部模型資料34以及一現況口腔模型資料35，讓該資料處理中心4儲存該現況臉部模型資料34、該現況口腔模型資料35以及一現況人臉模型資料36。

後續由該資料處理中心4比較該原始人臉模型資料33及該現況人臉模型資料36，藉以產生外科手術所需的一原始重建數據50，使得該用戶1能透過網際網路在任何地方迅速取得該原始重建數據50，藉以提供給醫師來進行醫療或美容手術。

如圖所示，該資料處理中心4包含有一影像結合裝置40、一儲存伺服器41以及一重建比對裝置42；其中，該影像結合裝置40用以將該原始臉部模型資料31以及原始口腔模型資料32結合成該原始人臉模型資料33，另將該現況臉部模型資料34以及該現況口腔模型資料35結合成該現況人臉模型資料36；該儲存伺服器41用以儲存該複數用戶1的一用戶帳戶10，且該用戶帳戶10儲存有一用戶帳號資料11，並能儲存該原始臉部模型資料31、該原始口腔模型資料32、該原始人臉模型資料33、該現況臉部模型資料34、該現況口腔模型資料35、該現況人臉模型資料36及該原始重建數據50；該重建比對裝置42包括一差異分析模組421、一數據演算模組422以及一調整預覽模組423。

請參閱圖2所示，本發明外觀重建方法包含：一帳戶建立步驟S1、一原始外觀建立步驟S2、一現況外觀建立步驟S3、一差異比對步驟S4、一數據產生步驟S5以及一調整預覽步驟S6，其中，透過步驟S1至步驟S5即可讓該用戶1取得該原始重建數據50，而步驟S6僅為方便舉例說明用的一可行實施例。

請參閱圖3所示，在該帳戶建立步驟S1中，複數個用戶1分別向該資料處理中心4註冊一新的用戶帳號資料11，使得該資料處理中心4依據不同的用戶帳號資料11分別建立多數個用戶帳戶10，且每一用戶帳戶10能夠儲存匹配的該用戶帳號資料11，讓日後不同時間取得的模型資料皆能存放在該用戶帳戶10。如圖所示用戶帳號資料A、B、C及用戶帳戶A’、B’、C’，方便該用戶1在日後請求資料時，夠透過輸入該用戶帳號資料11能讓該資料處理中心4確定使用者身份。

請參閱圖4所示，在原始外觀建立步驟S2中，於一可行實施例中，該用戶1能在該醫美診所20使用一電腦斷層掃描儀來取得該原始臉部模型資料31，另在不同地區的該牙科診所21使用一口掃機來取得該原始口腔模型資料32；於另一可行實施例中，該用戶1亦能在該大型醫療院所22使用該電腦斷層掃描儀以及該口掃機來同時取得該原始臉部模型資料31以及該原始口腔模型資料32。

如圖5所示，該原始臉部模型資料31包括一面容模組371(facial feature)、一臉部肌肉模組372(facial muscle)以及一頭骨模組373，其中，該面容模組371是指人臉的眼睛、鼻子、嘴巴、耳朵、下巴、眉毛、膚色等外觀樣態，該臉部肌肉模組372是指人臉各部位的肌肉位置與厚度，而頭骨模組373是指內部頭顱的骨頭實際形狀。

此外，該原始口腔模型資料32包含一牙齒模組374、一牙肉模組375以及一舌頭模組376，其中，該牙齒模組374包括一牙齒顏色數據、一牙齒形狀數據、一牙齒尺寸數據以及一牙齒咬合數據；該牙肉模組375包含一牙肉顏色數據、一牙肉輪廓數據以及一牙肉尺寸數據；而該舌頭模組376具有一舌頭形狀數據以及一舌頭尺寸數據。

再者，在原始外觀建立步驟S2中，對該用戶1是以的一臉部的一第一狀態進行第一次拍攝，另對該臉部的一第二狀態進行第二次拍攝，藉以取得該臉部的複數照片檔案以及複數X光片檔案，並由該複數照片檔案來產生該面容模組371、另由該複數X裝片檔案來產生該臉部肌肉模組372以及該頭骨模組373。其中，該第一狀態是指嘴巴閉合的放鬆情況，該第二狀態是指一嘴巴張開的微笑情況。

請再參閱圖4所示，該用戶1在取得該原始臉部模型資料31及該原始口腔模型資料32後，將把該用戶帳號資料11、該原始臉部模型資料31及該原始口腔模型資料32透過網際網路傳輸至一雲端的資料處理中心4，該資料處理中心4將會先核對該用戶帳號資料11來選定匹配的該用戶帳戶10，隨後該資料處理中心4的該影像結合裝置40將把該原始臉部模型資料31及該原始口腔模型資料32結合成該原始人臉模型資料33，並將該原始臉部模型資料31、該原始口腔模型資料32以及該原始人臉模型資料33三者都儲存在該儲存伺服器41的該用戶帳戶10。

請參閱圖6所示，在該現況外觀建立步驟S3中，該用戶1是在取得原始外觀資料之後的任意時間(5、10年或20年後)，再次去相同或是相異的該醫美診所20、該牙科診所21或是該大型醫療院所22來取得一現況臉部模型資料34以及一現況口腔模型資料35。

如圖7所示，該現況臉部模型資料34同樣包括該面容模組371、該臉部肌肉模組372以及該頭骨模組373，而該現況口腔模型資料35同樣包括該牙齒模組374、該牙肉模組375以及該舌頭模組376，相同部分在此不再重複贅述。

請再參圖6所示，該用戶1在取得該現況臉部模型資料34及該現況口腔模型資料35後，將把一重建請求60、該用戶帳號資料11、該現況臉部模型資料34及該現況口腔模型資料35傳輸至該資料處理中心4；同樣地，該資料處理中心4將會先核對該用戶帳號資料11來選定匹配的該用戶帳戶10，隨後該資料處理中心4的該影像結合裝置40將把該現況臉部模型資料34及該現況口腔模型資料35結合成該現況人臉模型資料36，並將該現況臉部模型資料34、該現況口腔模型資料35以及該現況人臉模型資料36三者都儲存在匹配的該用戶帳戶10。

請再參閱圖8至圖10所示，在該差異比對步驟S4中，該資料處理中心4將依據該重建請求60以及該用戶帳號資料11，把該用戶帳戶10的該原始人臉模型資料33以及該現況人臉模型資料36傳輸至該重建比對裝置42的差異分析模組421，該差異分析模組421將比對該原始人臉模型資料33以及該現況人臉模型資料36之間的差異來產生複數差異部位43。

於一可行實施例中，該差異比對步驟S4是由該原始人臉模型資料33產生一原始人臉模型331，另由該現況人臉模型資料36來產生一現況人臉模型361，後續將該原始人臉模型331的至少一處設定為比對基準點38，該現況人臉模型361在對齊該比對基準點38後，由位在該現況人臉模型361與該原始人臉模型331之間的多個未重疊區域形成該複數差異部位43。如圖所示，該原始人臉模型331的比對基準點38有眉心點、鼻頭點及下巴點三者，而該複數差異部位43有眼睛、鼻子以及嘴巴等三個差異處；其中，該差異部位43是在該現況人臉模型361上被顯示不同顏色來標示出差異性。

請參閱圖11所示，在該數據產生步驟S5中，該複數差異部位43將被該資料處理中心4傳輸給該用戶1，該用戶1選定該複數差異部位43的其中一者為一指定重建區域44後，該指定重建區域44將再被該用戶1傳輸回該資料處理中心4。

請參閱圖12所示，該指定重建區域44將被該資料處理中心4的該數據演算模組422收到，且該數據演算模組422將從該原始人臉模型資料33取得一區域原始數據332，另從該現況人臉模型資料36取得一區域現況數據362，並依據該區域現況數據362與該區域原始數據332之間的差異來產生一原始重建數據50，讓該原始重建數據50能被該用戶1取得來進行外觀重建手術。其中，該原始重建數據50包含一差異長度、一差異厚度、一差異體積、一差異截面積、一差異輪廓以及一差異顏色的其中至少一種。

該用戶1在取得該原始重建數據50後，如認為原始重建數據50仍無法滿足外觀重建的需求，亦可與醫師討論之後向該資料處理中心4提出一將該原始重建數據50改變的調整請求61。

請參閱圖13所示，在該調整預覽步驟S6中，由該資料處理中心4的該調整預覽模組423接受該用戶1的該調整請求61，該調整預覽模組423將取得該調整請求61及該原始重建數據50來產生一調整重建數據51，且該調整預覽模組423依據該調整重建數據51產生一立體形狀的指定人臉模型45，並把該指定人臉模型45傳輸給該用戶1來直接預覽。

該用戶1在預覽該指定人臉模型45之後，若是該指定人臉模型45滿足該用戶1需求，可向該資料處理中心4發送一傳輸請求，讓該資料處理中心4把該調整重建數據51提供給該用戶1；若是該指定人臉模型45稍有不足，該用戶1能向該資料處理中心4發送一再調整請求，使得該調整預覽模組423產生一再調整重建數據來供該用戶1預覽；但若該指定人臉模型45無法修改成需求樣態，該用戶1亦能向該資料處理中心4發送一取消請求，使得該調整預覽模組423能刪除該調整重建數據。