TWI610565B - 立體影像物件互動方法、系統與立體互動影片後製方法 - Google Patents

立體影像物件互動方法、系統與立體互動影片後製方法 Download PDF

Info

Publication number
TWI610565B
TWI610565B TW106113465A TW106113465A TWI610565B TW I610565 B TWI610565 B TW I610565B TW 106113465 A TW106113465 A TW 106113465A TW 106113465 A TW106113465 A TW 106113465A TW I610565 B TWI610565 B TW I610565B
Authority
TW
Taiwan
Prior art keywords
interactive
post
production
movie
film
Prior art date
Application number
TW106113465A
Other languages
English (en)
Other versions
TW201840200A (zh
Inventor
龍祈澔
Original Assignee
國立臺北科技大學
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 國立臺北科技大學 filed Critical 國立臺北科技大學
Priority to TW106113465A priority Critical patent/TWI610565B/zh
Application granted granted Critical
Publication of TWI610565B publication Critical patent/TWI610565B/zh
Publication of TW201840200A publication Critical patent/TW201840200A/zh

Links

Landscapes

  • Processing Or Creating Images (AREA)

Abstract

一種立體影像物件互動方法與系統,以及其中立體互動影片後製方法。設有一個在原始影片中經由後製程序置入一或多個模組化物件形成的互動後製影片,其中各模組化物件與原始影片中的多個錨點具有同一參考位置關係。後製影片之後由使用者以一電腦進行互動,使得一般影片同樣能夠產生互動的效果。在方法中,使用者在此後製影片中操作一個互動元件,電腦即運算互動元件在後製影片中的動作,如移動軌跡,當偵測到互動元件與後製影片中各模組化物件的互動位置關係進入一互動範圍時,可以對應產生一個提供使用者及時互動的影片。

Description

立體影像物件互動方法、系統與立體互動影片後製方法
本發明關於一種與影片中物件互動的方法與系統,特別是一種影片經過後製而置入立體模組物件後,可讓使用者與影片中立體物件互動的立體影像物件互動方法與系統。
現行技術中可以提供使用者與影片中影像互動的方式例如電腦遊戲,由遊戲製作者透過邏輯設計決定影片中各種影像與遊戲者互動的規則,當遊戲互動符合特定規則時,即依照事先設定好的方式產生互動內容。而這些遊戲畫面並非真實的影像,或是僅採用部分無法執行遊戲互動的真實影像。
其他提供影像互動的技術例如虛擬實境(Virtual Reality,VR)、擴增實境(Augmented Reality,AR)或一種混合VR與AR技術的混合實境(Mixed Reality,MR),其中需要在一開始時製作或拍攝符合VR或AR等規格的影像,並以軟體手段設計出使用者可與其中影像互動的介面,讓使用者可以操作行動裝置、穿戴式裝置,或一般電腦裝置進行互動。
現行提供使用者可以互動的影像內容皆是事先製作符合特定格式的影片,不可更動影片中的影像內容,如VR,或透過螢幕與攝影機將虛擬物件即時置入現實的AR,與事先設計(繪製)好有 特定邏輯規則的虛擬空間環境,如遊戲,並沒有可以在已經錄製好的真實影片中產生互動的技術。
本揭露書提出一種立體影像物件互動方法與系統,以及其中立體互動影片後製方法,其目的之一能在一已經存在的原始影片中,透過後製程序置入一些提供互動效果的元素,例如一些影像物件,讓使用者可以藉由一些輸入手段,在影像播放過程中,同時產生與這些物件互動的效果,經由軟體的方式運算,產生互動畫面,達到影像物件互動,而產生即時互動影片的目的。
根據實施例,提供一後製影片,此後製影片係藉由後製程序將一或多個模組化物件置入於一個原始影片中,原始影片可以為一般平面影像,影片會有運鏡的變化,因此為了讓其中特定影像的位置不致因為畫面變動而無法定位,原始影片可以設有多個錨點(anchor),可以多個錨點描述至少一實體物件,用以定位影像物件的位置,各模組化物件與原始影片中的多個錨點則具有一參考位置關係。
在立體影像物件互動方法的實施例中,一個電腦裝置接收一互動元件在一後製影片中動作的資訊,運算互動元件在後製影片中的動作,以偵測互動元件與後製影片中各模組化物件的一互動位置關係,之後,當對應模組化物件的互動位置關係進入一互動範圍時,產生一互動訊號,可以觸發互動的畫面,使得後製影片結合互動元件與對應互動訊號的一影像,形成一互動影片。
以上電腦裝置可以為使用者操作的終端裝置,或是雲端系統,當使用者在終端裝置上操作時,可以在終端裝置上運算而即時產生互動,形成互動影片;或是將互動產生的訊號傳送到雲端系統,由雲端系統運算產生顯示於終端裝置的互動影像。所述互動元件為顯示於終端裝置的顯示螢幕上,可為一接受觸控、聲控、 體感控制或滑鼠控制而移動位置的圖形。
特別的是,在影片後製過程中,通過軟體方法識別出原始影片的運鏡變化,使得模組化物件顯示時與原始影片有一致的空間角度,可以適當地置入在其中影像的同一空間關係上。
在互動影片製作方法的實施例中,先取得原始影片,根據原始影片的運鏡判斷其中以多個錨點描述的一實體物件的角度變化,之後根據實體物件的設置與角度變化,於實體物件上置入一或多個模組化物件,各模組化物件與原始影片中的多個錨點具有一參考位置關係,根據原始影片的運鏡判斷攝影機拍攝時移動軌跡,因此可以據以設定一或多個模組化物件的移動軌跡,並配合虛擬攝影機套用拍攝時的移動軌跡,以形成可即時互動的後製影片。
實現揭露書所提出的立體影像物件互動方法,提出一種立體影像物件互動系統,系統主要有一雲端伺服器,設有一資料庫,資料庫包括原始影片庫、模組化物件庫以及後製影片庫,用以提供終端裝置顯示後製影片,透過操作一使用者介面於後製影片上進行一互動。
為了能更進一步瞭解本發明為達成既定目的所採取之技術、方法及功效,請參閱以下有關本發明之詳細說明、圖式,相信本發明之目的、特徵與特點,當可由此得以深入且具體之瞭解,然而所附圖式僅提供參考與說明用,並非用來對本發明加以限制者。
10‧‧‧實體物件
12‧‧‧互動元件
101,102,103,104,105,106‧‧‧模組化物件
111,112,113,114,115,116,117,118,119,120,121‧‧‧錨點
21‧‧‧雲端伺服器
23‧‧‧資料庫
25‧‧‧終端裝置
20‧‧‧網路
251‧‧‧後製影片
30‧‧‧雲端伺服器
301‧‧‧運算單元
303‧‧‧記憶單元
305‧‧‧通訊單元
32‧‧‧資料庫
321‧‧‧原始影片庫
323‧‧‧模組化物件庫
325‧‧‧後製影片庫
34‧‧‧終端裝置
341‧‧‧處理單元
342‧‧‧記憶單元
343‧‧‧通訊單元
344‧‧‧輸入單元
345‧‧‧顯示單元
步驟S401~S411‧‧‧互動影片製作流程
步驟S501~S517‧‧‧影像物件互動流程
圖1A顯示以本發明立體影像物件互動方法實現的互動影片實施例示意圖之一;圖1B顯示以本發明立體影像物件互動方法實現的互動影片實施例示意圖之二;圖2顯示本發明立體影像物件互動系統的架構實施例圖; 圖3顯示本發明立體影像物件互動系統的各端功能與電路單元的實施例圖;圖4顯示本發明立體互動影片後製方法的實施例流程;圖5顯示本發明立體影像物件互動方法的實施例流程。
為了針對一般平面影片提供使用者產生互動影像的功能,揭露書描述一種立體影像物件互動方法與系統,以及其立體互動影片後製方法,讓使用者可以透過電腦裝置與所顯示的影片進行互動,其中提出一個經過後製(post-production)的影片,並在適當軟體手段播放時,可以讓使用者操作其中元件以產生互動。
根據實施例之一,實現立體影像物件互動方法的電腦裝置中,先預備一原始影片,較佳為拍攝真實景色的平面影片,接著在此原始影片中經由後製程序置入一或多個模組化物件形成的後製影片,其中各模組化物件為獨立可變化的物件,可以為一些擬真圖案或是繪製得到的圖案,與原始影片組合,達到虛實整合的效果。後製影片由使用者以一電腦裝置進行互動,使得帶有運鏡的影片,都同樣能夠產生互動的效果。
其中方法特別的是,考慮了原始影片中影像物件因為運鏡(camera movement)產生的變化,使得當中後製置入的模組化元件也能合理地存在在一個真實影片中。其中運鏡是指拍攝原始影片時拍攝者操作攝影機鏡頭在位置上的改變,其中有幾種運鏡方式,如執行放大縮小(zoom)的促鏡,會連同其中的影像物件有放大或縮小的變化,在本發明中,後製置入的模組化物件也同步有放大或縮小的變化;運鏡包括有縱向變化的推鏡(dolly),同樣也會造成被拍攝的影像物件有放大或縮小的變化,在本發明中,後製置入的模組化物件也會有同步變化的效果;運鏡有一種橫向變化的橫推(truck)與搖鏡(pan)的手法,會使得被拍攝影像物 件平移變化,同樣地,後製置入的模組化物件也會有同步平移的變化;運鏡有一種抬鏡(tilt)的技巧,主要是攝影機機身不變,而以上下移動鏡頭拍攝影像,當影像物件上下變化時,當中的模組化物件也會同步變化;運鏡中的升鏡(pedestal)會連同攝影機一同在平台上下移動,使得被拍攝影像物件也產生變化,同理,後製置入的模組化物件也會有同步變化的效果;運鏡還有一種弧鏡(arc)的弧形變化方式,後製置入的模組化物件也會有同步變化的效果。
在此一提的是,所述互動式立體影片的後製技術是以視角重建透視原理為基礎,以此發展出的影片圖像視覺實體互動化的技術,其中視角重建是以螢幕上的虛擬影像,或使此虛擬影像能被投射的立體實體模型,經判斷觀者的空間及深度位置改變之後,可使虛擬影像根據觀者的空間位置的改變,而在實體模表面產生上下、左右或深度的視角與空間變換,以符合實際的空間認知。
在本發明採用之互動式立體影片後製技術上,在一實施方式中,結合了傳統實景影片拍攝並承襲運鏡、剪接與鏡頭語言安排等電影手法,於視角重建技術中,對於觀者的空間及深度位置改變的判讀機制,在此技術上轉變為對拍攝影片之攝影機運鏡軌跡的追蹤。透過由影片實景,產生對於立體物件造型的客觀認知與判斷,使重塑的立體模型與每張移動影格中的立體物件,進行低誤差的疊合。在後製過程中,可以實拍影片為基底,經由軟體手段,以進行實際影片中場景空間的追蹤,並反算出攝影機移動的軌跡(camera tracking)。
本發明立體影像物件互動方法實現的互動影片實施例情境示意圖可以參考圖1A與圖1B。
圖1A顯示為一個顯示在電腦裝置上影片中的影像物件,包括一實體物件10,此例顯示為一個建築物,此實體物件10所描述的建築物拍攝時呈現一個視覺上的角度,而可能因為拍攝此實體物 件10時運鏡的關係而顯示有如圖1B的另一個視覺角度。
因為影片中影像物件,如此例的建築物,會因為影片變化而改變在影片中的位置,以及視覺角度,因此可以透過設計有多個錨點(anchor)而定位此影像物件。如圖中顯示的錨點111,112,113,114,115,116,117,118,119,120與121等。
此例顯示在建築物(實體物件10)原本拍攝於一原始影片中,經過後製程序,建築物的各樓層中置入多個模組化物件101,102與103,以及經過互動設計後產生變動(如掉落)的模組化物件104,105,106,每個物件都為獨立的影像物件。而造成這些模組化物件104,105,106的變動可以是使用者操作一個互動元件12在此後製影片中移動時,根據設定的規則,當符合此規則時,有些模組化物件104,105,106即產生變動。
此例所述錨點111,112,113,114,115,116,117,118,119,120,121為描述實體物件10(一或多個)的一些識別位置,這些錨點也是作為後製置入模組化物件101,102,103,104,105,106時的參考點。根據實施例之一,在一後製軟體中,先引入原始影片,利用軟體工具在動態變化的影片中設計出定位一或多個實體物件10的錨點111,112,113,114,115,116,117,118,119,120,121,之後再以軟體工具以這些錨點為參考點進行建模,在特定位置置入模組化物件,與原始影片中的多個錨點具有一參考位置關係。因此,當影片有變化時,會使得實體物件10也隨著變動,根據此參考位置關係置入的模組化物件101,102,103,104,105,106也因此隨著變動。
互動元件12為提供使用者互動的介面之一,互動元件12可以為看得到的圖案,供使用者以觸控、聲控、體感或滑鼠(或鍵盤)等輸入手段操作,並可包括任何可以控制互動元件12的手段,透過互動元件12與後製影片中的模組化物件101,102,103,104,105,106互動,如此例表示模組化物件104,105與106因為符合 某個規則時,如遭到互動元件12碰撞,即產生後續互動變化,如掉落、彈開或被移動到其他位置。在另一實施例中,互動元件12可指使用者觸碰或是利用滑鼠產生的操作訊號的範圍,當此範圍與模組化物件101,102,103,104,105,106互動時符合特定規則,也能產生互動變化。
在背後的軟體程序就是一種影像處理程序,運算影片中每個被設定的影像的變化,如運算互動元件12在後製影片中的動作,能偵測互動元件12與後製影片中各模組化物件101,102,103,104,105,106的一互動位置關係,當對應一或多個模組化物件的互動位置關係進入系統所設定的一互動範圍,系統將產生一互動訊號,再以一軟體工具使得後製影片結合互動元件12,以及對應此互動訊號的一影像(如模組化物件的變化),形成一互動影片。
圖1B接著示意顯示在相同影片中前述實體物件10因為錄製時運鏡的變化呈現了另一個視覺角度,此圖例顯示同樣如圖1A顯示的建築物,因為影片製作時運鏡產生的不同的視覺角度,也顯示使用者操作互動元件12的情況,使用者可以透過觸控或聲控輸入,或是滑鼠、鍵盤等方式控制互動元件12在後製影片上的動作,另可以行動裝置提供的體感操作手段(如利用加速度器)控制互動元件12的變化。
圖例顯示模組化物件的位置因為設定了與實體物件10上的各錨點之間的互動位置關係,能夠在影片變化時仍位於原先設定的相對位置上,不論運鏡如何,模組化物件也總是在原先設定與實體物件10的相對位置上。同時,在互動模式下,也因為互動元件12的移動而產生對應的變化,如因為碰撞而彈開或掉落。
值得一提的是,在準備原始影片時,原始影片本身可以已經載有立體空間資訊,或是其中物件已經是一個立體物件,因而取得當中的空間資訊;或者,原始影片並無載有立體空間資訊,卻可自其中運鏡取得空間資訊,包括以一虛擬攝影機套用拍攝時的 移動軌跡,藉此運算得出空間資訊,也就是影片中各種物件之間的空間關係,使得後製時置入互動元件時,可以更為符合視覺上的空間感。最後,後製影片成為可以提供使用者進行即時互動的影片。
根據發明實施例,主要以電腦裝置中的軟體手段實現以上立體影像物件互動方法,其中可以在使用者端的電腦裝置中直接以特定軟體程序運行如上述的影像物件互動,讓使用者操作電腦裝置,在後製影片中操作互動元件,產生互動畫面,最後可再錄製為一新的互動影片。另有實施例如圖2所示本發明立體影像物件互動系統的架構實施例圖。
圖中顯示立體影像物件互動系統關於伺服器端的硬體設施(雲端伺服器21、資料庫23)與安裝於使用者端的終端裝置25的軟體程序,終端裝置25藉由網路20與雲端伺服器21連線,其中顯示由雲端伺服器21提供的後製影片251,此例顯示使用者可在終端裝置25上觀看後製影片251,並以觸控方式與後製影片251中的影像互動,特別是經由後製程序置入可以變化的模組化物件。
雲端伺服器21可提供多人的互動服務,讓終端裝置25經網路20取得系統已經製作好的後製影片251,執行上述實施例所示以互動元件與後製影片251中的模組化物件互動的動作。更可於執行互動過程中由終端裝置25中的軟體程序錄製互動過程,形成最後的互動影片。雲端伺服器21也可因此提供儲存使用者端完成的互動影片的服務,或是提供不同使用者之間分享影片的平台服務。
雲端伺服器21設有資料庫23,當中可儲存一或多個原始影片,或包括提供後製的素材,如前述提供後製置入影片的模組化物件,除了形成可即時互動的影片外,並可儲存一或多個已經後製完成的影片。相關功能模組可參考圖3所示本發明立體影像物件互動系統的各端功能與電路單元的實施例圖。
此例顯示一雲端伺服器30,運作如一運算主機,其中設有運算單元301,如運算主機中的處理器或軟硬體合作執行特定運算工作的功能模組;設有記憶單元303,此為運算主機中的記憶體或儲存媒體,用以暫存運算過程需要的數據,以及運算結果;運算主機設有通訊單元305,用以與外部裝置通訊。雲端伺服器30設有資料庫32,資料庫32中提供影片相關資料,其中有原始影片庫321、模組化物件庫323與後製影片庫325。
原始影片庫321儲存的影片包括為錄製真實影像的影片,但也不排除為人工完成的動畫。模組化物件庫323儲存提供後製置入原始影片的素材,特別是立體形式的圖形或擬真的圖案,可以適當地嵌入於真實環境所錄製的影片。後製影片庫325則是儲存了已經完成後製的影片。
終端裝置34為使用者端的電腦裝置,設有處理單元341,可為電腦裝置中的處理器;設有記憶單元342,可為電腦裝置中的記憶體或儲存媒體;設有通訊單元343,可以網路等方式與外部裝置雙向通訊,包括傳遞資料;設有輸入單元344,此為提供使用者在終端裝置34上以特定手段執行輸入,可以軟體搭配硬體實現,如執行本發明提出的影像互動,包括可以觸控、聲控、體感或利用滑鼠、鍵盤等(並不限於在此所述的方式)的輸入手段控制顯示於後製影片上的互動元件;設有顯示單元345,此為終端裝置34上的顯示屏幕,目的之一是用以顯示影片。
圖4接著顯示本發明立體互動影片後製方法的實施例流程,在此實施例中描述製作後製影片的方式之一。
開始如步驟S401,使用者可以經由系統提供取得一原始影片,或是由他人取得,或是自行拍攝得到的原始影片,特別是真實世界的影像。為了要達到虛實整合的互動目的,這是本發明的目的之一,讓使用者可以在傳統無法實施互動的一般影片上執行互動。
接著如步驟S403,使用執行於電腦裝置(包括雲端伺服器)的特定軟體程序開啟原始影片,並能透過軟體工具設定多個描述影片中一或多個實體物件的錨點。當設定好描點時,描點的功能就是讓軟體工具經過影像處理後確認所依附的位置與影像的關係,使得即便影片因為各種運鏡手段產生變動時,都能定位到描點所描述的實體物件,也就能根據原始影片的運鏡判斷其中以多個錨點描述的一實體物件的角度變化。
之後,如步驟S405,使用者可以利用軟體工具決定模組化物件位置,軟體工具將以原始影片中設定的一或多個描點為參考點,也就是各模組化物件與原始影片中的多個錨點具有一參考位置關係,以此定位模組化物件的位置。
根據一實施例,各模組化物件可為一立體影像物件,隨著軟體工具的輔助,從原始影片中特定物件變化可以得知隨著運鏡的物件視角變化,如此可以取得立體資訊,並能根據實體物件的設置與角度變化,立體影像物件可根據原始影片錄製時的運鏡角度置入原始影片中,使得立體影像物件顯示時與原始影片有一致的空間角度,如此可以適當地置入在與影像的同一空間關係上。
再如步驟S407,決定參考位置關係的各模組化物件可以隨著影片的變化而變動,經過一3D軟體處理使額外立體物件與原始影片中結構物件於同一空間關係,根據原始影片的運鏡判斷攝影機拍攝時移動軌跡,並反映出其中實體物件的移動軌跡,因此可以據以設定,當即時操作時,產生一或多個模組化物件的移動軌跡,或其他模擬或物理變化。如步驟S409,配合虛擬攝影機套用拍攝時的移動軌跡,於原始影片中完成建立互動模組化物件,形成結合原始影片與模組化物件的互動化後製影片,如步驟S411,此為可以提供使用者可即時操作的互動影片。
完成可即時互動的後製影片後,除了一般終端裝置使用外,更可儲存於雲端的資料庫中,由雲端伺服器提供各終端裝置下 載,可供使用者操作終端裝置執行互動。
圖5顯示本發明立體影像物件互動方法的實施例流程。
一開始,如步驟S501,運行於終端裝置的軟體程序先取得後製影片,經軟體程序解析,如步驟S503,可以得到後製影片中模組化物件的位置資訊,隨著影片的播放,除了直接以軟體程序以影像處理方法追蹤各個模組化物件外,亦可其中利用後製影片中設定好的錨點來追蹤模組化物件的相對位置。更者,隨著後製影片的完成,可以軟體程序設定一些互動條件,如設定一個互動反應與範圍的參數,互動範圍為互動元件與後製影片中模組化物件之間預設會引發一互動訊號的距離範圍。
這時,如步驟S505,使用者可以操作影片中提供一互動元件,讓使用者以觸控、聲控、體感、滑鼠或鍵盤等手段操作互動元件,互動元件可為顯示於終端裝置的顯示螢幕上,並受到控制後產生位置移動的圖形。在另一實施例中,互動元件可以是使用者直接以觸控、聲控、體感、滑鼠或鍵盤等手段操作後產生的動作,而與後製影片中的模組化物件互相影響,進而產生互動影像。其中,系統可以提供的使用者介面(如觸控面板)接收使用者於終端裝置上產生操作互動元件在後製影片的動作資訊。
如步驟S507,以上互動產生的動作資訊可以由終端裝置接收,或是傳送到雲端伺服器,當雲端伺服器接收到使用者操作互動元件在後製影片中的動作資訊,並如步驟S509,即時運算互動元件在後製影片中的動作,這時,執行於終端裝置或雲端伺服器的軟體程序將接收互動元件在此後製影片中動作的資訊,再如步驟S511,以偵測互動元件與模組化物件的互動位置關係,並判斷這個互動位置關係是否進入設定好的互動範圍內(步驟S513)。
若否,則是回到步驟S507,由執行於終端裝置或雲端伺服器中的軟體程序繼續根據收到的互動資訊判斷是否會觸發互動的幾個步驟。
若是,表示根據互動位置關係與互動範圍的變化而判斷到互動元件進入所述互動範圍,也就是,當互動元件與後製影片中的模組化物件之間的互動位置關係符合此互動範圍,將可觸發產生互動訊號,使得終端裝置,或是雲端伺服器能根據此互動訊號,提供互動影像,包括與模組化物件連結的動畫,如步驟S515,產生互動影像。
最後,如步驟S517,此時顯示的影像(原始影片、模組化物件、互動元件等)可以被錄製起來,在終端裝置上形成互動影片。
值得一提的是,當以上程序係由雲端伺服器運行,也就是在雲端伺服器以其軟體程序運算互動元件在後製影片中的動作,當符合觸發互動影像的條件時,即產生一互動訊號,這時,互動訊號將被傳送到終端裝置,由終端裝置觸發模組化物件的動作(如圖1A與圖1B顯示掉落的模組化物件),形成互動影片。
根據一實施例,使用者操作互動元件時,運行於終端裝置或是雲端伺服器中的軟體程序將隨時掌握到互動元件在後續影片中的移動,而此移動軌跡將涵蓋一移動區域,若以碰撞到模組化物件為例,當模組化物件的影像判斷碰觸此移動區域,符合碰撞的條件,將觸發上述互動訊號。
在另一實施例,若觸發互動訊號的條件並非碰撞(互動範圍為0),而可設定一個受到互動元件影響的範圍(互動範圍等於一個距離),使得當模組化物件與互動元件之間的距離進入此互動範圍後,即觸發產生互動訊號。
是以,在揭露書所揭示的立體影像物件互動方法中,預備有一錄製真實世界的影片,經過後製程序後在當中置入一或多個模組化物件,讓使用者在此後製影片中操作一個互動元件,電腦即運算互動元件在後製影片中的動作,如移動軌跡,當偵測到互動元件與後製影片中各模組化物件的互動位置關係進入一互動範圍時,可以對應產生一個互動畫面,藉此實現在一般平面影片中執 行互動的功效,並能達成虛實整合後仍保有真實感的目的。
惟以上所述僅為本發明之較佳可行實施例,非因此即侷限本發明之專利範圍,故舉凡運用本發明說明書及圖示內容所為之等效結構變化,均同理包含於本發明之範圍內,合予陳明。
10‧‧‧實體物件
12‧‧‧互動元件
101,102,103,104,105,106‧‧‧模組化物件
111,112,113,114,115,116,117,118,119,120,121‧‧‧錨點

Claims (10)

  1. 一種立體影像物件互動方法,包括:接收一互動元件在一後製影片中的動作資訊,其中該後製影片包括一原始影片以及經由一後製程序置入之一或多個模組化物件,各模組化物件與該原始影片中的多個錨點具有一參考位置關係,其中該多個錨點描述至少一實體物件;運算該互動元件在該後製影片中的動作,以偵測該互動元件與該後製影片中各模組化物件的一互動位置關係;以及當對應該模組化物件的該互動位置關係進入一互動範圍,產生一互動訊號,該後製影片結合該互動元件與對應該互動訊號的一影像,形成一提供即時互動的影片。
  2. 如請求項1所述的立體影像物件互動方法,其中該互動元件顯示於一終端裝置的一顯示螢幕上,為一接受觸控、聲控、體感控制或滑鼠控制而移動位置的圖形。
  3. 如請求項1所述的立體影像物件互動方法,其中該立體影像物件互動方法係由執行於一終端裝置的一軟體程序所執行,於該終端裝置形成該互動影片。
  4. 如請求項1所述的立體影像物件互動方法,其中該立體影像物件互動方法係由執行於一雲端伺服器的一軟體程序所執行,於產生該互動訊號後,傳送該互動訊號到一終端裝置,於該終端裝置形成該互動影片。
  5. 如請求項1至4其中之一所述的立體影像物件互動方法,其中該互動範圍為該互動元件與該模組化物件之間預設會引發該互動訊號的一距離範圍。
  6. 如請求項5所述的立體影像物件互動方法,其中各模組化物件為一立體影像物件,該立體影像物件係根據該原始影片錄製時的運鏡角度置入該原始影片中,使得該立體影像物件顯示時與該原始影片有一致的空間角度。
  7. 如請求項6所述的立體影像物件互動方法,其中對應該互動訊號的該影像為與該模組化物件連結的一動畫。
  8. 一種立體互動影片後製方法,係為如請求項1所述的立體影像物件互動方法中提供的一後製影片的後製方法,該方法包括:取得一原始影片;根據該原始影片的運鏡判斷其中以多個錨點描述的一實體物件的角度變化;根據該實體物件的設置與角度變化,於該實體物件上置入一或多個模組化物件,各模組化物件與該原始影片中的該多個錨點具有一參考位置關係;根據該原始影片的運鏡判斷一攝影機拍攝該實體物件的移動軌跡,並據以設定該一或多個模組化物件的移動軌跡;以及結合該原始影片以及於該原始影片中移動的該一或多個模組化物件,形成一提供即時互動的後製影片。
  9. 一種立體影像物件互動系統,包括:一雲端伺服器,設有一資料庫,該資料庫包括一原始影片庫、一模組化物件庫以及一後製影片庫,用以提供一終端裝置顯示一後製影片,透過操作一使用者介面於該後製影片上進行一互動,該雲端伺服器執行一立體影像物件互動方法,該方法包括:自該終端裝置接收一互動元件在該後製影片中的動作資訊,其中該後製影片包括一原始影片以及經由一後製程序置入之一或多個模組化物件,各模組化物 件與該原始影片中的多個錨點具有一參考位置關係,其中該多個錨點描述至少一實體物件;運算該互動元件在該後製影片中的運動,以偵測該互動元件與該後製影片中各模組化物件的一互動位置關係;以及當對應該模組化物件的該互動位置關係進入一互動範圍,產生一互動訊號,該後製影片結合該互動元件與對應該互動訊號的一影像,形成一可即時互動的互動影片。
  10. 如請求項9所述的立體影像物件互動系統,更包括於該終端裝置中執行的一軟體程序,該軟體程序包括:提供該使用者介面,用以接收於該終端裝置上產生操作該互動元件在該後製影片的動作資訊;傳送該動作資訊至該雲端伺服器;自該雲端伺服器接收經過偵測該互動元件與該後製影片中各模組化物件的該互動位置關係與判斷該互動位置關係是否進入該互動範圍的結果而產生的該互動訊號;以及結合該後製影片、該互動元件與對應該互動訊號的該影像,以形成可即時互動的該互動影片。
TW106113465A 2017-04-21 2017-04-21 立體影像物件互動方法、系統與立體互動影片後製方法 TWI610565B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
TW106113465A TWI610565B (zh) 2017-04-21 2017-04-21 立體影像物件互動方法、系統與立體互動影片後製方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW106113465A TWI610565B (zh) 2017-04-21 2017-04-21 立體影像物件互動方法、系統與立體互動影片後製方法

Publications (2)

Publication Number Publication Date
TWI610565B true TWI610565B (zh) 2018-01-01
TW201840200A TW201840200A (zh) 2018-11-01

Family

ID=61728274

Family Applications (1)

Application Number Title Priority Date Filing Date
TW106113465A TWI610565B (zh) 2017-04-21 2017-04-21 立體影像物件互動方法、系統與立體互動影片後製方法

Country Status (1)

Country Link
TW (1) TWI610565B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111984114A (zh) * 2020-07-20 2020-11-24 深圳盈天下视觉科技有限公司 基于虚拟空间的多人交互***及其多人交互方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050128212A1 (en) * 2003-03-06 2005-06-16 Edecker Ada M. System and method for minimizing the amount of data necessary to create a virtual three-dimensional environment
US20130117377A1 (en) * 2011-10-28 2013-05-09 Samuel A. Miller System and Method for Augmented and Virtual Reality
US20130155105A1 (en) * 2011-12-19 2013-06-20 Nokia Corporation Method and apparatus for providing seamless interaction in mixed reality
US20130249948A1 (en) * 2011-08-26 2013-09-26 Reincloud Corporation Providing interactive travel content at a display device
TW201631960A (zh) * 2015-02-17 2016-09-01 奇為有限公司 擴增實境式串流影音顯示系統、其方法、電腦可讀取記錄媒體及電腦程式產品
US20160269712A1 (en) * 2010-06-30 2016-09-15 Lewis S. Ostrover Method and apparatus for generating virtual or augmented reality presentations with 3d audio positioning

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050128212A1 (en) * 2003-03-06 2005-06-16 Edecker Ada M. System and method for minimizing the amount of data necessary to create a virtual three-dimensional environment
US20160269712A1 (en) * 2010-06-30 2016-09-15 Lewis S. Ostrover Method and apparatus for generating virtual or augmented reality presentations with 3d audio positioning
US20130249948A1 (en) * 2011-08-26 2013-09-26 Reincloud Corporation Providing interactive travel content at a display device
US20130117377A1 (en) * 2011-10-28 2013-05-09 Samuel A. Miller System and Method for Augmented and Virtual Reality
US20130155105A1 (en) * 2011-12-19 2013-06-20 Nokia Corporation Method and apparatus for providing seamless interaction in mixed reality
TW201631960A (zh) * 2015-02-17 2016-09-01 奇為有限公司 擴增實境式串流影音顯示系統、其方法、電腦可讀取記錄媒體及電腦程式產品

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111984114A (zh) * 2020-07-20 2020-11-24 深圳盈天下视觉科技有限公司 基于虚拟空间的多人交互***及其多人交互方法

Also Published As

Publication number Publication date
TW201840200A (zh) 2018-11-01

Similar Documents

Publication Publication Date Title
US10447899B2 (en) System and method for 3D projection mapping with robotically controlled objects
US7292240B2 (en) Virtual reality presentation device and information processing method
TWI567659B (zh) 照片表示視圖的基於主題的增強
CN104054023B (zh) 用于与机器人控制的物体映射的3d投影的***和方法
JPH0785312A (ja) 3次元動画作成装置
EP3109833B1 (en) Information processing device and information processing method
CN105657406A (zh) 三维观察视角选定方法和装置
EP4128207A1 (en) Systems and methods for virtual and augmented reality
JP2020087278A (ja) 動画合成装置、動画合成方法及び動画合成プログラム
WO2020218131A1 (ja) 画像生成装置および情報提示方法
JP2022183213A (ja) ヘッドマウントディスプレイ
WO2020050103A1 (ja) 仮想視点の制御装置及びその制御方法
WO2017062730A1 (en) Presentation of a virtual reality scene from a series of images
US10462454B2 (en) Extensible authoring and playback platform for complex virtual reality interactions and immersive applications
TWI610565B (zh) 立體影像物件互動方法、系統與立體互動影片後製方法
Rompapas et al. Holoroyale: A large scale high fidelity augmented reality game
Ogi et al. Usage of video avatar technology for immersive communication
WO2019241712A1 (en) Augmented reality wall with combined viewer and camera tracking
JP2020087429A (ja) 動画合成装置、動画合成方法及び動画合成プログラム
RU2695053C1 (ru) Способ и устройство для управления трехмерными объектами в виртуальном пространстве
US20190295312A1 (en) Augmented reality wall with combined viewer and camera tracking
US11682175B2 (en) Previsualization devices and systems for the film industry
JP7093996B2 (ja) 仮想現実システムを用いたインテリア提案システム
TWI794512B (zh) 用於擴增實境之系統及設備及用於使用一即時顯示器實現拍攝之方法
Hamadouche Augmented reality X-ray vision on optical see-through head mounted displays