TW202403509A - 用於擴增實境裝置之平滑物件校正 - Google Patents

用於擴增實境裝置之平滑物件校正 Download PDF

Info

Publication number
TW202403509A
TW202403509A TW112118471A TW112118471A TW202403509A TW 202403509 A TW202403509 A TW 202403509A TW 112118471 A TW112118471 A TW 112118471A TW 112118471 A TW112118471 A TW 112118471A TW 202403509 A TW202403509 A TW 202403509A
Authority
TW
Taiwan
Prior art keywords
virtual object
updated
computer
target
threshold
Prior art date
Application number
TW112118471A
Other languages
English (en)
Inventor
班 本弗
維克多 艾德里安 布里沙卡劉
Original Assignee
美商尼安蒂克公司
英商尼安蒂克國際科技有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 美商尼安蒂克公司, 英商尼安蒂克國際科技有限公司 filed Critical 美商尼安蒂克公司
Publication of TW202403509A publication Critical patent/TW202403509A/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B2027/0178—Eyeglass type
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20—Indexing scheme for editing of 3D models
    • G06T2219/2004—Aligning objects, relative positioning of parts
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20—Indexing scheme for editing of 3D models
    • G06T2219/2016—Rotation, translation, scaling

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Architecture (AREA)
  • Optics & Photonics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本發明揭示一種擴增實境(「AR」)裝置，其應用平滑校正方法來校正呈現給一使用者之虛擬物件之位置。該AR裝置可應用一角度臨限值來判定一虛擬物件是否可自一原始位置移動至一目標位置。一角度臨限值係自該AR裝置至該虛擬物件之一線可藉此在一時間步長內改變之一最大角度。類似地，該AR裝置可應用一運動臨限值，其係可基於該虛擬物件之該運動來校正一虛擬物件之位置之距離之一最大值。此外，該AR裝置可將一像素臨限值應用於該虛擬物件之位置之校正。一像素臨限值係該虛擬物件之一像素投影可基於該虛擬物件之位置變化而改變之距離之一最大值。

Description

用於擴增實境裝置之平滑物件校正
擴增實境(「AR」)裝置在將虛擬物件覆蓋於真實世界上之一顯示器中對使用者顯示虛擬物件。例如，一AR裝置可對一使用者顯示影像資料，該影像資料展示使用者周圍之真實世界環境，但具有坐在一真實世界桌子上之一虛擬物件。擴增實境通常係比全虛擬實境(其中對一使用者顯示之整個圖像均係虛擬)更複雜之一技術任務，因為虛擬物件必須整合至真實世界中以使虛擬物件讓使用者「感覺」真實。例如，AR裝置可必須捕獲使用者周圍之環境之感測器資料及如何顯示虛擬物件使得虛擬物件看起來係真實世界中之一實際物件。
在AR中顯示虛擬物件可存在多種挑戰。例如，一虛擬物件可經顯示使得其看起來位於與預期要出現的位置不同之一不正確位置中。例如，AR裝置可具有描述其相對於AR裝置之環境中之物件之位置之不準確或不精確位置資料或描述AR裝置在其環境內之定向之定向資料。此可引起AR裝置不適當地顯示一虛擬物件。類似地，AR裝置可接收描述AR裝置之環境之不準確或不精確感測器資料，且因此可基於對其他物件在環境內之位置之不準確估計來顯示一虛擬物件。
一AR裝置可基於由AR裝置接收之經更新資料來更新如何顯示一虛擬物件。然而，若一虛擬物件之位置被更新為處於一顯著不同之位置中，則使用者可注意到虛擬物件之位置正被更新。例如，更新一虛擬物件位置之習知方法可引起一虛擬物件突然出現在正確位置中或快速或不自然地移動至其等之正確位置。此等方法通常引起一使用者注意到一虛擬物件之位置何時正在更新，且因此習知校正方法引起使用者失去對AR裝置體驗之沉浸感。
本文所揭示之該AR裝置可藉由當校正一虛擬物件之該目標位置時應用一角度臨限值來改良習知物件位置校正方法。一虛擬物件之該目標位置係該真實世界內之一位置，其中該AR裝置將該虛擬物件作為目標以當顯示給該使用者時看起來係目標。然而，如上所述，當該AR裝置對該使用者顯示該虛擬物件時，該虛擬物件之該實際出現位置可不同於該目標位置。該AR裝置可判定該虛擬物件之該位置是否不同於該目標位置且可校正該虛擬物件之該位置。
該AR裝置可判定該目標位置是否在該虛擬物件之原始位置之一角度臨限值內。一角度臨限值係該AR裝置之視線至一虛擬物件之位置與該AR裝置之視線至該虛擬物件經更新位置之間的角度之一最大值。若該目標位置在該角度臨限值內，則將該虛擬物件之位置更新為該目標位置。若該目標位置在該角度臨限值之外，則將該虛擬物件之位置更新為最接近該目標位置而不超過該角度臨限值之位置。
另外，該AR裝置可當校正一虛擬物件之位置時應用一運動臨限值。可對一使用者顯示一虛擬物件使得該虛擬物件看起來正相對於該AR裝置移動。一運動臨限值係可基於該虛擬物件之運動來調整一虛擬物件之位置之一最大距離。例如，該運動臨限值可允許一虛擬物件之位置調整至該虛擬物件在一時間步長中行進之距離之某個比例。若一虛擬物件之該目標位置在該虛擬物件之原始位置之該運動臨限值內，則將該虛擬物件之位置更新為該目標位置。若該目標位置在該運動臨限值之外，則該虛擬物件之位置可更新為最接近該目標位置而不超過該運動臨限值之一位置。當移動該虛擬物件時，該AR裝置亦可基於該虛擬物件之經更新位置而非其原始位置而將該虛擬物件移動至其運動中之下一步驟。
此外，當校正一虛擬物件之位置時，該AR裝置可應用一像素臨限值。該像素臨限值限制可校正一虛擬物件之位置之距離以將一最大值置於該虛擬物件之像素投影可調整之距離(以像素為單位)。例如，該AR裝置可比較該虛擬物件在該虛擬物件之位置處之一2D像素投影與該虛擬物件在該目標位置處之一2D像素投影。若該等像素投影之間的距離未超過該像素臨限值，則該AR裝置可將該虛擬物件之位置更新為該目標位置。若該等像素投影之間的距離確實超過該像素臨限值，則該AR裝置可將該虛擬物件之位置更新為與不超過該像素臨限值之該目標位置最接近之位置。
藉由使用一角度臨限值，該AR裝置可允許對一虛擬物件之位置之深度校正多於對該虛擬物件之位置之橫向校正。因此，該AR裝置允許對一使用者而言可不太顯著之校正，其將虛擬物件放置為盡可能接近正確位置同時保持該使用者所要之沉浸度或可信度。類似地，藉由基於一運動臨限值來限制該虛擬物件之位置之可調整程度，該使用者可將一虛擬物件之位置中之任何調整作為該虛擬物件之預期運動之部分而解除，而非該虛擬物件之位置中之一校正。因此，當該虛擬物件更快地移動時，該AR裝置可更容易地校正一虛擬物件之位置，因為該等調整對一使用者而言不太顯著。此外，藉由基於一像素臨限值而限制對一虛擬物件之位置之調整，該AR裝置減少對應於該虛擬物件之像素之變化量且因此更直接地使對一虛擬物件之位置之校正對該使用者而言不太顯著。
圖1繪示根據一些實施例之一擴增實境(AR)裝置之一系統環境。圖1中所繪示之系統環境包含一AR裝置100、一網路110及一或多個線上伺服器120。替代實施例可包含多於、少於或不同於圖1中所繪示之組件之組件，且組件之功能性可在不同於以下描述之組件之間劃分。例如，AR裝置100之一些或全部功能性可由一或多個線上伺服器120執行，且反之亦然。
一AR裝置100可為可由一使用者用於與由AR裝置100呈現之AR內容互動之任何計算裝置。例如，一AR裝置100可為一無線裝置、一個人數位助理(PDA)、可攜式遊戲裝置、蜂巢式電話、智慧型電話、平板電腦、導航系統、手持GPS系統、可穿戴計算裝置、具有一或多個處理器之一顯示器或其他此裝置。在一些實施例中，AR裝置100包含一習知電腦系統，諸如一桌上型電腦或一膝上型電腦(例如無線連接至一AR頭戴式耳機之一桌上型電腦)。另外，AR裝置100可為具有一計算裝置之一載具。AR裝置100可包含一或多個處理器及一或多個電腦可讀儲存媒體。電腦可讀儲存媒體可儲存引起處理器執行操作之指令。
AR裝置100可包含用於自一玩家接收資訊或向一玩家提供資訊之各種其他輸入/輸出裝置。實例輸入/輸出裝置包含適合於語音辨識之一顯示螢幕、一觸控螢幕、一觸控板、資料登錄鍵、揚聲器及一麥克風。AR裝置100可進一步包含用於經由網路110提供通信之一網路介面。一網路介面可包含用於與一或多個網路介面介接之任何適合組件，包含(例如)傳輸器、接收器、埠、控制器、天線或其他適合組件。
圖1繪示根據一些實施例之一AR裝置100之一實例系統架構。AR裝置100可包含一攝影機總成130、一或多個感測器140、一物件位置模組150、一內容顯示模組160、一平滑校正模組170及一資料儲存器180。在替代實施例中，AR裝置100可包含多於、少於或不同於圖1中所繪示之組件之組件，且各組件之功能性可不同於圖1之功能性來劃分。
攝影機總成130捕獲AR裝置100周圍之環境之影像資料。攝影機總成130可包含用於捕獲環境之影像資料之光感測器。攝影機總成130可包含一廣角鏡頭或一長焦鏡頭。攝影機總成130可經組態以捕獲單一影像或視訊作為影像資料。攝影機總成130可包含具有影像資料之後設資料，其描述包含感覺資料(例如溫度、環境亮度)或捕獲資料(例如曝光、溫暖、快門速度、焦距、捕獲時間等)之影像資料之其他細節。攝影機總成130可包含可捕獲影像資料之一或多個攝影機。在一個例項中，攝影機總成130包含一個攝影機且經組態以捕獲單眼影像資料。在另一例項中，攝影機總成130包括兩個攝影機且經組態以捕獲立體影像資料。在各種其他實施方案中，攝影機總成130包含各經組態以捕獲影像資料之多個攝影機。
AR裝置100包含可捕獲AR裝置100或AR裝置100周圍之環境之量測之感測器140。例如，AR裝置100可包含移動感測器、加速度計、陀螺儀、慣性量測單元(IMU)、氣壓計、定位系統、溫度計、光感測器、光感測器(例如攝影機)等。感測器140可捕獲描述AR裝置100之位置之位置資料。感測器140可藉由使用一衛星導航定位系統(例如一GPS系統、一伽利略定位系統、一全球導航衛星系統(GLONASS)、北斗衛星導航及定位系統)、一慣性導航系統、一推測航行系統、基於IP位址、藉由使用三角測量或接近蜂巢塔或Wi-Fi熱點或用於判定位置之其他適合技術來判定AR裝置100之實際或相對位置。
物件位置模組150判定一虛擬物件在真實世界內之一目標位置。一虛擬物件係對使用者顯示之一電腦生成之物件。例如，一虛擬物件可為一電腦生成之人、化身、生物或物品。一虛擬物件之一目標位置係真實世界內之一位置，其中AR裝置100將物件作為當對使用者顯示時將要出現之目標。目標位置在本文中可主要描述為相對於AR裝置判定之位置(即，其中AR裝置100充當一原點)，但目標位置亦可被判定為一絕對位置。在一些實施例中，目標位置包含虛擬物件之一目標定向。另外，目標位置可為一2D位置或一3D位置。
物件位置模組150可基於內容指令判定一虛擬物件之目標位置。內容指令係用於由AR裝置100向一使用者呈現內容之指令。例如，內容指令可包含AR裝置100用於呈現虛擬物件之一3D模型。另外，內容指令可指定一虛擬物件應位於真實世界中之何處。例如，用於一虛擬物件之內容指令可指定虛擬物件應位於其中之真實世界中之一絕對位置或可指定虛擬物件應位於其中之相對於使用者之一位置。內容指令可進一步基於真實世界中之物件來指定一虛擬物件之一目標位置。例如，內容指令可指定一虛擬物件應位於一桌子之中心或一窗框中。在一些實施例中，內容指令包含指定一虛擬物件應如何移動之運動指令。例如，運動指令可指定一虛擬物件之一運動方向及虛擬物件應在一時間步長內移動之一距離。物件位置模組150可自線上系統120或自資料儲存器180接收內容指令。
物件位置模組150可基於自感測器140接收之感測器資料來判定一虛擬物件之一目標位置。例如，物件位置模組150可基於自感測器140接收之位置資料來判定AR裝置100之位置，且基於AR裝置100之位置作出一虛擬物件之目標位置之判定。在一些實施例中，物件位置模組150使用來自感測器140之感測器資料來識別AR裝置100周圍之環境中之真實世界物件，且可基於該等真實世界物件之身份或位置來判定一物件之目標位置。例如，物件位置模組150可識別一桌子及桌子之位置，且可判定位於桌子之頂部之中心中之一虛擬物件之一目標位置。
內容顯示模組160對使用者顯示內容。內容顯示模組160可包含對使用者顯示內容之一顯示器165。一顯示器165係能夠對一使用者投影像素之一2D陣列之一裝置。例如，顯示器165可包含一平面顯示器(例如一LCD螢幕、一OLED螢幕或一平面觸控螢幕)或可透過經組態以將光投影至一使用者之一或兩個眼睛中使得使用者透過透鏡觀看真實世界環境之一頭戴式耳機之一或多個透鏡對一使用者顯示內容，其中一或多個虛擬物件覆蓋於使用者對真實世界環境之視野上。內容顯示模組160可透過顯示器165對使用者顯示影像資料。例如，內容顯示模組160可顯示由攝影機總成130捕獲之影像資料且透過顯示器165對使用者顯示影像資料。
內容顯示模組160對一使用者顯示虛擬物件。內容顯示模組160可生成虛擬物件之一3D模型之一2D投影以透過顯示器165對一使用者顯示虛擬物件。內容顯示模組160可生成虛擬物件之2D投影以使物件對使用者而言看起來在虛擬物件之目標位置處。例如，內容顯示模組160可調整虛擬物件之2D投影在顯示器165中之大小、定向或放置以使虛擬物件看起來位於目標位置處。內容顯示模組160可額外使用來自AR裝置100之感測器資料來調整虛擬物件之2D投影。例如，內容顯示模組160可接收描述AR裝置100之一位置之位置資料且可調整虛擬物件之2D投影之大小使得對於虛擬物件之目標位置，虛擬物件看起來與AR裝置100相距正確距離。類似地，內容顯示模組160可接收描述AR裝置100之定向之定向資料且可調整虛擬物件之2D投影之位置使得虛擬物件看起來位於虛擬物件之目標位置處。
平滑校正模組170偵測虛擬物件是否正確地顯示為處於目標位置處且若一虛擬物件未正確顯示，則校正虛擬物件之位置。例如，隨著AR裝置100收集更多資料(例如來自感測器140)，平滑校正模組170可判定虛擬物件之位置不正確且需要更新。類似地，平滑校正模組170可基於對AR裝置100之位置之一不準確估計來判定對使用者顯示虛擬物件且虛擬物件需要不同地顯示以使虛擬物件看起來位於目標位置處。儘管平滑校正模組170在本文中被描繪為與物件位置模組150分離之一模組，但在替代實施例中，平滑校正模組170係物件位置模組150之部分。
當虛擬物件之顯示位置不對應於虛擬物件之目標位置時，平滑校正模組170可平滑地校正一虛擬物件之顯示器。例如，當AR裝置100自感測器140接收感測器資料時，平滑校正模組170可判定虛擬物件之一原始顯示位置。虛擬物件之原始顯示位置係真實世界中虛擬物件原始顯示之一位置。平滑校正模組170可判定虛擬物件之原始位置不對應於虛擬物件之目標位置且更新虛擬物件之顯示使得虛擬物件看起來位於真實世界中之一經更新位置處。
平滑校正模組170可持續更新一虛擬物件之顯示位置。例如，平滑校正模組170可基於來自感測器140之經更新感測器資料或基於待針對虛擬物件執行之新內容指令來更新一虛擬物件之顯示。在一些實施例中，平滑校正模組170基於一時間步長定期更新一虛擬物件之目標位置。一時間步長係AR裝置100用於平滑校正模組150更新虛擬物件之顯示之頻率之一時間間隔。例如，時間步長可基於顯示器之刷新率。AR裝置100可調整時間步長。例如，當虛擬物件正移動時，AR裝置100可縮短時間步長或當虛擬物件相對靜止時，可延長時間步長。
下文詳細討論用於平滑校正一虛擬物件之顯示之方法。為了簡單起見，用於平滑地校正一虛擬物件之顯示之此等方法可主要在自一非移動AR裝置100之參考圖框更新一虛擬物件之一位置之上下文中描述。然而，本文所描述之方法可應用於基於一虛擬物件之一經更新目標位置或AR裝置100之一經更新位置來平滑地更新一虛擬物件之顯示。
在一些實施例中，平滑校正模組170基於一角度臨限值更新一虛擬物件之位置。圖2繪示根據一些實施例之基於一角度臨限值經更新之一虛擬物件之位置。一角度臨限值200係以下之間的角度之一最大值：(1)自AR裝置100至一虛擬物件之原始位置230之視線220；及(2)自AR裝置100至虛擬物件之經更新位置250之視線240。例如，若自AR裝置100至一虛擬物件之原始位置230與目標位置260之視線之間的角度210係30度，且角度臨限值200係15度，平滑校正模組170可將虛擬物件之顯示位置更新至原始位置230與目標位置260之間的真實世界中之位置250使得原始位置230與經更新位置250之間的角度不超過15度。然而，若目標位置260與原始位置230相距10度，則平滑校正模組170可在目標位置260處顯示虛擬物件，因為目標位置260在原始位置230之角度臨限值內。
平滑校正模組170可選擇在不超過角度臨限值200之情況下最接近目標位置260之一位置作為經更新位置250。例如，平滑校正模組170可使用一歐氏距離來選擇最接近目標位置260之經更新位置250。在一些實施例中，平滑校正模組170基於沿對應於角度臨限值200之視線240之位置來選擇經更新位置250。平滑校正模組170可選擇沿視線240最接近目標位置260之位置作為經更新位置250。平滑校正模組170可考量沿該視線240之一組位置且選擇最接近目標位置260之位置。
平滑校正模組170亦可使用三角測量來識別最接近目標位置260之位置250。由於經更新位置250係沿該視線最接近目標位置260之點，因此自目標位置260至經更新位置250之線270與對應於角度臨限值200之視線240以一直角相交。因此，平滑校正模組170可使用三角測量來基於角度臨限值200、原始位置230及目標位置260而識別經更新位置250。類似地，平滑校正模組170可藉由計算對應於角度臨限值200之視線240之參數(例如斜率及截距)及基於視線240及目標位置之斜率而計算目標位置260與經更新位置250之間的線270之參數來識別經更新位置250。例如，由於自目標位置260至經更新位置250之線270與對應於角度臨限值200之視線240以一直角相交，因此目標位置260與經更新位置250之間的線270之斜率將係視線240之斜率之負倒數。接著，平滑校正模組170可基於視線240與目標位置與經更新位置250之間的線270相交之位置來判定經更新位置250。
平滑校正模組170可使用角度臨限值200來判定一虛擬物件之顯示位置在一時間步長內可更新多少。例如，若目標位置260不在原始位置230之角度臨限值內，則平滑校正模組可在各時間步長處透過一序列更新位置250持續更新虛擬物件之顯示位置直至虛擬物件到達目標位置260。
另外，平滑校正模組170可基於來自感測器140或來自攝影機總成130之經更新資料而持續更新目標位置260。平滑校正模組170可基於經更新目標位置130而在各時間步長處判定虛擬物件之經更新位置250。
在一些實施例中，平滑校正模組170基於一運動臨限值更新一虛擬物件之位置。圖3繪示根據一些實施例之基於一運動臨限值經更新之一虛擬物件之位置。AR裝置100可判定一虛擬物件之一原始位置300。AR裝置100亦可判定應顯示虛擬物件使得虛擬物件在一時間步長內移動310一定量。接著，AR裝置100可基於虛擬物件之原始位置300及物件運動310來判定虛擬物件之一原始下一位置320。
平滑校正模組170可判定原始位置300不在目標位置330處。例如，平滑校正模組170可判定AR裝置100位於不同於用於判定原始位置300之位置之一位置。平滑校正模組170可基於一運動臨限值350來判定虛擬物件之一經更新位置340。一運動臨限值350係可基於虛擬物件之運動310來調整一虛擬物件之位置之一最大距離。例如，運動臨限值350可為虛擬物件在一時間步長內覆蓋之一距離310之某個比例。若目標位置330在原始位置300之運動臨限值350內，則平滑校正模組170將虛擬物件之顯示位置自原始位置300更新至目標位置330。然而，若目標位置330在運動臨限值350之外，則平滑校正模組170可判定虛擬物件之一經更新位置340，其在目標位置330之方向上但在虛擬物件之原始位置300之運動臨限值350內。
平滑校正模組170為虛擬物件判定一經更新下一位置360。經更新下一位置360係基於虛擬物件之經更新位置340及虛擬物件之運動310來顯示虛擬物件之位置。在一些實施例中，在一個步驟370中，平滑校正模組170將虛擬物件之位置自其原始位置300更新至經更新下一位置360。替代地，平滑校正模組170可在兩個步驟380中將虛擬物件之位置自其原始位置300更新至經更新下一位置360。在一第一時間步長中，平滑校正模組170可將虛擬物件之位置自其原始位置300更新至經更新位置340，且在一第二時間步長中，可將虛擬物件之位置自經更新位置340更新至經更新下一位置360。
如上所述，儘管上述描述主要描述基於物件之運動來校正虛擬物件之歐顯示位置，但平滑校正模組170可使用運動臨限值來基於AR裝置100之移動而更新一虛擬物件之位置。例如，平滑校正模組170可偵測到AR裝置100正移動或正改變定向。平滑校正模組170可將AR裝置100之此等移動轉換為虛擬物件相對於AR裝置之移動且可如上文所描述將運動臨限值應用於更新虛擬物件之位置。
在一些實施例中，平滑校正模組170基於一像素臨限值而更新一虛擬物件之一顯示位置。圖4繪示根據一些實施例之基於一像素臨限值更新之一虛擬物件之顯示位置。一像素臨限值係當平滑校正模組170更新一虛擬物件之位置時虛擬物件移動之像素之數目之一最大值。在圖4中，在原始位置410處之AR裝置100之一顯示器400中描繪一虛擬物件。平滑校正模組170可判定虛擬物件之原始位置400不在虛擬物件之目標位置420處。若目標位置420在原始位置410之像素臨限值430內，則平滑校正模組170將虛擬物件之位置更新為目標位置420。若目標位置420在原始位置之像素臨限值430之外，則平滑校正模組170可判定虛擬物件之一經更新位置440，其在目標位置420之方向上但在虛擬物件之原始位置410之運動臨限值430內。
為判定一目標位置420是否在原始位置410之一像素臨限值430內，平滑校正模組170可比較原始位置410處之虛擬物件之一像素投影與正確目標位置420處之虛擬物件之一像素投影。此等像素投影可為由一像素投影函數在表示AR裝置100之顯示器之一2D像素陣列上生成之像素投影。接著，平滑校正模組170可比較各像素投影內之像素以判定像素投影之間的一距離。若原始位置410之像素投影與目標位置420之像素投影之間的距離小於像素臨限值430，則平滑校正模組170將虛擬物件之位置更新為目標位置420。若距離不在像素臨限值430內，則平滑定位模組170可判定目標位置420與原始位置410之間的一經更新位置440，其在像素臨限值420內且具有至正確目標位置420之最短距離。
為判定像素投影之間的距離，平滑校正模組170可識別各像素投影內之哪些像素對應於虛擬物件之一部分(例如，各像素投影中之哪些像素對應於一盒之一角)，且比較各像素投影之像素位置。平滑校正模組170亦可比較各像素投影內彼此最接近之像素以判定像素投影之間的距離。類似地，平滑校正模組170可比較各像素投影內彼此最遠之像素以判定像素投影之間的距離。在一些實施例中，平滑校正模組170識別各像素投影之中心像素，且比較此等中心像素之間的距離。例如，平滑校正模組170可判定各像素投影之一質心以識別像素投影之一中心像素。
在一些實施例中，像素臨限值430基於虛擬物件之一運動。若用於一虛擬物件之內容指令指示一虛擬物件應被描繪為正移動，則平滑校正模組170可基於虛擬物件之運動來調整像素臨限值430。例如，可基於虛擬物件在一時間步長內移動之距離之某個比例來調整像素臨限值430。像素臨限值430可僅基於虛擬物件之運動或可具有基於虛擬物件運動而增加之一基線值。
資料儲存器180儲存由AR裝置100用於向一使用者提供一AR體驗之資料。例如，資料儲存器180可儲存描述可由AR裝置100呈現給一使用者之內容之內容資料。例如，資料儲存器180可儲存可呈現給使用者之虛擬物件之3D模型。此外，資料儲存器180可包含用於虛擬物件之內容指令。資料儲存器180亦可儲存由攝影機總成130捕獲之影像資料或由感測器140捕獲之感測器資料。
網路110可為任何類型之通信網路，諸如一區域網路(例如內部網路)、廣域網路(例如網際網路)或其等之某個組合。網路亦可包含一AR裝置100與遊戲伺服器120之間的一直接連接。一般而言，遊戲伺服器120與一AR裝置100之間的通信可經由使用任何類型之有線或無線連接、使用多種通信協定(例如TCP/IP、HTTP、SMTP、FTP)、編碼或格式(例如HTML、XML、JSON)或保護方案(例如VPN、安全HTTP、SSL)之一網路介面攜載。
線上伺服器120可為任何計算裝置且可包含一或多個處理器及一或多個電腦可讀儲存媒體。電腦可讀儲存媒體可儲存引起處理器執行操作之指令。線上伺服器120可經組態以自一AR裝置100接收對資料之請求(例如經由遠端程序呼叫(RPC))且經由網路110回應於此等請求。例如，線上伺服器120可將內容資料編碼在一或多個資料檔案中且將資料檔案提供至AR裝置100。另外，線上伺服器120可經組態以經由網路110AR裝置100接收資料(例如AR裝置100之位置、使用者動作、使用者輸入等)。AR裝置100可週期性地將資料自AR裝置100發送至遊戲伺服器120。
在一些實施例中，線上伺服器120將內容資料傳輸至AR裝置100以呈現給使用者。內容資料可包含虛擬物件之3D模型及用於向使用者呈現3D模型之內容指令。在一些實施例中，線上伺服器120自AR裝置100接收位置資料、感測器資料、影像資料或輸入資料且基於所接收之資料而將更新內容指令傳輸至AR裝置100。
本文所討論之技術參考伺服器、資料庫、軟體應用程式及其他基於電腦之系統，以及所採取之動作及發送至此等系統及自此等系統發送之資訊。一般技術者將認識到，基於電腦之系統之固有靈活性允許在組件之間及組件中的任務及功能性之多種可能組態、組合及劃分。例如，本文所討論之伺服器程序可使用一單一伺服器或組合工作之多個伺服器實施。資料庫及應用可在一單一系統上實施或跨多個系統分佈。分佈式組件可依序或並行操作。
另外，在其中本文所討論之系統及方法存取及分析有關使用者之個人資訊，或使用個人資訊(諸如位置資訊)之情況中，使用者可具有一機會來控制程式或特徵是否收集資訊且控制是否或如何自系統或其他應用接收內容。不收集或使用此資訊或資料直至對使用者提供關於待收集什麼資訊及如何使用資訊之有意義通知。除非使用者提供可由使用者隨時撤銷或修改之同意，否則不收集或使用資訊。因此，使用者可控制如何收集關於使用者之資訊且由應用或系統使用。另外，某些資訊或資料在儲存或使用之前可以一或多種方式處理，使得移除個人身份資訊。例如，可處理使用者之身份行使得無法判定使用者之個人身份資訊。
圖5係繪示根據一些實施例之基於一角度臨限值校正一虛擬物件之位置之一實例方法之一流程圖。替代實施例可包含多於、少於或不同於圖5中所繪示之步驟之步驟，且步驟可以不同於圖5中所繪示之一順序執行。另外，此等步驟之各者均可由一AR裝置或一線上伺服器在具有或無人為干預之情況下自動執行。
AR裝置自AR裝置之一或多個感測器接收500感測器資料且判定510一虛擬物件之一目標位置。AR裝置基於該感測器資料而在一原始位置處顯示520該虛擬物件。若所接收之感測器資料不準確或過時，則原始位置可不同於目標位置。AR裝置接收530經更新感測器資料且可基於該感測器資料而判定該原始位置不在該目標位置處。
AR裝置判定540該目標位置是否在該原始位置之一角度臨限值內。角度臨限值可為自AR裝置至虛擬物件之一線可在一時間步長內改變之一最大角度。若該目標位置在該原始位置之該角度臨限值內，則AR裝置在該目標位置處顯示550該虛擬物件。若該目標位置不在該原始位置之該角度臨限值內，則AR裝置在一經更新位置處顯示560該虛擬物件。經更新位置可為最接近目標位置而不在角度臨限值之外之一位置。AR裝置可在一個時間步長內將虛擬物件之位置更新為目標位置或經更新位置。AR裝置可在後續時間步長中以一類似方式連續地調整虛擬物件之位置。
圖6係繪示根據一些實施例之基於一運動臨限值校正一虛擬物件之位置之一實例方法之一流程圖。替代實施例可包含多於、少於或不同於圖6中所繪示之步驟之步驟，且步驟可以不同於圖6中所繪示之一順序執行。另外，此等步驟之各者均可由一AR裝置或一線上伺服器在具有或無人為干預之情況下自動執行。
AR裝置自AR裝置之一或多個感測器接收600感測器資料且判定610一虛擬物件之一目標位置。AR裝置基於該感測器資料而在一原始位置處顯示620該虛擬物件。若所接收之感測器資料不準確或過時，則原始位置可不同於目標位置。AR裝置接收630經更新感測器資料且可基於該感測器資料而判定該原始位置不在該目標位置處。
AR裝置判定640該目標位置是否在該原始位置之一運動臨限值內。一運動臨限值可為虛擬物件之位置可自原始位置調整至目標位置之一最大距離。運動臨限值可基於虛擬物件之一運動。若該目標位置在該原始位置之該運動臨限值內，則AR裝置基於該目標位置而更新650該虛擬物件。若該目標位置不在該原始位置之該角度臨限值內，則AR裝置判定660該虛擬物件之一經更新位置。經更新位置可為最接近目標位置而不在運動臨限值之外之一位置。AR裝置基於該經更新位置而更新670該虛擬物件。
AR裝置可通藉由在一單一時間步長中將虛擬物件之位置移動至目標位置或經更新位置來更新虛擬物件。接著，AR裝置可在後續時間步長中在虛擬物件之運動過程中將虛擬物件自目標或經更新位置移動至一下一位置。AR裝置亦可藉由在一單一時間步長中將虛擬物件之位置自其原始位置直接移動至下一位置來更新虛擬物件。
圖7係繪示根據一些實施例之基於一像素臨限值校正一虛擬物件之位置之一實例方法之一流程圖。替代實施例可包含多於、少於或不同於圖7中所繪示之步驟之步驟，且步驟可以不同於圖7中所繪示之一順序執行。另外，此等步驟之各者均可由一AR裝置或一線上伺服器在具有或無人為干預之情況下自動執行。
AR裝置自AR裝置之一或多個感測器接收700感測器資料且判定710一虛擬物件之一目標位置。AR裝置基於該感測器資料而在一原始位置處顯示720該虛擬物件。若所接收之感測器資料不準確或過時，則原始位置可不同於目標位置。AR裝置接收730經更新感測器資料且可基於該感測器資料而判定改原始位置不在該目標位置處。
AR裝置判定目標位置是否在原始位置之一像素臨限值內。一像素臨限值限制可校正一虛擬物件位置之距離以將一最大值置於虛擬物件之像素投影可調整之距離(以像素為單位)。為判定該目標位置是否在該像素位置之一像素臨限值內，AR裝置可比較740該原始位置處之該虛擬物件之一像素投影與該目標位置處之該虛擬物件之一像素投影。AR裝置可判定750該等像素投影之間的一距離且可比較760該距離與該像素臨限值以判定該原始位置是否在該目標位置之該像素臨限值內。
若該目標位置在該原始位置之該像素臨限值內，則AR裝置在該目標位置處顯示770該虛擬物件。若該目標位置不在該原始位置之該像素臨限值內，則AR裝置在一經更新位置處顯示780該虛擬物件。經更新位置可為最接近目標位置而不在角度臨限值之外之一位置。AR裝置可在一個時間步長內將虛擬物件之位置更新為目標位置或經更新位置。AR裝置可在後續時間步長中以一類似方式連續地調整虛擬物件之位置。 實例計算系統
圖8係根據一實施例之一計算裝置之一實例架構。儘管圖8描繪繪示用作為本文所描述之一或多個實體之部分或全部之一電腦之實體組件之一高階方塊圖，但根據一實施例，一電腦可具有額外、少於圖8中所提供之組件或其變體。儘管圖8描繪一電腦800，但圖意欲作為電腦系統中可存在之各種特徵之功能描述而非作為本文所描述之實施方案之一結構示意圖。在實踐中，且如一般技術者所認識，單獨展示至項目可組合且一些項目可分離。
圖8中繪示耦合至一晶片組804之至少一個處理器802。一記憶體806、一儲存裝置808、一鍵盤810、一圖形配接器812、一指向裝置814及一網路配接器816亦耦合至晶片組804。一顯示器818耦合至圖形配接器812。在一個實施例中，晶片組804之功能性由一記憶體控制器集線器820及一I/O集線器822提供。在另一實施例中，記憶體806直接耦合至處理器802而非晶片組804。在一些實施例中，電腦800包含用於互連此等組件之一或多個通信匯流排。一或多個通信匯流排視情況包含互連及控制系統組件之間的通信之電路系統(有時稱為一晶片組)。
儲存裝置808係任何非暫時性電腦可讀儲存媒體，諸如一硬碟驅動器、光碟唯讀記憶體(CD-ROM)、DVD或一固態記憶體裝置或其他光學儲存器、盒式磁帶、磁帶、磁碟儲存器或其他磁性儲存裝置、磁碟儲存裝置、光碟儲存裝置、快閃記憶體裝置或其他非揮發性固態儲存裝置。此一儲存裝置808亦可指稱永久記憶體。指向裝置814可為一滑鼠、軌跡球或其他類型之指向裝置，且與鍵盤810結合使用以將資料輸入至電腦800中。圖形配接器812在顯示器818上顯示影像及其他資訊。網路配接器816將電腦800耦合至一區域或廣域網路。
記憶體806保持由處理器802使用之指令及資料。記憶體806可為非永久性記憶體，其實例包含高速隨機存取記憶體，諸如DRAM、SRAM、DDR RAM、ROM、EEPROM、快閃記憶體。
如本技術中所知，一電腦800可具有不同於圖8中所展示之組件之組件或其他組件。另外，電腦800可缺乏某些所繪示之組件。在一個實施例中，充當一伺服器之一電腦800可缺乏一鍵盤810、指向裝置814、圖形配接器812或顯示器818。再者，儲存裝置808可為本地或遠離電腦800 (諸如體現在一儲存區域網路(SAN)內)。
如本技術中所知，電腦800經調適以執行用於提供本文所描述之功能性之電腦程式模組。如本文所使用，術語「模組」係指用於提供指定功能性之電腦程式邏輯。因此，一模組可在硬體、韌體或軟體中實施。在一個實施例中，程式模組儲存於儲存裝置808上、載入記憶體806中且由處理器302執行。 額外考量
已為了說明之目的而呈現前述實施例之描述；不意欲窮舉或使專利權利限於所揭示之精確頁面。熟習相關技術者可理瞭解鑑於上述揭示內容，許多修改及變動係可行。
依對資訊之操作之演算法及符號表示，本描述之一些部分描述實施例。此等演算法描述及表示通常由熟習資料處理領域者使用以將其工作之實質有效地傳達給其他實習技術者。儘管在功能性上、計算上或邏輯上描述，但此等操作應理解為由電腦程式或等效電路、微碼或其類似者實施。此外，在不損失一般性之情況下，將此等操作之配置指稱模組有時亦被證明係方便的。所描述之操作及其相關聯之模組可體現在軟體、韌體、硬體或其等之任何組合中。
本文所描述之步驟、操作或程序之任何者均可單獨或與其他裝置組合使用一或多個硬體或軟體模組來執行或實施。在一些實施例中，一軟體模組使用一電腦程式產品實施，包括含有可由之一電腦處理器執行用於執行所描述之步驟、操作或程序之任何或全部之電腦程式碼或指令之一或多個電腦可讀媒體。在一些實施例中，一電腦可讀媒體包括一或多個電腦可讀媒體，其個別地或一起包括當由一或多個處理器執行時引起一或多個處理器個別地或一起執行儲存於一或多個電腦可讀媒體上之指令之步驟之指令。類似地，一處理器包括個別地或一起執行儲存於一電腦可讀媒體上之指令之步驟之一或多個處理器或處理單元。
實施例亦可關於由本文所描述之一計算程序生成之一產品。此一產品可包括源自一計算程序之資訊，其中資訊儲存於一非暫時、有形電腦可讀儲存媒體上且可包含一電腦程式產品之任何實施例或本文所描述之其他資料組合。
此外，已主要為了可讀性及教學目的而選擇用於本說明書中之語言，且其可尚未選定以劃界或約束本發明標的。因此，意欲專利權利之範疇不受此詳細描述限制，而受基於此發佈之一申請案之任何請求項限制。因此，實施例之揭示內容意欲說明而非限制以下請求項中闡述之專利權利之範疇。
如本文所使用，術語「包括」、「包含」、「具有」或其任何其他變體意欲涵蓋一非排他性包含。例如，包括一元件列表之一程序、方法、物品或設備不一定僅限於該等元件，而可包含未明確列出或此程序、方法、物品或設備固有之其他元件。此外，除非明確相反陳述，否則「或」係指一包含性「或」而非一排他性「或」。例如，一條件「A或B」由以下之任一者滿足：A為真(或存在)且B為假(或不存在)，A為假(或不存在)且B為真(或存在)，且A及B兩者均為真(或存在)。類似地，一條件「A、B或C」由具有為真(或存在)之組合中之至少一個元件之A、B及C之任意組合滿足。作為一非限制性實例，條件「A、B或C」由A及B為真(或存在)且C為假(或不存在)滿足。類似地，作為另一非限制性實例，條件「A、B或C」由A為真(或存在)且B及C為假(或不存在)滿足。
100:擴增實境(AR)裝置 110:網路 120:線上伺服器 130:攝影機總成 140:感測器 150:物件位置模組 160:內容顯示模組 165:顯示器 170:平滑校正模組 180:資料儲存器 200:角度臨限值 210:角度 220:視線 230:原始位置 240:視線 250:經更新位置 260:目標位置 270:線 300:原始位置 310:物件運動 320:原始下一位置 330:目標位置 340:經更新位置 350:運動臨限值 360:經更新下一位置 370:步驟 380:步驟 400:顯示器 410:原始位置 420:目標位置 430:像素臨限 440:經更新位置 500:自AR裝置之一或多個感測器接收感測器資料 510:判定一虛擬物件之一目標位置 520:基於該感測器資料而在一原始位置處顯示該虛擬物件 530:接收經更新感測器資料 540:判定該目標位置是否在該原始位置之一角度臨限值內 550:在該目標位置處顯示該虛擬物件 560:在一經更新位置處顯示該虛擬物件 600:自AR裝置之一或多個感測器接收感測器資料 610:判定一虛擬物件之一目標位置 620:基於該感測器資料而在一原始位置處顯示該虛擬物件 630:接收經更新感測器資料 640:判定該目標位置是否在該原始位置之一運動臨限值內 650:基於該目標位置而更新該虛擬物件 660:判定該虛擬物件之一經更新位置 670:基於該經更新位置而更新該虛擬物件 700:自AR裝置之一或多個感測器接收感測器資料 710:判定一虛擬物件之一目標位置 720:基於該感測器資料而在一原始位置處顯示該虛擬物件 730:接收經更新感測器資料 740:比較該原始位置處之該虛擬物件之一像素投影與該目標位置處之該虛擬物件之一像素投影 750:判定該等像素投影之間的一距離 760:比較該距離與該像素臨限值以判定該原始位置是否在該目標位置之該像素臨限值內 770:在該目標位置處顯示該虛擬物件 780:在一經更新位置處顯示該虛擬物件 800:電腦 802:處理器 804:晶片組 806:記憶體 808:儲存裝置 810:鍵盤 812:圖形配接器 814:指向裝置 816:網路配接器 818:顯示器 820:記憶體控制器集線器 822:I/O集線器
圖1繪示根據一些實施例之一網路計算環境。
圖2繪示根據一些實施例之基於一角度臨限值經更新之一虛擬物件之位置。
圖3繪示根據一些實施例之基於一運動臨限值經更新之一虛擬物件之位置。
圖4繪示根據一些實施例之基於一像素臨限值經更新之一虛擬物件之目標位置。
圖5係繪示根據一些實施例之基於一角度臨限值校正一虛擬物件之位置之一實例方法之一流程圖。
圖6係繪示根據一些實施例之基於一運動臨限值校正一虛擬物件之位置之一實例方法之一流程圖。
圖7係繪示根據一些實施例之基於一像素臨限值校正一虛擬物件之位置之一實例方法之一流程圖。
圖8係根據一些實施例之一計算裝置之一實例架構。
100:擴增實境(AR)裝置
110:網路
120:線上伺服器
130:攝影機總成
140:感測器
150:物件位置模組
160:內容顯示模組
165:顯示器
170:平滑校正模組
180:資料儲存器

Claims (20)

  1. 一種儲存指令之非暫時性電腦可讀儲存媒體，當由一計算系統執行時，該等指令引起該計算系統： 自一擴增實境裝置之一或多個感測器接收感測器資料； 判定一虛擬物件之一目標位置，其中該虛擬物件之該目標位置包括當由一使用者透過該擴增實境裝置之一顯示器觀看時該擴增實境裝置將該虛擬物件作為目標以看起來位於其中之一真實世界位置； 基於該目標位置及所接收之感測器資料而在一原始位置對該擴增實境裝置之一使用者顯示該虛擬物件； 自該擴增實境裝置之該一或多個感測器接收經更新感測器資料； 基於該經更新感測器資料來判定該目標位置是否在該原始位置之一角度臨限值內，其中該角度臨限值係自該該擴增實境裝置至該虛擬物件之一線可在一時間步長內藉此改變之一最大角度； 回應於該目標位置在該原始位置之該角度臨限值之外，在一經更新位置處對該使用者顯示該虛擬物件，其中該經更新位置位於該原始位置之該角度臨限值內且係最接近該目標位置之一位置。
  2. 如請求項1之電腦可讀儲存媒體，其進一步儲存引起一處理器基於該經更新感測器資料來判定該虛擬物件之該原始位置是否實質上類似於該目標位置之指令。
  3. 如請求項1之電腦可讀儲存媒體，其中該一或多個感測器包括一移動感測器、一加速度計、一陀螺儀、一慣性量測單元、一氣壓計、一定位系統、一溫度計或一光感測器之一或多者。
  4. 如請求項1之電腦可讀儲存媒體，其進一步儲存引起一處理器回應於該目標位置在該原始位置之該角度臨限值內而在該目標位置處對該使用者顯示該虛擬物件之指令。
  5. 如請求項1之電腦可讀儲存媒體，其中用於判定該目標位置是否在該原始位置之一角度臨限值內之該等指令包括： 識別自該擴增實境裝置之一位置至該原始位置之一第一視線； 識別自該擴增實境裝置之該位置至該目標位置之一第二視線；及 判定該第一視線與該第二視線之間的一角度是否超過該角度臨限值。
  6. 如請求項1之電腦可讀儲存媒體，其中在一經更新位置對該使用者顯示該虛擬物件包括判定與該目標位置相交且與一第二線成一直角相交之一第一線之參數，其中該第二線對應於該角度臨限值。
  7. 如請求項1之電腦可讀儲存媒體，其中在一經更新位置處對該使用者顯示該虛擬物件包括基於一或多個三角函數及該角度臨限值來判定該經更新位置。
  8. 如請求項1之電腦可讀儲存媒體，其中該經更新位置係基於該經更新位置與該目標位置之間的一歐氏距離在而該角度臨限值內之最接近該目標位置之一位置。
  9. 如請求項1之電腦可讀儲存媒體，其中該擴增實境裝置包括一智慧型電話。
  10. 如請求項1之電腦可讀儲存媒體，其中該擴增實境裝置包括一頭戴式耳機。
  11. 一種儲存指令之非暫時性電腦可讀儲存媒體，該等指令當由一處理器執行時引起該處理器： 自一擴增實境裝置之一或多個感測器接收感測器資料； 判定一虛擬物件之一目標位置，其中該虛擬物件之該目標位置包括當由一使用者透過該擴增實境裝置之一顯示器觀看時擴增實境裝置將該虛擬物件作為目標以看起來位於其中之一真實世界位置； 基於該目標位置及所接收之感測器資料而在一原始位置對該擴增實境裝置之一使用者顯示該虛擬物件； 自該擴增實境裝置之該一或多個感測器接收經更新感測器資料； 基於該經更新感測器資料而判定該目標位置是否在該原始位置之一運動臨限值內，其中該運動臨限值係該虛擬物件之一位置可自該原始位置調整至該目標位置之一最大距離，其中該運動臨限值係基於該虛擬物件之一運動； 回應於該目標位置在該原始位置之該運動臨限值之外： 判定該虛擬物件之一經更新位置，其中該經更新位置在該原始位置之該運動臨限值內且係最接近該目標位置之一位置 基於該經更新位置來更新該虛擬物件。
  12. 如請求項11之電腦可讀儲存媒體，其進一步儲存引起一處理器基於該經更新感測器資料來判定該虛擬物件之該原始位置是否實質上類似於該目標位置之指令。
  13. 如請求項11之電腦可讀儲存媒體，其中該一或多個感測器包括一移動感測器、一加速度計、一陀螺儀、一慣性量測單元、一氣壓計、一定位系統、一溫度計或一光感測器之一或多者。
  14. 如請求項11之電腦可讀儲存媒體，其進一步儲存引起一處理器回應於該目標位置在該原始位置之該運動臨限值內而在該目標位置處對該使用者顯示該虛擬物件之指令。
  15. 如請求項11之電腦可讀儲存媒體，其中在該原始位置處顯示該虛擬物件進一步包括基於該虛擬物件之運動指令來顯示該虛擬物件，其中該等運動指令包括該虛擬物件之一運動方向及該虛擬物件在一時間步長內行進之一運動距離。
  16. 如請求項15之電腦可讀儲存媒體，其中該運動臨限值基於該虛擬物件在一時間步長內行進之該運動距離。
  17. 如請求項15之電腦可讀儲存媒體，其進一步儲存當由一處理器執行時引起該處理器基於該經更新位置及該虛擬物件之該等運動指令而在一下一位置處顯示該虛擬物件之指令，其中該下一位置係該虛擬物件在該運動方向上自該經更新位置行進該運動距離之後之該虛擬物件之一位置。
  18. 如請求項17之電腦可讀儲存媒體，其中在該下一位置處顯示該虛擬物件包括在一個時間步長內將該虛擬物件自該原始位置直接移動至該下一位置。
  19. 如請求項17之電腦可讀儲存媒體，其中在該下一位置處顯示該虛擬物件包括： 以一第一時間步長在該經更新位置處顯示該虛擬物件；及 以該第一時間步長之後之一第二時間步長在該下一位置處顯示該虛擬物件。
  20. 如請求項11之電腦可讀儲存媒體，其中該擴增實境裝置包括一智慧型電話。
TW112118471A 2022-05-18 2023-05-18 用於擴增實境裝置之平滑物件校正 TW202403509A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US17/747,775 2022-05-18
US17/747,775 US11847750B2 (en) 2022-05-18 2022-05-18 Smooth object correction for augmented reality devices

Publications (1)

Publication Number Publication Date
TW202403509A true TW202403509A (zh) 2024-01-16

Family

ID=88791868

Family Applications (1)

Application Number Title Priority Date Filing Date
TW112118471A TW202403509A (zh) 2022-05-18 2023-05-18 用於擴增實境裝置之平滑物件校正

Country Status (3)

Country Link
US (2) US11847750B2 (zh)
TW (1) TW202403509A (zh)
WO (1) WO2023223262A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11847750B2 (en) * 2022-05-18 2023-12-19 Niantic, Inc. Smooth object correction for augmented reality devices

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10795558B2 (en) * 2015-06-07 2020-10-06 Apple Inc. Device, method, and graphical user interface for providing and interacting with a virtual drawing aid
US9588593B2 (en) * 2015-06-30 2017-03-07 Ariadne's Thread (Usa), Inc. Virtual reality system with control command gestures
US10445935B2 (en) * 2017-05-26 2019-10-15 Microsoft Technology Licensing, Llc Using tracking to simulate direct tablet interaction in mixed reality
CN107450747B (zh) 2017-07-25 2018-09-18 腾讯科技（深圳）有限公司 虚拟角色的位移控制方法和装置
US11538259B2 (en) * 2020-02-06 2022-12-27 Honda Motor Co., Ltd. Toward real-time estimation of driver situation awareness: an eye tracking approach based on moving objects of interest
US11391596B2 (en) 2020-04-28 2022-07-19 Vgis Inc. System and method for converging mediated reality positioning data and geographic positioning data
GB2595860B (en) 2020-06-08 2024-05-15 Advanced Risc Mach Ltd Augmented reality system
US20220138467A1 (en) 2020-10-30 2022-05-05 Arutility, Llc Augmented reality utility locating and asset management system
CN114187509B (zh) 2021-11-30 2022-11-08 北京百度网讯科技有限公司 对象定位方法、装置、电子设备以及存储介质
US11847750B2 (en) * 2022-05-18 2023-12-19 Niantic, Inc. Smooth object correction for augmented reality devices

Also Published As

Publication number Publication date
US20230377278A1 (en) 2023-11-23
US11847750B2 (en) 2023-12-19
WO2023223262A1 (en) 2023-11-23
US20240071018A1 (en) 2024-02-29

Similar Documents

Publication Publication Date Title
US10848745B2 (en) Head-mounted display tracking system
CN111602140B (zh) 分析由头戴式设备的相机记录的图像中的对象的方法
US10915993B2 (en) Display apparatus and image processing method thereof
US9070219B2 (en) System and method for presenting virtual and augmented reality scenes to a user
JP2018160917A (ja) モバイル装置の全方向立体撮影
JP6456347B2 (ja) 平面固有の特徴のターゲットのｉｎｓｉｔｕ生成
US10754420B2 (en) Method and device for displaying image based on virtual reality (VR) apparatus
US11436742B2 (en) Systems and methods for reducing a search area for identifying correspondences between images
US11272153B2 (en) Information processing apparatus, method for controlling the same, and recording medium
US10339700B2 (en) Manipulating virtual objects on hinged multi-screen device
KR20180005528A (ko) 영상 처리를 위한 디스플레이 장치 및 방법
TWI704376B (zh) 視角校正方法、虛擬實境顯示系統與運算裝置
US20240071018A1 (en) Smooth object correction for augmented reality devices
US12020448B2 (en) Systems and methods for updating continuous image alignment of separate cameras
US11450014B2 (en) Systems and methods for continuous image alignment of separate cameras
US10511824B2 (en) System device and methods for assistance in capturing stereoscopic video or images
US20180309971A1 (en) System device and methods for grading discomfort effects of three dimensional (3d) content
US11386604B2 (en) Moving an avatar based on real-world data
US11625857B1 (en) Enhanced content positioning
WO2023162504A1 (ja) 情報処理装置、情報処理方法およびプログラム
TWI814624B (zh) 環景影像的地標識別標註系統及其方法
CN112308906B (zh) 视角校正方法、虚拟实境显示***与运算装置
WO2021075113A1 (ja) 情報処理装置、情報処理方法及びプログラム
WO2023003558A1 (en) Interactive stereoscopic display calibration
TW202418226A (zh) 環景影像的地標識別標註系統及其方法