TW202420234A - 引導資訊的提供方法及終端裝置 - Google Patents
引導資訊的提供方法及終端裝置 Download PDFInfo
- Publication number
- TW202420234A TW202420234A TW112133270A TW112133270A TW202420234A TW 202420234 A TW202420234 A TW 202420234A TW 112133270 A TW112133270 A TW 112133270A TW 112133270 A TW112133270 A TW 112133270A TW 202420234 A TW202420234 A TW 202420234A
- Authority
- TW
- Taiwan
- Prior art keywords
- nth
- content
- image contents
- processor
- picture
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 32
- 238000001514 detection method Methods 0.000 claims description 3
- 238000013527 convolutional neural network Methods 0.000 claims description 2
- 230000003321 amplification Effects 0.000 claims 1
- 238000003199 nucleic acid amplification method Methods 0.000 claims 1
- 230000003190 augmentative effect Effects 0.000 description 41
- 238000010586 diagram Methods 0.000 description 21
- 238000004891 communication Methods 0.000 description 13
- 239000011521 glass Substances 0.000 description 9
- 230000008569 process Effects 0.000 description 5
- 238000012545 processing Methods 0.000 description 4
- 101001121408 Homo sapiens L-amino-acid oxidase Proteins 0.000 description 2
- 102100026388 L-amino-acid oxidase Human genes 0.000 description 2
- 101100012902 Saccharomyces cerevisiae (strain ATCC 204508 / S288c) FIG2 gene Proteins 0.000 description 2
- 101100233916 Saccharomyces cerevisiae (strain ATCC 204508 / S288c) KAR5 gene Proteins 0.000 description 2
- 238000012423 maintenance Methods 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002035 prolonged effect Effects 0.000 description 1
- 230000001373 regressive effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Abstract
本發明提供一種引導資訊的提供方法及終端裝置。在方法中,拍攝現實畫面。辨識現實畫面對應的第N內容。多個影像內容包括第N內容,且N為整數。依據第N內容的順序依序播放這些影像內容的部分者。這些影像內容的部分者包括排序在第N內容之後的影像內容且未包括排序在第N內容之前的影像內容。藉此,可輔助指引。
Description
本發明是有關於一種視覺引導技術,且特別是有關於一種引導資訊的提供方法及終端裝置。
針對多數的電子產品、家具、手工藝或玩具,可能需要提供詳細的操作步驟,以方便進行組裝、安裝、維修或拆卸。現有的操作指引可能是書面二維(Two Dimensions,2D)圖示或是影片。然而,在操作過程中,使用者可能難以判斷步驟順序,也可能不了解對應現實物件的確切位置,導致操作過久或中斷。
另一方面,現今導航裝置顯示的指引為繪製地圖或是原拍攝好的道路影像。對於使用者來說,無法直覺辨識對應的現實指引道路,使得行駛途中增加使用者判斷錯亂的機會。
本發明提供一種引導資訊的提供方法及終端裝置,可依據現實情況提供合適的指示說明,讓使用者能更直覺了解操作步驟或導航資訊。
本發明實施例的引導資訊的提供方法包括(但不僅限於):拍攝現實畫面;辨識現實畫面對應的第N內容,其中多個影像內容包括第N內容,且N為整數;以及依據第N內容的順序依序播放這些影像內容的部分者,其中這些影像內容的部分者包括排序在第N內容之後的影像內容且未包括排序在第N內容之前的影像內容。
本發明實施例的終端裝置包括(但不僅限於)顯示器及處理器。顯示器用以播放畫面。處理器耦接顯示器。處理器經配置用以:取得現實畫面;辨識現實畫面對應的第N內容,其中多個影像內容包括第N內容,且N為整數;以及依據第N內容的順序依序播放這些影像內容的部分者,其中這些影像內容的部分者包括排序在第N內容之後的影像內容且未包括排序在第N內容之前的影像內容。
基於上述,本發明實施例的引導資訊的提供方法及終端裝置可依據所拍攝的現實畫面(即,現實景象)找到對應的影像內容,並自這影像內容開始依序播放其他接續的影像內容。藉此,可輔助觀看者理解操作步驟及導航資訊,並可減少載入資料量。
為讓本發明的上述特徵和優點能更明顯易懂,下文特舉實施例,並配合所附圖式作詳細說明如下。
圖1是依據本發明一實施例的系統1的元件方塊圖。請參照圖1,系統1包括一個或多個終端裝置10及資料庫20。
終端裝置10可以是行動電話、平板電腦、智能助理裝置、智能家電、車載系統、穿戴式裝置或其他電子裝置。
終端裝置10包括(但不僅限於)輸入裝置11、顯示器12、通訊收發器13、儲存器14及處理器15。
輸入裝置11可以是麥克風、鍵盤、滑鼠或觸控螢幕。在一實施例中,輸入裝置11用以接收使用者指令。例如,語音指令、觸碰指令、拖移指令、或滑動指令。
顯示器12可以是LCD、LED顯示器或OLED顯示器。在一實施例中,顯示器12用以顯示影像。例如,使用者介面、影片或圖片。
通訊收發器13例如是支援乙太網路(Ethernet)、光纖網路、或電纜等有線網路的收發器(其可能包括(但不僅限於)連接介面、訊號轉換器、通訊協定處理晶片等元件),也可能是支援Wi-Fi、***(4G)、第五代(5G)或更後世代行動網路等無線網路的收發器(其可能包括(但不僅限於)天線、數位至類比/類比至數位轉換器、通訊協定處理晶片等元件)。在一實施例中,通訊收發器13用以經由網路(例如,網際網路、區域網路或其他類型網路)傳送或接收資料。
儲存器14可以是任何型態的固定或可移動隨機存取記憶體(Radom Access Memory,RAM)、唯讀記憶體(Read Only Memory,ROM)、快閃記憶體(flash memory)、傳統硬碟(Hard Disk Drive,HDD)、固態硬碟(Solid-State Drive,SSD)或類似元件。在一實施例中,儲存器14用以儲存程式碼、軟體模組、組態配置、資料(例如,畫面、影像內容或索引資訊)或檔案。
處理器15耦接輸入裝置11、顯示器12、通訊收發器13及儲存器14。處理器15可以是中央處理單元(Central Processing Unit,CPU)、圖形處理單元(Graphic Processing unit,GPU),或是其他可程式化之一般用途或特殊用途的微處理器(Microprocessor)、數位信號處理器(Digital Signal Processor,DSP)、可程式化控制器、現場可程式化邏輯閘陣列(Field Programmable Gate Array,FPGA)、特殊應用積體電路(Application-Specific Integrated Circuit,ASIC)或其他類似元件或上述元件的組合。在一實施例中,處理器15經配置用以執行會議裝置10的所有或部份作業,且可載入並執行儲存器14所儲存的每一軟體模組、程式碼、檔案及資料。
在一實施例中,影像擷取裝置16耦接處理器15。影像擷取裝置16可內建或外接於終端裝置10。影像擷取裝置16可以是相機、攝影機、網路攝影機、閉路監視器(CCTV,又稱閉路電視)或相機模組。在一實施例中,影像擷取裝置16用以拍攝現實場景,並產生現實畫面。也就是說,現實畫面是現實場景的照片或影像。
資料庫20可以是網路附接儲存裝置(Network Attached Storage,NAS)、硬碟、伺服器或各類型儲存裝置。
下文中,將搭配系統1中的裝置、元件及模組說明本發明實施例所述的方法。本方法的每一個流程可依照實施情形而調整,且並不僅限於此。
圖2是依據本發明第一實施例的引導資訊的提供方法的流程圖。請參照圖2,處理器15透過影像擷取裝置16拍攝現實畫面(步驟S210),以取得現實畫面。在一實施例中,處理器15可透過輸入裝置11接收使用者指令,以產生掃描或拍攝指令。例如,顯示器12所顯示的使用者介面提供拍攝選項,且觸控面板接收到拍攝選項的按壓操作。又例如,影像擷取裝置16具有實體按鍵,且這實體按鍵接收到按壓操作。再例如,麥克風接收到「開始掃描」的語音指令。處理器15可將掃描或拍攝指令傳送至影像擷取裝置16,使影像擷取裝置16拍攝現實畫面。或者,影像擷取裝置16也可自行依據使用者指令拍攝現實畫面。假設這時間點拍攝到第N現實畫面。N為整數,例如,0、2、或3(但不以此為限),並代表多個現實畫面的順序。
處理器15辨識這現實畫面對應的第N內容(步驟S220)。具體而言,第N內容代表對應於第N現實畫面的影像內容。依據不同應用情境,影像內容可以是擴增實境(Augmented Reality,AR)內容、合成影像、圖片或影片。另一方面,現實畫面可能出現一個或多個物件。物件可以是元件、零件、人物、道路、商品或建築,且不以此為限。處理器15可基於物件偵測(例如,基於神經網路的演算法(例如,YOLO(You Only Look Once)、基於區域的卷積神經網路(Region Based Convolutional Neural Networks,R-CNN)、或快速R-CNN(Fast CNN))或是基於特徵匹配的演算法(例如,方向梯度直方圖(Histogram of Oriented Gradient,HOG)、Harr、或加速穩健特徵(Speeded Up Robust Features,SURF)的特徵比對)辨識現實畫面中的物件的類型及位置。
在一實施例中,處理器15可依據所辨識出的物件的類型及位置決定現實畫面對應的畫面情境。例如,畫面情境為拆卸左上方螺絲。又例如,畫面情境為行駛到甲路與乙路的交叉路口。
在一實施例中,處理器15判斷與所辨識出的物件的類型、物件的位置及/或畫面情境匹配的多個影像內容中的一者(即,第N內容)。多個影像內容包括這第N內容。而這第N內容匹配於現實畫面中的物件的類型、物件的位置及/或畫面情境。
在一實施例中,處理器15可辨識顯示畫面對應的第N索引資訊。第N索引資訊代表對應於第N現實畫面的索引資訊。索引資訊例如是現實畫面中的物件的類型、物件的位置及/或畫面情境。
處理器15可依據第N索引資訊取得第N內容。例如,處理器15透過通訊收發器13對資料庫20傳送檢索要求。這檢索要求包括第N索引資訊。資料庫20回傳第N內容。又例如,處理器15自儲存器14直接取得第N內容。
在一實施例中,處理器15可辨識顯示畫面對應的索引資訊。這索引資訊代表對應於這現實畫面的索引資訊。索引資訊例如是現實畫面中的物件的類型、物件的位置及/或畫面情境。
處理器15可索引資訊取得多個影像內容。相較於上述實施例僅取得第N內容,本實施例可取得多個影像內容。畫面情境可能對應於不同情境主題。例如,情境主題A為拆開背板,且情境主題B為拆開電池。不同情境主題對應於不同的多個影像內容。因此,當情境主題起始或切換時,處理器15可先載入單一情境的影像內容到儲存器14,以方便後續使用。
請參照圖2,處理器15透過顯示器12只播放第N內容(步驟S230)。具體而言,顯示器12可持續顯示這第N內容,直到第N內容播放完畢、辨識出對應於其他現實畫面的不同內容(例如,第N+1內容)或接收到中斷指令。也就是說,在尚未辨識出其他內容之前,處理器15禁止透過顯示器12播放其他內容。在一實施例中,處理器15可合成第N內容與現實畫面,並透過顯示器12播放所合成的畫面。在另一實施例中,顯示器12所顯示的畫面只有第N內容。
圖3是依據本發明第一實施例的行車應用的示意圖。請參照圖3,終端裝置10為行車紀錄器10-1及車載系統10-2。行車紀錄器10-1的實體按鍵或其顯示器12所顯示的虛擬按鍵接收使用者的開啟掃描指令(步驟S310)。行車紀錄器10-1的影像擷取裝置16依據開啟掃描指令拍攝第N現實畫面(步驟S320)。車載系統10-2的處理器15取得並辨識第N現實畫面,並據以產生第N索引資訊(步驟S330)。
處理器15依據第N索引資訊透過通訊收發器13對資料庫20進行檢索,以得到第N擴增實境內容(步驟S340)。車載系統10-2的顯示器12播放第N擴增實境內容(步驟S350)。當第N擴增實境內容播放完畢,處理器15將N加1並返回步驟S320繼續拍攝第N+1現實畫面。
例如,圖4A及圖4B是依據本發明第一實施例的內容辨識的示意圖。請參照圖4A,若現實畫面中捕捉到上方有高架道路,則處理器15可判斷車輛行駛於較低層的道路上。此時,擴增實境內容可相關於平面道路的導航路徑。請參照圖4B,若現實畫面中捕捉到上方為天空,則處理器15可判斷車輛行駛於高架道路上。此時,擴增實境內容可相關於高架道路的導航路徑。
圖5是依據本發明第二實施例的引導資訊的提供方法的流程圖。請參照圖5,步驟S510、S520的說明可分別參照步驟S210、S220的說明,於此不再贅述。
處理器15透過顯示器12單次且依序播放所有的影像內容(步驟S530)。具體而言,相較於步驟S230,步驟S530是播放第N內容所屬的多個影像內容。例如,影像內容包括第0內容至第M內容,且M為大於或等於N的整數。因此,顯示器12播放第0內容至第M內容。「單次」是指,只要所有影像內容播放過一次,即停止播放或播放完畢。「依序」是指依據影像內容的排序順序播放。例如,先播放第0內容,接著播放第1內容,接著播放第2內容,其餘依此類推。
例如,圖6是依據本發明第二實施例的播放順序的示意圖。請參照圖6,第1-1、1-2、1-3現實畫面對應於第2擴增實境內容。步驟S601、S602、S603分別對應於拆右下、右上及左下的螺絲的步驟。步驟S601、S602、S603對應的第1、2、3擴增實境內容只播放一次,即播放完畢及結束。藉此,使用者可先行預覽完所有的步驟畫面之後,再依據記憶執行所有的步驟。
圖7是依據本發明第二實施例的智能穿戴眼鏡應用的示意圖。請參照圖7,終端裝置10為智能穿戴眼鏡10-3。智能穿戴眼鏡10-3的實體按鍵接收使用者的開啟掃描指令(步驟S710)。智能穿戴眼鏡10-3的影像擷取裝置16依據開啟掃描指令拍攝現實畫面(步驟S720)。智能穿戴眼鏡10-3的處理器15取得並辨識現實畫面,並據以產生索引資訊(步驟S730)。
處理器15依據這索引資訊透過通訊收發器13對資料庫20進行檢索,以得到擴增實境內容集(步驟S740)。擴增實境內容集包括第0至M擴增實境內容。智能穿戴眼鏡10-3的顯示器12依序播放擴增實境內容集(步驟S750)。
在一實施例中,處理器15可透過輸入裝置11接收操作指令。這操作指令為暫停指令、重播指令或放大指令。例如,顯示器12所顯示的使用者介面包括暫停選項、重播選項及/或放大選項。又例如,輸入裝置11包括對應於暫停指令、重播指令及/或放大指令的實體按鍵。輸入裝置11可偵測對應於暫停指令、重播指令或放大指令的使用者指令。
處理器15可依據操作指令暫停、重播或放大第N內容。以圖7為例,處理器15可透過輸入裝置11判斷是否接收到使用者的操作指令(步驟S760)。例如,暫停指令、重播指令或(局部)放大指令。若有接收到這些操作指令,處理器15可透過顯示器12依據播放指令暫停播放當前顯示的第N擴增實境內容,依據重播指令重播回放當前顯示的第N擴增實境內容,或依據放大指令局部分大當前顯示的第N擴增實境內容與第N-n現實畫面對應於第N擴增實境內容的部分(步驟S770)。n為正整數。針對放大指令,可(1)局部放大第N擴增實境內容內部與附近的部分兩者,或(2)局部放大第N擴增實境內容內部的部分但附近的部分為第N-n現實畫面的原比例。
圖8是依據本發明第三實施例的引導資訊的提供方法的流程圖。請參照圖8,步驟S810、S820的說明可分別參照步驟S210、S220的說明,於此不再贅述。
處理器15透過顯示器12循環且依序播放所有的影像內容(步驟S530)。具體而言,相較於步驟S530,步驟S830是循環地播放第N內容所屬的多個影像內容。例如,影像內容包括第0內容至第M內容,且M為大於或等於N的整數。因此,顯示器12播放第0內容至第M內容。播放第M內容之後,顯示器12接續播放第0內容。「循環」是指,播放至影像內容的結尾內容之後,接續播放影像內容的起始內容。
圖9是依據本發明第三實施例的播放順序的示意圖。請參照圖9,第1-1、1-2、1-3現實畫面對應於第1擴增實境內容,第2-1、2-2、2-3現實畫面對應於第2擴增實境內容,且第3-1、3-2、3-3現實畫面對應於第3擴增實境內容。步驟S601、S602、S603分別對應於拆右下、右上及左下的螺絲的步驟。步驟S601、S602、S603對應的第1、2、3擴增實境內容重複且循環地播放多次,直到接收到相關於結束/中斷的使用者指令才結束。例如,第3擴增實境內容播放之後,接續播放第1擴增實境內容。藉此,使用者可一邊看著所有的步驟畫面之後,一邊跟著畫面執行所有的步驟。
圖10是依據本發明第三實施的平板電腦/手機應用的示意圖。請參照圖10,終端裝置10為平板電腦/手機10-4。平板電腦/手機10-4的實體按鍵或其顯示器12所顯示的虛擬按鍵接收使用者的開啟掃描指令(步驟S1010)。平板電腦/手機10-4的影像擷取裝置16依據開啟掃描指令拍攝現實畫面(步驟S1020)。平板電腦/手機10-4的處理器15取得並辨識現實畫面,並據以產生索引資訊(步驟S1030)。
處理器15依據這索引資訊透過通訊收發器13對資料庫20進行檢索,以得到影片內容集(步驟S1040)。影片內容集包括第N內容。平板電腦/手機10-4的顯示器12播放第N內容(步驟S1050)。
處理器15可透過輸入裝置11判斷是否接收到使用者的操作指令(步驟S1060)。例如,暫停指令、重播指令或(局部)放大指令。若有接收到這些操作指令,處理器15可透過顯示器12依據播放指令暫停播放當前顯示的對應於步驟S901(例如,拆卸右下角的螺絲)的第N內容,依據重播指令重播回放當前顯示的第N內容,或依據放大指令局部分大當前顯示的第N內容(步驟S1070)。
若沒有接收到諸如暫停指令、重播指令或(局部)放大的操作指令,第N內容播放完畢之後,處理器15將N加1。即,N=N+1。處理器15判斷N+1(即,更新的N)是否等於M。M是影像內容集中的多個影片內容的總數。也就是說,處理器15判斷是否已播放完所有影片內容。若N+1(即,更新的N)等於M,則處理器15將N歸零(即,N=0),並返回步驟S1050。若N+1(即,更新的N)不等於M,則返回步驟S1050。
圖11是依據本發明第四實施例的引導資訊的提供方法的流程圖。請參照圖11,步驟S1110、S1120的說明可分別參照步驟S210、S220的說明,於此不再贅述。
處理器15透過顯示器12依據第N內容的順序依序播放多個影像內容的步驟者(步驟S1130)。具體而言,相較於步驟S530或步驟S830,步驟S1130所播放的多個影像內容的部分者包括排序在這N內容之後的影像內容且未包括排序在這第N內容之前的影像內容。例如,影像內容包括第0內容至第M內容(即,M+1為多個影像內容的總數),且M為大於或等於(即,不小於)N的整數。處理器15可透過顯示器12依序播放第N內容至第M內容。若循環播放,則播放第M內容之後,顯示器12接續播放第N內容。
圖12A至圖12D是依據本發明第四實施例的播放順序的示意圖。請參照圖12A,第1-1、1-2、1-3現實畫面對應於第1擴增實境內容。步驟S1201、S1202、S1203分別對應於拆右下、右上及左下的螺絲的步驟。步驟S1201、S1202、S1203對應的第1、2、3擴增實境內容重複且循環地播放。藉此,使用者可一邊看著所有的步驟畫面之後,一邊執行第1步驟。
請參照圖12B,第2-1、2-2、2-3現實畫面對應於第2擴增實境內容。此時,步驟S1202、S1203對應的第2、3擴增實境內容重複且循環地播放,但不播放步驟S1201對應的第1擴增實境。藉此,使用者可一邊看著第2至第3步驟畫面之後,一邊執行第2步驟。
請參照圖12C,第3-1、3-2、3-3現實畫面對應於第3擴增實境內容。此時,步驟S1203對應的第3擴增實境內容重複且循環地播放,但不播放步驟S1201、S1202對應的第1、2擴增實境。藉此,使用者可一邊看著第3步驟畫面之後,一邊執行第3步驟。
請參照圖12D,使用者完成步驟S1201、S1202、S1203的操作。此時,第4-1現實畫面沒有對應到任何擴增實境內容。接著,顯示器12顯示第4-1現實畫面及結束畫面。而圖12A至圖12D的過程可稱為「遞減播放」。
圖13是依據本發明第四實施例的智能隱形眼鏡應用的示意圖。請參照圖13,終端裝置10為手機10-5及智能隱形眼鏡10-6。手機10-5的實體按鍵或其顯示器12所顯示的虛擬按鍵接收使用者的開啟掃描指令(步驟S1301)。智能隱形眼鏡10-6的通訊收發器13接收掃描指令(步驟S1302)。智能隱形眼鏡10-6的影像擷取裝置16依據開啟掃描指令拍攝第N-n現實畫面(步驟S1303)。n為0至m的正整數,且m為正整數。手機10-5的處理器15取得並辨識第N-n現實畫面,並據以產生第N索引資訊(步驟S1304)。
手機10-5的處理器15依據這第N索引資訊透過通訊收發器13對資料庫20進行檢索,以得到第N擴增實境內容(步驟S1305)。智能隱形眼鏡10-6的顯示器12播放第N擴增實境內容(步驟S1306)。此時,N=P,P為整數且初始值為0。
處理器15可判斷第N-n現實畫面是否匹配第N擴增實境內容(步驟S1307)。若第N-n現實畫面匹配第N擴增實境內容,則處理器15可將P加1(步驟S1308),並返回步驟S1302。此時,將遞減播放擴增實境內容。若第N-n現實畫面不匹配第N擴增實境內容,則播放完第N擴增實境內容之後,處理器15可將N加1(步驟S1309)。
接著,處理器15判斷N+1(即,更新的N)是否等於M。M+1是多個擴增實境內容的總數。若N+1(即,更新的N)等於M,則處理器15播放結束畫面。若N+1(即,更新的N)不等於M,則返回步驟S1306。
在一實施例中,行車紀錄器10-1及車載系統10-2也可應用第二實施例(即,僅單次播放所有影像內容)、第三實施例(即,循環播放所有影像內容)及/或第四實施例(即,遞減播放多個影像內容的步驟者)。
例如,圖14A至圖14D是依據本發明第四實施例的導航指示的示意圖。請參照圖14A,影像內容1401、1402、1403、1404為導航指示。此時,現實畫面前方的路口匹配影像內容1401。顯示器12可依序(且循環)播放影像內容1401、1402、1403、1404。
請參照圖14B,此時,現實畫面前方的路口匹配影像內容1402。顯示器12可依序(且循環)播放影像內容1402、1403、1404。
請參照圖14C,此時,現實畫面前方的路口匹配影像內容1403。顯示器12可依序(且循環)播放影像內容1403、1404。
請參照圖14D,此時,現實畫面前方的路口匹配影像內容1404。顯示器12可播放影像內容1404。
透過依據操作的進度遞減播放指引影片,可提供全局預覽及避免超載的特點。全局預覽:在初始階段提供較多的資訊,以便使用者可迅速瞭解整個任務或操作的概要和目標。避免超載:在後續階段提供較少的資訊,可避免用戶在學習過程中感到混亂或不知所措,且適用於儲存空間有限的終端裝置。
在一實施例中,智能穿戴眼鏡10-3也可應用第一實施例(即,僅播放單一內容)、第三實施例(即,循環播放所有影像內容)及/或第四實施例(即,遞減播放多個影像內容的步驟者)。
在一實施例中,平板電腦/手機10-4也可應用第一實施例(即,僅播放單一內容)、第二實施例(即,僅單次播放所有影像內容)、及/或第四實施例(即,遞減播放多個影像內容的步驟者)。
在一實施例中,手機10-5及智能隱形眼鏡10-6也可應用第一實施例(即,僅播放單一內容)、第二實施例(即,僅單次播放所有影像內容)及/或第三實施例(即,循環播放所有影像內容)。
在一實施例中,顯示器12所顯示的使用者介面可提供第一實施例至第四實施例的選項。處理器15可透過輸入裝置11接收所選擇的選項,並據以提供對應的播放功能。例如,第一實施例的單一播放、第二實施例的單次全部播放、第三實施例的循環全部播放及第四實施例的遞減播放。
綜上所述,在本發明實施例的引導資訊的提供方法中,可依據當前現實畫面中的物件、其位置及/或畫面情境提供合適的指引說明。依據應用需求,可提供單一播放、單次全部播放、循環全部播放及遞減播放。針對車用導航,本發明實施例可依據當下行駛的道路影像,即時提供合適的指引,讓使用者可更直覺對應現有道路導航行駛。針對維修指引,本發明實施例可依據使用者當前操作的現實物件,播放對應的指示說明,讓使用者能更直覺了解操作步驟及對應位置。
雖然本發明已以實施例揭露如上,然其並非用以限定本發明,任何所屬技術領域中具有通常知識者,在不脫離本發明的精神和範圍內,當可作些許的更動與潤飾,故本發明的保護範圍當視後附的申請專利範圍所界定者為準。
1:系統
10:終端裝置
11:輸入裝置
12:顯示器
13:通訊收發器
14:儲存器
15:處理器
16:影像擷取裝置
20:資料庫
S210~S230、S310~S360、S510~S530、S601~S603、S710~S770、S810~S830、S1010~S1070、S901、S1110~S1130、S1201~S1203、S1301~S1312:步驟
10-1:行車紀錄器
10-2:車載系統
10-3:智能穿戴眼鏡
10-4:平板電腦/手機
10-5:手機
10-6:智能隱形眼鏡
1401~1404:影像內容
圖1是依據本發明一實施例的系統的元件方塊圖。
圖2是依據本發明第一實施例的引導資訊的提供方法的流程圖。
圖3是依據本發明第一實施例的行車應用的示意圖。
圖4A及圖4B是依據本發明第一實施例的內容辨識的示意圖。
圖5是依據本發明第二實施例的引導資訊的提供方法的流程圖。
圖6是依據本發明第二實施例的播放順序的示意圖。
圖7是依據本發明第二實施例的智能穿戴眼鏡應用的示意圖。
圖8是依據本發明第三實施例的引導資訊的提供方法的流程圖。
圖9是依據本發明第三實施例的播放順序的示意圖。
圖10是依據本發明第三實施的平板電腦/手機應用的示意圖。
圖11是依據本發明第四實施例的引導資訊的提供方法的流程圖。
圖12A至圖12D是依據本發明第四實施例的播放順序的示意圖。
圖13是依據本發明第四實施例的智能隱形眼鏡應用的示意圖。
圖14A至圖14D是依據本發明第四實施例的導航指示的示意圖。
S1110~S1130:步驟
Claims (18)
- 一種引導資訊的提供方法,包括: 拍攝一現實畫面; 辨識該現實畫面對應的一第N內容,其中多個影像內容包括該第N內容,且N為整數;以及 依據該第N內容的順序依序播放該些影像內容的部分者,其中該些影像內容的部分者包括排序在該第N內容之後的影像內容且未包括排序在該第N內容之前的影像內容。
- 如請求項1所述的引導資訊的提供方法,其中辨識該現實畫面對應的該第N內容的步驟包括: 辨識該現實畫面對應的一第N索引資訊;以及 依據該第N索引資訊取得該第N內容。
- 如請求項2所述的引導資訊的提供方法,其中辨識該現實畫面對應的該第N索引資訊的步驟包括: 基於一物件偵測、一區域的卷積神經網路(R-CNN)、一快速R-CNN或一特徵匹配的演算法,辨識該現實畫面中的多個物件的類型及該些物件的位置; 基於辨識出的該些物件的類型及該些物件的位置,決定對應的一畫面情境;以及 基於辨識出的該些物件的類型、該些物件的位置或該畫面情境,產生該第N索引資訊。
- 如請求項1所述的引導資訊的提供方法,其中依據該第N內容的順序依序播放該些影像內容的部分者的步驟包括: 依序播放該第N內容至一第M內容,其中M+1為該些影像內容的總數,M為整數且不小於N。
- 如請求項1所述的引導資訊的提供方法,更包括: 辨識該現實畫面對應的一索引資訊;以及 依據該索引資訊取得該些影像內容。
- 如請求項5所述的引導資訊的提供方法,更包括: 循環且依序播放所有的該些影像內容。
- 如請求項5所述的引導資訊的提供方法,更包括: 單次且依序播放所有的該些影像內容。
- 如請求項1所述的引導資訊的提供方法,更包括: 只播放該第N內容。
- 如請求項1、6-8中的任一項所述的引導資訊的提供方法,更包括: 接收一操作指令,其中該操作指令為一暫停指令、一重播指令或一放大指令;以及 依據該操作指令暫停、重播或放大該第N內容。
- 一種終端裝置,包括: 一顯示器,用以播放畫面;以及 一處理器,耦接該顯示器,並經配置用以: 取得一現實畫面; 辨識該現實畫面對應的一第N內容,其中多個影像內容包括該第N內容,且N為整數;以及 依據該第N內容的順序透過該顯示器依序播放該些影像內容的部分者,其中該些影像內容的部分者包括排序在該第N內容之後的影像內容且未包括排序在該第N內容之前的影像內容。
- 如請求項10所述的終端裝置,其中該處理器更經配置用以: 辨識該現實畫面對應的一第N索引資訊;以及 依據該第N索引資訊取得該第N內容。
- 如請求項11所述的終端裝置,其中該處理器更經配置用以: 基於一物件偵測、一R-CNN、一快速R-CNN或一特徵匹配的演算法,辨識該現實畫面中的多個物件的類型及該些物件的位置; 基於辨識出的該些物件的類型及該些物件的位置,決定對應的一畫面情境;以及 基於辨識出的該些物件的類型、該些物件的位置或該畫面情境,產生該第N索引資訊。
- 如請求項10所述的終端裝置,其中該處理器更經配置用以: 透過該顯示器依序播放該第N內容至一第M內容,其中M+1為該些影像內容的總數,M為整數且不小於N。
- 如請求項10所述的終端裝置,其中該處理器更經配置用以: 辨識該現實畫面對應的一索引資訊;以及 依據該索引資訊取得該些影像內容。
- 如請求項14所述的終端裝置,其中該處理器更經配置用以: 透過該顯示器循環且依序播放所有的該些影像內容。
- 如請求項10所述的終端裝置,其中該處理器更經配置用以: 透過該顯示器單次且依序播放所有的該些影像內容。
- 如請求項10所述的終端裝置,其中該處理器更經配置用以: 透過該顯示器只播放該第N內容。
- 如請求項10、15-17中的任一項所述的終端裝置,更包括: 一輸入裝置,用以接收一操作指令,其中該操作指令為一暫停指令、一重播指令或一放大指令,且該處理器更經配置用以: 依據該操作指令暫停、重播或放大該第N內容。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US63/421,576 | 2022-11-02 |
Publications (1)
Publication Number | Publication Date |
---|---|
TW202420234A true TW202420234A (zh) | 2024-05-16 |
Family
ID=
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11030987B2 (en) | Method for selecting background music and capturing video, device, terminal apparatus, and medium | |
JP7138201B2 (ja) | ビデオ撮影方法、装置、端末機器及び記憶媒体 | |
US11062423B2 (en) | Image display apparatus and method of operating the same | |
CN110636353B (zh) | 一种显示设备 | |
CN108900771B (zh) | 一种视频处理方法、装置、终端设备及存储介质 | |
WO2019134516A1 (zh) | 全景图像生成方法、装置、存储介质及电子设备 | |
WO2017036329A1 (zh) | 对视频内容任意位置和时间播放的方法及装置 | |
KR20160011613A (ko) | 정보 취득 방법, 장치, 프로그램 및 기록매체 | |
KR20140139859A (ko) | 멀티미디어 콘텐츠 검색을 위한 사용자 인터페이스 방법 및 장치 | |
CN107087224A (zh) | 内容同步设备和方法 | |
CN113064684B (zh) | 一种虚拟现实设备及vr场景截屏方法 | |
KR102519592B1 (ko) | 디스플레이 장치 및 이의 제어 방법 | |
CN111475675B (zh) | 视频处理*** | |
CN111935528A (zh) | 视频生成方法和装置 | |
US20220174237A1 (en) | Video special effect generation method and terminal | |
KR20130056529A (ko) | 휴대용 단말기에서 증강현실 서비스를 제공하기 위한 장치 및 방법 | |
CN112261481B (zh) | 互动视频的创建方法、装置、设备及可读存储介质 | |
US20230368461A1 (en) | Method and apparatus for processing action of virtual object, and storage medium | |
US11463718B2 (en) | Image compression method and image decompression method | |
CN111757137A (zh) | 一种基于单镜头直播视频的多路特写播放方法及装置 | |
KR20230049691A (ko) | 비디오 처리 방법, 단말기 및 저장매체 | |
US20150281586A1 (en) | Method and apparatus for forming a video sequence | |
US9491447B2 (en) | System for providing complex-dimensional content service using complex 2D-3D content file, method for providing said service, and complex-dimensional content file therefor | |
CN112288877A (zh) | 视频播放方法、装置、电子设备及存储介质 | |
WO2020137994A1 (ja) | 映像配信装置、映像配信システム、映像配信方法及び映像配信プログラム |