TWI844376B - 用來處理視訊處理器之不規則輸入的方法 - Google Patents
用來處理視訊處理器之不規則輸入的方法 Download PDFInfo
- Publication number
- TWI844376B TWI844376B TW112119746A TW112119746A TWI844376B TW I844376 B TWI844376 B TW I844376B TW 112119746 A TW112119746 A TW 112119746A TW 112119746 A TW112119746 A TW 112119746A TW I844376 B TWI844376 B TW I844376B
- Authority
- TW
- Taiwan
- Prior art keywords
- frame
- input
- video processor
- buffer
- output
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 52
- 230000001788 irregular Effects 0.000 title claims description 38
- 239000000872 buffer Substances 0.000 claims abstract description 183
- 238000000819 phase cycle Methods 0.000 claims description 11
- 230000003247 decreasing effect Effects 0.000 claims description 2
- 238000011017 operating method Methods 0.000 claims 2
- 238000003672 processing method Methods 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 5
- 230000002159 abnormal effect Effects 0.000 description 4
- 230000003111 delayed effect Effects 0.000 description 3
- 238000001514 detection method Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Abstract
一種用於視訊處理器的操作方法,包含有下列步驟:接收一系列輸入幀;根據該系列輸入幀來計算一緩衝級值,其中,該緩衝級值對應於該視訊處理器中的一幀緩衝器所儲存的輸入幀的狀態;以及根據該緩衝級值,從該幀緩衝器所儲存的該輸入幀中選擇一幀組用以產生一插補幀,作為該視訊處理器所輸出的一輸出幀。
Description
本發明係指一種進行運動估計與運動補償(Motion Estimation and Motion Compensation,MEMC)的方法,尤指一種可在運動估計與運動補償中用來處理不規則輸入的方法。
運動估計與運動補償(Motion Estimation and Motion Compensation,MEMC)是一種用於幀插補(frame interpolation)的技術,可讓一系列影像幀在較高幀率(frame rate)之下進行顯示。舉例來說,若30赫茲(Hz)的原始視訊(例如電影影片)需要以60赫茲的頻率顯示,則原始視訊的每二個相鄰輸入幀之間需加入一插補幀,進而實現兩倍的幀率。
假設來自於視訊提供單元的原始視訊具有24赫茲的幀率而欲在顯示面板上顯示的影像為60赫茲時,需透過幀轉換技術將每二個輸入幀轉換為五個輸出幀。為了避免輸出的畫面上出現抖動(judder),可利用影片模式(film mode)32的規律(cadence)來執行插補,其中,二輸入幀可合併以產生至少一插補幀。運動估計與運動補償技術使得視訊處理器可決定適合的輸入幀並利用正確的相位係數來執行插補,以輸出流暢的畫面。
傳統上,當視訊處理器取得輸入幀及輸出幀的資訊並據以決定影片模式時,可利用記錄有輸入幀及相關相位資訊的對應表來執行插補,且視訊處理器可透過查表來產生插補幀。然而,若輸入幀未遵循輸入規則但插補操作仍根據查表來進行的情況下,視訊處理器可能會拿取錯誤的來源輸入幀且/或採用錯誤的相位係數來執行插補,導致輸出的畫面出現抖動。舉例來說,若行動電話中的視訊處理器係根據行動產業處理器介面(Mobile Industry Processor Interface,MIPI)規範的指令模式來接收輸入幀,輸入幀的輸入時序容易受到中央處理單元(Central Processing Unit,CPU)或圖形處理單元(Graphics Processing Unit,GPU)的狀態干擾,因此當圖形處理單元過度忙碌的情況下會造成輸入影像的延遲。輸入時序的延遲或不規則通常難以預測,因此,習知透過查表的方法可能無法適當地處理這樣的不規則輸入問題。
舉例來說,在24赫茲的輸入視訊轉換成60赫茲的輸出視訊的應用中,每2個輸入幀用來產生5個輸出幀,因此,用來指示輸入幀接收的輸入更新訊號通常具有重複序列“10010”,如表1所示。藉由查詢一參考表,可得到相位步階等於2/5,使得相位係數形成遞迴序列0、2/5、4/5、1/5及3/5,且插補幀係利用當前輸入幀及先前輸入幀以相對應的相位係數產生。
然而,如表1所示,輸入幀C預期在索引6的輸出幀期間到達,但延遲到索引7的下一個輸出幀期間才到達。根據參考表,由於輸入幀C尚未到達,視訊處理器將從特定的幀緩衝器拿取輸入幀B及A以產生用於索引6的插補幀。因此,從索引5至索引6係選擇相同的幀組來執行插補,但相位係數從3/5變為0,使得輸出的畫面不正常地回退,容易導致輸出的畫面產生影像抖動。
同樣的問題亦可能發生在具有規律或下拉(pulldown)的應用,其中,輸入幀係以60赫茲的頻率接收重複幀,而輸出幀係以60赫茲的頻率輸出,如表2所示。
在此例中,輸入幀A2及A3係藉由複製輸入幀A1而產生,輸入幀B2及B3係藉由複製輸入幀B1而產生,輸入幀C2係藉由複製輸入幀C1而產生,並以此類推。幀差值指示當前接收的輸入幀是否不同於前一輸入幀抑或由前一輸入幀複製而成。同樣地,由於輸入幀C1的延遲,在索引6的輸出幀期間出現輸出畫面的不正常回退。
有鑑於此,習知技術實有改進之必要。
因此,本發明之主要目的即在於提出一種用於視訊處理器的影像處理方法,以藉由判斷不正常的情形並對應選擇幀組和計算相位步階來處理不規則輸入的問題,進而解決上述問題。
本發明之一實施例揭露一種用於視訊處理器的操作方法,包含有下列步驟:接收一系列輸入幀;根據該系列輸入幀來計算一緩衝級值(buffer stage value),其中,該緩衝級值對應於該視訊處理器中的一幀緩衝器所儲存的輸入幀的狀態;以及根據該緩衝級值,從該幀緩衝器所儲存的輸入幀中選擇一幀組用以產生一插補幀,作為該視訊處理器所輸出的一輸出幀。
本發明之另一實施例揭露一種用於視訊處理器的操作方法,包含有下列步驟:接收一系列輸入幀;根據該系列輸入幀之一輸入幀率與該視訊處理器所輸出的一系列輸出幀之一輸出幀率的相對關係,判斷一預期輸入間距值;判斷一實際輸入間距值是否不同於該預期輸入間距值;當判斷該實際輸入間距值不同於該預期輸入間距值時,計算一相位步階並取得該相位步階,該相位步階不同於根據該輸入幀率與該輸出幀率的相對關係來決定的一正常相位步階;以及利用計算出的該相位步階,根據一所選幀組來產生一插補幀,作為該系列輸出幀中的一輸出幀進行輸出。
10:顯示系統
12:視訊提供單元
104:幀率轉換器
105:幀緩衝器
106:視訊處理器
108:顯示驅動裝置
110:顯示面板
20,30,40:影像處理流程
200~208,300~312,402~422:步驟
第1圖為本發明實施例一顯示系統之示意圖。
第2圖為本發明實施例一影像處理流程之流程圖。
第3圖為本發明實施例另一影像處理流程之流程圖。
第4圖為本發明實施例又一影像處理流程之流程圖。
第1圖為本發明實施例一顯示系統10之示意圖。如第1圖所示,顯示系統10可以是例如電視或螢幕,其可接收並顯示由一視訊提供單元12提供的具有一系列影像幀的原始視訊,視訊提供單元12可以是例如數位視訊光碟(Digital Video Disc,DVD)播放器或視訊串流服務提供者,其可和顯示系統10透過有線或無線網路進行通訊。顯示系統10包含有一視訊處理器106、一顯示驅動裝置108及一顯示面板110。一般來說,原始視訊的幀率不同於欲在顯示面板110上顯示
的幀率。視訊處理器106可包含一視訊控制積體電路(Video Controller IC)及一幀率轉換積體電路(Frame Rate Converter IC,FRC IC),用來對幀率通常較低的原始視訊進行轉換以產生幀率較高的一系列輸出幀,以透過顯示面板110進行顯示。或者,視訊處理器106可以是具有幀率轉換功能的視訊控制積體電路,亦即,第1圖所示的幀率轉換器104可視為獨立的幀率轉換積體電路或是位於視訊控制積體電路內部的幀率轉換電路。在此例中,當幀率轉換器104接收到具有2個輸入幀A及B的24赫茲的輸入視訊時,可將2個輸入幀A及B轉換為60赫茲的5個影像幀A、A、A、B、B,且視訊處理器106可根據該些影像幀來執行運動估計與運動補償(Motion Estimation and Motion Compensation,MEMC),以產生適合的插補幀。
在另一實施例中,視訊處理器106可包含圖形處理單元(Graphics Processing Unit,GPU)以及獨立的幀率轉換積體電路,或者視訊處理器106可以是一圖形處理單元,其內部包含有內建的幀率轉換電路。
視訊處理器106另可包含一幀緩衝器105。幀緩衝器105可用來儲存所接收的輸入幀,使得視訊處理器106可從幀緩衝器105取得所選擇的輸入幀來執行插補。在此例中,幀緩衝器105係與視訊處理器106(如視訊控制積體電路)整合。在另一實施例中,視訊處理器106可從一或多個獨立的幀緩衝器存取輸入幀,此幀緩衝器為與視訊處理器106分離的外部記憶體裝置。
顯示驅動裝置108可將影像資料轉換為資料電壓訊號,並透過資料電壓訊號來驅動顯示面板110顯示影像幀。顯示驅動裝置108可包含時序控制器、源極驅動裝置、閘極驅動裝置、及/或任何可用來驅動顯示面板110的其它裝
置。顯示面板110可以是任何類型,如液晶顯示面板(Liquid Crystal Display,LCD)、發光二極體(Light-Emitting Diode,LED)顯示器、電漿顯示面板(Plasma Display Panel,PDP),但不限於此。
如上所述,習知的視訊處理器可取得一幀組並利用基於一參考表決定的相位係數來產生插補幀,其中,所選的幀及其相關的相位係數係根據輸入幀率與輸出幀率以及參考表所記載的資訊而預先決定的。因此,若輸入幀未能遵循預期的輸入時序之情況下,將無法正常產生輸出的影像幀。為了解決或減輕此問題,本發明提出了一種可在每一輸出幀期間內動態決定用於插補的幀組及相位步階/係數的方法,藉由適當地選擇用於插補的當前幀和先前幀並重新計算相位步階及相位係數,使得輸出的視訊更加流暢,進而使輸入時序不規則所造成的影響達到最小。
第2圖為本發明實施例一影像處理流程20之流程圖。影像處理流程20可實現於一視訊處理器,如第1圖中的視訊處理器106。如第2圖所示,影像處理流程20包含有下列步驟:
步驟200:開始。
步驟202:接收一系列輸入幀。
步驟204:根據該系列輸入幀來計算一緩衝級值(buffer stage value),其中,緩衝級值對應於視訊處理器中的一幀緩衝器所儲存的輸入幀的狀態。
步驟206:根據緩衝級值,從幀緩衝器所儲存的輸入幀中選擇一幀組用以產生一插補幀,作為視訊處理器所輸出的一輸出幀。
步驟208:結束。
根據影像處理流程20,視訊處理器可接收一系列輸入幀(步驟202)。在一實施例中,該系列輸入幀可由視訊處理器從一前端裝置接收,前端裝置可以是例如第1圖中的視訊提供單元12。
在有接收輸入幀或沒有接收輸入幀的每一輸出幀期間內,視訊處理器可根據輸入幀的接收來計算一緩衝級值(步驟204)。緩衝級值對應於視訊處理器的一幀緩衝器儲存的輸入幀的狀態。更明確來說,緩衝級值可代表幀緩衝器中尚未用來透過插補操作產生插補幀的輸入幀的數量。視訊處理器可利用緩衝級值來監看幀緩衝器的輸入幀儲存狀態。視訊處理器進而根據緩衝級值從幀緩衝器選擇幀組用來產生插補幀以作為一輸出幀(步驟206)。
表3列出了一系列輸入幀的輸入時序之下多個連續輸出幀期間的緩衝級值,表3同時列出了每一輸出幀期間內用來產生插補幀的幀組(包含一當前幀及一先前幀)及其對應的相位係數,其中每一輸出幀期間以一索引值表示。插補幀可作為一輸出幀,由視訊處理器輸出至後端的顯示驅動裝置及顯示面板。一新相位起始指示與一緩衝級值同樣列於表3。表3顯示24赫茲的輸入視訊轉換為60赫茲的輸出視訊之情況,其相位步階為2/5,且相位係數具有遞迴的序列0、2/5、4/5、1/5及3/5。
詳細來說,視訊處理器接收一系列輸入幀A、B、C、D、E及F...。輸入更新訊號可用來指示輸入幀的接收,其中,數值1指示輸出幀期間內接收到一輸入幀,而數值0指示輸出幀期間內未接收到輸入幀。當前端的視訊提供單元發送一輸入幀至視訊處理器時,視訊提供單元可提供輸入更新訊號予視訊處理器以指示輸入幀的傳送。新相位起始指示可用來指示相位係數的狀態,其中,數值1指示前一個輸出幀的相位係數加上相位步階到達1或超過1,因而重新從0開始累加新的相位週期。緩衝級值可預先設定為一預設值,此例中的預設值為0。由於緩衝級值代表幀緩衝器中尚未用來產生插補幀的輸入幀數量,因此在新的輸入幀到達時可將緩衝級值加1,並且在新的相位週期起始而相位係數到達1且重新從0開始累加時可將緩衝級值減1。在此例中,新輸入幀的到達可由輸入更新訊號來指示,而新的相位週期可由為新相位起始指示來指示。
更明確來說,若接收到新的輸入幀時,可在新的輸入幀進入幀緩衝器時將緩衝級值加1。若相位係數到達1且重新從0開始累加,意即插補幀係基於下一個輸入幀組來產生,此時由於幀緩衝器中增加了一個用來產生插補幀的輸
入幀,因此可將緩衝級值減1。
舉例來說,在索引4的輸出幀期間內,輸入幀B到達,因此緩衝級值加1;同時新的相位起始且相位係數從0開始重新累加,因此緩衝級值減1。加1和減1的運算相結合,可得到緩衝級值不變,亦即,在索引4的輸出幀期間內維持在0。同樣地,在索引6的輸出幀期間內,輸入幀C到達,因此緩衝級值加1;同時新的相位起始且相位係數回到0,因此緩衝級值減1。加1和減1的運算相結合,可得到緩衝級值維持不變且持續為0。
然而,在索引8的輸出幀期間內,輸入幀D到達的時間比預期的到達時間(即索引9)早。在此情況下,輸入更新訊號指示新的輸入幀到達,因此緩衝級值加1,同時相位係數增加到4/5但未進入新的相位週期。如此一來,緩衝級值在索引8的輸出幀期間變為1,且視訊處理器將根據緩衝級值來選擇用來產生插補幀的輸入幀組。
更明確來說,若緩衝級值等於預設值時(例如0),視訊處理器可選擇新到達的輸入幀作為當前幀並選擇前一個接收的輸入幀(早於新到達的輸入幀)作為先前幀來產生插補幀。舉例來說,在索引4的輸出幀期間內,緩衝級值等於0,新到達/接收的輸入幀B被選為當前幀且其前一幀A被選為先前幀,用來執行插補以產生插補幀。在索引6的輸出幀期間內,緩衝級值等於0,新到達/接收的輸入幀C被選為當前幀且其前一幀B被選為先前幀,用來執行插補以產生插補幀。
若緩衝級值大於預設值時(如增加到1),視訊處理器可選擇先前接
收的輸入幀作為當前幀並選擇另一個先前接收的輸入幀(其早於被選為當前幀的輸入幀)作為先前幀來產生插補幀。舉例來說,在索引8的輸出幀期間內,緩衝級值等於1,先前接收的輸入幀C被選為當前幀且其前一幀B被選為先前幀,用來執行插補以產生插補幀。
需注意的是,在下一個輸出幀期間內(即索引9),相位係數從0開始重新累加且新的相位週期開始,因此緩衝級值減為0。在此情形下,視訊處理器可選擇新到達的輸入幀D作為當前幀並選擇其前一幀C作為先前幀來產生插補幀。
在習知利用參考表來執行插補的選擇方案中,視訊處理器必定是取出新到達的輸入幀及其前一輸入幀作為幀組來執行插補,此插補方法在一輸入幀比預期時間更早到達的情況下可能產生畫面的異常回退。相較之下,根據本發明之實施例,視訊處理器可根據緩衝級值來選擇用於插補的輸入幀組,因此,所選擇的輸入幀組將會是正確的,特別是在一輸入幀提早到達的情況下,如此一來,插補幀能夠正常產生並流暢地顯示。
在一實施例中,緩衝級值亦可用來處理輸入幀延遲的情況。在緩衝級值為0的情況下(意即幀緩衝器中無任何輸入幀尚未用來執行插補),當相位係數欲超過1但沒有任何新到達的輸入幀時,視訊處理器無法取得新到達的輸入幀來執行插補。這樣的情形稱為“緩衝器下溢(buffer underflow)”,其代表預期在一輸出幀期間取用一輸入幀來產生插補幀但在該輸出幀期間尚未接收到該輸入幀。當發生緩衝器下溢時,視訊處理器仍可利用與前一輸出幀期間相同的輸入幀組來產生插補幀(即幀組維持不變),並設定相位係數強制到達最大值。
表4顯示因輸入幀D的延遲而發生緩衝器下溢的情況。在索引9的輸出幀期間內,輸入幀D預期被接收,但實際上未接收到任何輸入幀,且相位係數欲超過1而進入下一個相位週期。同時,緩衝級值等於最小值0,意即幀緩衝器內未儲存任何新的輸入幀能夠被取用為執行插補使用的新幀組,因此系統判斷發生緩衝器下溢。在此情況下,用於插補的幀組維持不變,其中,輸入幀C仍被選為當前幀而輸入幀B仍被選為先前幀。相位係數到達其最大值,如127/128,其為小於1的最大可能數值。在輸入幀D到達之前,最大相位係數的使用使得所產生的插補幀與輸入幀C相似。如此一來,可避免畫面的異常回退,且輸入幀延遲的影響可達到最小。
值得注意的是,用來執行插補的當前幀及先前幀皆取自於幀緩衝器。假設視訊處理器總共可存取N個幀緩衝器(或一個可容納N個輸入幀的幀緩衝器),若緩衝級值等於N-1時,所選擇的幀組包含有早於新到達輸入幀的前第(N-1)個輸入幀(作為當前幀)以及早於新到達輸入幀的前第N個輸入幀(作為先前幀)。後者會被新到達的輸入幀覆寫,造成視訊處理器取到錯誤的輸入幀來執行插補。
上述情形稱為“緩衝器溢出(buffer overflow)”,其代表儲存於幀緩衝器且預期被取用來產生插補幀之一先前接收的輸入幀被新到達/接收的輸入幀覆寫。為解決緩衝器溢出的問題,當緩衝級值到達N-1時(其中N為視訊處理器的幀緩衝器數量,用來指示視訊處理器的幀緩衝器具有儲存N個輸入幀的能力),可強制將緩衝級值減1,再據此選擇用來執行插補的輸入幀組。也就是說,視訊處理器可選擇儲存於幀緩衝器中但未被當前到達輸入幀覆寫的輸入幀作為幀組來執行插補,同時相位係數強制設定為從0開始重新累加。
表5顯示因輸入幀F及G的提早到達而發生緩衝器溢出的情況。在此例中,幀緩衝器數量為3,意即視訊處理器的幀緩衝器最多可儲存3個輸入幀,此幀緩衝器可包含3個緩衝器單元B0、B1及B2,如表5所示。因此,當緩衝級值到達2時會發生緩衝器溢出。
詳細來說,接收到的輸入幀依序疊代寫入緩衝器單元B0、B1及B2。在此例中,輸入幀D寫入緩衝器單元B0以覆蓋輸入幀A,輸入幀E寫入緩衝器單元B1以覆蓋輸入幀B,輸入幀F寫入緩衝器單元B2以覆蓋輸入幀C,輸入幀G寫入緩衝器單元B0以覆蓋輸入幀D。在索引12及13的輸出幀期間內,輸入幀F及G在早於預期的時間快速到達,且緩衝級值在輸入幀G到達時欲增加至2,此時判斷發生緩衝器溢出且緩衝器單元B0中的輸入幀D被輸入幀G覆寫。在此情況下,緩衝級值從2減為1,且視訊處理器基於減少後的緩衝級值1來選擇幀組,其選擇輸入幀F作為當前幀並選擇輸入幀E作為先前幀來執行插補。同時,根據新相位
起始指示,相位係數被設定強制進入新的相位週期並從0開始重新累加。接著,後續輸入幀H的到達恢復為正常時序,因此,視訊處理器可根據緩衝級值以正常序列來選擇幀組,且相位係數以正常的相位步階2/5持續累加。
在相同的範例中,若用於插補的幀組係在未考慮緩衝器溢出的情況下進行選擇,則在索引13的輸出幀期間內,視訊處理器預計取用儲存於緩衝器單元B1的輸入幀E作為當前幀並預計取用儲存於緩衝器單元B0的輸入幀D作為先前幀來執行插補(其中相位係數為4/5)。然而,儲存於緩衝器單元B0的輸入幀D已被提早到達的輸入幀G覆寫而造成溢出,導致其取到錯誤的輸入幀來執行插補。相較之下,本發明提出的緩衝器溢出判斷及其相關的操作方法可確保選到適合的輸入幀作為幀組來執行插補,使得輸出的畫面更加流暢。
根據緩衝級值,視訊處理器可選擇適合的輸入幀來執行插補,而在有限的幀緩衝器數量之下,視訊處理器可在緩衝器溢出或下溢發生時採取適當的對策。緩衝器溢出或下溢的判斷可在每一輸出幀期間內動態執行,因此,緩衝級值應隨時更新,以可適性地選擇用於插補的幀組。即使在輸入不規則的情況較嚴重而輸入幀持續快速到達或者長時間無任何輸入幀到達的情況下,亦可在緩衝器溢出或下溢發生時良好地處理幀插補。上述方法使得視訊處理器能夠選擇最佳的幀組來執行插補,可確保輸出的畫面不會異常回退。另外,為使輸出的畫面更加流暢,本發明提出了一種可在不規則輸入發生時調整或修改相位步階的新式方法。
第3圖為本發明實施例一影像處理流程30之流程圖。影像處理流程30可實現於一視訊處理器,如第1圖中的視訊處理器106。如第3圖所示,影像處理
流程30包含有下列步驟:
步驟300:開始。
步驟302:接收一系列輸入幀。
步驟304:根據該系列輸入幀之一輸入幀率與視訊處理器所輸出的一系列輸出幀之一輸出幀率的相對關係,判斷一預期輸入間距值。
步驟306:判斷一實際輸入間距值是否不同於預期輸入間距值。
步驟308:當判斷實際輸入間距值不同於預期輸入間距值時,計算一相位步階並取得相位步階,該相位步階不同於根據輸入幀率與輸出幀率的相對關係來決定的一正常相位步階。
步驟310:利用計算出的相位步階,根據一所選幀組來產生一插補幀,作為該系列輸出幀中的一輸出幀進行輸出。
步驟312:結束。
根據影像處理流程30,視訊處理器可接收一系列輸入幀(步驟302)。在一實施例中,該系列輸入幀可由視訊處理器從一前端裝置接收,前端裝置可以是例如第1圖中的視訊提供單元12。
對於所接收的每一輸入幀而言,視訊處理器可產生一預期輸入間距值(下文簡稱為“預期值”)及一實際輸入間距值(下文簡稱為“實際值”)。詳細來說,預期值係根據視訊處理器所接收的輸入幀之輸入幀率與視訊處理器所輸出的輸出幀之輸出幀率的相對關係來進行判斷(步驟304)。舉例來說,在30赫茲的輸入視訊轉換為60赫茲的輸出視訊之應用中,每一輸入幀的預期值皆為2;在24赫茲的輸入視訊轉換為60赫茲的輸出視訊之應用中,一系列輸入幀的預期值為3和2交替。
除此之外,視訊處理器可根據輸入幀的輸入時序來判斷實際值,並持續監看實際值以判斷每一實際值相同或不同於對應的預期值(步驟306)。若輸入幀是以輸入序列的正常時序到達,實際值將持續相同於對應的預期值;若一輸入幀早於或晚於其預期的到達時間到達,則不規則的輸入時序將造成實際值不同於預期值。
當實際值相同於預期值的情況下,可採用正常相位步階。舉例來說,在24赫茲的輸入視訊轉換為60赫茲的輸出視訊之應用中,視訊處理器可採用相位步階2/5;而在30赫茲的輸入視訊轉換為60赫茲的輸出視訊之應用中,視訊處理器可採用相位步階1/2。另一方面,當視訊處理器判斷實際值不同於預期值的情況下,可因應不規則的輸入時序來重新計算相位步階(步驟308),所計算出的相位步階應不同於根據輸入幀率與輸出幀率的相對關係來決定的正常相位步階。視訊處理器進而利用計算出的相位步階,根據所選幀組(其可根據緩衝級值來決定,如上述實施例之說明)來產生一插補幀,作為一輸出幀加以輸出(步驟310)。換句話說,在正常輸入時序之下,相位步階具有正常值;而當不規則輸入時序發生時,相位步階需重新計算而具有不同於其正常值的另一數值。相位步階的數值可根據輸入幀的實際輸入時序來動態計算,如後詳述。
表6列出了連續多個輸出幀期間內接收的一系列輸入幀所對應的預期值及實際值。表6顯示輸入幀的輸入時序,並包含各項參數,如輸入更新訊號、用來產生插補幀的當前幀及先前幀(即幀組)、以及用於插補的相位係數。這些參數相同於前述表格的內容,存此不詳述。
表6另列出了一幀計數值,其可用來計算從接收到先前輸入幀之後的輸出幀期間的數量。幀計數值係在新的輸入幀到達時重置為0,並接著開始計數,以該新到達的輸入幀作為先前輸入幀。幀計數值可到達的一數值,其代表新到達的當前輸入幀與先前輸入幀之間的輸出幀期間的數量。
因此,基於預期接收的輸入幀及實際接收的輸入幀,可利用幀計數值的計數結果來分別計算預期值及實際值。更明確來說,預期值可代表從先前輸入幀的接收到當前輸入幀的接收之間預期經過的輸出幀期間的數量。在輸入幀率為24赫茲而輸出幀率為60赫茲的實施例中,預期值為3和2交替。舉例來說,對應輸入幀A的預期值為2,對應輸入幀B的預期值為3,對應輸入幀C的預期值為2,並以此類推。
實際值可代表從先前輸入幀的接收到當前輸入幀的接收之間實際經過的輸出幀期間的數量。因此,實際值會在新的輸入幀到達時更新。如表6所示的實施例中,輸入幀遵循正常的時序到達,因此實際值皆相同於預期值。在此情況下,視訊處理器可利用依據正常相位步階(即2/5)計算的相位係數來執行插補,此正常相位步階係根據24赫茲的輸入幀率與60赫茲的輸出幀率的相對關係來決定。
表7顯示本發明實施例因輸入幀的不規則輸入時序而造成實際值不同於預期值的情況。在表7中,輸入幀F在索引13的輸出幀期間提早到達,造成對應輸入幀F的實際值不同於預期值。更明確來說,根據24赫茲對60赫茲的轉換應用所對應的輸入時序,輸入幀F的預期值為3,但提早到達的輸入幀F使得輸入幀F的實際值為2。當視訊處理器偵測到實際值不同於預期值之後,可重新計算相位步階並得到相位步階等於9/20,接著根據重新計算出的相位步階9/20來產生後續的相位係數。
在採用重新計算的相位步階9/20之數個輸出幀期間之後,視訊處理器可得知相位係數回到0,且輸入幀回復成遵循正常時序。因此,視訊處理器重新開始利用正常相位步階2/5,以適合的幀組來繼續執行插補。
表7另列出了二個參數:剩餘輸入幀數及剩餘輸出幀數。剩餘輸入幀數代表在根據輸入幀率與輸出幀率的相對關係所決定的週期內,用來產生插補幀的剩餘輸入幀的數量;而剩餘輸出幀數代表在相同週期內,欲產生並輸出的剩餘輸出幀的數量。換句話說,剩餘輸入幀數是指此週期的剩餘輸出幀期間內欲用來執行插補的輸入幀,而剩餘輸出幀數是指此週期的剩餘輸出幀期間內欲輸出的輸出幀。在輸入幀率為24赫茲而輸出幀率為60赫茲的實施例中,每一週期包含有5個輸出幀期間。因此,在輸入幀正常到達的週期當中,剩餘輸入幀數隨著新相位起始指示從2開始倒數(新相位起始指示代表相位進入新的相位週期且用於插補的幀組被更新),且剩餘輸出幀數在一輸出幀被輸出的每一輸出幀期間從5開始倒數。
當輸入幀發生不規則到達時,視訊處理器可根據剩餘輸入幀數及剩餘輸出幀數來計算相位步階。舉例來說,在索引13的輸出幀期間內,視訊處理器得知實際值不同於預期值,進而開始執行重新計算相位步階的程序。視訊處理器可根據輸入幀、輸出幀及相位係數的當前狀態,先更新剩餘輸入幀數及剩餘輸出幀數的數值。
更明確來說,視訊處理器可將剩餘輸入幀數加1以產生一更新剩餘輸入幀數,並將當前的實際值(即實際輸入間距值)加上剩餘輸出幀數以產生一更新剩餘輸出幀數。在表7的實施例中,上述運算係在索引14的輸出幀期間進行,其中,剩餘輸入幀數加上1,而剩餘輸出幀數加上2,其為對應於提早到達的輸入幀F的實際值。
因此,相位步階(Phase_Step)可由更新剩餘輸入幀數
(Rest_Input_Frame_Cnt)減去當前的相位係數(Present_Phase)再除以更新剩餘輸出幀數(Rest_Output_Frame_Cnt)而得,其公式如下:
值得注意的是,正常相位步階基本上是根據輸入幀率與輸出幀率的相對關係來決定的。透過相位步階,運動估計與運動補償操作使得一或多個輸入幀的影像資訊可依據其幀率平均分布在多個輸出幀上,進而產生具有較高幀率且流暢的輸出畫面。在本發明之實施例中,相位步階的重新計算亦符合相似的概念,亦即,不規則到達的輸入幀的影像資訊亦應平均分布在多個輸出幀上,使得不規則到達對輸出視訊造成的影響最小化,而基於剩餘輸入幀數及剩餘輸出幀數的計算有助於達到此目的。
舉例來說,在表7的實施例中,輸入幀F在索引13的輸出幀期間提早到達,因此,用來產生插補幀的相位係數應加速滾動以因應提早到達的輸入幀F,因而應採用較大的相位步階。在此例中,所取得的相位步階等於9/20,其略大於正常相位步階2/5。詳細來說,剩餘輸入幀數係用來監看輸入的狀態,剩餘輸入幀數加1表示下一個輸入幀G被列入考慮以重新計算相位係數。接著,更新剩餘輸入幀數扣除當前相位係數(即1/5),意即已通過的相位值被排除在計算之外,僅留下剩餘相位值。剩餘輸出幀數係用來監看輸出的狀態,對應地,作為用來計算相位步階的公式的分母,剩餘輸出幀數需加上實際值(即2)以產生更新剩餘輸出幀數,其等於4,意即對應於輸入幀G的下一個相位週期被列入考慮以分散不規則輸入的影響。在此例中,相位步階可計算並取得如下:
在此情況下,此相位步階可用於後續的4個輸出幀期間,其係由更新剩餘輸出幀數的數值4來指示。換句話說,所計算出來的相位步階持續有效,直到剩餘輸出幀數趨向0並回到其最大值5為止。舉例來說,在表7的實施例中,相位步階9/20用於索引15~18的4個輸出幀期間,且相位係數將回到0。接著,由於後續的輸入幀皆以正常時序接收,因此視訊處理器重新開始利用正常相位步階2/5來執行插補。
在此例中,不規則的輸入幀F在索引13的輸出幀期間到達,視訊處理器接著在索引14的下一個輸出幀期間更新剩餘輸入幀數及剩餘輸出幀數,以計算並取得相位步階。此計算相位步階接著開始用於索引15的下一個輸出幀期間。基於此相位步階計算的相關規則,可將不規則輸入的影響平均分散到多個輸出影像幀,使得輸出視訊更加流暢且不規則輸入的影響達到最小。除此之外,相位步階及其相關的相位係數可根據輸入幀的時序而動態決定,因此,在任意的不規則情況之下皆能夠取得適合的相位步階。換句話說,計算相位步階的方法可應用於各種不規則的情境,例如輸入幀提早到達以及輸入幀延遲。用來計算相位步階的參數使得相位係數可在相位調整期間結束時收斂到0。如此一來,後續的相位係數仍可根據正常相位步階來正常地持續滾動。
除此之外,動態計算相位步階的方法亦可應用於更複雜的情況。舉例來說,若相位步階係依據第一個不規則的輸入幀來進行計算或調整,且第二個不規則的輸入幀在上述相位調整期間內到達,則相位步階另可重新計算以因應第二個不規則的輸入幀,同時相位係數將遵循新計算出的相位步階,直到輸入幀回到原先的規律且相位係數回復正常為止。
如上所述,傳統的相位步階係藉由根據輸入幀率及輸出幀率查找參考表來決定。即使在不規則輸入的問題發生且輸入幀以不規則的時序到達的情況下,參考表僅能夠應用於少數典型的情況。相較之下,本發明之影像處理方法可動態監看輸入狀態(如監看實際值及預期值)並根據參數(如剩餘輸入幀數及剩餘輸出幀數)來對應計算相位步階。因此,視訊處理器可在不同情境之下計算並取得適合的相位步階,其不限於參考表可預測的情況。在此情形下,本發明可處理更複雜的輸入不規則情況,優於傳統上使用參考表的方法。
值得注意的是,本發明之目的在於提出一種可用來處理不規則輸入的影像處理方法以及相關的視訊處理器。本領域具通常知識者當可據以進行修飾或變化,而不限於此。舉例來說,在上述實施例中,輸出幀率為60赫茲,且輸入幀是以24赫茲且無規律(cadence)或下拉(pulldown)的情況接收。在另一實施例中,本發明之影像處理方法亦可應用於具有規律或下拉的輸入幀,其可以60赫茲的幀率接收,如輸入序列A1、A2、A3、B1、B2...。舉例來說,在一實施例中,可利用幀差值來推算幀計數值,進而判斷實際值,因此,視訊處理器可透過相同方式來判斷不規則輸入和計算相位步階。
同樣地,具有規律的輸入幀亦可應用於根據緩衝級值來選擇用於插補的幀組之實施例。在一示例性實施例中,重複的輸入幀可寫入相同的緩衝器單元。舉例來說,輸入幀A2係用來覆寫其前一個輸入幀A1,且輸入幀A3係用來覆寫其前一個輸入幀A2,下一個輸入幀B1則寫入另一個緩衝器單元。根據上述將輸入幀寫入幀緩衝器的規則,可透過相同方式來計算緩衝級值,並據以選擇用來執行插補的幀組。緩衝器溢出和緩衝器下溢亦可利用相同方式根據緩衝級值來進行判斷。
在一實施例中,選擇用來執行插補的幀組之方法以及計算相位步階之方法可共同執行以實現完整的影像處理流程。第4圖為本發明實施例一影像處理流程40之流程圖。影像處理流程40可以是幀組選擇以及相位步階計算的實施方式的結合,其亦可實現於一視訊處理器,如第1圖中的視訊處理器106。如第4圖所示,影像處理流程40包含有下列步驟:
步驟402:接收一輸入幀。
步驟404:計算相位步階。
步驟406:根據相位步階來計算相位係數。
步驟408:根據儲存於幀緩衝器的輸入幀來計算緩衝級值。
步驟410:根據緩衝級值來偵測緩衝器溢出及緩衝器下溢。
步驟412:根據緩衝級值以及緩衝器溢出和緩衝器下溢的偵測結果,選擇用來執行插補的幀組並調整相位係數。
步驟414:偵測不規則的輸入幀。
步驟416:若輸入幀不規則,則動態計算相位步階。
步驟418:若輸入幀正常輸入,則採用正常相位步階。
步驟420:執行運動估計與運動補償以產生一插補幀。
步驟422:輸出插補幀作為一輸出幀。
需注意的是,本發明之影像處理方法可在每一輸出幀期間內動態進行,因此影像處理流程40代表視訊處理器在一輸出幀期間內的操作。首先,視訊處理器可接收一輸入幀並將輸入幀寫入幀緩衝器(步驟402)。輸入幀可在部分輸出幀期間內接收(無下拉的情況)或在每一輸出幀期間內接收(具有下拉的情況)。接著,視訊處理器根據輸入幀率與輸出幀率的相對關係來計算正常相
位步階(步驟404)。因此,透過相位步階的累加可計算相位係數,其中,當前相位係數等於先前相位係數加上相位步階(步驟406)。
接著,視訊處理器根據儲存於幀緩衝器的輸入幀的狀態來計算緩衝級值(步驟408)。更明確來說,緩衝級值可在一輸入幀到達/接收時加1,並且在新的相位週期開始時減1。根據動態改變的緩衝級值,視訊處理器可偵測緩衝器溢出及緩衝器下溢是否發生(步驟410)。緩衝器溢出及下溢代表輸入幀及插補幀(即輸出幀)處於不平衡的狀態。緩衝器溢出表示當輸入幀到達的速度相較於插補幀的產生更快使得預期用於插補的一先前輸入幀被新到達的輸入幀覆寫。緩衝器下溢表示當輸入幀的延遲過長使得預期用於當前插補的輸入幀尚未被接收並寫入幀緩衝器。
接下來,視訊處理器根據緩衝級值來選擇用來執行插補的幀組,若上述偵測結果指示緩衝器溢出或下溢發生,則可對相位係數進行調整(步驟412)。當緩衝器溢出發生時,用來執行插補的幀組可改為採用所儲存的輸入幀中尚未被當前到達的輸入幀覆寫者,且相位係數強制設定為起始新的相位週期。當緩衝器下溢發生時,視訊處理器取用與前一輸出幀期間相同的輸入幀組來執行插補,且相位係數強制設定為其最大值。
視訊處理器接著偵測並判斷輸入幀的接收是否正常或不規則(步驟414)。若輸入幀未在預期的輸出幀期間內到達則代表發生不規則輸入,可透過實際值與預期值的比較來得知。若判斷輸入幀的輸入正常(即在預期的輸出幀期間到達),視訊處理器採用正常相位步階來計算下一個輸出幀期間的相位係數(步驟418)。若判斷輸入幀的輸入不規則(即在非預期的輸出幀期間到達),視
訊處理器可動態調整並計算相位步階以用於計算下一個輸出幀期間的相位係數(步驟416)。相位步階可參考剩餘輸入幀數及剩餘輸出幀數來進行計算。
接下來,基於上述選擇方案所取得的幀組以及利用基於上述程序計算出的相位步階及相位係數,視訊處理器可執行運動估計與運動補償以產生插補幀(步驟420),插補幀可作為一輸出幀以輸出至顯示面板(步驟422)。
綜上所述,本發明提出了一種可用於視訊處理器的影像處理方法,用來處理不規則輸入的問題。在一實施例中,視訊處理器可監看緩衝級值,緩衝級值指示幀緩衝器所儲存的輸入幀的狀態。根據緩衝級值,視訊處理器可選擇適合的輸入幀作為幀組來執行插補,並判斷是否發生緩衝器溢出或緩衝器下溢,進而採取適當的對策。在一實施例中,視訊處理器可偵測輸入幀的輸入時序以判斷輸入幀是否遵循正常時序。若不規則輸入發生時,視訊處理器可據以計算相位步階,使得不規則輸入的影響平均分配到多個後續的輸出幀,進而使輸出畫面流暢且不規則輸入的影響達到最小。
除此之外,在一實施例中,視訊處理器可先根據幀緩衝器的狀態來判斷並處理緩衝器溢出或緩衝器下溢的情況,以決定適合的幀組,其中,當緩衝器溢出或下溢發生時亦應良好控制相位係數。視訊處理器可接著判斷不規則輸入是否發生。若不規則輸入未造成緩衝器溢出或下溢,意即此不規則輸入可透過現有的幀緩衝器來處理,可採用本發明之相位步階的計算方案來產生適合的相位步階及相位係數。在此情況下,藉由動態決定用來執行插補的幀組並計算相位步階同時考慮幀緩衝器的狀態,本發明之視訊處理器可處理各種不規則的情境。因此,針對每一輸出幀期間內執行的運動估計與運動補償操作,視訊
處理器可從幀緩衝器中選出最佳的幀組,同時計算並取得適合的相位步階。如此一來,視訊處理器在任何不規則輸入的情境之下皆能夠產生流暢的輸出畫面,且不規則輸入的影響可達到最小。
以上所述僅為本發明之較佳實施例,凡依本發明申請專利範圍所做之均等變化與修飾,皆應屬本發明之涵蓋範圍。
20:影像處理流程
200~208:步驟
Claims (19)
- 一種用於視訊處理器的操作方法,包含有:該視訊處理器接收一系列輸入幀;該視訊處理器根據該系列輸入幀來計算一緩衝級值(buffer stage value),其中,該緩衝級值對應於該視訊處理器中的一幀緩衝器所儲存的輸入幀的狀態;以及該視訊處理器根據該緩衝級值,從該幀緩衝器所儲存的該輸入幀中選擇一幀組用以產生一插補幀,作為該視訊處理器所輸出的一輸出幀。
- 如請求項1所述之方法,其中該緩衝級值代表儲存於該幀緩衝器但尚未用來產生該插補幀的該輸入幀的數量。
- 如請求項1所述之方法,其中該緩衝級值在該系列輸入幀中新的一輸入幀到達時加1,且該緩衝級值在新的一相位週期開始時減1。
- 如請求項1所述之方法,其中從該幀緩衝器所儲存的該輸入幀中選擇該幀組用以產生該插補幀之步驟包含有:當該緩衝級值等於一預設值時,該視訊處理器選擇該系列輸入幀中的一新到達輸入幀作為一當前幀,並選擇該系列輸入幀中的一先前接收輸入幀作為一先前幀,用以產生該插補幀。
- 如請求項4所述之方法,其中該預設值為0。
- 如請求項4所述之方法,其中從該幀緩衝器所儲存的該輸入幀中 選擇該幀組用以產生該插補幀之步驟另包含有:當該緩衝級值大於該預設值時,該視訊處理器選擇該系列輸入幀中的一第一先前接收輸入幀作為該當前幀,並選擇該第一先前接收輸入幀之前的一第二先前接收輸入幀作為該先前幀,用以產生該插補幀。
- 如請求項1所述之方法,另包含有:該視訊處理器根據該緩衝級值來判斷是否發生一緩衝器下溢(buffer underflow),其中,該緩衝器下溢代表該系列輸入幀中預期在一輸出幀期間內被取用來產生該插補幀的一輸入幀在該輸出幀期間尚未被接收。
- 如請求項7所述之方法,其中當該視訊處理器判斷該緩衝器下溢發生時,一相位係數到達一最大值,且用來產生該插補幀的該幀組維持不變。
- 如請求項1所述之方法,另包含有:該視訊處理器根據該緩衝級值來判斷是否發生一緩衝器溢出(buffer overflow),其中,該緩衝器溢出代表該系列輸入幀中儲存於該幀緩衝器且預期被取用來產生該插補幀的一先前接收輸入幀被該系列輸入幀中的一新接收輸入幀覆寫。
- 如請求項9所述之方法,其中根據該緩衝級值來判斷是否發生該緩衝器溢出之步驟包含有:當該緩衝級值等於該視訊處理器的一幀緩衝器數減1時,該視訊處理器判斷發生該緩衝器溢出。
- 如請求項9所述之方法,其中當該視訊處理器判斷發生該緩衝器溢出時,該緩衝級值強制減1,接著該視訊處理器根據該緩衝級值來選擇該幀組。
- 一種用於視訊處理器的操作方法,包含有:該視訊處理器接收一系列輸入幀;該視訊處理器根據該系列輸入幀之一輸入幀率與該視訊處理器所輸出的一系列輸出幀之一輸出幀率的相對關係,判斷一預期輸入間距值;該視訊處理器判斷一實際輸入間距值是否不同於該預期輸入間距值;當該視訊處理器判斷該實際輸入間距值不同於該預期輸入間距值時,該視訊處理器計算一相位步階並取得該相位步階,該相位步階不同於根據該輸入幀率與該輸出幀率的相對關係來決定的一正常相位步階;以及該視訊處理器利用計算出的該相位步階,根據一所選幀組來產生一插補幀,作為該系列輸出幀中的一輸出幀進行輸出。
- 如請求項12所述之方法,其中該預期輸入間距值代表從該系列輸入幀中一先前輸入幀的接收到該系列輸入幀中一當前輸入幀的接收之期間內預期經過的輸出幀期間的數量,且該實際輸入間距值代表從該先前輸入幀的接收到該當前輸入幀的接收之期間內實際經過的輸出幀期間的數量。
- 如請求項12所述之方法,其中計算該相位步階之步驟包含有:該視訊處理器根據一剩餘輸入幀數及一剩餘輸出幀數來計算該相位步階,其中,該剩餘輸入幀數代表根據該輸入幀率與該輸出幀率的相對關係來決定的一週期內,用來產生該插補幀的剩餘輸入幀的數量,且該剩餘輸出 幀數代表該週期內剩餘的輸出幀的數量。
- 如請求項14所述之方法,其中當該視訊處理器判斷該實際輸入間距值不同於該預期輸入間距值時,該視訊處理器將該剩餘輸入幀數加1以產生一更新剩餘輸入幀數,且當前的該實際輸入間距值加入該剩餘輸出幀數以產生一更新剩餘輸出幀數。
- 如請求項15所述之方法,其中該相位步階之計算方式為,將該更新剩餘輸入幀數減去一當前相位係數之後再除以該更新剩餘輸出幀數。
- 如請求項14所述之方法,其中計算出的該相位步階持續有效,直到該剩餘輸出幀數趨向於0且回復到一最大值為止。
- 如請求項12所述之方法,其中不同於該預期輸入間距值的該實際輸入間距值指示該系列輸入幀中的一輸入幀具有不規則的輸入時序。
- 如請求項12所述之方法,另包含有:當該視訊處理器判斷該實際輸入間距值與該預期輸入間距值相同時,該視訊處理器採用該正常相位步階。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US17/889,368 US11871146B1 (en) | 2022-08-16 | 2022-08-16 | Video processor for handling irregular input |
US17/889,368 | 2022-08-16 |
Publications (2)
Publication Number | Publication Date |
---|---|
TW202409960A TW202409960A (zh) | 2024-03-01 |
TWI844376B true TWI844376B (zh) | 2024-06-01 |
Family
ID=
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20190130580A1 (en) | 2017-10-26 | 2019-05-02 | Qualcomm Incorporated | Methods and systems for applying complex object detection in a video analytics system |
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20190130580A1 (en) | 2017-10-26 | 2019-05-02 | Qualcomm Incorporated | Methods and systems for applying complex object detection in a video analytics system |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4291796B2 (ja) | ディスプレイ装置 | |
WO2016199477A1 (ja) | 画像処理装置および画像処理方法 | |
JP2004240317A (ja) | 表示方法、表示装置およびそれに利用可能なデータ書込回路 | |
JP2009276500A (ja) | 表示装置、プログラムおよび情報記憶媒体 | |
JP2009021868A (ja) | 映像処理装置、映像処理方法、及びプログラム | |
CN113891155A (zh) | 视频播放档位确定方法、视频播放方法及相关装置 | |
TWI844376B (zh) | 用來處理視訊處理器之不規則輸入的方法 | |
US8665281B2 (en) | Buffer management for real-time streaming | |
JP2008011251A (ja) | 液晶表示装置 | |
JP5633355B2 (ja) | データ転送装置、データ転送方法、及び半導体装置 | |
EP1424851A2 (en) | Motion detection apparatus and method | |
WO2008017227A1 (fr) | Procédé et appareil permettant de réaliser une conversion de fréquence de trames | |
TW202409960A (zh) | 用來處理視訊處理器之不規則輸入的方法 | |
TWI812483B (zh) | 運動估計與運動補償方法及其視訊處理器 | |
US11032511B1 (en) | Frame interpolation method and related video processor | |
JP5740949B2 (ja) | データ転送装置、データ転送方法、及び半導体装置 | |
JP7433341B2 (ja) | 周波数変換表示装置用のフリッカ調整方法及び周波数変換表示装置 | |
JP2020047995A (ja) | 表示装置、表示装置の制御方法、およびプログラム | |
US11503247B1 (en) | Method of MEMC and related video processor | |
JP2004531943A (ja) | 画像の流れの処理方法 | |
JP4316217B2 (ja) | 画像処理装置 | |
JP2010252117A (ja) | フレームレート変換装置、フレームレート変換方法、動画像表示装置、フレームレート変換プログラムおよび記録媒体 | |
TWI842311B (zh) | 影像亮度調整方法及其裝置 | |
JP7318123B2 (ja) | 適応的バッファを使用してビデオコンテンツをストリーミングするための方法、システム、および媒体 | |
JP2006099473A (ja) | バス制御装置 |