TWI767240B - 圖像處理裝置及圖像處理方法 - Google Patents

圖像處理裝置及圖像處理方法 Download PDF

Info

Publication number
TWI767240B
TWI767240B TW109117555A TW109117555A TWI767240B TW I767240 B TWI767240 B TW I767240B TW 109117555 A TW109117555 A TW 109117555A TW 109117555 A TW109117555 A TW 109117555A TW I767240 B TWI767240 B TW I767240B
Authority
TW
Taiwan
Prior art keywords
quantization parameter
unit
image
predicted
quantization
Prior art date
Application number
TW109117555A
Other languages
English (en)
Other versions
TW202034696A (zh
Inventor
佐藤數史
Original Assignee
日商新力股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日商新力股份有限公司 filed Critical 日商新力股份有限公司
Publication of TW202034696A publication Critical patent/TW202034696A/zh
Application granted granted Critical
Publication of TWI767240B publication Critical patent/TWI767240B/zh

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • G06T9/004Predictors, e.g. intraframe, interframe coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • H04N19/126Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Abstract

本技術係關於一種可提高對量化參數之編碼效率之圖像處理裝置及方法。該圖像處理裝置包含:預測量化參數設定部,其係使用設定於位於作為編碼處理之對象之當前編碼單元之周邊的複數個周邊編碼單元之複數個量化參數,而設定對上述當前編碼單元之預測量化參數;及差分量化參數設定部,其係設定表示設定於上述當前編碼單元之量化參數、與藉由上述預測量化參數設定部而設定之上述預測量化參數之差分值之差分量化參數。本揭示可應用於例如圖像處理裝置。

Description

圖像處理裝置及圖像處理方法
本揭示係關於一種圖像處理裝置及方法,特別是關於可提高相對量化參數之編碼效率之圖像處理裝置及方法。
近年來,將圖像資訊作為數位處理,其時,以效率較高之資訊之傳送、儲存為目的,利用圖像資訊特有之冗長性,依據藉由離散餘弦轉換等之正交轉換與動態補償而壓縮之MPEG(Moving Picture Experts Group:動畫專家組)等之方式之裝置,正在廣播局等之資訊發佈、及一般家庭之資訊接收之雙方中普及。 特別是,MPEG2(ISO(International Organization for Standardization:國際標準化機構)∕IEC(International Electrotechnical Commission:國際電工技術委員會) 13818-2)被定義為通用圖像編碼方式,且以網羅跳躍掃描圖像及依序掃描圖像之雙方、以及標準解析度圖像及高精密圖像之標準,目前廣泛使用於專業用途及消費型用途之廣泛之應用程式中。藉由使用MPEG2壓縮方式,例如若為具有720×480像素之標準解析度之跳躍掃描圖像,則分配4~8 Mbps之編碼量(位元率),若為具有1920×1088像素之高解析度之跳躍掃描圖像,則分配18~22 Mbps之編碼量,藉此可實現較高之壓縮率與良好之畫質。 MPEG2雖主要以適合廣播用之高畫質編碼為對象,但尚未對應低於MPEG1之編碼量(位元率),即更高之壓縮率之編碼方式。可認為,基於便攜式終端之普及,今後如此之編碼方式之需求會增大,與此對應已實施MPEG4編碼方式之標準化。關於圖像編碼方式,該規格於1998年12月,作為ISO∕IEC 14496-2由國際標準予以承認。 再者,近年來,以當初電視會議用之圖像編碼為目的,稱為H.26L(ITU-T(International Telecommunication Union Telecommunication Standardization Sector:國際電信聯盟電信標準化部門)Q6∕16 VCEG(Video Coding Expert Group:視訊編碼專家組))之標準之規格化正不斷進展。眾所周知,H.26L與MPEG2或MPEG4此類先前之編碼方式相比,雖因其編碼·解碼而要求較多之運算量,但會實現更高之編碼效率。又,目前,作為MPEG4之活動之一環,以該H.26L為基礎,且亦導入在H.26L中不予以支持之功能,而實現更高之編碼效率之標準化正作為Joint Model of Enhanced-Compression Video Coding(增強壓縮視訊編碼之聯合模型)而進行。 作為標準化之排程,於2003年3月,於H.264及MPEG-4 Part10(Advanced Video Coding:進階視訊編碼,以下記為AVC)此名義之基礎上成為國際標準。 再者,作為其擴展,亦包含RGB或4:2:2、4:4:4之類業務用所需之編碼工具、與MPEG2中規定之8×8DCT或量化矩陣之FRExt(Fidelity Range Extension:保真度值域擴大)之標準化於2005年2月完成,藉此,成為利用AVC亦可良好地表現包含於電影中之影片雜訊之編碼方式,從而進展至使用於藍光光碟等之廣泛之應用程式中。 然而,最近,欲壓縮高畫質圖像之4倍之4096×2048像素左右之圖像、或在如網際網路之受限之傳送電容之環境下欲發佈高畫質圖像此類對於更高壓縮率編碼之需求正在高漲。因此,在上述之ITU-T系統下之VCEG中,繼續進行關於改善編碼效率之研究。 但,將巨區塊尺寸設為16像素×16像素,對於如成為下一代編碼方式之對象之UHD(Ultra High Definition:超高清晰度;4000像素×2000像素)之類較大之畫框並非最佳。因此,有如圖4所示般將巨區塊尺寸設為64×64像素、32像素×32像素之大小之提案(例如,參照非專利文獻1)。 即,在非專利文獻1中,藉由採用階層構造,關於16×16像素區塊以下,一面與目前之AVC中之巨區塊保持互換性,一面定義更大之區塊作為其超集。 非專利文獻1為相對框間片段應用擴展之巨區塊之提案,除此之外,亦有將擴展之巨區塊應用於片內之提案(例如,參照非專利文獻2)。 再者,亦有藉由Coding Unit(編碼單元)此概念而定義擴展巨區塊之提案(例如參照非專利文獻3)。 Largest Coding Unit(最大編碼單元)及Smallest Coding Unit(最小編碼單元)之大小,在圖像壓縮資訊中、序列參數集中得以指定。 [先前技術文獻] [非專利文獻] [非專利文獻1] Peisong Chenn,Yan Ye,Marta Karczewicz,「Video Coding Using Extended Block Sizes」, COM16-C123-E, Qualcomm Inc [非專利文獻2] Sung-Chang Lim, Hahyun Lee, Jinho Lee, Jongho Kim, Haechul Choi, Seyoon Jeong, Jin Soo Choi, 「Intra coding using extended block size」, VCEG-AL28, 2009年7月 [非專利文獻3] Thomas Wiegand, Woo-Jin Han, Benjamin Bross, Jens-Rainer Ohm, Gary J. Sullivan, 「Working Draft 1 of High-Efficiency Video Coding」, JCTVC-C403, Joint Collaborative Team on Video Coding (JCT-VC)of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG113rd Meeting: Guangzhou, CN, 7-15 October, 2010
[發明所欲解決之問題] 然而,量化參數QP雖將與使用於上一個區塊之編碼、解碼之量化參數之差分進行編碼,但,特別是以適應量化之方式使量化參數在畫面內動態變化之情形,有使圖像壓縮資訊中之資訊量增大之虞。 本揭示係鑒於如此之狀況而完成者,其目的在於可使相對量化參數之編碼效率提高。 [解決問題之技術手段] 本揭示之一態樣之圖像處理裝置,其包含:預測量化參數設定部,其係使用設定於位於作為編碼處理之對象之當前編碼單元之周邊的複數個周邊編碼單元之複數個量化參數,而設定對上述當前編碼單元之預測量化參數;差分量化參數設定部,其係設定表示設定於上述當前編碼單元之量化參數、與藉由上述預測量化參數設定部而設定之上述預測量化參數之差分值之差分量化參數;編碼部,其係將上述圖像資料經量化之量化資料編碼,而產生位元串流;及傳送部,其係傳送藉由上述差分量化參數設定部而設定之上述差分量化參數與藉由上述編碼部而產生之上述位元串流。 上述預測量化參數設定部可對設定於上述複數個周邊編碼單元中之複數個量化參數應用預測運算,而設定上述預測量化參數。 上述預測量化參數設定部可對設定於上述複數個周邊編碼單元中之複數個量化參數應用中位數運算,而將上述預測量化參數設定作為設定於上述複數個周邊編碼單元中之複數個量化參數之中值。 上述預測量化參數設定部可在上述複數個周邊編碼單元皆為可用之狀態之情形時,對設定於上述複數個周邊編碼單元中之複數個量化參數應用中位數運算。 上述預測量化參數設定部可對設定於上述複數個周邊編碼單元中之複數個量化參數應用平均運算,而將上述預測量化參數設定作為設定於上述複數個周邊編碼單元中之複數個量化參數之平均值。 上述預測量化參數設定部可在藉由上述判定部判定上述周邊編碼單元之一部分為可用之狀態之情形時,對設定於上述複數個周邊編碼單元中之複數個量化參數應用平均運算。 上述預測量化參數設定部可對設定於藉由上述選擇部所選擇之複數個周邊編碼單元中之複數個量化參數應用加權平均運算,而將上述預測量化參數設定作為設定於上述複數個周邊編碼單元中之複數個量化參數之加權平均值。 上述預測量化參數設定部可以對與上述當前編碼單元之尺寸相同之尺寸的周邊編碼單元加大權重之方式,設定上述加權平均運算。 上述預測量化參數設定部可以周邊編碼單元之尺寸越大則越加大權重之方式,設定上述加權平均運算。 上述複數個周邊編碼單元可以編碼結束之編碼單元為對象,且包含鄰接於上述當前編碼單元之左側之編碼單元、鄰接於上述當前編碼單元之上側之編碼單元、及鄰接於上述當前編碼單元之左上之編碼單元。 上述複數個周邊編碼單元可進而包含鄰接於上述當前編碼單元之右上之編碼單元、及鄰接於上述當前編碼單元之左下之編碼單元。 可進而包含判定上述周邊編碼單元是否為可用狀態之判定部,且上述預測量化參數設定部可按照藉由上述判定部判定為可用之編碼單元之數而變更上述預測運算之方法。 可進而包含判定位於當前最大編碼單元內之周邊編碼單元於設定上述預測量化參數時是否為可用狀態之判定部,且上述預測量化參數設定部可僅使用藉由上述判定部判定為可用狀態之編碼單元之量化參數而設定上述預測量化參數。 上述預測量化參數設定部可在上述當前編碼單元位於當前最大編碼單元之開端之位置之情形時,將位於上一個最大編碼單元之最後之位置之編碼單元之量化參數設定作為上述預測量化參數。 可進而包含設定表示上述預測運算之類別之類別資料之設定部,且上述傳送部可傳送藉由上述設定部而設定之類別資料。 上述設定部可針對作為切片或最上階層之編碼單元之每個最大編碼單元中設定上述類別資料。 上述傳送部可將藉由上述設定部設定之類別資料作為藉由上述編碼部產生之位元串流之參數集而傳送。 又,本揭示之一態樣之圖像處理裝置之圖像處理方法,其係由預測量化參數設定部使用設定於位於作為編碼處理之對象之當前編碼單元之周邊的複數個周邊編碼單元之複數個量化參數,而設定對上述當前編碼單元之預測量化參數;由差分量化參數設定部設定表示設定於上述當前編碼單元之量化參數、與所設定之上述預測量化參數之差分值之差分量化參數;由編碼部將上述圖像資料經量化之量化資料編碼,而產生位元串流;且由傳送部傳送所設定之上述差分量化參數、與所產生之上述位元串流。 本揭示之另一態樣之圖像處理裝置,其包含:接收部,其係接收差分量化參數、及將圖像資料編碼而產生之位元串流,該差分量化參數係表示設定於作為解碼處理之對象之當前編碼單元中之量化參數、與根據設定於位於當前編碼單元之周邊之複數個周邊編碼單元中之複數個量化參數預測而得之預測量化參數之差分值;量化參數設定部,其係使用藉由上述接收部所接收之上述差分量化參數,而設定上述當前編碼單元之量化參數;及解碼部,其係使用藉由上述量化參數設定部所設定之量化參數,將藉由上述接收部所接收之位元串流進行逆量化而產生圖像資料。 又,本揭示之另一態樣之圖像處理裝置之圖像處理方法,其係由接收部接收差分量化參數、及將圖像資料編碼而產生之位元串流,差分量化參數係表示設定於作為解碼處理之對象之當前編碼單元中之量化參數、與根據設定於位於當前編碼單元之周邊之複數個周邊編碼單元中之複數個量化參數預測而得之預測量化參數之差分值;由量化參數設定部使用所接收之上述差分量化參數,而設定上述當前編碼單元之量化參數;由解碼部使用所設定之量化參數,將所接收之位元串流進行逆量化而產生圖像資料。 本揭示之進而另一態樣之圖像處理裝置,其包含:判定部,其係判定位於作為編碼處理對象之當前編碼單元之周邊之位置之複數個周邊編碼單元於設定預測量化參數時是否為可用狀態;預測量化參數設定部,其係僅使用藉由上述判定部判定為可用狀態之編碼單元之量化參數,而設定對上述當前編碼單元之預測量化參數;差分量化參數設定部,其係設定表示設定於上述當前編碼單元之量化參數、與藉由上述預測量化參數設定部而設定之上述預測量化參數之差分值之差分量化參數;編碼部,其係將上述圖像資料經量化之量化資料編碼,而產生位元串流;及傳送部,其係傳送藉由上述差分量化參數設定部而設定之上述差分量化參數與藉由上述編碼部而產生之上述位元串流。 上述預測量化參數設定部可於上述當前編碼單元位於當前最大編碼單元之開端之位置之情形時,將位於上一個最大編碼單元之最後之位置之編碼單元之量化參數設定作為上述預測量化參數。 又,本揭示之進而另一態樣之圖像處理裝置之圖像處理方法,其係由判定部判定位於作為編碼處理對象之當前編碼單元之周邊之位置之複數個周邊編碼單元於設定預測量化參數時是否為可用狀態;由預測量化參數設定部僅使用判定為可用狀態之編碼單元之量化參數,而設定對上述當前編碼單元之預測量化參數;由差分量化參數設定部設定表示設定於上述當前編碼單元之量化參數、與所設定之上述預測量化參數之差分值之差分量化參數;由編碼部將上述圖像資料經量化之量化資料進行編碼,而產生位元串流;且,由傳送部傳送所設定之上述差分量化參數、與所產生之上述位元串流。 本揭示之進而另一態樣之圖像處理裝置,其包含:接收部,其係接收差分量化參數、及將圖像資料編碼而產生之位元串流,該差分量化參數表示設定於作為解碼處理之對象之當前編碼單元中之量化參數、與上述量化參數之預測值即預測量化參數之差分值;判定部,其係判定位於上述當前編碼單元之周邊之位置之複數個周邊編碼單元於設定預測量化參數時是否為可用狀態;預測量化參數設定部,其係僅使用藉由上述判定部判定為可用狀態之編碼單元之量化參數,而設定對上述當前編碼單元之預測量化參數;量化參數產生部,其係將設定於上述當前編碼單元中之量化參數、與藉由上述接收部接收之上述差分量化參數相加,而產生上述當前編碼單元之量化參數;解碼部,其係將藉由上述接收部接收之上述位元串流解碼;逆量化部,其係使用藉由上述量化參數產生部產生之上述量化參數,將藉由上述解碼部解碼上述位元串流而得之量化係數進行逆量化。 又,本揭示之進而另一態樣之圖像處理裝置之圖像處理方法,其包含:由接收部接收差分量化參數、及將圖像資料編碼而產生之位元串流,該差分量化參數表示設定於作為解碼處理之對象之當前編碼單元中之量化參數、與上述量化參數之預測值即預測量化參數之差分值;由判定部判定位於上述當前編碼單元之周邊之位置之複數個周邊編碼單元於設定預測量化參數時是否為可用狀態;由預測量化參數設定部僅使用判定為可用狀態之編碼單元之量化參數,而設定對上述當前編碼單元之預測量化參數;由量化參數產生部將設定於上述當前編碼單元中之量化參數、與所接收之上述差分量化參數相加,而產生上述當前編碼單元之量化參數;由解碼部將所接收之上述位元串流解碼;且,由逆量化部使用所產生之上述量化參數,將解碼上述位元串流而得之量化係數進行逆量化。 在本揭示之一態樣中,利用設定於位於作為編碼處理之對象之當前編碼單元之周邊的複數個周邊編碼單元中之複數個量化參數,而設定對當前編碼單元之預測量化參數,從而設定顯示設定於當前編碼單元中之量化參數、與所設定之預測量化參數之差分值之差分量化參數,且編碼將圖像資料量化之量化資料,產生位元串流,從而傳送所設定之差分量化參數、與所產生之位元串流。 在本揭示之另一態樣中,接收表示設定於作為解碼處理之對象之當前編碼單元中之量化參數、與根據設定於位於當前編碼單元之周邊之複數個周邊編碼單元中之複數個量化參數預測而得之預測量化參數之差分值之差分量化參數、及將圖像資料編碼而產生之位元串流,且使用所接收之差分量化參數,而設定當前編碼單元之量化參數,且使用該所設定之量化參數,將所接收之位元串流進行逆量化而產生圖像資料。 在本揭示之進而另一態樣中,判定位於作為編碼處理對象之當前編碼單元之周邊之位置之複數個周邊編碼單元於設定預測量化參數時是否為可用狀態;僅使用判定為可用狀態之編碼單元之量化參數,而設定對當前編碼單元之預測量化參數;設定顯示設定於當前編碼單元之量化參數、與所設定之預測量化參數之差分值之差分量化參數;將量化圖像資料之量化資料編碼,而產生位元串流;傳送所設定之差分量化參數、與所產生之位元串流。 在本揭示之進而另一態樣中,接收表示設定於作為解碼處理之對象之當前編碼單元中之量化參數、與量化參數之預測值即預測量化參數之差分值之差分量化參數、及將圖像資料編碼而產生之位元串流;判定位於當前編碼單元之周邊之位置之複數個周邊編碼單元於設定預測量化參數時是否為可用狀態;僅使用判定為可用狀態之編碼單元之量化參數,而設定對當前編碼單元之預測量化參數;將設定於當前編碼單元中之量化參數、與所接收之差分量化參數相加,而產生當前編碼單元之量化參數;將所接收之位元串流進行解碼;使用所產生之量化參數,將解碼位元串流而得之量化係數進行逆量化。 [發明之效果] 根據本揭示,可處理圖像。尤其可提高相對量化參數之編碼效率。
以下,茲說明用以實施本揭示之形態(以下設為實施形態)。另,依以下之順序進行說明。 1.     第1實施形態(圖像編碼裝置) 2.     第2實施形態(圖像解碼裝置) 3.     第3實施形態(運算方法選擇) 4.     第4實施形態(加權平均) 5.     第5實施形態(類別資料設定) 6.     第6實施形態(LCU單位之預測) 7.     第7實施形態(多視點圖像編碼·多視點圖像解碼裝置) 8.     第8實施形態(階層圖像編碼·階層圖像解碼裝置) 9.     第9實施形態(應用例) <1. 第1實施形態> [圖像編碼裝置] 圖1係顯示圖像編碼裝置之主要構成例之方塊圖。 圖1中顯示之圖像編碼裝置100,如H. 264及MPEG (Moving Picture Experts Group:動畫專家組)4 Part10 (AVC(Advanced Video Coding:進階視訊編碼))編碼方式般,利用預測處理而將圖像資料進行編碼。 如圖1所示,圖像編碼裝置100具有A∕D轉換部101、畫面重排序緩衝器102、運算部103、正交轉換部104、量化部105、可逆編碼部106、及儲存緩衝器107。又,圖像編碼裝置100具有逆量化部108、逆正交轉換部109、運算部110、迴路濾波器111、圖框記憶體112、選擇部113、框內預測部114、動態預測/補償部115、預測圖像選擇部116、及速率控制部117。 圖像編碼裝置100進而具有量化參數編碼部121及量化參數解碼部122。 A∕D轉換部101將所輸入之圖像資料進行A∕D轉換,並將轉換後之圖像資料(數位資料)供給至畫面重排序緩衝器102而加以記憶。畫面重排序緩衝器102按照GOP(Group of Picture:畫面群),依用以編碼之圖框之順序將經記憶之顯示之順序之圖框之圖像進行重排序,且將圖框順序重排序之圖像供給至運算部103。又,畫面重排序緩衝器102將圖框順序重排序之圖像亦供給至框內預測部114及動態預測/補償部115。 運算部103從自畫面重排序緩衝器102讀取之圖像,減去經由預測圖像選擇部116自框內預測部114或動態預測/補償部115供給之預測圖像,而將該差分資訊輸出至正交轉換部104。 例如,進行框間編碼之圖像之情形,運算部103從自畫面重排序緩衝器102讀取之圖像,減去自動態預測/補償部115供給之預測圖像。 正交轉換部104對自運算部103供給之差分資訊實施離散餘弦轉換或K-L轉換(Karhunen-Loeve Transform)等之正交轉換。另,該正交轉換之方法為任意。正交轉換部104將其轉換係數供給至量化部105。 量化部105將自正交轉換部104供給之轉換係數進行量化。量化部105基於關於自速率控制部117供給之編碼量之目標值之資訊,設定量化參數,而進行該量化。另,該量化之方法為任意。量化部105將經量化之轉換係數供給至可逆編碼部106。 可逆編碼部106將在量化部105量化之轉換係數以任意之編碼方式進行編碼。由於係數資料在速率控制部117之控制之下得以量化,故其編碼量成為速率控制部117設定之目標值(或近似於目標值)。 又,可逆編碼部106自框內預測部114取得表示框內預測模式之資訊等,自動態預測/補償部115取得表示框間預測模式之資訊或動態向量資訊等。再者,可逆編碼部106取得在迴路濾波器111中使用之濾波器係數等。 可逆編碼部106將該等各種資訊以任意之編碼方式進行編碼,並作為編碼資料之標頭資訊之一部分(多工化)。可逆編碼部106將進行編碼而獲得之編碼資料供給至儲存緩衝器107而加以儲存。 作為可逆編碼部106之編碼方式,可舉出例如可變長度編碼或算術編碼等。作為可變長度編碼,可舉出例如以H. 264∕AVC方式決定之CAVLC(Context-Adaptive Variable Length Coding:文絡適應性可變長度編碼)等。作為算術編碼,可舉出例如CABAC(Context-Adaptive Binary Arithmetic Coding:文絡適應性二進位算術編碼)等。 儲存緩衝器107暫時保持自可逆編碼部106供給之編碼資料。儲存緩衝器107在特定之時機,將所保持之編碼資料作為位元串流而輸出至例如後段之未圖示之記錄裝置(記錄媒體)或傳送路徑等。 又,在量化部105中經量化之轉換係數亦被供給至逆量化部108。逆量化部108以對應於利用量化部105之量化之方法將該經量化之轉換係數進行逆量化。該逆量化之方法,若為對應於利用量化部105之量化處理之方法,則可為任一者。逆量化部108將所獲得之轉換係數供給至逆正交轉換部109。 逆正交轉換部109以對應於利用正交轉換部104之正交轉換處理之方法,將自逆量化部108供給之轉換係數進行逆正交轉換。該逆正交轉換之方法,若為對應於利用正交轉換部104之正交轉換處理之方法,則可為任一者。逆正交轉換之輸出(經復原之差分資訊)被供給至運算部110。 運算部110於自逆正交轉換部109供給之逆正交轉換結果、即經復原之差分資訊中,加入經由預測圖像選擇部116自框內預測部114或動態預測/補償部115供給之預測圖像,而獲得局部解碼之圖像(解碼圖像)。該解碼圖像被供給至迴路濾波器111或圖框記憶體112。 迴路濾波器111包含解塊濾波器與適應迴路濾波器等,對自運算部110供給之解碼圖像適宜進行過濾處理。例如,迴路濾波器111藉由對解碼圖像進行解塊濾波處理而除去解碼圖像之區塊失真。又,例如,迴路濾波器111相對該解塊濾波處理結果(進行區塊失真之除去之解碼圖像),使用維納濾波(Wiener Filter)進行迴路濾波處理,藉此進行畫質改善。 另,迴路濾波器111可對解碼圖像進行任意之過濾處理。又,迴路濾波器111亦可按照需要,將使用於過濾處理之濾波器係數等之資訊供給至可逆編碼部106,並將其加以編碼。 迴路濾波器111將過濾處理結果(過濾處理後之解碼圖像)供給至圖框記憶體112。另,如上所述,自運算部110輸出之解碼圖像,可不經由迴路濾波器111而供給至圖框記憶體112。即,可省略利用迴路濾波器111之過濾處理。 圖框記憶體112記憶供給之解碼圖像,並在特定之時機,將所記憶之解碼圖像作為參照圖像,而供給至選擇部113。 選擇部113選擇自圖框記憶體112供給之參照圖像之供給地。例如框間預測之情形,選擇部113將自圖框記憶體112供給之參照圖像供給至動態預測/補償部115。 框內預測部114利用經由選擇部113自圖框記憶體112供給之參照圖像即處理對象圖像內之像素值,基本以預測單元(PU)為處理單位而進行產生預測圖像之框內預測(圖面內預測)。框內預測部114以預先準備之複數個模式(框內預測模式)進行該框內預測。 框內預測部114以成為候補之全部框內預測模式產生預測圖像,且利用自畫面重排序緩衝器102供給之輸入圖像而評估各預測圖像之代價函數值,從而選擇最佳模式。框內預測部114選擇最佳框內預測模式後,將以該最佳模式產生之預測圖像供給至預測圖像選擇部116。 又,如上所述,框內預測部114將表示所採用之框內預測模式之框內預測模式資訊等適宜供給至可逆編碼部106而加以編碼。 動態預測/補償部115使用自畫面重排序緩衝器102供給之輸入圖像、與經由選擇部113自圖框記憶體112供給之參照圖像,基本以PU為處理單位,而進行動態預測(框間預測),且按照檢測出之動態向量而進行動態補償處理,從而產生預測圖像(框間預測圖像資訊)。動態預測/補償部115以預先準備之複數個模式(框間預測模式)進行如此之框間預測。 動態預測/補償部115以成為候補之全部框間預測模式產生預測圖像,並評估各預測圖像之代價函數值,從而選擇最佳模式。動態預測/補償部115選擇最佳框間預測模式後,將以該最佳模式產生之預測圖像供給至預測圖像選擇部116。 又,動態預測/補償部115將表示所採用之框間預測模式之資訊、或編碼資料進行解碼時,將以該框間預測模式進行處理所需之資訊等供給至可逆編碼部106,並加以編碼。 預測圖像選擇部116選擇供給至運算部103或運算部110之預測圖像之供給源。例如框間編碼之情形,預測圖像選擇部116選擇動態預測/補償部115作為預測圖像之供給源,並將自該動態預測/補償部115供給之預測圖像供給至運算部103或運算部110。 速率控制部117基於儲存於儲存緩衝器107之編碼資料之編碼量,以使不會發生溢流或下溢之方式,控制量化部105之量化動作之速率。 量化參數編碼部121自量化部105取得作為處理對象之當前區域(亦稱為關注區域)之量化參數、與該當前區域之周邊之周邊區域之量化參數,求該等之差分,且使該差分返回至量化部105,並於可逆編碼部106加以編碼而予以傳送。又,量化參數編碼部121亦將該差分經由逆量化部108而供給至量化參數解碼部122。 量化參數解碼部122利用自量化參數編碼部121供給之當前區域與周邊區域之量化參數之差分、與過去再構築之周邊區域之量化參數,將當前區域之量化參數進行再構築,並將其供給至逆量化部108。逆量化部108利用該量化參數而進行逆量化。 [巨區塊] 然而,在AVC編碼方式中,可以圖2所示之方式,將一個巨區塊分割成複數個動態補償區塊,並使針對各者而具有不同之動態資訊。 即,可將包含16×16像素之巨區塊分割成16×16、16×8、8×16、及8×8之任一項之分區。 再者,可將8×8分區分割成8×8、8×4、4×8、及4×4之任一項之子分區。將以如此之方式分割巨區塊之複數個各區域稱為子巨區塊。 但,將巨區塊尺寸設為16像素×16像素,對於如成為下一代編碼方式之對象之UHD之類較大之畫框並非最佳。因此,在非專利文獻1等,有如圖3所示般將巨區塊尺寸設為64×64像素、32像素×32像素之大小之提案。 即,在非專利文獻1中,藉由採用如圖3之階層構造,關於16×16像素區塊以下,一面與目前之AVC中之巨區塊保持互換性,一面定義更大之區塊作為其超集。 非專利文獻1為相對框間片段應用擴展之巨區塊(擴展部分區域)之提案,在非專利文獻2中,有將擴展之巨區塊(擴展部分區域)應用於框間片段之提案。以下,亦將如此般擴展之巨區塊稱為擴展巨區塊。 [編碼單元] 但,將巨區塊尺寸設為16像素×16像素,對於如成為下一代編碼方式之對象之UHD(Ultra High Definition:超高清晰度;4000像素×2000像素)之類較大之畫框並非最佳。 因此,在AVC中,如圖2所示般,規定有由巨區塊與子巨區塊而成之階層構造,例如,在HEVC(High Efficiency Video Coding:高效視訊編碼)中,如圖4所示般,規定有編碼單元(CU(Coding Unit))。 CU亦稱為Coding Tree Block(CTB),係與AVC中之巨區塊發揮相同之作用之圖像單位之圖像之部分區域。後者固定於16×16像素之大小,與此相對,前者之大小並非固定,在各個序列中,在圖像壓縮資訊中得以指定。 例如,在包含於作為輸出之編碼資料之序列參數集(SPS(Sequence Parameter Set))中,規定CU之最大尺寸(LCU(Largest Coding Unit))與最小尺寸(SCU(Smallest Coding Unit))。 在各個LCU內,在不低於SCU之尺寸之範圍內,藉由使split-flag=1,可分割成更小之尺寸之CU。在圖4之例中,LCU之大小為128,最大階層深度為5。2N×2N之大小之CU,split_flag之值為「1」時,得以分割成作為下一階層之N×N之大小之CU。 再者,CU被分割成作為框內或框間預測之處理單位之區域(圖像單位之圖像之部分區域)即預測單元(Prediction Unit(PU)),又,被分割成作為正交轉換之處理單位之區域(圖像單位之圖像之部分區域)即轉換單元(Transform Unit(TU))。目前,在HEVC中,除了4×4及8×8之外,可使用16×16及32×32正交轉換。 如以上述之HEVC之方式定義CU,並以該CU為單位而進行各種處理之編碼方式之情形,可認為AVC中之巨區塊相當於LCU。但,由於CU如圖4所示般具有階層構造,故其最上位階層之LCU之尺寸,一般設定成較AVC之巨區塊更大,例如128×128像素。 亦可替代巨區塊,而將本揭示應用於使用如此之CU、PU、及TU等之編碼方式。即,進行量化處理之處理單位可為任意之區域。即,以下,於量化處理之處理對象即當前區域(亦稱為該區域或關注區域)、或位於該當前區域之周邊之區域即周邊區域中,不僅包含如此之巨區塊或子巨區塊,亦包含LCU、CU、SCU、PU、及TU等所有資料單位。 然而,量化參數QP雖將與使用於上一個區塊之編碼之量化參數之差分進行編碼,但,特別是以適應量化之方式,使量化參數在畫面內動態變化之情形,有使圖像壓縮資訊中之資訊量增大之虞。 因此,量化參數編碼部121藉由例如圖5所示之周邊區域(例如,周邊編碼單元)之量化參數而預測作為處理對象之當前區域(例如,當前編碼單元)之量化參數,並求出當前區域之量化參數之實際值與預測值之差分值。該差分值經編碼而傳送至解碼側。藉此,圖像編碼裝置100可減少量化參數之編碼量,從而提高編碼效率。 [量化部、速率控制部、及量化參數編碼部] 接著,茲說明圖像編碼裝置100之各部。圖6係顯示量化部105、速率控制部117、及量化參數編碼部121之主要構成例之方塊圖。 如圖6所示,速率控制部117具有活量算出部131。又,量化部105具有關注區域量化參數產生部141、量化處理部142、周邊區域量化參數緩衝器143、及差分量化參數緩衝器144。 再者,量化參數編碼部121具有預測量化參數產生部151及差分量化參數產生部152。 活量算出部131自畫面重排序緩衝器102取得輸入圖像資訊,且以例如在MPEG2試驗模型(「試驗模型5」,ISO/IEC,JTC/SC29/WG11/N0400,1993)下決定之編碼量控制方式算出其活量,並將其供給至關注區域量化參數產生部141。 關注區域量化參數產生部141基於所供給之活量,算出針對當前區域(關注區域)之量化參數(關注區域量化參數)。關注區域量化參數產生部141將所算出之關注區域量化參數供給至量化處理部142。 量化處理部142使用該關注區域量化參數,將自正交轉換部104供給之正交轉換係數進行量化,且將經量化之正交轉換係數供給至可逆編碼部106,進行編碼而傳送至解碼側。 另,量化處理部142將經量化之正交轉換係數亦供給至逆量化部108。 又,關注區域量化參數產生部141將所算出之關注區域量化參數亦供給至周邊區域量化參數緩衝器143。 周邊區域量化參數緩衝器143將所供給之關注區域量化參數進行記憶。在以較該當前區域更後處理之其他區域為當前區域之處理中,周邊區域量化參數緩衝器143將所記憶之關注區域量化參數作為周邊區域之量化參數(周邊區域量化參數),而供給至預測量化參數產生部151。 預測量化參數產生部151選擇複數個當前區域之周邊區域,且自周邊區域量化參數緩衝器143讀取各周邊區域之量化參數作為周邊區域量化參數。預測量化參數產生部151使用該等而產生當前區域之量化參數之預測值(預測量化參數)。例如,預測量化參數產生部151使用複數個周邊區域量化參數而進行中位數運算,並將該中值作為預測量化參數。預測量化參數產生部151將以如此之方式產生之預測量化參數供給至差分量化參數產生部152。 再者,關注區域量化參數產生部141將所算出之關注區域量化參數亦供給至差分量化參數產生部152。 差分量化參數產生部152產生自關注區域量化參數產生部141取得之關注區域量化參數、與自預測量化參數產生部151取得之預測量化參數之差分(差分量化參數)。差分量化參數產生部152將所產生之差分量化參數供給至差分量化參數緩衝器144。 差分量化參數緩衝器144將所供給之差分量化參數進行記憶,並在特定之時機,或按照特定之事件產生,將該差分量化參數供給至可逆編碼部106,進行編碼而傳送至解碼側。 又,差分量化參數緩衝器144將差分量化參數亦供給至逆量化部108。 逆量化部108使該差分量化參數於量化參數解碼部122中加以解碼而產生關注區域量化參數,且使用該關注區域量化參數,進行自量化處理部142取得之經量化之正交轉換係數之逆量化。 另,該逆量化部108及量化參數解碼部122之細節,在圖像解碼裝置之說明中予以後述。另,可使關注區域量化參數產生部141將關注區域量化參數供給至逆量化部108,逆量化部108使用該關注區域量化參數,進行經量化之正交轉換係數之逆量化。該情形,可省略量化參數解碼部122。 以如此之方式,各部進行處理,藉此,圖像編碼裝置100可使相對量化參數之編碼效率提高。 [量化參數之編碼] 接著,更具體地說明量化參數之編碼。 可認為,一般而言,作為處理對象之當前區域(關注區域)之紋理與位於其周邊之任一個周邊區域之紋理具有相互關係。利用該點,可削減量化參數所需之資訊。 圖5中顯示當前區域及周邊區域之例。在圖5中,各四角表示量化處理單位之區域,QPcurr 之四角表示當前區域。QPcurr 表示該當前區域之量化參數。 同樣,QPa 之四角表示鄰接於當前區域之左側之周邊區域A,QPa 表示該周邊區域A之量化參數。QPb 之四角表示鄰接於當前區域之上側之周邊區域B,QPb 表示該周邊區域B之量化參數。QPc 之四角表示鄰接於關注區域之左上之周邊區域C,QPc 表示該周邊區域C之量化參數。QPd 之四角表示鄰接於當前區域之左下之周邊區域D,QPd 表示該周邊區域D之量化參數。QPe 之四角表示鄰接於關注區域之右上之周邊區域E,QPe 表示該周邊區域E之量化參數。再者,QPa' 之四角表示鄰接於當前區域A之左側之周邊區域A',QPa' 表示該周邊區域A'之量化參數。 另,在量化部105算出當前區域之量化參數QPcurr 之時間點上,周邊區域之量化參數QPa 、QPb 、QPc 、QPd 、QPe 、QPa' ,皆為算出結束者。 可認為,當前區域之量化參數QPcurr 與當前區域附近之周邊區域之量化參數即QPa 、QPb 、及QPc 之任一項相互關係較密切。因此,量化參數編碼部121首先自該等量化參數QPa 、QPb 、及QPc ,以例如以下之式(1)之方式,產生當前區域之量化參數QPcurr 之預測值PredQP。 PredQP = Med (QPa ,QPb ,QPc ) ・・・(1) 接著,量化參數編碼部121以下式(2)所示之方式,自量化參數QPcurr 減去預測值PredQP,從而求出差分量化參數dQP。 dQP = QPcurr - PredQP ・・・(2) 該差分量化參數dQP被傳送至解碼側。即,圖像編碼裝置100,並非傳送量化參數QPcurr ,而傳送減去預測值PredQP之差分量化參數dQP,藉此可減少量化參數之編碼量。 另,用於算出預測值PredQP之量化參數,若為算出結束者,則可為周邊區域A至周邊區域C以外之區域。例如,可使用量化參數QPd 或QPe 求出預測值PredQP。又,可使用不鄰接於當前區域之周邊區域之量化參數QPa' 求出預測值PredQP。再者,可使用上述以外之周邊區域之量化參數求出預測值PredQP。例如,於如上述之空間上位於當前區域之周邊之區域(空間性之周邊區域)之量化參數以外,亦可使用如參照圖框共置區域般時間上位於當前區域之周邊之區域(時間性之周邊區域)之量化參數求出預測值PredQP。再者,可並用空間性之周邊區域之量化參數與時間性之周邊區域之量化參數求出預測值PredQP。 另,於預測值PredQP之算出時,取代例如量化參數QPa ,而使用量化參數QPa' ,藉此可不等待鄰接於當前區域之周邊區域之編碼處理(或解碼處理),而開始當前區域之量化參數之預測值PredQP之算出處理,從而可實現高速之處理。使用時間性之周邊區域之量化參數之情形亦相同。 又,預測值PredQP之運算方法為任意,可為上述之中位數(Median)以外。例如,可將全部或一部分之周邊區域之量化參數之平均值作為預測值PredQP。 一般而言,當前區域之紋理多為與任一個周邊區域之紋理之相關性非常高,與複數個周邊區域之紋理之平均相關性較高則較少。 例如,於當前區域附近存在紋理互異之兩個物理之圖像之情形,當前區域之圖像成為其中一個物體之圖像之可能性較高。該情形,當前區域之紋理與存在一方之物體之圖像之周邊區域之紋理之相關性較高,與存在另一方之物體之圖像之周邊區域之紋理之相關性較低。如此之情形時,當前區域之紋理與存在一方之物體之圖像之周邊區域之紋理、與存在另一方之物體之圖像之周邊區域之紋理之平均之相關性較高之情況較少。 因此,一般而言,中位數(Median)之方法易於提高預測值PredQP之預測精度。 但,例如,若為如階度般紋理逐漸變化之圖像之情形,當前區域之紋理、與以包夾當前區域之方式存在之兩個周邊區域之紋理之平均之相關性較高之可能性較高。若為如此之情形,則平均之方法易於提高預測值PredQP之預測精度。 另,運算處理之平均之方法較容易,且其負荷較小。 期望考量如此之各運算之特徵之差異,從而採用最佳之運算方法。另,可準備複數個運算方法,並相應地進行選擇。 再者,可使量化參數編碼部121產生顯示是否將如上所述之差分量化參數dQP加以傳送之旗標資訊(flag),並將該旗標資訊傳送至解碼側。 該情形,例如,量化參數編碼部121將該旗標資訊儲存於切片標頭等、位元串流之特定之位置,並作為位元串流而傳送至解碼側。在解碼側,以該旗標資訊為參照,例如,若flag=1,則判定差分量化參數dQP被傳送,利用如上所述之運算求出預測值PredQP,利用如上所述之運算求出關注區域之量化參數QPcurr 。又,若flag=0,則進行利用如AVC中使用之先前方法之dQP之編碼·解碼處理。 藉由以如此之方式傳送旗標資訊,可使解碼側對應於複數個方法。因此,編碼側可自複數個方法之中選擇最適宜之方法進行應用。藉此,圖像編碼裝置100可更加減少相對量化參數之編碼量。 另,將圖框分割成複數個切片,並將各切片互相獨立地進行處理之情形,可使量化參數編碼部121維持各切片之處理之獨立性,以使不會發生不必要之延遲之方式,僅使用屬於包含當前區域之當前切片(關注切片)之周邊區域而算出預測值PredQP。該情形,不使用位於當前切片之外之周邊區域,相應地,可減少使用於預測值PredQP之算出之量化參數之數。又,可替代位於當前切片之外之周邊區域之量化參數而使用當前切片內之處理結束之其他周邊區域之量化參數。 在MPEG2或AVC中,差分量化參數dQP作為當前區域之量化參數、與使用於上一編碼處理或解碼處理之量化參數之差分、即圖5之例中QPa 與QPcurr 之差分,而進行編碼處理。但,當前區域與周邊區域A之相互關係未必較高。因此,藉由進行如此之固定性之處理,有降低預測精度之虞。 與此相對,量化參數編碼部121藉由使用複數個周邊區域之量化參數進行預測,可使用被認為相關性最高之量化參數而算出差分量化參數dQP。即,與MPEG2或AVC中之提案相比,可實現更高之壓縮率。 又,以上說明之方法,無須變更關於圖像壓縮資訊中之dQP之語法,而僅藉由變更編碼及解碼之方法即可實現。因此,即使對於既存之編碼裝置或解碼裝置,只需以略微之變更即可容易地應用。 [編碼處理之流程] 接著,茲說明利用如以上之圖像編碼裝置100而實行之各處理之流程。首先,參照圖7之流程圖,說明編碼處理之流程之例。 在步驟S101中,A∕D轉換部101將所輸入之圖像進行A∕D轉換。在步驟S102中,畫面重排序緩衝器102記憶經A∕D轉換之圖像,並進行自各圖像之顯示順序改為編碼順序之重排序。 在步驟S103中,框內預測部114進行框內預測模式之框內預測處理。在步驟S104中,動態預測/補償部115進行進行框間預測模式下之動態預測與動態補償之框間動態預測處理。 在步驟S105中,預測圖像選擇部116基於自框內預測部114及動態預測/補償部115輸出之各代價函數值,決定最佳模式。即,預測圖像選擇部116選擇利用框內預測部114產生之預測圖像、及利用動態預測/補償部115產生之預測圖像之任一方。 在步驟S106中,運算部103運算藉由步驟S102之處理而重排序之圖像、與藉由步驟S105之處理而選擇之預測圖像之差分。差分資料與原本之圖像資料相比其資料量減少。因此,相較於將圖像直接編碼之情形,可壓縮資料量。 在步驟S107中,正交轉換部104將藉由步驟S106之處理而產生之差分資訊進行正交轉換。具體而言,進行離散餘弦轉換、K-L轉換等之正交轉換,且輸出轉換係數。 在步驟S108中,量化部105將藉由步驟S107之處理而獲得之正交轉換係數進行量化。 藉由步驟S108之處理而經量化之差分資訊,藉由如下之方式而局部解碼。即,在步驟S109中,逆量化部108以對應於量化部105之特性之特性,將藉由步驟S108之處理而產生之經量化之正交轉換係數(亦稱為量化係數)進行逆量化。在步驟S110中,逆正交轉換部109以對應於正交轉換部104之特性之特性,將藉由步驟S107之處理而獲得之正交轉換係數進行逆正交轉換。 在步驟S111中,運算部110將預測圖像加入至局部解碼之差分資訊,產生局部解碼之圖像(對應於向運算部103之輸入之圖像)。在步驟S112中,迴路濾波器111對藉由步驟S111之處理而獲得之局部性之解碼圖像,適宜進行包含解塊濾波處理與適應迴路濾波處理等之迴路濾波處理。 在步驟S113中,圖框記憶體112將藉由步驟S112之處理而實施迴路濾波處理之解碼圖像進行記憶。另,對圖框記憶體112,未利用迴路濾波器111進行過濾處理之圖像亦自運算部110被供給,而加以記憶。 在步驟S114中,可逆編碼部106將藉由步驟S108之處理而量化之轉換係數進行編碼。即,對差分圖像進行可變長度編碼或算術編碼等之可逆編碼。 另,可逆編碼部106將在步驟S108中算出之量化參數進行編碼,並附加於編碼資料中。又,可逆編碼部106將關於藉由步驟S105之處理而選擇之預測圖像之預測模式之資訊進行編碼,並附加於將差分圖像進行編碼而獲得之編碼資料中。即,可逆編碼部106將自框內預測部114供給之最佳框內預測模式資訊、或按照自動態預測/補償部115供給之最佳框間預測模式之資訊等亦進行編碼,並附加於編碼資料中。 在步驟S115中,儲存緩衝器107儲存藉由步驟S114之處理而獲得之編碼資料。儲存於儲存緩衝器107之編碼資料被適宜讀取,且經由傳送路徑或記錄媒體而傳送至解碼側。 在步驟S116中,速率控制部117基於藉由步驟S115之處理而儲存於儲存緩衝器107之編碼資料之編碼量(產生編碼量),以使不會發生溢流或下溢之方式,控制量化部105之量化動作之速率。 步驟S116之處理結束後,編碼處理得以結束。 [量化處理之流程] 接著,參照圖8之流程圖,說明在圖7之步驟S108中實行之量化處理之流程之例。 量化處理開始後,活量算出部131在步驟S131中算出當前區域之活量。 在步驟S132中,關注區域量化參數產生部141基於在步驟S131中算出之活量,產生關注區域量化參數。 在步驟S133中,周邊區域量化參數緩衝器143將在步驟S132中產生之關注區域量化參數進行記憶。 在步驟S134中,量化處理部142使用在步驟S132中產生之關注區域量化參數,將當前區域之正交轉換係數進行量化。 在步驟S135中,預測量化參數產生部151產生預測量化參數。 在步驟S136中,差分量化參數產生部152產生在步驟S132中產生之關注區域量化參數、與在步驟S135中產生之預測量化參數之差分即差分量化參數。 產生差分量化參數後,差分量化參數產生部152結束量化處理,並使處理返回至圖7。 [預測量化參數產生處理之流程] 接著,參照圖9之流程圖,說明在圖8之步驟S135中實行之預測量化參數產生處理之流程之例。 在步驟S151中,預測量化參數產生部151選擇複數個獲得預測量化參數之候補之周邊區域。 在步驟S152中,預測量化參數產生部151自周邊區域量化參數緩衝器143讀取所選擇之各周邊區域之周邊區域量化參數。 在步驟S153中,預測量化參數產生部151對在步驟S152中取得之複數個周邊區域量化參數進行例如中位數預測,且將該中值作為預測量化參數。 步驟S153之處理結束後,預測量化參數產生部151結束預測量化參數產生處理,並使處理返回至圖8。 如以上般,藉由進行各處理,圖像編碼裝置100,由於可替代關注區域量化參數而傳送差分量化參數,故可提高相對量化參數之編碼效率。 <2. 第2實施形態> [圖像解碼裝置] 圖10係顯示圖像解碼裝置之主要構成例之方塊圖。圖10中顯示之圖像解碼裝置200將圖像編碼裝置100產生之編碼資料以對應於其編碼方式之解碼方法進行解碼。另,圖像解碼裝置200與圖像編碼裝置100同樣於每個任意區域進行量化處理。 如圖10所示,圖像解碼裝置200具有儲存緩衝器201、可逆解碼部202、逆量化部203、逆正交轉換部204、運算部205、迴路濾波器206、畫面重排序緩衝器207、及D∕A轉換部208。又,圖像解碼裝置200具有圖框記憶體209、選擇部210、框內預測部211、動態預測·補償部212、及選擇部213。 再者,圖像解碼裝置200具有量化參數解碼部221。 儲存緩衝器201儲存傳送而來之編碼資料,並在特定之時機,將該編碼資料供給至可逆解碼部202。可逆解碼部202將由儲存緩衝器201供給之、利用圖1之可逆編碼部106編碼之資訊以對應於可逆編碼部106之編碼方式之方式進行解碼。可逆解碼部202將解碼而獲得之差分圖像之量化係數資料供給至逆量化部203。 又,可逆解碼部202判定是選擇框內預測模式為最佳預測模式還是選擇框間預測模式,並將關於該最佳預測模式之資訊供給至框內預測部211及動態預測·補償部212之內、判定為被選擇之模式之一方。即,例如,在圖像編碼100中選擇框間預測模式作為最佳預測模式之情形,關於該最佳預測模式之資訊被傳送至動態預測·補償部212。 逆量化部203將利用可逆解碼部202進行解碼而獲得之經量化之係數資料以對應於圖1之量化部105之量化方式之方式進行逆量化,並將所獲得之係數資料供給至逆正交轉換部204。 逆正交轉換部204以對應於圖1之正交轉換部104之正交轉換方式之方式將自逆量化部203供給之係數資料進行逆正交轉換。逆正交轉換部204,藉由該逆正交轉換處理,獲得對應於在圖像編碼裝置100中正交轉換前之殘差資料之解碼殘差資料。 逆正交轉換而獲得之解碼殘差資料被供給至運算部205。又,於運算部205中,經由選擇部213,自框內預測部211或動態預測·補償部212而供給預測圖像。 運算部205將該解碼殘差資料與預測圖像相加,利用圖像編碼裝置100之運算部103而獲得對應於減去預測圖像前之圖像資料之解碼圖像資料。運算部205將該解碼圖像資料供給至迴路濾波器206。 迴路濾波器206對所供給之解碼圖像適宜實施包含解塊濾波處理或適應迴路濾波處理等之迴路濾波處理,並將其供給至畫面重排序緩衝器207。 迴路濾波器206包含解塊濾波器與適應迴路濾波器等,對自運算部205供給之解碼圖像適宜進行過濾處理。例如,迴路濾波器206藉由對解碼圖像進行解塊濾波處理而除去解碼圖像之區塊失真。又,例如,迴路濾波器206相對該解塊濾波處理結果(進行區塊失真之除去之解碼圖像),使用維納濾波(Wiener Filter)進行迴路濾波處理,藉此進行畫質改善。 另,迴路濾波器206可對解碼圖像進行任意之過濾處理。又,迴路濾波器206可使用自圖1之圖像編碼裝置100供給之濾波器係數進行過濾處理。 迴路濾波器206將過濾處理結果(過濾處理後之解碼圖像)供給至畫面重排序緩衝器207及圖框記憶體209。另,自運算部205輸出之解碼圖像,可不經由迴路濾波器206而供給至畫面重排序緩衝器207或圖框記憶體209。即,可省略利用迴路濾波器206之過濾處理。 畫面重排序緩衝器207進行圖像之重排序。即,依原本之顯示順序,將為編碼之順序而利用圖1之畫面重排序緩衝器102重排序之圖框之順序進行重排序。D∕A轉換部208將自畫面重排序緩衝器207供給之圖像進行D∕A轉換,並輸出至未圖示之顯示器而加以顯示。 圖框記憶體209記憶供給之解碼圖像,並在特定之時機,或,基於框內預測部211或動態預測·補償部212等之外部之要求,將所記憶之解碼圖像作為參照圖像,而供給至選擇部210。 選擇部210選擇自圖框記憶體209供給之參照圖像之供給地。選擇部210將框內編碼之圖像進行解碼之情形,將自圖框記憶體209供給之參照圖像供給至框內預測部211。又,選擇部210將框間編碼之圖像進行解碼之情形,將自圖框記憶體209供給之參照圖像供給至動態預測·補償部212。 於框內預測部211中,自可逆解碼部202適宜供給表示將標頭資訊進行解碼而獲得之框內預測模式之資訊等。框內預測部211以在圖1之框內預測部114中使用之框內預測模式,使用自圖框記憶體209取得之參照圖像進行框內預測,產生預測圖像。框內預測部211將所產生之預測圖像供給至選擇部213。 動態預測·補償部212自可逆解碼部202取得將標頭資訊進行解碼而獲得之資訊(最佳預測模式資訊、差分資訊、及預測動態向量之編碼序號等)。 動態預測·補償部212以在圖1之動態預測/補償部115中使用之框內預測模式,使用自圖框記憶體209取得之參照圖像進行框內預測,產生預測圖像。 量化參數解碼部221於自圖像編碼裝置100供給之差分量化參數中,加入使用周邊區域量化參數(過去再構築之關注區域量化參數)而產生之當前區域之預測量化參數,並將關注區域量化參數進行再構築。量化參數解碼部221將該關注區域量化參數供給至逆量化部203。 逆量化部203使用自該量化參數解碼部221供給之關注區域量化參數,進行自可逆解碼部202供給之經量化之正交轉換係數之逆量化。 藉此,逆量化部203可以對應於量化部105之量化處理之方法進行逆量化。即,圖像解碼裝置200可實現相對量化參數之編碼效率之提高。 [逆量化部及量化參數解碼部] 圖11係顯示逆量化部203及量化參數解碼部221之主要構成例之方塊圖。 如圖11所示,逆量化部203具有差分量化參數緩衝器231、量化正交轉換係數緩衝器232、周邊區域量化參數緩衝器233、及逆量化處理部234。 又,量化參數解碼部221具有預測量化參數產生部241及關注區域量化參數再構築部242。 差分量化參數緩衝器231將自可逆解碼部202供給之、自圖像編碼裝置100傳送之差分量化參數進行記憶。差分量化參數緩衝器231在特定之時機,或,基於如來自關注區域量化參數再構築部242等之要求之特定之事件產生,將所記憶之差分量化參數供給至關注區域量化參數再構築部242。 預測量化參數產生部241取得複數個記憶於周邊區域量化參數緩衝器233中之周邊區域量化參數,並使用該等而產生當前區域之預測量化參數。 另,該預測量化參數之算出方法,與利用量化產生編碼部121(預測量化參數產生部151)之算出方法相同。例如,預測量化參數產生部151利用中位數自複數個周邊區域量化參數算出預測量化參數之情形,預測量化參數產生部241亦利用中位數自複數個周邊區域量化參數算出預測量化參數。又,預測量化參數產生部151將複數個周邊區域量化參數之平均作為預測量化參數之情形,預測量化參數產生部241亦將複數個周邊區域量化參數之平均作為預測量化參數。 該算出方法可預先決定,亦可藉由自圖像編碼裝置100傳送旗標資訊等,而使預測量化參數產生部241把握圖像編碼裝置100選擇之算出方法,並選擇對應於其之方法。 預測量化參數產生部241將所產生之預測量化參數供給至關注區域量化參數再構築部242。 關注區域量化參數再構築部242於自差分量化參數緩衝器231取得之差分量化參數中,加入自預測量化參數產生部241取得之預測量化參數,藉此將關注區域量化參數進行再構築。 關注區域量化參數再構築部242將經再構築之關注區域量化參數供給至周邊區域量化參數緩衝器233。 周邊區域量化參數緩衝器233記憶自關注區域量化參數再構築部242供給之關注區域量化參數。在以較該當前區域更後處理之其他區域為當前區域之處理中,周邊區域量化參數緩衝器233將所記憶之關注區域量化參數作為周邊區域量化參數而供給至預測量化參數產生部241。 又,關注區域量化參數再構築部242將經再構築之關注區域量化參數亦供給至逆量化處理部234。 量化正交轉換係數緩衝器232記憶自可逆解碼部202供給之、自圖像編碼裝置100傳送之經量化之正交轉換係數。量化正交轉換係數緩衝器232在特定之時機,或,基於如來自逆量化處理部234等之要求之特定之事件產生,將所記憶之經量化之正交轉換係數供給至逆量化處理部234。 逆量化處理部234使用自關注區域量化參數再構築部242取得之關注區域量化參數,對自量化正交轉換係數緩衝器232取得之經量化之正交轉換係數進行逆量化。逆量化處理部234將逆量化而獲得之正交轉換係數供給至逆正交轉換部204。 藉由使各部如此般進行處理,量化參數解碼部221可正確地再構築在圖像編碼裝置100之量化處理中使用之關注區域量化參數,逆量化部203可以對應於利用圖像編碼裝置100之量化部105之量化處理之方法進行逆量化。即,圖像解碼裝置200可實現相對量化參數之編碼效率之提高。 另,圖1所示之圖像編碼裝置100之逆量化部108及量化參數解碼部122亦與該逆量化部203及量化參數解碼部221具有相同之構成,並進行相同之處理。 [解碼處理之流程] 接著,茲說明利用如以上之圖像解碼裝置200而實行之各處理之流程。首先,參照圖12之流程圖,說明解碼處理之流程之例。 解碼處理開始後,在步驟S201中,儲存緩衝器201儲存傳送而來之位元串流。在步驟S202中,可逆解碼部202將自儲存緩衝器201供給之位元串流進行解碼。即,將利用圖1之可逆編碼部106編碼之I圖像、P圖像、以及B圖像進行解碼。又,亦將差分動態資訊與差分量化參數等、包含於位元串流中之差分圖像資訊以外之各種資訊進行解碼。 在步驟S203中,逆量化部203及量化參數解碼部221將藉由步驟S202之處理而獲得之經量化之正交轉換係數進行逆量化。 在步驟S204中,逆正交轉換部204將在步驟S203中逆量化之正交轉換係數進行逆正交轉換。 在步驟S205中,框內預測部211或動態預測·補償部212使用所供給之資訊進行預測處理。 在步驟S206中,選擇部213選擇在步驟S205中產生之預測圖像。 在步驟S207中,運算部205於在步驟S204中逆正交轉換而獲得之差分圖像資訊中加入在步驟S206中選擇之預測圖像。藉此獲得解碼圖像。 在步驟S208中,迴路濾波器206對在步驟S207中獲得之解碼圖像適宜進行包含解塊濾波處理與適應迴路濾波處理等之迴路濾波處理。 在步驟S209中,畫面重排序緩衝器207進行在步驟S208中經過濾處理之圖像之重排序。即,依原本之顯示順序,將為編碼而利用圖像編碼裝置100之畫面重排序緩衝器102重排序之圖框之順序進行重排序。 在步驟S210中,D/A轉換部208將在步驟S209中圖像之順序得以重排序之圖像進行D/A轉換。該圖像被輸出至未圖示之顯示器,且顯示圖像。 在步驟S211中,圖框記憶體209記憶在步驟S208中過濾處理之圖像。該圖像在步驟S205中作為參照圖像而使用於預測圖像之產生。 步驟S211之處理結束後,解碼處理得以結束。 [逆量化處理之流程] 接著,參照圖13之流程圖,說明在圖12之步驟S203中實行之逆量化處理之流程之例。 逆量化處理開始後,在步驟S231中,差分量化參數緩衝器231取得在圖像編碼裝置100中產生之差分量化參數。 在步驟S232中,預測量化參數產生部241產生當前區域之預測量化參數。該處理與編碼側之情形同樣進行。即,實行參照圖9之流程圖說明之各處理。 在步驟S233中,關注區域量化參數再構築部242於在步驟S231中取得之差分量化參數中加入在步驟S232中產生之預測量化參數,藉此將關注區域量化參數進行再構築。 在步驟S234中,周邊區域量化參數緩衝器233記憶在步驟S233中產生之關注區域量化參數。該關注區域量化參數在以較當前區域更後處理之其他區域為當前區域之逆量化處理中,作為周邊區域量化參數加以利用。 在步驟S235中,量化正交轉換係數緩衝器232取得經量化之正交轉換係數。 在步驟S236中,逆量化處理部234使用在步驟S235再構築之關注區域量化參數,將在步驟S235取得之經量化之正交轉換係數進行逆量化。 逆量化結束後,逆量化處理部234結束逆量化處理,並使處理返回至圖12。 如以上般,藉由進行各種處理,圖像解碼裝置200可實現相對量化參數之編碼效率之提高。 <3.  第3實施形態> [預測量化參數之算出方法之控制] 另,預測量化參數之算出方法並非限定於上述之例。例如,可確認是否可將各周邊區域之量化參數作為周邊區域量化參數利用。 例如,在圖5之例中,當產生當前區域之預測量化參數時,使用周邊區域A至C之量化參數。其時,可設想如下之情形:基於當前區域之位置,周邊區域A至C之任一項例如位於畫框之外,或位於當前切片以外等,藉此無法使用其量化參數(為unavailable(不可用)之狀態)。 因此,當預測量化參數之產生時,量化參數編碼部121判定各周邊區域之利用可否(為available(可用)之狀態或為unavailable(不可用)之狀態),並可僅使用為可利用(available之狀態)之周邊區域而產生預測量化參數。進而,可按照該判定結果(各周邊區域之利用可否之狀況),而決定用以產生預測量化參數之運算方法。 [量化參數編碼部] 圖14係顯示該情形之量化參數編碼部121之主要構成例之方塊圖。如圖14所示,該情形之量化參數編碼部121,除了第1實施形態之情形(圖6)之構成之外,具有周邊區域利用可否判定部301及運算控制部302。 周邊區域利用可否判定部301,當預測量化參數產生部151產生預測量化參數時,判定是否該當前區域之各周邊區域為可利用。另,利用可否之理由為任意。周邊區域利用可否判定部301將其判定結果供給至運算控制部302。 運算控制部302遵循自周邊區域利用可否判定部301供給之判定結果,決定預測量化參數產生之運算方法,並將表示所決定之運算方法之資訊、與自周邊區域利用可否判定部301供給之判定結果供給至預測量化參數產生部151。 預測量化參數產生部151自周邊區域量化參數緩衝器143取得藉由周邊區域利用可否判定部301而判定為可利用(available(可用)之狀態)之周邊區域之量化參數作為周邊區域量化參數。預測量化參數產生部151使用該周邊區域量化參數,以由運算控制部302決定之運算方法產生預測量化參數。 茲說明更具體之例。例如,在圖5中,將周邊區域A至C作為獲得周邊區域量化參數之區域之候補。又,預測量化參數產生部151可進行上述之中位數運算與平均運算。 例如,周邊區域利用可否判定部301判定周邊區域A至C之全體為可利用(available(可用)之狀態)之情形,運算控制部302選擇中位數運算作為產生預測量化參數之運算方法。因此,該情形,預測量化參數產生部151自周邊區域量化參數緩衝器143讀取周邊區域量化參數QPa 、QPb 、及QPc ,並使用該等以上述之式(1)之方式進行中位數運算。 又,例如,周邊區域利用可否判定部301判定周邊區域A至C之中兩個為可利用(available(可用)之狀態)之情形,運算控制部302選擇平均運算作為產生預測量化參數之運算方法。 因此,例如,區域A為不可利用(unavailable(不可用)之狀態)之情形,預測量化參數產生部151自周邊區域量化參數緩衝器143讀取周邊區域量化參數QPb 及QPc ,並使用該等以下式(3)之方式進行平均運算(Avr())。 PredQP = Avr (QPb ,QPc ) ・・・(3) 另,區域B為不可利用(unavailable(不可用)之狀態)之情形,預測量化參數產生部151自周邊區域量化參數緩衝器143讀取周邊區域量化參數QPa 及QPc ,並使用該等以下式(4)之方式進行平均運算(Avr())。 PredQP = Avr (QPa ,QPc ) ・・・(4) 又,區域C為不可利用(unavailable(不可用)之狀態)之情形,預測量化參數產生部151自周邊區域量化參數緩衝器143讀取周邊區域量化參數QPa 及QPb ,並使用該等以下式(5)之方式進行平均運算(Avr())。 PredQP = Avr (QPa ,QPb ) ・・・(5) 又,例如,周邊區域利用可否判定部301判定周邊區域A至C之中一個為可利用(available(可用)之狀態)之情形,運算控制部302選擇將該周邊區域之量化參數作為預測量化參數之通常預測。 該情形,預測量化參數產生部151自周邊區域量化參數緩衝器143讀取周邊區域量化參數QPa 、QPb 、及QPc 之中、判定為可利用之周邊區域之量化參數,並以下式(6)至式(8)之方式,將其作為預測量化參數。 區域A為可利用(available(可用)之狀態)之情形: PredQP = QPa ・・・(6) 區域B為可利用(available(可用)之狀態)之情形: PredQP = QPb ・・・(7) 區域C為可利用(available(可用)之狀態)之情形: PredQP = QPc ・・・(8) [預測量化參數產生處理之流程] 參照圖15之流程圖,說明該情形之預測量化參數產生處理之流程之例。另,此處,將圖5之周邊區域A至C作為獲得周邊區域量化參數之區域之候補。又,預測量化參數產生部151可進行上述之中位數運算與平均運算。 開始預測量化參數產生處理後,在步驟S301中,周邊區域利用可否判定部301針對預測量化參數產生部151產生預測量化參數之當前區域,判定各周邊區域之利用可否。即,周邊區域利用可否判定部301針對周邊區域A至C之各者,判定是否為可利用。 在步驟S302中,運算控制部302針對當前區域,判定是否存在可利用之周邊區域。判定周邊區域A至C之全部周邊區域為不可利用(unavailable(不可用)之狀態)之情形,運算控制部302以使不會產生預測量化參數(或,產生值為0或初期值之預測量化參數)之方式結束預測量化參數產生處理,且使處理返回至圖8。 在步驟S302中判定存在可利用之周邊區域之情形,運算控制部302使處理進展至步驟S303。在步驟S303中,運算控制部302判定是否全部周邊區域為可利用(available(可用)之狀態)。判定周邊區域A至C全部可利用之情形,運算控制部302選擇中位數運算作為預測量化參數產生之運算方法,並使處理進展至步驟S304。 選擇中位數運算後,在步驟S304中,預測量化參數產生部151取得周邊區域A至C之量化參數QPa 、QPb 、及QPc 作為周邊區域量化參數。 在步驟S305中,預測量化參數產生部151藉由使用在步驟S304中取得之全部周邊區域量化參數之中位數運算而產生預測量化參數。即,預測量化參數產生部151將區域量化參數QPa 、QPb 、及QPc 之中值作為預測量化參數。步驟S305之處理結束後,預測量化參數產生部151結束預測量化參數產生處理,並使處理返回至圖8。 又,在步驟S303中判定僅一部分之周邊區域為可利用、且難以實行中位數運算之情形,運算控制部302使處理進展至步驟S306。在步驟S306中,運算控制部302判定三個周邊區域之中是否兩個周邊區域為可利用。判定兩個周邊區域為可利用之情形,運算控制部302選擇平均運算作為預測量化參數產生之運算方法,並使處理進展至步驟S307。 選擇平均運算後,在步驟S307中,預測量化參數產生部151取得周邊區域A至C之中、可利用(available(可用)之狀態)之區域之量化參數(即、量化參數QPa 、QPb 、及QPc 之中任兩項)作為周邊區域量化參數。 在步驟S308中,預測量化參數產生部151藉由使用在步驟S307中取得之周邊區域量化參數之平均運算而產生預測量化參數。即,預測量化參數產生部151將區域量化參數QPa 、QPb 、及QPc 之中、任兩項之平均值作為預測量化參數。步驟S308之處理結束後,預測量化參數產生部151結束預測量化參數產生處理,並使處理返回至圖8。 又,在步驟S306中,判定一個周邊區域為可利用之情形,運算控制部302選擇通常預測作為預測量化參數產生之方法,並使處理進展至步驟S309。 選擇通常預測後,在步驟S309中,預測量化參數產生部151取得周邊區域A至C之中、可利用(available(可用)之狀態)之區域之量化參數(即、量化參數QPa 、QPb 、及QPc 之中任一項)作為周邊區域量化參數。 在步驟S310中,預測量化參數產生部151將在步驟S309中取得之周邊區域量化參數作為預測量化參數。即,預測量化參數產生部151將區域量化參數QPa 、QPb 、及QPc 之中任一項作為預測量化參數。步驟S310之處理結束後,預測量化參數產生部151結束預測量化參數產生處理,並使處理返回至圖8。 如以上般,由於判定周邊區域之利用可否,故量化參數編碼部121可僅使用可利用之周邊區域之周邊區域量化參數而更確實地產生預測量化參數。另,由於該周邊區域之利用可否之判定條件為任意,故量化參數編碼部121可僅使用所期望之周邊區域之周邊區域量化參數而更確實地產生所期望之預測量化參數。 又,如以上般,由於按照可利用之周邊區域之數而決定預測量化參數之算出方法,故量化參數編碼部121可應用更適當之運算方法,更確實地產生預測量化參數。 另,在上述中,作為相對於當前區域之周邊區域,雖利用圖5之例之周邊區域A至C進行說明,但周邊區域可包含該等區域以外之區域。又,作為周邊區域之區域數亦為任意。例如,可按照當前區域與周邊區域之大小關係而決定。 又,在上述中,雖說明選擇中位數運算之條件係全部周邊區域為可利用,但並非限定於此,可為可實行中位數運算之數之周邊區域為可利用。例如,設周邊區域為五個之情形,可將三個以上之周邊區域為可利用作為選擇中位數運算之條件。再者,不應用中位數運算之情形,可使運算控制部302必然選擇平均運算。 [量化參數解碼部] 圖16係顯示該情形之量化參數解碼部221之主要構成例之方塊圖。圖16所示之量化參數解碼部221具有如圖14所示之構成,對應於以如上述之方法產生預測量化參數之量化參數編碼部121,自該量化參數編碼部121產生之差分量化參數正確產生關注區域量化參數。即,圖16所示之量化參數解碼部221以與圖14所示之量化參數編碼部121相同之方法產生預測量化參數。 如圖16所示,該情形之量化參數解碼部221,除了第2實施形態之情形(圖9)之構成之外,具有周邊區域利用可否判定部311及運算控制部312。 周邊區域利用可否判定部311以與周邊區域利用可否判定部301相同之方法,當預測量化參數產生部241產生預測量化參數時,判定是否該當前區域之各周邊區域為可利用。周邊區域利用可否判定部311將其判定結果供給至運算控制部312。 運算控制部312以與運算控制部302相同之方法,遵循自周邊區域利用可否判定部311供給之判定結果,決定預測量化參數產生之運算方法,將表示所決定之運算方法之資訊、與自周邊區域利用可否判定部301供給之判定結果供給至預測量化參數產生部241。 預測量化參數產生部241以與預測量化參數產生部151相同之方法,自周邊區域量化參數緩衝器233取得利用周邊區域利用可否判定部311判定為可利用(available(可用)之狀態)之周邊區域之量化參數作為周邊區域量化參數,且使用該周邊區域量化參數,以由運算控制部312決定之運算方法產生預測量化參數。 即,量化參數解碼部221在預測量化參數產生處理中,進行與參照圖15之流程圖說明之各處理相同之處理。 藉由使各部以如此之方式進行處理,量化參數解碼部221,該情形亦可正確地再構築在圖像編碼裝置100之量化處理中使用之關注區域量化參數。 <4. 第4實施形態> [加權平均] 預測量化參數之算出方法可為上述之各運算方法以外者。例如,可應用對各周邊區域量化參數進行加權後進行加法之加權平均運算。其時,可基於任意之指標進行加權,例如,可以周邊區域之大小進行加權。 [量化參數編碼部] 圖17係顯示該情形之量化參數編碼部121之主要構成例之方塊圖。如圖17所示,該情形,量化參數編碼部121除了第1實施形態(圖6)之情形之構成之外,具有周邊區域尺寸判定部321。 周邊區域尺寸判定部321針對預測量化參數產生部151產生預測量化參數之當前區域,判定其周邊區域之各者之大小。周邊區域尺寸判定部321將其判定結果通知至預測量化參數產生部151。 預測量化參數產生部151遵循該判定結果,即,基於各周邊區域之大小,將各周邊區域量化參數進行加權,求出其平均。即,預測量化參數產生部151算出各周邊區域量化參數之加權平均,並將其作為預測量化參數。 另,各周邊區域量化參數之權重之附加方法為任意。例如,越是尺寸較大之周邊區域之量化參數,可越加大其權重(提高加權)。即,以下式(9)之方式算出預測量化參數。 PredQP=(x×QPa +y×QPb +z×QPc )/(x+y+z) ・・・(9) 藉此,量化參數編碼部121可使預測量化參數更正確地反映周邊區域之量化參數,從而可提高預測量化參數之預測精度。 又,例如,越是較當前區域之尺寸更近之尺寸之周邊區域之量化參數,可越加大其權重(提高加權)。即,可最為提高與當前區域相同大小之周邊區域之量化參數之加權。另,可僅與當前區域相同大小之周邊區域之量化參數提高加權。 區域之尺寸有依存於圖像之特徵之傾向,相同之圖像易分割成相同之尺寸之區域。因此,位置與大小相近之區域彼此為相似之圖像之可能性較高,量化參數亦類似之可能性較高。因此,預測量化參數產生部151,越是較當前區域之尺寸更近之尺寸之周邊區域之量化參數,越加大其權重(提高加權),藉此,可期待提高預測量化參數之預測精度。 預測量化參數產生部151將其預測量化參數供給至差分量化參數產生部152。 [預測量化參數產生處理之流程] 參照圖18之流程圖,說明該情形之預測量化參數產生處理之流程之例。 預測量化參數產生處理開始後,在步驟S331中,周邊區域尺寸判定部321判定周邊區域之尺寸。 在步驟S332 中,預測量化參數產生部151按照在步驟S331中判定之各周邊區域之尺寸,決定附加於各周邊區域量化參數之權重。 在步驟S333中,預測量化參數產生部151取得周邊區域量化參數。在步驟S334中,預測量化參數產生部151使用周邊區域量化參數進行加權平均,從而產生預測量化參數。 步驟S334之處理結束後,預測量化參數產生部151結束預測量化參數產生處理,並使處理返回至圖8。 如以上般,藉由進行按照周邊區域之尺寸之加權平均,量化參數編碼部121可產生更正確地反映周邊區域之量化參數之預測量化參數。因此,量化參數編碼部121可提高預測量化參數之預測精度。藉此,圖像編碼裝置100可使編碼效率提高。 [量化參數解碼部] 圖19係顯示該情形之量化參數解碼部221之主要構成例之方塊圖。圖19所示之量化參數解碼部221具有如圖17所示之構成,對應於如上述般利用加權平均運算產生預測量化參數之量化參數編碼部121,自該量化參數編碼部121產生之差分量化參數正確地產生關注區域量化參數。即,圖19所示之量化參數解碼部221以與圖17所示之量化參數編碼部121相同之方法,產生預測量化參數。 如圖19所示,該情形之量化參數解碼部221,除了第2實施形態(圖9)之情形之構成之外,具有周邊區域尺寸判定部331。 周邊區域尺寸判定部331以與周邊區域尺寸判定部321相同之方法,針對預測量化參數產生部241產生預測量化參數之當前區域,判定其周邊區域之各者之大小。周邊區域尺寸判定部331將其判定結果通知至預測量化參數產生部241。 預測量化參數產生部241以與預測量化參數產生部151相同之方法,產生預測量化參數。即,預測量化參數產生部241基於各周邊區域之大小,算出各周邊區域量化參數之加權平均,將其作為預測量化參數。 即,量化參數解碼部221在預測量化參數產生處理中,進行與參照圖18之流程圖說明之各處理相同之處理。 藉由使各部以如此之方式進行處理,量化參數解碼部221,該情形亦可正確地再構築在圖像編碼裝置100之量化處理中使用之關注區域量化參數。 <5. 第5實施形態> [類別資料設定] 另,使用者等可進行用以算出預測量化參數之如上述之各種運算之使用可否設定。又,可將該設定作為類別資料傳送至解碼側。 [量化參數編碼部等] 圖20係顯示該情形之量化參數編碼部121等之主要構成例之方塊圖。如圖20所示,該情形之圖像編碼裝置100,除了第1實施形態(圖1)之情形之構成之外,進而具有類別資料設定部351。 類別資料設定部351基於例如使用者指示或外部之處理指示,進行用以算出預測量化參數之各種運算之使用可否設定,產生包含該設定之類別資料。類別資料設定部351將所產生之類別資料供給至量化參數編碼部121。又,類別資料設定部351將所產生之類別資料亦供給至可逆編碼部106加以編碼,且藉由包含於例如序列參數集或圖像參數集等而傳送至解碼側。 該情形,如圖20所示,量化參數編碼部121除了第1實施形態(圖6)之情形之構成之外,進而具有類別資料緩衝器361及運算控制部362。 類別資料緩衝器361取得自類別資料設定部351供給之類別資料進行記憶。類別資料緩衝器361在特定之時機,或,基於來自外部之要求,讀取所記憶之類別資料,供給至運算控制部362。 運算控制部362自類別資料緩衝器361讀取對應於預測量化參數產生部151產生預測量化參數之當前區域之類別資料。運算控制部362遵循該類別資料等決定算出預測量化參數之運算方法,並將該運算方法通知至預測量化參數產生部151。 預測量化參數產生部151以由運算控制部362所指定之方法,進行預測量化參數產生之運算。 [類別資料] 接著,說明類別資料之細節。圖21中顯示類別資料之例。如圖21所示,於類別資料中包含例如PredQP_median_enable、PredQP_average_enable、及PredQP_waverage_enable之三個旗標。類別資料被設定於圖像、切片、LCU、CU等任意之每個資料單位中。 PredQP_median_enable係在設定有該旗標之資料單位中,表示是否對預測量化參數產生之運算應用中位數運算之旗標資訊。該旗標之值為「0」之情形,禁止使用中位數運算,運算控制部362無法針對預測量化參數產生之運算選擇中位數運算。又,該旗標之值為「1」之情形,不禁止使用中位數運算,運算控制部362可針對預測量化參數產生之運算選擇中位數運算。 PredQP_average_enable係在設定有該旗標之資料單位中,表示是否對預測量化參數產生之運算應用平均運算之旗標資訊。該旗標之值為「0」之情形,禁止使用平均運算,運算控制部362無法針對預測量化參數產生之運算選擇平均運算。又,該旗標之值為「1」之情形,不禁止使用平均運算,運算控制部362可針對預測量化參數產生之運算選擇平均運算。 PredQP_waverage_enable係在設定有該旗標之資料單位中,表示是否對預測量化參數產生之運算應用加權平均運算之旗標資訊。該旗標之值為「0」之情形,禁止使用加權平均運算,運算控制部362無法針對預測量化參數產生之運算選擇加權平均運算。又,該旗標之值為「1」之情形,不禁止使用加權平均運算,運算控制部362可針對預測量化參數產生之運算選擇加權平均運算。 [類別資料設定處理之流程] 接著,參照圖22之流程圖說明設定如此之類別資料之類別資料設定處理之流程之例。另,以下,為方便說明,就於每個LCU中設定類別資料者進行說明。 類別資料設定處理開始後,類別資料設定部351在步驟S351中,於每個LCU中設定PredQP_median_enable。在步驟S352中,類別資料設定部351於每個LCU中設定PredQP_average_enable。在步驟S353中,類別資料設定部351於每個LCU中設定PredQP_waverage_enable。 在步驟S354中,類別資料設定部351將包含在步驟S351至步驟S353中產生之各種旗標之類別資料供給至可逆編碼部106加以編碼,且連同例如序列參數集(SPS)或圖像參數集(PPS)等而傳送至解碼側。 步驟S354之處理結束後,類別資料設定部351結束類別資料設定處理。 [預測量化參數產生處理之流程] 接著,參照圖23之流程圖,說明該情形之預測量化參數產生處理之流程之例。預測量化參數產生處理開始後,類別資料緩衝器361在步驟S371中取得當前區域之類別資料。在步驟S372中,運算控制部362基於在步驟S371中取得之類別資料而決定預測量化參數產生之運算方法。 在步驟S373中,預測量化參數產生部151選擇複數個獲得預測量化參數之候補之周邊區域。在步驟S374中,預測量化參數產生部151取得所選擇之各周邊區域之周邊區域量化參數。在步驟S375中,預測量化參數產生部151使用周邊區域量化參數而產生預測量化參數。 步驟S375之處理結束後,預測量化參數產生部151結束預測量化參數產生處理,並使處理返回至圖8。 如以上般,預測量化參數產生部151按照類別資料產生預測量化參數。藉此,預測量化參數產生部151可選擇更適當之運算方法。 [量化參數解碼部等] 圖24係顯示該情形之量化參數解碼部221等之主要構成例之方塊圖。圖24所示之量化參數解碼部221具有如圖20所示之構成,對應於以上述之方法產生預測量化參數之量化參數編碼部121,自該量化參數編碼部121產生之差分量化參數正確地產生關注區域量化參數。即,圖24所示之量化參數解碼部221以與圖20所示之量化參數編碼部121相同之方法,產生預測量化參數。 如圖24所示,該情形之量化參數解碼部221具有類別資料緩衝器381及運算控制部382。 類別資料緩衝器381取得在可逆解碼部202中擷取之、自解碼側傳送之類別資料,並進行記憶。類別資料緩衝器381在特定之時機,或,遵循來自外部之要求,將所記憶之類別資料供給至運算控制部382。 運算控制部382以與運算控制部362相同之方法,自類別資料緩衝器381讀取對應於預測量化參數產生部241產生預測量化參數之當前區域之類別資料。運算控制部382遵循該類別資料等決定算出預測量化參數之運算方法,並將該運算方法通知至預測量化參數產生部241。 預測量化參數產生部241以運算控制部382中指定之方法,進行預測量化參數產生之運算。 即,量化參數解碼部221在預測量化參數產生處理中,進行與參照圖23之流程圖說明之各處理相同之處理。 藉此,量化參數解碼部221,該情形亦可正確地再構築在圖像編碼裝置100之量化處理中使用之關注區域量化參數。 [類別資料] 另,類別資料對應之運算方法為任意。可為上述之以外。又,類別資料可不對應於上述之運算方法之部分或全部。再者,包含於類別資料之旗標為任意,上述之旗標以外者可包含於類別資料中。例如,可包含圖25所示之PredQP_type_flag。 PredQP_type_flag係在設定該旗標之資料單位中,表示可利用於預測量化參數產生之運算之運算方法之旗標資訊。例如,該旗標之值為「00」之情形,所用運算方法之使用被禁止,預測量化參數產生部151無法實行預測運算。又,該旗標之值為「01」之情形,不禁止使用中位數運算,運算控制部362可針對預測量化參數產生之運算選擇中位數運算。 再者,該旗標之值為「10」之情形,不禁止使用平均運算,運算控制部362可針對預測量化參數產生之運算選擇平均運算。又,該旗標之值為「11」之情形,不禁止中位數運算及平均運算之雙方之使用,運算控制部362可自中位數運算及平均運算之雙方進行選擇。 另,可使某個值許可或禁止某個運算之使用。又,PredQP_type_flag控制之運算方法之種類及數可為上述之以外。再者,PredQP_type_flag之位元長可為3位元以上。 [類別資料設定處理之流程] 將如此之PredQP_type_flag作為類別資料之情形,量化參數編碼部121等之構成與參照圖20上述之情形相同。又,預測量化參數產生處理之流程與參照圖23之流程圖上述之情形相同。 參照圖26之流程圖說明將如此之PredQP_type_flag作為類別資料之情形之類別資料設定處理之流程之例。 類別資料設定處理開始後,類別資料設定部351在步驟S391中於每個LCU中設定PredQP_type_flag。該設定被供給至類別資訊緩衝器361中加以保持。在步驟S392中,類別資料設定部351將藉由步驟S391之處理而設定之類別資料供給至可逆編碼部106加以編碼,且傳送至解碼側。 如以上般,預測量化參數產生部151按照類別資料產生預測量化參數。藉此,預測量化參數產生部151可選擇更適當之運算方法。 另,PredQP_type_flag亦可設定於圖像、切片、LCU、CU等任意之每個資料單位中。 另,可設利用類別資料控制之預測運算之數與種類為可變。該情形,表示利用該類別資料控制之預測運算之數與種類之資訊亦可傳送至解碼側。 另,本技術可應用於經由衛星廣播、閉路電視、網際網路、或行動電話等之網路媒體而接收例如MPEG、H. 26x等般藉由離散餘弦轉換等之正交轉換與動態補償而得以壓縮之圖像資訊(位元串流)之圖像編碼裝置及圖像解碼裝置。又,本技術可應用於在如光、磁碟、及快閃記憶體之記憶媒體上處理時使用之圖像編碼裝置及圖像解碼裝置。再者,本技術亦可應用於包含於該等圖像編碼裝置及圖像解碼裝置等中之動態預測補償裝置。 <6. 第6實施形態> [LCU單位之預測] 但,若以LCU(最大編碼單元)單位(LCU基礎)進行處理,則因處理關閉在LCU內,故速率控制較容易。且,該情形時,算出量化參數(差分量化參數·預測量化參數)時使用之緩衝器亦以LCU單位得以控制,藉此以LCU單位重置(捨棄)資料。 以LCU單位(LCU基礎)進行處理之情形,量化參數之預測係以例如CU或TU等、小於LCU之單位進行。例如,若於每個CU中進行量化參數之預測,則當前CU係在LCU內在編碼順序(解碼順序)中最初之位置(光域掃描之情形時為左上端)之CU之情形,預測時參照之周邊CU位於當前CU之外(其他LCU內)。 因此,藉由緩衝器之重置廢除量化參數,且為不可利用(unavailable(不可用)之狀態(並非可用之狀態))之可能性較高。 因此,以LCU單位(LCU基礎)進行處理,且於小於LCU之單位之每個區域(例如CU)中進行量化參數之預測之情形,當前區域(例如當前CU)之周邊區域位於當前LCU之外時,可參照上一(前一個)處理之區域(例如前一個CU)之量化參數。即,可將於上一個算出差分量化參數之區域之量化參數作為預測量化參數(或使用於預測量化參數之算出)。 茲參照圖27更具體地進行說明。設以LCU單位(LCU基礎)進行處理,且於每個CU中進行量化參數之預測。又,在LCU內,各CU依光域掃描順序進行。且,當前CU (Current CU)位於當前LCU(Current LCU)之左上端(即,在當前LCU內最初編碼處理之CU)。且,上一處理之CU(前一個CU)位於鄰接於當前LCU之左之LCU(上一處理之LCU(前一個LCU)之右下端)(即,在前一個LCU內最後編碼處理之CU)。 若設當前CU(Current CU)之量化參數之預測中參照之周邊CU為CU(A)、CU(B)、及CU(C),則該等CU皆位於當前LCU外。因此,判定該等CU皆為不可利用(unavailable(不可用)之狀態(並非可用狀態)),取而代之,將上一處理之CU(前一個CU)之量化參數QPprev 作為預測量化參數PredQP。即,如以下之式(10),算出當前CU之量化參數QPcurr 與預測量化參數PredQP之差分量化參數dQP。 dQP = QPcurr - PredQP = QPcurr - QPprev ・・・(10) 例如,在第3實施形態中,量化參數編碼部121之周邊區域利用可否判定部301(圖14)自當前區域(例如,圖27之當前CU)之位置等,判定周邊區域(例如,圖27之CU(A)至CU(C))是否可利用(是否為可用狀態)。如圖27之例,判定周邊區域皆不可利用(位於當前LCU之外,並非可用狀態)之情形,運算控制部302指定前一個處理之區域(例如,圖27之前一個CU)作為參照地。預測量化參數產生部151將該前一個處理之區域(例如,圖27之前一個CU)之量化參數作為預測量化參數。差分量化參數產生部152產生該預測量化參數、與當前區域(例如,圖27之當前CU)之量化參數之差分即差分量化參數。 藉此,圖像編碼裝置100以LCU單位(LCU基礎)進行處理,可容易進行速率控制,且可更確實地產生預測量化參數。 另,如此之方法不僅可應用於編碼時進行之預測量化參數產生,亦可應用於解碼時進行之預測量化參數產生。例如,圖16所示之量化參數解碼部221亦可以與圖14所示之量化參數編碼部121相同之方法產生預測量化參數。 該情形時,例如,量化參數解碼部221之周邊區域利用可否判定部311(圖16)自當前區域(例如,圖27之當前CU)之位置等,判定周邊區域(例如,圖27之CU(A)至CU(C))是否可利用(是否為可用狀態)。如圖27之例,判定周邊區域皆不可利用(位於當前LCU之外,並非可用狀態)之情形,運算控制部312指定前一個處理之區域(例如,圖27之前一個CU)作為參照地。預測量化參數產生部241將該前一個處理之區域(例如,圖27之前一個CU)之量化參數作為預測量化參數。關注區域差分量化參數再構築部242將該預測量化參數、與當前區域(例如,圖27之當前CU)之差分量化參數相加,將關注區域量化參數進行再構築。逆量化處理部234使用該關注區域量化參數進行正交轉換係數之逆量化處理。 藉此,圖像解碼裝置200以LCU單位(LCU基礎)進行處理,可容易進行速率控制,且可更確實地產生預測量化參數。 <7. 第7實施形態> [向多視點圖像編碼·多視點圖像解碼之應用] 上述之一系列之處理可應用於多視點圖像編碼·多視點圖像解碼。圖28係顯示多視點圖像編碼方式之一例。 如圖28所示,多視點圖像包含複數個視點之圖像,且該複數個視點之中之特定之一個視點之圖像被指定為基本視圖之圖像。基本視圖之圖像以外之各視點之圖像作為非基本視圖之圖像處理。 進行如圖28之多視點圖像編碼之情形,在各視圖(同一視圖)中,亦可採取量化參數之差分。 (1)base view: dQP(base view)=QPcurr (base view)-PredQP(base view) (2)non-base view: dQP(non-base view)=QPcurr (non-base view)-PredQP(non-base view) 又,在各視圖(不同視圖)中,亦可採取量化參數之差分。 (3)base view/non-base view: dQP(inter view)=QPcurr (base view)-QPcurr (non-base view) (4)non-base view/non-base view: dQP(inter view)=QPcurr (non-base view i)-QPcurr (non-base view j) 又,可使用不同視圖之區域之量化參數,利用例如中位數、平均、或加權平均等之任意之運算產生當前區域之量化參數QPcurr 之預測值PredQP。 (5)base view: (5-1) PredQP(base view)=Med (QPa (non-base view),QPb (non-base view),QPc (non-base view)) (5-2) PredQP(base view)=Avr (QPa (non-base view),QPb (non-base view),QPc (non-base view)) (5-3) PredQP(base view)=(x×QPa (non-base view)+y×QPb (non-base view)+z×QPc (non-base view))/(x+y+z) (6)non-base view: (6-1) PredQP(non-base view i)=Med (QPa (non-base view j),QPb (non-base view j),QPc (non-base view j)) (6-2) PredQP(non-base view i)=Avr (QPa (non-base view j),QPb (non-base view j),QPc (non-base view j)) (6-3) PredQP(non-base view i)=(x×QPa (non-base view j)+y×QPb (non-base view j)+z×QPc (non-base view j))/(x+y+z) 當然,該等情形亦如第3實施形態中所說明般,可確認是否使用於預測量化參數之算出之周邊區域為可利用。且,可僅使用可利用之區域而算出預測值PredQP。又,可藉由可利用之區域,決定預測值PredQP之算出方法。例如第3實施形態中所說明般,可按照可利用之區域之數,自中位數與平均等之運算方法之中選擇使用於預測之運算。 又,該等情形亦如第4實施形態中所說明般,可利用與當前區域不同之視圖之複數個周邊區域之量化參數之加權平均運算,算出預測值PredQP。該情形,加權可基於周邊區域之大小進行,可基於與當前區域之尺寸之類似度進行。 再者,該等情形亦如第5實施形態中所說明般,可基於例如使用者指示或外部之處理之指示等,進行用以算出預測量化參數之各種運算之使用可否設定。又,可將包含該設定之類別資料傳送至解碼側。該類別資料可包含顯示是否應用每個運算方法之旗標,可包含表示可利用之運算方法之旗標。 另,包含於該類別資料之旗標,可基於基本視圖圖像、與非基本視圖圖像之各者而分別設定,可作為相對於基本視圖圖像及非基本視圖圖像之雙方共通之資訊而設定。 如以上上述之量化參數之預測,如第2至第5實施形態中所說明般,在圖像解碼裝置中亦同樣進行。 針對上述之各dQP,亦可設定識別是否存在值不為0之dQP之旗標。 [多視點圖像編碼裝置] 圖29係顯示進行上述之多視點圖像編碼之多視點圖像編碼裝置之圖。如圖29所示,多視點圖像編碼裝置600具有編碼部601、編碼部602、及多工化部603。 編碼部601將基本視圖圖像進行編碼,產生基本視圖圖像編碼串流。編碼部602將非基本視圖圖像進行編碼,產生非基本視圖圖像編碼串流。多工化部603將在編碼部601中產生之基本視圖圖像編碼串流、與在編碼部602中產生之非基本視圖圖像編碼串流多工化,產生多視點圖像編碼串流。 對於該多視點圖像編碼裝置600之編碼部601及編碼部602,可應用圖像編碼裝置100(圖1)。該情形,多視點圖像編碼裝置600設定編碼部601設定之量化參數與編碼部602設定之量化參數之差分值而加以傳送。 [多視點圖像解碼裝置] 圖30係顯示進行上述之多視點圖像解碼之多視點圖像解碼裝置之圖。如圖30所示,多視點圖像解碼裝置610具有逆多工化部611、解碼部612、及解碼部613。 逆多工化部611將基本視圖圖像編碼串流與非基本視圖圖像編碼串流被多工化之多視點圖像編碼串流進行逆多工化,擷取基本視圖圖像編碼串流、與非基本視圖圖像編碼串流。解碼部612將利用逆多工化部611擷取之基本視圖圖像編碼串流進行解碼,獲得基本視圖圖像。解碼部613將利用逆多工化部611擷取之非基本視圖圖像編碼串流進行解碼,獲得非基本視圖圖像。 對於該多視點圖像解碼裝置610之解碼部612及解碼部613,可應用圖像解碼裝置200(圖10)。該情形,多視點圖像解碼裝置610自編碼部601設定之量化參數與編碼部602設定之量化參數之差分值設定量化參數,而進行逆量化。 <8. 第8實施形態> [向階層圖像編碼·階層圖像解碼之應用] 上述一系列之處理可應用於階層圖像編碼·階層圖像解碼。圖31係顯示階層圖像編碼方式之一例。 如圖31所示,階層圖像包含複數個階層(解析度)之圖像,且該複數個解析度之中之特定之一個階層之圖像被指定為基礎層之圖像。基礎層之圖像以外之各階層之圖像作為非基礎層之圖像處理。 進行如圖31之階層圖像編碼(空間可伸縮性)之情形,在各層(同一層)中,亦可採取量化參數之差分。 (1)base layer: dQP(base layer)=QPcurr (base layer)-PredQP(base layer) (2)non-base layer: dQP(non-base layer)=QPcurr (non-base layer)-PredQP(non-base layer) 又,在各層(不同層)中,亦可採取量化參數之差分。 (3)base layer/ non-base layer: dQP(inter layer)=QPcurr (base layer)-QPcurr (non-base layer) (4)non-base layer/non-base layer: dQP(inter layer)=QPcurr (non-base layer i)-QPcurr (non-base layer j) 又,可使用不同層之區域之量化參數,利用例如中位數、平均、或加權平均等之任意之運算產生當前區域之量化參數QPcurr 之預測值PredQP。 (5)base layer: (5-1) PredQP(base layer)=Med (QPa (non-base layer),QPb (non-base layer),QPc (non-base layer)) (5-2) PredQP(base layer)=Avr (QPa (non-base layer),QPb (non-base layer),QPc (non-base layer)) (5-3) PredQP(base layer)=(x×QPa (non-base layer)+y×QPb (non-base layer)+z×QPc (non-base layer))/(x+y+z) (6)non-base layer: (6-1) PredQP(non-base layer i)=Med (QPa (non-base layer j),QPb (non-base layer j),QPc (non-base layer j)) (6-2) PredQP(non-base layer i)=Avr (QPa (non-base layer j),QPb (non-base layer j),QPc (non-base layer j)) (6-3) PredQP(non-base layer i)=(x×QPa (non-base layer j) +y×QPb (non-base layer j)+z×QPc (non-base layer j))/(x+y+z) 當然,該等情形亦如第3實施形態中所說明般,可確認是否使用於預測量化參數之算出之周邊區域為可利用。且,可僅使用可利用之區域而算出預測值PredQP。又,可藉由可利用之區域,決定預測值PredQP之算出方法。例如第3實施形態中所說明般,可按照可利用之區域之數,自中位數與平均等之運算方法之中選擇使用於預測之運算。 又,該等情形亦如第4實施形態中所說明般,可利用與當前區域不同之層之複數個周邊區域之量化參數之加權平均運算,算出預測值PredQP。該情形,加權可基於周邊區域之大小進行,可基於與當前區域之尺寸之類似度進行。 再者,該等情形亦如第5實施形態中所說明般,可基於例如使用者指示或外部之處理之指示等,進行用以算出預測量化參數之各種運算之使用可否設定。又,可將包含該設定之類別資料傳送至解碼側。該類別資料可包含顯示是否應用每個運算方法之旗標,可包含表示可利用之運算方法之旗標。 另,包含於該類別資料之旗標,可基於基礎層圖像、與非基礎層圖像之各者而分別設定,可作為相對於基礎層圖像及非基礎層圖像之雙方共通之資訊而設定。 如以上上述之量化參數之預測,如第2至第5實施形態中所說明般,在圖像解碼裝置中亦同樣進行。 與上述之技術相同,針對上述之各dQP,亦可設定識別是否存在值不為0之dQP之旗標。 [階層圖像編碼裝置] 圖32係顯示進行上述之階層圖像編碼之階層圖像編碼裝置之圖。如圖32所示,階層圖像編碼裝置620具有編碼部621、編碼部622、及多工化部623。 編碼部621將基礎層圖像進行編碼,產生基礎層圖像編碼串流。編碼部622將非基礎層圖像進行編碼,產生非基礎層圖像編碼串流。多工化部623將在編碼部621中產生之基礎層圖像編碼串流、與在編碼部622中產生之非基礎層圖像編碼串流多工化,產生階層圖像編碼串流。 對於該階層圖像編碼裝置620之編碼部621及編碼部622,可應用圖像編碼裝置100(圖1)。該情形,階層圖像編碼裝置620設定編碼部621設定之量化參數與編碼部622設定之量化參數之差分值而加以傳送。 [階層圖像解碼裝置] 圖33係顯示進行上述之階層圖像解碼之階層圖像解碼裝置之圖。如圖33所示,階層圖像解碼裝置630具有逆多工化部631、解碼部632、及解碼部633。 逆多工化部631將基礎層圖像編碼串流與非基礎層圖像編碼串流被多工化之階層圖像編碼串流進行逆多工化,擷取基礎層圖像編碼串流、與非基礎層圖像編碼串流。解碼部632將利用逆多工化部631擷取之基礎層圖像編碼串流進行解碼,獲得基礎層圖像。解碼部633將利用逆多工化部631擷取之非基礎層圖像編碼串流進行解碼,獲得非基礎層圖像。 對於該階層圖像解碼裝置630之解碼部632及解碼部633,可應用圖像解碼裝置200(圖10)。該情形,階層圖像解碼裝置630自編碼部621設定之量化參數與編碼部622設定之量化參數之差分值設定量化參數,而進行逆量化。 <9. 第9實施形態> [電腦] 上述之一系列之處理,可利用硬體實行,可利用軟體實行。利用軟體實行一系列之處理之情形時,構成該軟體之程式被安裝於電腦中。此處,電腦包含配置於專用之硬體之電腦、或藉由安裝各種程式而可實行各種功能之通用之電腦等。 在圖34中,電腦800之CPU(Central Processing Unit:中央處理器)801遵循記憶於ROM(Read Only Memory:唯讀記憶體)802之程式、或自記憶部813負載至RAM(Random Access Memory:隨機存取記憶體)803之程式而實行各種處理。又,於RAM803中亦適宜記憶CPU801在實行各種處理上所需之資料等。 CPU801、ROM802、及RAM803經由匯流排804而相互連接。又,於該匯流排804中亦連接有輸出入介面810。 於輸出入介面810上連接有由鍵盤、滑鼠等而成之輸入部811、由CRT(Cathode Ray Tube:陰極射線管)與LCD (Liquid Crystal Display:液晶顯示器)等而成之顯示器、以及由揚聲器等而成之輸出部812、由硬碟等構成之記憶部813、由數據機等構成之通信部814。通信部814進行經由包含網際網路之網路之通信處理。 又,於輸出入介面810,按照需要而連接驅動器815,適宜安裝磁性光碟、光碟、磁光碟、或半導體記憶體等之可卸除式媒體821,且自該等讀取之電腦程式按照需要而安裝於記憶部813中。 利用軟體實行上述之一系列之處理之情形時,自網路或記錄媒體安裝構成該軟體之程式。 該記錄媒體,例如圖34所示,與裝置本體另行,不僅以由為了對使用者發佈程式而佈置之、記錄有程式之磁性光碟(包含軟性磁碟)、光碟(包含CD-ROM(Compact Disc-Read Only Memory:光碟唯讀記憶體)、DVD(Digital Versatile Disc:數位影音光碟))、磁光碟(包含MD(Mini Disc:迷你光碟))、或半導體記憶體等而成之可卸除式媒體821構成,且以在預先配置於裝置本體中之狀態下對使用者發佈之、記錄有程式之ROM802、與包含於記憶部813之硬碟等而構成。 另,電腦執行之程式,可為沿本說明書中說明之順序而依時間順序進行處理之程式,可為並行或在進行函數調用時等之必要之時機進行處理之程式。 又,在本說明書中,記述記錄於記錄媒體中之程式之步驟,沿所記載之順序而依時間順序進行處理乃不言而喻,即使未必依時間順序處理,亦包含並行或個別執行之處理。 又,在本說明書中,所謂系統,係表示由複數個裝置(device)構成之裝置全體。 又,可分割在上述中作為一個裝置(或處理部)說明之構成,而作為複數個裝置(或處理部)構成。相反,可總和在上述中作為複數個裝置(或處理部)說明之構成而作為一個裝置(或處理部)構成。又,可於各裝置(或各處理部)之構成中附加上述以外之構成。再者,若作為系統全體之構成或動作實質上相同,則可使某裝置(或處理部)之構成之一部分包含於其他裝置(或其他處理部)之構成中。即,本技術並非限定於上述之實施形態,在不脫離本技術之要旨之範圍內可進行各種變更。 上述實施形態中之圖像編碼裝置及圖像解碼裝置,可應用於衛星廣播、閉路電視等之有線廣播、在網際網路上之發佈、及利用細胞通信之向終端之發佈等之傳送機或接收機、於光碟、磁碟及快閃記憶體等之媒體中記錄圖像之記錄裝置、或、自該等記憶媒體使圖像再生之再生裝置等之各種電子機器中。以下,茲說明四個應用例。 [第1應用例:電視裝置] 圖35係顯示應用上述實施形態之電視裝置之概略構成之一例。電視裝置900具備天線901、調諧器902、多路分配器903、解碼器904、影像信號處理部905、顯示部906、音頻信號處理部907、揚聲器908、外部介面909、控制部910、使用者介面911、及匯流排912。 調諧器902自經由天線901接收之廣播信號擷取所期望之通道之信號,並將所擷取之信號進行解調。接著,調諧器902將藉由解調而獲得之位元串流向多路分配器903輸出。即,調諧器902具有作為接收圖像被編碼之位元串流之、電視裝置900中之傳送部之作用。 多路分配器903自位元串流分離視聽對象之節目之影像串流及音頻串流,並將所分離之各串流向解碼器904輸出。又,多路分配器903自位元串流擷取EPG(Electronic Program Guide:電子節目表選單)等之輔助性之資料,並將所擷取之資料供給至控制部910。另,位元串流被擾碼之情形時,多路分配器903可進行解擾。 解碼器904將自多路分配器903輸入之影像串流及音頻串流進行解碼。接著,解碼器904向影像信號處理部905輸藉由解碼處理而產生之影像資料出。又,解碼器904向音頻信號處理部907輸出藉由解碼處理而產生之音頻資料。 影像信號處理部905使自解碼器904輸入之影像資料再生,於顯示部906顯示影像。又,影像信號處理部905可使經由網路供給之應用程式畫面顯示於顯示部906。又,影像信號處理部905可針對影像資料,按照設定進行例如雜訊除去等之追加處理。再者,影像信號處理部905可產生例如菜單、按鈕或遊標等之GUI(Graphical User Interface:圖形使用者介面)之圖像,並使所產生之圖像重疊於輸出圖像。 顯示部906藉由自影像信號處理部905供給之驅動信號而得以驅動,於顯示裝置(例如液晶顯示器、電漿顯示或OELD(Organic Electron Luminescence Display:有機電子發光顯示器)(有機EL顯示器)等)之影像面上顯示影像或圖像。 音頻信號處理部907對自解碼器904輸入之音頻資料進行D∕A轉換及放大等之再生處理,使音頻自揚聲器908輸出。又,音頻信號處理部907可對音頻資料進行雜訊除去等之追加處理。 外部介面909係用以連接電視裝置900與外部機器或網路之介面。例如,經由外部介面909接收之影像串流或音頻串流可藉由解碼器904而解碼。即,又,外部介面909亦具有作為接收圖像被編碼之位元串流之、電視裝置900中之傳送部之作用。 控制部910具有CPU等之處理器、以及RAM及ROM等之記憶體。記憶體將藉由CPU而執行之程式、程式資料、EPG資料、及經由網路而取得之資料等進行記憶。藉由記憶體而記憶之程式,例如電視裝置900之起動時藉由CPU讀入、執行。CPU藉由執行程式,按照例如自使用者介面911輸入之操作信號,控制電視裝置900之動作。 使用者介面911與控制部910連接。使用者介面911具有例如用於使用者操作電視裝置900之按鈕及開關、以及遠端控制信號之接收部等。使用者介面911經由該等構成要件檢測由使用者引起之操作而產生操作信號,並將所產生之操作信號向控制部910輸出。 匯流排912使調諧器902、多路分配器903、解碼器904、影像信號處理部905、音頻信號處理部907、外部介面909及控制部910相互連接。 在以如此之方式構成之電視裝置900中,解碼器904具有上述之實施形態中之圖像解碼裝置之功能。藉此,電視裝置900中之圖像之解碼時,可提高相對量化參數之編碼效率。 [第2應用例:行動電話] 圖36係顯示應用上述實施形態之行動電話之概略構成之一例。行動電話920具備天線921、通信部922、音頻編碼解碼器923、揚聲器924、麥克風925、相機部926、圖像處理部927、多工分離部928、記錄播放部929、顯示部930、控制部931、操作部932、及匯流排933。 天線921連接於通信部922。揚聲器924及麥克風925連接於音頻編碼解碼器923。操作部932連接於控制部931。匯流排933使通信部922、音頻編碼解碼器923、相機部926、圖像處理部927、多工分離部928、記錄播放部929、顯示部930、控制部931相互連接。 行動電話920在包含音頻通話模式、資料通信模式、攝影模式及電視電話模式之各種動作模式下,進行音頻信號之傳送接收、電子郵件或圖像資料之傳送接收、圖像之攝像、及資料之記錄等之動作。 在音頻通話模式下,利用麥克風925產生之類比音頻信號被供給至音頻編碼解碼器923。音頻編碼解碼器923將類比音頻信號向音頻資料轉換,並將所轉換之音頻資料進行A∕D轉換而壓縮。接著,音頻編碼解碼器923將壓縮後之音頻資料向通信部922輸出。通信部922將音頻資料進行編碼及調變,而產生傳送信號。接著,通信部922經由天線921向基地台(未圖示)傳送所產生之傳送信號。又,通信部922將經由天線921接收之無線信號進行放大及頻率轉換,而取得接收信號。接著,通信部922將接收信號進行解調及解碼而產生音頻資料,並將所產生之音頻資料向音頻編碼解碼器923輸出。音頻編碼解碼器923將音頻資料進行擴展及D∕A轉換,而產生類比音頻信號。接著,音頻編碼解碼器923將所產生之音頻信號供給至揚聲器924而輸出音頻。 又,在資料通信模式下,例如,控制部931按照經由操作部932之由使用者引起之操作,產生構成電子郵件之文字資料。又,控制部931使文字顯示於顯示部930。又,控制部931按照經由操作部932之來自使用者之傳送指示,產生電子郵件資料,並將所產生之電子郵件資料向通信部922輸出。通信部922將電子郵件資料進行編碼及調變,而產生傳送信號。接著,通信部922經由天線921向基地台(未圖示)傳送所產生之傳送信號。又,通信部922將經由天線921接收之無線信號進行放大及頻率轉換,而取得接收信號。接著,通信部922將接收信號進行解調及解碼而復原電子郵件資料,並將經復原之電子郵件資料向控制部931輸出。控制部931於顯示部930中顯示電子郵件之內容,且使電子郵件資料記憶於記錄播放部929之記憶媒體中。 記錄播放部929具有可讀寫之任意之記憶媒體。例如,記憶媒體可為RAM或快閃記憶體等之內置型之記憶媒體,可為硬碟、磁碟、磁光碟、光碟、USB(Unallocated Space Bitmap:未配置空間位圖)記憶體、或記憶卡等之外部安裝型之記憶媒體。 又,在攝影模式下,例如,相機部926攝像被攝體而產生圖像資料,並將所產生之圖像資料向圖像處理部927輸出。圖像處理部927將自相機部926輸入之圖像資料進行編碼,並使位元串流記憶於記錄播放部929之記憶媒體中。 又,在電視電話模式下,例如,多工分離部928將藉由圖像處理部927而得以編碼之影像串流、與自音頻編碼解碼器923輸入之音頻串流多工化,並向通信部922輸出經多工化之串流。通信部922將串流進行編碼及調變,而產生傳送信號。接著,通信部922經由天線921向基地台(未圖示)傳送所產生之傳送信號。又,通信部922將經由天線921接收之無線信號進行放大及頻率轉換,而取得接收信號。該等傳送信號及接收信號中,可包含位元串流。接著,通信部922將接收信號進行解調及解碼而復原串流,並向多工分離部928輸出經復原之串流。多工分離部928自輸入之串流分離影像串流及音頻串流,並向圖像處理部927輸出影像串流,向音頻編碼解碼器923輸出音頻串流。圖像處理部927將影像串流進行解碼,而產生影像資料。影像資料被供給至顯示部930,藉由顯示部930而顯示一系列之圖像。音頻編碼解碼器923將音頻串流進行擴展及D∕A轉換,而產生類比音頻信號。接著,音頻編碼解碼器923將所產生之音頻信號供給至揚聲器924而輸出音頻。 在以如此之方式構成之行動電話920中,圖像處理部927具有上述之實施形態中之圖像編碼裝置及圖像解碼裝置之功能。藉此,行動電話920中之圖像之編碼及解碼時,可提高相對量化參數之編碼效率。 [第3應用例:記錄播放裝置] 圖37係顯示應用上述實施形態之記錄播放裝置之概略構成之一例。記錄播放裝置940,例如,將所接收之廣播節目之音頻資料及影像資料進行編碼而記錄於記錄媒體。又,記錄播放裝置940,例如,亦可將自其它裝置取得之音頻資料及影像資料進行編碼而記錄於記錄媒體。又,記錄播放裝置940,例如,按照使用者之指示,使記錄於記錄媒體之資料在監視器及揚聲器上播放。此時,記錄播放裝置940將音頻資料及影像資料進行解碼。 記錄播放裝置940具備調諧器941、外部介面942、編碼器943、HDD(Hard Disk Drive:硬碟驅動幾)944、磁碟驅動機945、選擇器946、解碼器947、OSD(On-Screen Display:螢幕顯示)948、控制部949、及使用者介面950。 調諧器941自經由天線(未圖示)接收之廣播信號擷取所期望之通道之信號,並將所擷取之信號進行解調。接著,調諧器941向選擇器946輸出藉由解調而獲得之位元串流。即,調諧器941具有作為記錄播放裝置940中之傳送部之作用。 外部介面942係用以連接記錄播放裝置940與外部機器或網路之介面。外部介面942,例如,可為IEEE1394介面、網路介面、USB介面、或快閃記憶體介面等。例如,經由外部介面942接收之影像資料及音頻資料,向編碼器943輸入。即,外部介面942具有作為記錄播放裝置940中之傳送部之作用。 自外部介面942輸入之影像資料及音頻資料未被編碼之情形時,編碼器943將影像資料及音頻資料進行編碼。接著,編碼器943向選擇器946輸出位元串流。 HDD944將壓縮影像及音頻等之內容資料之位元串流、各種程式及其他資料記錄於內部之硬碟中。又,影像及音頻之播放時,HDD944自硬碟讀取該等資料。 磁碟驅動機945進行向所安裝之記錄媒體之資料之記錄及讀取。安裝於硬碟驅動機945中之記錄媒體可為例如DVD磁碟(DVD-Video、DVD-RAM、DVD-R、DVD-RW、DVD+R、DVD+RW等)或藍光(註冊商標)光碟等。 選擇器946於影像及音頻之記錄時,選擇自調諧器941或編碼器943輸入之位元串流,並將所選擇之位元串流向HDD944或磁碟驅動機945輸出。又,選擇器946於影像及音頻之播放時,向解碼器947輸出自HDD944或磁碟驅動機945輸入之位元串流。 解碼器947將位元串流進行解碼,而產生影像資料及音頻資料。接著,解碼器947向OSD948輸出所產生之影像資料。又,解碼器947向外部之揚聲器輸出所產生之音頻資料。 OSD948播放自解碼器947輸入影像資料,顯示影像。又,OSD948可於顯示之影像上重疊例如菜單、按鈕或遊標等之GUI之圖像。 控制部949具有CPU等之處理器、以及RAM及ROM等之記憶體。記憶體將藉由CPU而執行之程式、及程式資料等進行記憶。藉由記憶體而記憶之程式,例如記錄播放裝置940之起動時藉由CPU讀入、執行。CPU藉由執行程式,按照例如自使用者介面950輸入之操作信號,控制記錄播放裝置940之動作。 使用者介面950與控制部949連接。使用者介面950具有例如用於使用者操作記錄播放裝置940之按鈕及開關、以及遠端控制信號之接收部等。使用者介面950經由該等構成要件檢測由使用者引起之操作而產生操作信號,並將所產生之操作信號向控制部949輸出。 在以如此之方式構成之記錄播放裝置940中,編碼器943具有上述之實施形態中之圖像編碼裝置之功能。又,解碼器947具有上述之實施形態中之圖像解碼裝置之功能。藉此,記錄播放裝置940中之圖像之編碼及解碼時,可提高相對量化參數之編碼效率。 [第4應用例:攝像裝置] 圖38係顯示應用上述實施形態之攝像裝置之概略構成之一例。攝像裝置960攝像被攝體而產生圖像,並將圖像資料進行編碼而記錄於記錄媒體中。 攝像裝置960具備光學區塊961、攝像部962、信號處理部963、圖像處理部964、顯示部965、外部介面966、記憶體967、媒體驅動機968、OSD969、控制部970、使用者介面971、及匯流排972。 光學區塊961連接於攝像部962。攝像部962連接於信號處理部963。顯示部965連接於圖像處理部964。使用者介面971連接於控制部970。匯流排972使圖像處理部964、外部介面966、記憶體967、媒體驅動機968、OSD969、及控制部970相互連接。 光學區塊961具有聚焦透鏡及光圈機構等。光學區塊961使被攝體之光學影像成像於攝像部962之攝像面上。攝像部962具有CCD(Charge Coupled Device:電荷耦合裝置)或CMOS(Complementary Metal Oxide Semiconductor:互補型金屬氧化半導體)等之影像感測器,藉由光電轉換將成像於攝像面上之光學影像轉換成作為電性信號之圖像信號。接著,攝像部962向信號處理部963輸出圖像信號。 信號處理部963對自攝像部962輸入之圖像信號進行膝狀物校正、伽馬校正、色彩校正等之各種相機信號處理。信號處理部963向圖像處理部964輸出相機信號處理後之圖像資料。 圖像處理部964將自信號處理部963輸入之圖像進行編碼,而產生編碼資料。接著,圖像處理部964將所產生之編碼資料向外部介面966或媒體驅動機968輸出。又,圖像處理部964將自外部介面966或媒體驅動機968輸入之編碼資料進行解碼,而產生圖像資料。又,圖像處理部964向顯示部965輸出所產生之圖像資料。又,圖像處理部964可將自信號處理部963輸入之圖像資料向顯示部965輸出而顯示圖像。又,圖像處理部964可將自OSD969取得之顯示用資料重疊於向顯示部965輸出之圖像。 OSD969產生例如菜單、按鈕或遊標等之GUI之圖像,且向圖像處理部964輸出將所產生之圖像。 外部介面966作為例如USB輸出入端子而構成。外部介面966,例如,圖像之列印時,連接攝像裝置960與印表機。又,於外部介面966,按照需要而連接驅動機。於驅動機上安裝例如磁碟或光碟等之可卸除式媒體,且自可卸除式媒體讀取之程式可安裝於攝像裝置960中。再者,外部介面966可作為連接於LAN或網際網路等之網路之網路介面而構成。即,外部介面966具有作為攝像裝置960中之傳送部之作用。 安裝於媒體驅動機968之記錄媒體可為例如磁碟、磁光碟、光碟、或半導體記憶體等之可讀寫之任意之可卸除式媒體。又,可於媒體驅動機968固定地安裝記錄媒體,例如,構成如內置型硬碟驅動機或SSD(Solid State Drive:固態驅動機)之非可攜性之記憶部。 控制部970具有CPU等之處理器、以及RAM及ROM等之記憶體。記憶體將藉由CPU而執行之程式、及程式資料等進行記憶。藉由記憶體而記憶之程式,例如攝像裝置960之起動時藉由CPU讀入、執行。CPU藉由執行程式,按照例如自使用者介面971輸入之操作信號,控制攝像裝置960之動作。 使用者介面971與控制部970連接。使用者介面971具有例如用於使用者操作攝像裝置960之按鈕及開關等。使用者介面971經由該等構成要件檢測由使用者引起之操作而產生操作信號,並將所產生之操作信號向控制部970輸出。 在以如此之方式構成之攝像裝置960中,圖像處理部964具有上述之實施形態中之圖像編碼裝置及圖像解碼裝置之功能。藉此,攝像裝置960中之圖像之編碼及解碼時,可提高相對量化參數之編碼效率。 另,在本說明書中,已說明差分量化參數等之各種資訊被多工化成位元串流而自編碼側向解碼側傳送之例。但,傳送該等資訊之技術並非限定於上述之例。例如,該等資訊無需多工化成位元串流,而可作為與位元串流相關聯之個別之資料得以傳送或記錄。此處,「相關聯」之用語,意為可使包含於位元串流之圖像(切片或區塊等、可為圖像之一部分)與對應於該圖像之資訊於解碼時鏈結。即,資訊可在與圖像(或位元串流)不同之傳送路徑上得以傳送。又,資訊可記錄於與圖像(或位元串流)不同之記錄媒體(或同一記錄媒體之不同記錄區域)中。再者,資訊與圖像(或位元串流),例如,可以複數個圖框、1圖框、或圖框內之一部分等之任意之單位互相相關聯。 以上,雖參照附加圖式詳細說明本揭示之適宜之實施形態,但本揭示並非限定於上述之例。若為具有本揭示所屬技術領域中之常用知識者,則應了解,在專利申請範圍中所揭示之技術思想之範疇內,顯然可設想各種變更例或修正例,關於該等,當然亦屬於本揭示之技術範圍。 另,本技術可亦採取如以下之構成。 (1)一種圖像處理裝置,其包含: 預測量化參數設定部,其係使用設定於位於作為編碼處理之對象之當前編碼單元之周邊的複數個周邊編碼單元之複數個量化參數,而設定對上述當前編碼單元之預測量化參數; 差分量化參數設定部,其係設定表示設定於上述當前編碼單元之量化參數、與藉由上述預測量化參數設定部而設定之上述預測量化參數之差分值之差分量化參數; 編碼部,其係將上述圖像資料經量化之量化資料進行編碼,而產生位元串流;及 傳送部,其係傳送藉由上述差分量化參數設定部而設定之上述差分量化參數與藉由上述編碼部而產生之上述位元串流。 (2)如上述技術方案(1)之圖像處理裝置,其中上述預測量化參數設定部係對設定於上述複數個周邊編碼單元中之複數個量化參數應用預測運算,而設定上述預測量化參數。 (3)如上述技術方案(2)之圖像處理裝置,其中上述預測量化參數設定部係對設定於上述複數個周邊編碼單元中之複數個量化參數應用中位數運算,而將上述預測量化參數設定作為設定於上述複數個周邊編碼單元中之複數個量化參數之中值。 (4)如上述技術方案(3)之圖像處理裝置,其中上述預測量化參數設定部係在上述複數個周邊編碼單元皆為可用之狀態之情形時,對設定於上述複數個周邊編碼單元中之複數個量化參數應用中位數運算。 (5)如上述技術方案(2)至(4)中任一項之圖像處理裝置,其中上述預測量化參數設定部係對設定於上述複數個周邊編碼單元中之複數個量化參數應用平均運算,而將上述預測量化參數設定作為設定於上述複數個周邊編碼單元中之複數個量化參數之平均值。 (6)如上述技術方案(5)之圖像處理裝置,其中上述預測量化參數設定部係在藉由上述判定部判定上述周邊編碼單元之一部分為可用之狀態之情形時,對設定於上述複數個周邊編碼單元中之複數個量化參數應用平均運算。 (7)如上述技術方案(5)或(6)之圖像處理裝置,其中上述預測量化參數設定部係對設定於藉由上述選擇部所選擇之複數個周邊編碼單元中之複數個量化參數應用加權平均運算,而將上述預測量化參數設定作為設定於上述複數個周邊編碼單元中之複數個量化參數之加權平均值。 (8)如上述技術方案(7)之圖像處理裝置,其中上述預測量化參數設定部係以對與上述當前編碼單元之尺寸相同之尺寸的周邊編碼單元加大權重之方式,設定上述加權平均運算。 (9)如上述技術方案(7)之圖像處理裝置,其中上述預測量化參數設定部係以周邊編碼單元之尺寸越大則越加大權重之方式,設定上述加權平均運算。 (10)如上述技術方案(2)至(9)中任一項之圖像處理裝置,其中上述複數個周邊編碼單元,係以編碼結束之編碼單元為對象,包含鄰接於上述當前編碼單元之左側之編碼單元、鄰接於上述當前編碼單元之上側之編碼單元、及鄰接於上述當前編碼單元之左上之編碼單元。 (11)如上述技術方案(10)之圖像處理裝置,其中上述複數個周邊編碼單元進而包含鄰接於上述當前編碼單元之右上之編碼單元、及鄰接於上述當前編碼單元之左下之編碼單元。 (12)如上述技術方案(2)至(11)中任一項之圖像處理裝置,其進而包含判定上述周邊編碼單元是否為可用狀態之判定部,且 上述預測量化參數設定部係按照藉由上述判定部判定為可用之編碼單元之數而變更上述預測運算之方法。 (13)如上述技術方案(1)至(12)中任一項之圖像處理裝置,其進而包含判定位於當前最大編碼單元內之周邊編碼單元於設定上述預測量化參數時是否為可用狀態之判定部,且 上述預測量化參數設定部僅使用藉由上述判定部判定為可用狀態之編碼單元之量化參數,而設定上述預測量化參數。 (14)如上述技術方案(13)之圖像處理裝置,其中上述預測量化參數設定部係在上述當前編碼單元位於當前最大編碼單元之開端之位置之情形時,將位於上一個最大編碼單元之最後之位置之編碼單元之量化參數設定作為上述預測量化參數。 (15)如上述技術方案(2)至(14)中任一項之圖像處理裝置,其進而包含設定表示上述預測運算之類別之類別資料之設定部,且 上述傳送部傳送藉由上述設定部而設定之類別資料。 (16)如上述技術方案(15)之圖像處理裝置,其中上述設定部係針對作為切片或最上階層之編碼單元之每個最大編碼單元中設定上述類別資料。 (17)如上述技術方案(16)之圖像處理裝置,其中上述傳送部係將藉由上述設定部設定之類別資料作為藉由上述編碼部產生之位元串流之參數集而傳送。 (18)一種圖像處理裝置之圖像處理方法,其係由預測量化參數設定部使用設定於位於作為編碼處理之對象之當前編碼單元之周邊的複數個周邊編碼單元之複數個量化參數,而設定對上述當前編碼單元之預測量化參數; 由差分量化參數設定部設定表示設定於上述當前編碼單元之量化參數、與所設定之上述預測量化參數之差分值之差分量化參數; 由編碼部將上述圖像資料經量化之量化資料進行編碼,而產生位元串流;且 由傳送部傳送所設定之上述差分量化參數、與所產生之上述位元串流。 (19)一種圖像處理裝置,其包含:接收部,其係接收差分量化參數、及將圖像資料編碼而產生之位元串流,該差分量化參數表示設定於作為解碼處理之對象之當前編碼單元中之量化參數、與根據設定於位於當前編碼單元之周邊之複數個周邊編碼單元中之複數個量化參數預測而得之預測量化參數之差分值; 量化參數設定部,其係使用藉由上述接收部所接收之上述差分量化參數,而設定上述當前編碼單元之量化參數;及 解碼部,其係使用藉由上述量化參數設定部所設定之量化參數,將藉由上述接收部所接收之位元串流進行逆量化而產生圖像資料。 (20)一種圖像處理裝置之圖像處理方法,其係由接收部接收差分量化參數、及將圖像資料編碼而產生之位元串流,該差分量化參數係表示設定於作為解碼處理之對象之當前編碼單元中之量化參數、與根據設定於位於當前編碼單元之周邊之複數個周邊編碼單元中之複數個量化參數預測而得之預測量化參數之差分值; 由量化參數設定部使用所接收之上述差分量化參數,而設定上述當前編碼單元之量化參數; 由解碼部使用所設定之量化參數,將所接收之位元串流進行逆量化而產生圖像資料。 (21)一種圖像處理裝置,其包含: 判定部,其係判定位於作為編碼處理對象之當前編碼單元之周邊之位置之複數個周邊編碼單元於設定預測量化參數時是否為可用狀態; 預測量化參數設定部,其係僅使用藉由上述判定部判定為可用狀態之編碼單元之量化參數,而設定對上述當前編碼單元之預測量化參數; 差分量化參數設定部,其係設定表示設定於上述當前編碼單元之量化參數、與藉由上述預測量化參數設定部而設定之上述預測量化參數之差分值之差分量化參數; 編碼部,其係將上述圖像資料經量化之量化資料編碼,而產生位元串流;及 傳送部,其係傳送藉由上述差分量化參數設定部而設定之上述差分量化參數與藉由上述編碼部而產生之上述位元串流。 (22)如上述技術方案(21)之圖像處理裝置,其中上述預測量化參數設定部係於上述當前編碼單元位於當前最大編碼單元之開端之位置之情形時,將位於上一個最大編碼單元之最後之位置之編碼單元之量化參數設定作為上述預測量化參數。 (23)一種圖像處理裝置之圖像處理方法,其係 由判定部判定位於作為編碼處理對象之當前編碼單元之周邊之位置之複數個周邊編碼單元於設定預測量化參數時是否為可用狀態; 由預測量化參數設定部僅使用判定為可用狀態之編碼單元之量化參數,而設定相對上述當前編碼單元之預測量化參數; 由差分量化參數設定部設定表示設定於上述當前編碼單元之量化參數、與所設定之上述預測量化參數之差分值之差分量化參數; 由編碼部將上述圖像資料經量化之量化資料編碼,而產生位元串流;且 由傳送部傳送所設定之上述差分量化參數、與所產生之上述位元串流。 (24)一種圖像處理裝置,其包含: 接收部,其係接收差分量化參數、及將圖像資料編碼而產生之位元串流,該差分量化參數係表示設定於作為解碼處理之對象之當前編碼單元中之量化參數、與上述量化參數之預測值即預測量化參數之差分值; 判定部,其係判定位於上述當前編碼單元之周邊之位置之複數個周邊編碼單元於設定預測量化參數時是否為可用狀態; 預測量化參數設定部,其係僅使用藉由上述判定部判定為可用狀態之編碼單元之量化參數,而設定對上述當前編碼單元之預測量化參數; 量化參數產生部,其係將設定於上述當前編碼單元中之量化參數、與藉由上述接收部接收之上述差分量化參數相加,而產生上述當前編碼單元之量化參數; 解碼部,其係將藉由上述接收部接收之上述位元串流解碼;及 逆量化部,其係使用藉由上述量化參數產生部產生之上述量化參數,將藉由上述解碼部解碼上述位元串流而得之量化係數進行逆量化。 (25)一種圖像處理裝置之圖像處理方法,其係 由接收部接收差分量化參數、及將圖像資料編碼而產生之位元串流,該差分量化參數係表示設定於作為解碼處理之對象之當前編碼單元中之量化參數、與上述量化參數之預測值即預測量化參數之差分值; 由判定部判定位於上述當前編碼單元之周邊之位置之複數個周邊編碼單元於設定預測量化參數時是否為可用狀態; 由預測量化參數設定部僅使用判定為可用狀態之編碼單元之量化參數,而設定對上述當前編碼單元之預測量化參數; 由量化參數產生部將設定於上述當前編碼單元中之量化參數、與所接收之上述差分量化參數相加,而產生上述當前編碼單元之量化參數; 由解碼部將所接收之上述位元串流解碼;且 由逆量化部使用所產生之上述量化參數,將解碼上述位元串流而得之量化係數進行逆量化。
100:圖像編碼裝置 102:畫面重排序緩衝器 104:正交轉換部 105:量化部 106:可逆編碼部 108:逆量化部 117:速率控制部 121:量化參數編碼部 122:量化參數解碼部 131:活量算出部 141:關注區域量化參數產生部 142:量化處理部 143:周邊區域量化參數緩衝器 144:差分量化參數緩衝器 151:預測量化參數產生部 152:差分量化參數產生部 200:圖像解碼裝置 203:逆量化部 221:量化參數解碼部 231:差分量化參數緩衝器 232:量化正交轉換係數緩衝器 233:周邊區域量化參數緩衝器 234:逆量化處理部 241:預測量化參數產生部 242:關注區域量化參數再構築部 301:周邊區域利用可否判定部 302:運算控制部 311:周邊區域利用可否判定部 312:運算控制部 321:周邊區域尺寸判定部 331:周邊區域尺寸判定部 351:類別資料設定部 361:類別資料緩衝器 362:運算控制部 381:類別資料緩衝器 382:運算控制部
圖1係顯示圖像編碼裝置之主要構成例之方塊圖。 圖2係顯示巨區塊之例之圖。 圖3係顯示巨區塊之另一例之圖。 圖4係說明編碼單元之構成例之圖。 圖5係關於量化參數之預測進行說明之圖。 圖6係顯示量化部、速率控制部、及量化參數編碼部之主要構成例之圖。 圖7係說明編碼處理之流程之例之流程圖。 圖8係說明量化處理之流程之例之流程圖。 圖9係說明預測量化參數產生處理之流程之例之流程圖。 圖10係顯示圖像解碼裝置之主要構成例之方塊圖。 圖11係顯示逆量化部及量化參數解碼部之主要構成例之方塊圖。 圖12係說明解碼處理之流程之例之流程圖。 圖13係說明逆量化處理之流程之例之流程圖。 圖14係顯示量化參數編碼部之另一構成例之圖。 圖15係說明預測量化參數產生處理之流程之另一例之流程圖。 圖16係顯示量化參數解碼部之另一構成例之圖。 圖17係顯示量化參數編碼部之進而又一構成例之圖。 圖18係說明預測量化參數產生處理之流程之進而又一例之流程圖。 圖19係顯示量化參數解碼部之進而又一構成例之圖。 圖20係顯示量化參數編碼部之進而又一構成例之圖。 圖21係說明類別資料之例之圖。 圖22係說明類別資料設定處理之流程之例之流程圖。 圖23係說明預測量化參數產生處理之流程之進而又一例之流程圖。 圖24係顯示量化參數解碼部之進而又一構成例之圖。 圖25係說明類別資料之另一例之圖。 圖26係說明類別資料設定處理之流程之另一例之流程圖。 圖27係顯示以LCU單位進行預測之情形之例之圖。 圖28係顯示多視點圖像編碼方式之例之圖。 圖29係顯示應用本技術之多視點圖像編碼裝置之主要構成例之圖。 圖30係顯示應用本技術之多視點圖像解碼裝置之主要構成例之圖。 圖31係顯示階層圖像編碼方式之例之圖。 圖32係顯示應用本技術之階層圖像編碼裝置之主要構成例之圖。 圖33係顯示應用本技術之階層圖像解碼裝置之主要構成例之圖。 圖34係顯示電腦之主要構成例之方塊圖。 圖35係顯示電視裝置之概略構成之一例之方塊圖。 圖36係顯示行動電話之概略構成之一例之方塊圖。 圖37係顯示記錄播放裝置之概略構成之一例之方塊圖。 圖38係顯示攝像裝置之概略構成之一例之方塊圖。
102:畫面重排序緩衝器
104:正交轉換部
105:量化部
106:可逆編碼部
108:逆量化部
117:速率控制部
121:量化參數編碼部
131:活量算出部
141:關注區域量化參數產生部
142:量化處理部
143:周邊區域量化參數緩衝器
144:差分量化參數緩衝器
151:預測量化參數產生部
152:差分量化參數產生部

Claims (6)

  1. 一種圖像處理裝置,其包括: 取得部,其將藉由以序列單位將固定尺寸之最大編碼單元依照4元樹(Quadtree)構造遞迴地分割而得到的可變尺寸之編碼單元作為處理單位,自包含差分量化參數之位元串流取得上述差分量化參數,上述差分量化參數表示對當前編碼單元所設定之量化參數與作為上述量化參數之預測值即預測量化參數之差分值; 判定部,其判定位於上述當前編碼單元之周邊的複數個周邊編碼單元於設定預測量化參數時是否為可用(available)狀態; 預測量化參數設定部,其僅使用由上述判定部判定為可用狀態之編碼單元之量化參數,來設定針對上述當前編碼單元之預測量化參數; 量化參數設定部,其對由上述預測量化參數設定部所設定之預測量化參數加上由上述取得部所取得之差分量化參數,藉而設定上述當前編碼單元之量化參數;及 逆量化部,其使用由上述量化參數設定部產生之上述量化參數,對將上述位元串流進行解碼而得之量化資料進行逆量化。
  2. 如請求項1之圖像處理裝置,其中上述預測量化參數設定部係:在上述當前編碼單元位於當前最大編碼單元之開端(front)之情形時,將位於緊接之前的最大編碼單元之最後的編碼單元之量化參數設定為上述預測量化參數。
  3. 如請求項1之圖像處理裝置,其進而包括: 解碼部,其將上述位元串流進行解碼而產生上述量化資料。
  4. 一種圖像處理方法,其包括: 將藉由以序列單位將固定尺寸之最大編碼單元依照4元樹構造遞迴地分割而得到的可變尺寸之編碼單元作為處理單位,自包含差分量化參數之位元串流取得上述差分量化參數,上述差分量化參數表示對當前編碼單元所設定之量化參數與作為上述量化參數之預測值即預測量化參數之差分值; 判定位於上述當前編碼單元之周邊的複數個周邊編碼單元於設定預測量化參數時是否為可用狀態; 僅使用判定為可用狀態之編碼單元之量化參數,來設定針對上述當前編碼單元之預測量化參數; 對所設定之預測量化參數加上所取得之差分量化參數,藉而設定上述當前編碼單元之量化參數;及 使用所產生之上述量化參數,對將上述位元串流進行解碼而得到之量化資料進行逆量化。
  5. 如請求項4之圖像處理方法,其中在上述當前編碼單元位於當前最大編碼單元之開端之情形時,將位於緊接之前的最大編碼單元之最後的編碼單元之量化參數設定為上述預測量化參數。
  6. 如請求項4之圖像處理方法,其中將上述位元串流進行解碼而產生上述量化資料。
TW109117555A 2011-03-11 2012-03-02 圖像處理裝置及圖像處理方法 TWI767240B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2011054817 2011-03-11
JP2011-054817 2011-03-11
JP2011-136325 2011-06-20
JP2011136325 2011-06-20

Publications (2)

Publication Number Publication Date
TW202034696A TW202034696A (zh) 2020-09-16
TWI767240B true TWI767240B (zh) 2022-06-11

Family

ID=46830537

Family Applications (4)

Application Number Title Priority Date Filing Date
TW109117555A TWI767240B (zh) 2011-03-11 2012-03-02 圖像處理裝置及圖像處理方法
TW101107054A TWI524775B (zh) 2011-03-11 2012-03-02 Image processing apparatus and method
TW104141941A TWI600314B (zh) 2011-03-11 2012-03-02 Image processing device, image processing method and program
TW106120446A TWI703858B (zh) 2011-03-11 2012-03-02 圖像處理裝置、圖像處理方法、電腦程式及記錄媒體

Family Applications After (3)

Application Number Title Priority Date Filing Date
TW101107054A TWI524775B (zh) 2011-03-11 2012-03-02 Image processing apparatus and method
TW104141941A TWI600314B (zh) 2011-03-11 2012-03-02 Image processing device, image processing method and program
TW106120446A TWI703858B (zh) 2011-03-11 2012-03-02 圖像處理裝置、圖像處理方法、電腦程式及記錄媒體

Country Status (13)

Country Link
US (6) US9135724B2 (zh)
EP (1) EP2685723B1 (zh)
JP (3) JPWO2012124461A1 (zh)
KR (2) KR101979964B1 (zh)
CN (5) CN106454381B (zh)
AU (3) AU2012227626B2 (zh)
BR (5) BR122020013609B1 (zh)
CA (1) CA2826676C (zh)
MX (1) MX2013010159A (zh)
MY (2) MY186854A (zh)
RU (1) RU2579967C2 (zh)
TW (4) TWI767240B (zh)
WO (1) WO2012124461A1 (zh)

Families Citing this family (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7295609B2 (en) 2001-11-30 2007-11-13 Sony Corporation Method and apparatus for coding image information, method and apparatus for decoding image information, method and apparatus for coding and decoding image information, and system of coding and transmitting image information
JP5359657B2 (ja) 2009-07-31 2013-12-04 ソニー株式会社 画像符号化装置および方法、記録媒体、並びにプログラム
JP5914962B2 (ja) 2010-04-09 2016-05-11 ソニー株式会社 画像処理装置および方法、プログラム、並びに、記録媒体
TWI508534B (zh) 2010-05-18 2015-11-11 Sony Corp Image processing apparatus and image processing method
EP3185559B1 (en) 2010-06-04 2020-02-19 Sony Corporation Coding of a qp and a delta qp for image blocks larger than a minimum size
EP3582496B1 (en) 2010-12-07 2021-10-27 Sony Group Corporation Image processing device and image processing method
CN106454359B (zh) 2010-12-07 2020-05-19 索尼公司 图像处理设备和图像处理方法
JP5741076B2 (ja) 2010-12-09 2015-07-01 ソニー株式会社 画像処理装置及び画像処理方法
JP6056122B2 (ja) * 2011-01-24 2017-01-11 ソニー株式会社 画像符号化装置と画像復号装置およびその方法とプログラム
US9706205B2 (en) 2011-02-10 2017-07-11 Velos Media, Llc Image processing device and image processing method
TWI530161B (zh) 2011-06-07 2016-04-11 Sony Corp Image processing apparatus and method
CN110611810B (zh) 2011-06-28 2021-06-01 索尼公司 图像处理装置和图像处理方法
JP5907367B2 (ja) 2011-06-28 2016-04-26 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
KR20130049523A (ko) * 2011-11-04 2013-05-14 오수미 인트라 예측 블록 생성 장치
EP3754988B1 (en) * 2011-12-13 2023-07-05 JVCKENWOOD Corporation Video coding device, video coding method, video decoding device and video decoding method
JP6064580B2 (ja) * 2011-12-21 2017-01-25 株式会社Jvcケンウッド 動画像符号化装置、動画像符号化方法及び動画像符号化プログラム、並びに送信装置、送信方法及び送信プログラム
TWI726579B (zh) * 2011-12-21 2021-05-01 日商Jvc建伍股份有限公司 動態影像編碼裝置、動態影像編碼方法、動態影像解碼裝置、及動態影像解碼方法
JP6064581B2 (ja) * 2011-12-21 2017-01-25 株式会社Jvcケンウッド 動画像復号装置、動画像復号方法及び動画像復号プログラム、並びに受信装置、受信方法及び受信プログラム
HUE052133T2 (hu) * 2012-01-30 2021-04-28 Samsung Electronics Co Ltd Berendezés hierarchikus adategységeken alapuló videokódolásra és -dekódolásra, amely tartalmaz kvantálási paraméter predikciót
US9414054B2 (en) 2012-07-02 2016-08-09 Microsoft Technology Licensing, Llc Control and use of chroma quantization parameter values
US9591302B2 (en) * 2012-07-02 2017-03-07 Microsoft Technology Licensing, Llc Use of chroma quantization parameter offsets in deblocking
DK2984837T3 (en) * 2013-04-08 2018-04-30 Ge Video Compression Llc Inter-component prediction
US9565440B2 (en) * 2013-06-25 2017-02-07 Vixs Systems Inc. Quantization parameter adjustment based on sum of variance and estimated picture encoding cost
EP2938084A4 (en) * 2013-12-27 2016-10-26 Sony Corp IMAGE PROCESSING DEVICE AND IMAGE PROCESSING METHOD
CN104754361B (zh) * 2013-12-28 2018-01-23 同济大学 图像编码、解码方法及装置
KR101663668B1 (ko) * 2014-06-27 2016-10-07 삼성전자주식회사 영상 패딩영역의 비디오 복호화 및 부호화 장치 및 방법
US10244266B1 (en) 2016-02-11 2019-03-26 Amazon Technologies, Inc. Noisy media content encoding
US10425642B1 (en) * 2016-02-11 2019-09-24 Amazon Technologies, Inc. Noisy media content encoding
CN109996076B (zh) * 2016-10-12 2021-08-06 深圳市大疆创新科技有限公司 码率控制的方法、计算机***和装置
WO2018175638A1 (en) * 2017-03-21 2018-09-27 Dolby Laboratories Licensing Corporation Quantization parameter prediction using luminance information
CN106851274B (zh) * 2017-03-31 2019-08-06 北京奇艺世纪科技有限公司 差分量化参数的确定方法、确定***及视频编码器
CN109302608B (zh) * 2017-07-25 2021-06-22 华为技术有限公司 图像处理方法、设备及***
CN109660825B (zh) * 2017-10-10 2021-02-09 腾讯科技(深圳)有限公司 视频转码方法、装置、计算机设备及存储介质
US10484688B2 (en) * 2018-01-23 2019-11-19 Aspeed Technology Inc. Method and apparatus for encoding processing blocks of a frame of a sequence of video frames using skip scheme
US10491897B2 (en) * 2018-04-13 2019-11-26 Google Llc Spatially adaptive quantization-aware deblocking filter
EP3618440A1 (en) * 2018-09-03 2020-03-04 InterDigital VC Holdings, Inc. Quantization parameter prediction for video encoding and decoding
EP3782365A1 (en) 2018-04-16 2021-02-24 InterDigital VC Holdings, Inc. Quantization parameter prediction for video encoding and decoding
WO2020086448A1 (en) * 2018-10-26 2020-04-30 Interdigital Vc Holdings, Inc. Quantization parameter prediction in video encoding and decoding
CN113366839B (zh) * 2019-01-31 2024-01-12 北京字节跳动网络技术有限公司 视频编解码中的细化量化步骤
US20220272342A1 (en) * 2019-07-05 2022-08-25 V-Nova International Limited Quantization of residuals in video coding

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200920142A (en) * 2007-09-12 2009-05-01 Sony Corp Image processing device and image processing method
US20090296808A1 (en) * 2008-06-03 2009-12-03 Microsoft Corporation Adaptive quantization for enhancement layer video coding

Family Cites Families (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1848963B (zh) * 1997-10-23 2011-12-14 三菱电机株式会社 图像译码装置、图像编码装置、图像通信***及编码位流变换装置
CN1767656B (zh) * 2001-11-29 2013-02-20 松下电器产业株式会社 编码失真消除方法、视频编码方法、视频解码方法、装置
US7295609B2 (en) 2001-11-30 2007-11-13 Sony Corporation Method and apparatus for coding image information, method and apparatus for decoding image information, method and apparatus for coding and decoding image information, and system of coding and transmitting image information
US7321626B2 (en) * 2002-03-08 2008-01-22 Sharp Laboratories Of America, Inc. System and method for predictive motion estimation using a global motion predictor
CN101232618B (zh) * 2002-04-23 2013-03-27 诺基亚有限公司 用于在视频编码***中指示量化器参数的方法与设备
JP4806888B2 (ja) * 2002-07-19 2011-11-02 ソニー株式会社 復号化装置及び復号化方法
JP4243218B2 (ja) * 2004-05-11 2009-03-25 日本放送協会 量子化制御装置、その方法及びそのプログラム、並びに、適応量子化符号化装置
JP4247680B2 (ja) * 2004-07-07 2009-04-02 ソニー株式会社 符号化装置、符号化方法、符号化方法のプログラム及び符号化方法のプログラムを記録した記録媒体
EP1696673A1 (en) 2004-09-01 2006-08-30 Mitsubishi Electric Information Technology Centre Europe B.V. Intra-frame prediction for high-pass temporal-filtered frames in wavelet video coding
JP4495580B2 (ja) * 2004-12-13 2010-07-07 パナソニック株式会社 面内予測装置および面内予測方法
US20070025441A1 (en) * 2005-07-28 2007-02-01 Nokia Corporation Method, module, device and system for rate control provision for video encoders capable of variable bit rate encoding
AU2006320064B2 (en) * 2005-11-30 2010-09-09 Kabushiki Kaisha Toshiba Image encoding/image decoding method and image encoding/image decoding apparatus
FR2896118A1 (fr) * 2006-01-12 2007-07-13 France Telecom Codage et decodage adaptatifs
CN101009838B (zh) * 2006-01-25 2010-06-16 松下电器产业株式会社 可抑制漂移误差的比特率转换编码方法,转换编码器,及集成电路
WO2007116551A1 (ja) * 2006-03-30 2007-10-18 Kabushiki Kaisha Toshiba 画像符号化装置及び画像符号化方法並びに画像復号化装置及び画像復号化方法
JP4417919B2 (ja) * 2006-03-31 2010-02-17 株式会社東芝 画像符号化装置及び画像復号化装置
EP2090112A4 (en) * 2006-11-07 2014-04-23 Samsung Electronics Co Ltd METHOD AND DEVICE FOR ENCODING AND DECODING BASED ON INTRA PREDICTION
JP2008193503A (ja) * 2007-02-06 2008-08-21 Oki Electric Ind Co Ltd 動画像符号化装置および動画像符号化方法
WO2008126135A1 (ja) * 2007-03-20 2008-10-23 Fujitsu Limited 動画像符号化方法及び装置並びに動画像復号装置
US8542730B2 (en) * 2008-02-22 2013-09-24 Qualcomm, Incorporated Fast macroblock delta QP decision
JP5130983B2 (ja) * 2008-03-25 2013-01-30 ソニー株式会社 画像処理装置および方法、並びにプログラム
JP5238523B2 (ja) * 2009-01-13 2013-07-17 株式会社日立国際電気 動画像符号化装置、動画像復号化装置、および、動画像復号化方法
JP5359657B2 (ja) 2009-07-31 2013-12-04 ソニー株式会社 画像符号化装置および方法、記録媒体、並びにプログラム
JP5344238B2 (ja) 2009-07-31 2013-11-20 ソニー株式会社 画像符号化装置および方法、記録媒体、並びにプログラム
CN102577379B (zh) * 2009-10-05 2017-12-19 汤姆逊许可证公司 用于视频编码和译码中的嵌入量化参数调节的方法和装置
KR101457418B1 (ko) * 2009-10-23 2014-11-04 삼성전자주식회사 계층적 부호화 단위의 크기에 따른 비디오 부호화 방법과 그 장치, 및 비디오 복호화 방법과 그 장치
US8588297B2 (en) * 2009-12-23 2013-11-19 Oracle America, Inc. Quantization parameter prediction
JP5914962B2 (ja) 2010-04-09 2016-05-11 ソニー株式会社 画像処理装置および方法、プログラム、並びに、記録媒体
TWI508534B (zh) 2010-05-18 2015-11-11 Sony Corp Image processing apparatus and image processing method
EP3185559B1 (en) 2010-06-04 2020-02-19 Sony Corporation Coding of a qp and a delta qp for image blocks larger than a minimum size
PL4024865T3 (pl) * 2010-06-10 2024-05-06 Interdigital Vc Holdings, Inc. Sposoby i urządzenie do określania elementów predykcji parametrów kwantyzacji z wielu sąsiadujących parametrów kwantyzacji
EP3582496B1 (en) 2010-12-07 2021-10-27 Sony Group Corporation Image processing device and image processing method
CN106454359B (zh) 2010-12-07 2020-05-19 索尼公司 图像处理设备和图像处理方法
JP5741076B2 (ja) 2010-12-09 2015-07-01 ソニー株式会社 画像処理装置及び画像処理方法
US9706205B2 (en) 2011-02-10 2017-07-11 Velos Media, Llc Image processing device and image processing method
US8594189B1 (en) * 2011-04-07 2013-11-26 Google Inc. Apparatus and method for coding video using consistent regions and resolution scaling
TWI530161B (zh) 2011-06-07 2016-04-11 Sony Corp Image processing apparatus and method
JP5907367B2 (ja) 2011-06-28 2016-04-26 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
WO2014002899A1 (ja) 2012-06-29 2014-01-03 ソニー株式会社 符号化装置および符号化方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200920142A (en) * 2007-09-12 2009-05-01 Sony Corp Image processing device and image processing method
US20090296808A1 (en) * 2008-06-03 2009-12-03 Microsoft Corporation Adaptive quantization for enhancement layer video coding
WO2009158113A2 (en) * 2008-06-03 2009-12-30 Microsoft Corporation Adaptive quantization for enhancement layer video coding

Also Published As

Publication number Publication date
JP6508554B2 (ja) 2019-05-08
BR122020013609B1 (pt) 2023-02-23
KR20140047023A (ko) 2014-04-21
JPWO2012124461A1 (ja) 2014-07-17
BR112013022670B1 (pt) 2022-05-03
CN103416060A (zh) 2013-11-27
CN106412609A (zh) 2017-02-15
US20130330012A1 (en) 2013-12-12
CN106534872A (zh) 2017-03-22
AU2012227626B2 (en) 2015-11-05
JP6419113B2 (ja) 2018-11-07
BR122020013619B1 (pt) 2023-02-23
US20170289545A1 (en) 2017-10-05
AU2017201965B2 (en) 2018-05-10
BR122020013607B1 (pt) 2023-10-24
CN106454381A (zh) 2017-02-22
TWI703858B (zh) 2020-09-01
AU2017201965A1 (en) 2017-04-13
BR122020013613B1 (pt) 2023-02-23
TWI600314B (zh) 2017-09-21
CN106454381B (zh) 2019-05-28
AU2015243102A1 (en) 2015-11-05
WO2012124461A1 (ja) 2012-09-20
AU2012227626A1 (en) 2013-08-22
TW201735640A (zh) 2017-10-01
TW201304553A (zh) 2013-01-16
US10194152B2 (en) 2019-01-29
JP2016197886A (ja) 2016-11-24
CN106534872B (zh) 2019-05-17
US9495765B2 (en) 2016-11-15
US9794566B2 (en) 2017-10-17
TW201613353A (en) 2016-04-01
US9854243B2 (en) 2017-12-26
US20150341640A1 (en) 2015-11-26
CN106412610B (zh) 2019-06-18
KR101979964B1 (ko) 2019-05-17
US20180027234A1 (en) 2018-01-25
AU2015243102B2 (en) 2017-03-02
CA2826676C (en) 2020-12-29
MY173604A (en) 2020-02-10
KR20190041026A (ko) 2019-04-19
US10212423B2 (en) 2019-02-19
CN103416060B (zh) 2016-12-21
EP2685723A4 (en) 2014-08-27
RU2013140840A (ru) 2015-03-10
MX2013010159A (es) 2013-09-26
BR112013022670A2 (pt) 2016-12-06
EP2685723A1 (en) 2014-01-15
US20160353106A1 (en) 2016-12-01
EP2685723B1 (en) 2021-03-31
TWI524775B (zh) 2016-03-01
US20180324428A1 (en) 2018-11-08
US9135724B2 (en) 2015-09-15
KR102032940B1 (ko) 2019-10-16
MY186854A (en) 2021-08-26
RU2579967C2 (ru) 2016-04-10
CN106412609B (zh) 2019-03-22
CN106412610A (zh) 2017-02-15
CA2826676A1 (en) 2012-09-20
TW202034696A (zh) 2020-09-16
JP2018057009A (ja) 2018-04-05

Similar Documents

Publication Publication Date Title
JP6508554B2 (ja) 画像処理装置および方法、並びに、プログラム
RU2740164C2 (ru) Устройство и способ обработки изображений
KR102336932B1 (ko) 화상 처리 장치 및 방법
WO2015133320A1 (ja) 画像符号化装置および方法
WO2013108688A1 (ja) 画像処理装置および方法
JP2012244353A (ja) 画像処理装置および方法
WO2013047326A1 (ja) 画像処理装置および方法
WO2014103764A1 (ja) 画像処理装置および方法