RU2514091C2 - Способы, устройства и системы для параллельного кодирования и декодирования видеоинформации - Google Patents

Способы, устройства и системы для параллельного кодирования и декодирования видеоинформации Download PDF

Info

Publication number
RU2514091C2
RU2514091C2 RU2010142914/08A RU2010142914A RU2514091C2 RU 2514091 C2 RU2514091 C2 RU 2514091C2 RU 2010142914/08 A RU2010142914/08 A RU 2010142914/08A RU 2010142914 A RU2010142914 A RU 2010142914A RU 2514091 C2 RU2514091 C2 RU 2514091C2
Authority
RU
Russia
Prior art keywords
layer
entropy
reconstructed
decoding
layers
Prior art date
Application number
RU2010142914/08A
Other languages
English (en)
Other versions
RU2010142914A (ru
Inventor
Цзе ЧЖАО
Кристофер А. СИГОЛЛ
Луис Дж. КЕРОФСКИ
Original Assignee
Шарп Кабусики Кайся
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Шарп Кабусики Кайся filed Critical Шарп Кабусики Кайся
Publication of RU2010142914A publication Critical patent/RU2010142914A/ru
Application granted granted Critical
Publication of RU2514091C2 publication Critical patent/RU2514091C2/ru

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/15—Data rate or code amount at the encoder output by monitoring actual compressed data size at the memory before deciding storage at the transmission buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/192—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding the adaptation method, adaptation tool or adaptation type being iterative or recursive
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/43—Hardware specially adapted for motion estimation or compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/436—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/463—Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Image Processing (AREA)

Abstract

Изобретение относится к вычислительной технике, а именно к кодированию видеоинформации. Технический результат заключается в повышение эффективности кодирования и декодирования битового потока видеоинформации за счет разделения данных на энтропийные слои. В способе осуществляют энтропийное декодирование первой части битового потока видеоинформации, которая связана с видеокадром, тем самым производя первую часть декодированных данных; осуществляют энтропийное декодирование второй части битового потока видеоинформации, которая также связана с видеокадром, тем самым производя вторую часть декодированных данных, при этом энтропийное декодирование второй части битового потока видеоинформации осуществляется независимо от энтропийного декодирования первой части битового потока видеоинформации; и реконструируют первую часть видеокадра, связанную с битовым потоком видеоинформации, используя первую часть декодированных данных и вторую часть декодированных данных. 2 н. и 6 з.п. ф-лы, 10 ил., 1 табл.

Description

ОБЛАСТЬ ТЕХНИКИ, К КОТОРОЙ ОТНОСИТСЯ ИЗОБРЕТЕНИЕ
Варианты осуществления настоящего изобретения в целом имеют отношение к кодированию видеоинформации.
УРОВЕНЬ ТЕХНИКИ
Способы и стандарты кодирования видеоинформации современного уровня техники, например стандарт H.264/MPEG-4 AVC (H.264/AVC), могут обеспечить более высокую эффективность кодирования, чем более ранние способы и стандарты, за счет более высокой сложности. Повышение требований к качеству и требований к разрешающей способности, предъявляемых к способам и стандартам кодирования видеоинформации, также может повысить их сложность. Декодирующие устройства, которые поддерживают параллельное декодирование, могут повысить скорость декодирования и снизить требования к запоминающему устройству. Дополнительно, достижения в области многоядерных обрабатывающих устройств могут сделать желательными кодирующие устройства и декодирующие устройства, которые поддерживают параллельное декодирование.
Стандарт H.264/MPEG-4 AVC [Спецификации Joint Video Team of ITU-T VCEG (Объединенная группа по разработке стандартов обработки видеоинформации в составе группы экспертов по кодированию видеоинформации Сектора стандартизации международного союза электросвязи) при содействии ISO/IEC MPEG (Группа экспертов по движущемуся изображению Международной организации по стандартизации/Международной электротехнической комиссии), "H.264: Усовершенствованное кодирование видеоинформации для общих аудиовизуальных услуг", Протокол ITU-T H.264 и ISO/IEC 14496-10 (MPEG4 - Раздел 10), ноябрь 2007 года], который включается в настоящую заявку путем ссылки во всей полноте, представляет собой спецификации кодирования-декодирования видеоинформации с использованием предсказания макроблоков с последующим остаточным кодированием для снижения временной и пространственной избыточности в видеопоследовательности для эффективного сжатия.
РАСКРЫТИЕ ИЗОБРЕТЕНИЯ
Некоторые варианты осуществления настоящего изобретения содержат способы, устройства и системы для параллельного энтропийного кодирования и декодирования битового потока видеоинформации на основании разделения данных на энтропийные слои, которые могут независимо подвергаться энтропийному кодированию и декодированию.
Согласно одному аспекту настоящего изобретения, предоставляется способ декодирования битового потока видеоинформации. Способ содержит этапы, на которых: осуществляют энтропийное декодирование первой части битового потока видеоинформации, причем первая часть битового потока видеоинформации связана с видеокадром, таким образом, производя первую часть декодированных данных; осуществляют энтропийное декодирование второй части битового потока видеоинформации, причем вторая часть битового потока видеоинформации связана с видеокадром, таким образом, производя вторую часть декодированных данных, при этом энтропийное декодирование второй части битового потока видеоинформации осуществляется независимо от энтропийного декодирования первой части битового потока видеоинформации; и реконструируют первую часть видеокадра, связанную с битовым потоком видеоинформации, используя первую часть декодированных данных и вторую часть декодированных данных.
Согласно другому аспекту настоящего изобретения, предоставляется способ для декодирования видеокадра в видеопоследовательности. Способ содержит этапы, на которых принимают битовый поток; идентифицируют реконструируемый слой в битовом потоке; идентифицируют множество энтропийных слоев, связанных с реконструируемым слоем в битовом потоке; осуществляют энтропийное декодирование каждого из множества энтропийных слоев, связанных с реконструируемым слоем, таким образом, производя множество энтропийно декодированных энтропийных слоев; и реконструируют часть видеокадра, связанную с реконструируемым слоем, используя множество энтропийно декодированных энтропийных слоев.
Согласно другому аспекту настоящего изобретения, предоставляется способ для кодирования видеокадра в видеопоследовательности. Способ содержит этапы, на которых: разделяют первый кадр в видеопоследовательности по меньшей мере на один реконструируемый слой, таким образом, производя первый реконструируемый слой; и разделяют первый реконструируемый слой на множество энтропийных слоев.
Согласно другому аспекту настоящего изобретения, раскрывается способ для генерирования битового потока видеоинформации для параллельного декодирования. Способ содержит этапы, на которых: принимают первый битовый поток видеоинформации; идентифицируют реконструируемый слой в битовом потоке видеоинформации; осуществляют энтропийное декодирование множества символов из реконструируемого слоя, таким образом, производя энтропийно декодированные данные, связанные с реконструируемым слоем; разделяют энтропийно декодированные данные, связанные с реконструируемым слоем, на множество энтропийных слоев, связанных с реконструируемым слоем; осуществляют независимое энтропийное кодирование энтропийно декодированных данных каждого энтропийного слоя из множества энтропийных слоев, таким образом, производя множество энтропийно закодированных энтропийных слоев; и генерируют второй битовый поток видеоинформации, содержащий множество энтропийно закодированных энтропийных слоев.
В некоторых вариантах осуществления настоящего изобретения, первая часть и вторая часть входного битового потока сжатой видеоинформации могут независимо энтропийно декодироваться. Блок отсчетов видеокадра, связанный со второй частью входного битового потока сжатой видеоинформации, может быть реконструирован с использованием декодированных данных из первой части и из второй части. Таким образом, определение реконструирования соседнего элемента и определение энтропийного декодирования соседнего элемента не одно и то же.
В некоторых вариантах осуществления настоящего изобретения, кодирующее устройство может разделять входные данные на энтропийные слои. Кодирующее устройство может осуществлять энтропийное кодирование энтропийных слоев независимо. Кодирующее устройство может формировать битовый поток, содержащий заголовки энтропийных слоев, каждый из которых может указывать на расположение в битовом потоке связанных данных для энтропийного слоя. В некоторых вариантах осуществления настоящего изобретения, декодирующее устройство может анализировать принятый битовый поток на присутствие заголовков энтропийных слоев, и декодирующее устройство может осуществлять энтропийное декодирование множества энтропийных слоев согласно определенному декодирующим устройством уровню параллелизма.
В некоторых вариантах осуществления настоящего изобретения, данные могут мультиплексироваться на уровне изображения для формирования энтропийных слоев. В некоторых вариантах осуществления, один или более энтропийных слоев могут соответствовать данным предсказания, и один или более энтропийных слоев могут соответствовать остаточным данным. В альтернативных вариантах осуществления настоящего изобретения, один или более энтропийных слоев могут соответствовать каждой из множества цветовых плоскостей.
В некоторых вариантах осуществления настоящего изобретения, битовый поток может быть перекодирован так, чтобы содержать энтропийные слои. В этих вариантах осуществления, может энтропийно декодироваться принятый битовый поток, может создаваться множество энтропийных слоев, и каждый из энтропийных слоев может независимо кодироваться и записываться в перекодированный битовый поток вместе со связанными заголовками энтропийных слоев.
Вышеуказанные и другие цели, признаки и преимущества настоящего изобретения будут более понятны при рассмотрении последующего подробного описания изобретения в сочетании с прилагаемыми чертежами.
КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ
Фиг.1 является изображением, показывающим отвечающее стандарту H.264/AVC устройство кодирования видеоинформации (предшествующий уровень техники);
Фиг.2 является изображением, показывающим отвечающее стандарту H.264/AVC устройство декодирования видеоинформации (предшествующий уровень техники);
Фиг.3 является изображением, показывающим иллюстративную структуру слоев (предшествующий уровень техники);
Фиг.4 является изображением, показывающим иллюстративную структуру групп слоев (предшествующий уровень техники);
Фиг.5 является изображением, показывающим иллюстративное послойное разделение согласно вариантам осуществления настоящего изобретения, при этом изображение может разделяться по меньшей мере в одном реконструируемом слое, и реконструируемый слой может разделяться более чем на один энтропийный слой;
Фиг.6 является диаграммой, показывающей иллюстративный вариант осуществления настоящего изобретения, содержащий энтропийный слой;
Фиг.7 является диаграммой, показывающей иллюстративный вариант осуществления настоящего изобретения, содержащий параллельное энтропийное декодирование множества энтропийных слоев с последующим реконструированием слоев;
Фиг.8 является диаграммой, показывающей иллюстративный вариант осуществления настоящего изобретения, содержащий мультиплексирование данных предсказания/остаточных данных на уровне изображения для создания энтропийного слоя;
Фиг.9 является диаграммой, показывающей иллюстративный вариант осуществления настоящего изобретения, содержащий мультиплексирование цветовых плоскостей на уровне изображения для создания энтропийного слоя; и
Фиг.10 является диаграммой, показывающей иллюстративный вариант осуществления настоящего изобретения, содержащий перекодирование битового потока посредством энтропийного декодирования, формирования энтропийных слоев и энтропийного кодирования.
ПОЗИЦИОННЫЕ ОБОЗНАЧЕНИЯ
2 отвечающее стандарту H.264/AVC устройство кодирования видеоинформации
32 энтропийное кодирование
54 энтропийное декодирование
80 отвечающее стандарту H.264/AVC устройство декодирования видеоинформации
110 видеокадр
111, 112, 113 реконструируемый слой
112-1, 112-2, 112-3 энтропийный слой
115, 116, 117, 118, 119, 120, 121, 122, 123 макроблок
ОСУЩЕСТВЛЕНИЕ ИЗОБРЕТЕНИЯ
Варианты осуществления настоящего изобретения будут наилучшим образом поняты при обращении к чертежам, при этом повсюду подобные части обозначаются подобными цифрами. Перечисленные выше чертежи явно включаются как часть настоящего подробного описания.
Будет легко понять, что компоненты настоящего изобретения, которые в целом описаны и проиллюстрированы на чертежах в данном документе, могут быть скомпонованы и приспособлены для самых разных конфигураций. Таким образом, последующее более подробное описание вариантов осуществления способов, устройств и систем настоящего изобретения не предназначено для ограничения объема настоящего изобретения, а лишь отражает предпочтительные варианты осуществления настоящего изобретения.
Элементы вариантов осуществления настоящего изобретения могут быть воплощены в аппаратном обеспечении, программно-аппаратном обеспечении и/или программном обеспечении. Несмотря на то что иллюстративные варианты осуществления, показанные в данном документе, могут описывать только одну из этих форм, следует понимать, что специалист в данной области техники сможет исполнить такие элементы в любой из этих форм, оставаясь в пределах объема настоящего изобретения.
В то время как любое кодирующее/декодирующее устройство (кодек), которое использует энтропийное кодирование/декодирование, может быть приспособлено к вариантам осуществления настоящего изобретения, иллюстративные варианты осуществления настоящего изобретения будут проиллюстрированы в отношении отвечающего стандарту H.264/AVC устройства кодирования и отвечающего стандарту H.264/AVC устройства декодирования. Это предназначено для иллюстрирования вариантов осуществления настоящего изобретения, а не для ограничения.
Способы и стандарты кодирования видеоинформации современного уровня техники, например стандарт H.264/AVC, могут обеспечить более высокую эффективность кодирования, чем более ранние способы и стандарты, за счет более высокой сложности. Повышение требований к качеству и требований к разрешающей способности, предъявляемых к способам и стандартам кодирования видеоинформации, также может повысить их сложность. Декодирующие устройства, которые поддерживают параллельное декодирование, могут повысить скорость декодирования и снизить требования к запоминающему устройству. Дополнительно, достижения в области многоядерных обрабатывающих устройств могут сделать желательными кодирующие устройства и декодирующие устройства, которые поддерживают параллельное декодирование.
H.264/AVC, и многие другие стандарты и способы кодирования видеоинформации, основываются на методе блочного гибридного кодирования видеоинформации, при этом алгоритм кодирования источника представляет собой гибридную схему из предсказания между изображениями, может рассматриваться и между кадрами, предсказания внутри изображения, может рассматриваться и внутри кадра, и кодирования с преобразованием разности предсказаний. Межкадровое предсказание может задействовать временные избыточности, а внутрикадровое, и кодирование с преобразованием разности предсказаний, может задействовать пространственные избыточности.
Фиг.1 показывает структурную схему иллюстративного отвечающего стандарту H.264/AVC устройства 2 кодирования видеоинформации. Входное изображение 4 может рассматриваться и входящий кадр может быть представлен для кодирования. Могут производиться предсказанный сигнал 6 и остаточный сигнал 8, причем предсказанный сигнал 6 может основываться или на межкадровом предсказании 10, или на внутрикадровом предсказании 12. Межкадровое предсказание 10 может определяться компенсацией 14 движения с использованием сохраненного, опорного изображения 16, может рассматриваться и опорный кадр, используя информацию 19 движения, определяемую в процессе оценки 18 движения между входным кадром (входным изображением) 4 и опорным кадром (опорным изображением) 16. Внутрикадровое предсказание 12 может определяться внутрикадровым предсказанием 20 с помощью декодированного сигнала 22. Остаточный сигнал 8 может определяться вычитанием входного кадра 4 из предсказания (предсказанного сигнала) 6. Остаточный сигнал 8 преобразуется, масштабируется и квантуется 24, таким образом, производя квантованные коэффициенты 26 преобразования. Декодированный сигнал 22 может генерироваться посредством суммирования предсказанного сигнала 6 с сигналом 28, сгенерированным инверсным преобразованием, масштабированием и инверсным квантованием 30 квантованных коэффициентов 26 преобразования. Информация 19 движения и квантованные коэффициенты преобразования 26 могут подвергаться энтропийному кодированию 32 и записываться в битовый поток 34 сжатой видеоинформации. Область 38 выходного изображения, например часть опорного кадра, может генерироваться на кодирующем устройстве 2 посредством фильтрации 36 реконструированного, предварительно отфильтрованного сигнала (декодированного сигнала) 22.
Фиг.2 показывает структурную схему иллюстративного отвечающего стандарту H.264/AVC устройства 50 декодирования видеоинформации. Входной сигнал 52 может рассматриваться и битовый поток может быть представлен для декодирования. Принятые символы могут подвергаться энтропийному декодированию 54, таким образом, производя информацию 56 движения и квантованные, масштабированные коэффициенты 58 преобразования. Информация 56 движения может объединяться посредством компенсации 60 движения с частью опорного кадра 84, который может находиться в запоминающем устройстве 64 кадров, и может генерироваться межкадровое предсказание 68. Квантованные, масштабированные коэффициенты 58 преобразования могут подвергаться инверсному квантованию, инверсному масштабированию и инверсному преобразованию 62, таким образом, производя декодированный остаточный сигнал 70. Остаточный сигнал 70 может суммироваться с сигналом 78 предсказания: либо сигналом 68 межкадрового предсказания, либо сигналом 76 внутрикадрового предсказания, и становиться объединенным сигналом 72. Сигнал 76 внутрикадрового предсказания может предсказываться благодаря внутрикадровому предсказанию 74, исходя из ранее декодированной информации (ранее объединенного сигнала) 72 в текущем кадре. Объединенный сигнал 72 может быть отфильтрован фильтром 80 для удаления блочности, и отфильтрованный сигнал 82 может быть записан в запоминающее устройство 64 кадров.
Согласно стандарту H.264/AVC, входное изображение разделяется на макроблоки фиксированного размера, причем каждый макроблок покрывает прямоугольный участок изображения размером 16×16 отсчетов яркостной составляющей и 8×8 отсчетов каждой из двух цветовых составляющих. Технологический процесс декодирования по стандарту H.264/AVC задается для обработки единичных элементов, которые являются макроблоками. Устройство 54 энтропийного кодирования анализирует элементы синтаксиса битового потока 52 сжатой видеоинформации и мультиплексирует их. Стандарт H.264/AVC определяет два альтернативных способа энтропийного декодирования: технология с низкой сложностью, которая основывается на использовании адаптивно выбираемых в зависимости от контекста наборов кодов переменной длины, упоминаемая как CAVLC (Context-adaptive variable-length coding), и более требовательный в вычислительном отношении алгоритм контекстно-зависимого адаптивного двоичного арифметического кодирования, упоминаемый как CABAC (Context-adaptive binary arithmetic coding). Согласно обоим способам энтропийного декодирования, декодирование текущего символа может опираться на заранее правильно декодированные символы и адаптивно скорректированные контекстные модели. Помимо этого, различная информация о данных, например информация о данных предсказания, информация об остаточных данных и различные цветовые плоскости, может совместно мультиплексироваться. Демультиплексирование не может осуществляться, пока элементы не будут энтропийно декодированы.
После энтропийного декодирования, макроблок может реконструироваться путем получения: остаточного сигнала при помощи инверсного квантования и инверсного преобразования, и сигнала предсказания, либо сигнала внутрикадрового предсказания, либо сигнала межкадрового предсказания. Искажение в блоке может быть уменьшено путем применения фильтра для удаления блочности к каждому декодированному макроблоку. Обработка не может начинаться, пока входной сигнал не будет энтропийно декодирован, в связи с этим энтропийное декодирование становится потенциально узким местом при декодировании.
Аналогично в кодеках, в которых могут допускаться альтернативные механизмы предсказания, например межуровневое предсказание согласно стандарту H.264/AVC или межуровневое предсказание в других масштабируемых кодеках, энтропийное декодирование может быть необходимо до какой-либо обработки в декодирующем устройстве, в связи с этим энтропийное декодирование становится потенциально узким местом.
Согласно стандарту H.264/AVC, входное изображение, содержащее множество макроблоков, может разделяться на один или несколько слоев. Значения отсчетов на участке изображения, который представляет слой, могут быть правильно декодированы без использования данных от других слоев при условии, что опорные изображения, используемые в кодирующем устройстве и в декодирующем устройстве, идентичны. Следовательно, энтропийное декодирование и реконструирование макроблоков для слоя не зависят от других слоев. В частности, состояние энтропийного кодирования восстанавливается в начале каждого слоя. Данные в других слоях помечаются как недоступные при определении окрестной доступности как для энтропийного декодирования, так и для реконструирования. Согласно стандарту H.264/AVC, слои могут параллельно энтропийно декодироваться и реконструироваться. Не допускаются внутреннее предсказание и предсказание вектора движения за границей слоя. Фильтрование для удаления блочности может использовать информацию за границами слоя.
Фиг.3 показывает иллюстративное видеоизображение 90, содержащее одиннадцать макроблоков по горизонтали и девять макроблоков по вертикали (девять иллюстративных макроблоков пронумерованы 91-99). Фиг.3 показывает три иллюстративных слоя: первый слой, обозначенный "SLICE #0" 100, второй слой, обозначенный "SLICE #1" 101, и третий слой, обозначенный "SLICE #2" 102. Отвечающее стандарту H.264/AVC декодирующее устройство может параллельно декодировать и реконструировать три слоя 100, 101, 102. В начале технологического процесса декодирования/реконструирования для каждого слоя, контекстные модели инициализируются или восстанавливаются, и макроблоки в других слоях помечаются как недоступные и для энтропийного декодирования, и для реконструирования макроблоков. Таким образом, для макроблока, например макроблока, пронумерованного 93, в слое "SLICE #1", макроблоки (например, макроблоки, пронумерованные 91 и 92) в слое "SLICE #0" не могут использоваться для выбора контекстной модели или реконструирования. Тогда как для макроблока, например макроблока, пронумерованного 95, в слое "SLICE #1", другие макроблоки (например, макроблоки, пронумерованные 93 и 94) в слое "SLICE #1" могут использоваться для выбора контекстной модели или реконструирования. Следовательно, энтропийное декодирование и реконструирование макроблоков должны происходить последовательно в пределах слоя. Если слои не определяются с использованием гибкого упорядочивания макроблоков (FMO - flexible macroblock ordering), макроблоки в пределах слоя обрабатываются в порядке растровой развертки.
Гибкое упорядочивание макроблоков определяет группу слоев, чтобы изменить процесс разделения изображения на слои. Макроблоки в группе слоев определяются картой макроблоков в группе слоев, которая сообщается при помощи содержимого набора параметров изображения и дополнительной информации в заголовке слоя. Карта макроблоков в группе слоев содержит идентификационный номер группы слоев для каждого макроблока в изображении. Идентификационный номер группы слоев определяет, какой группе слоев принадлежит связанный макроблок. Каждая группа слоев может быть разделена на один или более слоев, при этом слой представляет собой последовательность макроблоков в пределах одной и той же группы слоев, которая обрабатывается в порядке растровой развертки в пределах набора макроблоков конкретной группы слоев. Энтропийное декодирование и реконструирование макроблоков должны происходить последовательно в пределах слоя.
Фиг.4 изображает иллюстративное распределение макроблоков по трем группам слоев: первая группа слоев, обозначенная "SLICE GROUP #0" 103, вторая группа слоев, обозначенная "SLICE GROUP #1" 104, и третья группа слоев, обозначенная "SLICE GROUP #2" 105. Эти группы слоев 103, 104, 105 могут быть связаны с двумя областями переднего плана и фоновой областью соответственно на изображении 90.
Некоторые варианты осуществления настоящего изобретения могут содержать разделение изображения на один или более реконструируемых слоев, при этом реконструируемый слой может быть автономным в том отношении, что значения отсчетов на участке изображения, который представляет реконструируемый слой, может быть правильно реконструированы без использования данных из других реконструируемых слоев при условии, что используемые опорные изображения идентичны в кодирующем устройстве и в декодирующем устройстве. Все реконструированные макроблоки в пределах реконструируемого слоя могут быть доступны в окрестном определении для реконструирования.
Некоторые варианты осуществления настоящего изобретения могут содержать разделение реконструируемого слоя больше чем на один энтропийный слой, при этом энтропийный слой может быть автономным в том отношении, что значения отсчетов на участке изображения, который представляет энтропийный слой, могут быть правильно энтропийно декодированы без использования данных из других энтропийных слоев. В некоторых вариантах осуществления настоящего изобретения, состояние энтропийного кодирования может восстанавливаться в начале декодирования каждого энтропийного слоя. В некоторых вариантах осуществления настоящего изобретения, данные в других энтропийных слоях могут помечаться как недоступные при определении окрестной доступности для энтропийного декодирования. В некоторых вариантах осуществления настоящего изобретения, макроблоки в других энтропийных слоях могут не использоваться при выборе контекстной модели текущего блока. В некоторых вариантах осуществления настоящего изобретения, контекстные модели могут корректироваться только в пределах энтропийного слоя. В этих вариантах осуществления настоящего изобретения, каждое устройство энтропийного декодирования, связанное с энтропийным слоем, может поддерживать свой собственный набор контекстных моделей.
Некоторые варианты осуществления настоящего изобретения могут содержать кодирующее/декодирующее устройство с алгоритмом CABAC. Технологический процесс кодирования по алгоритму CABAC включает в себя следующие этапы.
Преобразование в двоичную форму: недвоичный символ (например, коэффициент преобразования, вектор движения или другие данные кодирования) конвертируется в двоичный код, также именуемый как строка бинов.
За преобразованием в двоичную форму, для каждого бина, может рассматриваться и бит, преобразуемого в двоичную форму символа, следует:
Выбор Контекстной Модели: контекстная модель представляет собой вероятностную модель для одного или более бинов преобразуемого в двоичную форму символа. Контекстная модель содержит, для каждого бина, вероятность того, что бин является "1" или "0". Модель может подбираться для выбора доступных моделей в зависимости от статистики по недавно закодированным символам данных, обычно на основании соседних символов слева и сверху, при наличии таковых.
Двоичное Арифметическое Кодирование: арифметическое кодирующее устройство кодирует каждый бин согласно выбранной вероятностной модели и основывается на рекурсивном последовательном разбиении интервала.
Вероятностная Коррекция: выбранная контекстная модель корректируется, основываясь на фактическом закодированном значении.
В некоторых вариантах осуществления настоящего изобретения, содержащих кодирование/декодирование по алгоритму CABAC, в начале декодирования энтропийного слоя, все контекстные модели могут инициализироваться или восстанавливаться на предварительно заданные модели.
Некоторые варианты осуществления настоящего изобретения могут быть поняты по Фиг.5. Фиг.5 показывает иллюстративный видеокадр 110, содержащий одиннадцать макроблоков по горизонтали и девять макроблоков по вертикали (девять иллюстративных макроблоков пронумерованы 115-123). Фиг.5 показывает три иллюстративных реконструируемых слоя: первый реконструируемый слой, обозначенный "R_SLICE #0" 111, второй реконструируемый слой, обозначенный "R_SLICE #1" 112, и третий реконструируемый слой, обозначенный "R_SLICE #2" 113. Фиг.5 дополнительно показывает разделение второго реконструируемого слоя "R_SLICE #1" 112 на три энтропийных слоя: первый энтропийный слой, обозначенный "E_SLICE #0", показанный перекрестной штриховкой 112-1, второй энтропийный слой, обозначенный "E_SLICE #1", показанный вертикальной штриховкой 112-2, и третий энтропийный слой, обозначенный "E_SLICE #2", показанный диагональной штриховкой 112-3. Каждый энтропийный слой 112-1, 112-2, 112-3 может энтропийно декодироваться параллельно. При этом, первый энтропийный слой, обозначенный "E_SLICE #0", и второй энтропийный слой, обозначенный "E_SLICE #1", могут также упоминаться как первая часть и вторая часть битового потока.
В некоторых вариантах осуществления настоящего изобретения, только данные из макроблоков в пределах энтропийного слоя могут быть доступны для выбора контекстной модели в ходе энтропийного декодирования энтропийного слоя. Все другие макроблоки могут быть помечены как недоступные. Для данного иллюстративного разделения, макроблоки, пронумерованные 117 и 118, недоступны для выбора контекстной модели при декодировании символов, соответствующих участку макроблока, пронумерованного 119, потому что макроблоки, пронумерованные 117 и 118, находятся вне энтропийного слоя, содержащего макроблок 119. Тем не менее, эти макроблоки 117, 118 доступны при реконструировании макроблока 119.
В некоторых вариантах осуществления настоящего изобретения, кодирующее устройство может определять, разделять ли реконструируемый слой на энтропийные слои, и кодирующее устройство может посылать сигнал о решении в битовый поток. В некоторых вариантах осуществления настоящего изобретения, сигнал может содержать флаг энтропийного слоя (флаг энтропийного слоя в первом энтропийном слое может упоминаться как первый флаг), который может обозначаться через "entropy_slice_flag" в некоторых вариантах осуществления настоящего изобретения.
Некоторые варианты осуществления декодирующего устройства согласно настоящему изобретению могут быть описаны в отношении Фиг.6. В этих вариантах осуществления, может проверяться флаг энтропийного слоя (S130), и если флаг энтропийного слоя указывает, что нет энтропийных слоев, связанных с изображением, или реконструируемым слоем (НЕТ на этапе S130), то заголовок может анализироваться как заголовок обычного слоя (S134). Состояние устройства энтропийного декодирования может восстанавливаться (S136), и может определяться окрестная информация для энтропийного декодирования и реконструирования (S138). Затем могут энтропийно декодироваться данные слоя (S140), и слой может быть реконструирован (S142). Если флаг энтропийного слоя указывает, что есть энтропийные слои, связанные с изображением (ДА на этапе S130), то заголовок может анализироваться как заголовок энтропийного слоя (S148). Состояние устройства энтропийного декодирования может восстанавливаться (S150), может определяться окрестная информация для энтропийного декодирования (S152), и данные энтропийного слоя могут энтропийно декодироваться (S154). Затем может определяться окрестная информация для реконструирования (S156), и слой может быть реконструирован (S142). После реконструирования слоя на этапе S142 может проверяться следующий слой, или изображение.
Некоторые альтернативные варианты осуществления декодирующего устройства согласно настоящему изобретению могут быть описаны в отношении Фиг.7. В этих вариантах осуществления, декодирующее устройство может быть выполнено с возможностью параллельного декодирования и может определять свой собственный уровень параллелизма, например рассмотрим декодирующее устройство, способное параллельно декодировать N энтропийных слоев. Декодирующее устройство может идентифицировать N энтропийных слоев (S170). В некоторых вариантах осуществления настоящего изобретения, если доступно менее N энтропийных слоев, в текущем изображении, или в реконструируемом слое, декодирующее устройство может декодировать энтропийные слои из последующих изображений, или реконструируемых слоев, если они доступны. В альтернативных вариантах осуществления, декодирующее устройство может ожидать, пока текущее изображение, или реконструируемый слой, не будет полностью обработано, перед декодированием частей последующего изображения, или реконструируемого слоя. После идентификации вплоть до N энтропийных слоев на этапе S170, каждый из идентифицированных энтропийных слоев может независимо энтропийно декодироваться. Может декодироваться первый энтропийный слой (S172-S176). Декодирование первого энтропийного слоя может содержать этап, на котором восстанавливают состояние декодирующего устройства (S172). В некоторых вариантах осуществления, вмещающих энтропийное декодирование по алгоритму CABAC, может восстанавливаться состояние CABAC. Может определяться окрестная информация для энтропийного декодирования первого энтропийного слоя (S174), и могут декодироваться данные первого энтропийного слоя (S176). Эти этапы могут выполняться для каждого из вплоть до N энтропийных слоев (S178-S182 для N-го энтропийного слоя). В некоторых вариантах осуществления настоящего изобретения, декодирующее устройство может реконструировать энтропийные слои, когда все энтропийные слои энтропийно декодированы (S184). В альтернативных вариантах осуществления настоящего изобретения, декодирующее устройство может начать реконструирование на этапе S184 после того как декодированы один или более энтропийных слоев.
В некоторых вариантах осуществления настоящего изобретения, когда имеется более N энтропийных слоев, декодирующий подпроцесс может начать энтропийное декодирование следующего энтропийного слоя после завершения энтропийного декодирования энтропийного слоя. Таким образом, когда подпроцесс заканчивает энтропийное декодирование энтропийного слоя с низкой сложностью, этот подпроцесс может начинать декодирование дополнительных энтропийных слоев, не дожидаясь, пока другие подпроцессы закончат свое декодирование.
В некоторых вариантах осуществления настоящего изобретения, которые могут обеспечивать существующий стандарт или способ, энтропийный слой может совместно использовать большинство атрибутов слоя обычного слоя в соответствии с этим стандартом или способом. Следовательно, энтропийному слою может требоваться небольшой заголовок. В некоторых вариантах осуществления настоящего изобретения, заголовок энтропийного слоя может дать декодирующему устройству возможность идентифицировать начало энтропийного слоя и начать энтропийное декодирование. В некоторых вариантах осуществления, в начале изображения, или реконструируемого слоя, заголовок энтропийного слоя может быть обычным заголовком, или заголовком реконструируемого слоя.
В некоторых вариантах осуществления настоящего изобретения, содержащих отвечающий стандарту H.264/AVC кодек, энтропийный слой может сигнализироваться посредством добавления нового бита, "entropy_slice_flag", в существующий заголовок слоя. В Таблице приведен синтаксис для заголовка энтропийного слоя согласно вариантам осуществления настоящего изобретения, при этом C указывает категорию, а дескриптор u(1), ue(v) указывает некоторую фиксированную продолжительность или переменную продолжительность способов кодирования.
"first_mb_in_slice" задает адрес первого макроблока в энтропийном слое, связанном с заголовком энтропийного слоя. В некоторых вариантах осуществления, энтропийный слой может содержать последовательность макроблоков.
"cabac_init_idc" задает индекс для определения таблицы инициализации, используемой в технологическом процессе инициализации для контекстного режима.
Таблица синтаксиса для заголовка энтропийного слоя
slice_header() { C Дескриптор
entropy_slice_flag 2 u(1)
if (entropy_slice_flag) {    
first_mb_in_slice 2 ue(v)
if (entropy_coding_mode_flag && slice_type != I && slice_type != SI)    
cabac_init_idc 2 ue(v)
}    
}    
Else {    
заголовок обычного слоя    
}    
}    
В некоторых вариантах осуществления настоящего изобретения, энтропийное декодирование энтропийного слоя может содержать этапы, на которых инициализируют множество контекстных моделей; и корректируют это множество контекстных моделей в ходе энтропийного декодирования энтропийного слоя.
В некоторых вариантах осуществления настоящего изобретения, энтропийному слою может назначаться разный тип элемента уровня сетевой абстракции (NAL - network abstraction layer), исходя из обычных слоев. В этих вариантах осуществления, декодирующее устройство может проводить различие между обычным слоем и энтропийными слоями, основываясь на типе элемента NAL. В этих вариантах осуществления, битовое поле "entropy_slice_flag" не требуется.
В некоторых вариантах осуществления настоящего изобретения, энтропийный слой может создаваться в результате изменения мультиплексирования данных. В некоторых вариантах осуществления настоящего изобретения, группа символов, содержащихся в энтропийном слое, может мультиплексироваться на уровне макроблоков. В альтернативных вариантах осуществления настоящего изобретения, группа символов, содержащихся в энтропийном слое, может мультиплексироваться на уровне изображения. В других альтернативных вариантах осуществления настоящего изобретения, группа символов, содержащихся в энтропийном слое, может мультиплексироваться по типу данных. Еще в одних альтернативных вариантах осуществления настоящего изобретения, группа символов, содержащихся в энтропийном слое, может мультиплексироваться в комплексе вышеупомянутого.
Некоторые варианты осуществления способа настоящего изобретения содержат кодирование видеокадра в видеопоследовательности, что включает в себя этапы, на которых разделяют кадр в видеопоследовательности по меньшей мере на один реконструируемый слой, таким образом, производя реконструируемый слой; и разделяют реконструируемый слой на множество энтропийных слоев.
Некоторые варианты осуществления настоящего изобретения, содержащие создание энтропийного слоя на основании мультиплексирования на уровне изображения, могут быть поняты по Фиг.8 и Фиг.9. В некоторых вариантах осуществления настоящего изобретения, показанных на Фиг.8, данные 190 предсказания и остаточные данные 192 могут энтропийно кодироваться устройством 194 кодирования с предсказанием и устройством 196 остаточного кодирования по отдельности и мультиплексироваться на уровне изображения устройством 198 мультиплексирования на уровне изображения. В некоторых вариантах осуществления настоящего изобретения, данные 190 предсказания для изображения могут быть связаны с первым энтропийным слоем, а остаточные данные 192 для изображения могут быть связаны со вторым энтропийным слоем. Закодированные данные предсказания и закодированные энтропийные данные могут декодироваться параллельно. В некоторых вариантах осуществления настоящего изобретения, каждая часть, содержащая данные предсказания или остаточные данные, может быть разделена на энтропийные слои, которые могут декодироваться параллельно.
В некоторых вариантах осуществления настоящего изобретения, показанных на Фиг.9, разность каждой цветовой плоскости, например разностный сигнал яркости (Y) 200 и два разностных сигнала цветности (U и V) 202, 204, могут энтропийно кодироваться устройством 206 Y-кодирования, устройством 208 U-кодирования и устройством 210 V-кодирования по отдельности и мультиплексироваться на уровне изображения устройством 212 мультиплексирования на уровне изображения. В некоторых вариантах осуществления настоящего изобретения, разностный сигнал яркости 200 для изображения может быть связан с первым энтропийным слоем, первый разностный сигнал цветности (U) 202 для изображения может быть связан со вторым энтропийным слоем, и разностный сигнал цветности (V) 204 для изображения может быть связан с третьим энтропийным слоем. Закодированные остаточные данные для трех цветовых плоскостей могут декодироваться параллельно. В некоторых вариантах осуществления настоящего изобретения, каждая часть, содержащая остаточные данные цветовых плоскостей, может быть разделена на энтропийные слои, которые могут декодироваться параллельно. В некоторых вариантах осуществления настоящего изобретения, разностный сигнал яркости 200 может иметь относительно больше энтропийных слоев по сравнению с разностными сигналами цветности 202, 204.
В некоторых вариантах осуществления настоящего изобретения, битовый поток сжатой видеоинформации может быть перекодирован так, чтобы содержать энтропийные слои, таким образом, предоставляя возможность параллельного энтропийного декодирования, которое обеспечивается вариантами осуществления настоящего изобретения, описанными выше. Некоторые варианты осуществления настоящего изобретения могут быть описаны в отношении Фиг.10. Входной битовый поток без энтропийных слоев может обрабатываться по отдельным изображениям в соответствии с Фиг.10. В этих вариантах осуществления настоящего изобретения, изображение из входного битового потока может энтропийно декодироваться (S220). Могут быть получены данные, которые были закодированы, например данные режима, информация движения, остаточная информация и другие данные. Энтропийные слои могут по одному создаваться из данных (S222). Заголовок энтропийного слоя, соответствующий энтропийному слою, может вставляться в новый битовый поток (S224). Состояние кодирующего устройства может восстанавливаться, и может определяться окрестная информация (S226). Энтропийный слой может энтропийно кодироваться (S228) и записываться в новый битовый поток. Если есть данные изображения, которые не были израсходованы на созданные энтропийные слои (НЕТ на этапе S230), то другой энтропийный слой может создаваться на этапе S222, и технологический процесс S224-S230 может продолжаться, пока все данные изображения не будут израсходованы на созданные энтропийные слои (ДА на этапе S230), а затем может обрабатываться следующее изображение.
Термины и выражения, которые были задействованы в вышеизложенном описании изобретения, используются в нем как способ представления описания, а не ограничение, и в использовании таких терминов и выражений отсутствует намерение исключить эквивалентность показанных и описанных признаков, или их части, и нужно отдавать себе отчет, что объем настоящего изобретения определяется и ограничивается только последующей формулой изобретения.

Claims (8)

1.Способ декодирования видеокадра в видеопоследовательности, причем упомянутый способ содержит этапы, на которых:
a) принимают битовый поток;
b) идентифицируют реконструируемый слой в упомянутом битовом потоке;
c) идентифицируют множество разделенных слоев, каждый из которых связан с областью изображения в упомянутом реконструируемом слое в упомянутом битовом потоке;
d) осуществляют энтропийное декодирование каждого из упомянутого множества разделенных слоев, связанных с упомянутым реконструируемым слоем, таким образом производя множество энтропийно декодированных разделенных слоев; и
e) реконструируют часть видеокадра, связанную с упомянутым реконструируемым слоем, используя упомянутое множество энтропийно декодированных разделенных слоев.
2. Способ по п.1, в котором упомянутый этап, на котором идентифицируют упомянутое множество разделенных слоев, связанных с упомянутым реконструируемым слоем, содержит этап, на котором анализируют упомянутый битовый поток для идентификации каждого разделенного слоя из упомянутого множества разделенных слоев, связанных с упомянутым реконструируемым слоем.
3. Способ по п.1, в котором этап, на котором осуществляют энтропийное декодирование первого разделенного слоя из упомянутого множества разделенных слоев, связанных с упомянутым реконструируемым слоем, содержит этапы, на которых:
a) инициализируют множество контекстных моделей; и
b) корректируют упомянутое множество контекстных моделей в ходе упомянутого этапа, на котором осуществляют энтропийное декодирование упомянутого первого разделенного слоя из упомянутого множества разделенных слоев, связанных с упомянутым реконструируемым слоем.
4. Способ по п.3, в котором упомянутый первый разделенный слой идентифицируется первым заголовком.
5. Способ по п.1, в котором упомянутый реконструируемый слой соответствует целому упомянутому видеокадру.
6. Способ по п.1, дополнительно содержащий этап, на котором анализируют флаг заголовка слоя в упомянутом битовом потоке, и
в случае если упомянутый анализируемый флаг имеет значение, равное 0, то упомянутый заголовок слоя является заголовком обычного слоя,
в случае если упомянутый анализируемый флаг имеет значение, равное 1, то упомянутый заголовок слоя является заголовком разделенного слоя,
причем упомянутый заголовок разделенного слоя использует большинство атрибутов слоя совместно с упомянутым заголовком обычного слоя, и размер упомянутого заголовка разделенного слоя меньше размера упомянутого заголовка обычного слоя.
7. Способ кодирования видеокадра в видеопоследовательности, причем упомянутый способ содержит этапы, на которых:
a) разделяют первый кадр в видеопоследовательности на по меньшей мере один реконструируемый слой, таким образом производя первый реконструируемый слой; и
b) разделяют упомянутый первый реконструируемый слой на множество разделенных слоев для энтропийного кодирования, каждый из которых связан с областью изображения в упомянутом реконструируемом слое.
8. Способ по п.7, дополнительно содержащий этап, на котором добавляют флаг к заголовку слоя в упомянутом битовом потоке, и
упомянутое добавление флага создает флаг, является ли упомянутый заголовок слоя, к которому добавляют флаг, обычным заголовком, связанным с упомянутым реконструируемым слоем, или заголовком разделенного слоя, связанным с разделенным слоем,
причем упомянутый заголовок разделенного слоя использует большинство атрибутов слоя совместно с упомянутым заголовком обычного слоя, и размер упомянутого заголовка разделенного слоя меньше размера упомянутого заголовка обычного слоя.
RU2010142914/08A 2008-03-28 2009-03-25 Способы, устройства и системы для параллельного кодирования и декодирования видеоинформации RU2514091C2 (ru)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/058,301 2008-03-28
US12/058,301 US8542748B2 (en) 2008-03-28 2008-03-28 Methods and systems for parallel video encoding and decoding
PCT/JP2009/056778 WO2009119888A1 (en) 2008-03-28 2009-03-25 Methods, devices and systems for parallel video encoding and decoding

Related Child Applications (1)

Application Number Title Priority Date Filing Date
RU2014105187A Division RU2641229C2 (ru) 2008-03-28 2014-02-12 Способы, устройства и системы для параллельного кодирования и декодирования видеоинформации

Publications (2)

Publication Number Publication Date
RU2010142914A RU2010142914A (ru) 2012-05-10
RU2514091C2 true RU2514091C2 (ru) 2014-04-27

Family

ID=41114068

Family Applications (4)

Application Number Title Priority Date Filing Date
RU2010142914/08A RU2514091C2 (ru) 2008-03-28 2009-03-25 Способы, устройства и системы для параллельного кодирования и декодирования видеоинформации
RU2014105187A RU2641229C2 (ru) 2008-03-28 2014-02-12 Способы, устройства и системы для параллельного кодирования и декодирования видеоинформации
RU2017142602A RU2684197C1 (ru) 2008-03-28 2017-12-06 Способы, устройства и системы для параллельного кодирования и декодирования видеоинформации
RU2019107974A RU2760849C2 (ru) 2008-03-28 2019-03-20 Способы, устройства и системы для параллельного кодирования и декодирования видеоинформации

Family Applications After (3)

Application Number Title Priority Date Filing Date
RU2014105187A RU2641229C2 (ru) 2008-03-28 2014-02-12 Способы, устройства и системы для параллельного кодирования и декодирования видеоинформации
RU2017142602A RU2684197C1 (ru) 2008-03-28 2017-12-06 Способы, устройства и системы для параллельного кодирования и декодирования видеоинформации
RU2019107974A RU2760849C2 (ru) 2008-03-28 2019-03-20 Способы, устройства и системы для параллельного кодирования и декодирования видеоинформации

Country Status (17)

Country Link
US (15) US8542748B2 (ru)
EP (4) EP3764652B1 (ru)
JP (10) JP5075988B2 (ru)
CN (2) CN104270645B (ru)
BR (4) BRPI0911141B1 (ru)
CY (1) CY1123585T1 (ru)
DK (1) DK3086557T3 (ru)
ES (1) ES2830394T3 (ru)
HK (1) HK1206179A1 (ru)
HR (1) HRP20201803T1 (ru)
HU (1) HUE051657T2 (ru)
LT (1) LT3086557T (ru)
PL (1) PL3086557T3 (ru)
PT (1) PT3086557T (ru)
RU (4) RU2514091C2 (ru)
SI (1) SI3086557T1 (ru)
WO (1) WO2009119888A1 (ru)

Families Citing this family (111)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8634470B2 (en) * 2007-07-24 2014-01-21 Samsung Electronics Co., Ltd. Multimedia decoding method and multimedia decoding apparatus based on multi-core processor
US8542748B2 (en) 2008-03-28 2013-09-24 Sharp Laboratories Of America, Inc. Methods and systems for parallel video encoding and decoding
US8897583B2 (en) * 2008-05-23 2014-11-25 Panasonic Corporation Image decoding apparatus for decoding a target block by referencing information of an already decoded block in a neighborhood of the target block
JP5050158B2 (ja) * 2008-06-02 2012-10-17 株式会社メガチップス トランスコーダ
US8311111B2 (en) * 2008-09-11 2012-11-13 Google Inc. System and method for decoding using parallel processing
CN101897189B (zh) * 2008-10-10 2016-07-06 松下电器产业株式会社 图像解码装置以及图像解码方法
US7932843B2 (en) * 2008-10-17 2011-04-26 Texas Instruments Incorporated Parallel CABAC decoding for video decompression
US8831090B2 (en) 2008-11-18 2014-09-09 Avigilon Corporation Method, system and apparatus for image capture, analysis and transmission
US9467699B2 (en) * 2008-12-03 2016-10-11 Hfi Innovation Inc. Method for performing parallel coding with ordered entropy slices, and associated apparatus
WO2010063184A1 (en) * 2008-12-03 2010-06-10 Mediatek Inc. Method for performing parallel cabac processing with ordered entropy slices, and associated apparatus
CN101939994B (zh) * 2008-12-08 2013-07-17 松下电器产业株式会社 图像解码装置及图像解码方法
JP2010141821A (ja) * 2008-12-15 2010-06-24 Toshiba Corp ストリーミングプロセッサおよびプロセッサシステム
EP2312854A1 (de) * 2009-10-15 2011-04-20 Siemens Aktiengesellschaft Verfahren zur Codierung von Symbolen aus einer Folge digitalisierter Bilder
US8718149B2 (en) 2009-10-29 2014-05-06 Panasonic Corporation Image coding method and image decoding method
JP2011217082A (ja) * 2010-03-31 2011-10-27 Jvc Kenwood Corp 画像符号化装置、画像符号化方法、画像符号化プログラム、画像復号装置、画像復号方法及び画像復号プログラム
JP5914962B2 (ja) * 2010-04-09 2016-05-11 ソニー株式会社 画像処理装置および方法、プログラム、並びに、記録媒体
EP2381685B1 (en) * 2010-04-13 2019-01-02 BlackBerry Limited Methods and devices for load balancing in parallel entropy coding and decoding
US8174414B2 (en) 2010-04-13 2012-05-08 Research In Motion Limited Methods and devices for load balancing in parallel entropy coding and decoding
US20120014431A1 (en) * 2010-07-14 2012-01-19 Jie Zhao Methods and Systems for Parallel Video Encoding and Parallel Video Decoding
US20120014429A1 (en) * 2010-07-15 2012-01-19 Jie Zhao Methods and Systems for Parallel Video Encoding and Parallel Video Decoding
US9338467B1 (en) 2010-07-19 2016-05-10 Google Inc. Parallel video transcoding
WO2012011860A1 (en) 2010-07-21 2012-01-26 Telefonaktiebolaget L M Ericsson (Publ) Picture coding and decoding
US9307260B2 (en) 2010-07-30 2016-04-05 Panasonic Intellectual Property Management Co., Ltd. Image decoding apparatus, image decoding method, image coding apparatus, and image coding method
US8344917B2 (en) * 2010-09-30 2013-01-01 Sharp Laboratories Of America, Inc. Methods and systems for context initialization in video coding and decoding
US9313514B2 (en) * 2010-10-01 2016-04-12 Sharp Kabushiki Kaisha Methods and systems for entropy coder initialization
CA2811660C (en) * 2010-10-01 2016-08-16 Research In Motion Limited Methods and devices for parallel encoding and decoding using a bitstream structured for reduced delay
KR20120035096A (ko) * 2010-10-04 2012-04-13 한국전자통신연구원 쿼드 트리 변환 구조에서 부가 정보의 시그널링 방법 및 장치
CA2722993A1 (fr) * 2010-12-01 2012-06-01 Ecole De Technologie Superieure Systeme d'ecodage video parallele multitrames et multitranches avec encodage simultane de trames predites
US8880633B2 (en) 2010-12-17 2014-11-04 Akamai Technologies, Inc. Proxy server with byte-based include interpreter
US20120265853A1 (en) * 2010-12-17 2012-10-18 Akamai Technologies, Inc. Format-agnostic streaming architecture using an http network for streaming
US10244239B2 (en) 2010-12-28 2019-03-26 Dolby Laboratories Licensing Corporation Parameter set for picture segmentation
US9300976B2 (en) 2011-01-14 2016-03-29 Cisco Technology, Inc. Video encoder/decoder, method and computer program product that process tiles of video data
US9215473B2 (en) * 2011-01-26 2015-12-15 Qualcomm Incorporated Sub-slices in video coding
WO2012111315A1 (ja) * 2011-02-16 2012-08-23 パナソニック株式会社 ストリーム生成装置、ストリーム生成方法、ストリーム処理装置、およびストリーム処理方法
FR2972588A1 (fr) * 2011-03-07 2012-09-14 France Telecom Procede de codage et decodage d'images, dispositif de codage et decodage et programmes d'ordinateur correspondants
US20120230398A1 (en) * 2011-03-10 2012-09-13 Christopher Andrew Segall Video decoder parallelization including slices
US9325999B2 (en) * 2011-03-10 2016-04-26 Sharp Kabushiki Kaisha Video decoder for slices
MY163983A (en) * 2011-03-10 2017-11-15 Sharp Kk A method for decoding video
GB2488830B (en) * 2011-03-10 2015-07-29 Canon Kk Method and device for encoding image data and method and device for decoding image data
JP5982734B2 (ja) * 2011-03-11 2016-08-31 ソニー株式会社 画像処理装置および方法
US9379736B2 (en) * 2011-06-03 2016-06-28 Qualcomm Incorporated Context-adaptive coding video data
US8995523B2 (en) 2011-06-03 2015-03-31 Qualcomm Incorporated Memory efficient context modeling
JP5939251B2 (ja) * 2011-06-22 2016-06-22 日本電気株式会社 動画像符号化方法及び動画像符号化装置並びにプログラム
CN106878731B (zh) 2011-06-23 2019-06-04 太阳专利托管公司 图像编码方法及图像编码装置
TWI581615B (zh) 2011-06-24 2017-05-01 Sun Patent Trust A decoding method, a coding method, a decoding device, an encoding device, and a coding / decoding device
FR2977111A1 (fr) 2011-06-24 2012-12-28 France Telecom Procede de codage et decodage d'images, dispositif de codage et decodage et programmes d'ordinateur correspondants
EP3407610B1 (en) 2011-06-24 2019-09-04 Sun Patent Trust Coding method and coding apparatus
CN106878715B (zh) 2011-06-27 2019-05-28 太阳专利托管公司 编码方法及编码装置
BR112013030181B1 (pt) 2011-06-28 2022-09-27 Sun Patent Trust Método de decodificação para decodificar um parâmetro de controle para controlar decodificação de uma imagem, e método de codificação para codificar um parâmetro de controle para controlar codificação de uma imagem
MX2013010892A (es) 2011-06-29 2013-12-06 Panasonic Corp Metodo de decodificacion de imagenes, metodo de codificacion de imagenes, aparato de decodificacion de imagenes, aparato de codificacion de imagenes y aparato de codificacion y decodificacion de imagenes.
US11647197B2 (en) 2011-06-30 2023-05-09 Velos Media, Llc Context initialization based on slice header flag and slice type
CN107181948B (zh) 2011-06-30 2020-03-13 太阳专利托管公司 图像编码方法、图像编码装置及图像编码解码装置
WO2013001769A1 (ja) 2011-06-30 2013-01-03 パナソニック株式会社 画像復号方法、画像符号化方法、画像復号装置、画像符号化装置及び画像符号化復号装置
US9060173B2 (en) * 2011-06-30 2015-06-16 Sharp Kabushiki Kaisha Context initialization based on decoder picture buffer
CN107087185B (zh) 2011-07-11 2020-01-10 太阳专利托管公司 编码方法及编码装置、解码方法及解码装置
US8767824B2 (en) 2011-07-11 2014-07-01 Sharp Kabushiki Kaisha Video decoder parallelization for tiles
AP3992A (en) * 2011-07-15 2017-01-08 Ge Video Compression Llc Sample array coding for low-delay
US9699456B2 (en) * 2011-07-20 2017-07-04 Qualcomm Incorporated Buffering prediction data in video coding
US20130104177A1 (en) * 2011-10-19 2013-04-25 Google Inc. Distributed real-time video processing
US9584819B2 (en) 2011-10-24 2017-02-28 Qualcomm Incorporated Grouping of tiles for video coding
JP5760953B2 (ja) * 2011-10-31 2015-08-12 富士通株式会社 動画像復号装置、動画像符号化装置、動画像復号方法、及び動画像符号化方法
US9077998B2 (en) 2011-11-04 2015-07-07 Qualcomm Incorporated Padding of segments in coded slice NAL units
US9124895B2 (en) 2011-11-04 2015-09-01 Qualcomm Incorporated Video coding with network abstraction layer units that include multiple encoded picture partitions
US20130117418A1 (en) 2011-11-06 2013-05-09 Akamai Technologies Inc. Hybrid platform for content delivery and transcoding
FR2982447A1 (fr) * 2011-11-07 2013-05-10 France Telecom Procede de codage et decodage d'images, dispositif de codage et decodage et programmes d'ordinateur correspondants
FR2982446A1 (fr) 2011-11-07 2013-05-10 France Telecom Procede de codage et decodage d'images, dispositif de codage et decodage et programmes d'ordinateur correspondants
JP6080375B2 (ja) 2011-11-07 2017-02-15 キヤノン株式会社 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
IN2014CN02865A (ru) * 2011-11-15 2015-07-03 Intel Corp
KR101284559B1 (ko) 2011-12-22 2013-07-11 광주과학기술원 그래픽 처리 유닛 기반의 미디어 압축 및 전송 방법과 이를 실행하는 장치
TWI556629B (zh) * 2012-01-03 2016-11-01 杜比實驗室特許公司 規定視覺動態範圍編碼操作及參數
KR20130086009A (ko) * 2012-01-20 2013-07-30 삼성전자주식회사 병렬 처리를 위한 단일화된 신택스를 이용하는 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
HUE055964T2 (hu) * 2012-01-20 2022-01-28 Ge Video Compression Llc Párhuzamos feldolgozást lehetõvé tevõ kódolási koncepciók, transzport demultiplexer és videó bitfolyam
US10244246B2 (en) 2012-02-02 2019-03-26 Texas Instruments Incorporated Sub-pictures for pixel rate balancing on multi-core platforms
US9838684B2 (en) 2012-04-11 2017-12-05 Qualcomm Incorporated Wavefront parallel processing for video coding
US20130272428A1 (en) * 2012-04-16 2013-10-17 Sharp Laboratories Of America, Inc. Video decoder for copy slices
EP3024243B1 (en) * 2012-04-16 2017-08-02 Telefonaktiebolaget LM Ericsson (publ) Fixed tile structure flag indicating parallel processing possibility for a sequence of compressed video
CN103379331B (zh) * 2012-04-28 2018-10-23 南京中兴新软件有限责任公司 一种视频码流编解码方法和装置
WO2014003675A1 (en) * 2012-06-29 2014-01-03 Telefonaktiebolaget L M Ericsson (Publ) Transmitting apparatus and method thereof for video processing
JP6080405B2 (ja) * 2012-06-29 2017-02-15 キヤノン株式会社 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
WO2014038905A2 (ko) * 2012-09-09 2014-03-13 엘지전자 주식회사 영상 복호화 방법 및 이를 이용하는 장치
US20140072027A1 (en) * 2012-09-12 2014-03-13 Ati Technologies Ulc System for video compression
TW201414311A (zh) 2012-09-18 2014-04-01 Novatek Microelectronics Corp 視訊編碼方法與視訊編碼裝置
US20150288970A1 (en) * 2012-09-28 2015-10-08 Samsung Electronics Co., Ltd. Video encoding method and apparatus for parallel processing using reference picture information, and video decoding method and apparatus for parallel processing using reference picture information
KR101974352B1 (ko) 2012-12-07 2019-05-02 삼성전자주식회사 수직 셀을 갖는 반도체 소자의 제조 방법 및 그에 의해 제조된 반도체 소자
GB2513303B (en) 2013-04-16 2017-06-07 Canon Kk Method and device for partitioning an image
US20140362098A1 (en) * 2013-06-10 2014-12-11 Sharp Laboratories Of America, Inc. Display stream compression
GB2516224A (en) 2013-07-11 2015-01-21 Nokia Corp An apparatus, a method and a computer program for video coding and decoding
GB2516824A (en) * 2013-07-23 2015-02-11 Nokia Corp An apparatus, a method and a computer program for video coding and decoding
US9554131B1 (en) * 2013-07-23 2017-01-24 Harmonic, Inc. Multi-slice/tile encoder with overlapping spatial sections
US10110910B2 (en) * 2013-10-21 2018-10-23 Vid Scale, Inc. Parallel decoding method for layered video coding
JP2015111655A (ja) * 2013-10-29 2015-06-18 株式会社村田製作所 セラミック電子部品
US9596477B2 (en) * 2013-12-26 2017-03-14 Mediatek Inc. Methods of multiple-slice coding for frame buffer compression
US9485456B2 (en) 2013-12-30 2016-11-01 Akamai Technologies, Inc. Frame-rate conversion in a distributed computing system
US10848786B2 (en) 2014-05-28 2020-11-24 Arris Enterprises Llc Acceleration of context adaptive binary arithmetic coding (CABAC) in video CODECS
KR101957556B1 (ko) 2014-05-28 2019-03-12 애리스 엔터프라이지즈 엘엘씨 멀티코어 프로세서 플랫폼에서 동작하는 hevc 디코더에서의 콘텐츠 인식 스케줄링
US10080019B2 (en) * 2014-09-19 2018-09-18 Intel Corporation Parallel encoding for wireless displays
KR102123620B1 (ko) * 2014-11-14 2020-06-26 엘지전자 주식회사 대용량 병렬 처리를 위해 비디오 신호를 엔트로피 인코딩 또는 엔트로피 디코딩하는 방법 및 장치
KR20160071569A (ko) 2014-12-11 2016-06-22 삼성전자주식회사 비디오 장치에서의 영상 처리 방법 및 그에 따른 비디오 장치
US9854261B2 (en) 2015-01-06 2017-12-26 Microsoft Technology Licensing, Llc. Detecting markers in an encoded video signal
JP6382728B2 (ja) * 2015-01-13 2018-08-29 株式会社Ｎｔｔドコモ 復号方法及び復号装置
US9936201B2 (en) 2015-01-27 2018-04-03 Qualcomm Incorporated Contexts for large coding tree units
CN105992000B (zh) * 2015-03-06 2019-03-22 扬智科技股份有限公司 影像流的处理方法及其影像处理装置
US20170019679A1 (en) * 2015-07-15 2017-01-19 Mediatek Inc. Hybrid video decoding apparatus for performing hardware entropy decoding and subsequent software decoding and associated hybrid video decoding method
US20170026648A1 (en) * 2015-07-24 2017-01-26 Mediatek Inc. Hybrid video decoder and associated hybrid video decoding method
CN105828202A (zh) * 2016-04-14 2016-08-03 乐视控股（北京）有限公司 视频拼接方法和装置
AU2016203291A1 (en) * 2016-05-20 2017-12-07 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding video data
CN106445890B (zh) * 2016-07-07 2019-06-25 湖南千年华光软件开发有限公司 数据处理方法
JP6217997B2 (ja) * 2016-07-25 2017-10-25 ソニー株式会社 画像処理装置および方法
JP6508553B2 (ja) * 2017-09-19 2019-05-08 ソニー株式会社 画像処理装置および方法
US11475601B2 (en) * 2019-10-21 2022-10-18 Google Llc Image decoding during bitstream interruptions
US11638020B2 (en) * 2021-03-30 2023-04-25 Qualcomm Incorporated Video processing using multiple bitstream engines

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5557332A (en) * 1993-03-05 1996-09-17 Sony Corporation Apparatus and method for reproducing a prediction-encoded video signal
RU2005111002A (ru) * 2004-04-15 2006-10-20 Майкрософт Корпорейшн (Us) Предсказательное кодирование без потерь для изображений и видео
JP2007520912A (ja) * 2003-05-12 2007-07-26 オーエヌツー テクノロジーズ ビデオ圧縮方法

Family Cites Families (92)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US1809176A (en) * 1930-03-26 1931-06-09 Charles M Macgregor Means for selectively controlling ringing circuits of telephones
JP3871348B2 (ja) 1993-03-05 2007-01-24 ソニー株式会社 画像信号復号化装置及び画像信号復号化方法
JPH08116534A (ja) 1994-10-18 1996-05-07 Seiko Epson Corp 画像データ符号化装置およびその方法並びに画像データ復号化装置およびその方法
JP3895414B2 (ja) 1996-12-16 2007-03-22 松下電器産業株式会社 映像復号化装置
US6351570B1 (en) 1997-04-01 2002-02-26 Matsushita Electric Industrial Co., Ltd. Image coding and decoding apparatus, method of image coding and decoding, and recording medium for recording program for image coding and decoding
US5867208A (en) 1997-10-28 1999-02-02 Sun Microsystems, Inc. Encoding system and method for scrolling encoded MPEG stills in an interactive television application
US6404817B1 (en) 1997-11-20 2002-06-11 Lsi Logic Corporation MPEG video decoder having robust error detection and concealment
US6563953B2 (en) 1998-11-30 2003-05-13 Microsoft Corporation Predictive image compression using a single variable length code for both the luminance and chrominance blocks for each macroblock
JP2002199392A (ja) 2000-10-19 2002-07-12 Matsushita Electric Ind Co Ltd 映像符号化方法および装置
US20020057739A1 (en) 2000-10-19 2002-05-16 Takumi Hasebe Method and apparatus for encoding video
US6856701B2 (en) 2001-09-14 2005-02-15 Nokia Corporation Method and system for context-based adaptive binary arithmetic coding
EP2302929B1 (en) 2001-11-27 2015-03-25 Samsung Electronics Co., Ltd. Coding and decoding of a bitstream with a coordinate interpolator
US8401084B2 (en) 2002-04-01 2013-03-19 Broadcom Corporation System and method for multi-row decoding of video with dependent rows
JP3807342B2 (ja) 2002-04-25 2006-08-09 三菱電機株式会社 デジタル信号符号化装置、デジタル信号復号装置、デジタル信号算術符号化方法、およびデジタル信号算術復号方法
ES2730953T3 (es) 2002-04-26 2019-11-13 Ntt Docomo Inc Método de decodificación de señal, dispositivo de decodificación de señal, y programa de decodificación de señal
FI114679B (fi) 2002-04-29 2004-11-30 Nokia Corp Satunnaisaloituspisteet videokoodauksessa
US7305036B2 (en) 2002-05-14 2007-12-04 Broadcom Corporation System and method for entropy code preprocessing
US7813431B2 (en) 2002-05-20 2010-10-12 Broadcom Corporation System, method, and apparatus for decoding flexibility ordered macroblocks
US7630440B2 (en) 2003-05-28 2009-12-08 Broadcom Corporation Context adaptive binary arithmetic code decoding engine
US20040258162A1 (en) 2003-06-20 2004-12-23 Stephen Gordon Systems and methods for encoding and decoding video data in parallel
US20050047504A1 (en) * 2003-09-03 2005-03-03 Sung Chih-Ta Star Data stream encoding method and apparatus for digital video compression
JP5280003B2 (ja) * 2003-09-07 2013-09-04 マイクロソフト コーポレーション 映像コーデックにおけるスライス層
US7286710B2 (en) 2003-10-01 2007-10-23 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Coding of a syntax element contained in a pre-coded video signal
US7379608B2 (en) 2003-12-04 2008-05-27 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung, E.V. Arithmetic coding for transforming video and picture data units
US7599435B2 (en) 2004-01-30 2009-10-06 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Video frame encoding and decoding
US7586924B2 (en) 2004-02-27 2009-09-08 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Apparatus and method for coding an information signal into a data stream, converting the data stream and decoding the data stream
US7220887B2 (en) * 2004-05-21 2007-05-22 Exxonmobil Chemical Patents Inc. Process and apparatus for cracking hydrocarbon feedstock containing resid
US7480335B2 (en) 2004-05-21 2009-01-20 Broadcom Corporation Video decoder for decoding macroblock adaptive field/frame coded video data with spatial prediction
US7843997B2 (en) 2004-05-21 2010-11-30 Broadcom Corporation Context adaptive variable length code decoder for decoding macroblock adaptive field/frame coded video data
US20060013318A1 (en) 2004-06-22 2006-01-19 Jennifer Webb Video error detection, recovery, and concealment
JP4470613B2 (ja) 2004-06-29 2010-06-02 富士通株式会社 画像復号装置及び画像符号化装置
CN1922885A (zh) 2004-08-05 2007-02-28 松下电器产业株式会社 图象解码装置和图象编码装置
DE102004049156B4 (de) 2004-10-08 2006-07-13 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Codierschema für einen ein zeitlich veränderliches Graphikmodell darstellenden Datenstrom
EP1813117A1 (en) 2004-11-04 2007-08-01 Koninklijke Philips Electronics N.V. Method and device for processing coded video data
WO2006051796A1 (en) 2004-11-09 2006-05-18 Matsushita Electric Industrial Co., Ltd. Two step arithmetic decoding with conversion into an intermediate format
US7630565B2 (en) * 2004-11-30 2009-12-08 Lsi Corporation Parallel video encoder with whole picture deblocking and/or whole picture compressed as a single slice
US20060126744A1 (en) 2004-12-10 2006-06-15 Liang Peng Two pass architecture for H.264 CABAC decoding process
US20060176953A1 (en) 2005-02-04 2006-08-10 Nader Mohsenian Method and system for video encoding with rate control
US7636395B2 (en) 2005-03-14 2009-12-22 Nokia Corporation Method and device for splicing video data in compressed domain
DE602006020556D1 (de) 2005-04-01 2011-04-21 Panasonic Corp Bilddecodierungsvorrichtung und bilddecodierungsverfahren
KR100694098B1 (ko) * 2005-04-04 2007-03-12 한국과학기술원 산술 복호 방법 및 그 장치
US7525456B2 (en) * 2005-04-15 2009-04-28 Qpixel Technology, Inc. Methods for adaptively selecting entropy encoding modes
KR100746007B1 (ko) 2005-04-19 2007-08-06 삼성전자주식회사 엔트로피 코딩의 컨텍스트 모델을 적응적으로 선택하는방법 및 비디오 디코더
TW200709580A (en) 2005-05-11 2007-03-01 Qualcomm Inc A method and apparatus for unified error concealment framework
KR20070006445A (ko) * 2005-07-08 2007-01-11 삼성전자주식회사 하이브리드 엔트로피 부호화, 복호화 방법 및 장치
US7061410B1 (en) 2005-07-18 2006-06-13 Lsi Logic Corporation Method and/or apparatus for transcoding between H.264 CABAC and CAVLC entropy coding modes
KR100779173B1 (ko) 2005-07-20 2007-11-26 한국전자통신연구원 폴리페이즈 다운 샘플링기반 리던던트 슬라이스 코딩 방법및 그 방법을 이용하는 코덱
CN100584025C (zh) 2005-08-04 2010-01-20 华为技术有限公司 一种基于内容自适应的算术解码***及装置
US8416850B2 (en) 2005-10-14 2013-04-09 Nec Corporation Image encoding method, device using the same, and computer program
JP2007166192A (ja) 2005-12-13 2007-06-28 Toshiba Corp 情報処理装置、制御方法およびプログラム
US7983343B2 (en) 2006-01-12 2011-07-19 Lsi Corporation Context adaptive binary arithmetic decoding for high definition video
JP4799191B2 (ja) 2006-01-27 2011-10-26 富士フイルム株式会社 通信端末、通信システムおよび通信方法
US20070230567A1 (en) 2006-03-28 2007-10-04 Nokia Corporation Slice groups and data partitioning in scalable video coding
JP2007295392A (ja) * 2006-04-26 2007-11-08 Toshiba Corp 情報処理装置、復号処理方法、およびプログラム
JP2007300455A (ja) 2006-05-01 2007-11-15 Victor Co Of Japan Ltd 算術符号化装置、および算術符号化装置におけるコンテキストテーブル初期化方法
US9020047B2 (en) 2006-05-24 2015-04-28 Panasonic Intellectual Property Management Co., Ltd. Image decoding device
US7949054B2 (en) 2006-06-01 2011-05-24 Microsoft Corporation Flexible data organization for images
US8306125B2 (en) 2006-06-21 2012-11-06 Digital Video Systems, Inc. 2-bin parallel decoder for advanced video processing
US7262722B1 (en) 2006-06-26 2007-08-28 Intel Corporation Hardware-based CABAC decoder with parallel binary arithmetic decoding
JP4660433B2 (ja) * 2006-06-29 2011-03-30 株式会社東芝 符号化回路、復号回路、エンコーダ回路、デコーダ回路、ｃａｂａｃ処理方法
US8275045B2 (en) 2006-07-12 2012-09-25 Qualcomm Incorporated Video compression using adaptive variable length codes
ATE479284T1 (de) * 2006-07-13 2010-09-15 Qualcomm Inc Videokodierung mit feinkörniger skalierbarkeit anhand von zyklisch ausgerichteten fragmenten
US8000388B2 (en) * 2006-07-17 2011-08-16 Sony Corporation Parallel processing apparatus for video compression
US7937397B2 (en) 2006-08-22 2011-05-03 Fuji Xerox Co., Ltd. Apparatus and method for term context modeling for information retrieval
SG140508A1 (en) 2006-08-31 2008-03-28 St Microelectronics Asia Multimode filter for de-blocking and de-ringing
JP5042568B2 (ja) 2006-09-07 2012-10-03 富士通株式会社 Ｍｐｅｇデコーダ及びｍｐｅｇエンコーダ
JP5039142B2 (ja) 2006-10-25 2012-10-03 フラウンホーファー−ゲゼルシャフト・ツール・フェルデルング・デル・アンゲヴァンテン・フォルシュング・アインゲトラーゲネル・フェライン 品質スケーラブルな符号化方法
US7460725B2 (en) * 2006-11-09 2008-12-02 Calista Technologies, Inc. System and method for effectively encoding and decoding electronic information
JP5045950B2 (ja) 2006-12-14 2012-10-10 日本電気株式会社 映像符号化方法、映像符号化装置および映像符号化プログラム
JP5026092B2 (ja) 2007-01-12 2012-09-12 三菱電機株式会社 動画像復号装置および動画像復号方法
US20080181298A1 (en) 2007-01-26 2008-07-31 Apple Computer, Inc. Hybrid scalable coding
US8411734B2 (en) * 2007-02-06 2013-04-02 Microsoft Corporation Scalable multi-thread video decoding
US8422552B2 (en) 2007-03-29 2013-04-16 James Au Entropy coding for video processing applications
US7925099B2 (en) 2007-04-03 2011-04-12 Hewlett-Packard Development Company, L.P. Universal-denoiser context-modeling component and context-modeling method
US7813538B2 (en) 2007-04-17 2010-10-12 University Of Washington Shadowing pipe mosaicing algorithms with application to esophageal endoscopy
WO2008143747A2 (en) 2007-05-16 2008-11-27 Thomson Licensing Methods and apparatus for the use of slice groups in decoding multi-view video coding (mvc) information
JPWO2008142956A1 (ja) 2007-05-21 2010-08-05 日本電気株式会社 映像符号化装置、映像符号化方法および映像符号化プログラム
US8428133B2 (en) 2007-06-15 2013-04-23 Qualcomm Incorporated Adaptive coding of video block prediction mode
US8571104B2 (en) 2007-06-15 2013-10-29 Qualcomm, Incorporated Adaptive coefficient scanning in video coding
US7710296B2 (en) 2007-09-19 2010-05-04 Texas Instruments Incorporated N-bin arithmetic coding for context adaptive binary arithmetic coding
US8938009B2 (en) 2007-10-12 2015-01-20 Qualcomm Incorporated Layered encoded bitstream structure
KR101211432B1 (ko) 2007-12-27 2012-12-12 보드 오브 트러스티즈 오브 미시건 스테이트 유니버시티 적응적 비디오 전송을 위한 채널용량 추정 및 코딩 레이트 조정 방법과, 그를 이용한 비디오 전송/수신 장치
JP5007259B2 (ja) 2008-03-27 2012-08-22 ルネサスエレクトロニクス株式会社 画像符号化装置
US8542748B2 (en) 2008-03-28 2013-09-24 Sharp Laboratories Of America, Inc. Methods and systems for parallel video encoding and decoding
US7656320B2 (en) 2008-04-10 2010-02-02 Red Hat, Inc. Difference coding adaptive context model using counting
TWI376959B (en) 2008-05-02 2012-11-11 Novatek Microelectronics Corp Entropy decoding circuit, entropy decoding method, and entropy decoding method using a pipeline manner
US9042457B2 (en) 2008-06-10 2015-05-26 Panasonic Intellectual Property Management Co., Ltd. Image decoding apparatus and image coding apparatus wth parallel decoding
US7932843B2 (en) 2008-10-17 2011-04-26 Texas Instruments Incorporated Parallel CABAC decoding for video decompression
EP2182732A1 (en) 2008-10-28 2010-05-05 Panasonic Corporation Switching between scans in image coding
TWI428023B (zh) 2008-11-18 2014-02-21 Ind Tech Res Inst 解碼方法及裝置
US9467699B2 (en) 2008-12-03 2016-10-11 Hfi Innovation Inc. Method for performing parallel coding with ordered entropy slices, and associated apparatus
JP5421609B2 (ja) 2009-02-17 2014-02-19 キヤノン株式会社 スキャン変換装置及び画像符号化装置、並びにそれらの制御方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5557332A (en) * 1993-03-05 1996-09-17 Sony Corporation Apparatus and method for reproducing a prediction-encoded video signal
JP2007520912A (ja) * 2003-05-12 2007-07-26 オーエヌツー テクノロジーズ ビデオ圧縮方法
RU2005111002A (ru) * 2004-04-15 2006-10-20 Майкрософт Корпорейшн (Us) Предсказательное кодирование без потерь для изображений и видео

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Detlev Marple et al., "Context-Based Adaptive Binary Arithmetic Coding in the H.264/AVC Video Compression Standard", IEEE TRANSACTIONS ON CIRCUITS AND SYSTEMS FOR VIDEO TECHNOLOGY, VOL. 13, NO. 7, 07.2003, найдено в Интернете 29.03.2013, url: "http://www.cs.sfu.ca/CourseCentral/820/li/material/source/papers/CABAC.pdf" *

Also Published As

Publication number Publication date
US20160373773A1 (en) 2016-12-22
JP6267778B2 (ja) 2018-01-24
PT3086557T (pt) 2020-11-24
RU2684197C1 (ru) 2019-04-04
JP5529937B2 (ja) 2014-06-25
US9930369B2 (en) 2018-03-27
US9503745B2 (en) 2016-11-22
US20170223385A1 (en) 2017-08-03
BR122020000341B1 (pt) 2021-08-17
JP2015195609A (ja) 2015-11-05
JP2011515880A (ja) 2011-05-19
US11438634B2 (en) 2022-09-06
US9681144B2 (en) 2017-06-13
RU2019107974A (ru) 2020-09-21
JP7348356B2 (ja) 2023-09-20
LT3086557T (lt) 2020-12-10
JP2018046581A (ja) 2018-03-22
EP3764652A1 (en) 2021-01-13
CN104270645B (zh) 2017-10-24
EP3764652B1 (en) 2022-07-20
CY1123585T1 (el) 2022-03-24
US20090245349A1 (en) 2009-10-01
HK1206179A1 (en) 2015-12-31
CN104270645A (zh) 2015-01-07
US10958943B2 (en) 2021-03-23
US20110026604A1 (en) 2011-02-03
HUE051657T2 (hu) 2021-03-01
JP2012257316A (ja) 2012-12-27
US20190356932A1 (en) 2019-11-21
JP2023158140A (ja) 2023-10-26
RU2641229C2 (ru) 2018-01-16
US10652585B2 (en) 2020-05-12
US9473772B2 (en) 2016-10-18
EP3086557A1 (en) 2016-10-26
BRPI0911141A2 (pt) 2015-10-06
DK3086557T3 (da) 2020-11-23
US20210195249A1 (en) 2021-06-24
US10484720B2 (en) 2019-11-19
BRPI0911141B1 (pt) 2021-03-23
US20140241438A1 (en) 2014-08-28
US20230082110A1 (en) 2023-03-16
US10284881B2 (en) 2019-05-07
RU2019107974A3 (ru) 2021-10-20
JP6068575B2 (ja) 2017-01-25
RU2760849C2 (ru) 2021-11-30
JP6810204B2 (ja) 2021-01-06
US20160165250A1 (en) 2016-06-09
JP2022126800A (ja) 2022-08-30
BR122020000327B1 (pt) 2021-08-17
JP2021044842A (ja) 2021-03-18
JP6055043B2 (ja) 2016-12-27
BR122020000338B1 (pt) 2021-04-20
JP7096319B2 (ja) 2022-07-05
RU2010142914A (ru) 2012-05-10
JP5075988B2 (ja) 2012-11-21
EP3086557B1 (en) 2020-10-21
CN101981934A (zh) 2011-02-23
US11838558B2 (en) 2023-12-05
RU2014105187A (ru) 2015-08-20
JP2016001895A (ja) 2016-01-07
US20160373774A1 (en) 2016-12-22
EP2266319A4 (en) 2011-03-16
WO2009119888A1 (en) 2009-10-01
US20240129554A1 (en) 2024-04-18
US9681143B2 (en) 2017-06-13
JP6556818B2 (ja) 2019-08-07
JP2019208231A (ja) 2019-12-05
EP2266319A1 (en) 2010-12-29
US8824541B2 (en) 2014-09-02
PL3086557T3 (pl) 2021-02-22
ES2830394T3 (es) 2021-06-03
JP2014150576A (ja) 2014-08-21
US20190261022A1 (en) 2019-08-22
CN101981934B (zh) 2014-11-05
US20200245001A1 (en) 2020-07-30
US20100027680A1 (en) 2010-02-04
US8542748B2 (en) 2013-09-24
US20180176606A1 (en) 2018-06-21
HRP20201803T1 (hr) 2021-04-02
SI3086557T1 (sl) 2020-12-31
JP2017079482A (ja) 2017-04-27
EP3826308A1 (en) 2021-05-26
JP5786061B2 (ja) 2015-09-30

Similar Documents

Publication Publication Date Title
RU2684197C1 (ru) Способы, устройства и системы для параллельного кодирования и декодирования видеоинформации
JP7525711B2 (ja) 装置