RU2508608C2 - Способ декодирования видеосигнала - Google Patents

Способ декодирования видеосигнала Download PDF

Info

Publication number
RU2508608C2
RU2508608C2 RU2009111142/07A RU2009111142A RU2508608C2 RU 2508608 C2 RU2508608 C2 RU 2508608C2 RU 2009111142/07 A RU2009111142/07 A RU 2009111142/07A RU 2009111142 A RU2009111142 A RU 2009111142A RU 2508608 C2 RU2508608 C2 RU 2508608C2
Authority
RU
Russia
Prior art keywords
image
level
reference image
quality
images
Prior art date
Application number
RU2009111142/07A
Other languages
English (en)
Other versions
RU2009111142A (ru
Inventor
Сеунг Воок ПАРК
Биеонг Моон ДЗЕОН
Соунг Хиун УМ
Дзи Хо ПАРК
Донг Сеок КИМ
Original Assignee
ЭлДжи ЭЛЕКТРОНИКС ИНК.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ЭлДжи ЭЛЕКТРОНИКС ИНК. filed Critical ЭлДжи ЭЛЕКТРОНИКС ИНК.
Publication of RU2009111142A publication Critical patent/RU2009111142A/ru
Application granted granted Critical
Publication of RU2508608C2 publication Critical patent/RU2508608C2/ru

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/34Scalability techniques involving progressive bit-plane based encoding of the enhancement layer, e.g. fine granular scalability [FGS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/187Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/20Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
    • H04N19/29Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding involving scalability at the object level, e.g. video object layer [VOL]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/523Motion estimation or motion compensation with sub-pixel accuracy
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/56Motion estimation with initialisation of the vector search, e.g. estimating a good candidate to initiate a search
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/577Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/144Movement detection
    • H04N5/145Movement estimation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

Изобретение относится к способу кодирования/декодирования видеосигнала. Техническим результатом является обеспечение эффективного декодирования видеосигнала. Указанный технический результат достигается тем, что способ декодирования видеосигнала, основанный на масштабируемости с точной детализацией (FGS), включает в себя получение информации идентификации изображения, указывающей эталонное изображение текущего блока, и декодирование текущего блока с использованием эталонного изображения. Эталонное изображение базового уровня и соответствующее ему эталонное изображение уровня повышенного качества имеют одинаковую информацию идентификации изображения, при этом информация идентификации изображения включает по меньшей мере одну из информации номера кадра, указывающую порядок декодирования, информации номера изображения для идентификации изображения и информации ссылочного индекса. Поэтому можно минимизировать проблему, которая при осуществлении процедуры декодирования видеосигнала обусловлена ошибкой передачи. 2 н. и 2 з.п. ф-лы, 9 ил.

Description

Область техники, к которой относится изобретение
Настоящее изобретение относится к способу кодирования видеосигнала.
Предшествующий уровень техники
Среда связи в настоящее время претерпевает изменения в связи с развитием широкополосной сети с конвергенцией (ШСК, BcN) для предоставления такой услуги, как комплексная проводная и беспроводная сеть, комбинация широковещательной сети и сети связи или конвергенция согласно Internet-протоколу (IP-конвергенция) с помощью сети, соответствующей Internet-протоколу (IP-сети). Такая тенденция к изменению сети связи в будущем ускорится. Ввиду изменения среды связи, оконечные устройства (терминалы), используемые во множестве сред связи, претерпевают разнообразные изменения, и при этом также изменяются возможности обработки, которыми обладают оконечные устройства. Соответственно, чтобы обеспечить видеосигналы, оптимизированные для различных сред связи и различных оконечных устройств, следует сформировать множество видеосигналов, выдаваемых в оконечные устройства. Чтобы выдавать оптимизированные видеосигналы в оконечные устройства, один источник видеосигналов должен предусматривать множество комбинаций переменных, таких, как количество передаваемых кадров в секунду, разрешение и количество битов на пиксель и т.д. Это ложится тяжким бременем на провайдеров информационного содержания (контента).
Ввиду вышеизложенного, провайдеры информационного содержания кодируют исходный видеосигнал, получая сжатые с высоким расходом битов (битрейтом) видеоданные, декодируют сжатые видеоданные в исходный видеосигнал, когда от оконечного устройства принимается запрос на видеоинформацию, и кодируют исходные данные, получая видеоданные, подходящие для способности оконечного устройства к обработке видеоинформации, перед выдачей видеоданных в оконечное устройство. Однако при таком транскодировании (при такой комбинации декодирования и кодирования) необходимо осуществлять процессы кодирования, декодирования и кодирования, и поэтому происходит временная задержка при выдаче видеосигнала в оконечное устройство. Следовательно, дополнительно требуется устройство, обладающее сложными аппаратными средствами и алгоритмами.
Чтобы решить такую проблему, предложено масштабируемое видеокодирование (МВК, SVC). Этот способ может обеспечить представление видеосигналов путем кодирования видеосигналов в последовательность изображений с наивысшим качеством изображения и декодирования только части (частичной последовательности изображений, выбираемых в прерываемом режиме из общей последовательности кадров) последовательности изображений. Последовательность изображений, кодируемых посредством МВК, может уменьшить размер видеоинформации за счет использования пространственной масштабируемости или снижения качества изображения за счет использования масштабируемости по отношению «сигнал - шум» (ОСШ, SNR) с низким битрейтом. При этом последовательность изображений, имеющих малый экранный размер и/или малое количество кадров в секунду, называется базовым уровнем, а последовательность изображений, имеющих большой экранный размер и/или большое количество кадров в секунду, называется уровнем повышенного качества или улучшенным уровнем.
Хотя можно представить видеосигналы при низком качестве изображения путем приема и обработки части последовательности изображений, закодированных масштабируемым способом, как описано выше, качество изображения значительно ухудшается, поскольку снижается битрейт. Одно решение этой проблемы заключается в обеспечении вспомогательной последовательности изображений, имеющих низкие битрейты, например, последовательности изображений, которые имеют малый экранный размер и/или малое количество кадров в секунду. Эта вспомогательная последовательность изображений называется уровнем повышенного качества (улучшенным уровнем).
При этом МВК, если часть потока битов уровня повышенного качества утрачивается при декодировании конкретного изображения, включающего в себя уровень повышенного качества, которое кодируется и передается, то декодер декодирует это изображение, используя такой частично утраченный поток битов уровня повышенного качества. Соответственно, качества изображений исходных видеосигналов отличаются друг от друга. В частности, когда изображение, страдающее вышеописанной проблемой, является эталонным изображением, необходимым для декодирования других изображений, а также ключевым изображением, эта проблема усугубляется.
Краткое изложение сущности изобретения
Соответственно, настоящее изобретение посвящено способу декодирования видеосигнала, который, по существу, снимает одну или несколько проблем, возникающих из-за ограничений и недостатков соответствующего предшествующего уровня техники.
Задачей настоящего изобретения, предлагаемого для решения проблемы, является разработка способа декодирования, позволяющего минимизировать проблему, которая при осуществлении процедуры декодирования видеосигнала обусловлена ошибкой передачи.
Другой задачей настоящего изобретения, предлагаемого для решения проблемы, является разработка способа управления буфером декодированных изображений в соответствии со способом декодирования, позволяющим минимизировать проблему, которая при осуществлении процедуры декодирования видеосигнала обусловлена ошибкой передачи.
Задачу настоящего изобретения можно решить путем разработки способа декодирования видеосигнала на основе масштабируемости с точной детализацией (МсТД, FGS), заключающегося в том, что получают информацию идентификации изображения, указывающую эталонное изображение текущего блока, и декодируют текущий блок с использованием эталонного изображения, при этом эталонное изображение базового уровня и соответствующее ему эталонное изображение уровня повышенного качества имеют одинаковую информацию идентификации изображения.
Перечень фигур чертежей
Прилагаемые чертежи, которые предусмотрены для обеспечения лучшего понимания изобретения, иллюстрируют конкретные варианты осуществления изобретения и вместе с описанием служат для пояснения принципа изобретения.
На чертежах:
на фиг.1 представлена условная блок-схема системы масштабируемого кодирования видеоинформации, к которой применяется настоящее изобретение;
на фиг.2 представлен вид, иллюстрирующий структуру изображений, используемых в способе декодирования, и способ управления буфером декодированных изображений в соответствии с вариантом осуществления настоящего изобретения;
на фиг.3 представлена блок-схема последовательности операций, иллюстрирующая способ декодирования видеосигнала в соответствии с вариантом осуществления настоящего изобретения;
на фиг.4 представлена блок-схема последовательности операций, иллюстрирующая способ декодирования видеосигнала в соответствии с другим вариантом осуществления настоящего изобретения;
на фиг.5 представлен вид, иллюстрирующий структуру буфера декодированных изображений в соответствии с вариантом осуществления настоящего изобретения;
на фиг.6а-6b представлены виды, иллюстрирующие переупорядочение ссылочных номеров эталонного изображения в соответствии с вариантом осуществления настоящего изобретения;
на фиг.7 представлен вид, иллюстрирующий буферизуемые содержания буфера декодированных изображений, соответствующие кодовым номерам управляющей операции управления памятью (ММСО); и
на фиг.8 представлен вид, иллюстрирующий структуру буфера декодированных изображений в соответствии с другим вариантом осуществления настоящего изобретения.
Наилучший способ осуществления изобретения
Теперь перейдем к подробному рассмотрению предпочтительных вариантов осуществления настоящего изобретения, которые проиллюстрированы на прилагаемых чертежах. Везде, где это возможно, одинаковые позиции будут употребляться на всех чертежах для обозначения одинаковых или сходных деталей.
Кроме того, хотя термины, употребляемые в настоящем изобретении, выбраны из общеизвестных и общеупотребительных терминов, некоторые из терминов, упоминаемых в описании настоящего изобретения, выбраны заявителем по своему усмотрению, а их подробные смысловые содержания приведены в соответствующих частях излагаемого здесь описания. Кроме того, необходимо понять, что настоящее изобретение не просто буквально описывается употребляемыми терминами, а соответствует смысловому содержанию каждого термина, заложенному в нем.
На фиг.1 представлена условная блок-схема системы масштабируемого кодирования видеоинформации, к которой применяется настоящее изобретение.
Система масштабируемого кодирования видеоинформации включает в себя кодер 2 и декодер 10. Кодер 2 включает в себя кодер 4 базового уровня (BE), кодер 6 уровня повышенного качества (EE) и мультиплексор 8 (Mux). Декодер 10 включает в себя демультиплексор 12 (deMux), декодер 14 базового уровня (BD) и декодер 16 уровня повышенного качества (ED). Кодер 4 базового уровня сжимает входной видеосигнал X(n) и генерирует поток битов базового уровня. Кодер 6 уровня повышенного качества сжимает входной видеосигнал X(n) и генерирует поток битов уровня повышенного качества с использованием входного видеосигнала X(n) и информации, генерируемой кодером 4 базового уровня, а мультиплексор 8 генерирует масштабируемый поток битов с использованием потока битов базового уровня и потока битов уровня повышенного качества. Сгенерированный масштабируемый поток битов передается в декодер 10 по некоторому каналу, а переданный масштабируемый поток битов разделяется на поток битов уровня повышенного качества и поток битов базового уровня демультиплексором 12 декодера 10. Декодер 14 базового уровня принимает поток битов базового уровня и декодирует этот поток битов базового уровня с получением выходного видеосигнала Xb(n), а декодер 16 уровня повышенного качества принимает поток битов уровня повышенного качества и декодирует этот поток битов уровня повышенного качества с получением выходного видеосигнала Xe(n). Выходной видеосигнал Xb(n) имеет меньшее разрешение и более низкое качество изображения, чем выходной видеосигнал Xe(n).
На фиг.2 представлен вид, иллюстрирующий структуру изображений, используемых в способе декодирования, и способ управления буфером декодированных изображений в соответствии с вариантом осуществления настоящего изобретения.
В структуре изображений формируется группа изображения (ГИ, GOP) иерархической структуры В-изображений, а изображения, которые составляют ГИ, подразделяются на ключевое изображение и неключевое изображение. Одно изображение состоит из эталонного изображения QB базового уровня и эталонного изображения QE уровня повышенного качества. Ключевое изображение представляет собой изображение, имеющее низший временной уровень, а неключевое изображение представляет собой изображения за исключением ключевого изображения.
В этой структуре в текущем изображении возможно использование, по меньшей мере, одно изображение из изображений, имеющих временные уровни, которые ниже чем временной уровень текущего изображения, или равны ему, в качестве эталонного изображения. Например, когда первое изображение 22 является I-изображением, кодированным внутренним предсказанием, первое изображение 22 кодируется без эталонного изображения, второе изображение 24 кодируется с использованием первого изображения 22 в качестве эталонного изображения, третье изображение 26 кодируется с использованием первого и второго изображений 22 и 24 в качестве эталонных изображений, четвертые изображения 28 и 30 кодируются с использованием первого и третьего изображений 22 и 26 или второго и третьего изображений 24 и 26 в качестве эталонных изображений, пятые изображения 32, 34, 36 и 38 кодируются с использованием первого и четвертого изображений 22 и 28, третьего и четвертого изображений 26 и 28 или второго и четвертого изображений 24 и 30 в качестве эталонных изображений. Изображения кодируются в следующем порядке: первое изображение 22, второе изображение 24, третье изображение 26, четвертые изображения 28 и 30 и пятые изображения 32, 34, 36 и 38. Первое и второе изображения 22 и 24 являются ключевыми изображениями, а изображения с третьего по пятые - 26, 28, 30, 32, 34, 36 и 38 - являются неключевыми изображениями. Ключевое изображение включает в себя эталонное изображение базового уровня и эталонное изображение уровня повышенного качества и представлено в виде первого изображения 22 и второго изображения 24 на фиг.2. Когда неключевое изображение используется в качестве эталонного изображения, имеется в виду эталонное изображение уровня повышенного качества неключевого изображения. Эталонное изображение уровня повышенного качества неключевого изображения указывает, что эталонное изображение базового уровня не ключевого изображения уже восстановлено, и представлено пунктирной линией в качестве изображений с третьего по пятые - 26, 28, 30, 32, 34, 36 и 38, показанных на фиг.2.
На фиг.3 представлена блок-схема последовательности операций, иллюстрирующая способ декодирования видеосигнала в соответствии с вариантом осуществления настоящего изобретения;
Во-первых, декодер принимает кодированный видеосигнал по некоторому каналу. Из этого видеосигнала получают (Э310) информацию идентификации изображения, указывающую эталонное изображение текущего блока. Информация идентификации изображения может быть, например, информацией ссылочного индекса или информацией номера изображения, присущей эталонному изображению. Текущий блок можно декодировать (Э320) с использованием эталонного изображения. Эталонное изображение базового уровня и соответствующее ему эталонное изображение уровня повышенного качества могут иметь одинаковую информацию идентификации изображения. Информация идентификации изображения может быть информацией ссылочного индекса или информацией номера изображения, присущей эталонному изображению. Эталонное изображение уровня повышенного качества может иметь более высокое качество изображения, чем эталонное изображение базового уровня.
Когда изображение, включающее в себя текущий блок, является ключевым изображением, эталонное изображение текущего блока может быть эталонным изображением базового уровня или соответствующим ему эталонным изображением уровня повышенного качества. Эталонное изображение текущего блока может быть получено из списка эталонных изображений на основе информации идентификации. Текущий блок можно декодировать с использованием полученного эталонного изображения. Даже в этом случае, эталонное изображение базового уровня и соответствующее ему эталонное изображение уровня повышенного качества могут иметь одинаковую информацию идентификации изображения. Эталонное изображение уровня повышенного качества может иметь более высокое качество изображения, чем эталонное изображение базового уровня.
Например, когда текущее изображение, показанное на фиг.2, является вторым изображением 24, а также является P-изображением, эталонное изображение второго изображения 24 является первым изображением 22, а второе изображение 24 является ключевым изображением. Соответственно, второе изображение 24, которое является текущим изображением, можно декодировать, обращаясь к эталонному изображению базового уровня или эталонному изображению уровня повышенного качества первого изображения 22. При этом эталонное изображение базового уровня и эталонное изображение уровня повышенного качества могут иметь одинаковую информацию идентификации изображения, а эта информация идентификации изображения может быть информацией ссылочного индекса или информацией номера изображения, присущего эталонному изображению. В другом примере, когда текущее изображение является четвертым изображением 28, эталонное изображение четвертого изображения 24 является первым и третьим изображениями 22 и 26, а четвертое изображение 28 соответствует неключевому изображению. В этом случае эталонное изображение четвертого изображения 28 включает в себя эталонное изображение базового уровня первого изображения 22, эталонное изображение уровня повышенного качества первого изображения 22 или эталонное изображение уровня повышенного качества третьего изображения 26. Эталонное изображение уровня повышенного качества третьего изображения 26 указывает, что эталонное изображение базового уровня третьего изображения 26 уже восстановлено.
На фиг.4 представлена блок-схема последовательности операций, иллюстрирующая способ декодирования видеосигнала в соответствии с другим вариантом осуществления настоящего изобретения.
Во-первых, первое эталонное изображение может быть получено (Э410) из списка эталонных изображений. Здесь первое эталонное изображение связано с информацией идентификации изображения, а эта информация идентификации изображения может быть информацией ссылочного индекса или информацией номера изображения, присущей эталонному изображению. Например, первое эталонное изображение в списке эталонных изображений можно получить с использованием информации ссылочного индекса. Текущий блок можно декодировать (Э420) с использованием полученного первого эталонного изображения. При этом первое эталонное изображение и соответствующее ему второе эталонное изображение могут иметь одинаковую информацию идентификации изображения, и первое эталонное изображение и второе эталонное изображение отличаются друг от друга другой информацией идентификации. Например, эталонное изображение 40 базового уровня и эталонное изображение 42 уровня повышенного качества, имеющие одинаковую информацию идентификации изображения, можно сделать отличающимися друг от друга за счет маркировки эталонного изображения 40 базового уровня как «базового представления», осуществляемой в процессе маркировки декодированных эталонных изображений. Первое эталонное изображение может принадлежать базовому уровню, а второе эталонное изображение может принадлежать уровню повышенного качества. Уровень повышенного качества может иметь качество изображения выше, чем качество изображения базового уровня. Когда изображение, включающее в себя текущий блок, является ключевым изображением, эталонное изображение текущего блока может быть первым эталонным изображением или соответствующим ему вторым эталонным изображением. Текущий блок можно декодировать с использованием полученного опорного изображения.
Как показано на фиг.3 и 4, когда эталонное изображение является первым изображением 22 или вторым изображением 24, которое является ключевым изображением, можно обеспечить эталонное изображение базового уровня или эталонное изображение уровня повышенного качества для текущего изображения. В альтернативном варианте, можно обеспечить первое эталонное изображение или второе эталонное изображение для текущего изображения. Соответственно, эталонное изображение можно хранить в буфере декодированных изображений. В соответствии со способом декодирования видеосигнала согласно настоящему изобретению, способ назначения ссылочного номера эталонному изображению в буфере декодированных изображений или способ буферизации буфера декодированных изображений, такой как способ исключения эталонного изображения, следует охарактеризовать заново. Способ буферизации буфера декодированных изображений в соответствии с настоящим изобретением будет описан подробно со ссылками на фиг. 5 и 6.
Во-первых, в варианте осуществления настоящего изобретения, когда эталонное изображение является ключевым изображением, можно назначить одинаковый номер идентификации изображения эталонному изображению базового уровня и эталонному изображению уровня повышенного качества эталонного изображения, хранимого в буфере декодированных изображений. Когда эталонное изображение является неключевым изображением, поскольку эталонное изображение уровня повышенного качества эталонного изображения хранится в буфере декодированных изображений, один номер идентификации изображения можно назначить эталонному изображению уровня повышенного качества эталонного изображения. То есть, когда эталонное изображение является ключевым изображением, эталонное изображение базового уровня и эталонное изображение уровня повышенного качества эталонного изображения можно обрабатывать как виртуальное изображение. В данном случае, назначаемая информация идентификации изображения включает в себя информацию номера изображения или информацию ссылочного индекса, а информация номера изображения включает в себя долговременный номер эталонного изображения.
На фиг.5 представлен вид, иллюстрирующий структуру буфера декодированных изображений в соответствии с вариантом осуществления настоящего изобретения.
Когда первое изображение 22, которое является ключевым изображением, а также эталонным изображением, как показано на фиг.2, декодируется и сохраняется в буфере декодированных изображений, эталонное изображение 40 базового уровня и эталонное изображение 42 уровня повышенного качества, которые составляют первое изображение 22, сохраняются с номером «0» изображения. Во втором изображении 24, которое является ключевым изображением, а также эталонным изображением, аналогичным первому изображению 22, эталонное изображение 44 базового уровня и эталонное изображение 46 уровня повышенного качества, которые составляют первое изображение 22, сохраняются с номером «1» изображения. В третьем изображении 26, которое является неключевым изображением, а также эталонным изображением, эталонное изображение 48 уровня повышенного качества эталонного изображения 26 сохраняется с номером «2» изображения. Пятые изображения 32, 34, 36 и 38 не сохраняются в буфере декодированных изображений, за исключением случая, когда изображение не отображается непосредственно после декодирования, потому что пятые изображения являются не эталонными изображениями.
При этом, когда текущее изображение является ключевым изображением и ссылается на эталонное изображение, имеющее номер «0» изображения, поскольку эталонное изображение 40 базового уровня и эталонное изображение 42 уровня повышенного качества эталонного изображения 22 имеют одинаковую информацию идентификации изображения, представляющую собой номер «0» изображения, эталонное изображение 40 базового уровня и эталонное изображение 42 уровня повышенного качества, имеющие номер «0» изображения, должны отличаться друг от друга. Соответственно, в настоящем изобретении можно использовать другую информацию идентификации. Например, эталонное изображение 40 базового уровня и эталонное изображение 42 уровня повышенного качества, имеющие номер «0» изображения, отличаются друг от друга за счет маркировки эталонного изображения 40 базового уровня как «базового представления», осуществляемой в процессе маркировки декодированных эталонных изображений.
В другом варианте осуществления, информация идентификации изображения, характерная для изображений, хранимых в буфере декодированных изображений, изменяется в зависимости от того, какое изображение декодируется в буфере декодированных изображений. Следовательно, первое эталонное изображение в списке эталонных изображений можно получить из списка эталонных изображений, а текущий блок можно декодировать с использованием этого первого эталонного изображения. При этом первое эталонное изображение и соответствующее ему второе эталонное изображение имеют одинаковую информацию идентификации изображения, и эти первое эталонное изображение и второе эталонное изображение могут отличаться друг от друга другой информацией идентификации. Например, первое эталонное изображение и второе эталонное изображение, имеющие одинаковый номер изображения, можно сделать отличающимися друг от друга за счет маркировки первого эталонного изображения или второго эталонного изображения как «базового представления», осуществляемой в процессе маркировки декодированных эталонных изображений. Первое эталонное изображение может принадлежать базовому уровню, а второе эталонное изображение может принадлежать уровню повышенного качества. В этом случае, первое эталонное изображение и второе эталонное изображение можно сделать отличающимися друг от друга за счет маркировки первого эталонного изображения как «базового представления».
В другом варианте осуществления настоящего изобретения список эталонных изображений можно инициализировать с использованием эталонного изображения при декодировании текущего блока с использованием эталонного изображения, как описано со ссылками на фиг.3 и 4. Инициализированный список эталонных изображений можно переупорядочить. Когда список эталонных изображений переупорядочен, эталонное изображение можно получать из переупорядоченного списка эталонных изображений Переупорядочение списка эталонных изображений будет описано со ссылками на фиг.6а и 6b.
На фиг.6а-6b представлены виды, иллюстрирующие переупорядочение ссылочных номеров эталонного изображения в соответствии с вариантом осуществления настоящего изобретения.
Переупорядочение ссылочных номеров эталонного представляет команду переназначения наименьшего ссылочного номера изображению, имеющему наибольшую корреляцию с текущим изображением в списке эталонных изображений, и эффективного управления эталонным изображением, когда изображения, близкие во временном отношении к текущему изображению, обладают меньшей корреляцией с текущим изображением, чем корреляция изображения, которое удалено во временном отношении от текущего изображения, при декодировании текущего изображения. Переупорядочение ссылочных номеров будет описано подробно со ссылками на фиг.6а и 6b.
На фиг.6а показана структура изображений в состоянии, где первое, второе, третье и четвертое изображения 22, 24, 26, 28 и 30 декодированы и сохранены в буфере декодированных изображений. Когда желательно декодировать пятое изображение 34, составляется список 0 эталонных изображений, содержащий изображения, хранимые в буфере декодированных изображений, как показано на фиг.6b. Изображениям даются ссылочные номера при циклическом сдвиге списка 0 эталонных изображений от пятого изображения 34 в направлении против часовой стрелки, и изображениям даются ссылочные номера при циклическом сдвиге списка 1 эталонных изображений от пятого изображения 34 в направлении по часовой стрелке. Вместе с тем, когда первое изображение 22, которое удалено во временном отношении от пятого изображения 34, обладает большей корреляцией с текущим изображением, чем корреляция четвертого изображения 28, которое оказывается близким во временном отношении к текущему изображению, в списке 0 эталонных изображений ссылочный номер 0 переназначается первому изображению 22, а ссылочный номер 1 переназначается четвертому изображению 28, что и приводит к переупорядочению списка эталонных изображений. Когда второе изображение 24, которое удалено во временном отношении от пятого изображения 34, обладает большей корреляцией с текущим изображением, чем корреляция четвертого изображения 30, которое оказывается близким во временном отношении к текущему изображению, в списке 1 эталонных изображений ссылочный номер 1 переназначается второму изображению 24, а ссылочный номер 2 переназначается четвертому изображению 30, что и приводит к переупорядочению списка эталонных изображений.
В одном варианте осуществления настоящего изобретения, как описано выше, при переупорядочении ссылочных номеров, когда эталонное изображение является ключевым изображением, эталонное изображение базового уровня и эталонное изображение уровня повышенного качества обрабатываются как одно изображение, которому переназначается ссылочный номер, а когда эталонное изображение является неключевым изображением, переназначается ссылочный номер, назначенный эталонному изображению уровня повышенного качества, что и приводит к переупорядочению списка эталонных изображений.
В качестве другого варианта осуществления настоящего изобретения, при инициализации списка эталонных изображений используется тот же способ, что и при переупорядочении ссылочных номеров. Например, получают информацию идентификации изображения, указывающую эталонное изображение текущего блока, и считывают эталонное изображение, хранимое в буфере эталонных изображений, на основе полученной информации идентификации изображения. Текущий блок декодируют с использованием считываемого эталонного изображения. Эталонное изображение базового уровня и соответствующее эталонное изображение уровня повышенного качества могут иметь одинаковую информацию идентификации изображения, а эта информация идентификации изображения включает в себя информацию ссылочного индекса или информацию номера изображения, присущую эталонному изображению. Когда эталонное изображение является ключевым изображением, эталонное изображение базового уровня и соответствующее эталонное изображение уровня повышенного качества обрабатываются как одно изображение, которому может быть назначен ссылочный номер. Когда эталонное изображение является неключевым изображением, ссылочный номер может быть назначен эталонному изображению уровня повышенного качества. Даже когда эталонное изображение больше не должно быть эталонным и стирается из буфера декодированных изображений с использованием способа скользящего окна, если эталонное изображение является ключевым изображением, то эталонное изображение базового уровня и соответствующее эталонное изображение уровня повышенного качества обрабатываются как одно изображение, и эталонное изображение может быть стерто из буфера. Если эталонное изображение является неключевым изображением, то эталонное изображение уровня повышенного качества может быть стерто из буфера. В этом случае изображение стирают с использованием способа «первым пришел - первым обслужен» (FIFO), называемого также способом простой очереди, при этом первым стирается то изображение, которое первым сохранено в буфере.
В качестве другого варианта осуществления настоящего изобретения будет описан способ управления буфером декодированных изображений с использованием управляющей операции управления памятью (именуемой далее «ММСО»). Когда ММСО осуществляют над текущим изображением в рамках процедуры декодирования текущего изображения, проводится управление буфером декодированных изображений в соответствии с ММСО. Как показано на фиг.5, в случае, когда текущее изображение является ключевым изображением, оба эталонных изображения - 52 базового уровня и 54 уровня повышенного качества - эталонного изображения 50 в буфере декодированных изображений подвергаются управляющей операции 56 управления памятью (например, воздействию команды перемещения эталонного изображения из краткосрочной памяти в долговременную память). Когда текущее изображение является неключевым изображением, эталонное изображение базового уровня и эталонное изображение уровня повышенного качества эталонного изображения 58 в буфере декодированных изображений подвергаются управляющей операции 60 управления памятью. Теперь, со ссылками на фиг.7, будет описано содержание управления, соответствующее значению, назначенному ММСО.
На фиг.7 представлен вид, иллюстрирующий содержание управления буфером декодированных изображений, соответствующее кодовым номерам ММСО.
Во-первых, когда кодовый номер ММСО равен 0, это указывает, что управление памятью завершено. Когда кодовый номер ММСО равен 1, это указывает, что кратковременное эталонное изображение маркировано не эталонным изображением. Когда кодовый номер ММСО равен 2, это указывает, что кратковременное эталонное изображение маркировано не эталонным изображением. Когда кодовый номер ММСО равен 3, это указывает, что кратковременное эталонное изображение маркировано не долговременным эталонным изображением и перемещено в долговременную память. Когда кодовый номер ММСО равен 4, это указывает, что принято решение о размере долговременной памяти. Когда кодовый номер ММСО равен 5, это указывает, что все эталонные изображения маркированы не эталонным изображением и все содержимое буфера сброшено. Когда кодовый номер ММСО равен 6, это указывает, что текущее изображение маркировано долговременным эталонным изображением и перемещено в долговременную память.
Операция, соответствующая кодовому номеру ММСО, осуществляется как относительно эталонного изображения базового уровня, так и относительно эталонного изображения уровня повышенного качества, когда текущее изображение является ключевым изображением, и осуществляется относительно эталонного изображения уровня повышенного качества эталонного изображения, когда текущее изображение является неключевым изображением. То есть, когда для эталонного изображения базового уровня и эталонного изображения уровня повышенного качества задается одинаковый номер идентификации изображения, переупорядочение ссылочного номера, инициализацию списка эталонных изображений, стирание эталонного изображения и управление буфером с использованием ММСО можно проводить в блоке изображения, имеющем тот же номер идентификации изображения. Номер идентификации изображения включает в себя информацию ссылочного индекса или информацию номера изображения, присущую эталонному изображению.
В другом варианте осуществления настоящего изобретения, информация идентификации изображения назначается в блоке изображения, хранимого в буфере декодированных изображений, независимо от того, является эталонное изображение ключевым изображением или неключевым изображением. То есть, даже когда эталонное изображение является ключевым изображением, эталонному изображению базового уровня и эталонному изображению уровня повышенного качества эталонного изображения назначаются разные информации идентификации изображения. Когда эталонное изображение является неключевым изображением, эталонное изображение базового уровня и эталонное изображение уровня повышенного качества сохраняются в буфере декодированных изображений, и поэтому один элемент информации идентификации изображения назначается эталонному изображению уровня повышенного качества.
На фиг.8 представлен вид, иллюстрирующий структуру буфера декодированных изображений в соответствии с другим вариантом осуществления настоящего изобретения.
Когда первое изображение 22 (показанное на фиг.2), которое является ключевым изображением, а также эталонным изображением, декодируется и сохраняется в буфере декодированных изображений, номер 0 изображения назначается эталонному изображению 40 базового уровня первого изображения 22, а номер 1 изображения назначается эталонному изображению 42 уровня повышенного качества первого изображения 22. Во втором изображении 24, которое является ключевым изображением, а также эталонным изображением, аналогичным первому изображению 22, номер 2 изображения назначается эталонному изображению 44 базового уровня второго изображения 24, а номер 3 изображения назначается эталонному изображению 46 уровня повышенного качества второго изображения 24. В третьем изображении 26, которое является неключевым изображением, а также эталонным изображением, поскольку эталонное изображение уровня повышенного качества сохраняется в буфере декодированных изображений, номер 4 изображения назначается эталонному изображению 48 уровня повышенного качества. Поскольку пятые изображения 32, 34, 36 и 38 являются неэталонным изображением, пятые изображения не сохраняются в буфере декодированных изображений, за исключением случая, когда пятые изображения не отображаются непосредственно после декодирования.
В другом варианте осуществления настоящего изобретения, при переупорядочении ссылочных номеров, когда текущее изображение является ключевым изображением, ссылочный номер переназначается только эталонному изображению базового уровня, а когда текущее изображение является неключевым изображением, ссылочный номер переназначается только эталонному изображению уровня повышенного качества.
В другом варианте осуществления настоящего изобретения, при инициализации списка эталонных изображений и буферизации буфера с использованием ММСО, если текущее изображение является ключевым изображением, то и эталонное изображение базового уровня, и эталонное изображение уровня повышенного качества подвергаются инициализации и операции управления памятью с использованием ММСО даже тогда, когда ссылочные номера этих изображений оказываются разными, а если текущее изображение является неключевым изображением, то эталонное изображение уровня повышенного качества эталонного изображения подвергается инициализации и операции управления памятью с использованием ММСО.
Как показано на фиг.8, например, команда 62 ММСО, по которой эталонное изображение 50 перемещается из кратковременной памяти в долговременную память, получается на основании текущего изображения. Когда текущее изображение является ключевым изображением, из кратковременной памяти в долговременную память перемещаются и эталонное изображение базового уровня, и эталонное изображение уровня повышенного качества, а когда текущее изображение является неключевым изображением, эталонное изображение 58 уровня повышенного качества эталонного изображения подвергается воздействию команды 64 ММСО.
Когда ссылка на эталонное изображение больше не требуется, вследствие чего оно стирается из буфера декодированных изображений способом скользящего окна, если текущее изображение является ключевым изображением, то эталонное изображение базового уровня и эталонное изображение уровня повышенного качества стираются из буфера даже тогда, когда ссылочные номера этих изображений оказываются разными. Вместе с тем, если текущее изображение является неключевым изображением, то эталонное изображение уровня повышенного качества эталонного изображения стирается из буфера. В этом случае изображение стирается с использованием способа «первым пришел - первым обслужен» (FIFO), при этом первым стирается то изображение, которое первым сохранено в буфере.
Для специалистов в данной области техники будет очевидно, что в рамках объема притязаний изобретения можно осуществить различные модификации и изменения настоящего изобретения. Поэтому предполагается, что настоящее изобретение охватывает модификации и изменения этого изобретения при условии, что они находятся в рамках притязаний прилагаемой формулы изобретения и ее эквивалентов.
Промышленная применимость
Как описано выше, в соответствии с настоящим изобретением, когда декодируется ключевое изображение, эталонное изображение базового уровня или эталонное изображение уровня повышенного качества эталонного изображения выдаются в качестве эталонного изображения, а когда декодируется неключевое изображение, эталонное изображение уровня повышенного качества эталонного изображения выдается в качестве эталонного изображения. Поэтому можно минимизировать проблему, которая при осуществлении процедуры декодирования видеосигнала обусловлена ошибкой передачи. Когда видеосигнал декодируют с использованием вышеописанного способа декодирования, появляется возможность эффективного декодирования видеосигнала с использованием нового способа буферизации буфера декодированных изображений, который оптимизируется с помощью способа декодирования.

Claims (4)

1. Способ декодирования видеосигнала в видеодекодере, содержащий: декодирование уровня базового качества; декодирование уровня повышенного качества на основе уровня базового качества; и маркировку изображения уровня базового качества и изображения уровня повышенного качества как эталонного изображения, при этом как изображение уровня базового качества, так и изображение уровня повышенного качества имеют одинаковую информацию идентификации изображения, и на этапе маркировки изображение уровня базового качества маркируется как другая информация представления, при этом информация идентификации изображения включает в себя по меньшей мере одну из информации номера кадра, указывающей порядок декодирования, информации номера изображения для идентификации изображения и информации ссылочного индекса.
2. Способ по п.1, в котором как изображение уровня базового качества, так и изображение уровня повышенного качества, которые имеют одинаковую информацию идентификации изображения, имеют наименьшее временное разрешение.
3. Способ по п.1, в котором изображение уровня повышенного качества имеет пониженный размер шага дискретизации по сравнению с изображением уровня базового качества.
4. Устройство для декодирования видеосигнала, содержащее: декодер базового уровня, декодирующий уровень базового качества; декодер повышенного уровня, декодирующий уровень повышенного качества на основе уровня базового качества, и маркирующий изображение уровня базового качества и изображение уровня повышенного качества как эталонное изображение, при этом как изображение уровня базового качества, так и изображение уровня повышенного качества имеют одинаковую информацию идентификации изображения, и изображение уровня базового качества маркируется как другая информация представления, при этом информация идентификации изображения включает в себя по меньшей мере одну из информации номера кадра, указывающей порядок декодирования, информации номера изображения для идентификации изображения и информации ссылочного индекса.
RU2009111142/07A 2005-10-05 2009-03-26 Способ декодирования видеосигнала RU2508608C2 (ru)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US72347405P 2005-10-05 2005-10-05
US60/723,474 2005-10-05
KR1020060095950A KR100883594B1 (ko) 2005-10-05 2006-09-29 비디오 신호의 디코딩 방법
KR10-2006-0095950 2006-09-29

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
RU2008117444/09A Division RU2008117444A (ru) 2005-10-05 2006-10-02 Способ декодирования видеосигнала

Publications (2)

Publication Number Publication Date
RU2009111142A RU2009111142A (ru) 2010-10-10
RU2508608C2 true RU2508608C2 (ru) 2014-02-27

Family

ID=38159769

Family Applications (2)

Application Number Title Priority Date Filing Date
RU2008117444/09A RU2008117444A (ru) 2005-10-05 2006-10-02 Способ декодирования видеосигнала
RU2009111142/07A RU2508608C2 (ru) 2005-10-05 2009-03-26 Способ декодирования видеосигнала

Family Applications Before (1)

Application Number Title Priority Date Filing Date
RU2008117444/09A RU2008117444A (ru) 2005-10-05 2006-10-02 Способ декодирования видеосигнала

Country Status (10)

Country Link
US (6) US7869501B2 (ru)
EP (1) EP2924997B1 (ru)
JP (1) JP4851528B2 (ru)
KR (5) KR20070038396A (ru)
CN (3) CN101352044B (ru)
BR (1) BRPI0616860B8 (ru)
ES (1) ES2539935T3 (ru)
HK (1) HK1124710A1 (ru)
RU (2) RU2008117444A (ru)
WO (3) WO2007040335A1 (ru)

Families Citing this family (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1628484B1 (en) * 2004-08-18 2019-04-03 STMicroelectronics Srl Method for transcoding compressed video signals, related apparatus and computer program product therefor
KR20070038396A (ko) * 2005-10-05 2007-04-10 엘지전자 주식회사 영상 신호의 인코딩 및 디코딩 방법
WO2007080223A1 (en) * 2006-01-10 2007-07-19 Nokia Corporation Buffering of decoded reference pictures
FR2904494B1 (fr) * 2006-07-26 2008-12-19 Canon Kk Procede et dispositif de compression d'image, systeme de telecommunication comportant un tel dispositif et programme mettant en oeuvre un tel procede
US8355448B2 (en) 2007-01-18 2013-01-15 Nokia Corporation Carriage of SEI messages in RTP payload format
WO2009032255A2 (en) * 2007-09-04 2009-03-12 The Regents Of The University Of California Hierarchical motion vector processing method, software and devices
JP5406465B2 (ja) * 2008-04-24 2014-02-05 株式会社Nttドコモ 画像予測符号化装置、画像予測符号化方法、画像予測符号化プログラム、画像予測復号装置、画像予測復号方法及び画像予測復号プログラム
US20090279614A1 (en) * 2008-05-10 2009-11-12 Samsung Electronics Co., Ltd. Apparatus and method for managing reference frame buffer in layered video coding
EP2152009A1 (en) * 2008-08-06 2010-02-10 Thomson Licensing Method for predicting a lost or damaged block of an enhanced spatial layer frame and SVC-decoder adapted therefore
KR101220175B1 (ko) * 2008-12-08 2013-01-11 연세대학교 원주산학협력단 Svc 비디오 기반의 디지털 위성 방송을 위한 계층 분리형 pes 패킷 생성 및 처리 방법
JP5700970B2 (ja) * 2009-07-30 2015-04-15 トムソン ライセンシングThomson Licensing 画像シーケンスを表す符号化データストリームの復号方法と画像シーケンスの符号化方法
JP2013505647A (ja) * 2009-09-22 2013-02-14 パナソニック株式会社 画像符号化装置、画像復号装置、画像符号化方法および画像復号方法
US9578325B2 (en) * 2010-01-13 2017-02-21 Texas Instruments Incorporated Drift reduction for quality scalable video coding
CN105472387B (zh) 2010-04-09 2018-11-02 Lg电子株式会社 处理视频数据的方法和装置
WO2012042884A1 (ja) 2010-09-29 2012-04-05 パナソニック株式会社 画像復号方法、画像符号化方法、画像復号装置、画像符号化装置、プログラムおよび集積回路
EP3125562B1 (en) 2010-09-30 2022-04-06 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, program, and integrated circuit
JP5781313B2 (ja) * 2011-01-12 2015-09-16 株式会社Nttドコモ 画像予測符号化方法、画像予測符号化装置、画像予測符号化プログラム、画像予測復号方法、画像予測復号装置及び画像予測復号プログラム
WO2012096176A1 (en) 2011-01-12 2012-07-19 Panasonic Corporation Methods and apparatuses for encoding and decoding video using multiple reference pictures
WO2012108181A1 (en) * 2011-02-08 2012-08-16 Panasonic Corporation Methods and apparatuses for encoding and decoding video using multiple reference pictures
US8834507B2 (en) 2011-05-17 2014-09-16 Warsaw Orthopedic, Inc. Dilation instruments and methods
US9854275B2 (en) 2011-06-25 2017-12-26 Qualcomm Incorporated Quantization in video coding
US9232233B2 (en) * 2011-07-01 2016-01-05 Apple Inc. Adaptive configuration of reference frame buffer based on camera and background motion
KR20130005167A (ko) * 2011-07-05 2013-01-15 삼성전자주식회사 영상 신호 디코딩 장치 및 그것의 디코딩 방법
PL231159B1 (pl) 2011-09-09 2019-01-31 Kt Corp Sposób uzyskiwania czasowego predykcyjnego wektora ruchu i urządzenie do stosowania tego sposobu
US9106927B2 (en) 2011-09-23 2015-08-11 Qualcomm Incorporated Video coding with subsets of a reference picture set
MY168194A (en) 2011-10-17 2018-10-15 Toshiba Kk Encoding device, decoding device, encoding method, and decoding method
KR20130045785A (ko) 2011-10-26 2013-05-06 경희대학교 산학협력단 메모리 관리 방법 및 그를 이용한 복호화 장치
WO2013062174A1 (ko) * 2011-10-26 2013-05-02 경희대학교 산학협력단 메모리 관리 방법 및 그를 이용한 복호화 장치
US9264717B2 (en) 2011-10-31 2016-02-16 Qualcomm Incorporated Random access with advanced decoded picture buffer (DPB) management in video coding
US9172737B2 (en) * 2012-07-30 2015-10-27 New York University Streamloading content, such as video content for example, by both downloading enhancement layers of the content and streaming a base layer of the content
WO2014049210A1 (en) * 2012-09-28 2014-04-03 Nokia Corporation An apparatus, a method and a computer program for video coding and decoding
CN108521574A (zh) * 2012-09-28 2018-09-11 索尼公司 编码设备、编码方法、解码设备和解码方法
KR20150095625A (ko) * 2012-12-14 2015-08-21 엘지전자 주식회사 비디오 인코딩 방법 및 비디오 디코딩 방법과 이를 이용하는 장치
US20150312581A1 (en) * 2012-12-26 2015-10-29 Sony Corporation Image processing device and method
JP6205000B2 (ja) * 2013-03-11 2017-09-27 ドルビー ラボラトリーズ ライセンシング コーポレイション 階層符号化を用いたマルチフォーマットハイダイナミックレンジビデオの配信
KR20140121315A (ko) * 2013-04-04 2014-10-15 한국전자통신연구원 참조 픽처 리스트를 이용한 다 계층 기반의 영상 부호화/복호화 방법 및 그 장치
CN105284115B (zh) * 2013-04-05 2018-11-23 三星电子株式会社 用于对多层视频进行解码的方法和设备以及用于对多层视频进行编码的方法和设备
CN105122802A (zh) * 2013-04-17 2015-12-02 韦勒斯标准与技术协会公司 视频信号处理方法及装置
GB2533878B (en) * 2013-10-16 2020-11-11 Intel Corp Method, apparatus and system to select audio-video data for streaming
JP2015188249A (ja) * 2015-06-03 2015-10-29 株式会社東芝 動画像符号化装置及び動画像符号化方法
KR101643102B1 (ko) * 2015-07-15 2016-08-12 민코넷주식회사 객체 상태 전송 방식 방송 서비스 제공 방법 및 방송 재생 방법
US10555002B2 (en) * 2016-01-21 2020-02-04 Intel Corporation Long term reference picture coding
JP2017069987A (ja) * 2017-01-18 2017-04-06 株式会社東芝 動画像符号化装置及び動画像符号化方法
CN109344849B (zh) * 2018-07-27 2022-03-11 广东工业大学 一种基于结构平衡理论的复杂网络图像识别方法
CN112995670B (zh) * 2021-05-10 2021-10-08 浙江智慧视频安防创新中心有限公司 一种顺序执行的帧间帧内联合预测编解码的方法及装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020006161A1 (en) * 1999-07-06 2002-01-17 Van Der Schaar Mihaela Method and apparatus for improved efficiency in transmission of fine granular scalable selective enhanced images
US20030007557A1 (en) * 1996-02-07 2003-01-09 Sharp Kabushiki Kaisha Motion picture coding and decoding apparatus
WO2003017672A2 (en) * 2001-08-15 2003-02-27 Koninklijke Philips Electronics N.V. Totally embedded fgs video coding with motion compensation
RU2001123542A (ru) * 1999-11-23 2003-06-27 Конинклейке Филипс Электроникс Н.В. Гибридное мелкозернистое масштабируемое видеокодирование с зависящим от времени отношением сигнал/шум

Family Cites Families (68)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB9206860D0 (en) * 1992-03-27 1992-05-13 British Telecomm Two-layer video coder
JP3788823B2 (ja) * 1995-10-27 2006-06-21 株式会社東芝 動画像符号化装置および動画像復号化装置
US6173013B1 (en) * 1996-11-08 2001-01-09 Sony Corporation Method and apparatus for encoding enhancement and base layer image signals using a predicted image signal
US6148026A (en) 1997-01-08 2000-11-14 At&T Corp. Mesh node coding to enable object based functionalities within a motion compensated transform video coder
US6690724B1 (en) * 1997-01-10 2004-02-10 Matsushita Electric Industrial Co., Ltd. Image processing method, image processing device, and data recording medium
ES2323358T3 (es) * 1997-04-01 2009-07-14 Sony Corporation Codificador de imagenes, metodo de codificacion de imagenes, descodificador de imagenes, metodo de descodificacion de imagenes, y medio de distribucion.
US6292512B1 (en) * 1998-07-06 2001-09-18 U.S. Philips Corporation Scalable video coding system
US6498865B1 (en) * 1999-02-11 2002-12-24 Packetvideo Corp,. Method and device for control and compatible delivery of digitally compressed visual data in a heterogeneous communication network
JP2000308064A (ja) * 1999-04-22 2000-11-02 Mitsubishi Electric Corp 動きベクトル検出装置
US6639943B1 (en) 1999-11-23 2003-10-28 Koninklijke Philips Electronics N.V. Hybrid temporal-SNR fine granular scalability video coding
US6614936B1 (en) 1999-12-03 2003-09-02 Microsoft Corporation System and method for robust video coding using progressive fine-granularity scalable (PFGS) coding
JP2003518882A (ja) 1999-12-28 2003-06-10 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Snrスケーラブルビデオ符号化方法及び対応する復号化方法
US6510177B1 (en) 2000-03-24 2003-01-21 Microsoft Corporation System and method for layered video coding enhancement
US6940905B2 (en) 2000-09-22 2005-09-06 Koninklijke Philips Electronics N.V. Double-loop motion-compensation fine granular scalability
US6907070B2 (en) 2000-12-15 2005-06-14 Microsoft Corporation Drifting reduction and macroblock-based control in progressive fine granularity scalable video coding
US20020126759A1 (en) * 2001-01-10 2002-09-12 Wen-Hsiao Peng Method and apparatus for providing prediction mode fine granularity scalability
US20020118742A1 (en) 2001-02-26 2002-08-29 Philips Electronics North America Corporation. Prediction structures for enhancement layer in fine granular scalability video coding
US20020118743A1 (en) 2001-02-28 2002-08-29 Hong Jiang Method, apparatus and system for multiple-layer scalable video coding
KR20040054743A (ko) 2001-10-26 2004-06-25 코닌클리케 필립스 일렉트로닉스 엔.브이. 공간 스케일가능 압축
CN101448162B (zh) * 2001-12-17 2013-01-02 微软公司 处理视频图像的方法
JP2003299103A (ja) * 2002-03-29 2003-10-17 Toshiba Corp 動画像符号化方法と装置及び動画像復号化方法と装置
US6944222B2 (en) 2002-03-04 2005-09-13 Koninklijke Philips Electronics N.V. Efficiency FGST framework employing higher quality reference frames
KR100488018B1 (ko) * 2002-05-03 2005-05-06 엘지전자 주식회사 동영상 코딩 방법
US6944346B2 (en) 2002-05-28 2005-09-13 Koninklijke Philips Electronics N.V. Efficiency FGST framework employing higher quality reference frames
US7145948B2 (en) 2002-05-29 2006-12-05 Koninklijke Philips Electronics N.V. Entropy constrained scalar quantizer for a Laplace-Markov source
US7136532B2 (en) 2002-06-27 2006-11-14 Koninklijke Philips Electronics N.V. FGS decoder based on quality estimated at the decoder
KR20050027111A (ko) * 2002-07-16 2005-03-17 톰슨 라이센싱 에스.에이. Hd-dvd를 위한 기본 및 확장 계층의 인터리빙
KR100865034B1 (ko) * 2002-07-18 2008-10-23 엘지전자 주식회사 모션 벡터 예측 방법
US7072394B2 (en) * 2002-08-27 2006-07-04 National Chiao Tung University Architecture and method for fine granularity scalable video coding
WO2004030368A1 (en) 2002-09-27 2004-04-08 Koninklijke Philips Electronics N.V. Scalable video encoding
CN101668215A (zh) * 2003-02-18 2010-03-10 诺基亚有限公司 图像解码方法
KR20060015634A (ko) * 2003-06-03 2006-02-17 코닌클리즈케 필립스 일렉트로닉스 엔.브이. 데이터 제공 방법, 데이터 수신 단말, 가입자 서비스용시스템 및 스마트카드
MXPA05013727A (es) * 2003-06-25 2006-07-06 Thomson Licensing Metodo y aparato para el calculo de prediccion ponderada con el uso de diferencial de cuadro desplazado.
US20050011543A1 (en) 2003-06-27 2005-01-20 Haught John Christian Process for recovering a dry cleaning solvent from a mixture by modifying the mixture
US8064520B2 (en) * 2003-09-07 2011-11-22 Microsoft Corporation Advanced bi-directional predictive coding of interlaced video
JP2007507927A (ja) 2003-09-29 2007-03-29 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ アドバンスドデータパーティショニングと効率的な空間−時間−snrスケーラビリティビデオコーディング及びストリーミングのためのファイン・グラニュラリティ・スケーラビリティとを結合したシステム及び方法
FI115589B (fi) 2003-10-14 2005-05-31 Nokia Corp Redundanttien kuvien koodaaminen ja dekoodaaminen
KR100565308B1 (ko) 2003-11-24 2006-03-30 엘지전자 주식회사 에스엔알 스케일러빌리티를 위한 동영상 부호화 및 복호화 장치
US20050201471A1 (en) * 2004-02-13 2005-09-15 Nokia Corporation Picture decoding method
US7227894B2 (en) * 2004-02-24 2007-06-05 Industrial Technology Research Institute Method and apparatus for MPEG-4 FGS performance enhancement
KR100596705B1 (ko) * 2004-03-04 2006-07-04 삼성전자주식회사 비디오 스트리밍 서비스를 위한 비디오 코딩 방법과 비디오 인코딩 시스템, 및 비디오 디코딩 방법과 비디오 디코딩 시스템
US20050195896A1 (en) * 2004-03-08 2005-09-08 National Chiao Tung University Architecture for stack robust fine granularity scalability
KR100657268B1 (ko) * 2004-07-15 2006-12-14 학교법인 대양학원 컬러 영상의 신축적 부호화, 복호화 방법 및 장치
KR101407748B1 (ko) * 2004-10-13 2014-06-17 톰슨 라이센싱 복잡도 스케일러블 비디오 인코딩 및 디코딩을 위한 방법 및 장치
DE102004059993B4 (de) * 2004-10-15 2006-08-31 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Erzeugen einer codierten Videosequenz unter Verwendung einer Zwischen-Schicht-Bewegungsdaten-Prädiktion sowie Computerprogramm und computerlesbares Medium
KR100679022B1 (ko) 2004-10-18 2007-02-05 삼성전자주식회사 계층간 필터링을 이용한 비디오 코딩 및 디코딩방법과,비디오 인코더 및 디코더
KR20060043115A (ko) 2004-10-26 2006-05-15 엘지전자 주식회사 베이스 레이어를 이용하는 영상신호의 엔코딩/디코딩 방법및 장치
KR100703734B1 (ko) 2004-12-03 2007-04-05 삼성전자주식회사 Dct 업샘플링을 이용한 다 계층 비디오 인코딩/디코딩방법 및 장치
ES2336824T3 (es) * 2005-03-10 2010-04-16 Qualcomm Incorporated Arquitectura de decodificador para gestion de errores optimizada en flujo continuo multimedia.
US7756206B2 (en) * 2005-04-13 2010-07-13 Nokia Corporation FGS identification in scalable video coding
WO2006109117A1 (en) * 2005-04-13 2006-10-19 Nokia Corporation Method, device and system for effectively coding and decoding of video data
US9049449B2 (en) * 2005-04-13 2015-06-02 Nokia Corporation Coding of frame number in scalable video coding
US20060256863A1 (en) * 2005-04-13 2006-11-16 Nokia Corporation Method, device and system for enhanced and effective fine granularity scalability (FGS) coding and decoding of video data
KR20060122663A (ko) * 2005-05-26 2006-11-30 엘지전자 주식회사 영상신호의 엔코딩 및 디코딩에서의 픽처 정보를 전송하고이를 이용하는 방법
EP1889487A1 (en) 2005-06-10 2008-02-20 Samsung Electronics Co., Ltd. Multilayer-based video encoding method, decoding method, video encoder, and video decoder using smoothing prediction
US7617436B2 (en) * 2005-08-02 2009-11-10 Nokia Corporation Method, device, and system for forward channel error recovery in video sequence transmission over packet-based network
KR100746011B1 (ko) * 2005-08-24 2007-08-06 삼성전자주식회사 잔차 예측의 성능 개선 방법, 상기 방법을 이용한 비디오인코더 및 비디오 디코더
WO2007023377A1 (en) * 2005-08-25 2007-03-01 Nokia Corporation Separation markers in fine granularity scalable video coding
US8879856B2 (en) * 2005-09-27 2014-11-04 Qualcomm Incorporated Content driven transcoder that orchestrates multimedia transcoding using content information
KR20070038396A (ko) * 2005-10-05 2007-04-10 엘지전자 주식회사 영상 신호의 인코딩 및 디코딩 방법
EP1943840B1 (en) 2005-10-05 2015-04-08 LG Electronics Inc. Method for identifying reference pictures of quality layers in a video decoder
KR100891663B1 (ko) 2005-10-05 2009-04-02 엘지전자 주식회사 비디오 신호 디코딩 및 인코딩 방법
WO2007042914A1 (en) * 2005-10-11 2007-04-19 Nokia Corporation Efficient decoded picture buffer management for scalable video coding
KR100763205B1 (ko) * 2006-01-12 2007-10-04 삼성전자주식회사 모션 역변환을 사용하여 모션 예측을 수행하는 방법 및장치
US8170116B2 (en) * 2006-03-27 2012-05-01 Nokia Corporation Reference picture marking in scalable video encoding and decoding
US8358704B2 (en) 2006-04-04 2013-01-22 Qualcomm Incorporated Frame level multimedia decoding with frame information table
US8532176B2 (en) * 2006-07-10 2013-09-10 Sharp Laboratories Of America, Inc. Methods and systems for combining layers in a multi-layer bitstream
EP2257073A1 (en) * 2009-05-25 2010-12-01 Canon Kabushiki Kaisha Method and device for transmitting video data

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030007557A1 (en) * 1996-02-07 2003-01-09 Sharp Kabushiki Kaisha Motion picture coding and decoding apparatus
US20020006161A1 (en) * 1999-07-06 2002-01-17 Van Der Schaar Mihaela Method and apparatus for improved efficiency in transmission of fine granular scalable selective enhanced images
RU2001123542A (ru) * 1999-11-23 2003-06-27 Конинклейке Филипс Электроникс Н.В. Гибридное мелкозернистое масштабируемое видеокодирование с зависящим от времени отношением сигнал/шум
WO2003017672A2 (en) * 2001-08-15 2003-02-27 Koninklijke Philips Electronics N.V. Totally embedded fgs video coding with motion compensation

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
DOE HYUN YOON et al, Indication of key picture in AVC compatible base layer, Joint Video Team (JVT) of ISO/IEC MPEG & ITU-T VCEG, JVT-P079, 16th Meeting: Poznan, 24-29 July 2005. *
YILIANG BAO et al, Improvements to Fine Granularity Scalability for Low-Delay Applications, Joint Video Team (JVT) of ISO/IEC MPEG & ITU-T VCEG, JVT-O054, 15th Meeting: Busan, Korea, 18-22 April 2005. *

Also Published As

Publication number Publication date
WO2007040342A1 (en) 2007-04-12
US20090147857A1 (en) 2009-06-11
RU2009111142A (ru) 2010-10-10
EP2924997A3 (en) 2015-12-23
US20090225866A1 (en) 2009-09-10
US20100135385A1 (en) 2010-06-03
WO2007040343A1 (en) 2007-04-12
CN101283595A (zh) 2008-10-08
ES2539935T3 (es) 2015-07-07
BRPI0616860B1 (pt) 2020-05-12
RU2008117444A (ru) 2009-11-10
CN101352044A (zh) 2009-01-21
CN101283601A (zh) 2008-10-08
KR20070038418A (ko) 2007-04-10
US20070195879A1 (en) 2007-08-23
JP2009512268A (ja) 2009-03-19
EP2924997B1 (en) 2020-08-19
KR101102399B1 (ko) 2012-01-05
US8422551B2 (en) 2013-04-16
KR100886193B1 (ko) 2009-02-27
JP4851528B2 (ja) 2012-01-11
KR100883594B1 (ko) 2009-02-13
KR20070038417A (ko) 2007-04-10
KR20070038419A (ko) 2007-04-10
BRPI0616860B8 (pt) 2020-07-07
US20070253486A1 (en) 2007-11-01
WO2007040335A1 (en) 2007-04-12
BRPI0616860A2 (pt) 2011-07-05
US7869501B2 (en) 2011-01-11
US7773675B2 (en) 2010-08-10
EP2924997A2 (en) 2015-09-30
KR20070038396A (ko) 2007-04-10
US20070086518A1 (en) 2007-04-19
HK1124710A1 (en) 2009-07-17
KR20090017460A (ko) 2009-02-18
CN101352044B (zh) 2013-03-06

Similar Documents

Publication Publication Date Title
RU2508608C2 (ru) Способ декодирования видеосигнала
KR102058759B1 (ko) 디코딩된 픽쳐 버퍼 및 참조 픽쳐 목록들에 관한 상태 정보의 시그널링 기법
EP3122045B1 (en) Moving picture coding method and moving picture decoding method
RU2702219C2 (ru) Устройство обработки изображений и способ обработки изображений
US8599919B2 (en) Moving image coding/decoding system and moving image coding apparatus and moving image decoding apparatus used therein
US20090041130A1 (en) Method of transmitting picture information when encoding video signal and method of using the same when decoding video signal
US7630570B1 (en) Method and apparatus to prioritize video information during coding and decoding
US20060159352A1 (en) Method and apparatus for encoding a video sequence
AU2006298012B2 (en) Method for decoding a video signal
US20030123538A1 (en) Video recording and encoding in devices with limited processing capabilities
TW201436529A (zh) 包括第一層和第二層的多層串流之圖像區塊解碼方法和解碼裝置以及編碼方法和編碼裝置
JP2005507620A (ja) 圧縮
JP2003189313A (ja) 画面間予測符号化方法および画面間予測復号化方法
KR20100138735A (ko) 문맥정보 기반의 적응적인 포스트 필터를 이용한 동영상 부호화/복호화 장치 및 그 방법