KR20190052165A - 고 비트-심도 비디오의 스케일러블 코딩에서의 고 정밀 업-샘플링 - Google Patents

고 비트-심도 비디오의 스케일러블 코딩에서의 고 정밀 업-샘플링 Download PDF

Info

Publication number
KR20190052165A
KR20190052165A KR1020197013074A KR20197013074A KR20190052165A KR 20190052165 A KR20190052165 A KR 20190052165A KR 1020197013074 A KR1020197013074 A KR 1020197013074A KR 20197013074 A KR20197013074 A KR 20197013074A KR 20190052165 A KR20190052165 A KR 20190052165A
Authority
KR
South Korea
Prior art keywords
video layer
data
bit depth
sampling
image data
Prior art date
Application number
KR1020197013074A
Other languages
English (en)
Other versions
KR102052876B1 (ko
Inventor
펭 얀
타오란 루
타오 첸
Original Assignee
돌비 레버러토리즈 라이쎈싱 코오포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 돌비 레버러토리즈 라이쎈싱 코오포레이션 filed Critical 돌비 레버러토리즈 라이쎈싱 코오포레이션
Publication of KR20190052165A publication Critical patent/KR20190052165A/ko
Application granted granted Critical
Publication of KR102052876B1 publication Critical patent/KR102052876B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Image Processing (AREA)

Abstract

레이어드된 코딩 시스템에서의 업-샘플링 동작들의 정밀은 고 비트-심도를 갖는 비디오 데이터 상에서 동작할 때 보존된다. 비디오 코딩 또는 디코딩 시스템의 비트-심도 필요조건들에 응답하여, 스케일링 및 라운딩 파라미터들은 분리가능한 업-스케일링 필터에 대해 결정된다. 입력 데이터는 제 1 업-샘플링된 데이터를 생성하기 위해 제 1 라운딩 파라미터를 사용하여 제 1 공간 방향으로 먼저 필터링된다. 제 1 중간 데이터는 제 1 시프트 파라미터를 사용하여 제 1 업-샘플링된 데이터를 스케일링함으로써 생성된다. 그 다음에 중간 데이터는 제 2 업-샘플링된 데이터를 생성하기 위해 제 2 라운딩 파라미터를 사용하여 제 2 공간 방향으로 필터링된다. 제 2 중간 데이터는 제 2 시프트 파라미터를 사용하여 제 2 업-샘플링된 데이터를 스케일링함으로써 생성된다. 최종 업-샘플링된 데이터는 제 2 중간 데이터를 클리핑(cliping)함으로써 생성될 수 있다.

Description

고 비트-심도 비디오의 스케일러블 코딩에서의 고 정밀 업-샘플링{HIGH PRECISION UP-SAMPLING IN SCALABLE CODING OF HIGH BIT-DEPTH VIDEO}
관련 출원들에 대한 전후 참조
본 출원은 2012년 12월 21일에 출원된 미국 가출원 제 61/745,050에 대한 우선권을 주장하고, 가출원의 전체 내용들은 본 명세서에 참고로 포함된다.
기술
본 발명은 일반적으로 이미지들에 관한 것이다. 보다 구체적으로, 본 발명의 일 실시예는 고 비트-심도 비디오를 위한 스케일러블 비디오 코덱들에서 고 정밀 업-샘플링에 관한 것이다.
배경
오디오와 비디오 압축은 멀티미디어 콘텐츠의 개발, 저장, 유통 및 소비의 핵심 구성요소이다. 압축 방법의 선택은 코딩 효율성, 코딩 복잡성 및 지연(delay) 사이에서 트레이드오프들을 수반한다. 컴퓨팅 비용에 대해 처리 능력(processing power)의 비율이 상승함에 따라, 보다 효율적인 압축을 감안하는 더 복잡한 압축 기술들의 개발을 감안한다. 예로서, 비디오 압축에서, 국제 표준 기구(ISO)로부터의 모션 픽쳐스 전문가 그룹(MPEG:Motion Pictures Expert Group)은 MPEG-2, MPEG-4(part 2) 및 H.264/AVC(또는 MPEG-4, part10)코딩 규격들을 배포함으로써 본래의 MPEG-1 비디오를 개선하는 것을 계속하고 있다.
H.264의 압축 효율과 성공에도 불구하고, 고 효율 비디오 코딩(HEVC:High Efficiency Video Coding)으로 알려진 비디오 압축 기술의 새로운 세대가 현재 개발중에 있다. HEVC를 위한 초안이 "High eficiency video coding(HEVC) text specificaion draft 9," ITU-T/ISO/IEC Joint Collaborative Team on Video Coding(JCT-VC) document JCTVC-K1003, Oct. 2012, by B.Bross, W.-J. Han, G.J. Sullivan, J.-R. Ohm, and T. Wiegand 에서 이용 가능하고, 그것의 전체 내에서 참조에 의해 본 명세서에 포함되는 HEVC는 "Advanced Video Coding for generic audio-visual services," ITU T Rec. H.264 and ISO/IEC 14496-10 으로 출간되고 그것의 전체 내에서 본 명세서에 포함되는 기존의 H.264(또한 AVC로 알려진) 규격을 통해 향상된 압축 능력을 제공하도록 기대된다.
비디오 신호들은 비트-심도, 색 공간(color space), 색 영역(color gamut) 및 해상도(resolution)와 같은 다수의 파라미터들에 의해 특징지어질 수 있다. 현대 텔레비전들 및 비디오 재생 장치들(예로서, 블루-레이 플레이어들)은 표준-화질(예로서, 720x480i) 및 고-화질(HD)(예로서, 1090 x 1080p)을 포함한 다양한 해상도들을 지원한다. 초고-화질(UHD)은 적어도 3,840 x 2,160 해상도를 갖는 차세대 해상도 형식이다. 초고-화질은 또한 Ultra HD, UHDTV 또는 수퍼 하이-비전(high-vision)으로 불려질 수 있다. 본 명세서에 사용된 바와 같이, UHD는 HD 해상도보다 더 높은 어떤 해상도를 나타낸다.
비디오 신호의 특징의 또 다른 양상은 그것의 동적 범위(Dynamic range)이다. 동적 범위(DR)는 이미지에서의 강도(예로서, 휘도(luminance), 루마(luma))의 범위, 예로서 가장 어두운 어둠에서 가장 밝은 밝음까지의 범위이다. 본 명세서에서 사용된 용어 '동적 범위'(DR)는 이미지에서의 강도(예로서, 휘도(luminance), 루마(luma))의 범위, 예로서 가장 어두운 어둠에서 가장 밝은 밝음까지의 범위를 감지하기 위한 사람 싸이코비쥬얼 시스템(HVC:human psychovisual system)의 능력에 관련될 수 있다. 이러한 관점에서, DR은 '장면-연관된'(scene-referred) 강도와 관련된다. DR은 또한 특정 폭의 강도 범위를 적절하게 또는 근접하게 렌더링하는(render) 디스플레이 장치의 능력에 관련될 수 있다. 이러한 관점에서, DR은 '디스플레이-연관된'(display-referred) 강도와 관련된다. 특정 관점이 본 명세서에서 어떤 점에서 특정 의미를 갖도록 명시적으로 기입되지 않았다면, 그 용어는 예를 들어 교환가능하게 어느 의미로도 사용될 수 있다는 것이 유추되어야 한다.
본 명세서에서 사용된 용어 광역 동적 범위(HDR:high dynamic range)는 사람 시각 시스템(HVS:human visual system)의 일부의 14-15 차수들의 크기를 포괄하는(span) DR 폭에 관련된다. 예를 들어, 기본적으로 정상인(예로서, 통계학적, 생물학적 또는 안과학적 관점 중 하나 이상에서) 잘 적응된 사람들은 약 15 차수들의 크기를 포괄하는 강도 범위를 가진다. 잘 적응된 사람들은 광자의 단지 소량만큼 적은 희미한 광원들을 감지할 수도 있다. 그럼에도, 이러한 동일한 사람들은 사막, 바다 또는 눈(또는 심지어 태양을 일견하지만 눈에 손상을 방지하기 위해 간단히 하는 경우에도)에서 정오 태양의 고통스러울 정도의 밝은 강도를 감지할 수도 있다. 하지만 이러한 범위는 '적응된' 사람들 예컨대, 그들의 HVS가 리셋하고 조절하는 시간을 갖는 사람들에게 이용가능 할 수 있다.
반면에, 사람이 강도 범위에서 광범위한 폭을 동시에 감지할 수 있게 하는 DR은 HDR과 비교하여 어느 정도 줄여진 것일 수 있다. 본 명세서에서 사용된 용어들 '향상된 동적 범위'(EDR:enhanced dynamic range), '시각 동적 범위'(visual dynamic range) 또는 '가변 동적 범위'(VDR:variable dynamic range)은 HVS에 의해 동시에 감지할 수 있는 DR과 개별적으로 또는 교환할 수 있게 연관될 수 있다. 본 명세서에서 사용된 바와 같이, EDR은 5-6 차수들의 크기를 포괄하는 DR과 관련될 수 있다. 따라서, 아마도 진정한 장면 관련 HDR에 대해서는 다소 협소할 수 있지만, 그럼에도, EDR은 넓은 DR 폭을 나타낸다. 본 명세서에서 사용된 용어 '동시 동적 범위'(simultaneous dynamic range)는 EDR과 관련될 수 있다.
본 명세서에 사용된 용어 이미지 또는 비디오 "비트-심도"는 이미지 또는 비디오 신호의 색 구성요소의 픽셀 값들을 나타내거나 저장하기 위해 사용된 비트들의 수를 나타낸다. 예를 들어, 용어 N-비트 비디오(예로서, N=8)는 상기 비디오 신호 내의 색 구성요소(예로서, R, G 또는 B)의 픽셀 값들이
Figure pat00001
부터
Figure pat00002
까지의 범위 내에 값들을 취할 수 있다는 것을 나타낸다.
본 명세서에서 사용된 용어 "고 비트-심도"(high bit-depth)는 8비트보다 큰 어떤 비트-심도 값들을 나타낸다(예로서 N=10비트). HDR 이미지와 비디오 신호들이 일반적으로 고 비트-심도와 연관되지만, 고 비트-심도 이미지는 반드시 광역 동적 범위를 가질 필요는 없다는 것을 유의하라. 그러므로, 본 명세서에서 사용된 바와 같이, 고 비트-심도 이미징은 HDR과 SDR 이미지들 둘 모두와 연관될 수 있다.
새로운 디스플레이 기술들뿐만 아니라 레거시 재생 디바이스들과의 역 호환성을 지원하기 위해, 다수의 레이어들이 UHD 및 HDR(또는 SDR)비디오 데이터를 업스트림 디바이스로부터 다운스트림 디바이스들로 전달하기 위해 사용될 수 있다. 이러한 다수-레이어 스트림이 주어진다면, 레거시 디코더들은 콘텐츠의 HD SDR 버전을 재구성하기 위해 베이스 레이어를 사용할 수 있다. 진보한 디코더들(advanced decoders)은 콘텐츠의 UHD EDR 버전을 재구성하여 그것을 더 많이 유능한 디스플레이들 상에 렌더링(render) 하기 위해 베이스 레이어와 상위 레이어들(enhancement layers) 둘 모두를 사용할 수 있다. 여기서 발명자들에 의해 이해되는 바와 같이, 스케일러블 코덱들을 사용하는 고 비트-심도 비디오의 코딩을 위한 개선된 기술들이 바람직하다.
이 절에서 설명된 방법들은 추구될 수 있었던 방법들이지만, 반드시 이전에 계획되었거나 추구되었던 방법들은 아니다. 그러므로, 달리 명시되지 않는 한, 이 절에서 설명된 방법들 중 어느 것도 이 절에 단지 선행기술이 포함되었다고 해서 선행 기술로서 인정되는 것으로 가정되지 않아야 한다. 유사하게, 하나 이상의 방법들에 관하여 확인된 사안들은 달리 명시되지 않는 한, 이 절에 기초하여 어느 선행 기술에서 인식되었던 것으로 가정해서는 안된다.
본 발명의 일 실시예는 첨부된 도면들의 수치들에서 제한적인 방식이 아니라 예시적으로 도시되며, 유사한 참조 번호들은 유사한 요소들을 나타낸다.
본 발명에 따라, 고 비트-심도 비디오를 위한 스케일러블 비디오 코덱들에서 고 정밀 업-샘플링을 제공할 수 있다.
도 1은 본 발명의 일 실시예에 따른 스케일러블 코딩 시스템의 예시적인 구현을 나타내는 도면.
도 2는 본 발명의 일 실시예에 따른 스케일러블 디코딩 시스템의 예시적인 구현을 나타내는 도면.
도 3은 본 발명의 일 실시예에 따른 이미지 데이터 업-샘플링에 대한 예시적인 프로세스를 나타내는 도면.
고 비트-심도를 갖는 비디오 입력들의 스케일러블 코딩에서의 고-정밀 업-샘플링이 본 명세서에 기술된다. 중간 결과들의 비트-심도, 내부 입력 비트-심도 및 필터 정밀 비트-심도에 관련된 파라미터들이 주어지면, 스케일링 및 라운딩 요소들은 동작들의 정확성을 유지하기 위해 그리고 오버플로우(overflow)를 방지하기 위해 결정된다.
이하의 설명에서, 설명의 목적을 위해, 다수의 특정 세부사항들이 본 발명의 완전한 이해를 제공하기 위해 설명된다. 그러나, 본 발명이 이러한 특정 세부사항들 없이도 실행될 수 있다는 것이 명백할 것이다. 다른 예들에서, 잘 알려진 구조들 및 장치들은 본 발명을 불필요하게 모호하게 하는 것을 피하기 위해 아주 상세하게 설명되지 않는다.
본 명세서에서 설명된 예시적인 실시예들은 고 비트-심도를 갖는 비디오 신호들의 레이어드된 코딩 및 디코딩에서 고-정밀 업-샘플링에 관한 것이다. 비디오 코딩 또는 디코딩 시스템의 비트-심도 필요조건들, 입력 데이터 및 필터링 계수에 응답하여, 스케일링 및 라운딩 파라미터들은 분리가능한 업-스케일링 필터에 대해 결정된다. 입력 데이터는 제 1 업-샘플링된 데이터를 생성하기 위해 제 1 라운딩 파라미터를 사용하여 제 1 공간 방향으로 먼저 필터링된다. 제 1 중간 데이터는 제 1 시프트 파라미터를 사용하여 제 1 업-샘플링된 데이터를 스케일링함으로써 생성된다. 그 다음에 중간 데이터는 제 2 업-샘플링된 데이터를 생성하기 위해 제 2 라운딩 파라미터를 사용하여 제 2 공간 방향으로 필터링된다. 제 2 중간 데이터는 제 2 시프트 파라미터를 사용하여 제 2 업-샘플링된 데이터를 스케일링함으로써 생성된다. 최종 업-샘플링된 데이터는 제 2 중간 데이터를 클리핑(cliping)함으로써 생성될 수 있다.
고-정밀 분리가능한 업-샘플링
HDTV들, 셋톱 박스들 또는 블루레이 플레이어들과 같은 기존의 디스플레이와 플레이-백 장치들은 일반적으로 최대 1080p HD 해상도(예로서, 초당 60 프레임들에서 1920 x 1080)의 신호들을 지원한다. 소비자 애플리케이션들의 경우, 이러한 신호들은 일반적으로 크로마 성분들이 루마 성분보다 더 낮은 해상도를 갖는 루마-크로마(luma-chroma) 색 형식(예로서, YCbCr 또는 YUV 4:2:0 색 형식)에서의 색 구성요소 당 픽셀 당 8 비트의 비트-심도를 사용하여 일반적으로 현재 압축된다. 8-비트 심도 및 상응하는 낮은 동적 범위 때문에, 이러한 신호들은 일반적으로 표준 동적 범위(SDR:standard dynamic range)를 갖는 신호들로서 지칭된다.
초 고화질(UHD:Ultra High Definition)과 같은 새로운 텔레비전 규격들이 개발되고 있는 중이기 때문에, 스케일러블 형식에서 향상된 해상도 및/또는 더 높은 비트-심도를 가진 신호들을 인코딩하는 것이 바람직할 수 있다.
도 1은 스케일러블 인코딩 시스템의 예시적인 구현의 일 실시예를 나타낸다. 예시적인 일 실시예에서, 베이스 레이어(BL:base layer) 입력 신호(104)는 HD SDR 신호를 나타낼 수 있고 상위 레이어(EL:enhancement layer) 입력(102)은 고 비트-심도에서 UHD HDR(또는 SDR)신호를 나타낼 수 있다. BL 입력(104)은 코딩된 BL 비트스트림(107)을 생성하기 위해 BL 인코더(105)를 사용하여 압축된다(또는 인코딩된다). BL 인코더(105)는 MPEG-2, MPEG-4, part 2, H.264, HEVC, VP8 등과 같이 알려진 것들 또는 미래 비디오 압축 알고리즘들 중 어느 것이든 사용하여 BL 입력 신호(104)를 압축할 수 있거나 인코딩할 수 있다.
BL 입력(104)이 주어지면, 인코딩 시스템(100)은 코딩된 BL 비트스트림(107)뿐만 아니라 BL 신호(112)를 생성하고, BL 신호(112)는 상응하는 수신기에 의해 디코딩될 때 BL 신호(107)를 나타낸다. 일부 실시예들에서, 신호(112)는 BL 인코더(105) 다음의 별도의 BL 디코더(110)에 의해 생성될 수 있다. 일부 다른 실시예들에서, 신호(112)는 BL 인코더(105)에서 움직임 보상을 수행하기 위해 사용된 피드백 루프로부터 생성될 수 있다. 도 1에 도시된 바와 같이, 신호(112)는 레이어-간 처리 유닛(115)에 의해 프로세싱되어서 레이어-간 예측 프로세스(120)에 의해 사용되는 데에 적합한 신호를 생성할 수 있다. 일부 실시예들에서, 레이어-간 처리 유닛(115)은 신호(112)를 업-스케일 하여서 EL 입력(102)의 공간적 해상도를 매칭(예로서, HD 해상도에서 UHD 해상도로)할 수 있다. 레이어-간 예측(120) 단계 이후에, 잔류부분(residual)(127)이 계산되고, 그 잔류부분은 이후 코딩된 EL 비트스트림(132)을 생성하기 위해 EL 인코더(132)에 의해 코딩된다. BL 비트스트림(107)과 EL 비트스트림(132)은 일반적으로 적합한 수신기들로 전송되는 단일 코딩된 비트스트림으로 멀티플렉싱된다.
용어 SHVC는 고 효율 비디오 코딩(HEVC:High Efficiency Video Coding)[1]으로 알려진 비디오 압축 기술의 새로운 세대의 스케일러블 확장을 나타내고, 이것은 기존의 AVC(H.264) 규격[2]보다 더 높은 압축 능력을 충분히 가능하게 한다. SHVC는 현재 ISO/IEC MPEG 및 ITU-T WP3/16 그룹들에 의해 공동으로 개발되고 있는 중이다. SHVC의 중요한 측면들 중 하나는 공간적 스케일러빌리티(spatial scalability)이고, 레이어-간 텍스처 예측(예로서, 120 또는 210)은 가장 중요한 이득을 제공한다. SHVC 디코더의 예시가 도 2에 도시된다. 레이어-간 예측의 일부로서, 업-샘플링 프로세스(220)는, 상위 레이어(예로서, 202 또는 230)에서 수신된 데이터의 픽셀 해상도를 매칭(match)하기 위해, 베이스 레이어(215)로부터의 픽셀 데이터를 업-샘플링하거나 업-컨버팅(up-converts)한다. 일 실시예에서, 업-샘플링 프로세스는 업-샘플링 또는 인터폴레이션 필터(interpolation filter)를 적용함으로써 수행될 수 있다. H.264(SVC) 또는 SHVC SMuC0.1.1 소프트웨어[3]의 스케일러블 확장에서, 분리가능한 폴리-위상 업-샘플링/인터폴레이션 필터가 적용된다. 이러한 필터들이 표준 비트 심도를 갖는 입력 데이터(예로서, 색 구성요소 당 픽셀 당 8 비트를 사용하는 이미지들)를 통해 잘 수행하지만, 필터들은 고 비트-심도를 갖는 입력 데이터(예로서, 색 구성요소 당, 픽셀 당 10비트 이상을 사용하는 이미지들)에 대해 오버플로우(overflow)할 수 있다.
2D 업-샘플링 또는 인터폴레이션 프로세스들에서, 일반적인 방법은 프로세싱 복잡도를 감소하기 위해 분리가능한 필터들을 적용하는 것이다. 이러한 필터는 먼저 하나의 공간적 방향(예로서, 수평 또는 수직)에서 그 다음에 다른 방향(예로서, 수직 또는 수평)에서 이미지를 업-샘플링한다. 일반성의 손실없이, 이후의 설명에서, 수직 업-샘플링이 수평 업-샘플링을 따른다는 것이 가정된다. 그 이후, 필터링 프로세스는 다음과 같이 설명될 수 있다:
수평 업-샘플링:
Figure pat00003
수직 업-샘플링:
Figure pat00004
Figure pat00005
는 폴리-위상 업-샘플링 필터 계수들을 저장하고,
Figure pat00006
는 재구성된 베이스 레이어로부터 기준 샘플 값들을 포함하고,
Figure pat00007
는 제 1-D 필터링 이후에 중간 값을 저장하고,
Figure pat00008
는 제 2 1D 필터링 이후에 마지막 값을 저장하고,
Figure pat00009
와
Figure pat00010
는 업-샘플링을 위한 상대적인 픽셀 위치에 대응하고,
Figure pat00011
는 스케일링 또는 표준화 파라미터를 나타내고,
Figure pat00012
은 라운딩 파라미터를 나타내고,
Figure pat00013
은 클리핑(clipping) 함수를 나타낸다. 예를 들어, 데이터
Figure pat00014
와 임계값들 A와 B가 주어진다면, 일 예시적인 실시예에서, 함수
Figure pat00015
는 다음을 나타낸다.
Figure pat00016
예를 들어, N-비트 이미지 데이터에 대해, A와 B의 예시적인 값들은
Figure pat00017
과
Figure pat00018
을 포함할 수 있다. 식(2)에서, 연산
Figure pat00019
은
Figure pat00020
의 이진 표현을
Figure pat00021
비트만큼 오른쪽으로 이동시킴으로써
Figure pat00022
가
Figure pat00023
로 나누어 지는 것(예로서,
Figure pat00024
)을 나타낸다 식(1)에서, 제 1 스테이지 필터링에 대해서, 어떠한 클리핑 또는 이동 연산자들이 적용되지 않는다는 것을 알 수 있다. 이러한 구현중에, 수평 및 수직 필터링의 순서는 중요하지 않다. 수직 필터링을 먼저 적용하고 그 이후에 수평 필터링을 적용하는 것은 수평 필터링을 먼저 적용하고 그 이후에 수직 필터링을 적용하는 것과 동일한 결과들을 낸다.
SMuC0.01[3]에서,
Figure pat00025
의 필터 정밀(US_FILTER_PREC 으로 표시)은 6비트로 설정된다.
Figure pat00026
의 내부 비트-심도가 8비트일 때,
Figure pat00027
는 목표 구현 비트 심도(예로서, 14 또는 16비트)내에서 유지될 수 있다. 그러나,
Figure pat00028
의 내부 비트-심도가 8비트 이상(예로서, 10비트)일 때. 식(1)의 출력은 오버플로우 할 수 있다.
일 실시예에서, 이러한 오버플로우는 다음에 의해 방지될 수 있다:(a) 업-샘플링 프로세스에서 동작들의 순서를 고정함으로써 및 (b) 중간 스케일링 동작들을 포함함으로써. 일 실시예에서, 수평 필터링이 수직 필터링보다 선행할 때, 업-샘플링은 다음과 같이 구현될 수 있다.
수평 업-샘플링:
Figure pat00029
수직 업-샘플링
Figure pat00030
일반성을 잃지 않고, INTERM_BITDEPTH가 중간 필터 프로세싱에 대한 비트-심도(또는 비트 해상도) 필요조건을 나타내도록 한다; 즉, 어떠한 결과도 INTERM_BITDEPTH(예로서, INTERM_BITDEPTH=16)보다 더 많은 비트들로 표현될 수 없다. INTERNAL_INPUT_BITDEPTH가 프로세서에서 입력 비디오 신호를 표현하기 위해 사용된 비트-심도를 나타내도록 한다. INTERNAL_INPUT_BITDEPTH는 입력 신호의 본래의 비트-심도와 동일하거나 더 클 수 있다는 것을 유념하라. 예를 들어, 일부 실시예들에서, 8-비트 입력 비디오 데이터는 내부적으로 INTERNAL_INPUT_BITDEPTH=10을 사용하여 표현될 수 있다. 대안으로, 또 다른 예시에서, 14-비트 입력 비디오가 INTERNAL_INPUT_BITDEPTH=14로 표현될 수 있다.
일 실시예에서, 식들(3)과 (4)에서의 스케일링 파라미터들은 다음과 같이 계산될 수 있다.
Figure pat00031
Figure pat00032
일 실시예에서, nShift1과 nShift2 값들은 음의 값이 되는 것이 허용될 수 없다. 예를 들어, nShift1에 대한 음의 값은 중간 결과들에 대해 허용된 비트 해상도가 오버 플로우를 방지하기에 충분한 것 보다 더 많다는 것을 나타낸다; 그러므로, 음의 값일 때, nShift1은 0으로 설정된다.
라운딩이 (3)과 (4)(가장 높은 복잡도, 가장 높은 정밀도)둘 모두에서 사용된다면:
Figure pat00033
Figure pat00034
는
Figure pat00035
비트 만큼의 "1"의 이진 좌측 이동을 나타낸다, 즉.
Figure pat00036
대안으로, 어떠한 라운딩도 (3)과 (4)(가장 낮은 복잡도, 가장 낮은 정밀도) 둘 모두에서 사용되지 않을 때:
Figure pat00037
Figure pat00038
대안으로, 라운딩이 (3)에서 사용되고 (4)에서 사용되지 않는다면:
Figure pat00039
대안으로, 라운딩이 (4)에서 사용되고 (3)에서 사용되지 않는다면(일반적인 경우)
Figure pat00040
예시적인 일 실시예에서, INTERM_BITDEPTH=14, US_FILTER_PREC=6 및 INTERNAL_INPUT_BITDEPTH=8 이라고 두자, 그러면, 식(5)와 (6)으로부터, nShift1=0 그리고 nShift2=12이다. 또 다른 예시에서, US_FILTER_PREC = 6에 대해, INTERN AL_INPUT_BITDEPTH =10 이고 INTERM_BITDEPTH = 14라면, 선택된 라운딩 모드에 따라서, nShiftl = 2 이고 iOffsetl = 0또는 2이다. 더욱이, 선택된 라운딩 모드에 따라서, nShift2=10 iOFFset2=0 또는
Figure pat00041
이다.
그러므로, 식들 (3)과 (4)에 표시된 구현을 사용하여, 수직 필터링 다음 수평 필터링을 하는 것은 수평 필터링 다음 수직 필터링을 하는 것과 상이한 결과들을 낼 수 있다는 것을 알 수 있다. 디코더에서, 알맞은 필터링이, 모든 디코더들(예로서, 디코딩 표준 또는 사양서)에 의해 고정되고 미리 결정될 수 있거나, 일부 실시예들에서 알맞은 순서가 메타데이터 내의 적절한 플래그를 사용하여 인코더에 의해 디코더로의 시그널링 될 수 있다.
도 3은 본 발명의 일 실시예에 따른 이미지 데이터 업-샘플링에 대한 예시적인 프로세스를 나타낸다. 첫 번째 단계(305), 레이어드된 코딩 시스템에서의 인코더 또는 디코더는 알맞은 필터링 순서(예로서, 수평 필터링에 뒤이은 수직 필터링)와 스케일링 및 라운딩 파라미터들을 결정한다. 일 실시예에서, 스케일링 및 라운딩 파라미터들은 중간 저장(예로서, INTERM_BITDEPTH), 필터 계수들(예로서, US_FILTER_PREC) 및 내부 입력 표시(예로서, INTERNAL_INPUT_BITDEPTH)에 대한 필수 비트 심도들을 기초로 하여 식들 (5)-(14)에 따라 결정될 수 있다. 단계 310에서, 이미지 데이터는 제 1 방향(예로서, 수평)에서 업-샘플링 된다. 이러한 단계의 출력 결과들은 제 1 시프트 파라미터(예로서, nShift1) 및 제 1 라운딩 파라미터(예로서, iOffset1)를 사용하여 중간 저장 전에 라운딩되고 스케일링된다. 그 다음 단계(315), 중간 결과들은 제 2 방향(예로서 수직의)에서 업-샘플링된다. 이러한 단계의 출력 결과들은 제 2 시프트 파라미터(예로서, nShift2)와 제 2 라운딩 파라미터(예로서, iOffset2)를 사용하여 라운딩되고 스케일링된다. 마지막 단계(320), 제 2 단계의 출력 데이터는 마지막 출력 또는 저장 전에 클리핑된다.
본 명세서에 설명된 방법들은 또한 다른 이미징 애플리케이션들에 적용될 수 있고, 상기 다른 이미징 애플리케이션들은 다운-스케일링, 노이즈 필터링 또는 주파수 변환들과 같은 고 비트-심도 이미지 데이터의 분리가능한 필터링을 사용한다.
예시적인 컴퓨터 시스템 구현
본 발명의 실시예들은 컴퓨터 시스템, 전자 회로 및 구성요소들에 구성된 시스템들, 마이크로제어기와 같은 집적 회로(IC:integrated circuit) 디바이스, 필드 프로그래머블 게이트 배열(FPGA:field programmable gate array) 또는 또 다른 구성가능한 또는 프로그래머블 로직 디바이스(PLD:programmable logic device), 이산 시간 또는 디지털 신호 프로세서(DSP), 주문형 반도체 IC(ASIC:application specific IC) 및/또는 하나 이상의 이러한 시스템들, 디바이스들 또는 구성요소들을 포함하는 장치로 구현될 수 있다. 컴퓨터 및/또는 IC는 본 명세서에 설명된 이러한 것들과 같은 고-정밀 업-샘플링과 관련된 명령어들을 수행하고, 제어하고 또는 실행할 수 있다. 컴퓨터 및/또는 IC는 본 명세서에 설명된 고-정밀 업-샘플링과 관련된 다양한 파라미터들 또는 값들의 어느 것이든 계산할 수 있다. 인코딩 및 디코딩 실시예들은 하드웨어, 소프트웨어, 펌웨어 및 다양한 이들의 조합들로 구현될 수 있다.
본 발명의 어떤 실시예들은 프로세서들로 하여금 본 발명의 방법을 수행하도록 하는 소프트웨어 명령어들을 실행하는 컴퓨터 프로세서들을 포함한다. 예를 들어, 디스플레이내의 하나 이상의 프로세스들, 인코더, 셋톱박스, 트랜스코더(transcoder) 등은 프로세서들에 접근할 수 있는 프로그램 메모리에서 소프트웨어 명령어들을 실행함으로써 상기 설명된 고-정밀 업-샘플링과 관련한 방법들을 실시할 수 있다. 본 발명은 또한 프로그램 제품의 형태로 제공될 수 있다. 프로그램 제품은 데이터 프로세서에 의해 실행될 때, 데이터 프로세서로 하여금 본 발명의 방법을 실행하도록 하는 명령어들을 포함하는 컴퓨터-판독가능한 신호들의 세트를 캐리하는(carry) 임의의 매체를 포함할 수 있다. 본 발명에 따른 프로그램 제품들은 매우 다양한 형태들 중 어느 것을 취할 수 있다. 프로그램 제품은 예를 들어, 플로피 디스켓들(floppy diskettes), 하드 디스크 드라이브들, CD ROM들을 포함한 광학 데이터 저장 매체, DVD들, ROM들을 포함한 전자 데이터 저장 매체, 플래시 RAM, 또는 이와 유사한 것들을 포함한 마그네틱 데이터 저장 매체와 같은 물리적 매체를 포함할 수 있다. 프로그램 제품상의 컴퓨터-판독가능한 신호들은 선택적으로 압축될 수 있거나 암호화될 수 있다.
구성요소(예로서, 소프트웨어 모듈, 프로세서, 어셈블리(assembly), 디바이스, 회로 등)가 상기에 언급되고, 달리 명시되지 않는 한, 그 구성요소("수단들"(means)에 대한 참조를 포함하는)에 대한 참조는 본 발명의 도시된 예시적인 실시예들에서의 함수를 수행하는 개시된 구조와 구조적으로 동일하지 않은 구성요소들을 포함한 설명된 구성요소(예로서, 그것은 기능적으로 동일하다)의 함수를 수행하는 임의의 구성요소를 구성하고 있는 것과 동일한 것 만큼 포함하는 것으로 해석되어야 한다.
등가물들, 확장들, 대안들 및 기타 사안
이와 같이 고 비트-심도 비디오의 스케일러블 코딩에서 고-정밀 업-샘플링에 관련된 예시적인 실시예들이 설명된다. 전술한 명세서에서, 본 발명의 실시예들은 구현에 따라 달라질 수 있는 다수의 특정 세부사항들에 관하여 설명되었다. 그러므로, 본 발명이 무엇인지 출원인들에 의해 본 발명이 되는 것으로 의도되는 유일하고 배타적인 지표는 임의의 후속 수정을 포함하여 청구 범위가 기술하는 특정 형태에서, 본 출원으로부터 발행하는 특허 청구 범위에 기재된 바와 같은 형태이다. 이러한 청구항들에서 포함된 용어들에 대해 본 명세서에서 명백히 설명된 어떠한 정의들도 청구항들에서 사용된 이러한 용어들의 의미를 좌우할 수 있다. 그러므로, 청구항에서 명백히 언급되지 않은 제한, 요소, 특성, 기능, 장점 또는 속성은 이러한 청구항의 범위를 어떤식으로든 제한해서는 안 된다. 명세서와 도면들은, 따라서, 제한적인 의미보다는 예시적인 것으로 간주되어야 한다.
참고문헌
[1] B. Bross, W.-J. Han, G. J. Sullivan, J.-R. Ohm, and T. Wiegand, "High efficiency video coding (HEVC) text specification draft 9," ITU-T/ISO/IEC Joint Collaborative Team on Video Coding (JCT-VC) document JCTVC-K1003, Oct. 2012.
[2] ITU-T and ISO/IEC JTC 1, "Advanced Video Coding for generic audio-visual services," ITU T Rec. H.264 and ISO/IEC 14496-10 (AVC)
[3] SMuCO.1.1 software for SHVC (scalable extension of HEVC):
http://hevc.hhi.fraunhofer.de/svn SMuCSoftware/tags/0.1.1/.
100: 인코딩 시스템; 105: BL 인코더; 110: BL 디코더;
120: 레이어-간 예측 프로세스

Claims (9)

  1. 이미지 데이터를 제 1 비디오 레이어에서 제 2 비디오 레이어로 업-샘플링하기 위한 장치에 있어서:
    제 1 비디오 레이어에서 이미지 데이터를 수신하는 입력;
    프로세서로서,
    상기 제 1 비디오 레이어로부터 상기 이미지 데이터를 필터링함으로써 제 1 업-샘플링된 데이터를 생성하는 단계로서, 상기 이미지 데이터의 상기 필터링은 제 1 공간 방향으로 수행되는, 상기 제 1 업-샘플링된 데이터 생성 단계;
    제 1 시프트 파라미터를 통해 상기 제 1 업-샘플링된 데이터를 스케일링함으로써 제 1 중간 데이터를 생성하는 단계;
    상기 제 1 중간 데이터를 필터링함으로써 제 2 업-샘플링된 데이터를 생성하는 단계로서, 상기 제 1 중간 데이터의 상기 필터링은 제 2 라운딩 파라미터를 사용하여 제 2 공간 방향으로 수행되는, 상기 제 2 업-샘플링된 데이터 생성 단계;
    제 2 시프트 파라미터를 통해 상기 제 2 업-샘플링된 데이터를 스케일링함으로써 제 2 중간 데이터를 생성하는 단계; 및
    상기 제 2 중간 데이터를 클리핑(cliping)함으로써 상기 제 2 레이어에 대한 출력 업-샘플링된 데이터를 생성하는 단계를 행하는, 상기 프로세서를 포함하고,
    상기 제 2 시프트 파라미터는 상기 제 1 비디오 레이어의 상기 이미지 데이터의 비트 심도 값에 기초하고, 상기 제 2 라운딩 파라미터를 결정하는 단계는, iOffset2 = 1 << (nShift2 - 1)를 계산하는 단계를 포함하고,
    iOffset2는 상기 제 2 라운딩 파라미터이고, nShift2는 상기 제 2 시프트 파라미터인, 이미지 데이터를 제 1 비디오 레이어에서 제 2 비디오 레이어로 업-샘플링하기 위한 장치.
  2. 제 1 항에 있어서,
    제 1 시프트 파라미터는 상기 이미지 데이터의 비트 심도 값, 필터링 정밀 비트 심도, 및 중간 프로세싱 비트 심도에 기초하는, 이미지 데이터를 제 1 비디오 레이어에서 제 2 비디오 레이어로 업-샘플링하기 위한 장치.
  3. 제 2 항에 있어서,
    상기 제 1 시프트 파라미터를 결정하는 단계는, 상기 필터링 정밀 비트 심도로에 대한 상기 중간 프로세싱 비트 심도의 차를 상기 이미지 데이터의 상기 비트 심도 값에 더하는 단계를 포함하는, 이미지 데이터를 제 1 비디오 레이어에서 제 2 비디오 레이어로 업-샘플링하기 위한 장치.
  4. 제 2 항에 있어서,
    상기 제 2 시프트 파라미터를 결정하는 단계는, 상기 제 1 시프트 파라미터를 상기 필터링 정밀 비트 심도의 두 배로부터 빼는 단계를 포함하는, 이미지 데이터를 제 1 비디오 레이어에서 제 2 비디오 레이어로 업-샘플링하기 위한 장치.
  5. 제 4 항에 있어서,
    상기 제 2 시프트 파라미터를 결정하는 단계는, 상기 이미지 데이터의 상기 비트 심도 값을 상기 필터링 정밀 비트 심도와 상기 중간 프로세싱 비트 심도의 합으로부터 빼는 단계를 포함하는, 이미지 데이터를 제 1 비디오 레이어에서 제 2 비디오 레이어로 업-샘플링하기 위한 장치.
  6. 제 3 항에 있어서,
    14 비트의 중간 프로세싱 비트 심도 및 6 비트의 필터링 정밀 비트 심도일 때,
    nShift1 = bitdepth + (6 - 14) = bitdepth - 8 이고,
    nShift1는 상기 제 1 시프트 파라미터이고, bitdepth는 상기 이미지 데이터의 상기 비트 심도 값인, 이미지 데이터를 제 1 비디오 레이어에서 제 2 비디오 레이어로 업-샘플링하기 위한 장치.
  7. 제 5 항에 있어서,
    14 비트의 중간 프로세싱 비트 심도 및 6 비트의 필터링 정밀 비트 심도일 때,
    nShift2 = 20 - bitdepth 이고,
    nShift2는 상기 제 2 시프트 파라미터이고, bitdepth는 상기 이미지 데이터의 상기 비트 심도 값인, 이미지 데이터를 제 1 비디오 레이어에서 제 2 비디오 레이어로 업-샘플링하기 위한 장치.
  8. 제 1 항에 있어서,
    상기 제 1 공간 방향은 수평 방향이고, 상기 제 2 공간 방향은 수직 방향인, 이미지 데이터를 제 1 비디오 레이어에서 제 2 비디오 레이어로 업-샘플링하기 위한 장치.
  9. 제 1 항에 있어서,
    상기 제 1 공간 방향은 수직 방향이고, 상기 제 2 공간 방향은 수평 방향인, 이미지 데이터를 제 1 비디오 레이어에서 제 2 비디오 레이어로 업-샘플링하기 위한 장치.
KR1020197013074A 2012-12-21 2013-12-04 고 비트-심도 비디오의 스케일러블 코딩에서의 고 정밀 업-샘플링 KR102052876B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201261745050P 2012-12-21 2012-12-21
US61/745,050 2012-12-21
PCT/US2013/073006 WO2014099370A1 (en) 2012-12-21 2013-12-04 High precision up-sampling in scalable coding of high bit-depth video

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020177014064A Division KR101985647B1 (ko) 2012-12-21 2013-12-04 고 비트-심도 비디오의 스케일러블 코딩에서의 고 정밀 업-샘플링

Publications (2)

Publication Number Publication Date
KR20190052165A true KR20190052165A (ko) 2019-05-15
KR102052876B1 KR102052876B1 (ko) 2019-12-09

Family

ID=50031497

Family Applications (4)

Application Number Title Priority Date Filing Date
KR1020177014064A KR101985647B1 (ko) 2012-12-21 2013-12-04 고 비트-심도 비디오의 스케일러블 코딩에서의 고 정밀 업-샘플링
KR1020157016476A KR101694139B1 (ko) 2012-12-21 2013-12-04 고 비트-심도 비디오의 스케일러블 코딩에서의 고 정밀 업-샘플링
KR1020197013074A KR102052876B1 (ko) 2012-12-21 2013-12-04 고 비트-심도 비디오의 스케일러블 코딩에서의 고 정밀 업-샘플링
KR1020167024774A KR20160110546A (ko) 2012-12-21 2013-12-04 고 비트-심도 비디오의 스케일러블 코딩에서의 고 정밀 업-샘플링

Family Applications Before (2)

Application Number Title Priority Date Filing Date
KR1020177014064A KR101985647B1 (ko) 2012-12-21 2013-12-04 고 비트-심도 비디오의 스케일러블 코딩에서의 고 정밀 업-샘플링
KR1020157016476A KR101694139B1 (ko) 2012-12-21 2013-12-04 고 비트-심도 비디오의 스케일러블 코딩에서의 고 정밀 업-샘플링

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020167024774A KR20160110546A (ko) 2012-12-21 2013-12-04 고 비트-심도 비디오의 스케일러블 코딩에서의 고 정밀 업-샘플링

Country Status (12)

Country Link
US (6) US10165288B2 (ko)
EP (2) EP2936820B1 (ko)
JP (2) JP6034983B2 (ko)
KR (4) KR101985647B1 (ko)
CN (3) CN108055542B (ko)
BR (2) BR122017002044B1 (ko)
HK (1) HK1208577A1 (ko)
IN (1) IN2015MN01331A (ko)
MY (2) MY202235A (ko)
RU (4) RU2610589C2 (ko)
TW (3) TWI521946B (ko)
WO (1) WO2014099370A1 (ko)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9924166B2 (en) * 2012-08-06 2018-03-20 Vid Scale, Inc. Sampling grid information for spatial layers in multi-layer video coding
JP5926465B2 (ja) * 2013-01-02 2016-05-25 ドルビー ラボラトリーズ ライセンシング コーポレイション 向上ダイナミックレンジをもつ超高精細度ビデオ信号のための後方互換な符号化
US9497473B2 (en) * 2013-10-03 2016-11-15 Qualcomm Incorporated High precision explicit weighted prediction for video coding
MX358934B (es) * 2014-06-26 2018-09-10 Panasonic Ip Man Co Ltd Dispositivo de salida de datos, metodo de salida de datos y metodo de generacion de datos.
BR112017013624B1 (pt) 2015-02-17 2019-10-29 Dolby Laboratories Licensing Corp predição intercamada para sinais com uma faixa dinâmica aprimorada
US10257524B2 (en) * 2015-07-01 2019-04-09 Mediatek Inc. Residual up-sampling apparatus for performing transform block up-sampling and residual down-sampling apparatus for performing transform block down-sampling
CN107852502B (zh) 2015-07-28 2021-07-20 杜比实验室特许公司 用于增强视频信号的位深的方法、编码器、解码器和***
US11115868B2 (en) 2017-05-15 2021-09-07 Samsung Electronics Co., Ltd. Method and apparatus for control resource set configuration and monitoring of downlink control channel in wireless communication system
US10609372B2 (en) * 2017-09-29 2020-03-31 Dolby Laboratories Licensing Corporation Up-conversion to content adaptive perceptual quantization video signals
US20200322656A1 (en) * 2019-04-02 2020-10-08 Nbcuniversal Media, Llc Systems and methods for fast channel changing
US11375219B2 (en) * 2019-09-24 2022-06-28 Tencent America LLC Coding method and system with improved dynamic internal bit depth
US11082473B1 (en) * 2020-03-15 2021-08-03 Tfi Digital Media Limited Method for complexity reduction in video coding by coding parameters reuse

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1353514A2 (en) * 2002-04-10 2003-10-15 Microsoft Corporation Sub-pixel interpolation in motion estimation and compensation
US20070160153A1 (en) * 2006-01-06 2007-07-12 Microsoft Corporation Resampling and picture resizing operations for multi-resolution video coding and decoding
JP2008533908A (ja) * 2005-03-18 2008-08-21 シャープ株式会社 画像アップサンプリング方法およびシステム
KR20080092425A (ko) * 2006-01-10 2008-10-15 노키아 코포레이션 스케일링가능한 비디오 코딩을 위한 스위치드 필터업-샘플링 메커니즘

Family Cites Families (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7227895B1 (en) * 2000-12-12 2007-06-05 Sony Corporation System and method for generating decoded digital video image data
US7929610B2 (en) * 2001-03-26 2011-04-19 Sharp Kabushiki Kaisha Methods and systems for reducing blocking artifacts with reduced complexity for spatially-scalable video coding
WO2002089046A1 (en) * 2001-04-26 2002-11-07 Georgia Tech Research Corporation Video enhancement using multiple frame techniques
US7305034B2 (en) 2002-04-10 2007-12-04 Microsoft Corporation Rounding control for multi-stage interpolation
NO319629B1 (no) * 2003-11-28 2005-09-05 Tandberg Telecom As Fremgangsmate for korrigering av interpolerte pikselverdier
US7379587B2 (en) * 2004-02-12 2008-05-27 Xerox Corporation Systems and methods for identifying regions within an image having similar continuity values
KR100679022B1 (ko) 2004-10-18 2007-02-05 삼성전자주식회사 계층간 필터링을 이용한 비디오 코딩 및 디코딩방법과,비디오 인코더 및 디코더
US7961963B2 (en) * 2005-03-18 2011-06-14 Sharp Laboratories Of America, Inc. Methods and systems for extended spatial scalability with picture-level adaptation
CN101213590B (zh) * 2005-06-29 2011-09-21 松下电器产业株式会社 可扩展解码装置及丢失数据插值方法
US7561478B2 (en) 2005-06-30 2009-07-14 Seiko Epson Corporation Integrated circuit device and electronic instrument
JP2007028393A (ja) * 2005-07-20 2007-02-01 Matsushita Electric Ind Co Ltd 双方向予測符号化ピクチャの直接モードブロックの動きベクトルを求める方法
KR100718135B1 (ko) * 2005-08-24 2007-05-14 삼성전자주식회사 멀티 포맷 코덱을 위한 영상 예측 장치 및 방법과 이를이용한 영상 부호화/복호화 장치 및 방법
CN101568036A (zh) * 2005-10-11 2009-10-28 华为技术有限公司 对空间分层编码视频图像的上采样方法及其***
US8948260B2 (en) 2005-10-17 2015-02-03 Qualcomm Incorporated Adaptive GOP structure in video streaming
US8880571B2 (en) * 2006-05-05 2014-11-04 Microsoft Corporation High dynamic range data format conversions for digital media
WO2008007792A1 (en) * 2006-07-10 2008-01-17 Sharp Kabushiki Kaisha Methods and systems for combining layers in a multi-layer bitstream
EP3484154A1 (en) * 2006-10-25 2019-05-15 GE Video Compression, LLC Quality scalable coding
US20080101467A1 (en) * 2006-10-27 2008-05-01 Radiospire Networks, Inc. Method and system for secure and efficient wireless transmission of HDCP-encrypted HDMI/DVI signals
KR20080067922A (ko) * 2007-01-17 2008-07-22 삼성전자주식회사 영상 축소 기능을 갖는 영상 복호화 방법 및 장치
US8107571B2 (en) * 2007-03-20 2012-01-31 Microsoft Corporation Parameterized filters and signaling techniques
WO2009003499A1 (en) * 2007-06-29 2009-01-08 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Scalable video coding supporting pixel value refinement scalability
DK2279622T3 (en) * 2008-04-16 2015-01-12 Fraunhofer Ges Forschung Bit depth scalability
US9571856B2 (en) * 2008-08-25 2017-02-14 Microsoft Technology Licensing, Llc Conversion operations in scalable video encoding and decoding
TWI383684B (zh) 2008-11-18 2013-01-21 Univ Nat Taiwan 多媒體串流之動態視訊編碼系統與方法
JP5688773B2 (ja) * 2009-02-03 2015-03-25 トムソン ライセンシングＴｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ ビット深度スケーラビリティにおける平滑参照フレームを用いた動き補償のための方法および装置
CN101827264A (zh) * 2009-03-06 2010-09-08 刘永 分层式自适应的视频帧采样方法
US9112618B2 (en) 2009-07-02 2015-08-18 Qualcomm Incorporated Coding latency reductions during transmitter quieting
US9161057B2 (en) * 2009-07-09 2015-10-13 Qualcomm Incorporated Non-zero rounding and prediction mode selection techniques in video encoding
TW201119396A (en) 2009-11-24 2011-06-01 Hon Hai Prec Ind Co Ltd Multi-standard video decoding system and method
WO2011084918A1 (en) * 2010-01-06 2011-07-14 Dolby Laboratories Licensing Corporation High performance rate control for multi-layered video coding applications
WO2011127964A2 (en) * 2010-04-13 2011-10-20 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus for intra predicting a block, apparatus for reconstructing a block of a picture, apparatus for reconstructing a block of a picture by intra prediction
US9185422B2 (en) 2010-07-15 2015-11-10 Qualcomm Incorporated Variable localized bit-depth increase for fixed-point transforms in video coding
US9532059B2 (en) * 2010-10-05 2016-12-27 Google Technology Holdings LLC Method and apparatus for spatial scalability for video coding
US20120082243A1 (en) * 2010-10-05 2012-04-05 General Instrument Corporation Method and Apparatus for Feature Based Video Coding
US8880573B2 (en) * 2010-10-12 2014-11-04 Dolby Laboratories Licensing Corporation System and method of dynamic precision operations
US9137539B2 (en) * 2010-12-22 2015-09-15 Panasonic Corporation Image coding apparatus, image decoding apparatus, image coding method, and image decoding method
CN103621081B (zh) * 2011-06-10 2016-12-21 寰发股份有限公司 可伸缩视频编码方法及装置
US9674521B2 (en) * 2011-06-28 2017-06-06 Samsung Electronics Co., Ltd. Prediction method and apparatus for chroma component of image using luma component of image
US9055304B2 (en) * 2011-07-01 2015-06-09 Qualcomm Incorporated Reduced resolution pixel interpolation
US10616581B2 (en) * 2012-01-19 2020-04-07 Huawei Technologies Co., Ltd. Modified coding for a transform skipped block for CABAC in HEVC
US10136144B2 (en) * 2012-05-21 2018-11-20 Mediatek Singapore Pte. Ltd. Method and apparatus of inter-layer filtering for scalable video coding
US9420280B2 (en) * 2012-06-08 2016-08-16 Qualcomm Incorporated Adaptive upsampling filters
CN102740078B (zh) * 2012-07-12 2014-10-22 北方工业大学 基于hevc标准的自适应空间可伸缩编码
RU2015104944A (ru) 2012-07-16 2016-09-10 Формулатрикс, Инк. Аппарат, способ и система подачи жидкости

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1353514A2 (en) * 2002-04-10 2003-10-15 Microsoft Corporation Sub-pixel interpolation in motion estimation and compensation
JP2008533908A (ja) * 2005-03-18 2008-08-21 シャープ株式会社 画像アップサンプリング方法およびシステム
US20070160153A1 (en) * 2006-01-06 2007-07-12 Microsoft Corporation Resampling and picture resizing operations for multi-resolution video coding and decoding
KR20080092425A (ko) * 2006-01-10 2008-10-15 노키아 코포레이션 스케일링가능한 비디오 코딩을 위한 스위치드 필터업-샘플링 메커니즘

Also Published As

Publication number Publication date
CN104871545B (zh) 2018-02-23
US20210281866A1 (en) 2021-09-09
KR101694139B1 (ko) 2017-01-10
US20220174297A1 (en) 2022-06-02
US10958922B2 (en) 2021-03-23
RU2017102758A (ru) 2018-12-20
RU2718159C1 (ru) 2020-03-30
EP2936820B1 (en) 2020-07-15
US11792416B2 (en) 2023-10-17
MY202235A (en) 2024-04-18
BR122017002044B1 (pt) 2022-12-20
CN108055543A (zh) 2018-05-18
US20200021825A1 (en) 2020-01-16
JP6034983B2 (ja) 2016-11-30
IN2015MN01331A (ko) 2015-08-14
US11284095B2 (en) 2022-03-22
RU2015123238A (ru) 2017-01-10
KR20160110546A (ko) 2016-09-21
KR20170060185A (ko) 2017-05-31
TWI597968B (zh) 2017-09-01
CN104871545A (zh) 2015-08-26
CN108055542B (zh) 2021-08-13
US10165288B2 (en) 2018-12-25
KR101985647B1 (ko) 2019-06-04
JP6272419B2 (ja) 2018-01-31
EP3734975A1 (en) 2020-11-04
US11570455B2 (en) 2023-01-31
US20230164335A1 (en) 2023-05-25
CN108055543B (zh) 2021-08-17
TW201433148A (zh) 2014-08-16
JP2017028713A (ja) 2017-02-02
TW201731291A (zh) 2017-09-01
TWI521946B (zh) 2016-02-11
CN108055542A (zh) 2018-05-18
TW201608873A (zh) 2016-03-01
WO2014099370A1 (en) 2014-06-26
US20190058892A1 (en) 2019-02-21
JP2016507947A (ja) 2016-03-10
BR112015014277A2 (pt) 2017-07-11
BR122017002044A2 (pt) 2019-09-03
US20150350661A1 (en) 2015-12-03
TWI618397B (zh) 2018-03-11
BR112015014277B1 (pt) 2022-12-13
KR20150090148A (ko) 2015-08-05
RU2728738C1 (ru) 2020-07-30
HK1208577A1 (en) 2016-03-04
EP2936820A1 (en) 2015-10-28
US10516889B2 (en) 2019-12-24
RU2610589C2 (ru) 2017-02-13
KR102052876B1 (ko) 2019-12-09
MY181150A (en) 2020-12-19

Similar Documents

Publication Publication Date Title
US11792416B2 (en) High precision up-sampling in scalable coding of high bit-depth video
EP2941872B1 (en) Backward-compatible coding for ultra high definition video signals with enhanced dynamic range

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant