KR20070083168A - 마크로 블록 기반 가중치 예측 기반 멀티 뷰 비디오 부호화및 복호화 장치 및 그 방법 - Google Patents

Abstract

본 발명은 P,B 프레임 및 다중 참조 프레임 상에서도 마크로 블록단위로 밝기값 보정을 효과적으로 할 수 있는 방법 및 장치가 개시된다. 본 발명은 멀티 뷰 혹은 단일 뷰의 비디오 코딩시 코딩 효율을 높이기 위해 뷰 간 혹은 프레임간에 밝기 값 보정을 하는 과정에서 단일의 프레임을 참조하는 경우뿐 아니라 두 개 이상의 프레임을 참조하는 경우에도 밝기 값 보정을 효과적으로 할 수 있는 방법과 장치에 관한 것이다.

참조 영상 밝기 값 보정을 위한 기존의 방법으로는 H.264/AVC의 가중치 예측 이 있지만, 이 방법은 슬라이스 단위로 가중치 예측을 적용하여, 기울기와 오프셋을 구하게 된다. 기존의 방법은 현재 슬라이스에 대해 참조 슬라이스 각각을 적용하여 슬라이스의 개수만큼 구하기 때문에 참조 영상의 개수와 슬라이스 내부 마크로 블록의 모드 값들이 큰 문제가 되지 않았다. 하지만 마크로 블록 단위로 가중치예측을 적용할 경우, H.264/AVC는 한 마크로 블록당 최대 16개의 블록들이 존재할 수 있고 참조 영상의 숫자도 정해져 있지 않기 때문에 이에 대한 모든 기울기와 오프셋을 계산하여 첨부한다는 것은 추가 정보에 대한 부담이 매우 커지게 되는 문제가 발생한다. 특히 멀티뷰 비디오 코딩에서는 참조영상을 시간상의 앞뒤 영상들만을 이용하는 것이 아니라 주변 뷰의 영상들도 이용하기 때문에 참조 구조 및 정보는 훨씬 더 복잡해 진다. 이에 본 발명은 추정 마크로 블록을 통해 가중치 예측을 함으로써 추가적인 정보에 대한 부담을 최소화하는 가중치 예측 방법과 이를 통해 멀티뷰 비디오 코딩을 효율적으로 할 수 있는 방법 및 장치를 제안한다.

한 마크로 블록에 대한 효율적인 코딩을 위해 H.264/AVC에서는 모든 블록모드를 참조영상의 수만큼 적용하여 현재의 프레임을 가장 잘 코딩할 수 있는 블록모드와 움직임 백터를 구한다. 가중치 예측은 가중치를 영상에 적용하고 움직임을 예측함으로써 좀 더 코딩을 잘 해보고자 하는 기술이다. 본 발명은 기존의 가중치 예측 방법처럼 움직임 예측을 하기 전에 기울기와 오프셋을 현재 슬라이스의 밝기 값과 참조영상의 밝기 값을 전체를 통해 구하고 이를 적용한 참조영상들을 이용하여 현재 마크로블록을 예측하는 것이 아니라, 움직임 예측이 끝나고 현재 마크로 블록에 대한 예측이 끝난 후에 기울기와 오프셋을 구하고 이를 적용함으로써 가중치 예측에 대한 효율을 높이는 방법이다. 멀티뷰 비디오 코딩에서는 코딩효율을 위해 참조 영상을 시간상의 앞 뒤 영상뿐 아니라 주변의 다른 뷰의 영상도 참조하기 때문에 특히 참조 영상의 숫자가 많다. 이런 멀티뷰 비디오 코딩에 기존의 방법을 마크로 블록단위로 적용하여 움직임 예측을 하기 전에 가중치 예측을 할 경우 H.264에서 지원하는 모든 블록모드 별로 모든 참조 영상에 대하여 기울기와 오프셋을 구하고 이 정보를 모두 전송해야 한다. 본 발명의 가중치 예측 방법은 멀티뷰의 특징상 참조영상의 수가 많은 것을 고려하여 움직임예측 이후에 가중치 예측을 적용함으로써 한 마크로 블록에서 필요한 추가 정보의 양을 줄일 수가 있다. 또 오프셋 값이 현재 블록과 참조블록의 평균값의 차이 값을 통해 계산되어지는 점을 이용하여 오프셋을 예측을 통해 계산하는 방법을 제안한다. 인코더는 현재 블록의 평균값을 예측하고 실제 값과의 오차 값을 코딩해서 보내면 디코더는 이를 이용하여 현재 블록의 오프셋을 계산하는 방법이다. 예측 오차만을 코딩하여 보내기 때문에 오프셋 코딩시 효율적으로 코딩할 수 있다.

비디오, 멀티 뷰, 3DTV, 가중치 예측, 조명, 영상 코딩

Description

마크로 블록 기반 가중치 예측 기반 멀티 뷰 비디오 부호화 및 복호화 장치 및 그 방법 {Method of multi-view video encoding and decoding based on macroblock-based weighted prediction, and apparatus thereof}

도 1은 마크로 블록 기반 가중치 예측방법을 적용한 비디오 인코더의 도면

도 2는 추정 마크로 블록을 구하는 방법을 나타낸 도면

도 3은 인코더에서 기울기와 오프셋을 구하는 방법의 순서도

도 4는 발명의 인코더를 통해 인코딩된 비트스트림의 예

도 5는 마크로 블록 기반 가중치 예측방법을 적용한 비디오 디코더의 도면

도 6은 디코더부에서 마크로 블록 기반가중치 예측 방법에 따른 기울기와 오프셋의 계산을 통해 영상이 복원되는 과정을 자세히 나타낸 블록도

본 발명은 멀티 뷰 비디오 인코딩/디코딩 장치에서 뷰 간의 조명보상을 위하여 밝기 값 보정을 통해 코딩효율을 높이는 방법과 밝기 값 보정을 효과적으로 하기 위한 방법에 관한 것이다.

멀티 뷰 비디오 시스템을 위해 입력된 다중 비디오 시퀀스를 멀티 뷰 비디오 코딩 방법으로 압축 전송할 경우, 동일 시퀀스 내에서뿐만 아니라 뷰와 뷰 사이에서도 참조를 함으로써 압축 효율을 높일 수 있다. 그러나 동 시간대에 촬영한 다른 뷰와 같은 카메라로 촬영한 다른 시간대의 프레임 사이에서는 카메라의 특성 및 조명조건에 따라 영상이 달라지는 현상을 보이는데, 이는 코딩효율을 크게 떨어뜨리는 요인이 된다. 이러한 문제를 해결하기 위하여, 멀티 뷰 비디오 코딩분야에서 뿐 아니라 기존의 비디오 코딩분야에서도 많은 노력이 있었다. 기존의 H.264/AVC에서 가중치 예측 기법이 표준 기술로 채택되기도 하였다. 이 방법은 참조 영상의 밝기 값 보정을 위하여, 슬라이스 단위의 기울기 값 (W)과 오프셋(O) 파라미터를 사용하였다. 또 다중참조 프레임을 고려하여 슬라이스 단위의 기울기와 오프셋 값은 참조프레임의 개수만큼을 슬라이스 헤더에 첨부하였다. 그러나 이 방법은 슬라이스 단위에서 기울기와 오프셋을 적용하기 때문에 지역적인 밝기 값의 변화에 대해서는 적절하게 대응하지 못한다는 단점이 있다.

이에 본 발명은 멀티 뷰 비디오 영상 압축을 위하여,H.264/SVC 기반의 멀티뷰 비디오 코딩방법의 특징을 고려한 효율적인 마크로 블록 기반 가중치 예측방법을 제안한다. 기존의 방법은 다중참조 프레임과 멀티뷰의 구조적 B프레임 구조를 고려하여 참조 프레임의 개수만큼 슬라이스 헤더에 기울기와 오프셋을 첨부하였다. 기존의 슬라이스 기반의 방법을 그대로 마크로블록 단위로 적용할 경우 마크로 블록 하나당 전송해야 하는 추가 정보의 양이 많아져 코딩효율을 위한 가중치 예측이 오히려 효율을 떨어뜨리는 요인이 된다. 마크로 블록별 가중치 예측을 위한 추가 정보의 양을 줄이면서 코딩의 효율을 높이기 위해 오프셋 값을 조금 더 정확히 예측하기 위한 조명 불변의 움직임 예측방법과 추정마크로 블록을 통해 가중치 예측을 하는 방법 및 장치를 제안한다.

조명 불변의 움직임 예측 방법은 움직임 예측시에 현재 블록과 참조 영상사이의 오프셋을 고려하여 SAD 계산시에 블록의 평균을 고려하여 움직임 예측을 하는 방법으로 잔여영상의 에러 값의 합은 증가하는 경우도 있지만 이는 블록별 오프셋 값의 계산시에 오프셋으로 계산되기 때문에 결국 엔트로피는 감소하게 된다. 추정마크로 블록을 통한 가중치 예측 방법은 움직임 예측이 끝난 후에 가중치 예측을 하기 위해 움직임 백터와 블록모드를 통해 현재 마크로 블록과 가장 유사한 마크로 블록을 추정하고 이 추정 마크로 블록과 현재 블록 사이의 기울기와 오프셋을 구하는 방법이다. 움직임 예측이 끝난 후에 기울기와 오프셋을 구하기 때문에 참조영상이나 블록모드를 고려할 필요 없이 마크로블록 당 하나의 기울기와 오프셋만을 구하고 이를 전송하면 된다.

기존의 가중치 예측을 마크로블록 단위로 효율적으로 적용하기 위해 개선된 방법에서는 슬라이스 단위에서는 슬라이스 헤더에 마크로 블록 기반가중치예측 플래그를 추가하고 마크로 블록 기반가중치 예측 플래그가 1일 경우, 기울기의 스케일 값을 위한 구문의 추가가 필요하다. 마크로 블록 헤더에는 기존에 없었던 마크로 블록단위 기울기와 오프셋을 위한 추가 구문 구조가 필요하다. 기존의 방법의 확장을 통해 슬라이스 단위가 아닌 마크로 블록 단위로 밝기 값 보정을 하고 이를 참조하기 때문에 압축효율 면에서 향상된 결과를 얻을 수 있다.

가중치 예측방법은 참조 영상의 밝기 값의 보정을 통해 코딩하고자 하는 현재 영상의 픽셀 값을 최대한 정확히 예측하고자 하는 방법이다. 가중치 예측을 위한 기울기와 오프셋은 아래의 식을 통해 계산될 수 있다.

여기서 R _k 는 복원된 이전 영상, 즉 참조영상들이며 mv _x 와 mv _y 는 움직임 벡터를 나타낸다. 또한 F는 현재 영상을 나타낸다. 위의 식을 만족하는 최적의 기울기 (W)와 오프셋 (O)은 참조 영상들의 픽셀 값을 현재영상에 가장 근사시켜줄 수 있는 값을 의미한다. 정보의 양에 상관없이 정확한 기울기와 오프셋의 계산하고 이를 적용하기 위해서라면 위 식을 움직임 예측에 적용하여 움직임 예측시에 이를 구하고 이 정보들 모두를 마크로 블록별로 전송하는 방법을 사용할 것이나 H.264 기반의 멀티뷰 비디오 코딩에서는 시간상 앞 뒤 영상 뿐 아니라 주변 뷰의 영상도 참조 하기 때문에 참조영상의 숫자도 많고 각 마크로 블록의 블록 모드도 복잡하여 정보의 양을 고려할 경우 오히려 코딩 효율을 떨어뜨리기 때문에 적용하기 어렵다. 이를 개선하기 위한 몇 가지 실시 예를 도면를 통해 보인다.

도 1은 본 발명의 실시 예로써 마크로 블록 기반 가중치 예측방법을 적용한 비디오 인코더이다. 현재 마크로 블록의 인코딩을 위해 먼저 현재 블록의 움직임 예측을 하게 되는데, 기존의 움직임 예측 방법을 개선하여 오프셋을 고려한 움직임 예측을 하게 되는데 아래의 식을 통해 움직임 예측을 한다.

(where X,Y can be 4,8,16)

움직임 예측이 끝나고 움직임 백터와 블록모드가 정해지면 이 정보를 바탕으로 도2와 같이 추정마크로블록을 구할 수 있다. 추정마크로 블록은 현재 블록의 참조영상과 움직임백터 그리고 블록모드만을 가지고 구성한 현재블록과 가장 유사한 추정 마크로 블록으로 이 추정마크로 블록과 현재 블록의 오차를 줄이는 기울기와 오프셋이 마크로 블록의 기울기와 오프셋이 된다. 이렇게 마크로블록 단위로 기울기와 오프셋을 구하면서 다중 참조 모드와 멀티뷰 코딩의 특징인 시간상 앞 뒤 영상과 주변 뷰의 영상 모두가 참조 영상이 되는 경우에도 마크로블록의 추가정보의 양이 같기 때문에 코딩의 효율을 높이게 된다. 이렇게 구한 마크로 블록별 기울기와 오프셋은 그대로 전송하지 않고 이전 블록의 추정 값과의 차분 값을 구해 마크로 블록의 헤더에 첨부하여 전송한다.

도 2는 본 발명의 실시 예로써 추정 마크로 블록을 구하는 방법을 나타낸 도이다. 도 2-1은 P 블록의 경우 도 2-2는 B 블록의 경우 추정 마크로 블록을 구하는 방법이다.

일반적인 H.264 기반의 비디오 코딩에서 P 블록의 경우 참조 영상은 시간상 의 앞 혹은 뒤 영상들이겠지만 멀티뷰에서는 주변 뷰도 참조하기 때문에 시간상의 앞 혹은 뒤 공간상에서 주변 뷰들 중의 하나가 될 수 있다. 이렇게 시간 혹은 공간상의 참조 영상들을 참조하여 움직임 예측을 하면 현재 블록에 대한 움직임 백터와 블록모드가 결정된다. 이렇게 결정된 움직임 백터와 블록모드 참조 영상들을 바탕으로 현재 마크로 블록에 대한 추정 마크로 블록을 구한다.

B 블록의 경우 참조 영상은 시간상의 앞뒤 영상 공간상의 앞 뒤 영상 및 주변 뷰의 영상 모두가 참조 영상이 될 수 있고 다중참조가 지원될 경우 참조 영상의 숫자는 그림과 같이 많아 질 수 있다. 역시 추정 마크로블록은 움직임 예측을 통해 구해진 움직임 백터와 블록모드 그리고 참조 영상들을 바탕으로 현재 마크로 블록에 대한 추정 마크로 블록을 구한다.

도 3은 본 발명의 실시 예로써 인코더에서 기울기와 오프셋을 구하는 방법의 순서도이다. 본 발명에서는 가중치 예측을 움직임 예측이 끝난 후에 하기 때문에 움직임 예측 시에 오프셋을 고려하기 위하여 기존의 움직임 예측 방법이 아닌 수학식 1에 따라 개선된 움직임 예측 방법을 이용하여 현재 블록에 대한 움직임 예측을 한다. 움직임 예측을 통해 각 마크로 블록별로 최적 분할모드와 움직임 벡터를 구한 후에, 이 정보를 바탕으로 예측된 마크로 블록을 구성할 수 있다. 구성되어진 예측 마크로 블록과 현재 마크로 블록의 차이를 최소화하는 오프셋과 기울기 값을 구한다. 기울기와 오프셋 값은 일정 범위내의 값들을 변화시키면서 반복적으로 적용하여 구한다. 본 발명의 기울기 값은 1-p/2^k ~ 1+p/2^k 범위 내에서 1/2^k씩 변화시 키며 구하였고, 여기서 분모의 지수인 k는 슬라이스 헤더에 첨부되어 전송되고, p값은 마크로 블록 별로 첨부되게 된다. 또한 k는 임의의 상수를 뺀 값을 슬라이스 헤더에 추가할 수 있다. 최적의 기울기 값과 오프셋 값을 구하기 위하여 다음의 수학식3을 사용하였다.

본 발명에서는 오프셋은 수학식 3처럼,

으로 구할 수 있다. 디코더 쪽에서도 오프셋 값은 현재 블록의 평균값, 참조 블록의 평균값과 기울기 값으로 구해질 수 있다. 참조 블록의 평균값 (MeanR)은 움직임 벡터를 이용하여 복원된 참조영상으로부터 구할 수 있다. 기울기 값(Weight)은 마크로 블록별로 전송된 p값을 통하여 구할 수 있다. 현재 블록의 평균값(MeanC)을 추가로 전송할 필요가 있는데, 본 발명에서는 현재 블록의 평균값을 수학식 4와 같이 현재 블록 예측 평균치인 (PCurMean)과 예측 오차 (PE)로 분리하여 표현할 수 있다.

수학식 4를 수학식 3식에 대입함으로써, 현재 블록의 밝기값을 수학식 5와 같이 구할 수 있다.

현재 블록 평균값의 예측치인 PCurr_Mean은 주변 블록의 평균 값들을 통하여 예측할 수 있다. 본 발명에서는 하나의 실시 예로서, 현재 블록의 평균값을 다음과 같은 방법을 이용하여 예측할 수 있다.

여기서, A는 현재블록의 왼쪽 위 블록의 평균값을, B는 위쪽 블록의 평균 값을 그리고 C는 왼쪽 블록의 평균값을 각각 나타낸다. 만약 A, B, C 각각의 값들이 존재할 수 없는 경우에는 존재하는 값만으로 예측을 하고 슬라이스의 제일 처음 블록과 같이 주변 값들이 전부 존재하지 않는 경우에는 예측을 하지 않고 원래의 오프셋을 코딩하여 보내도록 하였다. 인코더에서는 이렇게 구해진 예측치의 오차 값만을 코딩하여 보내고 디코더는 수학식 4와 5를 이용하여 복호화를 하게 된다. 본 발명의 변형의 예로써, 기울기 값을 사용하지 않은 경우 Weight를 1로 설정할 수 있다. 수학식 3, 4, 5에서 Weight값을 1로 설정하고, 현재 블록의 평균값을 예측하여, Offset값을 전송하는 것이 아니라 현재 블록의 예측 오차인 PE만을 전송하게 된다.

도 4는 본 발명의 실시 예로서 발명의 인코더를 통해 인코딩된 비트스트림의 예이다. 슬라이스 헤더의 마크로 블록 기반 가중치 예측 플래그의 값이 1인 경우 본 발명인 마크로 블록 기반가중치 예측 방법이 적용되는데 먼저 슬라이스 헤더에는 마크로 블록 기반가중치 예측 플래그가 추가되고 슬라이스 헤더의 참조영상별 기울기와 오프셋에 해당하는 비트스트림 대신 슬라이스 기울기가 각각 Y,Cb,Cr성분에 대해 하나씩 들어간다. 마크로블록 해더에는 마크로블록의 차분 기울기와 오프셋이 Y,Cb,Cr성분에 대해 하나씩 들어가게 된다. 슬라이스 헤더의 마크로 블록 기반 가중치 예측 플래그가 0이면 가중치 예측 플래그를 체크하여 1인 경우에는 슬라이스 헤더에만 참조영상의 숫자만큼 슬라이스 기울기와 오프셋이 첨부되고 가중치 예측 플래그가 0이면 가중치 예측에 대한 정보가 슬라이스 헤더나 마크로블록 헤더에 추가되지 않게 된다. 또 마크로 블록 기반가중치 예측 플래그가 1인 경우 마크로 블록별로 플래그를 두고 마크로 블록별로 마크로 블록 기반가중치 예측방법을 사용하였는지 아닌지를 표시할 수 있다. 플래그 값이 1인 경우는 본 발명의 방법을 적용한 경우로 오프셋과 기울기가 마크로블록의 헤더에 코딩되어지고, 0인 마크로블록을 마크로 블록 기반가중치 예측방법이 적용되지 않아 마크로블록 해더에 관련 값이 코딩되어지지 않는다.

도 5는 본 발명의 실시 예로써 마크로 블록 기반 가중치 예측방법을 적용한 비디오 디코더이다. 디코더는 전송 받은 비트 스트림을 구문 정보를 이용하여 파싱하고 파싱된 정보를 역 엔트로피 코딩한다. 파싱된 구문 정보 중 슬라이스 헤더의 MBbased_weighted_flag를 체크하여 플래그가 1이면 인코더에서 슬라이스에 마크로 블록 기반 가중치 예측 방법한 적용한 경우이므로 먼저 슬라이스 헤더에서 슬라이스 기울기 값을 추출한다. 그리고 마크로블록 헤더에서 마크로 블록별 기울기와 오프셋 값을 추출하는데, 이때 마크로블록별로 선택적으로 마크로 블록 기반 가중치 예측방법을 적용한 경우 마크로블록별 플래그 값도 체크하여야 한다. 마크로블록 마크로 블록 기반가중치 예측플래그 값이 1인 마크로 블록의 경우 인코더에서 코딩되어 전송된 첫 번째 마크로 블록의 오프셋 값은 원래의 값이고, 두 번째 마크로 블록의 오프셋 값은 현재 블록의 평균 밝기 값에 대한 예측 오차 값이므로 원래 값으로의 복원이 필요하다. 원래 값으로의 복원은 수학식 5와 같은 과정을 통해 이루어진다.

다음은 본 발명을 적용하기 위한 변형된 SVC 구문정보를 나타낸다.

slice_header_in_scalable_extension()	Descriptor
MBbased_weighted_pred_flag	u(e)
if(extended_weighted_pred_flag)
if(slice_type==P||(weighted_bipred_idc == 1 && slice_type ==B))
extended_weight_table()
else
if(weighted_pred_flag && (slice_type==P || slice_type ==SP))|| (weighted_bipred_idc == 1 && slice_type ==B))
pred_weight_table()

extended_weight_table()	Descriptor
luma_log_weight_demon	ue(v)
if(chroma_format_idc != 0)
chroma_log2_weight_demon	ue(v)

macroblock_layer( )	Descriptor
…
if(extend_weigh_flag&&(!mb_type==intra_16×16&&!mb_type==intra_4×4 &&!mb_type==8×8&&!mb_skip_flag))
mb_EW_flag	u(e)
if( mb_EW_flag)
lumaweight	u(v)
chromawegith[0]	u(v)
chromawegith[1]	u(v)
if (CurrMbAddr==first_mb_in_slice)
lumaoffset	u(v)
chromaoffset[0]	u(v)
chromaoffset[1]	u(v)
else
ErrCurMeanluma	u(v)
ErrCurMeanchroma[0]	u(v)
ErrCurMeanchroma[1]	u(v)
else
…

도 6은 본 발명의 실시 예로서, 디코더부에서 마크로 블록 기반가중치 예측 방법에 따른 기울기와 오프셋의 계산을 통해 영상이 복원되는 과정을 자세히 나타낸 블록도이다. 역 엔트로피 코딩된 기울기와 오프셋 값은 인코딩시에 사용된 정보가 아니기 때문에 원래의 값으로의 계산 과정이 필요하다. 오프셋 값의 계산은 수학식 4를 통해 이루어 질 수 있고, 기울기는 수학식6을 통해 계산되어질 수 있다.

2^k+4는 스케일의 크기를 나타내고 k는 본 발명에서 슬라이스 헤더에 코딩되어 젼송된다. p는 각 마크로 블록별로 최적의 기울기(Weight) 값을 계산하는 과정을 통해 계산되어져 마크로블록별로 마크로블록 헤더에 코딩되어 전송되어진 값이다. 본 발명에서는 스케일 값을 2⁵으로 하였기 때문에 실제 코딩되는 k어져 슬라이스 헤더에 첨부된 값은 1이 된다.

이제까지 본 발명에 대하여 그 바람직한 실시 예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시 예들은 한정적인 관점이 아니라 설명적인 관점 에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구 범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.

본 발명은 기존의 가중치 예측 방법을 확장하여 슬라이스 단위로 기울기 값을 예측하고 마크로 블록단위로 기울기와 오프셋을 구하여 마크로블록의 헤더에 첨부하여 전송한다. 이때 마크로 블록의 오프셋을 효과적으로 추정하기 위하여 기존의 움직임 예측방법을 개선하여 블록의 평균을 빼고 SAD 값을 구하는 개선된 움직임 예측방법과 마크로블록 단위의 기울기와 오프셋을 효율적으로 전송하기 위하여 추정마크로블록을 사용하여 기울기와 오프셋을 구하는 방법을 제안하였다. 제안한 발명을 적용한 멀티뷰 비디오 코딩시 시간상 혹은 공간상의 참조영상과 현재 영상간의 밝기값 보정을 통하여 뷰 혹은 프레임간의 참조시 정확도를 높이고 코딩효율을 향상시킬 수 있었다.

Claims (6)

1. 본 발명은 단일 비디오 혹은 멀티 뷰 비디오 코딩에서 시간상 혹은 뷰 사이에서 참조 부호화 시 코딩 효율을 높이기 위하여, 마크로 블록단위로 기울기와 오프셋을 구하여 참조 영상을 보정하고, 기울기(Weight)와 오프셋 (Offset)을 비트스트림에 표시하여 전송하는 장치 및 방법
2. 제 1항에 있어서, 마크로 블록별 가중치를 전송하기 위하여 실제 계산된 값 W를 1+p/2^k 으로 나타내고 p를 마크로 블록 해더에 전송하고 k는 임의의 상수 뺀 값을 슬라이스 해더에 첨부한다.
3. 제 1항에 있어서 현재블록의 오프셋 값은 현재 블록과 기울기 값이 적용된 이전 블록 평균과의 차이 값으로 하고, 오프셋 대신 현재 블록의 평균을 예측하여 예측 오차 (PE)만을 코딩하여 디코더로 전송하는 장치 및 방법

   Offset = MeanC - MeanR * Weight

   PE=MeanC-PCurMean
4. 제 1항에 있어서, 현재 블록의 평균값의 예측 오차 PE로부터 다음 식을 사용하여 현재블럭의 오프셋값을 계산하는 방법 및 장치
5. 제 3항에 있어서, 현재 블록의 평균 값을 주변 블록의 밝기 값에 따라 예측하는 방법 및 장치
6. 제 1항에 있어서, 마크로블록의 헤더는 플래그를 가지고 본 발명의 방법을 마크로 블록별로 선택적으로 적용할 수 있는 방법 및 장치

Images