KR100734314B1 - 움직임 보상 기반의 영상 압축 시스템에서의 영상 신호의공간 해상도 변환 방법 - Google Patents
움직임 보상 기반의 영상 압축 시스템에서의 영상 신호의공간 해상도 변환 방법 Download PDFInfo
- Publication number
- KR100734314B1 KR100734314B1 KR1020060013335A KR20060013335A KR100734314B1 KR 100734314 B1 KR100734314 B1 KR 100734314B1 KR 1020060013335 A KR1020060013335 A KR 1020060013335A KR 20060013335 A KR20060013335 A KR 20060013335A KR 100734314 B1 KR100734314 B1 KR 100734314B1
- Authority
- KR
- South Korea
- Prior art keywords
- frame
- video signal
- converting
- spatial resolution
- conversion method
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 130
- 238000006243 chemical reaction Methods 0.000 title claims abstract description 92
- 230000006835 compression Effects 0.000 title claims abstract description 21
- 238000007906 compression Methods 0.000 title claims abstract description 21
- 239000013598 vector Substances 0.000 claims abstract description 61
- 230000008859 change Effects 0.000 claims description 11
- 238000012805 post-processing Methods 0.000 claims description 5
- 230000009466 transformation Effects 0.000 claims description 4
- 238000011426 transformation method Methods 0.000 claims 2
- 238000010586 diagram Methods 0.000 description 5
- 230000006872 improvement Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 230000003044 adaptive effect Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000006866 deterioration Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0125—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards being a high definition standard
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4007—Scaling of whole images or parts thereof, e.g. expanding or contracting based on interpolation, e.g. bilinear interpolation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/523—Motion estimation or motion compensation with sub-pixel accuracy
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0135—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes
- H04N7/014—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes involving the use of motion vectors
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Television Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
움직임 보상 기반의 영상 압축 시스템에서의 영상 신호의 공간 해상도 변환 방법이 개시된다. 본 발명의 실시예에 따른 영상 신호의 공간 해상도 변환 방법은 상기 영상 신호의 프레임의 종류를 판단하는 단계 및 상기 영상 신호의 프레임의 종류 및 상기 영상 신호의 모션 벡터의 크기에 따라 공간 해상도 변환 방식을 달리하여 상기 영상 신호의 해상도를 변환하는 단계를 구비한다. 본 발명에 따른 영상 신호의 공간 해상도 변환 방법은 프레임의 종류 및 프레임의 변화에 따라 단채널 보간법 또는 다채널 보간법에 의하여 해상도 변환을 수행함으로써 해상도 변환의 안정성을 유지하면서도 화질의 개선에 기여할 수 있는 장점이 있다.
공간 해상도 변환, 단채널 보간법, 다채널 보간법, MPEG
Description
본 발명의 상세한 설명에서 인용되는 도면을 보다 충분히 이해하기 위하여 각 도면의 간단한 설명이 제공된다.
도 1a 및 도 1b는 각각 종래 기술에 따른 단채널 보간법 및 다채널 보간법을 개략적으로 나타내는 블럭도이다.
도 2는 본 발명의 실시예에 따른 영상 신호의 공간 해상도 변환 방법을 나타내는 순서도이다.
도 3은 도 2의 영상 신호의 공간 해상도 변환 방법에 의한 다채널 보간법을 개념적으로 나타내는 도면이다.
본 발명은 공간 해상도 변환 방법에 관한 것으로서, 특히 움직임 보상 기반의 영상 압축 시스템에서 고해상도 및 안정성을 유지할 수 있는 영상 신호의 공간 해상도 변환 방법에 관한 것이다.
일반적으로 압축률을 높이기 위해 인코더(encoder)단에서 영상의 크기를 줄인 경우라든지 SD급으로 인코딩된 영상을 HD급 디스플레이(display) 장치로 재현할 경우, 영상 신호의 공간 해상도 변환은 필수적이다. 또한 영상 신호의 공간 해상도 변환은 영상의 전체적 화질에 중요한 영향을 끼치므로 영상 신호의 공간 해상도 변환 방법에 대한 다각적인 연구가 이루어지고 있다.
도 1a는 종래 기술에 따른 단채널 보간법에 따른 공간 해상도 변환 동작을 개략적으로 나타내는 블럭도이다.
도 1a를 참조하면, 종래 기술에 따른 단채널 보간법에 따른 공간 해상도 변환 방법(10)은 영상 신호를 하나의 프레임 단위로 공간 해상도 변환을 하여 변환된 영상 신호를 출력한다. 이러한 단채널 보간법으로는 큐빅(cubic) 또는 스플라인(spline) 기반의 선형적인 보간법, 에지(edge) 적응적인 EDI(Edge Directed Interpolation) 기법 또는 선형적인 보간법과 에지 적응적인 보간법이 혼합된 형태의 보간법이 있다.
단채널 보간법에 의한 영상 신호의 공간 해상도 변환 방식에 따르면, 영상 자체에 엘리어싱(aliasing)이 존재하는 경우 공간 해상도 자체의 향상을 기재하기가 어려운 단점이 있다.
도 1b는 종래 기술에 따른 다채널 보간법에 따른 공간 해상도 변환 동작을 개략적으로 나타내는 블럭도이다.
도 1b를 참조하면, 종래 기술에 따른 다채널 보간법에 따른 공간 해상도 변환 방법(20)은 복수의 프레임을 기반으로 공간 해상도 변환 동작을 수행한다. 이러 한 다채널 보간법에 의하면, 부화소 단위의 움직임 추정 및 고해상도 영상 재구성 등의 복잡성이 야기된다.
또한 영상의 움직임이 잘못 추정된 경우에는 공간 해상도 변환의 안정성의 문제가 야기된다. 즉, 움직임이 큰 영상 신호에 대하여 추정된 움직임 값의 정확도가 떨어지는 경우 부적절한 공간 해상도 변환으로 인한 화질 열화의 문제가 발생한다.
본 발명이 이루고자하는 기술적 과제는 안정성을 갖추고 복잡한 로직의 구현을 지양하면서도 화질 개선의 효과가 큰 움직임 보상 기반의 영상 압축 시스템에서의 영상 신호의 공간 해상도 변환 방법을 제공하는데 있다.
상기 기술적 과제를 달성하기 위한 본 발명의 실시예에 따른 움직임 보상 기반의 영상 압축 시스템에서의 압축된 영상 신호의 공간 해상도 변환 방법은 상기 영상 신호의 프레임(frame)이 다른 프레임을 참조하는지 여부를 판단하는 단계, 상기 프레임이 다른 프레임을 참조하지 아니하는 프레임인 경우 제 1 변환 방식에 따라 상기 영상 신호의 해상도를 변환하는 단계 및 상기 프레임이 다른 프레임을 참조하는 프레임인 경우 모션 벡터의 크기에 따라 상기 제 1 변환 방식 및 제 2 변환 방식 중 하나의 변환 방식에 따라 상기 영상 신호의 해상도를 변환하는 단계를 구비한다.
상기 모션 벡터는 상기 다른 프레임을 참조하는 프레임의 블럭의, 상기 참조 되는 다른 프레임의 블럭에 대한 변화를 나타내는 벡터이다. 상기 모션 벡터는 상기 움직임 보상 기반 영상 압축 시스템에 규정되는 모션 벡터이다.
상기 제 1 변환 방식은 단채널 보간법일 수 있다. 상기 제 2 변환 방식은 다채널 보간법일 수 있다.
상기 프레임이 다른 프레임을 참조하는 경우 상기 제 1 변환 방식 및 제 2 변환 방식 중 하나의 변환 방식에 따라 상기 영상 신호의 해상도를 변환하는 단계는 상기 모션 벡터의 크기와 기준값을 비교하는 단계를 더 구비한다. 상기 기준값은 "1"일 수 있다.
상기 프레임이 다른 프레임을 참조하는 경우 상기 제 1 변환 방식 및 제 2 변환 방식 중 하나의 변환 방식에 따라 상기 영상 신호의 해상도를 변환하는 단계는 상기 모션 벡터의 크기가 상기 기준값 미만인 경우 상기 제 2 변환 방식에 따라 상기 영상 신호의 해상도를 변환한다. 상기 프레임이 다른 프레임을 참조하는 경우 상기 제 1 변환 방식 및 제 2 변환 방식 중 하나의 변환 방식에 따라 상기 영상 신호의 해상도를 변환하는 단계는 상기 제 2 변환 방식에 의한 상기 영상 신호의 해상도 변환을 위하여 상기 모션 벡터를 그래도 사용하거나, 상기 모션 벡터를 기반으로 서브 픽셀 모션 벡터를 더 자세히 계산하는 단계를 더 구비하다.
상기 프레임이 다른 프레임을 참조하는 경우 상기 제 1 변환 방식 및 제 2 변환 방식 중 하나의 변환 방식에 따라 상기 영상 신호의 해상도를 변환하는 단계는 상기 모션 벡터의 크기가 상기 기준값 이상인 경우 상기 제 1 변환 방식에 따라 상기 영상 신호를 변환한다.
상기 움직임 보상 기반 영상 압축 시스템은 MPEG일 수 있다. 이때 상기 다른 프레임을 참조하지 아니하는 프레임은 I 프레임이다. 상기 다른 프렘임을 참조하는 프레임은 상기 다른 프레임을 참조하지 아니하는 I 프레임을 참조하는 P 프레임 및 상기 I 프레임 및/또는 상기 P 프레임을 참조하는 B 프레임 중 하나의 프레임에 해당한다.
바람직하게는 상기 영상 신호의 공간 해상도 변환 방법은 상기 제 2 변환 방식에 따라 상기 영상 신호를 변환하는 경우 상기 공간 해상도 변환의 안정성을 체크하는 단계를 더 구비한다. 바람직하게는 상기 영상 신호의 공간 해상도 변환 방법은 해상도가 변환된 상기 영상 신호에 대한 후처리를 수행하는 단계를 더 구비한다.
본 발명과 본 발명의 동작상의 이점 및 본 발명의 실시에 의하여 달성되는 목적을 충분히 이해하기 위해서는 본 발명의 바람직한 실시예를 예시하는 첨부 도면 및 도면에 기재된 내용을 참조하여야 한다.
이하, 첨부한 도면을 참조하여 본 발명이 바람직한 실시예를 설명함으로써, 본 발명을 상세히 설명한다. 각 도면에 제시된 동일한 참조부호는 동일한 부재를 나타낸다.
도 2는 본 발명의 실시예에 따른 영상 신호의 공간 해상도 변환 방법을 나타내는 순서도이다.
도 2를 참조하면, 상기 기술적 과제를 달성하기 위한 본 발명의 실시예에 따른 움직임 보상 기반의 영상 압축 시스템에서의 영상 신호의 공간 해상도 변환 방 법 100은 상기 영상 신호의 프레임(frame)이 다른 프레임을 참조하는지 여부를 판단하는 S120 단계, 상기 프레임이 다른 프레임을 참조하지 아니하는 프레임인 경우 제 1 변환 방식에 따라 상기 영상 신호의 해상도를 변환하는 S134 단계 및 상기 프레임이 다른 프레임을 참조하는 프레임인 경우 모션 벡터의 크기에 따라 상기 제 1 변환 방식 및 제 2 변환 방식 중 하나의 변환 방식에 따라 상기 영상 신호의 해상도를 변환하는 S130 단계를 구비한다.
이때 상기 움직임 보상 기반의 영상 압축 시스템이 MEGP이라고 하자. 본 발명에 따른 영상 신호의 공간 해상도 변환 방법 100은 MPEG 기반에 따라 압축된 영상 신호를 수신한다(S110). 상기 압축된 영상 신호와 함께 상기 모션 벡터에 관한 정보도 함께 전송된다(S110).
상기 모션 벡터는 상기 다른 프레임을 참조하는 프레임의 블럭의, 상기 참조되는 다른 프레임의 블럭에 대한 변화를 나타내는 벡터이다. 즉, 상기 모션 벡터는 상기 프레임의 블럭들 중 하나의 블럭과 참조되는 상기 다른 프레임의 상기 하나의 블럭에 대응되는 블럭을 비교했을 때, 상기 프레임의 블럭의 변화를 나타낸다. 상기 모션 벡터는 MPEG에 규정되는 모션 벡터이다. 상기 모션 벡터는 화소 단위 혹은 부화소 단위의 정확도를 가지는 모션 벡터이다.
상기 영상 신호의 프레임(frame)이 다른 프레임을 참조하는지 여부를 판단하는 S120 단계는 상기 영상 신호의 프레임이 I 프레임, P 프레임 및 B 프레임 중 어느 프레임에 속하는 지를 판단한다. 상기 움직임 보상 기반의 영상 압축 시스템이 MPEG인 경우, 상기 다른 프레임을 참조하지 아니하는 프레임이 I 프레임이다.
또한 상기 다른 프레임을 참조하는 프레임은 P 프레임 또는 B 프레임이다. 상기 P 프레임은 상기 I 프레임을 참조한다. 반면 상기 B 프레임은 상기 I 프레임 및/또는 상기 P 프레임을 참조한다.
상기 프레임이 다른 프레임을 참조하지 아니하는 프레임인 경우, 즉 상기 I 프레임인 경우, 영상 신호의 공간 해상도 변환 방법 100은 상기 제 1 변환 방식에 따라 상기 영상 신호의 해상도를 변환한다. 상기 제 1 변환 방식은 단채널 보간법일 수 있다(S134). 상기 I 프레임은 참조할 영상 프레임이 존재하지 않으므로 상기 단채널 보간법에 따라 변환된다.
그러나 상기 영상 신호가 상기 I 프레임이 아닌 경우, 즉 P 프레임 또는 B 프레임인 경우 영상 신호의 공간 해상도 변환 방법 100은 상기 모션 벡터의 크기와 기준값을 비교하는 S131 단계를 더 구비한다. 상기 기준값은 상기 모션 벡터의 정확도 및 영상 압축 시스템마다 다를 수 있다.
본 실시예에서는 상기 기준값을 "1"이라고 한다. 상기 모션 벡터의 크기가 "1"보다 작고 상기 참조하는 프레임이 P 프레임인 경우, 상기 P 프레임의 블럭과 상기 I 프레임의 상기 P 프레임의 블럭에 대응되는 블럭간의 움직임의 양이 작다고 할 수 있다. 또한 상기 모션 벡터의 크기가 "1"보다 작고 상기 참조하는 프레임이 B 프레임인 경우, 상기 B 프레임의 블럭과 참조되는 상기 I 프레임 또는 P 프레임의 상기 B 프레임의 블럭에 대응되는 블럭간의 움직임의 양이 작다고 할 수 있다.
즉, 공간 해상도 변환 방법은 상기 모션 벡터의 크기가 "1" 미만인 경우에는 정지 영역에 대한 공간 해상도 변환을 수행한다고 할 수 있다. 이때 정지 영역이란, 움직임이 없는 영역으로서 모션 벡터의 정확도가 높고 해상도 변환시 움직임이 있는 영역보다 상대적으로 화질이 중요시되는 영역이다.
따라서 프레임이 다른 프레임을 참조하는 경우 상기 제 1 변환 방식 및 제 2 변환 방식 중 하나의 변환 방식에 따라 상기 영상 신호의 해상도를 변환하는 S130 단계는 상기 모션 벡터의 크기가 상기 기준값 미만인 경우 상기 제 2 변환 방식에 따라 상기 영상 신호의 해상도를 변환한다. 상기 제 2 변환 방식은 다채널 보간법일 수 있다(S133). 전술한 바와 같이 정지 영역의 경우 모션 벡터의 정확도가 높고 해상도 변환시 화질이 중요시되므로 다채널 보간법에 의한 해상도 변환이 바람직하다.
상기 다채널 보간법에 따라 해상도를 변환하는 경우, 프레임이 다른 프레임을 참조하는 경우 상기 제 1 변환 방식 및 제 2 변환 방식 중 하나의 변환 방식에 따라 상기 영상 신호의 해상도를 변환하는 S130 단계는 서브 픽셀 모션 벡터를 계산하는 S132 단계를 더 구비할 수 있다.
상기 서브 픽셀 모션 벡터는 상기 프레임의 블럭의 변화 정도를 보다 정확히 계산하기 위하여 사용된다. 즉, 상기 모션 벡터를 기반으로 대략적인 프레임의 블럭의 변화를 판단한 후, 상기 모션 벡터를 기반으로 다시 서브 픽셀 모션 벡터를 계산함으로써 보다 정확한 상기 블럭의 변화를 계산할 수 있다. 다만, 상기 서브 픽셀 모션 벡터의 계산 없이 상기 MPEG 상의 모션 벡터를 그대로 사용함으로써 로직의 복잡성을 방지할 수도 있다.
반면 프레임이 다른 프레임을 참조하는 경우 상기 제 1 변환 방식 및 제 2 변환 방식 중 하나의 변환 방식에 따라 상기 영상 신호의 해상도를 변환하는 S130 단계는 상기 모션 벡터의 크기가 상기 기준값 이상인 경우 상기 단채널 보간법에 따라 상기 영상 신호를 변환한다. 즉, 영상의 변화가 큰 경우에는 화질의 향상보다는 해상도 변환의 안정성이 우선된다.
도 3은 도 2의 영상 신호의 공간 해상도 변환 방법에 의한 다채널 보간법을 개념적으로 나타내는 도면이다.
도 3을 참조하면, P 프레임은 I 프레임을 참조하여 영상 신호의 공간 해상도를 변환한다. 이때, P 프레임의 어느 블럭의 I 프레임의 대응되는 블럭에 대한 변화 정도, 즉 모션 벡터(mv)의 크기가 주어진다. 모션 벡터의 크기가 기준값 미만인 경우에는 전술한 바와 같이 다채널 보간법에 의한 해상도 변환을 수행한다.
다시 도 2를 참조하면, 영상 신호의 공간 해상도 변환 방법 100은 해상도가 변환된 상기 영상 신호에 대한 후처리를 수행하는 S150 단계를 더 구비할 수 있다.
이상에서 살펴본 바와 같이 본 발명에 따른 영상 신호의 공간 해상도 변환 방법은 프레임의 종류 및 특성에 따라 단채널 보간법 또는 다채널 보간법에 의한 해상도 변환을 수행한다. 일반적으로 사람은 움직이는 영상보다 정지한 영상의 해상도에 더 민감하다.
따라서, 움직이는 영상에 대하여는 안정성있고 간단한 단채널 보간법에 의하고, 정지 영역에 대해서는 화질 개선의 효과가 큰 다채널 보간법에 의함으로써 단채널 보간법과 다채널 보간법의 장점을 모두 갖춘 공간 해상도 변환을 수행할 수 있다.
이상에서와 같이 도면과 명세서에서 최적 실시예가 개시되었다. 여기서 특정한 용어들이었으나, 이는 단지 본 발명을 설명하기 위한 목적에서 사용된 것이지 의미한정이나 특허청구범위에 기재된 본 발명의 범위를 제한하기 위하여 사용된 것은 아니다. 그러므로 본 기술분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호범위는 첨부된 특허청구범위의 기술적 사상에 의해 정해져야 할 것이다.
상술한 바와 같이 본 발명에 따른 움직임 보상 기반의 영상 압축 시스템에서의 영상 신호의 공간 해상도 변환 방법은 프레임의 종류 및 프레임의 변화에 따라 단채널 보간법 또는 다채널 보간법에 의하여 해상도 변환을 수행함으로써 해상도 변환의 안정성을 유지하면서도 화질의 개선에 기여할 수 있는 장점이 있다.
Claims (36)
- 움직임 보상 기반 영상 압축 시스템에 의하여 압축된 영상 신호의 공간 해상도 변환 방법에 있어서,상기 영상 신호의 프레임(frame)이 다른 프레임을 참조하는지 여부를 판단하는 단계;상기 프레임이 다른 프레임을 참조하지 아니하는 프레임인 경우 제 1 변환 방식에 따라 상기 영상 신호의 해상도를 변환하는 단계; 및상기 프레임이 다른 프레임을 참조하는 프레임인 경우 모션 벡터의 크기에 따라 상기 제 1 변환 방식 및 제 2 변환 방식 중 하나의 변환 방식에 따라 상기 영상 신호의 해상도를 변환하는 단계를 구비하는 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 1 항에 있어서, 상기 모션 벡터는,상기 다른 프레임을 참조하는 프레임의 블럭의, 상기 참조되는 다른 프레임의 블럭에 대한 변화를 나타내는 벡터인 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 2 항에 있어서, 상기 모션 벡터는,상기 움직임 보상 기반 영상 압축 시스템에 규정되는 모션 벡터인 것을 특징 으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 1 항에 있어서, 상기 제 1 변환 방식은,단채널 보간법인 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 1 항에 있어서, 상기 제 2 변환 방식은,다채널 보간법인 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 1 항에 있어서, 상기 프레임이 다른 프레임을 참조하는 경우 상기 제 1 변환 방식 및 제 2 변환 방식 중 하나의 변환 방식에 따라 상기 영상 신호의 해상도를 변환하는 단계는,상기 모션 벡터의 크기와 기준값을 비교하는 단계를 더 구비하는 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 6 항에 있어서, 상기 기준값은,"1"인 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 6 항에 있어서, 상기 프레임이 다른 프레임을 참조하는 경우 상기 제 1 변환 방식 및 제 2 변환 방식 중 하나의 변환 방식에 따라 상기 영상 신호의 해상도를 변환하는 단계는,상기 모션 벡터의 크기가 상기 기준값 미만인 경우 상기 제 2 변환 방식에 따라 상기 영상 신호의 해상도를 변환하는 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 8 항에 있어서, 상기 프레임이 다른 프레임을 참조하는 경우 상기 제 1 변환 방식 및 제 2 변환 방식 중 하나의 변환 방식에 따라 상기 영상 신호의 해상도를 변환하는 단계는,상기 제 2 변환 방식에 의한 상기 영상 신호의 해상도 변환을 위하여 상기 모션 벡터를 그대로 사용하거나, 상기 모션 벡터를 기반으로 서브 픽셀 모션 벡터를 계산하는 단계를 더 구비하는 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 6 항에 있어서, 상기 프레임이 다른 프레임을 참조하는 경우 상기 제 1 변환 방식 및 제 2 변환 방식 중 하나의 변환 방식에 따라 상기 영상 신호의 해상도를 변환하는 단계는,상기 모션 벡터의 크기가 상기 기준값 이상인 경우 상기 제 1 변환 방식에 따라 상기 영상 신호를 변환하는 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 1 항에 있어서, 상기 움직임 보상 기반 영상 압축 시스템은,MPEG(Motion Picture Experts Group)인 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 11 항에 있어서, 상기 다른 프레임을 참조하지 아니하는 프레임은,I 프레임인 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 11 항에 있어서, 상기 다른 프렘임을 참조하는 프레임은,상기 다른 프레임을 참조하지 아니하는 I 프레임을 참조하는 P 프레임 및 상기 I 프레임 및/또는 상기 P 프레임을 참조하는 B 프레임 중 하나의 프레임에 해당하는 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 1 항에 있어서, 상기 영상 신호의 공간 해상도 변환 방법은,상기 제 2 변환 방식에 따라 상기 영상 신호를 변환하는 경우 상기 공간 해상도 변환의 안정성을 체크하는 단계를 더 구비하는 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 1 항에 있어서, 상기 영상 신호의 공간 해상도 변환 방법은,해상도가 변환된 상기 영상 신호에 대한 후처리를 수행하는 단계를 더 구비하는 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 움직임 보상 기반 영상 압축 시스템에 의하여 압축된 영상 신호의 공간 해상 도 변환 방법에 있어서,상기 영상 신호의 프레임(frame)이 다른 프레임을 참조하는지 여부를 판단하는 단계;상기 프레임이 다른 프레임을 참조하지 아니하는 프레임인 경우 제 1 변환 방식에 따라 상기 영상 신호의 해상도를 변환하는 단계; 및상기 프레임이 다른 프레임을 참조하는 프레임인 경우 제 2 변환 방식에 따라 상기 영상 신호의 해상도를 변환하는 단계를 구비하는 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 16 항에 있어서, 상기 제 1 변환 방식은,단채널 보간법인 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 16 항에 있어서, 상기 제 2 변환 방식은,다채널 보간법인 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 16 항에 있어서, 상기 움직임 보상 기반 영상 압축 시스템은,MPEG(Motion Picture Experts Group)인 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 19 항에 있어서, 상기 다른 프레임을 참조하지 아니하는 프레임은,I 프레임인 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 19 항에 있어서, 상기 다른 프렘임을 참조하는 프레임은,상기 다른 프레임을 참조하지 아니하는 I 프레임을 참조하는 P 프레임 및 상기 I 프레임 및/또는 상기 P 프레임을 참조하는 B 프레임 중 하나의 프레임에 해당하는 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 16 항에 있어서, 상기 영상 신호의 공간 해상도 변환 방법은,상기 제 2 변환 방식에 따라 상기 영상 신호를 변환하는 경우 상기 공간 해상도 변환의 안정성을 체크하는 단계를 더 구비하는 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 16 항에 있어서, 상기 영상 신호의 공간 해상도 변환 방법은,해상도가 변환된 상기 영상 신호에 대한 후처리를 수행하는 단계를 더 구비하는 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 움직임 보상 기반 영상 압축 시스템에 의하여 압축된 영상 신호의 공간 해상도 변환 방법에 있어서,상기 영상 신호의 모션 벡터의 크기와 기준값을 비교하는 단계; 및상기 비교 결과에 따라 제 1 변환 방식 및 제 2 변환 방식 중 하나의 변환 방식에 의하여 상기 영상 신호의 해상도를 변환하는 단계를 구비하는 것을 특징으 로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 24 항에 있어서, 상기 모션 벡터는,상기 다른 프레임을 참조하는 프레임의 블럭의, 상기 참조되는 다른 프레임의 블럭에 대한 변화를 나타내는 벡터인 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 25 항에 있어서, 상기 모션 벡터는,상기 움직임 보상 기반 영상 압축 시스템에 규정되는 모션 벡터인 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 25 항에 있어서, 상기 제 1 변환 방식은,단채널 보간법인 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 25 항에 있어서, 상기 제 2 변환 방식은,다채널 보간법인 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 24 항에 있어서, 상기 비교 결과에 따라 상기 영상 신호의 해상도를 변환하는 단계는,상기 모션 벡터의 크기와 기준값을 비교하는 단계를 더 구비하는 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 29 항에 있어서, 상기 기준값은,"1"인 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 29 항에 있어서, 상기 비교 결과에 따라 상기 영상 신호의 해상도를 변환하는 단계는,상기 모션 벡터의 크기가 상기 기준값 미만인 경우 상기 제 2 변환 방식에 따라 상기 영상 신호의 해상도를 변환하는 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 31 항에 있어서, 상기 비교 결과에 따라 상기 영상 신호의 해상도를 변환하는 단계는,상기 제 2 변환 방식에 의한 상기 영상 신호의 해상도 변환을 위하여 상기 모션 벡터를 그래도 사용하거나, 상기 모션 벡터를 기반으로 서브 픽셀 모션 벡터를 계산하는 단계를 더 구비하는 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 29 항에 있어서, 상기 비교 결과에 따라 상기 영상 신호의 해상도를 변환하는 단계는,상기 모션 벡터의 크기가 상기 기준값 이상인 경우 상기 제 1 변환 방식에 따라 상기 영상 신호를 변환하는 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 24 항에 있어서, 상기 움직임 보상 기반 영상 압축 시스템은,MPEG(Motion Picture Experts Group)인 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 24 항에 있어서, 상기 영상 신호의 공간 해상도 변환 방법은,상기 제 2 변환 방식에 따라 상기 영상 신호를 변환하는 경우 상기 공간 해상도 변환의 안정성을 체크하는 단계를 더 구비하는 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
- 제 24 항에 있어서, 상기 영상 신호의 공간 해상도 변환 방법은,해상도가 변환된 상기 영상 신호에 대한 후처리를 수행하는 단계를 더 구비하는 것을 특징으로 하는 영상 신호의 공간 해상도 변환 방법.
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020060013335A KR100734314B1 (ko) | 2006-02-11 | 2006-02-11 | 움직임 보상 기반의 영상 압축 시스템에서의 영상 신호의공간 해상도 변환 방법 |
| US11/705,290 US8199824B2 (en) | 2006-02-11 | 2007-02-12 | Spatial resolution conversion of image signal based on motion compensation |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020060013335A KR100734314B1 (ko) | 2006-02-11 | 2006-02-11 | 움직임 보상 기반의 영상 압축 시스템에서의 영상 신호의공간 해상도 변환 방법 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR100734314B1 true KR100734314B1 (ko) | 2007-07-02 |
Family
ID=38502872
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020060013335A KR100734314B1 (ko) | 2006-02-11 | 2006-02-11 | 움직임 보상 기반의 영상 압축 시스템에서의 영상 신호의공간 해상도 변환 방법 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US8199824B2 (ko) |
| KR (1) | KR100734314B1 (ko) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101678968B1 (ko) * | 2009-08-21 | 2016-11-25 | 에스케이텔레콤 주식회사 | 참조 픽처 보간 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치 |
| US9554083B2 (en) | 2013-08-12 | 2017-01-24 | Samsung Electronics Co., Ltd. | Methods for selecting resolution with minimum distortion value and devices performing the methods |
| KR20190069830A (ko) * | 2017-12-12 | 2019-06-20 | 전자부품연구원 | 부호화 유닛의 문맥을 사용하여 참조 프레임을 선택하는 영상 부호화 방법 및 장치 |
| US11622124B2 (en) | 2009-08-21 | 2023-04-04 | Sk Telecom Co., Ltd. | Method and apparatus for encoding/decoding images using adaptive motion vector resolution |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20110158309A1 (en) * | 2009-12-28 | 2011-06-30 | Motorola, Inc. | Method and apparatus for determining reproduction accuracy of decompressed video |
| JP2011244210A (ja) * | 2010-05-18 | 2011-12-01 | Sony Corp | 画像処理装置および方法 |
| CN108833916B (zh) * | 2018-06-20 | 2021-09-24 | 腾讯科技（深圳）有限公司 | 视频编码、解码方法、装置、存储介质和计算机设备 |
| CN110572654B (zh) * | 2019-09-27 | 2024-03-15 | 腾讯科技（深圳）有限公司 | 视频编码、解码方法和装置、存储介质及电子装置 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0662392A (ja) * | 1992-08-05 | 1994-03-04 | Nec Corp | 高能率動画像符号化方式 |
| JPH11146347A (ja) | 1997-11-11 | 1999-05-28 | Canon Inc | 画像処理装置及び画像処理方法 |
| KR20030073254A (ko) * | 2002-03-09 | 2003-09-19 | 삼성전자주식회사 | 시공간적 복잡도를 고려한 적응적 동영상 부호화 방법 및그 장치 |
| KR100519978B1 (ko) | 2003-12-23 | 2005-10-13 | 한국전자통신연구원 | 동영상 인지 모델을 이용한 영상 화질 개선 장치 및 그방법 |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0750752A (ja) * | 1993-08-06 | 1995-02-21 | Fuji Xerox Co Ltd | 画像密度変換方法及び装置 |
| US5946044A (en) * | 1995-06-30 | 1999-08-31 | Sony Corporation | Image signal converting method and image signal converting apparatus |
| US6173013B1 (en) * | 1996-11-08 | 2001-01-09 | Sony Corporation | Method and apparatus for encoding enhancement and base layer image signals using a predicted image signal |
| KR100251548B1 (ko) * | 1997-11-01 | 2000-04-15 | 구자홍 | 디지털영상을위한움직임추정장치및방법 |
| US6275536B1 (en) * | 1999-06-23 | 2001-08-14 | General Instrument Corporation | Implementation architectures of a multi-channel MPEG video transcoder using multiple programmable processors |
| US6934335B2 (en) * | 2000-12-11 | 2005-08-23 | Sony Corporation | Video encoder with embedded scene change and 3:2 pull-down detections |
| US7027510B2 (en) * | 2002-03-29 | 2006-04-11 | Sony Corporation | Method of estimating backward motion vectors within a video sequence |
-
2006
- 2006-02-11 KR KR1020060013335A patent/KR100734314B1/ko active IP Right Grant
-
2007
- 2007-02-12 US US11/705,290 patent/US8199824B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0662392A (ja) * | 1992-08-05 | 1994-03-04 | Nec Corp | 高能率動画像符号化方式 |
| JPH11146347A (ja) | 1997-11-11 | 1999-05-28 | Canon Inc | 画像処理装置及び画像処理方法 |
| KR20030073254A (ko) * | 2002-03-09 | 2003-09-19 | 삼성전자주식회사 | 시공간적 복잡도를 고려한 적응적 동영상 부호화 방법 및그 장치 |
| KR100519978B1 (ko) | 2003-12-23 | 2005-10-13 | 한국전자통신연구원 | 동영상 인지 모델을 이용한 영상 화질 개선 장치 및 그방법 |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101678968B1 (ko) * | 2009-08-21 | 2016-11-25 | 에스케이텔레콤 주식회사 | 참조 픽처 보간 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치 |
| US11622124B2 (en) | 2009-08-21 | 2023-04-04 | Sk Telecom Co., Ltd. | Method and apparatus for encoding/decoding images using adaptive motion vector resolution |
| US9554083B2 (en) | 2013-08-12 | 2017-01-24 | Samsung Electronics Co., Ltd. | Methods for selecting resolution with minimum distortion value and devices performing the methods |
| KR20190069830A (ko) * | 2017-12-12 | 2019-06-20 | 전자부품연구원 | 부호화 유닛의 문맥을 사용하여 참조 프레임을 선택하는 영상 부호화 방법 및 장치 |
| KR102075207B1 (ko) * | 2017-12-12 | 2020-02-10 | 전자부품연구원 | 부호화 유닛의 문맥을 사용하여 참조 프레임을 선택하는 영상 부호화 방법 및 장치 |
Also Published As
| Publication number | Publication date |
|---|---|
| US20070223589A1 (en) | 2007-09-27 |
| US8199824B2 (en) | 2012-06-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR100734314B1 (ko) | 움직임 보상 기반의 영상 압축 시스템에서의 영상 신호의공간 해상도 변환 방법 | |
| TWI455588B (zh) | 以雙向、局部及全域移動評估為基礎之框率轉換 | |
| US8724022B2 (en) | Frame rate conversion using motion estimation and compensation | |
| JP3799099B2 (ja) | ビデオ圧縮方法及び装置 | |
| US7868946B2 (en) | Adaptive motion compensated interpolating method and apparatus | |
| US8610826B2 (en) | Method and apparatus for integrated motion compensated noise reduction and frame rate conversion | |
| US8615036B2 (en) | Generating interpolated frame of video signal with enhancement filter | |
| US20150071567A1 (en) | Image processing device, image processing method and non-transitory computer readable medium | |
| US8411751B2 (en) | Reducing and correcting motion estimation artifacts during video frame rate conversion | |
| WO2013031424A1 (ja) | 画像処理装置、および画像処理方法、並びにプログラム | |
| US20090016623A1 (en) | Image processing device, image processing method and program | |
| CN110944189B (zh) | 从仿射运动预测的非仿射块 | |
| JP4709155B2 (ja) | 動き検出装置 | |
| US6930728B2 (en) | Scan conversion apparatus | |
| US6243140B1 (en) | Methods and apparatus for reducing the amount of buffer memory required for decoding MPEG data and for performing scan conversion | |
| US8169541B2 (en) | Method of converting frame rate of video signal | |
| JPH0851599A (ja) | 画像情報変換装置 | |
| US8805101B2 (en) | Converting the frame rate of video streams | |
| US20140072045A1 (en) | Image processing apparatus, image processing system, and computer-implemented method for processing image data | |
| KR100810391B1 (ko) | 움직임 보간을 이용한 프레임 레이트 변환 방법 | |
| JP4021800B2 (ja) | 動画像符号化装置，方法および動画像符号化プログラム | |
| JPH09200763A (ja) | 動画像符号化における動き補償方法 | |
| CN110062243B (zh) | 一种基于近邻优化的光场视频运动估计方法 | |
| JP2925046B2 (ja) | 動画像の動き補償予測方法 | |
| JPH0818975A (ja) | 動画像の符号化・復号装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant | ||
| FPAY | Annual fee payment |
Payment date: 20130531 Year of fee payment: 7 |
|
| FPAY | Annual fee payment |
Payment date: 20140530 Year of fee payment: 8 |
|
| FPAY | Annual fee payment |
Payment date: 20150601 Year of fee payment: 9 |
|
| FPAY | Annual fee payment |
Payment date: 20160531 Year of fee payment: 10 |
|
| FPAY | Annual fee payment |
Payment date: 20190530 Year of fee payment: 13 |