KR102266325B1 - 비디오 품질 향상 - Google Patents
비디오 품질 향상 Download PDFInfo
- Publication number
- KR102266325B1 KR102266325B1 KR1020177004485A KR20177004485A KR102266325B1 KR 102266325 B1 KR102266325 B1 KR 102266325B1 KR 1020177004485 A KR1020177004485 A KR 1020177004485A KR 20177004485 A KR20177004485 A KR 20177004485A KR 102266325 B1 KR102266325 B1 KR 102266325B1
- Authority
- KR
- South Korea
- Prior art keywords
- media content
- content segments
- quality
- quality metric
- representation
- Prior art date
Links
- 238000013442 quality metrics Methods 0.000 claims abstract description 66
- 238000000034 method Methods 0.000 claims abstract description 51
- 230000003044 adaptive effect Effects 0.000 claims abstract description 10
- 238000012546 transfer Methods 0.000 claims abstract description 6
- 238000011156 evaluation Methods 0.000 claims description 5
- 230000008569 process Effects 0.000 description 15
- 230000006978 adaptation Effects 0.000 description 12
- 238000012545 processing Methods 0.000 description 12
- 238000004891 communication Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 10
- 238000005516 engineering process Methods 0.000 description 9
- 238000012805 post-processing Methods 0.000 description 8
- 230000000670 limiting effect Effects 0.000 description 5
- 230000002829 reductive effect Effects 0.000 description 5
- 230000002452 interceptive effect Effects 0.000 description 4
- 230000002411 adverse Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 239000000463 material Substances 0.000 description 3
- 230000000750 progressive effect Effects 0.000 description 3
- 230000011218 segmentation Effects 0.000 description 3
- 238000003491 array Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000012512 characterization method Methods 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000036961 partial effect Effects 0.000 description 2
- 238000013519 translation Methods 0.000 description 2
- 101100247669 Quaranfil virus (isolate QrfV/Tick/Afghanistan/EG_T_377/1968) PB1 gene Proteins 0.000 description 1
- 101150025928 Segment-1 gene Proteins 0.000 description 1
- 101100242902 Thogoto virus (isolate SiAr 126) Segment 1 gene Proteins 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 239000012634 fragment Substances 0.000 description 1
- GVVPGTZRZFNKDS-JXMROGBWSA-N geranyl diphosphate Chemical compound CC(C)=CCC\C(C)=C\CO[P@](O)(=O)OP(O)(O)=O GVVPGTZRZFNKDS-JXMROGBWSA-N 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 239000012092 media component Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000036316 preload Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/80—Responding to QoS
-
- H04L65/602—
-
- H04L65/608—
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
- H04L65/762—Media network packet handling at the source
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
- H04N21/25808—Management of client data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
- H04N21/26258—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/61—Network physical structure; Signal processing
- H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
- H04N21/6131—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via a mobile phone network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/643—Communication protocols
- H04N21/64322—IP
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/658—Transmission by the client directed to the server
- H04N21/6581—Reference data, e.g. a movie identifier for ordering a movie or a product identifier in a home shopping application
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computer Graphics (AREA)
- Information Transfer Between Computers (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
DASH(dynamic adaptive streaming over hypertext transfer protocol)를 지원하기 위한 기술이 개시된다. 품질 메트릭이 MPD(media presentation description) 파일에서 기술되는 정의된 표현에서의 복수의 미디어 콘텐츠 세그먼트 각각에 대해, 네트워크 디바이스에서, 결정될 수 있다. 결정된 품질 메트릭이 선택된 임계치 미만인 미디어 콘텐츠 세그먼트들이 정의된 표현에서 식별될 수 있다. 식별된 미디어 콘텐츠 세그먼트들은 수정된 MPD 파일을 형성하기 위해 MPD 파일에서 기술되는 상이한 표현으로부터의 대응 미디어 콘텐츠 세그먼트들로 대체될 수 있으며, 여기서 대응 미디어 콘텐츠 세그먼트들에 대한 품질 메트릭은 정의된 표현에서 미디어 콘텐츠 세그먼트들의 실질적으로 일정한 품질의 재생을 제공하기 위해서 선택된 임계치보다 크다.
Description
스트리밍과 대화형 서비스들을 포함하여, 멀티미디어 서비스들의 성장은 새로운 모바일 광대역 기술들 및 표준들로의 진화를 위한 핵심 추동력들 중 하나이다. 디지털 비디오 콘텐츠는 모바일 디바이스들에서 점점 더 많이 소비되고 있다. 일상 생활에 있어서 모바일 디바이스상에서 널리 이용되는 많은 비디오 애플리케이션이 있다. 예를 들어, 온라인 비디오 스트리밍은 유튜브(YouTube) 및 훌루(Hulu)와 같은 인기 있는 서비스들을 포함한다. 비디오 녹화 및 비디오 컨퍼런싱은 스카이프(Skype) 및 구글 행아웃(Google Hangout)과 같은 서비스를 포함한다. 2011년에, 유튜브는 1조 이상의 전세계적 뷰를 기록했다. 이러한 뷰들 중 10 퍼센트는 이동 전화 또는 태블릿을 통해 액세스되었다. 스마트폰들, 태블릿들, 및 다른 모바일 컴퓨팅 디바이스들이 더 많이 구매됨에 따라, 비디오 녹화 및 비디오 컨퍼런싱을 하기 위해 이들을 사용하는 것은 급격히 증가할 것이다. 멀티미디어 서비스들에 대한 그러한 높은 소비자 요구가 미디어 압축 및 무선 네트워크 기반구조들의 개발과 결합됨에 따라, 미래의 셀 방식 및 모바일 광대역 시스템들의 멀티미디어 서비스 능력을 향상시키고 또한 높은 체감 품질(QoE: quality of experience)을 소비자들에게 제공하여, 임의의 장소로부터, 임의의 시간에, 임의의 디바이스 및 기술에 의한, 비디오 콘텐츠 및 서비스들에의 유비쿼터스 액세스(ubiquitous access)를 보장하는 것이 관심 사항이 된다.
본 개시의 특징 및 이점은 첨부된 도면과 연계하여 취해지는 상세한 설명으로부터 명백해질 것이며, 이들은 예를 드는 식으로 하여 본 개시의 특징들을 함께 예시한다.
도 1은 한 예에 따른 미디어 프레젠테이션 기술(MPD: media presentation description) 메타데이터 파일 구성의 블럭도를 도해한다.
도 2는 한 예에 따른 하이퍼텍스트 전송 프로토콜(HTTP: hypertext transfer protocol) 스트리밍의 블럭도를 도해한다.
도 3은 한 예에 따라 HTTP 기반 비디오 스트리밍을 위한 에너지 특성화 인식 무선 액세스 네트워크(RAN: radio access network) 아키텍처의 블럭도를 도해한다.
도 4는 한 예에 따른 DASH(dynamic adaptive streaming over hypertext transfer protocol) MPD 파일 생성 처리의 다이어그램이다.
도 5는 예에 따라 미디어 콘텐츠 세그먼트들의 표현 내에서의 미디어 콘텐츠 세그먼트들 중의 품질 변화를 도해한다.
도 6은 예에 따른 MPD 후처리를 포함하는 DASH MPD 파일 생성 처리의 다이어그램이다.
도 7은 한 예에 따라 DASH를 지원하도록 동작 가능한 네트워크 디바이스의 회로의 기능성을 묘사한다.
도 8은 한 예에 따라 DASH를 지원하는 방법의 흐름도를 묘사한다.
도 9는 한 예에 따라 DASH를 지원하도록 동작 가능한 네트워크 디바이스의 회로의 기능성을 묘사한다.
도 10은 한 예에 따라 무선 디바이스(예를 들어, UE)의 다이어그램을 도해한다.
이제, 도해된 예시적 실시예들이 참조될 것이며, 본 명세서에서는 이들을 설명하기 위해 특정 언어가 사용될 것이다. 그렇지만, 그에 의해 본 발명의 범위를 제한하려는 의도는 아니라는 것을 이해해야 할 것이다.
도 1은 한 예에 따른 미디어 프레젠테이션 기술(MPD: media presentation description) 메타데이터 파일 구성의 블럭도를 도해한다.
도 2는 한 예에 따른 하이퍼텍스트 전송 프로토콜(HTTP: hypertext transfer protocol) 스트리밍의 블럭도를 도해한다.
도 3은 한 예에 따라 HTTP 기반 비디오 스트리밍을 위한 에너지 특성화 인식 무선 액세스 네트워크(RAN: radio access network) 아키텍처의 블럭도를 도해한다.
도 4는 한 예에 따른 DASH(dynamic adaptive streaming over hypertext transfer protocol) MPD 파일 생성 처리의 다이어그램이다.
도 5는 예에 따라 미디어 콘텐츠 세그먼트들의 표현 내에서의 미디어 콘텐츠 세그먼트들 중의 품질 변화를 도해한다.
도 6은 예에 따른 MPD 후처리를 포함하는 DASH MPD 파일 생성 처리의 다이어그램이다.
도 7은 한 예에 따라 DASH를 지원하도록 동작 가능한 네트워크 디바이스의 회로의 기능성을 묘사한다.
도 8은 한 예에 따라 DASH를 지원하는 방법의 흐름도를 묘사한다.
도 9는 한 예에 따라 DASH를 지원하도록 동작 가능한 네트워크 디바이스의 회로의 기능성을 묘사한다.
도 10은 한 예에 따라 무선 디바이스(예를 들어, UE)의 다이어그램을 도해한다.
이제, 도해된 예시적 실시예들이 참조될 것이며, 본 명세서에서는 이들을 설명하기 위해 특정 언어가 사용될 것이다. 그렇지만, 그에 의해 본 발명의 범위를 제한하려는 의도는 아니라는 것을 이해해야 할 것이다.
본 발명이 개시되고 기술되기 전에, 본 발명은 본 명세서에 개시되는 특정 구조, 처리 단계, 또는 재료에만 한정되지 않고 관련 기술 분야의 통상의 기술자에 의해 인식되는 바와 같은 그 균등물까지 확장된다는 것을 이해해야 한다. 본 명세서에서 채택되는 전문 용어는 특정 예들을 설명하기 위한 목적으로만 사용되었으며 제한하려는 의도로 사용된 것이 아니라는 것을 이해해야 한다. 상이한 도면들에서의 동일한 참조 번호들은 동일한 요소를 나타낸다. 흐름도들 및 처리에서 제공되는 숫자들은 단계들 및 동작들을 예시하는 데 있어서 명확성을 기하기 위해 제공된 것으로서 반드시 특정 순서 또는 시퀀스를 나타내지는 않는다.
예시적
실시예들
기술적 실시예들의 초기 개관이 아래에 제공되며, 그리고 나서 특정의 기술적 실시예들이 그 후에 더 상세하게 기술된다. 이러한 초기 요약은 독자들이 기술을 더 빠르게 이해하는 것을 돕고자 의도하지만, 기술의 핵심적 특징들 또는 본질적 특징들을 식별하고자 의도하지 않으며, 청구 대상의 범위를 한정하는 것을 의도하지도 않는다.
미디어 프레젠테이션 기술(MPD: media presentation description) 파일에서의 미디어 콘텐츠 세그먼트들의 표현 내에서 비슷한 품질의 미디어 콘텐츠 세그먼트들을 그룹화하기 위한 기법이 설명된다. 예를 들어, MPD 파일은 제1 표현(예를 들어, 비교적 높은 비트 레이트에서의 표현)으로 제1 세트의 미디어 콘텐츠 파일들을 기술할 수 있다. 게다가, MPD 파일은 제2 표현(예를 들어, 비교적 낮은 비트 레이트에서의 표현)으로 제2 세트의 미디어 콘텐츠 파일들을 기술할 수 있다. 표현(representation)은 정의된 품질 수준 및/또는 정의된 비트 레이트에서의 한 세트의 미디어 콘텐츠 파일들을 지칭할 수 있다. 품질 메트릭이 동일 표현(예를 들어, 비교적 낮은 비트 레이트를 갖는 미디어 콘텐츠 세그먼트들) 내에서의 복수의 미디어 콘텐츠 세그먼트 각각에 대해 결정될 수 있다. 선택된 임계치 미만의 품질 메트릭을 갖는 미디어 콘텐츠 세그먼트들이 식별될 수 있다. 예를 들어, 표현에서의 10개의 미디어 콘텐츠 세그먼트의 그룹에서, 미디어 콘텐츠 세그먼트들 중 하나가 (하나의 미디어 콘텐츠 세그먼트에 대한 품질 메트릭이 선택된 임계치 미만인 것에 의해 증명되는 것처럼) 비교적 낮은 품질의 것일 수 있다. 선택되는 임계치 미만의 품질 메트릭들을 갖는 표현에서의 미디어 콘텐츠 세그먼트들은 다른 미디어 콘텐츠 세그먼트들로 대체될 수 있다. 예를 들어, 선택된 평균보다 낮은 품질 메트릭을 가진 미디어 콘텐츠 세그먼트는 상이한 표현으로부터의 대응 미디어 콘텐츠 세그먼트로 대체될 수 있다. 상이한 표현은 비교적 높은 비트 레이트에 있는 한 세트의 미디어 콘텐츠 파일들을 포함할 수 있다. 대응 미디어 콘텐츠 세그먼트는 대체되고 있는 미디어 콘텐츠 세그먼트와 비교하여 실질적으로 동일한 미디어 시간 범위로부터의 것일 수 있다. 결과적으로, (비트 레이트가 미디어 콘텐츠 세그먼트들 간에 약간 달라질 수 있기는 하지만) 표현에 대한 미디어 콘텐츠 세그먼트들은 모두 상대적으로 비슷한 품질 수준을 가질 수 있다. 수정된 MPD는 상대적으로 비슷한 품질 수준들을 갖는 미디어 콘텐츠 세그먼트들을 포함하도록 생성될 수 있다. 수정된 MPD는 클라이언트에게 전달될 수 있으며, 여기서 수정된 MPD는 미디어 콘텐츠 세그먼트의 실질적으로 일정한 품질의 재생을 클라이언트에서 제공할 수 있다.
대안적 구성에서, 선택된 임계치 미만인 품질 메트릭을 갖는 표현에서의 미디어 콘텐츠 세그먼트들은 리인코딩(re-encode)될 수 있다. 미디어 콘텐츠 세그먼트들을 리인코딩하는 것은 품질 수준을 향상시킬 수 있어서, 리인코딩된 미디어 콘텐츠 세그먼트들에 대한 품질 메트릭이 선택된 임계치를 초과할 수 있도록 한다. 리인코딩된 미디어 콘텐츠 세그먼트들을 포함하도록 수정된 MPD가 생성될 수 있다. 그 결과, 표현에서의 미디어 콘텐츠 세그먼트들(즉, 리인코딩된 미디어 콘텐츠 세그먼트들과 리인코딩되지 않은 미디어 콘텐츠 세그먼트들 둘 모두)은 상대적으로 비슷한 품질 수준들을 가질 수 있다.
하이퍼텍스트 전송 프로토콜 적응적 스트리밍(HAS: Hypertext transfer protocol(HTTP) adaptive streaming)이 인터넷 비디오의 멀티미디어 전달의 형태로서 이용될 수 있다. HTTP 기반 전달은, HTTP 및 TCP/IP(transmission control protocol/internet protocol)를 포함하는 HTTP의 하위의 프로토콜들 양쪽 모두의 광범위한 채택으로 인해 신뢰성 및 전개 단순성을 제공할 수 있다. HTTP 기반 전달은, NAT(network address translation) 및 방화벽 통과 이슈(firewall traversal issue)들을 회피함으로써 용이하고 수월한 스트리밍 서비스들을 가능하게 할 수 있다. HTTP 기반 전달 또는 스트리밍은 또한 특수화된 스트리밍 서버들 대신에 표준 HTTP 서버들 및 캐시들을 이용하기 위한 능력도 제공할 수 있다. HTTP 기반 전달은 서버 측상에서의 최소의 또는 감소된 상태 정보 덕분에 확장성(scalability)을 제공할 수 있다.
인터넷 멀티미디어 콘텐츠를 전달하기 위해 HAS를 이용할 때, 모바일 디바이스상에서 동작하는 비디오 클라이언트는, 멀티미디어 서버와 같은 특정 리소스로부터 데이터를 검색하기 위해 HTTP GET 또는 부분 GET 커맨드를 이용하여 비디오 서버로부터 적절한 비디오 표현 수준들을 선택하고 요청함으로써 레이트 적응에 있어서 주요 역할을 수행하도록 구성될 수 있다. 비디오 클라이언트는 오디오 또는 비디오와 같은 스트리밍 멀티미디어 콘텐츠를 재생하기를 시작하기 전에 버퍼를 소정 수준까지 초기에 빌드업(build up)한다. 이 국면은 기동 국면으로서 지칭된다. 그 후에, 클라이언트는 버퍼링된 멀티미디어 콘텐츠의 재생을 시작한다. 클라이언트 디바이스에서의 멀티미디어 재생의 품질과 해상도는 이용 가능한 링크 대역폭에 의존한다. 비디오 클라이언트는 HTTP-수준 비디오 스트리밍 처리량과 같은 상위 계층 처리량 추정치들에만, 또는 TCP 처리량에 기초하여 이용 가능한 링크 대역폭을 전형적으로 추정한다.
높은 이동성 환경에서의 멀티미디어 스트리밍은 네트워크 상태들에서의 요동들(즉, 네트워크 변동성)이 멀티미디어 콘텐츠와 연관되는 통신 데이터 레이트를 감소시킬 때 도전적 과제일 수 있다. 과부화가 걸린 네트워크가 통신 데이터 레이트가 감소하도록 야기할 때, 최종 사용자 체감 품질(QoE)은 마찬가지로 감소할 수 있다. 예를 들어, 모바일 디바이스에서 수신되는 멀티미디어 콘텐츠는 낮은 해상도 또는 품질의 것일 수 있고 및/또는 멀티미디어 콘텐츠는 과부화가 걸린 네트워크를 통해 제공되고 있을 때 주기적으로 중단되거나 일시 정지될 수 있다.
제한된 리소스들을 가진 모바일 네트워크들에서의 프로그레시브 다운로드 기반 스트리밍 기법들의 사용은 비효율적 대역폭 활용 및 불량한 최종 사용자 체감 품질로 인해 바람직하지 않을 수 있다. 아래에 더 상세히 논의되는 바와 같이, DASH(dynamic adaptive streaming over HTTP)와 같은 HTTP 기반 스트리밍 서비스들이 프로그레시브 다운로드 기반 스트리밍의 약점들을 해결하는 데 사용될 수 있다.
클라이언트 예컨대, 사용자 장비(UE)에 스트리밍되는 멀티미디어 콘텐츠는 복수의 멀티미디어 콘텐츠 세그먼트를 포함할 수 있다. 멀티미디어 콘텐츠 세그먼트들 각각은 멀티미디어 콘텐츠의 상이한 품질 수준들을 나타내는 상이한 인코딩된 버전들을 포함한다. 상이한 인코딩된 버전들은 클라이언트로 하여금 변화하는 네트워크 상태들에 원활하게 적응하게 해 줄 수 있다. 예를 들어, 네트워크 상태들이 양호할 때(즉, 네트워크 상태들이 미리 결정된 임계치를 초과), 클라이언트는 높은 비디오 품질을 갖는 멀티미디어 콘텐츠 세그먼트들을 요청할 수 있다. 네트워크 상태들이 나쁠 때(즉, 네트워크 상태들이 미리 결정된 임계치 미만임), 클라이언트는 낮은 비디오 품질을 갖는 멀티미디어 콘텐츠 세그먼트들을 요청할 수 있다. 그 결과, 네트워크 상태들이 나쁠 때 클라이언트는 여전히 멀티미디어 콘텐츠 세그먼트들을 수신할 수 있고(낮은 품질이기는 하지만), 적응적 미디어 스트림이 중단될 가능성이 감소될 수 있다.
DASH에서, 클라이언트는 최고 비트 레이트를 가진 멀티미디어 콘텐츠 세그먼트들을 선택할 수 있어서, 멀티미디어 콘텐츠 세그먼트들이 미디어 재생 시에 리버퍼링 이벤트를 유발하지 않고서 미디어 재생에 대해 제시간에 클라이언트에 다운로드될 수 있도록 한다. 다시 말해서, 클라이언트는, 클라이언트에서의 미디어 재생을 재개하기 전에 미디어 콘텐츠의 일부를 클라이언트상으로 캐시 또는 프리로딩하기 위해서 적응적 미디어 스트림이 주기적으로 중단될 정도로 너무 높은 멀티미디어 콘텐츠 세그먼트들을 선택하지 않을 수 있다. 일 예에서, 불리한 네트워크 상태들이 미디어 콘텐츠 스트림의 품질을 저하시킬 수 있다. 불리한 네트워크 상태들은 커버리지 널들, 갑작스러운 대역폭 변화들, 패킷 손실들, 실질적인 지연 변동들, 기타 등등을 포함할 수 있다. 적응성 스트리밍 기법들이 이용 가능한 처리량을 계산하고 또한 이용 가능한 처리량에 기초하여 적절한 스트리밍 비트 레이트를 결정할 때 현재의 네트워크 상태들을 고려할 수 있기는 하지만, 클라이언트에서의 매끄러운 미디어 재생은 갑작스러운 네트워크 변동들 및/또는 불리한 네트워크 상태들 동안 보장되지 않을 수 있다.
그러므로, 클라이언트에서 적응적 미디어 스트림을 위한 바라는 체감 품질을 유지하기 위해, 클라이언트의 계획된 경로와 계획된 경로를 따른 현재 네트워크 상태들이, 클라이언트에서 멀티미디어 콘텐츠 세그먼트를 전략적으로 캐시하는데 이용될 수 있어서, 결과적으로 클라이언트에서의 더 매끄러운 미디어 재생과 향상된 체감 품질을 제공하게 된다. 클라이언트는 계획된 경로(즉, 클라이언트가 진행할게 될 지리적 경로)를 선택할 수 있다. 클라이언트는 계획된 경로상에서 이동하면서 미디어 콘텐츠(예를 들어, 영화)를 스트리밍할 수 있다. 일 예에서, 클라이언트는 이동 차량 또는 차량의 컴퓨팅 디바이스 내에 자리잡은 모바일 디바이스를 포함할 수 있다. 클라이언트는 채널 정보 데이터베이스(CID)로부터 계획된 경로에 대한 현재 네트워크 상태들을 수신할 수 있다. 현재 네트워크 상태들은 미리 결정된 임계치 미만인 대응 네트워크 상태들을 가진 계획된 경로를 따른 소정 장소들(예를 들어, 터널들, 다리들, 외진 곳들)을 포함할 수 있다. 클라이언트는 미디어 콘텐츠 서버에게 미디어 콘텐츠의 추가적 미디어 콘텐츠 세그먼트들(예를 들어, 영화의 추가적 세그먼트들)을 요청할 수 있고 또한 이후 추가적 미디어 콘텐츠 세그먼트들을 캐시에 저장할 수 있다. 클라이언트가 미리 결정된 임계치 미만인 네트워크 상태들을 가진 계획된 경로를 따른 장소들에 도착할 때, 클라이언트는 캐시에 저장된 미디어 콘텐츠를 재생할 수 있다. 그 결과, 계획된 경로를 따른 현재 네트워크 상태들이 미리 결정된 임계치 미만으로 떨어지는 시간 동안에도, 연속적 미디어 재생이 클라이언트에서 실질적으로 제공될 수 있다.
무선 멀티미디어 표준들
모바일 컴퓨팅 디바이스들에게, 그들로부터, 또는 그들 사이에서 멀티미디어가 전달되는 것을 가능하게 하도록 개발된 다수의 멀티미디어 표준들이 존재한다. 사례로서, 비디오를 스트리밍함에 있어서, 3GPP(third generation partnership project)는 주문형 또는 라이브 콘텐츠의 유니캐스트 스트리밍을 위한 RTSP(real-time streaming protocol)에 기초하는 PSS(packet-switched streaming services)를 기술하는 기술 사양(TS) 26.234(예로서, 릴리스 11.0.0)를 개발하였다. 게다가, 프로그레시브 다운로드 및 DASH를 포함하는 HTTP 기반 스트리밍 서비스들은 3GPP TS 26.247(예를 들어, 릴리스 11.0.0)에 기술된다. 3GPP 기반 MBMS(multimedia broadcast and multicast services) 사양 TS 26.346(예를 들어, 릴리스 11.0.0)은 멀티캐스트/브로드캐스트 콘텐츠 배포를 위한 스트리밍 및 다운로드 기법들을 특정한다. 그것으로서, DASH/PSS/MBMS 기반 모바일 컴퓨팅 디바이스들, 예컨대 사용자 장비(UE들)는 스트리밍된 비디오들을 UE 디바이스들에서 디코딩하고 렌더링한다. 3GPP TS 26.244(예로서, 릴리스 11.0.0)에서의 3GP 파일 포맷을 위한 지원은 파일 다운로드 및 HTTP 기반 스트리밍 사용 케이스를 지원하는 데에 이러한 사양들 모두에서 의무화된다.
비디오 컨퍼런싱과 같은, 대화형 비디오 통신에 대한 표준의 일 예가 3GPP TS 26.114(예를 들어, 11.0.0)에 제공된다. 이 표준은 IMS(internet protocol(IP) multimedia subsystems) 기반 네트워크들을 통해 진보된 멀티미디어 대화형 서비스들 및 콘텐츠의 전달을 허용하는 MTSI(multimedia telephony services over IMS)를 기술한다. IMS는 3 GPP TS 26.140(예를 들어, Rel. 11.0.0)에서 표준화된다. MTSI 기반 송신기 UE 단말기는 비디오를 캡처 및 녹화할 수 있고, 이후 3GPP 네트워크를 통해 MTSI 기반 수신기 UE 단말기에게 비디오를 전송할 수 있다. 수신기 UE 단말기는 이후 비디오를 디코딩하고 렌더링할 수 있다. 3GPP TS 26.140은 또한, 3GPP 파일 포맷에 대한 지원이 제공되는, MMS(multimedia sharing services)를 이용하여 비디오 공유를 가능하게 한다.
전술한 표준들은 멀티미디어 파일들을 멀티미디어 디바이스들로, 그들로부터, 및/또는 그들 사이에서 전달하는 데 이용될 수 있는 무선 멀티미디어 표준들의 예들로서 제공된다. 이 예들은 제한하고자 의도되지 않는다. 추가적 표준들이 비디오 스트리밍, 대화형 비디오, 또는 비디오 공유를 제공하기 위해 이용될 수 있다.
미디어 스트리밍 표준들
여기에서는 본 발명의 실시예들의 맥락에서, HTTP 스트리밍 및 더 구체적으로는 DASH 표준에 대한 더 상세한 설명이 제공된다. 상세한 설명은 제한하도록 의도되지 않는다. 후속 단락들에서 더 설명되는 바와 같이, 본 발명의 실시예들은, 모바일 디바이스들, 또는 모바일 디바이스들과 통신하는 서버들이 바라는 에너지 특성화(energy characterization)를 갖는 멀티미디어를 선택 및/또는 전달할 수 있게 함으로써, 모바일 디바이스들로, 그들로부터, 및/또는 그들 사이에서 멀티미디어를 효율적으로 전달하는 데 이용될 수 있다. 멀티미디어는 표준화된 또는 비표준화된 통신 스킴을 이용하여 전달될 수 있다.
HTTP 스트리밍은 인터넷 비디오의 멀티미디어 전달의 형태로서 이용될 수 있다. HTTP 스트리밍에서, 멀티미디어 파일은 하나 이상의 세그먼트가 되도록 분할되고, HTTP 프로토콜을 이용하여 클라이언트에게 전달될 수 있다. HTTP 기반 전달은, HTTP와, TCP/IP를 포함하는 HTTP의 하위의 프로토콜 양쪽 모두의 광범위한 채택으로 인해 신뢰성 및 전개 단순성을 제공할 수 있다. HTTP 기반 전달은 NAT(network address translation) 및 방화벽 통과 이슈들을 회피함으로써 간소화된 스트리밍 서비스들을 가능하게 할 수 있다. HTTP 기반 전달 또는 스트리밍은 또한 특수화된 스트리밍 서버들 대신에 표준 HTTP 서버들 및 캐시들을 이용하기 위한 능력도 제공할 수 있다. HTTP 기반 전달은 서버 측상에서의 최소의 또는 감소된 상태 정보로 인해 확장성을 제공할 수 있다. HTTP 스트리밍 기술의 예는, 마이크로소프트 IIS 매끄러운 스트리밍(Microsoft IIS Smooth Streaming), 애플 HTTP 라이브 스트리밍(Apple HTTP Live Streaming), 및 어도비 HTTP 동적 스트리밍(Adobe HTTP Dynamic Streaming)을 포함할 수 있다.
DASH는 표준화된 HTTP 스트리밍 프로토콜이다. 도 1에 도시된 바와 같이, DASH는 서버에 저장되는 미디어 콘텐츠 표현들의 구조 및 상이한 버전들뿐만 아니라 세그먼트 포맷들에 관한 정보를 제공하는 MPD 메타데이터 파일(102)에 대한 상이한 포맷들을 특정할 수 있다. MPD 메타데이터 파일은 다른 표현들과의 스위칭 및 동기적 프레젠테이션을 위해 세그먼트들의 미디어 프레젠테이션 타임라인으로의 매핑을 보장하기 위해 미디어 플레이어에 대한 초기화 및 미디어 세그먼트들에 대한 정보를 포함한다(예를 들어, 미디어 플레이어는 컨테이너 포맷 및 미디어 타이밍 정보를 결정하기 위해 초기화 세그먼트를 살펴볼 수 있다). DASH 기술은 MPEG(Moving Picture Experts Group), OIPF(Open IPTV Forum) 및 Hbb TV(Hybrid Broadcast Broadband TV)와 같은 다른 조직체들에 의해서도 표준화되었다.
DASH 클라이언트는 일련의 HTTP 요청-응답 트랜잭션들을 통해 세그먼트들을 다운로딩함으로써 멀티미디어 콘텐츠를 수신할 수 있다. DASH는 모바일 디바이스에 이용 가능한 대역폭이 변화함에 따라 미디어 콘텐츠의 상이한 비트 레이트 표현들 간에 동적으로 스위칭하기 위한 능력을 제공할 수 있다. 따라서, DASH는, 변화하는 네트워크 및 무선 링크 상태들, 디스플레이 해상도, 채택된 CPU의 유형, 및 가용 메모리 리소스들과 같은 사용자 선호사항들과 디바이스 능력들, 및 기타 등등에 대한 빠른 적응을 허용할 수 있다. DASH의 동적 적응은 다른 스트리밍 프로토콜들보다 짧은 기동 지연들 및 적은 리버퍼링 이벤트들과 함께 사용자에게 더 양호한 체감 품질(QoE)을 제공할 수 있다.
DASH에서, MPD 메타데이터(102)는 도 2에 도시된 바와 같이 웹/미디어 서버(212)에 저장되는 미디어 콘텐츠 표현들의 구조 및 상이한 버전들에 대한 정보를 제공할 수 있다. 도 1에 도시된 예에서, MPD 메타데이터는 이 예에서 60초와 같은 미리 결정된 길이를 갖는 기간들로 시간적으로 분할된다. 각각의 기간은 복수의 적응 세트(104)를 포함할 수 있다. 각각의 적응 세트는 다수의 인코딩된 대안들을 가진 하나 이상의 미디어 컴포넌트들에 대한 정보를 제공할 수 있다. 예를 들어, 이 예에서의 적응 세트 0은 예컨대 상이한 비트 레이트들, 모노, 스테레오, 또는 서라운드 사운드, 및 기타 등등과 같이 다양하고 상이하게 인코딩된 오디오 대안들을 포함할 수 있다. 기간 ID에 걸쳐서 멀티미디어 프레젠테이션에 대한 상이한 품질의 오디오를 제공하는 것 외에도, 적응 세트는 상이한 언어들로 된 오디오도 포함할 수 있다. 적응 세트에 제공되는 상이한 대안들은 표현들(106)로서 지칭된다.
도 1에서, 적응 세트 1은 5 Mbps(mega-bits per second), 2 Mbps, 500 kbps(kilo-bits per second), 또는 트릭 모드와 같은 상이한 비트 레이트들에서 비디오를 제공하는 것으로 도시된다. 트릭 모드는 탐색, 고속 전진 감기, 되감기, 또는 멀티미디어 스트리밍 파일에서의 로케이션의 다른 변경들에 대해 이용될 수 있다. 게다가, 비디오는 이차원(2D) 또는 삼차원(3D) 비디오와 같은 상이한 포맷들로 이용 가능할 수도 있다. 각각의 표현(106)은 세그먼트 정보(108)를 포함할 수 있다. 세그먼트 정보는 초기화 정보(110) 및 실제 미디어 세그먼트 데이터(112)를 포함할 수 있다. 이 예에서는, MPEG 4(MP4) 파일이 서버로부터 모바일 디바이스로 스트리밍된다. 이 예에서는 MP4가 사용되지만, 앞서 논의한 바와 같이, 광범위하게 다양한 상이한 코덱들이 이용될 수 있다.
적응 세트에서의 멀티미디어는 더 작은 세그먼트들이 되도록 추가로 분할될 수 있다. 도 1의 예에서, 적응 세트 1의 60초 비디오 세그먼트는 각각 15초의 4개의 서브 세그먼트들(112)이 되도록 추가로 분할된다. 이런 예들은 제한하도록 의도되지 않는다. 적응 세트 및 각각의 미디어 세그먼트 또는 서브 세그먼트의 실제 길이는 미디어의 유형, 시스템 요건들, 간섭의 잠재적 유형, 및 기타 등등에 의존한다. 실제 미디어 세그먼트들 및 서브 세그먼트들은 1초 미만 내지 몇 분이 되는 길이를 가질 수 있다.
도 2에 도시된 바와 같이, MPD 메타데이터 정보는 모바일 디바이스와 같은, 클라이언트(220)와 통신될 수 있다. 모바일 디바이스는 스트리밍 미디어를 수신하고 표시하도록 구성되는 무선 디바이스일 수 있다. 일 실시예에서, 모바일 디바이스는 예컨대, 스트리밍 미디어를 수신하고 이후 렌더링을 위해 다른 디바이스 또는 디스플레이 디바이스에게 이것을 통신하는 것과 같이, 이러한 기능의 일부만을 수행할 수 있다. 모바일 디바이스는 클라이언트(220)를 실행하도록 구성될 수 있다. 클라이언트는 HTTP GET(240) 메시지 또는 일련의 부분 GET 메시지들을 이용하여 세그먼트들을 요청할 수 있다. 클라이언트는 무선 링크, 디바이스 상태 또는 사용자 선호의 변화들에 반응하기 위해 예컨대, 세그먼트들의 시퀀스의 제때의 요청 및 원활한 플레이-아웃을 관리하는 것 또는 비트 레이트들 또는 다른 속성들을 잠재적으로 조정하는 것과 같이, 스트리밍 세션을 제어할 수 있다.
도 2는 DASH 기반 스트리밍 프레임워크를 도해한다. 웹/미디어 서버(212)에서의 미디어 인코더(214)는 오디오/비디오 입력(210)으로부터의 입력 미디어를 저장 또는 스트리밍을 위한 포맷이 되도록 인코딩할 수 있다. 미디어 세그먼터(216)는 입력 미디어를, 웹 서버(218)에게 제공될 수 있는 일련의 세그먼트들(232)이 되도록 분할하는 데 사용될 수 있다. 클라이언트(220)는 웹 서버(예를 들어, HTTP 서버)에게 송신되는 HTTP GET 메시지들(234)을 이용하여 세그먼트들에서의 새로운 데이터를 요청할 수 있다.
예를 들어, 클라이언트(220)의 웹 브라우저(222)는 HTTP GET 메시지(240)를 이용하여 멀티미디어 콘텐츠를 요청할 수 있다. 웹 서버(218)는 멀티미디어 콘텐츠에 대한 MPD(242)를 클라이언트에게 제공할 수 있다. MPD는 연관된 메타데이터 정보(252)에 보여지는 대로의 각각의 세그먼트의 인덱스 및 세그먼트의 대응 로케이션들을 운반하는 데 사용될 수 있다. 웹 브라우저는 (236)에 도시된 바와 같이 MPD(242)에 따라 서버로부터 미디어를 세그먼트별로 풀링할 수 있다. 사례에서, 웹 브라우저는 HTTP GET URL(frag 1 req)(244)을 이용하여 제1 세그먼트를 요청할 수 있다. URL(uniform resource locator) 또는 URL(universal resource locator)은, 클라이언트가 어느 세그먼트를 요청하는지를 웹 서버에 알리기 위해 이용될 수 있다(254). 웹 서버는 제1 프래그먼트(즉, 세그먼트1 246))를 제공할 수 있다. 후속 세그먼트들에 대해, 웹 브라우저는 HTTP GET URL(frag i req)(248)을 이용하여 세그먼트 i를 요청할 수 있으며, 여기서 i는 세그먼트의 정수 인덱스이다. 결과적으로, 웹 서버는 세그먼트 i 250을 제공할 수 있다. 세그먼트들은 미디어 디코더/플레이어(224)를 통해 클라이언트에 프레젠팅될 수 있다.
도 3은 UE(336)와 같은 모바일 디바이스상에서 동작하는 3GPP 클라이언트(338)에게 멀티미디어 콘텐츠를 제공하는 HTTP 서버(310) 간의 멀티미디어 콘텐츠(312)의 흐름을 도시한다. HTTP 서버는 WWAN(wireless wide area network)의 코어 네트워크(324)와 통신 상태에 있는 공중 또는 사설 네트워크(322)(또는 인터넷)와 인터페이싱할 수 있다. 일 실시예에서, WWAN은 3GPP LTE 기반 네트워크 또는 IEEE 802.16 기반 네트워크(즉, 802.16-2009)일 수 있다. 코어 네트워크는 RAN(radio access network)(332)을 통해 EPS(evolved packet system)와 같은 무선 네트워크(330)에 액세스할 수 있다. RAN(332)은 노드(예를 들어, eNB(evolved Node B)(334))를 통해 UE(336)상에서 동작하는 클라이언트에게 멀티미디어 콘텐츠를 제공할 수 있다.
HTTP 서버(310)는 채널 정보 데이터베이스(350)에 결합될 수 있다. 채널 정보 데이터베이스(350)는 복수의 지리적 장소에 대한 현재 네트워크 상태들을 포함할 수 있다. 복수의 지리적 장소는 특정 도로, 거리, 이웃, 지리적 영역, 다리, 터널, 기타 등등을 포함할 수 있다. 현재 네트워크 상태들은 복수의 지리적 장소에 대한 현재 네트워크 상태들의 실시간 모니터링에 기초할 수 있다. 그러므로, 채널 정보 데이터베이스(350)는 현재 네트워크 상태들에서의 변동들로 인해 동적으로 갱신될 수 있다. 대안적으로, 현재 네트워크 상태들은 복수의 지리적 장소에 대한 이력 네트워크 상태 정보에 기초하여 추론될 수 있다. 또 다른 예에서, 현재 네트워크 상태들은 크라우드 소싱된 네트워크 상태 정보를 이용하여 결정될 수 있다.
DASH에서, 미디어 콘텐츠는 (예를 들어, 품질 수준들에 대응하는) 상이한 표현들에 저장될 수 있다. 각각의 표현은 클라이언트(예를 들어, 모바일 디바이스)에 의해 요청될 수 있는 미디어 콘텐츠 세그먼트들의 리스트를 포함할 수 있다. 상이한 표현들 및 각각의 표현을 위한 미디어 콘텐츠 세그먼트들의 리스트에 대한 정보가 MPD에 컴파일링되고 클라이언트에 의해 다운로딩될 수 있고, MPD에 기초하여 클라이언트는 서버로부터 상이한 미디어 콘텐츠 세그먼트들을 요청할 수 있다.
하나의 예에서, 다양한 후처리 동작들이, 인코딩 처리에 의해 도입되는 품질 변화를 다루기 위해, DASH 포맷팅된 콘텐츠 및 연관된 MPD 파일들, 즉 매니페스트 파일(manifest file)들에 대해 실행될 수 있다. 비디오 콘텐츠 특성은 종종 콘텐츠의 속성에 기초하여 변화하는데, 이것이 인코더들이 항상 일관된 품질을 산출할 수 없고 또한 동시에 소정의 특정된 비트 레이트들을 갖는 비트 스트림들을 산출할 수 없게 되는 하나의 이유이다. 예를 들어, 스포츠 비디오 클립들에서와 같이, 비교적 큰 양의 움직임을 갖는 급속히 변화하는 장면들은 일관된 품질로 인코딩하기가 어려울 수 있고, 그러므로, 인코딩된 데이터의 품질은 상당한 정도로 요동할 수 있다. 또 다른 예로서, 장면들 사이의 전이는 어느 정도 수준의 품질 변화를 도입하지 않고서는 인코딩하기가 어려울 수 있다. 다른 한편, 느리게 변화하는 장면들을 인코딩하는 것은, 비교적 적은 수의 비트들이 이러한 장면들을 표현하는데 사용되기 때문에 품질 변동이 덜 되면서 인코딩될 수 있다.
수많은 상업적 인코더(또는 비디오 코덱들)가 가변 품질 수준들로 인코딩된 미디어 콘텐츠 세그먼트들을 산출한다. 비디오 코덱은 디지털 비디오의 압축 또는 압축 해제를 가능하게 하는 디바이스 또는 소프트웨어이다. 비디오 코덱들 중 일부 예들은 H.265 또는 MPEG-H HEVC(High Efficiency Video Coding), H.264 또는 MPEG-4 AVC(Advanced Video Coding), 또는 H.263/MPEG-4 Part 2를 포함한다.
도 4는 예시적 DASH MPD 파일 생성 처리의 다이어그램이다. 일부 예들에서, DASH MPD 파일 생성 처리는 CDN(content delivery network) 또는 운영자 네트워크에서의 서버(예를 들어, 에지 서버)에서 발생할 수 있다. 입력 비디오는 서버에서 수신될 수 있다. 입력 비디오는 스포츠 시합 또는 뉴스 방송과과 같은 미디어 콘텐츠를 포함할 수 있다. 서버에서 수신되는 미디어 콘텐츠는 단일 파일(예를 들어, 2-시간 뉴스 이벤트 파일)를 포함할 수 있다. 게다가, 입력 비디오는 최초의 압축되지 않은 비디오 신호일 수 있다. 블럭 402에서, 비디오/오디오 인코딩 처리는 미디어 콘텐츠에 대해 실행될 수 있다. 비디오 인코딩(또는 비디오 트랜스코딩) 처리는 웹 플레이어들 및 모바일 디바이스들과 호환 가능한 디지털 포맷으로 미디어 콘텐츠를 조직할 수 있다. 다시 말해서, 미디어 콘텐츠를 다양한 디바이스상에서 볼 수 있는 포맷으로 변환하기 위해 미디어 콘텐츠는 비디오 인코딩 처리를 겪을 수 있다. 비디오 코덱들의 예들은 H. 265, H. 264, WMV(Windows Media Video), 기타 등등을 포함할 수 있다. 오디오 코덱들의 예들은 MPEG-1 또는 MPEG-2 오디오 계층 III)(MP3) 및 WMA(Windows Media Audio)를 포함할 수 있다. 블럭 404에서, 비디오 다중화 처리가 오디오 콘텐츠와 비디오 콘텐츠를 서로 인터리빙시키기 위해 수행될 수 있다.
블럭 406에서, 미디어 콘텐츠(인터리빙된 비디오 및 오디오)는 세그먼테이션 처리를 겪을 수 있다. 다시 말해서, 미디어 콘텐츠는 복수의 미디어 콘텐츠 세그먼트가 되도록 분할될 수 있다. 예를 들어, 각각의 미디어 콘텐츠 세그먼트는 0.5초, 1초, 2초, 기타 등등의 길이를 가질 수 있다. 단계 408에서, 미디어 콘텐츠 세그먼트들을 기술하는 DASH MPD가 생성될 수 있다. DASH MPD 파일 생성 처리는 콘텐츠 제공자에 의해 지정되는 각각의 비트 레이트에 대해 반복될 수 있다. 그러므로, MPD는 각각 주어진 비트 레이트를 위한 여러가지 표현을 포함할 수 있다. 비트 레이트들은 적응적 미디어 콘텐츠 스트리밍을 제공하기 위해 하나 표현마다 달라질 수 있다(예를 들어, 500, 1000, 1500, 킬로비트/초). DASH MPD는 클라이언트에게 전달될 수 있고, 클라이언트는 클라이언트에서의 재생을 위해 서버에게 소정 미디어 콘텐츠 세그먼트들을 요청하기 위해 DASH MPD를 이용할 수 있다.
도 5는 미디어 콘텐츠 세그먼트들의 표현 내에서의 미디어 콘텐츠 세그먼트들 중의 예시적 품질 변동을 도해한다. 도 5에 도시된 바와 같이, 전형적 표현을 위한 품질 수준은 일반적으로 일정할 수 있지만, 표현에서 더 높은 품질 및 더 낮은 품질의 양쪽에서의 이상(anomaly)을 포함할 수 있다. (도4에 설명된 대로의) 인코딩, 다중화 및 세그먼테이션 처리로부터 초래되는 미디어 콘텐츠 세그먼트들은, 가변 비트 레이트 인코딩의 속성, 인코딩되고 있는 미디어 콘텐츠, 및 비디오 인코딩 처리에 의해 채택되는 상이한 인코딩 기술들 때문에 품질 수준들에 있어서 변할 수 있다(예를 들어, 소정 미디어 콘텐츠 세그먼트들은 다른 미디어 콘텐츠 세그먼트들과 비교해 더 큰 또는 더 작은 품질 수준들을 가질 수 있다). 다시 말해서, 압축되지 않은 비디오 신호를 인코딩하는 처리는 품질 변동이라는 결과를 낳을 수 있다.
하나의 예에서, 비디오 콘텐츠에서의 고속 이동 장면 및 비디오 콘텐츠에서의 저속 이동 장면은 동일 인코딩 기술을 이용하여 인코딩될 수 있다. 그러나, 고속 이동 장면에 대해 사용되는 비교적 큰 수의 비트들과 저속 이동 장면에 대해 사용되는 비교적 작은 수의 비트들로 인해, 양쪽 장면들이 동일 표현에 있다 하더라도, 고속 이동 장면은 저속 이동 장면보다 더 낮은 품질의 것일 수 있다. 상이하게 지원되는 비트 레이트들을 가진 클라이언트에 대해, 어느 한 미디어 콘텐츠 세그먼트로부터 또 다른 미디어 콘텐츠 세그먼트로의 품질 변화는 클라이언트에 의해 눈에 뜨일 수 있다. 다시 말해서, 클라이언트의 사용자는 상이한 장면들 또는 프레임들 간의 품질 수준의 변동을 주목할 수 있고, 그에 의해 잠재적으로 열악한 사용자 경험이라는 결과를 낳는다.
도 6은 MPD 후처리 기술을 포함하는 예시적 DASH MPD 파일 생성 처리의 다이어그램이다. 몇몇 예들에서, MPD 후처리 기술을 가진 DASH MPD 파일 생성 처리는 CDN(content delivery network) 또는 운영자 네트워크에서의 서버(예를 들어, 에지 서버)에서 발생할 수 있다. 입력 비디오는 서버에서 수신될 수 있다. 입력 비디오는 스포츠 시합 또는 뉴스 방송과 같은 미디어 콘텐츠를 포함할 수 있다. 블럭 602에서, 비디오/오디오 인코딩 처리는 미디어 콘텐츠에 대해 실행될 수 있다. 블럭 604에서, 비디오 다중화 처리는 오디오 콘텐츠와 비디오 콘텐츠를 서로 인터리빙시키기 위해 수행될 수 있다. 블럭 606에서, 비디오 및 오디오 콘텐츠(또는 미디어 콘텐츠 스트림)는 세그먼테이션 처리를 겪을 수 있다. 다시 말해서, 미디어 콘텐츠 스트림은 복수의 미디어 콘텐츠 세그먼트가 되도록 세그먼팅될 수 있다. 단계 608에서, 미디어 콘텐츠 세그먼트들을 기술하는 DASH MPD가 생성될 수 있다. 단계 610에서, MPD 후처리 기술은 DASH MPD에 대해 실행될 수 있다. 표현 내에서의 비슷한 품질의 미디어 콘텐츠 세그먼트들이 수정된 MPD(620)를 생성하기 위해 함께 그룹화되고 이용될 수 있다. 하나의 예에서, MPD 후처리 기술은 비디오 코덱에서가 아니라 DASH 인코더에서 수행될 수 있다.
각각의 표현에서의 각각의 미디어 콘텐츠 세그먼트에 대한 품질 메트릭은, 예를 들어, 품질 측정 도구(614)를 이용하여 비교될 수 있다. 품질 메트릭은 미디어 콘텐츠 세그먼트의 품질 수준을 판단하는데 사용되는 객관적 또는 주관적 기준일 수 있다. 일반적으로, 미디어 콘텐츠 품질(또는 비디오 품질)은 최초 비디오 콘텐츠와 이것이 비디오 전송 또는 처리 시스템(예로, 비디오 인코더)을 통해 지나간 후의 비디오 콘텐츠 간의 지각된 비디오 열화의 정식 또는 비정식적 측정을 가리킨다. 다시 말해서, 품질 메트릭은 (최초 비디오 신호는 압축되지 않기 때문에) 고 품질의 것이라고 일반적으로 간주되는 최초 비디오 신호와 인코딩된 (또는 다른 식으로 변환된) 비디오 신호 간의 차이를 측정할 수 있다. 디지털 비디오 처리 시스템(예를 들어, 비디오 코덱)의 품질을 평가하기 위한 한가지 기술은 최초 비디오 신호와 비디오 처리 시스템들을 통과해 지나간 신호 간의 신호 대 잡음비(SNR) 및 피크 신호 대 잡음비(PNSR)를 계산하는 것이다. PSNR은 흔히 사용되는 객관적 비디오 품질 메트릭이다. 다른 품질 메트릭들은 PEVQ(perceptual evaluation of video quality), SSIM(structural similarity) 및 CZD(Czenakowski Distance)의 지각적 평가를 포함할 수 있다. 품질 메트릭은 각각의 미디어 콘텐츠 세그먼트에게 할당될 수 있거나, 대안적으로, 각각의 미디어 콘텐츠 세그먼트는 미디어 콘텐츠 서브 세그먼트들이 되도록 분할될 수 있고, 각각의 미디어 콘텐츠 서브 세그먼트들이 품질 메트릭을 할당 받을 수 있다.
각각의 미디어 콘텐츠 세그먼트에 대한 품질 메트릭은 해당 동일 표현에서 다른 미디어 콘텐츠 세그먼트들과 비교될 수 있다. 표현에서의 미디어 콘텐츠 세그먼트들이 표현에서의 다른 미디어 콘텐츠 세그먼트들과 실질적으로 비슷한 품질의 것이라면, 미디어 콘텐츠 세그먼트들은 영향을 받지 않는다. 미디어 콘텐츠 세그먼트들은 각각의 미디어 콘텐츠 세그먼트들에 대한 품질 메트릭이 선택되는 품질 임계치(612)를 초과할 때 영향을 받지 않을 수 있다. 몇몇 예들에서, 선택된 품질 임계치(612)는 서버 또는 사용자 장비(UE)에 의해 결정될 수 있다.
표현에서의 미디어 콘텐츠 세그먼트들이 선택된 품질 임계치(612) 미만이면, 이러한 미디어 콘텐츠 세그먼트들은 표현에서 대체될 수 있다. 예를 들어, 이러한 미디어 콘텐츠 세그먼트들은 MPD 파일에서 기술되는 상이한 표현으로부터의 대응 미디어 콘텐츠 세그먼트들로 대체될 수 있다. 일부 예들에서, 상이한 표현은 비교적 높은 비트 레이트 또는 비교적 낮은 비트 레이트를 가진 한 세트의 미디어 콘텐츠 파일을 포함할 수 있다. 대응 미디어 콘텐츠 세그먼트들에 대한 품질 메트릭은 선택된 품질 임계치(612)보다 더 클 수 있다. 대응 미디어 콘텐츠 세그먼트들은 상이한 표현에서의 실질적으로 동일한 미디어 시간 범위로부터의 것일 수 있다. 그 결과, 표현에 대한 미디어 콘텐츠 세그먼트들은 실질적으로 비슷한 품질의 것일 수 있다. 수정된 MPD(620)는 각각이 비교적 비슷한 품질 수준을 갖는 미디어 콘텐츠 세그먼트들을 포함하도록 생성될 수 있다. 수정된 MPD(620)는 클라이언트에게 통신될 수 있으며, 여기서 수정된 MPD는 클라이언트에서 미디어 콘텐츠 세그먼트들의 실질적으로 일정한 품질 재생을 제공할 수 있다. 클라이언트는 품질에서의 최소 시간적 변동들을 갖는 미디어 콘텐츠의 표현들을 제공 받을 수 있다. 그러므로, 클라이언트는 주어진 표현에 접근할 수 있고 또한 재생 동안 일관된 품질 및 감소된 품질 요동량을 경험한다.
비 제한적 예로서, 2초 미디어 콘텐츠 세그먼트는 2:11:22(즉, 2시, 11분, 및 22초) 내지 2:11:24의 비디오 시간 코드에 대응할 수 있다. 2초 미디어 콘텐츠 세그먼트는 4.5 Mbps 비디오 스트림에 포함될 수 있다. 2초 미디어 콘텐츠 세그먼트에 대한 품질 메트릭은 품질 임계치(612) 미만인 것으로서 결정될 수 있다. 더 높은 표현(예를 들어, 5.3 Mbps 비디오 스트림에서 2:11:22 내지 2:11:24의 비디오 시간 코드를 갖는 2초 미디어 콘텐츠 세그먼트)으로부터의 대응 미디어 콘텐츠 세그먼트가 감소된 품질을 가진 2초 미디어 콘텐츠 세그먼트를 대체할 수 있다. 그러므로, 비슷한 품질의 미디어 콘텐츠 세그먼트들이 (상이한 비트 레이트들에도 불구하고) 표현에서 함께 그룹화될 수 있다. 미디어 콘텐츠 세그먼트들은, 표현에서 모든 실질적으로 동일 품질 수준을 갖는 한 세트의 미디어 콘텐츠 세그먼트들을 달성하기 위해 혼합되고 매칭될 수 있다.
하나의 예에서, 함께 그룹화되는 미디어 콘텐츠 세그먼트들은 비슷한 품질 수준들을 가질 수 있지만, 상이한 비트 레이트들을 가질 수 있다. 예를 들어, 비교적 높은 비트 레이트의 세그먼트들이 (품질 수준이 실질적으로 비슷하다 하더라도) 비교적 낮은 비트 레이트의 미디어 콘텐츠 세그먼트들과 혼합될 수 있다. 클라이언트는 미디어 콘텐츠 세그먼트들에 대한 비트 레이트가 더 적은 요동을 가질 때 더 효율적으로 동작할 수 있다. 그러므로, 최소의 비트 레이트 요동량이 클라이언트를 위해 바람직할 수 있다. 반면에, 변하는 품질 수준들을 가진 세그먼트들은 클라이언트의 사용자에게 바람직하지 않을 수 있다. 그러므로, 절충 또는 타협이 안정적 비트 레이트를 달성하는 것과 안정적 비디오 품질을 달성하는 것 사이에서 이루어질 수 있다.
대안적 구성에서, 선택된 품질 임계치(612) 미만인 품질 메트릭을 갖는 표현에서의 미디어 콘텐츠 세그먼트들은 리인코딩될 수 있다. 예를 들어, 미디어 콘텐츠 세그먼트들은 상이한 인코더 구성을 이용하여 리인코딩될 수 있다. 미디어 콘텐츠 세그먼트들은 비디오 코덱들(예를 들어, H. 264) 또는 오디오 코덱들(예를 들어, MP3)을 이용하여 리인코딩될 수 있다. 미디어 콘텐츠 세그먼트들을 리인코딩하는 것은 품질 수준을 개선할 수 있어서, 리인코딩된 미디어 콘텐츠 세그먼트들에 대한 품질 메트릭이 품질 임계치(612)를 넘어설 수 있도록 한다. 다시 말해서, 미디어 콘텐츠 세그먼트들은 리인코딩될 수 있고, 리인코딩된 미디어 콘텐츠 세그먼트들에 대한 품질 메트릭이 결정될 수 있다. 품질 메트릭이 이제 품질 임계치(612)를 넘어선다면, 리인코딩된 미디어 콘텐츠 세그먼트들은 MPD에 포함될 수 있다. 그 결과, 표현에서의 미디어 콘텐츠 세그먼트들(즉, 리인코딩된 미디어 콘텐츠 세그먼트들과 리인코딩되지 않은 미디어 콘텐츠 세그먼트들 양쪽 모두)은 비교적 비슷한 품질 수준들을 가질 수 있다.
하나의 예에서, 수정된 MPD(612)는, 품질 임계치(612)가 사용자에 의해 이용되는 디바이스의 유형에 의존할 수 있기 때문에 특정 디바이스 유형(또는 타깃 디바이스)에 대해 생성될 수 있다. 예를 들어, 고-해상도 12-인치 디스플레이 스크린은 6-인치 디스플레이 스크린에 비해 더 많은 수의 픽셀을 가질 수 있고, 그러므로, 6-인치 디스플레이 스크린상의 수용가능 품질을 갖는 비디오가 12-인치 디스플레이 스크린에 대해서는 수용 가능하지 않을 수 있다. 그러므로, 알려진 능력(예를 들어, 스크린 사이즈, 스크린 해상도)을 가진 주어진 타깃 디바이스에 대해, MPD 후처리는 해당 특정 타깃 디바이스에 대하여 실행될 수 있다. 미디어 콘텐츠는 각각의 디바이스 유형에 대해 DASH 수준에서 리인코딩될 수 있다. 텔레비전을 위한 미디어 콘텐츠는 스마트폰 또는 태블릿 컴퓨터를 위한 미디어 콘텐츠와는 다르게 인코딩될 수 있다. 하나의 예에서, 프리미엄 회원에 가입한 클라이언트는 해당 특정 클라이언트에 대해 인코딩되는 미디어 콘텐츠에 접근할 수 있다.
또 다른 예에서, MD 후처리는 기존 표현들의 조합을 이용하여, 그러나 특정 클라이언트에 더 적합한 새로운 비트 레이트 값으로 미디어 콘텐츠의 새로운 표현들을 생성하기 위해 이용될 수 있다. 예를 들어, 500 Kbps 표현을 위한 미디어 콘텐츠 세그먼트들 및 1000 Kbps 표현을 위한 미디어 콘텐츠 세그먼트들(즉, 동일 미디어 콘텐츠의 것임)은 미디어 콘텐츠를 트랜스코딩해야 할 필요 없이, 미디어 콘텐츠의 750 Kbps 표현을 생성하기 위해 조합될 수 있다.
또 다른 예가, 도 7의 흐름도에 도시된 바와 같이, DASH를 지원하도록 동작 가능한 네트워크 디바이스의 회로의 기능성(700)을 제공한다. 기능성은 방법으로서 구현될 수 있거나 또는 기능성은 머신상의 명령어들로서 실행될 수 있으며, 여기서 명령어들은 적어도 하나의 컴퓨터 판독가능 매체 또는 하나의 비일시적 머신 판독가능 저장 매체상에 포함된다. 회로는, 블럭 710에서와 같이, MPD 파일에서 기술되는 정의된 표현에서 복수의 미디어 콘텐츠 세그먼트를 식별하도록 구성될 수 있다. 회로는, 블럭 720에서와 같이, MPD 파일에서 기술되는 정의된 표현에서 복수의 미디어 콘텐츠 세그먼트 각각을 위한 품질 메트릭을 결정하도록 구성될 수 있다. 회로는, 블럭 730에서와 같이, 결정된 품질 메트릭이 선택된 임계치 미만인 정의된 표현에서 미디어 콘텐츠 세그먼트들을 식별하도록 구성될 수 있다. 게다가, 회로는 수정된 MPD 파일을 형성하기 위해 식별된 미디어 콘텐츠 세그먼트들을 MPD 파일에서 기술되는 상이한 표현으로부터의 대응 미디어 콘텐츠 세그먼트들로 대체하도록 구성될 수 있으며, 여기서 대응 미디어 콘텐츠 세그먼트들에 대한 품질 메트릭은, 블럭 740에서와 같이, 정의된 표현에서 미디어 콘텐츠 세그먼트들의 실질적으로 일정한 품질의 재생을 제공하기 위해서 선택된 임계치보다 크다.
하나의 예에서, 회로는 DASH를 지원하는 클라이언트 디바이스에게 수정된 MPD 파일을 전달하기 위해 추가로 구성될 수 있다. 또 다른 예에서, 회로는 특정 디바이스 유형을 위한 수정된 MPD를 생성하도록 추가로 구성될 수 있다. 또 다른 예에서, 네트워크 디바이스는 CDN(content delivery network) 또는 운영자 네트워크에 자리잡는다.
일 양태에서, 회로는 비트 레이트 파라미터 또는 품질 파라미터 중 적어도 하나를 이용하여 미디어 콘텐츠 세그먼트들에 대한 품질 메트릭을 식별하도록 추가로 구성될 수 있다. 또 다른 양태에 있어서, 대응 미디어 콘텐츠 세그먼트들은 정의된 표현에서의 미디어 콘텐츠 세그먼트들과 비교하여 상이한 표현에서 실질적으로 동일한 미디어 시간 범위로부터의 것이다. 또 다른 양태에서, 회로는 결정된 품질 메트릭이 선택된 임계치 미만인 정의된 표현에서의 미디어 콘텐츠 세그먼트들을 리인코딩할도록 추가로 구성될 수 있어서, 리인코딩된 미디어 콘텐츠 세그먼트들에 대한 결정된 품질 메트릭이 선택된 임계치를 넘어서도록 한다.
또 다른 예는 도 8의 흐름도에 도시된 바와 같이, DASH를 지원하기 위한 방법 800을 제공한다. 본 방법은 머신상의 명령어들로서 실행될 수 있는대, 여기서 명령어들은 적어도 하나의 컴퓨터 판독가능 매체 또는 하나의 비일시적 머신 판독가능 저장 매체상에 포함된다. 본 방법은, 블럭 810에서와 같이, MPD 파일에서 기술되는 정의된 표현에서의 복수의 미디어 콘텐츠 세그먼트 각각에 대해, 네트워크 디바이스에서, 품질 메트릭을 결정하는 동작을 포함할 수 있다. 본 방법은, 블럭 820에서와 같이, 결정된 품질 메트릭이 선택된 임계치 미만인 정의된 표현에서의 미디어 콘텐츠 세그먼트들을 식별하는 동작을 포함할 수 있다. 본 방법은, 블럭 830에서와 같이, 수정된 MPD 파일을 형성하기 위해 식별된 미디어 콘텐츠 세그먼트들을 MPD 파일에서 기술되는 상이한 표현으로부터의 대응 미디어 콘텐츠 세그먼트들로 대체하는 동작을 포함할 수 있으며, 여기서 대응 미디어 콘텐츠 세그먼트에 대한 품질 메트릭은 정의된 표현에서 미디어 콘텐츠 세그먼트의 실질적으로 일정한 품질의 재생을 제공하기 위해서 선택된 임계치보다 크다.
하나의 예에서, 본 방법은 네트워크 디바이스로부터 DASH를 지원하는 클라이언트 디바이스로 수정된 MPD 파일을 전달시키는 동작을 포함할 수 있다. 또 다른 예에서, 본 방법은 사용자 장비(UE)로부터 네트워크 디바이스에서의 품질 메트릭에 대한 선택된 임계치를 수신하는 동작을 포함할 수 있다. 또 하나의 예에서, 본 방법은 특정 디바이스 유형을 위한 수정된 MPD를 생성하는 동작을 포함할 수 있다.
하나의 구성에서, 네트워크 디바이스는 CDN 또는 운영자 네트워크에 자리잡는다. 또 다른 구성에서, 본 방법은 비트 레이트 파라미터 또는 품질 파라미터 중 적어도 하나를 이용하여 미디어 콘텐츠 세그먼트들에 대한 품질 메트릭을 식별하는 단계를 추가로 포함한다. 또 다른 구성에서, 대응 미디어 콘텐츠 세그먼트들은 정의된 표현에서의 미디어 콘텐츠 세그먼트들과 비교하여 상이한 표현에서의 실질적으로 동일한 미디어 시간 범위로부터의 것이다. 또한, 본 방법은 결정된 품질 메트릭이 선택된 임계치 미만인 정의된 표현에서의 미디어 콘텐츠 세그먼트들을 리인코딩하는 동작을 포함할 수 있어서, 리인코딩된 미디어 콘텐츠 세그먼트들에 대한 결정된 품질 메트릭이 선택된 임계치를 넘어서게 한다.
또 다른 예는 도 9의 흐름도에 도시된 바와 같이, DASH를 지원하도록 동작 가능한 네트워크 디바이스의 회로의 기능성(900)을 제공한다. 기능성은 방법으로서 구현될 수 있거나 또는 기능성은 머신상의 명령어들로서 실행될 수 있는데, 여기서 명령어들은 적어도 하나의 컴퓨터 판독가능 매체 또는 하나의 비일시적 머신 판독가능 저장 매체상에 포함된다. 회로는, 블럭 910에서와 같이, MPD 파일에서 기술되는 정의된 표현에서의 복수의 미디어 콘텐츠 세그먼트를 식별하도록 구성될 수 있다. 회로는, 블럭 920에서와 같이, MPD 파일에서 기술되는 정의된 표현에서의 복수의 미디어 콘텐츠 세그먼트 각각에 대한 품질 메트릭을 결정하도록 구성될 수 있다. 회로는, 블럭 930에서와 같이, 결정된 품질 메트릭이 선택된 임계치 미만인 정의된 표현에서의 미디어 콘텐츠 세그먼트들을 식별하도록 구성될 수 있다. 회로는, 블럭 940에서와 같이, 결정된 품질 메트릭이 선택된 임계치 미만인 정의된 표현에서의 미디어 콘텐츠 세그먼트들을 리인코딩하도록 추가로 구성될 수 있어서, 리인코딩된 미디어 콘텐츠 세그먼트들에 대한 결정된 품질 메트릭이 선택된 임계치를 넘어서게 한다. 게다가, 회로는, 블럭 950에서와 같이, 정의된 표현에서의 미디어 콘텐츠 세그먼트들의 실질적으로 일정한 품질의 재생을 제공하기 위해서 리인코딩된 미디어 콘텐츠 세그먼트를 포함하기 위해 수정된 MPD를 생성하도록 추가로 구성될 수 있다.
하나의 예에서, 회로는 DASH를 지원하는 클라이언트 디바이스에게 수정된 MPD 파일을 전달하도록 추가로 구성될 수 있다. 또 다른 예에서, 회로는 특정 디바이스 유형에 대해 수정된 MPD를 생성하기 위해 추가로 구성될 수 있다. 또 하나의 예에서, 네트워크 디바이스는 CDN 또는 운영자 네트워크에 자리잡는다.
일 양태에서, 회로는 비트 레이트 파라미터 또는 품질 파라미터 중 적어도 하나를 이용하여 미디어 콘텐츠 세그먼트들에 대한 품질 메트릭을 식별하도록 추가로 구성될 수 있다. 또 다른 양태에 있어서, 회로는, 수정된 MPD 파일을 형성하기 위해 식별된 미디어 콘텐츠 세그먼트들을 MPD 파일에서 기술되는 상이한 표현으로부터의 대응 미디어 콘텐츠 세그먼트들로 대체하도록 추가로 구성될 수 있으며, 여기서 대응 미디어 콘텐츠 세그먼트들에 대한 품질 메트릭은 선택된 임계치보다 크다. 또 다른 양태에서, 대응 미디어 콘텐츠 세그먼트들은 정의된 표현에서의 미디어 콘텐츠 세그먼트들과 비교해 상이한 표현에서의 실질적으로 동일한 미디어 시간 범위로부터의 것이다.
도 10은 사용자 장비(UE), 이동국(MS), 모바일 무선 디바이스, 모바일 통신 디바이스, 태블릿, 핸드셋, 또는 다른 유형의 무선 디바이스와 같은 무선 디바이스의 예시적 도해를 제공한다. 무선 디바이스는 기지국(BS), eNB(evolved Node B), 기저대역 유닛(BBU: baseband unit), 원격 무선 헤드(RRH: remote radio head), 원격 무선 장비(RRE: remote radio equipment), 중계국(RS: relay station), 무선 장비(RE), 원격 무선 유닛(RRU: remote radio unit), 중앙 처리 모듈(CPM), 또는 다른 유형의 WWAN(wireless wide area network) 액세스 포인트와 같은 노드 또는 송신국과 통신하도록 구성되는 하나 이상의 안테나를 포함할 수 있다. 무선 디바이스는 3GPP LTE, WiMAX, HSPA(High Speed Packet Access), 블루투스, 및 WiFi를 포함하는 적어도 하나의 무선 통신 표준을 사용하여 통신하도록 구성될 수 있다. 무선 디바이스는 각각의 무선 통신 표준을 위한 개별 안테나들 또는 다중 무선 통신 표준을 위한 공유 안테나들을 이용하여 통신할 수 있다. 무선 디바이스는 WLAN(wireless local area network), WPAN(wireless personal area network), 및/또는 WWAN에서 통신할 수 있다.
도 10은 또한 무선 디바이스에의 오디오 입력 및 그로부터의 출력에 사용될 수 있는 마이크로폰 및 하나 이상의 스피커의 도해를 제공한다. 디스플레이 스크린은 액정 디스플레이(LCD) 스크린, 또는 유기 발광 다이오드(OLED) 디스플레이와 같은 다른 유형의 디스플레이 스크린일 수 있다. 디스플레이 스크린은 터치 스크린으로서 구성될 수 있다. 터치 스크린은 용량성, 저항성, 또는 또 다른 유형의 터치 스크린 기술을 이용할 수 있다. 애플리케이션 프로세서 및 그래픽 프로세서가 처리 및 디스플레이 능력들을 제공하기 위해 내부 메모리에 결합될 수 있다. 사용자에게 데이터 입/출력 옵션들을 제공하기 위해 비휘발성 메모리 포트가 또한 이용될 수 있다. 비휘발성 메모리 포트는 또한 무선 디바이스의 메모리 능력들을 확장하는 데 사용될 수 있다. 추가적인 사용자 입력을 제공하기 위해 키보드가 무선 디바이스와 통합될 수 있거나, 또는 무선 디바이스에 무선 접속될 수 있다. 가상 키보드가 또한 터치 스크린을 이용하여 제공될 수 있다.
다양한 기법들, 또는 이것의 소정 양태들 또는 일부분들이, 플로피 디스켓들, CD-ROM들, 하드 드라이브들, 비일시적 컴퓨터 판독가능 저장 매체, 또는 임의의 다른 유형의 머신 판독가능 저장 매체와 같은 유형의매체(tangible media)에 구체화되는 프로그램 코드(즉, 명령어들)의 형태를 취할 수 있고, 여기서 프로그램 코드가 컴퓨터와 같은 머신에 로딩되어 그것에 의해 실행될 때, 머신은 다양한 기술들을 실시하기 위한 장치가 된다. 회로는, 하드웨어, 펌웨어, 프로그램 코드, 실행가능 코드, 컴퓨터 명령어들, 및/또는 소프트웨어를 포함할 수 있다. 비일시적 컴퓨터 판독가능 저장 매체는 신호를 포함하지 않는 컴퓨터 판독가능 저장 매체일 수 있다. 프로그래머블 컴퓨터들상에서의 프로그램 코드 실행의 경우에, 컴퓨팅 디바이스는 프로세서, 프로세서에 의해 판독 가능한 저장 매체(휘발성 및 비휘발성 메모리 및/또는 저장 요소들을 포함함), 적어도 하나의 입력 디바이스, 및 적어도 하나의 출력 디바이스를 포함할 수 있다. 휘발성 및 비휘발성 메모리 및/또는 저장 요소들은 RAM(random-access memory), EPROM(erasable programmable read only memory), 플래시 드라이브, 광 드라이브, 자성 하드 드라이브, 고체 상태 드라이브, 또는 전자적 데이터를 저장하기 위한 다른 매체일 수 있다. 노드 및 무선 디바이스는 또한 송수신기 모듈(즉, 송수신기), 카운터 모듈(즉, 카운터), 처리 모듈(즉, 프로세서), 및/또는 클록 모듈(즉, 클록) 또는 타이머 모듈(즉, 타이머)를 포함할 수 있다. 본 명세서에서 설명되는 다양한 기술들을 구현하거나 활용할 수 있는 하나 이상의 프로그램은 API(Application Programming Interface), 재사용가능 제어들(reusable controls), 및 기타 등등을 사용할 수 있다. 이러한 프로그램들은 컴퓨터 시스템과 통신하기 위해 고 수준의 절차적 또는 객체 지향 프로그래밍 언어로 구현될 수 있다. 그러나, 요망된다면, 프로그램(들)은 어셈블리어 또는 기계어로 구현될 수 있다. 어떤 경우든, 이 언어는 컴파일링된 언어 또는 인터프리팅된 언어일 수 있고, 하드웨어 구현들과 조합될 수 있다.
본 명세서에서 서술되는 대다수의 기능적 유닛들은, 이들의 구현 독립성을 더 특별히 강조하기 위해, 모듈들로서 라벨링되었다고 이해해야 한다. 예를 들어, 모듈은 맞춤형 VLSI(very-large-scale integration) 회로들 또는 게이트 어레이들, 로직 칩들, 트랜지스터들, 또는 기타 이산 컴포넌트들과 같은 기성품 반도체들을 포함하는 하드웨어 회로로서 구현될 수 있다. 모듈은, 필드 프로그래머블 게이트 어레이들, 프로그래머블 어레이 로직, 프로그래머블 로직 디바이스들 등과 같은 프로그래머블 하드웨어 디바이스들에서 또한 구현될 수 있다.
모듈들은 다양한 유형의 프로세서들에 의한 실행을 위해 소프트웨어에 또한 구현될 수 있다. 사례를 들면, 실행가능 코드의 식별된 모듈은, 예를 들어 오브젝트, 절차, 또는 펑션으로서 조직화될 수 있는 컴퓨터 명령어들의 하나 이상의 물리적 또는 논리적 블럭을 포함할 수 있다. 그럼에도 불구하고, 식별된 모듈의 실행가능한 것들은 물리적으로 함께 자리잡을 필요는 없는데, 그러나 논리적으로 함께 결합될 때 모듈을 포함하고 모듈에 대해 언급된 목적을 달성하는, 상이한 로케이션들에 저장되는 이종의 명령어들을 포함할 수 있다.
실제로, 실행가능 코드의 모듈은 단일 명령어, 또는 많은 명령어들일 수 있고, 심지어는 수개의 메모리 디바이스들에 걸쳐서, 상이한 프로그램들 중에서, 및 수개의 상이한 코드 세그먼트들에 걸쳐서 분포될 수 있다. 유사하게, 동작 데이터는 본 명세서에서는 모듈들 내에서 예시 및 식별될 수 있으며, 임의의 적합한 형태로 구현되고 임의의 적합한 유형의 데이터 구조 내에서 조직화될 수 있다. 동작 데이터는 단일 데이터 세트로서 모아질 수 있거나, 또는 상이한 저장 디바이스들을 포함하는 상이한 로케이션들에 걸쳐 분포될 수 있고, 적어도 부분적으로는 단순히 시스템 또는 네트워크상의 전자적 신호들로서 존재할 수도 있다. 바라는 기능들을 수행하도록 동작 가능한 에이전트들을 포함하는 모듈들은 수동형 또는 능동형일 수 있다.
본 명세서 전체에 걸쳐서 "예" 또는 "예시적"에 대한 언급은, 이 예와 연계하여 설명되는 특정한 특징, 구조 또는 특성이 본 발명의 적어도 일 실시예에 포함된다는 것을 의미한다. 따라서, 본 명세서 전체에 걸쳐 다양한 곳에서 문구 "예에서" 또는 단어 "예시적"의 등장하는 것은 반드시 모두가 동일 실시예를 가리키는는 것은 아니다.
본 명세서에서 사용되는 바와 같이, 복수의 아이템, 구조적 요소들, 구성요소적 요소들, 및/또는 자료들은 편의를 위해 공통 목록으로 제시될 수 있다. 하지만, 이러한 목록들은 마치 목록의 각각의 멤버가 구분되고 고유한 멤버로서 개별적으로 식별되는 것처럼 해석해야 한다. 따라서, 그러한 목록의 어떠한 개별 멤버도, 반대 언급이 없다면, 공통 그룹 내의 이들의 제시에만 기초하여 동일 목록 내의 임의의 다른 멤버와 사실상 동등한 것으로서 해석해서는 안 된다. 게다가, 본 발명의 다양한 실시예들 및 예는 본 명세서에서 이것의 다양한 구성요소에 대한 대안들과 함께 참조될 수 있다. 그러한 실시예들, 예들, 및 대안들은 사실상 서로의 등가물들로서 간주해서는 안 되고, 본 발명의 별개의 및 자주적 표현들로서 간주해야 한다는 점이 이해된다.
더욱이, 설명된 특징들, 구조들, 또는 특성들은 하나 이상의 실시예들에서 임의의 적합한 방식으로 조합될 수 있다. 다음의 설명에서, 본 발명의 실시예의 충분한 이해를 제공하기 위해, 레이아웃들, 거리들, 네트워크 예들 등과 같은 수많은 특정 상세 사항들이 제공된다. 그러나, 관련 분야의 통상의 기술자는 본 발명이 특정 상세 사항들 중 하나 이상이 없이, 또는 다른 방법들, 구성요소들, 레이아웃들, 기타 등등으로 실시될 수 있다는 것을 인식할 것이다. 다른 사례들에서는 공지된 구조들, 재료들, 또는 동작들은 본 발명의 양태들을 가리는 것을 회피하기 위해 상세히 보여지거나 기술되지 않는다.
전술한 예들은 하나 이상의 특정 응용에서 본 발명의 원리를 예시하지만, 창의적 능력 발휘 없이도 그리고 본 발명의 원리들 및 개념들을 벗어나지 않고서 구현의 형태, 사용법, 및 상세 사항에 있어서의 수많은 수정들이 이뤄질 수 있다는 것이 통상의 기술자에게 명백할 것이다. 따라서, 아래에 제시된 청구항들에 의한 것을 제외하고는, 본 발명이 제한되도록 의도되지 않는다.
Claims (22)
- DASH(dynamic adaptive streaming over hypertext transfer protocol)를 지원하도록 동작 가능한 네트워크 디바이스로서:
MPD(media presentation description) 파일에 기술되는 정의된 표현에서의 복수의 미디어 콘텐츠 세그먼트를 식별하고;
상기 MPD 파일에 기술되는 상기 정의된 표현에서의 복수의 미디어 콘텐츠 세그먼트 각각에 대한 품질 메트릭(quality metric)을 결정하고 - 상기 품질 메트릭은 신호 대 잡음비(SNR; signal-to-noise ratio), 또는 피크 신호 대 잡음비(PSNR; peak signal-to-noise ratio), 또는 비디오 품질의 지각 평가(PEVQ; perceptual evaluation of video quality), 또는 구조적 유사성(SSIM; structural similarity), 또는 체나코프스키 거리(CZD; Czenakowski Distance) 중 하나 이상을 포함함 -;
상기 결정된 품질 메트릭이 선택된 임계치 미만인 상기 정의된 표현에서의 미디어 콘텐츠 세그먼트들을 식별하고;
수정된 MPD 파일을 형성하기 위해 상기 식별된 미디어 콘텐츠 세그먼트들을, 상기 MPD 파일에서 기술되는 상이한 표현으로부터의 대응 미디어 콘텐츠 세그먼트들로 대체하고 - 상기 대응 미디어 콘텐츠 세그먼트들에 대한 상기 품질 메트릭은 상기 정의된 표현에서의 미디어 콘텐츠 세그먼트들의 일정한 품질의 재생을 제공하기 위해서 상기 선택된 임계치보다 큼 -;
상기 정의된 표현에서의 상기 미디어 콘텐츠 세그먼트들의 일정한 품질의 재생을 제공하기 위해서, 리인코딩된 미디어 콘텐츠 세그먼트들에 대한 상기 결정된 품질 메트릭이 상기 선택된 임계치를 초과하도록, 상기 결정된 품질 메트릭이 상기 선택된 임계치 미만인 상기 정의된 표현에서의 미디어 콘텐츠 세그먼트들을 리인코딩(re-encoding)하도록 구성되는 회로를 갖는
네트워크 디바이스. - 제1항에 있어서, 상기 회로는 DASH를 지원하는 클라이언트 디바이스에게 상기 수정된 MPD 파일을 전달하도록 추가로 구성되는 네트워크 디바이스.
- 제1항에 있어서, 상기 회로는 특정 디바이스 유형에 대해 상기 수정된 MPD를 생성하도록 추가로 구성되는 네트워크 디바이스.
- 제1항에 있어서, 상기 네트워크 디바이스는 CDN(content delivery network) 또는 운영자 네트워크에 배치되는 네트워크 디바이스.
- 제1항에 있어서, 상기 회로는 비트 레이트 파라미터(bitrate parameter) 또는 품질 파라미터 중 적어도 하나를 이용하여 상기 미디어 콘텐츠 세그먼트들에 대한 상기 품질 메트릭을 식별하도록 추가로 구성되는 네트워크 디바이스.
- 제1항에 있어서, 상기 대응 미디어 콘텐츠 세그먼트들은 상기 정의된 표현에서의 미디어 콘텐츠 세그먼트들과 비교하여 상기 상이한 표현에서 실질적으로 동일한 미디어 시간 범위로부터의 것인 네트워크 디바이스.
- DASH를 지원하기 위한 방법으로서:
MPD 파일에 기술되는 정의된 표현에서의 복수의 미디어 콘텐츠 세그먼트 각각에 대해, 네트워크 디바이스에서, 품질 메트릭을 결정하는 단계 - 상기 품질 메트릭은 신호 대 잡음비(SNR; signal-to-noise ratio), 또는 피크 신호 대 잡음비(PSNR; peak signal-to-noise ratio), 또는 비디오 품질의 지각 평가(PEVQ; perceptual evaluation of video quality), 또는 구조적 유사성(SSIM; structural similarity), 또는 체나코프스키 거리(CZD; Czenakowski Distance) 중 하나 이상을 포함함 -;
상기 결정된 품질 메트릭이 선택된 임계치 미만인 상기 정의된 표현에서의 미디어 콘텐츠 세그먼트들을 식별하는 단계;
수정된 MPD 파일을 형성하기 위해 상기 식별된 미디어 콘텐츠 세그먼트들을, 상기 MPD 파일에서 기술되는 상이한 표현으로부터의 대응 미디어 콘텐츠 세그먼트들로 대체하는 단계 - 상기 대응 미디어 콘텐츠 세그먼트들에 대한 상기 품질 메트릭은 상기 정의된 표현에서 상기 미디어 콘텐츠 세그먼트들의 일정한 품질의 재생을 제공하기 위해서 상기 선택된 임계치보다 큼 -; 및
상기 정의된 표현에서의 상기 미디어 콘텐츠 세그먼트들의 일정한 품질의 재생을 제공하기 위해서, 리인코딩된 미디어 콘텐츠 세그먼트들에 대한 상기 결정된 품질 메트릭이 상기 선택된 임계치를 초과하도록, 상기 결정된 품질 메트릭이 상기 선택된 임계치 미만인 상기 정의된 표현에서의 미디어 콘텐츠 세그먼트들을 리인코딩(re-encoding)하는 단계
를 포함하는 방법. - 제7항에 있어서, 상기 네트워크 디바이스로부터 DASH를 지원하는 클라이언트 디바이스에게 상기 수정된 MPD 파일을 전달하는 단계를 추가로 포함하는 방법.
- 제7항에 있어서, 사용자 장비(UE)로부터 상기 네트워크 디바이스에서 상기 품질 메트릭에 대한 상기 선택된 임계치를 수신하는 단계를 추가로 포함하는 방법.
- 제7항에 있어서, 특정 디바이스 유형에 대해 상기 수정된 MPD를 생성하는 단계를 추가로 포함하는 방법.
- 제7항에 있어서, 상기 네트워크 디바이스는 CDN 또는 운영자 네트워크에 배치되는 방법.
- 제7항에 있어서, 비트 레이트 파라미터 또는 품질 파라미터 중 적어도 하나를 이용하여 상기 미디어 콘텐츠 세그먼트들에 대한 상기 품질 메트릭을 식별하는 단계를 추가로 포함하는 방법.
- 제7항에 있어서, 상기 대응 미디어 콘텐츠 세그먼트들은 상기 정의된 표현에서의 미디어 콘텐츠 세그먼트들과 비교하여 상기 상이한 표현에서 실질적으로 동일한 미디어 시간 범위로부터의 것인 방법.
- DASH를 지원하도록 동작 가능한 네트워크 디바이스로서:
MPD 파일에 기술되는 정의된 표현에서의 복수의 미디어 콘텐츠 세그먼트를 식별하고;
상기 MPD 파일에 기술되는 상기 정의된 표현에서의 복수의 미디어 콘텐츠 세그먼트 각각에 대한 품질 메트릭을 결정하고 - 상기 품질 메트릭은 신호 대 잡음비(SNR; signal-to-noise ratio), 또는 피크 신호 대 잡음비(PSNR; peak signal-to-noise ratio), 또는 비디오 품질의 지각 평가(PEVQ; perceptual evaluation of video quality), 또는 구조적 유사성(SSIM; structural similarity), 또는 체나코프스키 거리(CZD; Czenakowski Distance) 중 하나 이상을 포함함 -;;
상기 결정된 품질 메트릭이 선택된 임계치 미만인 상기 정의된 표현에서의 미디어 콘텐츠 세그먼트들을 식별하고;
상기 결정된 품질 메트릭이 상기 선택된 임계치 미만인 상기 정의된 표현에서의 미디어 콘텐츠 세그먼트들을 리인코딩하여, 상기 리인코딩된 미디어 콘텐츠 세그먼트들에 대한 상기 결정된 품질 메트릭이 상기 선택된 임계치를 초과하도록 하고;
상기 정의된 표현에서의 상기 미디어 콘텐츠 세그먼트들의 일정한 품질의 재생을 제공하기 위해서 상기 리인코딩된 미디어 콘텐츠 세그먼트들을 포함하기 위해 수정된 MPD를 생성하고;
상기 수정된 MPD 파일을 형성하기 위해 상기 식별된 미디어 콘텐츠 세그먼트들을, 상기 MPD 파일에서 기술되는 상이한 표현으로부터의 대응 미디어 콘텐츠 세그먼트들로 대체하도록 - 상기 대응 미디어 콘텐츠 세그먼트들에 대한 상기 품질 메트릭은 상기 정의된 표현에서의 미디어 콘텐츠 세그먼트들의 일정한 품질의 재생을 제공하기 위해서 상기 선택된 임계치보다 큼 -;
구성되는 회로를 갖는
네트워크 디바이스. - 제14항에 있어서, 상기 회로는 DASH를 지원하는 클라이언트 디바이스에게 상기 수정된 MPD 파일을 전달하도록 추가로 구성되는 네트워크 디바이스.
- 제14항에 있어서, 상기 회로는 특정 디바이스 유형에 대해 상기 수정된 MPD를 생성하도록 추가로 구성되는 네트워크 디바이스.
- 제14항에 있어서, 상기 네트워크 디바이스는 CDN 또는 운영자 네트워크에 배치되는 네트워크 디바이스.
- 제14항에 있어서, 상기 회로는 비트 레이트 파라미터 또는 품질 파라미터 중 적어도 하나를 이용하여 상기 미디어 콘텐츠 세그먼트들에 대한 상기 품질 메트릭을 식별하도록 추가로 구성되는 네트워크 디바이스.
- 제14항에 있어서, 상기 대응 미디어 콘텐츠 세그먼트들은 상기 정의된 표현에서의 미디어 콘텐츠 세그먼트들과 비교하여 상기 상이한 표현에서 실질적으로 동일한 미디어 시간 범위로부터의 것인 네트워크 디바이스.
- 삭제
- 삭제
- 삭제
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/494,192 US9894130B2 (en) | 2014-09-23 | 2014-09-23 | Video quality enhancement |
US14/494,192 | 2014-09-23 | ||
PCT/US2015/046947 WO2016048558A1 (en) | 2014-09-23 | 2015-08-26 | Video quality enhancement |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20170032431A KR20170032431A (ko) | 2017-03-22 |
KR102266325B1 true KR102266325B1 (ko) | 2021-06-18 |
Family
ID=54140652
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020177004485A KR102266325B1 (ko) | 2014-09-23 | 2015-08-26 | 비디오 품질 향상 |
Country Status (10)
Country | Link |
---|---|
US (1) | US9894130B2 (ko) |
EP (1) | EP3198877A1 (ko) |
JP (1) | JP6337350B2 (ko) |
KR (1) | KR102266325B1 (ko) |
CN (1) | CN106576182B (ko) |
BR (1) | BR112017003469A2 (ko) |
CA (1) | CA2957215A1 (ko) |
RU (1) | RU2658642C1 (ko) |
TW (1) | TWI590632B (ko) |
WO (1) | WO2016048558A1 (ko) |
Families Citing this family (37)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2015022434A1 (en) * | 2013-08-16 | 2015-02-19 | Bitmovin Gmbh | Apparatus and method for constant quality optimization for adaptive streaming |
CN111416984A (zh) * | 2014-01-29 | 2020-07-14 | 皇家Kpn公司 | 建立事件的流传输呈现 |
US11265359B2 (en) | 2014-10-14 | 2022-03-01 | Koninklijke Kpn N.V. | Managing concurrent streaming of media streams |
US10412132B2 (en) * | 2015-02-16 | 2019-09-10 | Lg Electronics Inc. | Broadcasting signal transmission device, broadcast signal reception device, broadcast signal transmission method, and broadcast signal reception method |
US20160249092A1 (en) * | 2015-02-24 | 2016-08-25 | Layer3 TV, Inc. | System and method for digital video recording backfill |
FR3034943B1 (fr) * | 2015-04-07 | 2017-04-14 | Streamroot Inc | Procede de lecture en continu sur un equipement client d'un contenu diffuse au sein d'un reseau pair a pair |
US10567816B2 (en) * | 2015-04-30 | 2020-02-18 | Comcast Cable Communications, Llc | Delivering content |
US11109101B1 (en) * | 2015-05-13 | 2021-08-31 | T-Mobile Usa, Inc. | Apparatus, system, and method for ABR segment pull DVR |
CN105306969A (zh) * | 2015-09-02 | 2016-02-03 | 越亮传奇科技股份有限公司 | 一种流媒体自适应处理***及方法 |
US11533521B2 (en) | 2015-12-11 | 2022-12-20 | Interdigital Madison Patent Holdings, Sas | Scheduling multiple-layer video segments |
US10432690B1 (en) * | 2016-06-03 | 2019-10-01 | Amazon Technologies, Inc. | Manifest partitioning |
EP3479580A1 (en) * | 2016-07-14 | 2019-05-08 | ARRIS Enterprises LLC | Quality tagging in adaptive bitrate technologies |
GB2552944B (en) * | 2016-08-09 | 2022-07-27 | V Nova Int Ltd | Adaptive content delivery network |
JP6891497B2 (ja) * | 2017-01-06 | 2021-06-18 | 富士フイルムビジネスイノベーション株式会社 | 情報処理装置、情報処理システム及びプログラム |
JPWO2018173876A1 (ja) * | 2017-03-24 | 2020-01-30 | ソニー株式会社 | コンテンツ処理装置およびコンテンツ処理方法、並びにプログラム |
US10484308B2 (en) | 2017-03-31 | 2019-11-19 | At&T Intellectual Property I, L.P. | Apparatus and method of managing resources for video services |
US10819763B2 (en) | 2017-03-31 | 2020-10-27 | At&T Intellectual Property I, L.P. | Apparatus and method of video streaming |
US10362080B2 (en) * | 2017-04-25 | 2019-07-23 | At&T Intellectual Property I, L.P. | Methods, systems, and devices for video streaming adaptation using control theoretic approach |
US20180343468A1 (en) * | 2017-05-26 | 2018-11-29 | Comcast Cable Communications, Llc | Dynamic Encoding Using Remote Encoding Profiles |
EP3451672A1 (en) * | 2017-08-29 | 2019-03-06 | Nokia Solutions and Networks Oy | Method and device for video content encoding optimisation in adaptive streaming systems |
US20190166170A1 (en) * | 2017-11-29 | 2019-05-30 | Comcast Cable Communications, Llc | Video Streaming Delivery |
US10728180B2 (en) | 2018-08-21 | 2020-07-28 | At&T Intellectual Property I, L.P. | Apparatus, storage medium and method for adaptive bitrate streaming adaptation of variable bitrate encodings |
JP7161103B2 (ja) * | 2018-10-25 | 2022-10-26 | 日本電信電話株式会社 | 通信システム、ネットワーク側装置、伝送機能変更方法及びプログラム |
US11044185B2 (en) | 2018-12-14 | 2021-06-22 | At&T Intellectual Property I, L.P. | Latency prediction and guidance in wireless communication systems |
US10887660B2 (en) * | 2018-12-27 | 2021-01-05 | Comcast Cable Communications, Llc | Collaborative media quality determination |
WO2020150654A1 (en) * | 2019-01-17 | 2020-07-23 | Brightcove Inc. | Optimal multi-codec abr ladder design |
US20200136921A1 (en) * | 2019-09-28 | 2020-04-30 | Intel Corporation | Methods, system, articles of manufacture, and apparatus to manage telemetry data in an edge environment |
US11973991B2 (en) * | 2019-10-11 | 2024-04-30 | International Business Machines Corporation | Partial loading of media based on context |
US11297364B2 (en) * | 2019-11-21 | 2022-04-05 | Synamedia Limited | Video content streaming bitrate selection using an edge computing system for improving user experience |
KR102193806B1 (ko) * | 2020-03-27 | 2020-12-22 | 연진선 | Ar 콘텐츠의 실시간 분산 송출시스템 |
KR20220012740A (ko) * | 2020-07-23 | 2022-02-04 | 삼성전자주식회사 | 통신 시스템에서 컨텐츠의 송수신을 제어하기 위한 방법 및 장치 |
US11716531B2 (en) | 2021-03-22 | 2023-08-01 | International Business Machines Corporation | Quality of multimedia |
US11533427B2 (en) | 2021-03-22 | 2022-12-20 | International Business Machines Corporation | Multimedia quality evaluation |
US11483472B2 (en) * | 2021-03-22 | 2022-10-25 | International Business Machines Corporation | Enhancing quality of multimedia |
US11412283B1 (en) | 2021-04-27 | 2022-08-09 | City University Of Hong Kong | System and method for adaptively streaming video |
US11716214B2 (en) * | 2021-07-19 | 2023-08-01 | Verizon Patent And Licensing Inc. | Systems and methods for dynamic audiovisual conferencing in varying network conditions |
US11895173B2 (en) * | 2022-01-07 | 2024-02-06 | Avago Technologies International Sales Pte. Limited | Gapped and/or subsegmented adaptive bitrate streams |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070002946A1 (en) * | 2005-07-01 | 2007-01-04 | Sonic Solutions | Method, apparatus and system for use in multimedia signal encoding |
US20130042015A1 (en) * | 2011-08-12 | 2013-02-14 | Cisco Technology, Inc. | Constant-Quality Rate-Adaptive Streaming |
US20140207907A1 (en) * | 2013-01-18 | 2014-07-24 | Futurewei Technologies, Inc. | Method and Apparatus for Performing Adaptive Streaming on Media Contents |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130290492A1 (en) * | 2009-06-12 | 2013-10-31 | Cygnus Broadband, Inc. | State management for video streaming quality of experience degradation control and recovery using a video quality metric |
KR101636108B1 (ko) * | 2010-01-18 | 2016-07-04 | 텔레폰악티에볼라겟엘엠에릭슨(펍) | 에이치티티피 미디어 스트림 분배를 위한 방법과 배열 |
US8806050B2 (en) * | 2010-08-10 | 2014-08-12 | Qualcomm Incorporated | Manifest file updates for network streaming of coded multimedia data |
CN102130936B (zh) * | 2010-08-17 | 2013-10-09 | 华为技术有限公司 | 一种在动态http流传输方案中支持时移回看的方法和装置 |
US9160779B2 (en) * | 2011-06-30 | 2015-10-13 | Qualcomm Incorporated | Dynamic adaptive streaming proxy for unicast or broadcast/multicast services |
EP2730072B1 (en) * | 2011-07-07 | 2016-09-07 | Telefonaktiebolaget LM Ericsson (publ) | Network-capacity optimized adaptive streaming |
US9112942B2 (en) * | 2011-07-15 | 2015-08-18 | Shmuel Ur | Dynamic modification of media streams' quality |
US9438883B2 (en) * | 2012-04-09 | 2016-09-06 | Intel Corporation | Quality of experience reporting for combined unicast-multicast/broadcast streaming of media content |
CN104429093B (zh) | 2012-07-09 | 2018-01-05 | 华为技术有限公司 | 超文本传输协议动态自适应流媒体客户端及其会话管理实施方法 |
JP6697879B2 (ja) * | 2012-07-10 | 2020-05-27 | ヴィド スケール インコーポレイテッド | 品質ドリブンストリーミング |
US9357272B2 (en) * | 2012-08-03 | 2016-05-31 | Intel Corporation | Device orientation capability exchange signaling and server adaptation of multimedia content in response to device orientation |
US9125073B2 (en) | 2012-08-03 | 2015-09-01 | Intel Corporation | Quality-aware adaptive streaming over hypertext transfer protocol using quality attributes in manifest file |
EP2939420B1 (en) * | 2013-01-15 | 2018-03-14 | Huawei Technologies Co., Ltd. | Using quality information for adaptive streaming of media content |
CN103973662B (zh) * | 2013-02-06 | 2017-06-20 | 华为技术有限公司 | 流媒体请求方法及控制器 |
US20140254659A1 (en) * | 2013-03-11 | 2014-09-11 | Mediatek Inc. | Video coding method using at least evaluated visual quality and related video coding apparatus |
US20140281556A1 (en) * | 2013-03-14 | 2014-09-18 | Qualcomm Incorporated | Media presentation description verification |
US9402107B2 (en) * | 2013-03-15 | 2016-07-26 | Time Warner Cable Enterprises Llc | Apparatus and methods for delivery of multicast and unicast content in a content delivery network |
ES2728732T3 (es) | 2013-03-29 | 2019-10-28 | Intel Ip Corp | Técnicas de adaptación de tasa sensibles a la calidad para la difusión en flujo de tipo DASH |
CN104105012B (zh) * | 2013-04-03 | 2018-04-20 | 华为技术有限公司 | 流媒体的片段准备方法和装置 |
-
2014
- 2014-09-23 US US14/494,192 patent/US9894130B2/en not_active Expired - Fee Related
-
2015
- 2015-08-17 TW TW104126701A patent/TWI590632B/zh not_active IP Right Cessation
- 2015-08-26 WO PCT/US2015/046947 patent/WO2016048558A1/en active Application Filing
- 2015-08-26 JP JP2017510324A patent/JP6337350B2/ja not_active Expired - Fee Related
- 2015-08-26 CA CA2957215A patent/CA2957215A1/en not_active Abandoned
- 2015-08-26 KR KR1020177004485A patent/KR102266325B1/ko active IP Right Grant
- 2015-08-26 EP EP15763695.2A patent/EP3198877A1/en not_active Ceased
- 2015-08-26 BR BR112017003469A patent/BR112017003469A2/pt not_active Application Discontinuation
- 2015-08-26 RU RU2017105402A patent/RU2658642C1/ru not_active IP Right Cessation
- 2015-08-26 CN CN201580044972.3A patent/CN106576182B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070002946A1 (en) * | 2005-07-01 | 2007-01-04 | Sonic Solutions | Method, apparatus and system for use in multimedia signal encoding |
US20130042015A1 (en) * | 2011-08-12 | 2013-02-14 | Cisco Technology, Inc. | Constant-Quality Rate-Adaptive Streaming |
US20140207907A1 (en) * | 2013-01-18 | 2014-07-24 | Futurewei Technologies, Inc. | Method and Apparatus for Performing Adaptive Streaming on Media Contents |
Also Published As
Publication number | Publication date |
---|---|
TWI590632B (zh) | 2017-07-01 |
JP2017533607A (ja) | 2017-11-09 |
BR112017003469A2 (pt) | 2017-12-05 |
EP3198877A1 (en) | 2017-08-02 |
US20160088054A1 (en) | 2016-03-24 |
KR20170032431A (ko) | 2017-03-22 |
CN106576182B (zh) | 2020-05-05 |
TW201622393A (zh) | 2016-06-16 |
US9894130B2 (en) | 2018-02-13 |
WO2016048558A1 (en) | 2016-03-31 |
CN106576182A (zh) | 2017-04-19 |
CA2957215A1 (en) | 2016-03-31 |
JP6337350B2 (ja) | 2018-06-06 |
RU2658642C1 (ru) | 2018-06-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102266325B1 (ko) | 비디오 품질 향상 | |
US11038944B2 (en) | Client/server signaling commands for dash | |
US10455404B2 (en) | Quality of experience aware multimedia adaptive streaming | |
KR101900168B1 (ko) | 적응적 미디어 스트리밍 | |
JP6455741B2 (ja) | ビデオの向きの調整(cvo)を伴うストリーミング | |
US9629131B2 (en) | Energy-aware multimedia adaptation for streaming and conversational services | |
US9860294B2 (en) | Media content streaming | |
WO2014134309A1 (en) | Link-aware streaming adaptation |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right |