JP6730320B2 - ステレオスコピックビデオデータを処理するためのmmt装置および方法 - Google Patents

ステレオスコピックビデオデータを処理するためのmmt装置および方法 Download PDF

Info

Publication number
JP6730320B2
JP6730320B2 JP2017557980A JP2017557980A JP6730320B2 JP 6730320 B2 JP6730320 B2 JP 6730320B2 JP 2017557980 A JP2017557980 A JP 2017557980A JP 2017557980 A JP2017557980 A JP 2017557980A JP 6730320 B2 JP6730320 B2 JP 6730320B2
Authority
JP
Japan
Prior art keywords
stereoscopic video
information
video
image
view
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017557980A
Other languages
English (en)
Other versions
JP2018526839A (ja
Inventor
リー、ジン、ヨン
ユン、クグ、ジン
チョン、ウォン、シク
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Electronics and Telecommunications Research Institute ETRI
Original Assignee
Electronics and Telecommunications Research Institute ETRI
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Electronics and Telecommunications Research Institute ETRI filed Critical Electronics and Telecommunications Research Institute ETRI
Priority claimed from PCT/KR2016/006333 external-priority patent/WO2016204502A1/ko
Publication of JP2018526839A publication Critical patent/JP2018526839A/ja
Application granted granted Critical
Publication of JP6730320B2 publication Critical patent/JP6730320B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23602Multiplexing isochronously with the video sync, e.g. according to bit-parallel or bit-serial interface formats, as SDI
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H20/00Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/18Arrangements for synchronising broadcast or distribution via plural systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/139Format conversion, e.g. of frame-rate or size
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/161Encoding, multiplexing or demultiplexing different image signal components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194Transmission of image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2353Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23605Creation or processing of packetized elementary streams [PES]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614Multiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2362Generation or processing of Service Information [SI]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/816Monomedia components thereof involving special video data, e.g 3D video
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/85406Content authoring involving a specific file format, e.g. MP4 format
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H2201/00Aspects of broadcast communication
    • H04H2201/40Aspects of broadcast communication characterised in that additional data relating to the broadcast data are available via a different channel than the broadcast channel

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Security & Cryptography (AREA)
  • Library & Information Science (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

本発明は、エムペグマルチメディア転送(Mpeg Multimedia Transport、MMT)技術に関するもので、より具体的にはステレオスコピックビデオデータを処理するためのMMT装置と方法に関するものである。
MMT(MPEG Media Transport)は、MPEGシステム分科(systems sub−working group)でマルチメディアコンテンツの保存および転送のために開発した新しい標準技術である。MPEGシステム分科による既存の標準技術は、放送網においてマルチメディアコンテンツを転送するために必要なパケット化、同期化、マルチプレキシングなどの機能を規定したものであって、MPEG−2TS(Transport Stream)技術として標準化されて現在広く用いられている。ところが、MPEG−2TS技術は既存の放送網を前提として開発された技術であり、IP(Internet Protocol、IP)基盤のネットワーク環境に基づいたIPTV放送やモバイル放送のためのマルチメディアコンテンツの転送には不適法な要素が存在するので非効率的である。したがって、MPEGシステム分科では、新しいメディア転送の環境はもちろん、今後予想されるメディア転送の環境を考慮して新しいメディア転送標準の必要性を認識するようになり、その結果、MMT標準を開発することになった。
現在開発済みのMMT標準である「ISO/IEC23008−1」は、メディアデータの保存および転送に関連した標準であり、MMTシステムを利用してメディアデータであるアセット(Asset)に対するカプセル化処理を通じて個別ファイルとして保存したり転送することに関して規定している。ところが、現在制定済みのMMT標準は2D映像を含むマルチメディアコンテンツの処理および消費機能を支援しているが、ステレオスコピックビデオを含むマルチメディアコンテンツに対する処理および消費機能は支援していない。
一方、最近デジタル放送、インターネットを介したストリーミングを通じた高解像度ビデオサービスが普遍化するにつれて、超高鮮明テレビ(Ultra High Definition Television、UHDTV)サービスが浮上しており、これと共にステレオスコピックビデオ、すなわち3D映像を利用したデジタル放送サービスも次世代放送サービスとして注目を浴びている。特に、4K以上の高画質の商用ステレオスコピックディスプレイの発売などのような関連技術の発達により、各家庭において3D映像を楽しむことができる3DTVサービスが近い将来に提供され得るものと予想されている。
このような趨勢に伴って、一例として、ATSC(Advanced Television Systems Committee)は4K UHD放送サービスを目的として標準化(ATSC3.0)を進めている。このような状況で3DTVサービスを提供するためには、まず2Dコンテンツに対する4K UHD放送サービスとの互換性を維持しながら3Dコンテンツも転送する方式を採択せざるを得ないが、問題は3Dコンテンツを転送するためには2Dコンテンツを転送するより多くの帯域幅が必要とされるということである。ATSCではこれを解決するために、既存のチャネルに別途のチャネルを結合して3DTV放送サービスを提供する方式で技術を開発している。すなわち、ATSC3.0では2個のUHDチャネルやHDチャネル、すなわちマルチチャネル基盤の3DTV放送サービスに対する標準化が進められており、これをサービスするための符号化方法としては高効率ビデオコーディング(High Efficiency Video Coding、HEVC)やSHVC(Scalable HEVC)を採択している。
しかし、ATSC3.0においてもまだ3DTV放送サービスのためにステレオスコピックビデオデータをどのように転送すればよいのかについて具体的に提案していない。3DTV放送サービスを提供するために、MPEGシステムを通じて3Dコンテンツを提供する方法も一つの方案として考慮することもできるが、前述した通り、MPEG−2TS技術は現在の放送網に適合していない側面があり、MMT技術はまだ3Dコンテンツの転送は支援していない。
本発明が解決しようとする一つの課題は、MMTシステムでステレオスコピックビデオコンテンツを保存および/または転送できるように、ステレオスコピックビデオデータを処理するためのMMT装置と方法を提供することである。
本発明が解決しようとするもう一つの課題は、2DTV放送サービスとの互換性を維持しながら高画質の3DTV放送サービスが提供できるステレオスコピックビデオデータを処理するためのMMT装置と方法を提供することである。
前記の課題を解決するための本発明の一実施例に係るステレオスコピックビデオデータを処理するためのMMT装置は、前記ステレオスコピックビデオデータの全部または一部を含む単一のアセットファイルを生成するアセットファイル生成部および前記ステレオスコピックビデオデータの伝達または消費のためのシグナリングメッセージを生成するシグナリングメッセージ生成部を含む。そして、前記単一のアセットファイルと前記シグナリングメッセージのうち少なくとも一つが前記ステレオスコピックビデオデータと関連したステレオスコピックビデオ情報を含む。
前記実施例の一側面によると、前記ステレオスコピックビデオ情報はステレオスコピックビデオを構成する左映像と右映像の組み合わせ方式を指示する組み合わせ類型情報、前記ステレオスコピックビデオで前記左映像と前記右映像間の順序を指示する映像順序指示情報および前記ステレオスコピックビデオを構成する特定ビューの映像が左映像であるかまたは右映像であるかを指示する映像種類指示情報を含むことができる。この時、前記組み合わせ類型情報は、左右方式、垂直ライン交差方式、フレームシーケンス方式、左/右ビューシーケンス方式および上下方式のうちいずれか一つを指示することができる。そして、前記映像種類指示情報は、前記組み合わせ類型情報が左/右ビューシーケンス方式を指示する場合にのみ前記ステレオスコピックビデオ情報に含まれ得る。このようなステレオスコピックビデオ情報は、ISO/IEC23008−11標準に規定されているステレオスコピックビデオメディア情報(svmi)ボックスのシンタックスフォーマットで記述されて前記単一のアセットファイルに含まれるか、またはISO/IEC23008−1標準に規定されているステレオスコピックビデオ情報ディスクリプタのシンタックスフォーマットで記述されて前記シグナリングメッセージのMMTパッケージ(MMT Package、MP)テーブルに含まれ得る。
前記実施例の他の側面によると、前記ステレオスコピックビデオ情報は、ステレオスコピックビデオが2Dビデオサービスに互換できるかを指示するサービス互換性情報、前記ステレオスコピックビデオを構成する特定ビューの映像が左映像であるか、または右映像であるかを指示する映像種類指示情報、前記ステレオスコピックビデオを構成する特定ビューの映像が2Dビデオサービスに利用できるかを指示する基本映像指示情報、前記ステレオスコピックビデオを構成する左映像と右映像の組み合わせ方式を指示する組み合わせ類型情報および前記ステレオスコピックビデオで前記左映像と前記右映像間の順序を指示する映像順序指示情報を含み、前記映像種類指示情報と前記基本映像指示情報は前記サービス互換性情報が互換可能であることを指示する場合にのみ含まれ、前記組み合わせ類型情報と前記基本映像指示情報は前記サービス互換性情報が互換不可であることを指示する場合にのみ含まれ得る。このようなステレオスコピックビデオ情報は、ISO/IEC23008−1標準に規定されているステレオスコピックビデオ情報(svin)ボックスのシンタックスフォーマットで記述されて前記単一のアセットファイルに含まれるか、またはISO/IEC23008−1標準に規定されているステレオスコピックビデオ情報ディスクリプタのシンタックスフォーマットで記述されて前記シグナリングメッセージのMMTパッケージ(MMT Package、MP)テーブルに含まれ得る。
前記の課題を解決するための本発明の一実施例に係るMMT装置でステレオスコピックビデオデータを処理する方法は、前記ステレオスコピックビデオデータの全部または一部を含む単一のアセットファイルを生成する段階、および前記ステレオスコピックビデオデータの伝達または消費のためのシグナリングメッセージを生成する段階を含む。そして、前記単一のアセットファイルの生成段階と前記シグナリングメッセージの生成段階のうち少なくとも一つの段階において前記ステレオスコピックビデオデータと関連したステレオスコピックビデオ情報を含めて前記単一のアセットファイルまたは前記シグナリングメッセージを生成することができる。
前記実施例の一側面によると、前記ステレオスコピックビデオ情報はステレオスコピックビデオを構成する左映像と右映像の組み合わせ方式を指示する組み合わせ類型情報、前記ステレオスコピックビデオで前記左映像と前記右映像間の順序を指示する映像順序指示情報および前記ステレオスコピックビデオを構成する特定ビューの映像が左映像であるかまたは右映像であるかを指示する映像種類指示情報を含み、前記組み合わせ類型情報は左右方式、垂直ライン交差方式、フレームシーケンス方式、左/右ビューシーケンス方式および上下方式のうちいずれか一つを指示し、前記映像種類指示情報は前記組み合わせ類型情報が左/右ビューシーケンス方式を指示する場合にのみ前記ステレオスコピックビデオ情報に含まれ得る。そして、このようなステレオスコピックビデオ情報は、ISO/IEC23008−11標準に規定されているステレオスコピックビデオメディア情報(svmi)ボックスのシンタックスフォーマットで記述されて前記単一のアセットファイルに含まれるかまたはISO/IEC23008−1標準に規定されているステレオスコピックビデオ情報ディスクリプタのシンタックスフォーマットで記述されて前記シグナリングメッセージのMMTパッケージ(MMT Package、MP)テーブルに含まれ得る。
前述した本発明の実施例によると、アセットファイルおよび/またはシグナリングメッセージにステレオスコピックビデオ情報を含めるので、MMTシステムでステレオスコピックビデオコンテンツを保存および/または転送することが可能である。併せて、ステレオスコピック情報は組み合わせ類型情報、映像順序指示情報および映像種類指示情報などを含むので、DTV放送サービスとの互換性を維持しながら高画質の3DTV放送サービスを提供することができる。
MMTシステムの各機能領域が含まれた階層構造を図示した図面。 MMTパッケージの論理的構造を示している図面。 本発明の一実施例に係るステレオスコピックビデオデータを処理するためのMMT装置の構成を概略的に示したブロック図。 図3のアセットファイル生成部が生成したアセットファイルの概略的な構成の一例を示している図面である。 図4のアセットファイルヘッダを表現するためのファイルシンタックスの一例を示している図面。 図3のアセットファイル生成部が生成したアセットファイルの概略的な構成の他の例を示している図面。 図6のアセットファイルヘッダを表現するためのファイルシンタックスの一例を示している図面。 MPテーブルに含まれ得るステレオスコピックビデオ情報ディスクリプタの一例を示している図面。 MPテーブルに含まれ得るステレオスコピックビデオ情報ディスクリプタの他の例を示している図面。 2個の独立HEVCコーデックを利用して3DTV放送サービスを提供するためのサービスシナリオを図式的に示した図面。 1個のSHVCコーデックを利用して3DTV放送サービスを提供するためのサービスシナリオを図式的に示した図面。 システムレベルで転送されるステレオスコピックビデオ情報の他の例としてHEVCステレオスコピックビデオ情報ディスクリプタ(HEVC_stereoscopic_video_info_descriptor)を示している図面。 2D/3D指示子(Multi_view_position_SEI)メッセージの一例を示している図面。 図10に図示されたサービスシナリオに沿ってビデオレベルで2DTV番組と3DTV番組を区分する方法の一例を図式的に示している図面。 図11に図示されたサービスシナリオに沿ってビデオレベルで2DTV番組と3DTV番組を区分する方法の一例を図式的に示している図面。
以下、添付された図面を参照して実施例をより詳細に説明する。しかし、このような図面は技術的思想の内容と範囲を簡単に説明するための例示に過ぎないものであり、これによって技術的範囲が限定または変更されるものではない。そして、このような例示に基づいて技術的思想の範囲内で多様な変形と変更が可能であることは通常の技術者にとっては自明である。また、本明細書で用いられる用語および単語は実施例での機能を考慮して選択された用語であって、その用語の意味は使用者、運用者の意図または慣例などにより異なり得る。したがって、後述する実施例において用いられる用語は、本明細書に具体的に定義されている場合にはその定義に従い、具体的に定義されていない場合は通常の技術者が一般的に認識する意味に解釈されるべきである。
図1は、MMTシステムの各機能領域が含まれた階層構造を図示した図面である。図1を参照すれば、MMTシステム100は、カプセル化機能階層(Encapsulation Function Layer、Layer E)110、伝達機能階層(Delivery Function Layer、Layer D)120、およびシグナリング機能階層(Signaling Function Layer、Layer S)130から構成される。
メディア符号化階層(Media Coding Layer、12)で圧縮されたマルチメディアデータは、カプセル化機能階層110を経てファイルフォーマットと類似の形態でパッケージ化されて出力される。カプセル化機能階層110は、メディア符号化階層から提供されるコーディングされたメディアデータを入力としてMMTサービスのための小さい単位であるデータフラグメント(fragment)またはセグメント(segment)を生成し、データフラグメントを使ってMMTサービスのためのアクセスユニット(Access Unit、AU)を生成する。また、カプセル化機能階層110は、アクセスユニット(AU)を結合および/または分割することによって複合コンテンツの生成およびその保存および/または転送のための所定フォーマットのデータを生成する。
伝達機能階層120は、ネットワークを通じて転送されるメディアのネットワークフローマルチプレキシング(network flow multiplexing)、ネットワークパケット化(network packetization)、QoS制御などを遂行することができる。より具体的には、伝達機能階層120はカプセル化機能階層110から出力される一つ以上のデータユニット(Data Unit、DU)をMMTペイロードフォーマットに変換した後、MMT転送パケットヘッダ(MMT transport packet header)を付加してMMTパケットで構成するか、または既存の転送プロトコルであるRTP(Real−time Protocol)を使ってRTPパケットで構成することができる。伝達機能階層120で構成されたパケットは、UDP(User Datagram Protocol)またはTCP(Transport Control Protocol)のような転送プロトコル階層14を経て最終的にインターネットプロトコル(IP)階層16でIPパケット化されて転送される。
そして、シグナリング機能階層130は、パッケージの転送および消費に必要な制御情報あるいはシグナリング情報を所定フォーマットのメッセージとして生成する。生成されたシグナリングメッセージはメディアデータとともにMMTパケット化されて転送されるか、または別途のシグナリングメッセージとしてMMTパケット化されて受信側に転送され得る。
そして、図2はMMTパッケージ(MMT package)の論理的構造(logical structure)を示している図面であり、MMTパッケージを構成する構成要素と各溝性要素との間の関係を示している。
図2を参照すると、MMTパッケージはメディアコンテンツデータおよびこれと関連したメタデータの集合であって、表現情報(Presentation Information、PI)、一つ以上のアセット(Assets)、そして転送特性(Transport Characteristics、TCs)で構成されている。PIはアセットの時空間的な関係を説明する情報である。アセットは、オーディオ、ビデオまたはウェブページなどのようなエンコーディングされたメディアデータであり、各アセットはアセットID(Asset ID)を識別子として有する。アセットはそれぞれ一つ以上のメディアプロセッシングユニット(Media Processing Unit、MPU)を含むことができるが、MPUはISO−BMFF(International Standard Organization − Base Media File Format)形態のファイルとして独立して消費され得る。一つのアセット内で連続する2個のMPUが同じメディアサンプルを含むことはできない。そして、TCはアセットの転送のために必要なQoS情報を提供するが、一つのアセットは一つのTCのみを有することができるものの、一つのTCは複数のアセット(Multiple Assets)に使うことができる。
MMT技術によると、左映像と右映像が別個のフレームで構成されたステレオスコピックビデオの場合に、左映像と右映像はそれぞれ別個のアセットIDを有する。そして、MMT技術ではコンテンツの転送や再生およびこのためのデータ処理やサービス品質管理などは、アセット単位で別個のファイルと見なされて独立して処理されるので、左映像と右映像を復元して再生するためには左映像アセットと右映像アセットを時間的に同期化して3D映像で再生することが必要である。また、左映像アセットと右映像アセットで構成されたステレオスコピックビデオの場合には、2Dディスプレイにも再生できるようにすることが好ましい。
併せて、ステレオスコピックビデオは左映像と右映像が別個のフレームで構成されてもよいが、左映像と右映像が一つのフレームに多様な方式で組み合わせられて構成されてもよい。例えば、ステレオスコピックビデオは、左右方式(side−by−side type)、上下方式(top−bottom type)または垂直ライン交差方式(vertical line interleaved type)で組み合わせられて一つのフレームを構成することもできる。この場合、左右の映像が組み合わせられたステレオスコピックビデオは全体が一つのアセットと見なされてもよいが、これに限定されず、左映像と右映像がそれぞれ別個のアセットと見なされてもよい。
このように、ステレオスコピックビデオは多様な方式で組み合わせられて構成され得る。そして、一つのフレームに組み合わせられたステレオスコピックビデオはそれ自体が一つのアセットで構成されてもよいが、左映像と右映像がそれぞれ別個のアセットで構成されてもよい。併せて、ステレオスコピックビデオデータは3Dディスプレイを利用して再生することはもちろん、2Dディスプレイを利用して再生することもできることが好ましい。したがって、MMTシステムを通じてステレオスコピックビデオデータを保存するか、またはMMT送信エンティティ(MMT sending entity)からMMT受信エンティティ(MMT receiving entity)に転送され得るようにするためには、前述したステレオスコピックビデオに固有特性を十分に考慮してステレオスコピックビデオデータを処理する必要がある。
図3は、本発明の一実施例に係るステレオスコピックビデオデータを処理するためのMMT装置の構成を概略的に示したブロック図である。図3を参照すると、MMT装置200は、アセットファイル生成部210およびシグナリングメッセージ生成部220を含む。そして、MMT装置200は転送部230をさらに含むこともできる。図3に図示されたMMT装置は、その構成要素(または機能)の一部または全部がMMT標準に規定されているMMT送信エンティティの構成要素(または機能)として具現され得る。
アセットファイル生成部210は、各アセットに対しアクセスユニット(Access Unit、AU)を基盤としてアセットファイルを生成する。ここで、「アセットファイル」とは、必ずしも物理的に一つのファイルを意味せず、複数のファイルの集合であり得る。すなわち、「アセットファイル」とは、単一アセットを構成するエンコーディングされたステレオスコピックビデオデータはもちろん、これと関連したステレオスコピックビデオ情報を含む一つ以上のファイルの集合である。前述した通り、ステレオスコピックビデオの場合には、左映像と右映像がそれぞれ一つのアセットファイルを構成するか、または所定の方式で一つのフレームに組み合わせられたステレオスコピックビデオ映像それ自体が一つのアセットファイルを構成することもできる。前者の場合にはステレオスコピックビデオデータの一部が単一のアセットファイルに含まれるが、後者の場合にはステレオスコピックビデオデータの全部が単一のアセットファイルに含まれる。
図3のアセットファイル生成部210が生成したアセットファイルは保存媒体に保存され得るが、この場合に生成されるアセットファイルにはステレオスコピックビデオ情報が必ず含まれる。これとは異なり、アセットファイル生成部210が生成したアセットファイルは転送部230に入力されてMMT受信装置に転送されることもあるが、この場合には生成されるアセットファイルにはステレオスコピックビデオ情報が含まれるか、または含まれないこともある。それは、後述するようにシグナリングメッセージ生成部220が生成するシグナリングメッセージにステレオスコピックビデオ情報が含まれ得るためである。以下、アセットファイル生成部210が生成するアセットファイルにステレオスコピックビデオ情報が含まれる場合について説明する。
図4は、図3のアセットファイル生成部210が生成したアセットファイルの概略的な構成の一例を示している図面である。図4を参照すると、アセットファイル、はアセットファイルヘッダ(asset file header、300a)およびアセットファイル本体(asset file body、300b)を含む。このようなアセットファイル300の構成は、各ユニットに含まれるデータの特性による論理的なものであり、物理的には多様な形態で具現され得る。例えば、アセットファイルヘッダ300aとアセットファイル本体300bは必ずしも一つのファイルである必要はなく、それぞれが一つのファイルで構成されるか、またはそれぞれが複数のファイルで構成されてもよい。
アセットファイル本体300bは少なくともステレオスコピックビデオデータを含むユニットであって、例えば多数のMPUを含んで構成され得る。アセットファイル本体300bはステレオスコピックデータが含まれる部分であって、アセットファイルのペイロード(payload)に該当すると言える。前述した通り、MPUは所定フォーマットでエンカプセレーションされたISOBMFF形態のファイルであり得、エンカプセレーションされたMPUはアセットIDとともに固有の一連番号(sequence number)を有している。同じアセットを構成するMPUはすべて同じアセットIDを有する。MPUはエンコーディングされたステレオスコピックビデオデータを含むが、各MPUは多くても一つのメディアトラックを含む。
アセットファイルヘッダ300aは該当アセットに関連した様々な情報、すなわちアセットファイル情報(asset file information)を含む。特に、アセットがステレオスコピックビデオデータを構成する左映像アセットであるかまたは右映像アセットである場合に、アセットファイルヘッダ300aはアセットファイル情報の一つとしてステレオスコピックビデオ情報310を含むことができる。その他にも、アセットファイルヘッダ300aはアセットIDの構造(scheme)、長さ(length)、値(value)などのようなアセットIDに関する情報をさらに含むこともできる(図5および図7参照)。
本実施例の一側面によると、ステレオスコピック情報310は、組み合わせ類型情報311、映像順序指示情報312および映像種類指示情報313を含むことができる。組み合わせ類型情報311は、ステレオスコピックビデオを構成する左映像と右映像が組み合わせられた方式を指示する。例えば、組み合わせ類型情報311は、左右方式、垂直ライン交差方式、フレームシーケンス方式(frame sequential type)、左/右ビューシーケンス方式(Left/Right view sequence type)、上下方式のうちいずれか一つを指示することができる。
表1はこのような組み合わせ類型情報311の一例を表わしている。表1を参照すると、組み合わせ類型情報311として左右方式と上下方式の場合に、全体(full)映像とハーフ(half)映像の2種類が存在することが分かる。そして、表1において左側のコラムの値(value)が例示的なものであることは当業者にとって自明である。
Figure 0006730320
映像順序指示情報312は組み合わせられたステレオスコピックビデオで左映像と右映像との間の順序を指示する情報である。例えば、映像順序指示情報312は左映像が先なのか(is_left_first)または右映像が先なのか(is_right_first)を表わす方式で表示され得る。表2はこのような映像順序指示情報312の一例を表わしたものである。表2を参照すると、各組み合わせ類型の場合について、映像順序指示情報(表2の場合にはis_left_firstの値)によって左側の映像(left view)と右側の映像(right view)のそれぞれがフレームのどのような位置であるのか、または一連のフレームシーケンスのうち奇数番目のフレームまたは偶数番目のフレームであるのかが分かる。
Figure 0006730320
映像種類指示情報313は該当ビュー映像の左映像であるかまたは右映像であるかを指示する情報である。例えば、映像種類指示情報313は該当ビューが左映像であるか(is_left)または右映像であるか(is_right)を表わす方式で表示され得る。したがって、映像種類指示情報313は組み合わせ類型情報311が指示する左映像と右映像の組み合わせ方式が左/右ビューシーケンス方式(表1でその値が「0×03」の場合)の場合にのみ含まれる情報であり得る。
図5は、図4のアセットファイルヘッダ300aを表現するためのファイルシンタックス(syntax)の一例を示している図面である。図5のファイルシンタックスは、ISO/IEC23008−11のステレオスコピックビデオメディア情報(Stereoscopic Video Media Information、svmi)ボックスのファイルフォーマットに基づいて作成されたものであって、これは単に例示的なものである。図4のアセットファイルヘッダ300aは他の標準や他の形式のファイルフォーマットに基づいて作成されてもよい。
図5を参照すると、図4の組み合わせ類型情報311は、「stereoscopic_composition_type」というエレメント(element)で表現されているが、一例としてこのエレメントは前述した表1に図示された内容を指示することができる。そして、図4の映像順序指示情報312は「is_left_first」というエレメントで表現されており、一例としてこのエレメントは前述した表2に図示された内容を指示することができる。また、図4の映像種類指示情報313は「is_left」というエレメントで表現されているが、該当エレメントは「stereoscopic_composition_type」の値が0×03であって、左/右ビューシーケンス類型の場合にのみ含まれることが分かる。その他にも、ファイルシンタックスはアセットIDの構造、長さ、値などを指示するためのエレメントを含むことができる。
図6は、図3のアセットファイル生成部210が生成したアセットファイルの概略的な構成の他の例を示している図面である。図6のアセットファイル400の構成も各ユニットに含まれるデータの特性による論理的なものであって、物理的には多様な形態で具現され得る。例えば、アセットファイルヘッダ400aとアセットファイル本体400bはそれぞれ一つまたは複数のファイルで構成され得る。図6を参照すると、アセットファイル400はアセットファイルヘッダ400aおよびアセットファイル本体400bを含むという点で図4のアセットファイル300とその構成が同じである。そして、アセットファイル本体400bは少なくともステレオスコピックビデオデータを含むユニットであり、例えば多数のMPUを含んで構成され得るという点でも図4のアセットファイル本体300bと同じであるため、ここではこれについての具体的な説明は省略する。
アセットファイルヘッダ400aは該当アセットに関連した様々な情報、すなわちアセットファイル情報を含み、特にアセットがステレオスコピックビデオデータを構成する左映像アセットであるか、または右映像アセットである場合に、アセットファイルヘッダ400aはアセットファイル情報としてステレオスコピックビデオ情報410を含むことができるという点で、図4のアセットファイルヘッダ300aと同じである。ただし、アセットファイルヘッダ400aはその具体的な構成においてアセットファイルヘッダ300aと差があるが、より具体的には、ステレオスコピック情報410はサービス互換性情報411、映像種類指示情報412、基本映像指示情報413、組み合わせ類型情報414および映像順序指示情報415を含むことができる。
サービス互換性情報411はステレオスコピックビデオが2Dビデオを提供するサービスにも利用できるか(is_service_compatible)を指示する情報である。例えば、ステレオスコピックビデオに対して特別な映像処理技術を適用せずとも2Dビデオサービスに活用できる場合であれば、該当ステレオスコピックビデオは2Dビデオサービスと互換性があると言える。通常、左/右ビューシーケンス方式で組み合わせられたステレオスコピックビデオの場合に、該当ステレオスコピックビデオから左映像ビューまたは右映像ビューのみを抽出して2Dビデオサービスを提供することが可能である。その反面、それ以外の方式で組み合わせられたステレオスコピックビデオの場合には、2Dビデオサービスを提供するためには各フレームの映像に対して追加の映像処理が必要である。
映像種類指示情報412と基本映像指示情報413はステレオスコピックビデオが2Dビデオサービスと互換性がある場合、すなわちサービス互換性情報411が互換可能であることを指示する値を有する場合にのみステレオスコピック情報410に含まれる情報であり得る。ここで、映像種類指示情報412は該当ビューの映像が左映像であるか、または右映像であるかを指示する情報である。例えば、映像種類指示情報412は該当ビューが左映像であるか(is_left)または右映像であるか(is_right)を表わす方式で表示され得る。そして、基本映像指示情報413は該当ビューの映像が2Dビデオサービスにも利用できるか、すなわち基本映像(is_base)であるかを指示する情報である。したがって、基本映像指示情報413によって基本映像と特定されたビューの映像のみが2Dビデオサービスに利用され得る。
組み合わせ類型情報414はステレオスコピックビデオを構成する左映像と右映像が組み合わせられた方式を指示する。例えば、組み合わせ類型情報411は左右方式、垂直ライン交差方式、フレームシーケンス方式および上下方式のうちいずれか一つを指示することができる。このような組み合わせ類型情報414は、左/右ビューシーケンス方式がないという点で表1の組み合わせ類型情報311と差がある。
表3はこのような組み合わせ類型情報414の一例を示すものである。表3を参照すると、組み合わせ類型情報414として左右方式と上下方式の場合に全体(full)映像とハーフ(half)映像の2種類が存在することが分かる。そして、表3において左側コラムの値(value)が例示的なものであることは当業者にとって自明である。
Figure 0006730320
映像順序指示情報415は組み合わせられたステレオスコピックビデオで左映像と右映像との間の順序を指示する情報である。例えば、映像順序指示情報415は左映像が先なのか(is_left_first)または右映像が先なのか(is_right_first)を表わす方式で表示され得る。このような映像順序指示情報415の一例は表2を参照して前述したので、これについての具体的な説明は省略する。
図7は、図6のアセットファイルヘッダ400aを表現するためのファイルシンタックス(syntax)の一例を示している図面である。図7のファイルシンタックスは、ISO/IEC23008−1のステレオスコピックビデオ情報(Stereoscopic Video Information、svin)ボックスのファイルフォーマットに基づいて作成されたものであって、これは単に例示的なものである。すなわち、図6のアセットファイルヘッダ400aは他の標準や他の形式のファイルフォーマットに基づいて作成されてもよい。
図7を参照すると、図6のサービス互換性情報411は、「is_service_compatible」というエレメントで表現されているが、一例としてその値が「0」であれば2Dビデオサービスと互換されないものの、その値が「1」の場合には2Dビデオサービスと互換されることを指示することができる。そして、図6の映像種類指示情報412と基本映像指示情報413はそれぞれ「is_left」および「is_base」というエレメントで表現されているが、該当エレメントは「is_service_compatible」が2Dビデオサービスと互換される場合を指示する場合に含まれることが分かる。その反面、「is_service_compatible」が2Dビデオサービスと互換されない場合を指示する場合には、組み合わせ類型情報414および映像順序指示情報415が含まれ得るが、それぞれ「stereoscopic_composition_type」および「is_left_first」というエレメントで表現されている。一例としてエレメント「stereoscopic_composition_type」は前述した表3に図示された内容を指示することができる。その他にも、ファイルシンタックスはアセットIDの構造、長さ、値などを指示するためのエレメントを含むことができる。
引き続き図3を参照すると、シグナリングメッセージ生成部220は、ステレオスコピックビデオデータの伝達(delivery)および/または消費(consumption)のためのシグナリングメッセージを生成する。ここで、シグナリングメッセージは、ISO/IEC23008−1標準に規定されているフォーマットのメッセージであって、これにはシグナリングテーブル(signaling tables)やディスクリプタ(descriptors)などの形式で情報が含まれ得る。シグナリングメッセージ生成部220は該当アセットの表現情報、転送特性はもちろん、ステレオスコピックビデオデータとMMT受信エンティティから受信した多様な情報に基づいてシグナリングメッセージを生成することができる。
本実施例の一側面によると、シグナリングメッセージ生成部220が生成するシグナリングメッセージには、ステレオスコピックビデオデータを含むMMTパッケージの消費のために必要なステレオスコピックビデオ情報が含まれ得る。例えば、シグナリングメッセージ生成部220は、図4に図示されているアセットファイル300のアセットファイルヘッダ310に含まれているステレオスコピックビデオ情報を含むシグナリングメッセージを生成することができる。すなわち、シグナリングメッセージ生成部220は、組み合わせ類型情報、映像順序指示情報および映像種類指示情報を含むシグナリングメッセージを生成することができる。その他の例として、シグナリングメッセージ生成部220は図6に図示されているアセットファイル400のアセットファイルヘッダ410に含まれているステレオスコピックビデオ情報を含むシグナリングメッセージを生成することができるが、この場合にサービス互換性情報、映像種類指示情報、基本映像指示情報、組み合わせ類型情報および映像順序指示情報を含むシグナリングメッセージを生成することができる。
本実施例の他の側面によると、シグナリングメッセージ生成部220が生成するシグナリングメッセージには、図4または図6を参照して前述したステレオスコピックビデオ情報は含まれなくてもよい。この場合に、ISO/IEC23008−1標準で規定している他の種類の情報がシグナリングメッセージに含まれ得る。ただし、このような実施例には図4または図6に図示された通り、アセットファイルのアセットファイルヘッダにステレオスコピックビデオ情報が含まれる場合にのみ限定される。しかし、アセットファイルのアセットファイルヘッダにステレオスコピックビデオ情報が含まれる場合であっても、シグナリングメッセージ生成部220が生成するシグナリングメッセージにステレオスコピックビデオ情報の全部または一部が含まれ得るということは当業者にとって自明である。以下、シグナリングメッセージ生成部220が生成するシグナリングメッセージにステレオスコピックビデオ情報の全部が含まれる場合について説明する。
一例として、シグナリングメッセージ生成部220は、ISO/IEC23008−1標準に規定されているMMTパッケージ(MP)テーブルにステレオスコピックビデオ情報を含めることができる。この場合に、ステレオスコピックビデオ情報はMPテーブルに含まれるディスクリプタのうちの一つであり得る。そして、このようなステレオスコピックビデオ情報ディスクリプタ(stereoscopic_video_info_descriptor)はMPテーブルのアセットディスクリプタループ(asset_descriptor loop)に含まれ得る。
図8は、MPテーブルに含まれ得るステレオスコピックビデオ情報ディスクリプタの一例を示している図面である。図8を参照すると、ステレオスコピックビデオ情報ディスクリプタは、組み合わせ類型情報、映像順序指示情報および映像種類指示情報を含む。より具体的には、組み合わせ類型情報は「stereoscopic_composition_type」というエレメント(element)で表現されており、映像順序指示情報は「is_left_first」というエレメントで表現されており、また、映像種類指示情報は「is_left」というエレメントで表現されている。また、映像種類指示情報は「stereoscopic_composition_type」の値が0×03であって、左/右ビューシーケンス類型の場合にのみ含まれることが分かる(表1参照)。
図9は、MPテーブルに含まれ得るステレオスコピックビデオ情報ディスクリプタの他の例を示している図面である。図9を参照すると、ステレオスコピックビデオ情報ディスクリプタ(stereoscopic_video_info_descriptor)は、サービス互換性情報、映像種類指示情報、基本映像指示情報、組み合わせ類型情報および映像順序指示情報を含む。より具体的には、サービス互換性情報は「is_service_compatible」というエレメントで表現されており、映像種類指示情報と基本映像指示情報はそれぞれ「is_left」および「is_base」というエレメントで表現されているが、該当エレメントは「is_service_compatible」が2Dビデオサービスと互換される場合を指示する場合に含まれることが分かる。その反面、「is_service_compatible」が2Dビデオサービスと互換されない場合を指示する場合には、組み合わせ類型情報および映像順序指示情報が含まれ得るが、それぞれ「stereoscopic_composition_type」および「is_left_first」というエレメントで表現されている。
引き続き図3を参照すると、転送部230は、アセットファイル生成部210が生成したアセットファイルおよび/またはシグナリングメッセージ生成部220が生成したシグナリングメッセージの伝達を受けてMMT受信エンティティに転送する。ここで、転送部230は伝達を受けたアセットファイルおよび/またはシグナリングメッセージをISO/IEC23008−1標準に沿ったMMTプロトコル(MMT Protocol、MMTP)に従ってMMTパケットに変換してMMT受信装置に転送することができる。しかし、本実施例はこれに限定されず、転送部230は伝達を受けたアセットファイルおよび/またはシグナリングメッセージを他のインターネット転送プロトコルやリアルタイム転送プロトコルまたは3D放送プロトコルに従ってMMT受信装置に転送することもできる。
次いで、前述したMMT装置を利用して3DTV放送サービスを提供する方法について説明する。後述する方法は、ATSC3.0で高画質ビデオを符号化するために採択されたHEVCまたはSHVCコーデックに基づいて2DTV放送サービスとの互換性を維持しながら高画質の3DTV放送サービスを提供することができるように、マルチチャネルに転送される3Dステレオスコピックビデオデータと関連した情報、すなわちステレオスコピックビデオ情報のシグナリング方法に関する。
図10は、2個の独立HEVCコーデックを利用して3DTV放送サービスを提供するためのサービスシナリオを図式的に示した図面である。図10において、2Dは二つのチャネル、すなわち第1チャネル(Ch1)と第2チャネル(Ch2)でそれぞれ独立して提供される2DTV放送プログラムを意味し、3Dは二つのチャネルを連動して提供される3DTV放送プログラムを意味する。そして、3DTV放送プログラムの場合、独立した2個のHEVCストリームを同期化して提供するものであって、2個の基本階層ストリームを通じてサービスが提供されるものと見ることができる。
図11は、1個のSHVCコーデックを利用して3DTV放送サービスを提供するためのサービスシナリオを図式的に示した図面である。図11においても、2Dは二つのチャネル、すなわち第1チャネル(Ch1)と第2チャネル(Ch2)でそれぞれ独立して提供される2DTV放送プログラムを意味し、3Dは二つのチャネルを連動して提供される3DTV放送プログラムを意味する。そして、3DTV放送プログラムの場合に、ステレオスコピックビデオデータをスケーラブルHEVCコーデック、すなわちSHVCコーデックで符号化して生成された基本階層(base layer)ストリームと向上階層(enhanced layer)ストリームを同期化して提供されるものと見ることができる。
図10および図11を参照すると、3DTV放送サービスとして時間範囲t1では2DTV放送プログラムが放送され、時間範囲t2では3DTV放送プログラムが放送され、時間範囲t3では再び2DTV放送プログラムが放送されることが分かる。これは3DTV放送サービスを24時間の間3Dコンテンツを利用して放送し続けるよりは2Dコンテンツと3Dコンテンツを混ぜて放送する2DTV/3DTV混用放送サービスとして考慮されているためである。しかし、これが3DTV放送サービスとして24時間の間3Dプログラムを放送し続けることを排除するものではないことは当業者にとって自明である。
図10または図11に図示されているサービスシナリオに沿って3DTV放送サービスを提供するためには、該当時間に放送されるプログラムが2DTV放送プログラムであるかまたは3DTV放送プログラムであるかを明確に表示することが必要である。例えば、2DTV放送プログラムと3DTV放送プログラムとの間の切換えがある場合に、放送プログラムの切換えがあるという事実を知らせる情報を転送する方法がある。併せて、3DTV放送プログラムと関連しては、2Dディスプレイを具備した受信装置でも3DTV放送プログラムの再生に必要な情報も共に転送することができる。
他の例として、該当時間に放送される放送プログラムが2DTV放送プログラムであるかまたは3DTV放送プログラムであるかを指示するプログラム種類指示情報を転送する方法があり得る。ここで、該当放送プログラムが3DTV放送プログラムを指示する場合には、2Dディスプレイを具備した受信装置でも3DTV放送プログラムの再生に必要な情報もプログラム種類指示情報とともに転送され得る。以下ではプログラム種類指示情報と2Dディスプレイを具備した受信装置でも3DTV放送プログラムの再生に必要な情報を「ステレオスコピックビデオ情報」とする。
この場合、ステレオスコピックビデオ情報はビデオレベルで転送されるかまたはシステムレベルで転送され得る。ビデオレベルでの転送は該当情報がビデオストリームに含まれて転送されることを指し示す。例えば、図4または図6に図示されたアセットファイルヘッダに含まれるステレオスコピックビデオ情報がビデオレベルで転送されるステレオスコピックビデオ情報となり得る。その反面、システムレベルでの転送は該当情報がビデオストリームではない別のストリームに含まれて転送されることを指し示す。例えば、図8または図9を参照して説明したシグナリングメッセージのMPテーブルに含まれるステレオスコピックビデオ情報ディスクリプタ(stereoscopic_video_info_descriptor)がシステムレベルで転送されるステレオスコピックビデオ情報となり得る。
図12は、システムレベルで転送されるステレオスコピックビデオ情報の他の例として、HEVCステレオスコピックビデオ情報ディスクリプタ(HEVC_stereoscopic_video_info_descriptor)を示している図面である。図12を参照すると、HEVCステレオスコピックビデオ情報ディスクリプタは、ディスクリプタタグ(Descriptor_tag)情報、ディスクリプタ長さ(Descriptor_length)情報、サービス識別子(Service_id)情報、ビュー位置(View_position)情報および2D/3D指示子(Multi_view_position_SEI_present)情報を含む。
ディスクリプタタグ情報はディスクリプタを識別するためのものである。ディスクリプタ長さ情報は該当ディスクリプタの長さを指示する。サービス識別子情報は左映像または右映像を転送するチャネル識別子(ID)またはサービス識別子(ID)を表わすものである。例えば、図10に図示された通り、第1チャネルを通じて左映像が提供され、また第2チャネルを通じて右映像が提供される場合に、第1チャネルを通じて転送されるHEVCステレオスコピックビデオ情報ディスクリプタのサービス識別子情報は第2チャネルのサービス識別子またはチャネル識別子を含むことができる。ビュー位置情報は、現在転送される映像が左映像であるかまたは右映像であるかを識別するためのものである。
そして、2D/3D指示子存否情報は、HEVCまたはSHVC符号化ストリームに2D/3D指示子(Multi_view_position_SEI)情報が含まれているか否かを指示する。これは、該当ビデオストリームが2DTV番組であるのかまたは3DTV番組であるのかをより明確に区分するために用いられるものである。なぜならば、実際のシステムレベルの情報転送は各フレームまたはAU(Access Unit)単位で転送されるよりは一定の周期(例えば、500ms)を有して転送されるので、フレーム単位で該当コンテンツが2Dであるかまたは3Dコンテンツであるかを明確に認識することが難しいためである。したがって、2D/3D指示子存否(Multi_view_position_SEI_present)情報が「1」に設定される場合、受信機はこの情報に基づいて符号化ストリームレベルでより明確に2DTV番組であるのかまたは3DTV番組であるのかを認識することができる。また、該当記述子の存在有無に基づいてシステムレベルで2DTV番組であるのか3DTV番組であるのかを認識することができる。すなわち、該当記述子は3Dプログラムでのみ存在することになる。
HEVC符号化標準(ISO/IEC23008−2)では2D/3D指示子(Multi_view_position_SEI)メッセージを定義しているが、これは複数のビューを含む多視点ビデオに対して符号化を行う時に各ビューの位置を提供するためである。このような2D/3D指示子(Multi_view_position_SEI)メッセージの一例は図13に図示されており、該当メッセージはHEVC符号化標準(ISO/IEC23008−2)に具体的に説明されているので、ここではこれについての説明を省略する。
図14は、図10に図示されたサービスシナリオに沿ってビデオレベルで2DTV番組と3DTV番組を区分する方法の一例を図式的に示している図面である。図14を参照すると、図13に図示された2D/3D指示子(multi_view_position_SEI)メッセージは3Dプログラム区間にのみ転送されることが分かる。したがって、ビデオレベル、すなわち転送されるプログラムコンテンツに該当メッセージが含まれているか否かに基づいて2DTV番組であるのかまたは3DTV番組であるのかを判別することができる。
そして、各チャネルを通じて独立した2個のHEVCコーデックを利用して符号化されたビデオストリームが転送される場合には、図14に図示された通り、第1チャネル(Ch1)と第2チャネル(Ch2)の両方を通じて2D/3D指示子メッセージがビデオストリームに含まれる。この時、第1チャネル(Ch1)と第2チャネル(Ch2)の符号化ストリーム内に転送される情報は単に独立したビデオストリーム一つのみが転送されるので、num_view_minus1=0およびview_position[0]==に割り当てられる。そして、この場合にはビデオレベルで左右の映像を区分することができないため、左右の映像の区分はシステムレベルで転送されるステレオスコピックビデオ情報、例えば図12で提案されたHEVCステレオスコピックビデオ情報ディスクリプタを活用することができる。
また、2D/3D指示子(multi_view_position_SEI)メッセージは符号化ストリームのAUに割り当てられ得る。これによると、図14に図示された通り、2D/3D指示子(multi_view_position_SEI)メッセージは3DTV番組区間の間各AUごとに含まれることによって、フレームレベルで3DTV番組であるのかまたは2DTV番組であるのかを区分することが可能である。
図15は、図11に図示されたサービスシナリオに沿ってビデオレベルで2DTV番組と3DTV番組を区分する方法の一例を図式的に示している図面である。図15を参照すると、図13に図示された2D/3D指示子(multi_view_position_SEI)メッセージは基本階層のビデオストリームにのみ含まれて転送されることが分かる。したがって、基本階層のビデオストリームに該当メッセージが含まれているか否かに基づいて2DTV番組であるのかまたは3DTV番組であるのかを判別することができる。この時、図15のサービスシナリオでは2個のビューの映像がSHVCで符号化されるので、基本階層のビデオストリームにはnum_view_minus1=1、view_position[0]=0およびview_position[1]=1で割り当てられる。この時、view_position[0]=0は左(右)映像を意味し、view_position[1]=1は右(左)映像を意味し得る。したがって、この場合にはビデオレベルで左右の映像を区分することが可能である。
以上で説明された装置は、ハードウェア構成要素、ソフトウェア構成要素、および/またはハードウェア構成要素およびソフトウェア構成要素の組み合わせで具現され得る。例えば、実施例で説明された装置および構成要素は、例えば、プロセッサ、コントローラー、ALU(arithmetic logic unit)、デジタル信号プロセッサ(digital signal processor)、マイクロコンピュータ、FPA(field programmable array)、PLU(programmable logic unit)、マイクロプロセッサ、または命令(instruction)を実行し応答できる他の何らかの装置のように、一つ以上の汎用コンピュータまたは特殊目的のコンピュータを利用して具現され得る。処理装置は運営体制(OS)および前記運営体制上で遂行される一つ以上のソフトウェアアプリケーションを遂行することができる。また、処理装置はソフトウェアの実行に応答して、データを接近、保存、操作、処理および生成することもできる。理解の便宜のために、処理装置は一つが使われると説明された場合もあるが、該当技術分野で通常の知識を有する者は、処理装置が複数個の処理要素(processing element)および/または複数類型の処理要素を含むことができることが分かる。例えば、処理装置は複数個のプロセッサまたは一つのプロセッサおよび一つのコントローラーを含むことができる。また、並列プロセッサ(parallel processor)のような、他の処理構成(processing configuration)も可能である。
ソフトウェアは、コンピュータプログラム(computer program)、コード(code)、命令(instruction)、またはこれらのうち一つ以上の組み合わせを含むことができ、望むとおりに動作するように処理装置を構成するか独立的にまたは結合的に(collectively)処理装置を命令することができる。ソフトウェアおよび/またはデータは、処理装置によって解析されるか処理装置に命令またはデータを提供するために、ある類型の機械、構成要素(component)、物理的装置、仮想装置(virtual equipment)、コンピュータ記録媒体または装置、或いは転送される信号波(signal wave)に永久的に、または一時的に具体化(embody)され得る。ソフトウェアはネットワークに連結されたコンピュータシステム上に分散されて、分散された方法で保存されるか実行されてもよい。ソフトウェアおよびデータは一つ以上のコンピュータ可読記録媒体に保存され得る。
実施例に係る方法は多様なコンピュータ手段を通じて遂行され得るプログラム命令の形態で具現されて、コンピュータ可読媒体に記録され得る。前記コンピュータ可読媒体は、プログラム命令、データファイル、データ構造などを単独でまたは組み合わせて含むことができる。前記媒体に記録されるプログラム命令は、実施例のために特別に設計されて構成されたものであるかコンピュータソフトウェアの当業者に公知にされていて使用可能なものでもよい。コンピュータ可読記録媒体の例には、ハードディスク、フロッピーディスクおよび磁気テープのような磁気媒体(magnetic media)、CD−ROM、DVDのような光記録媒体(optical media)、フロプティカルディスク(floptical disk)のような磁気−光媒体(magneto−optical media)、およびロム(ROM)、ラム(RAM)、フラッシュメモリなどのようなプログラム命令を保存して遂行するように特別に構成されたハードウェア装置が含まれる。プログラム命令の例には、コンパイラによって作られるような機械語コードだけでなく、インタープリタなどを使ってコンピュータによって実行され得る高級言語コードを含む。前記ハードウェア装置は、実施例の動作を遂行するために一つ以上のソフトウェアモジュールとして作動するように構成され得、その逆も同じである。
以上の説明は実施例に過ぎず、これによって限定されるものと解釈されてはならない。本発明の技術思想は特許請求の範囲に記載された発明によってのみ特定されるべきであり、それと同等の範囲内にあるすべての技術思想は本発明の権利範囲に含まれると解釈されるべきである。したがって、前述した実施例が多様な形態に変形されて具現され得るということは通常の技術者にとって自明である。
本発明はメディアデータの保存や転送に関連した手続きや装置、放送産業などに有用に活用され得る。

Claims (13)

  1. ステレオスコピックビデオデータを処理するためのMMT装置において、
    前記ステレオスコピックビデオデータを含む単一のアセットファイルを生成するアセットファイル生成部;および
    前記ステレオスコピックビデオデータのためのシグナリングメッセージを生成するシグナリングメッセージ生成部を含み、
    記シグナリングメッセージが前記ステレオスコピックビデオデータと関連したステレオスコピックビデオ情報を含み、
    前記ステレオスコピックビデオデータが、基本階層及び向上階層に関連したスケラーブルHEVC(SHVC)に基づいて符号化されるとき、各ビューの位置を決定するための2D/3D指示子(Multi_view_position_SEI)が提供され、
    前記2D/3D指示子(Multi_view_position_SEI)は、num_viewと、前記num_viewに関連したビュー位置(View_position)を含むことを特徴とする、MMT装置。
  2. 前記ステレオスコピックビデオ情報は
    ステレオスコピックビデオを構成する左映像と右映像の組み合わせ方式を指示する組み合わせ類型情報;
    前記ステレオスコピックビデオで前記左映像と前記右映像間の順序を指示する映像順序指示情報;および
    前記ステレオスコピックビデオを構成する特定ビューの映像が左映像であるかまたは右映像であるかを指示する映像種類指示情報を含むことを特徴とする、請求項1に記載のMMT装置。
  3. 前記組み合わせ類型情報は、左右方式、垂直ライン交差方式、フレームシーケンス方式、左/右ビューシーケンス方式および上下方式のうちいずれか一つを指示することを特徴とする、請求項2に記載のMMT装置。
  4. 前記映像種類指示情報は、前記組み合わせ類型情報が左/右ビューシーケンス方式を指示する場合にのみ前記ステレオスコピックビデオ情報に含まれることを特徴とする、請求項3に記載のMMT装置。
  5. 前記ステレオスコピックビデオ情報は、ISO/IEC23008−11標準に規定されているステレオスコピックビデオメディア情報(svmi)ボックスのシンタックスフォーマットで記述されて前記単一のアセットファイルに含まれることを特徴とする、請求項4に記載のMMT装置。
  6. 前記ステレオスコピックビデオ情報は、ISO/IEC23008−1標準に規定されているステレオスコピックビデオ情報ディスクリプタのシンタックスフォーマットで記述されて前記シグナリングメッセージのMMTパッケージ(MMT Package、MP)テーブルに含まれることを特徴とする、請求項4に記載のMMT装置。
  7. 前記ステレオスコピックビデオ情報は
    ステレオスコピックビデオが2Dビデオサービスに互換できるかを指示するサービス互換性情報;
    前記ステレオスコピックビデオを構成する特定ビューの映像が左映像であるかまたは右映像であるかを指示する映像種類指示情報;
    前記ステレオスコピックビデオを構成する特定ビューの映像が2Dビデオサービスに利用できるかを指示する基本映像指示情報;
    前記ステレオスコピックビデオを構成する左映像と右映像の組み合わせ方式を指示する組み合わせ類型情報;および
    前記ステレオスコピックビデオで前記左映像と前記右映像との間の順序を指示する映像順序指示情報を含み、
    前記映像種類指示情報と前記基本映像指示情報は前記サービス互換性情報が互換可能であることを指示する場合にのみ含まれ、
    前記組み合わせ類型情報と前記基本映像指示情報は前記サービス互換性情報が互換不可であることを指示する場合にのみ含まれることを特徴とする、請求項1に記載のMMT装置。
  8. 前記ステレオスコピックビデオ情報は、ISO/IEC23008−1標準に規定されているステレオスコピックビデオ情報(svin)ボックスのシンタックスフォーマットで記述されて前記単一のアセットファイルに含まれることを特徴とする、請求項7に記載のMMT装置。
  9. 前記ステレオスコピックビデオ情報は、ISO/IEC23008−1標準に規定されているステレオスコピックビデオ情報ディスクリプタのシンタックスフォーマットで記述されて前記シグナリングメッセージのMMTパッケージ(MMT Package、MP)テーブルに含まれることを特徴とする、請求項7に記載のMMT装置。
  10. MMT装置でステレオスコピックビデオデータを処理する方法において、
    前記ステレオスコピックビデオデータを含む単一のアセットファイルを生成する段階;および
    前記ステレオスコピックビデオデータのためのシグナリングメッセージを生成する段階を含み、
    記ステレオスコピックビデオデータと関連したステレオスコピックビデオ情報を含めて前記シグナリングメッセージを生成し、
    前記ステレオスコピックビデオデータが、基本階層及び向上階層に関連したスケラーブルHEVC(SHVC)に基づいて符号化されるとき、各ビューの位置を決定するための2D/3D指示子(Multi_view_position_SEI)が提供され、
    前記2D/3D指示子(Multi_view_position_SEI)は、num_viewと、前記num_viewに関連したビュー位置(View_position)を含むことを特徴とする、方法。
  11. 前記ステレオスコピックビデオ情報は、ステレオスコピックビデオを構成する左映像と右映像の組み合わせ方式を指示する組み合わせ類型情報、前記ステレオスコピックビデオで前記左映像と前記右映像間の順序を指示する映像順序指示情報および前記ステレオスコピックビデオを構成する特定ビューの映像が左映像であるかまたは右映像であるかを指示する映像種類指示情報を含み、
    前記組み合わせ類型情報は、左右方式、垂直ライン交差方式、フレームシーケンス方式、左/右ビューシーケンス方式および上下方式のうちいずれか一つを指示し、
    前記映像種類指示情報は、前記組み合わせ類型情報が左/右ビューシーケンス方式を指示する場合にのみ前記ステレオスコピックビデオ情報に含まれることを特徴とする、請求項10に記載の方法。
  12. 前記ステレオスコピックビデオ情報は、ISO/IEC23008−11標準に規定されているステレオスコピックビデオメディア情報(svmi)ボックスのシンタックスフォーマットで記述されて前記単一のアセットファイルに含まれることを特徴とする、請求項11に記載の方法。
  13. 前記ステレオスコピックビデオ情報は、ISO/IEC23008−1標準に規定されているステレオスコピックビデオ情報ディスクリプタのシンタックスフォーマットで記述されて前記シグナリングメッセージのMMTパッケージ(MMT Package、MP)テーブルに含まれることを特徴とする、請求項11に記載の方法。
JP2017557980A 2015-06-17 2016-06-15 ステレオスコピックビデオデータを処理するためのmmt装置および方法 Active JP6730320B2 (ja)

Applications Claiming Priority (9)

Application Number Priority Date Filing Date Title
KR10-2015-0086168 2015-06-17
KR20150086168 2015-06-17
KR10-2015-0088689 2015-06-22
KR20150088689 2015-06-22
KR20150153397 2015-11-02
KR10-2015-0153397 2015-11-02
KR1020160072720A KR102519209B1 (ko) 2015-06-17 2016-06-10 스테레오스코픽 비디오 데이터를 처리하기 위한 mmt 장치 및 방법
KR10-2016-0072720 2016-06-10
PCT/KR2016/006333 WO2016204502A1 (ko) 2015-06-17 2016-06-15 스테레오스코픽 비디오 데이터를 처리하기 위한 mmt 장치 및 방법

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2020114698A Division JP7080929B2 (ja) 2015-06-17 2020-07-02 ステレオスコピックビデオデータを処理するためのmmt装置および方法

Publications (2)

Publication Number Publication Date
JP2018526839A JP2018526839A (ja) 2018-09-13
JP6730320B2 true JP6730320B2 (ja) 2020-07-29

Family

ID=57736807

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2017557980A Active JP6730320B2 (ja) 2015-06-17 2016-06-15 ステレオスコピックビデオデータを処理するためのmmt装置および方法
JP2020114698A Active JP7080929B2 (ja) 2015-06-17 2020-07-02 ステレオスコピックビデオデータを処理するためのmmt装置および方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2020114698A Active JP7080929B2 (ja) 2015-06-17 2020-07-02 ステレオスコピックビデオデータを処理するためのmmt装置および方法

Country Status (4)

Country Link
US (3) US10412364B2 (ja)
JP (2) JP6730320B2 (ja)
KR (2) KR102519209B1 (ja)
CN (2) CN107787585B (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110351492B (zh) * 2018-04-06 2021-11-19 中兴通讯股份有限公司 一种视频数据处理方法、装置及介质
US11363330B2 (en) 2019-10-01 2022-06-14 Samsung Electronics Co., Ltd. Method, apparatus and computer-readable recording medium for transmitting or receiving VPCC data
CN112153395A (zh) * 2020-09-01 2020-12-29 海信电子科技(深圳)有限公司 流媒体数据播放方法和显示设备
US20220417543A1 (en) * 2021-06-28 2022-12-29 Tencent America LLC Multiview view position supplementary enhancement information message

Family Cites Families (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100585966B1 (ko) * 2004-05-21 2006-06-01 한국전자통신연구원 3차원 입체 영상 부가 데이터를 이용한 3차원 입체 디지털방송 송/수신 장치 및 그 방법
EP2501137A3 (en) * 2007-06-11 2012-12-12 Samsung Electronics Co., Ltd. Method and apparatus for generating header information of stereoscopic image
KR101434674B1 (ko) 2007-09-07 2014-08-29 삼성전자주식회사 스테레오스코픽 파일을 생성하기 위한 장치 및 방법
KR101311982B1 (ko) * 2009-06-15 2013-09-30 에스케이텔링크 주식회사 디지털 방송 시스템의 스테레오스코픽 비디오 서비스 제공/수신 방법 및 장치
JP2011066871A (ja) * 2009-08-21 2011-03-31 Sony Corp コンテンツ伝送方法及び表示装置
KR20110088334A (ko) * 2010-01-28 2011-08-03 삼성전자주식회사 3차원 멀티미디어 서비스를 제공하기 위한 데이터스트림 생성 방법 및 장치, 3차원 멀티미디어 서비스를 제공하기 위한 데이터스트림 수신 방법 및 장치
JP5559614B2 (ja) * 2010-04-21 2014-07-23 日立マクセル株式会社 受信装置および受信方法
KR101838071B1 (ko) * 2010-04-30 2018-03-13 엘지전자 주식회사 이미지 처리 방법 및 장치
EP2424251A3 (en) * 2010-08-23 2012-12-26 Lg Electronics Inc. Method for providing 3d video data in a 3dtv
US20150179218A1 (en) * 2010-09-10 2015-06-25 3DOO, Inc. Novel transcoder and 3d video editor
CN103329544A (zh) * 2010-10-13 2013-09-25 韩国电子通信研究院 用于传送立体感视频信息的方法和设备
EP2648407A4 (en) * 2010-12-02 2014-07-30 Korea Electronics Telecomm METHOD AND DEVICE FOR TRANSMITTING STEREOSCOPIC VIDEO CONTENT
KR20120060771A (ko) * 2010-12-02 2012-06-12 한국전자통신연구원 스테레오스코픽 영상 정보의 전송 방법 및 장치
WO2012074328A2 (ko) * 2010-12-03 2012-06-07 엘지전자 주식회사 다시점 3차원 방송 신호를 수신하기 위한 수신 장치 및 방법
US20130250051A1 (en) 2010-12-13 2013-09-26 Electronics And Telecommunications Research Institute Signaling method for a stereoscopic video service and apparatus using the method
US9553912B2 (en) 2011-01-19 2017-01-24 Electronics And Telecommunications Research Institute Method and apparatus for transmitting media content via a single port or multiple ports
US9386125B2 (en) 2011-06-13 2016-07-05 Electronic And Telecommunications Research Institute Method for transmitting packet-based media data having header in which overhead is minimized
KR101946861B1 (ko) * 2011-09-21 2019-02-13 삼성전자주식회사 멀티미디어 방송 서비스의 미디어 데이터 동기화 방법 및 장치
US20140351874A1 (en) 2011-09-23 2014-11-27 Electronics And Telecommunications Research Institute Method and apparatus for transmitting media data for mmt system, and apparatus and method for receiving media data
KR101885852B1 (ko) * 2011-09-29 2018-08-08 삼성전자주식회사 컨텐트 전송 및 수신 방법 및 장치
US9319721B2 (en) * 2011-10-13 2016-04-19 Electronics And Telecommunications Research Institute Method of configuring and transmitting an MMT transport packet
WO2013055168A1 (ko) * 2011-10-13 2013-04-18 한국전자통신연구원 콤포지션 정보 및 전송 특성 정보가 연동된 미디어 데이터를 이종 ip 네트워크를 통하여 전송하는 방법
EP3913822B1 (en) * 2011-10-13 2022-06-22 Samsung Electronics Co., Ltd. Method and apparatus for transmitting and receiving multimedia service
KR102003925B1 (ko) * 2011-11-23 2019-10-02 한국전자통신연구원 스케일러빌리티 및 뷰 정보를 제공하는 스트리밍 서비스를 위한 방법 및 장치
WO2013121823A1 (ja) * 2012-02-16 2013-08-22 ソニー株式会社 送信装置、送信方法および受信装置
EP2688304B1 (en) * 2012-03-01 2019-09-25 Sony Corporation Transmitter, transmission method and receiver
EP2830318A4 (en) 2012-03-23 2015-12-02 Humax Holdings Co Ltd TRANSMISSION METHOD AND HYBRID RECEPTION METHOD FOR SVC VIDEO CONTENT EMPTYED IN MMT
EP2822282B1 (en) * 2012-04-23 2018-11-07 LG Electronics Inc. Signal processing device and method for 3d service
KR101501344B1 (ko) 2012-05-02 2015-03-10 삼성전자주식회사 멀티미디어 서비스 송수신 방법 및 장치
KR20140002447A (ko) * 2012-06-29 2014-01-08 삼성전자주식회사 멀티미디어 시스템에서 적응적 미디어 구조 송수신 방법 및 장치
WO2014010830A1 (ko) * 2012-07-10 2014-01-16 한국전자통신연구원 엠엠티의 하이브리드 전송 서비스에서 패킷 전송 및 수신 장치 및 방법
US9843801B2 (en) * 2012-07-10 2017-12-12 Qualcomm Incorporated Generalized residual prediction for scalable video coding and 3D video coding
US9674499B2 (en) * 2012-08-15 2017-06-06 Qualcomm Incorporated Compatible three-dimensional video communications
US20140078249A1 (en) * 2012-09-20 2014-03-20 Qualcomm Incorporated Indication of frame-packed stereoscopic 3d video data for video coding
US9635394B2 (en) 2013-01-24 2017-04-25 Electronics And Telecommunications Research Institute Method and device for flexible MMT asset transmission and reception
US9503733B2 (en) * 2013-04-10 2016-11-22 ARRIS Enterprises, LLC Re-sampling with phase offset adjustment for luma and chroma to signal adaptive filters in scalable video coding
KR102148158B1 (ko) * 2013-04-23 2020-08-28 삼성전자주식회사 통신 시스템에서 패킷 송수신 방법 및 장치
WO2015015058A1 (en) * 2013-07-31 2015-02-05 Nokia Corporation Method and apparatus for video coding and decoding
KR20160074601A (ko) * 2013-10-22 2016-06-28 브이아이디 스케일, 인크. 비디오 송신 시스템에 대한 에러 은닉 모드 시그널링
US20160295220A1 (en) * 2013-11-21 2016-10-06 Lg Electronics Inc. Signal transceiving apparatus and signal transceiving method
WO2016072343A1 (ja) * 2014-11-05 2016-05-12 ソニー株式会社 送信装置、送信方法、受信装置および受信方法

Also Published As

Publication number Publication date
KR20230050292A (ko) 2023-04-14
KR102519209B1 (ko) 2023-04-07
CN107787585A (zh) 2018-03-09
US20180302608A1 (en) 2018-10-18
JP2020184773A (ja) 2020-11-12
US20210160475A1 (en) 2021-05-27
US10412364B2 (en) 2019-09-10
JP2018526839A (ja) 2018-09-13
US11405599B2 (en) 2022-08-02
US20200007846A1 (en) 2020-01-02
CN113490016A (zh) 2021-10-08
CN113490016B (zh) 2023-08-22
US10911736B2 (en) 2021-02-02
CN107787585B (zh) 2021-08-17
KR20160149150A (ko) 2016-12-27
JP7080929B2 (ja) 2022-06-06

Similar Documents

Publication Publication Date Title
US20200288182A1 (en) Transmission device, transmission method, receiving device, and receiving method for rendering a multi-image-arrangement distribution service
JP7080929B2 (ja) ステレオスコピックビデオデータを処理するためのmmt装置および方法
CN113287323B (zh) 用于检索媒体数据的方法、客户端设备及计算机可读介质
JP6868838B2 (ja) 送信装置、受信装置、送信方法及び受信方法
CN107005729A (zh) 用于多媒体和文件传输的传输接口
CN108702527A (zh) 用于使用通用夹层分发格式的媒体传送的***和方法
JP6655803B2 (ja) 送信方法、受信方法、送信装置及び受信装置
TW201633783A (zh) 低延遲視訊串流
JP7361287B2 (ja) 送信方法及び送信装置
US11363330B2 (en) Method, apparatus and computer-readable recording medium for transmitting or receiving VPCC data
EP3439309B1 (en) Method and apparatus for transmitting and receiving broadcast signals
KR101584111B1 (ko) 클라우드 컴퓨팅을 이용한 멀티미디어 서비스 품질 향상 방법 및 이를 위한 기기
JP2023164690A (ja) 送信装置、受信装置、送信方法及び受信方法
WO2016204502A1 (ko) 스테레오스코픽 비디오 데이터를 처리하기 위한 mmt 장치 및 방법
TWI846795B (zh) 用於經串流媒體資料之多個解碼器介面
WO2016021153A1 (ja) 送信方法、受信方法、送信装置及び受信装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190108

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200110

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200117

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200417

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200602

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200702

R150 Certificate of patent or registration of utility model

Ref document number: 6730320

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250