CN106031180A - 收发用于全景服务的广播信号的方法和设备 - Google Patents

收发用于全景服务的广播信号的方法和设备 Download PDF

Info

Publication number
CN106031180A
CN106031180A CN201580009219.0A CN201580009219A CN106031180A CN 106031180 A CN106031180 A CN 106031180A CN 201580009219 A CN201580009219 A CN 201580009219A CN 106031180 A CN106031180 A CN 106031180A
Authority
CN
China
Prior art keywords
image
stream
information
field
panorama
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201580009219.0A
Other languages
English (en)
Inventor
黄修振
徐琮烈
吴炫默
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN106031180A publication Critical patent/CN106031180A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637—Control signals issued by the client directed to the server or network components
    • H04N21/6377—Control signals issued by the client directed to the server or network components directed to server
    • H04N21/6379—Control signals issued by the client directed to the server or network components directed to server directed to encoder, e.g. for requesting a lower encoding rate
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/167—Position within a video image, e.g. region of interest [ROI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614—Multiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2362—Generation or processing of Service Information [SI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365—Multiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2368—Multiplexing of audio and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4382—Demodulation or channel decoding, e.g. QPSK demodulation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • H04N21/8153—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics comprising still images, e.g. texture, background image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明涉及提供用于收发用于全景广播服务的广播信号的方法和/或设备。根据本发明的一个实施例的用于发送广播信号的方法包括步骤：对图像进行编码；将编码的图像以及与图像有关的信令信息复用成单个广播流，其中，信令信息包括与全景图像有关的信令信息；生成包括复用的广播流的广播信号；以及发送所生成的广播信号。

Description

收发用于全景服务的广播信号的方法和设备
技术领域
本发明涉及广播信号的发送和接收。更具体地，本发明涉及用于发送/接收用于全景服务的广播信号的方法和/或设备。
背景技术
随着数字技术和通信技术的发展，对于音频和视频多媒体内容的需求已在诸如广播、电影、互联网以及个人媒体的各种领域中迅速地扩展。此外，随着提供3D广播和电影的3DTV/3D电影普及化，对于提供真实性和现实感的沉浸式媒体的消费者需求增加。此外，随着家庭TV屏幕被放大并且显示技术发展，对于具有高于HD的高质量的逼真内容的需求增加。因此，诸如除3DTV之外的超高清晰度TV(UHDTV)的逼真广播作为用于后HDTV市场的将来广播服务受到关注。具体地，超高清晰度(UHD)广播服务在积极的讨论中。
自3D和UHD内容出现以来，对于全景图像的需求在通过展览馆、新闻中心和室外结构而增加。高质量全景服务除了提供3D内容的现实感和UHD内容的真实之外还提供比HD视频服务宽的视角，以向用户提供最大化的现实感。然而，尽管有这样的趋势，但是用于获取、生成和再现全景图像的标准不存在，并且仅几个学术和外国研究机构进行技术开发。
为了使用DTV接收机来观看全景图像，全景图像被重新调整大小为小图像。因此，为了在原始状态下示出全景图像，存在对于用于使用现有DTV来显示具有任意大小的全景图像而不使该全景图像失真的技术的研究的需要。
发明内容
技术问题
被设计来解决问题的本发明的目标在于向观众提供生产时的原始状态的全景图像。
本发明的另一目标是提供将全景图像划分成一个或多个图像并且发送这些图像的方法。
本发明的又一个目标是提供在显示器中使全景图像分离并且显示经分离的图像的方法。
本发明的再一个目标是提供用于提供全景服务的高效信令方法。
技术方案
根据本发明的实施例的发送广播信号的方法包括：对图像进行编码；将编码的图像以及关于图像的信令信息复用成单个广播流，其中，信令信息包括关于全景图像的信令信息；生成包括复用的广播流的广播信号；以及发送所生成的广播信号。
关于图像的信令信息可以包括指示关于与当前观看的广播服务相对应的全景广播服务的信息的事件连接信息，并且关于全景图像的信令信息可以包括指示全景图像的组成的全景组成信息。
编码包括将图像划分成一个或多个图像并且对划分的图像分别进行编码。
编码可以包括对关于在图像中的用户感兴趣区域(ROI)的附加信息进行编码，以用于提供ROI的高清晰度图像，并且复用可以包括将编码的图像、关于图像的信令信息以及编码的ROI附加信息复用成单个广播流。
全景组成信息可以包括关于划分的图像的信息。
全景组成信息可以包括用于从划分的图像去除块伪影的滤波信息。
全景组成信息可以包括用于将全景图像裁切成一个或多个图像的信息。
全景组成信息可以包括关于ROI的图像的信息。
根据本发明的另一实施例的接收广播信号的方法包括：接收包括关于图像的流以及关于该图像的信令信息的广播流，其中，信令信息包括关于全景图像的信令信息；从所接收到的广播流中提取关于图像的流以及关于图像的信令信息；以及使用所提取的信令信息来对所提取的关于图像的流进行解码。
关于图像的信令信息可以包括指示关于与当前观看的广播服务相对应的全景广播服务的信息的事件连接信息，并且关于全景图像的信令信息可以包括指示全景图像的组成的全景组成信息。
可以将图像划分成一个或多个图像，并且关于图像的流可以包括关于一个或多个划分的图像的流，其中，解码包括使用所提取的信令信息来对关于划分的图像的流分别进行解码。
所述广播流可以包括关于有关在图像中的用户ROI的附加信息的流，以用于提供ROI的高清晰度图像，其中，提取包括从所接收到的广播流中提取关于图像的流、关于ROI附加信息的流以及关于图像的信令信息，并且解码包括使用所提取的信令信息来对所提取的关于图像的流以及所提取的关于ROI附加信息的流进行解码。
全景组成信息可以包括关于划分的图像的信息。
全景组成信息可以包括用于从划分的图像去除块伪影的滤波信息。
全景组成信息可以包括用于将全景图像裁切成一个或多个图像的信息。
全景组成信息可以包括关于ROI的图像的信息。
方法还可以包括显示解码的关于图像的流，其中，显示包括当从用户接收到滚动请求时显示根据滚动请求移位的区域。
根据本发明的另一实施例的用于发送广播信号的设备包括：编码器，该编码器用于对图像进行编码；复用器，该复用器用于将编码的图像以及关于图像的信令信息复用成单个广播流，其中，信令信息包括关于全景图像的信令信息；广播信号生成器，该广播信号生成器用于生成包括经复用的广播流的广播信号；以及发射机，该发射机用于发送所生成的广播信号。
根据本发明的另一实施例的用于接收广播信号的设备包括：接收机，该接收机用于接收包括关于图像的流以及关于该图像的信令信息的广播流，其中，信令信息包括关于全景图像的信令信息；解复用器，该解复用器用于从所接收到的广播流中提取关于图像的流以及关于图像的信令信息；以及解码器，该解码器用于使用所提取的信令信息来对所提取的关于图像的流进行解码。
有益效果
根据本发明，可以向观众提供处于生产时的原始状态的全景图像。
根据本发明，可以提供将全景图像划分成一个或多个图像并且发送这些图像的方法。
根据本发明，可以提供在显示器中使全景图像分离并且显示经分离的图像的方法。
根据本发明，可以提供用于提供全景服务的高效信令方法。
附图说明
图1是图示根据本发明的实施例的广播信号发送方法的图。
图2是图示根据本发明的实施例的场景1的组成的图。
图3是图示根据本发明的实施例的场景2的组成的图。
图4是图示根据本发明的实施例的场景3的组成的图。
图5是图示根据本发明的实施例的场景4的组成的图。
图6是图示根据本发明的实施例的划分全景图像的方法的图。
图7是图示根据本发明的实施例的场景1的全景服务组成的图。
图8是图示根据本发明的实施例的场景2的全景服务组成的图。
图9是图示根据本发明的实施例的多个接收机在这些接收机基于场景1对于通过对划分的全景图像进行编码而生成的流进行解码时根据滚动的操作的图。
图10是图示根据本发明的实施例的接收机在该接收机基于场景1对于通过对划分的全景图像进行编码而生成的流进行解码时根据滚动的操作的图。
图11是图示根据本发明的实施例的当具有相同的显示器大小的多个接收机显示全景图像时根据滚动请求的全景图像的布置的图。
图12是图示根据本发明的实施例的当具有不同的显示器大小的多个接收机显示全景图像时根据使用缩放的滚动请求的全景图像的布置的图。
图13是图示根据本发明的实施例的当具有不同的显示器大小的多个接收机显示全景图像时根据使用裁切的滚动请求的全景图像的布置的图。
图14是图示根据本发明的实施例的两个接收机在接收机显示全景图像时的操作的图。
图15是图示根据本发明的实施例接收机在该接收机基于场景2接收被编码成一个流的全景图像时的操作的图。
图16是图示基于根据本发明的实施例的场景4的全景服务组成的图。
图17是图示根据本发明的实施例的panorama_composition_info的组成的图。
图18是图示根据本发明的实施例的panorama_service_type的组成的图。
图19是图示根据本发明的实施例的panorama_composition_metadata()的组成的图。
图20是图示根据本发明的实施例的sub_video_afd_bar()的组成的图。
图21是图示根据本发明的实施例的显示来自形成全景图像的部分图像当中的具有高panorama_view_priority的部分图像的方法的图。
图22是图示根据本发明的实施例的panorama_filtering_metadata()的组成的图。
图23是图示根据本发明的实施例的extraction_info_metadata()的组成的图。
图24是图示基于根据本发明的实施例的场景2的一个视频流的组成的图。
图25是图示根据本发明的实施例的ROI_info_metadata()的组成的图。
图26是图示根据本发明的实施例的服务描述表(SDT)的组成的图。
图27是图示根据本发明的实施例的事件信息表(EIT)的组成的图。
图28是图示根据本发明的实施例的包括在EIT中的linkage_descriptor()的组成的图。
图29是图示根据本发明的实施例的当linkage_type是0x0E时根据link_type的目标服务的类型的图。
图30是图示根据本发明的实施例的advanced_event_linkage_info()的组成的图。
图31是图示根据本发明的实施例的节目映射表(PMT)的组成以及包括在PMT中的panorama_composition_info()的位置的图。
图32是图示根据本发明的实施例的地面虚拟频道表(TVCT)的组成的图。
图33是图示根据本发明的实施例的有线电视虚拟频道表(CVCT)的组成的图。
图34是图示根据本发明的实施例的用于全景服务的service_type的组成的图。
图35是图示根据本发明的实施例的component_list_descriptor()的组成的图。
图36是图示根据本发明的实施例的当stream_type指示基础流时stream_info_details()的组成的图。
图37是图示根据本发明的实施例的当stream_type指示除基础流以外的流时stream_info_details()的组成的图。
图38是图示当主接收机在根据本发明的实施例的场景1中对所有流进行解码并且将经解码的流递送给子接收机时的接收机操作的图。
图39是图示当在根据本发明的实施例的场景1中对每个接收机中分离和分配的流进行解码时的接收机操作的图。
图40是图示基于根据本发明的实施例的场景2的接收机操作的图。
图41是图示当主接收机在根据本发明的实施例的场景4中对所有流进行解码并且将经解码的流递送给子接收机时的接收机操作的图。
图42是图示根据本发明的实施例的广播信号接收方法的图。
图43是图示根据本发明的实施例的广播信号发送设备的配置的图。
图44是图示根据本发明的实施例的广播信号接收设备的配置的图。
具体实施方式
现在将详细地参考本发明的优选实施例，其示例被图示在附图中。然而，本发明不应该限于本文中所描述的特定实施例。
尽管本发明中使用的术语是从通常知道且使用的术语中选择的，但是本发明的描述中提及的术语中的一些由本申请人以他的或她的判断来选择，其具体含义在本文描述的相关部分中被描述。此外，要求本发明不是简单地由实际的术语而是由位于其内的每个术语的含义来理解。
图1是图示根据本发明的实施例的广播信号发送方法的图。
根据本发明的实施例的广播信号发送方法可以执行以下处理。
根据本发明的实施例的编码器可以对图像进行编码(S1010)。根据本发明的实施例的复用器可以将经编码的图像和/或与图像有关的信令信息复用成一个广播流(S1020)。这里，信令信息可以包括关于全景图像的信令信息。根据本发明的实施例的广播信号生成器可以生成包括经复用的广播流的广播信号(S1030)。根据本发明的实施例的发射机可以发送所生成的广播信号(S1040)。这里，发射机可以通过地面广播网络、互联网和/或有线电视网络来发送广播信号。
根据本发明的另一实施例，与图像有关的信令信息可以包括指示关于与当前观看的广播服务相对应的全景广播服务的信息的事件连接信息，并且关于全景图像的信令信息可以包括指示全景图像的组成的全景组成信息。这里，事件连接信息可以是指advanced_event_linkage_info。全景组成信息可以是指panorama_composition_info。将参考图17和图30稍后给出其详细描述。
根据本发明的另一实施例，编码器可以将图像划分成一个或多个图像并且对经划分的图像分别进行编码。这里，图像可以包括全景图像。将参考图2、图6和图7稍后给出其详细描述。
根据本发明的另一实施例，编码器可以对关于ROI(感兴趣区域)的附加信息进行编码以便提供图像中的用于用户的ROI的高质量图像，并且复用器可以将经编码的图像、与图像有关的信令信息和/或关于ROI的经编码的附加信息复用成一个广播流。这里，关于ROI的附加信息可以是指ROI增强数据。将参考图5、图16和图41稍后给出其详细描述。
根据本发明的另一实施例，全景组成信息可以包括关于经划分的图像的信息。这里，关于经划分的图像的信息可以是指panorama_composition_metadata。将参考图17、图19和图20稍后给出其详细描述。
根据本发明的另一实施例，全景组成信息可以包括用于从经划分的图像中去除块伪影的滤波信息。这里，用于块伪影去除的滤波信息可以是指panorama_filtering_metadata。将参考图17、图19和图22稍后给出其详细描述。
根据本发明的另一实施例，全景组成信息可以包括用于将全景图像裁切成一个或多个图像的信息。这里，用于裁切全景图像的信息可以是指extraction_info_metadata。将参考图3、图8、图17、图23和图38稍后给出其详细描述。
根据本发明的另一实施例，全景组成信息可以包括关于ROI的图像的信息。这里，关于ROI的图像的信息可以是指ROI_info_metadata。将参考图17、图25和图41稍后给出其详细描述。
本发明的实施例可以提供用于使全景图像的优点最大化的高效显示方法。例如，本发明的实施例可以提供使用现有接收机仅接收ROI的方法、使用多个现有接收机高效地显示具有任意大小的全景图像的方法以及允许用户观看除接收机能够通过滚动来显示图像的区域以外的区域的方法。
本发明的实施例可以将全景图像划分成具有特定大小的图像，分别对这些图像进行编码，将经编码的图像递送给多个接收机并且允许接收机输出与其相对应的全景图像的部分。此外，本发明的实施例可以通过发信号通知全景图像的部分的优先级来允许一个现有DTV接收机显示全景图像的部分(场景1)。也就是说，场景1可以生成由划分的全景图像组成的一个流。
本发明的另一实施例可以发信号通知全景图像以及用于划分该全景图像的坐标值，使得主接收机将裁切的图像递送给多个子DTV接收机。此外，本发明的实施例可以允许所有接收机对整个全景图像进行解码，并且输出分别对应于接收机的全景图像的部分。此外，本发明的实施例可以允许裁切的图像甚至通过一个现有DTV接收机来观看(场景2)。也就是说，场景2可以将全景图像组成为一个流。
本发明的另一实施例可以显示默认区域，然后在收到滚动请求时显示通过来自用户的滚动请求移位的图像。当多个16:9DTV接收机划分全景图像并且输出经划分的图像时，可以在其它DTV接收机中顺序地且自动地执行滚动(场景3)。可以基于场景1和/或场景2提供根据场景3的服务。
本发明的另一实施例可以使用可缩放HEVC(SHVC)来通过增强层提供某个ROI的增强数据，并且提供关于该增强数据的信令信息以便关于ROI提供高图片质量服务(场景4)。
当观众观看一般广播事件时，本发明的另一实施例可以在全景服务存在时使用链接描述符来提供与广播事件相对应的全景服务(场景5)。
根据本发明的实施例，甚至具有16:9的长宽比的DTV接收机也可以显示全景图像，而无需重新调整该全景图像的大小。本发明的实施例可以允许一个显示装置输出包括在全景图像中的某个ROI并且允许多个DTV接收机划分全景图像并且显示经划分的图像。
根据本发明的实施例，当接收机使用场景1或2的方法来显示全景图像时，可以在从用户输入滚动请求时对该全景图像进行移位并且选择性地显示。
根据本发明的实施例，可以使用发送有关ROI的增强数据的方法在无需发送大型数据的情况下提供高质量视频服务。
根据本发明的实施例，可以链接全景图像服务以及具有16:9的长宽比的视频服务。这里，具有16:9的视频服务可以提供通过划分全景图像所获得的图像并且可以是常规的16:9视频服务。
图2是图示根据本发明的实施例的场景1的组成的图。
根据场景1，具有任意大小的全景图像可以被划分成具有预定大小的图像、被编码并且被递送给多个接收机，使得接收机输出全景图像的相关部分。此外，甚至在不重新调整全景图像的大小的情况下不能够输出全景图像的接收机也可以通过对全景图像的部分进行编号(或者将这些部分指定为基础视图)来显示全景图像的期望部分。
根据本发明的实施例，如由该图中的实线所表示的，可以向主接收机发送划分且编码的流。主接收机可以对所发送的流进行解码，然后将经解码的流递送给子接收机。
根据本发明的另一实施例，针对划分的图像而编码的流可以被发送到子接收机和主接收机，如由该图中的虚线所表示的。子接收机和主接收机可以对所发送的关于经划分的图像的流进行解码，然后显示图像。
图3是图示场景2的组成的图。
根据本发明的实施例的场景2可以发信号通知全景图像以及用于裁切该全景图像的坐标值。因此，场景2可以允许多个DTV接收机划分全景图像并且输出经划分的图像。场景2可以裁切全景图像并且使用常规的DTV接收机将经裁切的全景图像提供给用户。此外，场景2可以允许第二装置显示裁切的部分。
根据本发明的实施例，关于全景图像编码的一个流可以被发送到主接收机，如由该图中的实线3010所表示的。主接收机可以对所发送的流进行解码并且使用裁切坐标来提取全景图像的部分。此外，主接收机可以将经提取的全景图像的部分递送给子接收机。
根据本发明的另一实施例，关于全景图像编码的流可以被发送到所有子接收机和主接收机，如由该图中的虑线3020所表示的。每个接收机可以对所发送的流进行解码，使用裁切坐标来裁切与流相对应的图像并且显示为此所需要的图像。
根据本发明的另一实施例，关于全景图像编码的流可以被发送到现有接收机和/或第二装置，如由该图中的其它虚线3030所表示的。现有接收机和/或第二装置可以对所发送的流进行解码，裁切与流相对应的图像并且显示经裁切的图像。
图4是图示根据本发明的实施例的场景3的组成的图。
根据本发明的实施例的场景3可以允许接收机输出全景图像的部分作为默认区域，并且，当从用户接收到滚动请求时，按对应的滚动信息使坐标值移位并且显示区域。
根据本发明的实施例的滚动方法可以取决于显示全景图像的接收机的数目或编码流的数目。
图5是图示根据本发明的实施例的场景4的组成的图。
根据本发明的实施例的场景4可以为ROI提供高图片质量拉近和拉远功能。为此，场景4可以使用SHVC的增强来提供关于全景图像的部分的增强数据并且提供关于增强数据的信令信息。
参考图，全景图像可以被(HEVC编码器)编码成基础层或增强层的流并发送。接收机可以(由HEVC解码器)对经编码的流进行解码并且显示与该流相对应的图像。有关ROI的增强数据可以被(SHVC编码器)编码成增强层的流并发送。接收机可以(由SHVC解码器)对经编码的流进行解码并且显示与该流相对应的图像。这里，接收机可以使用关于ROI的信息(ROI_start_x、ROI_start_y、ROI_width和/或ROI_height)来裁切所接收到的全景图像的ROI，并且关于该ROI使用所接收到的增强数据来提供高质量图像。这里，SHVC是可缩放HEVC的简称并且可以对应于基于HEVC的可缩放编解码器。因此，SHVC包括HEVC并且对增强层流进行编码和/或解码以提供可缩放性。增强层可以对应于包括除包括在基础层的HEVC流中的信息之外还具有残差数据的流的层。
当观众观看一般广播事件时，根据本发明的另一实施例的场景5可以在全景服务存在时使用链接描述符来提供与事件相对应的全景服务。这里，事件可以是指广播节目。
图6是图示根据本发明的实施例的划分全景图像的方法的图。
根据本发明的实施例，可以将全景图像划分成左部区域、中心区域和右部区域。如图所示，可以以马赛克形式将全景图像划分成多个图像。
根据本发明的实施例，如图所示，经划分的图像可以作为一维值(6010)被发信号通知或者作为二维坐标值被发信号通知。这里，号码分配次序可以变化。
图7是图示根据本发明的实施例的场景1的全景服务组成的图。
本发明的实施例可以基于与16:9格式兼容的服务(服务1)将具有任意大小的全景图像划分成预定区域。经划分的图像可以被编码并发送到多个接收机。接收机可以显示与其相对应的图像。
为了通过接收机显示整个全景图像，本发明的实施例可以使用与服务1相对应的图像7010、与服务2相对应的图像7020、与服务3相对应的图像7030和/或全景组成信息来向接收机提供服务1、服务2、服务3和/或全景服务。
根据本发明的实施例，能够显示全景图像的视频墙和/或标牌可以组成与原始全景图像相同的全景图像并且显示该全景图像。这里，视频墙可以是指通过堆叠视频屏幕而组成的大屏幕。标牌可以是指诸如显示广告板的大显示器。
根据本发明的另一实施例，接收机可以在无需重新调整全景图像的大小的情况下通过具有16:9的长宽比的DTV接收机来显示全景图像。在这种情况下，可以显示仅由用户从经划分的图像7010、7020和7030中选择的图像。另外，本发明的实施例可以提供被指定为默认服务的服务1。
图8是图示根据本发明的实施例的场景2的全景服务组成的图。
本发明的实施例可以将用于划分具有任意大小的全景图像的裁切坐标值与全景图像一起发送到一个或多个接收机。接收机可以接收整个全景图像，对全景图像进行解码，然后使用裁切坐标值来裁切全景图像。
根据本发明的实施例，当16:9接收机在无需重新调整全景图像的大小的情况下显示全景图像时，接收机可以使用包括裁切坐标值的提取信息元数据来选择用户的期望图像并且显示所选择的图像。这里，接收机可以使用来自包括在提取信息元数据中的裁切坐标值当中的被指定为默认值的裁切坐标值来提供16:9服务。这里，接收机可以是DTV接收机。
根据本发明的另一实施例，当多个接收机显示整个全景图像时，接收机可以使用提取信息元数据来划分全景图像，并且显示与接收机分别相对应的图像。这里，接收机可以是指DTV接收机。
根据本发明的另一实施例，能够显示全景图像的视频墙和/或标牌可以在无需顾及提取信息元数据的情况下显示全景图像。
图9是图示根据本发明的实施例的多个接收机在这些接收机基于场景1对通过对划分的全景图像进行编码而生成的流进行解码时根据滚动的操作的图。
根据本发明的实施例，当接收到用于使通过场景1或2组成的全景图像在x轴上滚动+X并且在y轴上滚动+Y的滚动请求时，接收机可以显示从全景图像向右移位X并且向顶部移位Y的图像。这里，根据本发明的实施例的场景3(根据滚动的接收机操作)可以在基于将经划分的全景图像组成为一个流的场景1的情况下并且在基于将整个全景图像组成为一个流的场景2的情况下通过不同的方法来提供服务。
即便当场景3基于场景1时，根据本发明的实施例的场景3也可以在多个接收机对通过对经划分的全景图像进行编码所生成的流进行解码的情况下并且在一个接收机对通过对经划分的全景图像进行编码所生成的流进行解码的情况下通过不同的方法来提供服务。
该图图示多个接收机在这些接收机基于场景1对通过对经划分的全景图像进行编码而生成的流进行解码时根据场景3的操作。
当根据本发明的实施例整个全景图像被划分成多个图像并且通过相应的流发送经划分的图像(场景1)时，接收机可以对需要由相应的接收机输出的流进行解码并且显示与这些流相对应的图像。这里，当接收机从用户接收到滚动请求时，接收机可以使要根据滚动请求滚动的部分与由此解码的图像分离，并且将该部分递送给另一接收机或者从另一接收机接收必要的图像部分。在这种情况下，可以使用诸如网际协议(IP)、通用即插即用(UPnP)以及高清晰度多媒体接口(HDMI)的方法来递送根据滚动请求而滚动的图像部分，即，必要的图像部分。
根据本发明的实施例，如图所图示，可以将全景图像划分成6个图像。这里，为了描述的方便可以从1至6顺序地对左上图像至右下图像进行编号。可以经划分的图像发送到多个接收机。例如，图像1和2可以被编码成流并且递送给接收机1。类似地，图像3和图像4可以被递送给接收机2并且图像5和图像6可以被递送给接收机3。这里，当从用户接收到滚动请求时，已接收到滚动请求的接收机可以变成主接收机。主接收机可以将滚动请求和关于其的信令信息递送给其它子接收机。例如，当从用户接收到从左向右滚动的滚动请求时，接收机1可以将条数据(bar data)***到其接收机的左部区域，其是根据通过接收机1显示的图像的滚动而生成的。参考图，与接收机1相对应的图像的滚动部分(区域A)被移动到接收机2的左部区域(区域A’)并且在被解码之后由接收机2输出，但是区域A在接收机1中被解码。接收机2从接收机1接收与区域A相对应的经解码的图像并且显示该图像。通过接收机2显示的图像的右部区域(区域B)根据滚动请求滚动到接收机3的显示器的左部区域(区域B’)并且在接收机2中被解码之后由接收机3输出。接收机3可以从接收机2接收与区域B相对应的经解码的图像并且显示该图像。通过显示器3显示的图像的右部区域根据滚动请求滚动并且因此经可以未被显示。根据本发明的实施例，接收机1可以将与区域A相对应的经解码的图像和/或关于区域A的坐标信息(宽度和/或高度)递送给接收机。如图所示，类似地，接收机2可以将与区域B相对应的经解码的图像和关于区域B的坐标信息递送给接收机3。
图10是图示根据本发明的实施例的接收机在该接收机基于场景1对通过对划分的全景图像进行编码而生成的流进行解码时根据滚动的操作的图。
该图图示当多个接收机基于场景1对通过对划分的全景图像进行编码而生成的流进行解码时根据场景3(滚动)的接收机操作。
当根据本发明的实施例全景图像被划分成多个图像并且经划分的图像被以相应流的形式发送(场景1)时，主接收机可以接收所有流，并对其进行解码，并且将所有解码的图像递送给子接收机。也就是说，因为本实施例描述主接收机用来对所有图像进行解码、组成整个全景图像，并且向子接收机递送要通过子接收机显示的图像的方法，所以根据本实施例的方法可以与主接收机在场景2(裁切)中用来对整个全景图像进行解码并且将整个全景图像递送给多个接收机的方法相同。
子接收机可以从主接收机接收要通过其输出的图像并且显示这些图像。这里，当从用户接收到滚动请求时，主接收机可以响应于该滚动请求而使经解码的全景图像滚动，并且使用诸如IP、UPnP和HDMI的方法来向子接收机递送要由子接收机输出的解码的图像。
根据本发明的实施例，如图所图示，可以将全景图像划分成6个图像。这里，为了描述的方便可以从1至6顺序地对左上图像至右下图像进行编号。经划分的图像可以被分别编码成流并且递送给一个接收机。例如，可以将经划分的图像1至6分别编码成流并且可以将所有经编码的流递送给接收机2。当从用户接收到滚动请求时，已接收到滚动请求的接收机可以变成主接收机。主接收机可以紧接着将滚动请求和信令信息递送给其它子接收机。例如，如果从用户接收到从左向右滚动的滚动请求，则可以改变整个全景图像中的要通过相应的接收机显示的图像，并且因此主接收机可以对整个全景图像进行解码，对要通过相应的接收机显示的图像进行细分并且将该图像递送给子接收机。这里，接收机1可以将条数据***到根据通过接收机1显示的图像的滚动而生成的左部区域中，并且可以不显示根据滚动请求而滚动的通过接收机3显示的图像的右部部分。
图11是图示根据本发明的实施例的当具有相同的显示器大小的多个接收机显示全景图像时根据滚动请求的全景图像的布置的图。
根据本发明的实施例的主接收机(主显示器)可以不管滚动请求而对向其发送的流进行解码。然后，当接收到用于使图像在x轴上滚动+X并且在y轴上滚动+Y的滚动请求时，主接收机可以在从自点(0,0)在x轴上移位了+X并且在y轴上移位了+Y的点开始的显示区域中显示具有与其显示器相同的宽度和高度的图像。例如，该图图示当全景图像沿着x轴(向左)滚动了700并且沿着y轴滚动了0时的全景图像的布置。
根据本发明的实施例，当存在要由主接收机或其它子接收机显示但是由子接收机(子显示器1和子显示器2)解码的图像时，已对图像进行解码的子接收机可以将经解码的图像递送给主接收机或将显示这些图像的其它子接收机。类似地，当存在要由子接收机显示但是由主接收机解码的图像时，已对图像进行解码的主解码器可以将经解码的图像递送给将显示这些图像的子接收机。
根据本发明的实施例的子接收机(子显示器1和子显示器2)可以从主接收机接收用户的滚动请求。子接收机可以不管滚动请求而对接收到的流进行解码。然后，当接收到用于使图像在x轴上滚动+X并且在y轴上滚动+Y的滚动请求时，主接收机可以在从自点(0,0)在x轴上移位了+X并且在y轴上移位了+Y的点开始的显示区域中显示具有与其显示器相同的宽度和高度的图像。当由于滚动而在子接收机的显示屏幕中生成了空白时，子接收机可以基于显示器分辨率及其滚动信息将条数据***到空白中。这里，信箱和/或邮筒可以作为条数据被***或者可以组合并***信箱和邮筒。
当存在尚未被根据本发明的实施例的子接收机解码但是需要由子接收机显示的图像时，子接收机可以从主接收机或其它子接收机接收经解码的图像。
图12是图示根据本发明的实施例的当具有不同的显示器大小的多个接收机显示全景图像时根据使用缩放的滚动请求的全景图像的布置的图。
与具有相同的显示器大小的多个接收机显示全景图像的前述情况区分开，可以执行按比例缩小和/或按比例放大，因为接收机在本实施例中具有不同的显示器大小。根据本发明的实施例，像使用多监视器以便使用多个接收机的情况一样，主接收机和子接收机可以交换关于屏幕大小和/或显示器分辨率的信息并且可以设定接收机连接所在的位置。
根据本发明的实施例的主接收机和子接收机可以交换关于屏幕大小和/或其显示器分辨率的信息。这样的信息交换可以仅在最初执行时进行。根据本发明的实施例，用户已将滚动请求发送到的接收机变成主接收机，并且主接收机可以将滚动相关信息递送给所有子接收机。
根据本发明的实施例的主接收机(主显示器)可以不管滚动请求而对向其发送的流进行解码。然后，当接收到用于使图像在x轴上滚动+X并且在y轴上滚动+Y的滚动请求时，主接收机可以在从自点(0,0)在x轴上移位了+X并且在y轴上移位了+Y的点开始的显示区域中显示具有与其显示器相同的宽度和高度的图像。例如，该图图示当全景图像沿着x轴(向左)滚动了700并且沿着y轴滚动了0时的全景图像的布置。
当根据本发明的实施例的主接收机具有比其它子接收机更大的显示器大小时，从主接收机发送到子接收机的图像可以基于子接收机的显示器分辨率和/或屏幕大小被按比例缩小并且递送给子接收机(12010)。相反地，从子接收机发送到主接收机的图像可以基于主接收机的显示器分辨率和/或屏幕大小被按比例放大并且递送给主接收机(12020)。
根据本发明的实施例的子接收机(子显示器1和子显示器2)可以从主接收机接收用户的滚动请求。子接收机可以不管滚动请求而对接收到的流进行解码。然后，当接收到用于使图像在x轴上滚动+X并且在y轴上滚动+Y的滚动请求时，主接收机可以在从自点(0,0)在x轴上移位了+X并且在y轴上移位了+Y的点开始的显示区域中显示具有与其显示器相同的宽度和高度的图像。当由于滚动而在子接收机的显示屏幕中生成了空白时，子接收机可以基于显示器分辨率及其滚动信息将条数据***到空白中。这里，信箱和/或邮筒可以作为条数据被***或者可以组合并***信箱和邮筒。
图13是图示根据本发明的实施例的当具有不同的显示器大小的多个接收机显示全景图像时根据使用裁切的滚动请求的全景图像的布置的图。
与根据使用缩放的滚动请求的前述全景图像布置区分开，在本发明的另一实施例中解码的图像可以被裁切以在无需被缩放的情况下适于显示器大小并且指配给相应的接收机。
根据本发明的实施例的子接收机(子显示器1和子显示器2)可以接收分段的流，对所接收到的流进行解码并且使用其显示器分辨率、接收机连接所在的位置的坐标值、接收机的显示器大小和/或滚动信箱来裁切与流相对应的图像以适合于其显示器大小。
在从用户接收到滚动请求时，可以使用相应的接收机的显示器分辨率、接收机连接所在的坐标值、接收机的显示器大小和/或滚动信息来裁切并丢弃通过主接收机显示的图像1(13010)。被丢弃以适合于相关子接收机的显示器大小的图像2(13020)可以与图像3(13030)一起被递送给主接收机，而不在解码之后被丢弃。例如，该图图示当全景图像沿着x轴(向左)滚动了700并且沿着y轴滚动了0时的全景图像布置。
图14是图示根据本发明的实施例的两个接收机在接收机显示全景图像时的操作的图。
根据本发明的实施例，已从用户接收到滚动请求的接收机可以是主接收机并且另一个接收机可以是子接收机。
根据本发明的实施例，主接收机和子接收机可以交换目标显示器大小和/或输出分辨率信息。这里，目标显示器大小可以是指主接收机和/或子接收机的显示器大小。主接收机和子接收机可以分别接收关于划分的全景图像的流并且对所接收到的流进行解码。当输入了用于沿着x轴滚动+X并且沿着y轴滚动Y((x,y)>(x',y'))的滚动请求时，主接收机可以接收到该滚动请求并且将滚动信息递送给子接收机。主接收机可以使用滚动信息和/或目标显示器信息来使关于编码在其中的流的图像分离并且将该图像递送给子接收机。类似地，子接收机可以使用滚动信息和/或目标显示器信息关于在其中解码的流来分离图像，并且将该图像递送给主接收机。这里，目标显示器信息可以包括显示器大小和/或显示器分辨率信息。关于解码流分离图像的方法可以包括前述缩放和/或裁切方法。
图15是图示当接收机基于根据本发明的实施例的场景2接收被编码成一个流的全景图像时根据滚动的接收机操作的图。
在根据本发明的实施例的场景2中，可以将全景图像编码成一个流并且可以使用裁切坐标将全景图像划分成多个图像。
根据场景2，一个接收机可以对关于整个全景图像的流进行解码，使用裁切坐标来划分全景图像并且将经划分的图像递送给其它接收机(场景21)。可替选地，所有接收机可以对关于整个全景图像的流进行解码并且然后仅输出要使用裁切坐标由此显示的部分(场景22)。
在场景21的情况下，当滚动请求由用户输入时，可以在本发明的实施例中应用户的滚动请求而移动裁切坐标值((x,y)>(x',y'))。然后，可以基于裁切坐标值裁切全景图像。主接收机可以将裁切且划分的图像递送给子接收机。子接收机可以显示递送给其的经划分的图像。
在场景22的情况下，当滚动请求由用户输入时，已接收到滚动请求的主接收机可以将滚动信息递送给其它子接收机。所有接收机可以对整个全景图像进行解码。接收机可以应用户的滚动请求而移动裁切坐标值，基于裁切坐标值裁切全景图像并且显示裁切且划分的图像。
图16是图示基于根据本发明的实施例的场景4的全景服务组成的图。
根据本发明的实施例的场景4可以使用SHVC来通过增强层提供全景图像的一部分的增强数据，并且提供关于该增强数据的信令信息以便为ROI提供高清晰度服务。
根据本发明的实施例，可以指定全景图像中的ROI，并且针对该ROI添加到基础层信号的增强数据被编码到增强层信号中并被发送。当全景图像是低分辨率时，增强数据可以被用来为ROI的图像提供高清晰度服务。因此，根据本发明的实施例可以提供包括高清晰度ROI的全景服务。
图中所图示的ROI的残差数据可以是指增强数据并且包括ROI的宽度、高度和起始点坐标(x,y)。
图17是图示根据本发明的实施例的panorama_composition_info的组成的图。
可以在补充增强信息(SEI)消息中发送根据本发明的实施例的Panorama_composition_info。panorama_composition_info可以被称为panorama_composition_information。
根据本发明的实施例的panorama_composition_info可以包括panorama_service_type字段、panorama_composition_info_ver字段、panorama_width_div32字段、panorama_height_div32字段、panorama_profile字段、panorama_level字段、panorama_tier字段、panorama_stream_num字段、panorama_view_num字段、panorama_view_priority字段、included_stream_id字段、panorama_composition_metadata()字段、panorama_filtering_metadata()字段、cropping_region_num字段、extraction_info_metadata()字段、ROI_num字段、ROI_codec_type字段和/或ROI_info_metadata()字段。
panorama_service_type字段可以指示与相关节目相对应的全景服务。将稍后给出其详细描述。
panorama_composition_info_ver字段可以指示panorama_composition_info的版本号。根据本发明的实施例，当panorama_composition_info的数据的一部分被改变时，版本号可以增加“1”以指示更新的版本。
panorama_width_div32字段可以指示用于发信号通知原始全景图像的分辨率的宽度。实际的宽度值可以是通过将panorama_width_div32字段乘以32所获得的值。panorama_composition_info可以包括该图中未图示的指示长宽比信息的panorama_aspect_ratio字段。
panorama_height_div32字段可以指示用于发信号通知原始全景图像的分辨率的高度。实际的高度值可以是通过将panorama_height_div32字段乘以32所获得的值。
panorama_profile字段可以指示关于全景图像的简档信息。
panorama_level字段可以指示关于全景图像的等级信息。
panorama_tier字段可以指示关于全景图像的层级信息。这里，可以不根据编解码器的类型使用层级的概念。当不使用层级时，可以如在主层级的情况下一样执行信令。
panorama_stream_num字段可以指示当panorama_service_type字段为1时与全景图像的划分相对应的流的数目。
panorama_view_num字段可以指示当panorama_service_type字段为1时划分的全景图像被发送到的接收机的数目。
panorama_view_priority字段可以指示当panorama_service_type字段为1时划分的图像的优先级。例如，当提供了仅一个接收机时，可以输出最高优先级的视图(图像)。
included_stream_id字段可以指示当panorama_service_type字段为1时划分的全景图像的ID。这个字段可以标识通过接收机显示的图像。根据本发明的实施例，可以根据划分的流的数目来分配掩码比特。例如，当panorama_view_num字段是10时，即，当全景图像被划分成10个流时，可以将10个比特分配给included_stream_id字段。
将稍后详细地描述panorama_composition_metadata()字段。
将稍后详细地描述panorama_filtering_metadata()字段。
cropping_region_num字段可以指示当panorama_service_type为2时用于划分全景图像的裁切坐标值的数目。panorama_composition_info可以包括可以指示相关流是否是被配置为将全景图像裁切成多个区域的流的cropping_flag字段。
将稍后详细地描述extraction_info_metadata()字段。
ROI_num字段可以指示当panorama_service_type为4时感兴趣区域的数目。
ROI_codec_type字段可以指示使用的编解码器的类型。根据本发明的实施例，可以使用与可缩放编解码器相对应的S(H)SV以便为高清晰度ROI服务的提供而提供高动态范围服务或色域相关服务。当在现有服务为60p的同时提供120p的时间可缩放***时，可以使用HEVE(AVC)编解码器来提供服务。
将稍后详细地描述ROI_info_metadata()字段。
图18是图示根据本发明的实施例的panorama_service_type的组成的图。
参考图，当这个类型为001时，panorama_service_type可以指示根据本发明的实施例的场景1的服务的提供。场景1可以是指将全景图像划分成与现有接收机兼容的形式的服务。当这个字段为010时，panorama_service_type可以指示场景2的服务的提供。场景2可以是指包括整个全景图像和提取信息的服务。当这个字段为011时，panorama_service_type可以指示根据本发明的实施例的场景4的服务的提供。场景4可以是指用于关于ROI提供高清晰度图像的服务。
图19是图示根据本发明的实施例的panorama_composition_metadata()的组成的图。
根据本发明的实施例的panorama_composition_metadata()可以包括sub_video_profile字段、sub_video_level字段、sub_video_tier字段、sub_video_aspect_ratio字段、sub_video_width_div8字段、sub_video_height_div8字段、sub_video_stream_id字段和/或sub_video_afd_bar()字段。
sub_video_profile字段可以指示划分的视频流的简档信息。如果经划分的视频流的简档信息与全景图像的流相同，则发信号通知视频流的简档信息与全景图像的流相同可以代替视频流的简档信息的附加信令。
sub_video_level字段可以指示划分的视频流的等级信息。如果经划分的视频流的等级信息与全景图像的流相同，则发信号通知视频流的等级信息与全景图像的流相同可以代替视频流的等级信息的附加信令。
sub_video_tier字段可以指示划分的视频流的层级信息。如果经划分的视频流的层级信息与全景图像的流相同，则发信号通知视频流的层级信息与全景图像的流相同可以代替视频流的层级信息的附加信令。
sub_video_aspect_ratio字段、sub_video_width_div8字段以及sub_video_height_div8字段可以分别指示作为划分的视频流的分辨率信息的长宽比、宽度以及高度信息。根据本发明的实施例，可以不将sub_video_aspect_ratio字段包括在panorama_composition_metadata()中，因为可以通过分辨率信息来推断长宽比信息。
sub_video_stream_id字段可以标识划分的视频流。如关于图像划分方法上面所描述的，这个字段可以指示二维或一维坐标值。当字段被指配了二维坐标值时，可以将所指配的二维坐标值映射为一维坐标值。当字段被指配了二维坐标值时，本发明的实施例可以利用sub_video_stream_id_x和sub_video_stream_id_y来标识划分的视频流并且发信号通知该划分的视频流。根据本发明的实施例，panorama_composition_metadata()可以包括sub_video_view_direction字段。可以与sub_video_stream_id字段一起发信号通知sub_video_view_direction字段。可以标识来自通过划分全景图像所获得的图像当中的左部图像、中心图像和右部图像，并且可以通过包括在sub_video_view_direction字段中的方向信息来发信号通知方向及其次序。
将稍后详细地描述sub_video_afd_bar()字段。
图20是图示根据本发明的实施例的sub_video_afd_bar()的组成的图。
根据本发明的实施例的sub_video_afd_bar()可以包括sub_video_afd_start_x_div4字段、sub_video_afd_start_y_div4字段、sub_video_afd_width_div4字段和/或sub_video_afd_height_div4字段。
sub_video_afd_start_x_div4字段和sub_video_afd_start_y_div4字段可以指示与sub_video_stream_id相对应的有效格式的起始坐标值(x,y)。
sub_video_afd_width_div4字段和sub_video_afd_height_div4字段可以分别指示在由sub_video_afd_start_x_div4字段和sub_video_afd_start_y_div4字段所指示的坐标值处开始的有效格式的宽度和高度。可以通过将由所对应的字段指示的值乘以4来获得实际的宽度和高度。
图21是图示根据本发明的实施例的显示来自构成全景图像的部分图像当中的具有高panorama_view_priority的图像的方法的图。
根据本发明的实施例，要通过接收机使用包括在panorama_view_priority字段中的信息以及包括在included_stream_id字段中的信息来显示图像。根据本发明的实施例，可以使用包括在sub_video_aft_bar()字段中的信息来确定要显示的图像的一部分。
图22是图示根据本发明的实施例的panorama_filtering_metadata()的组成的图。
根据本发明的实施例，可以在划分的全景流被拼合时添加滤波处理。根据本发明的实施例的panorama_filtering_metadata()可以包括滤波处理所必需的信息。根据本发明的实施例，当全景图像被划分、编码并且然后解码时，在图像的边界处存储块伪影并且因此需要应用滤波。
根据本发明的实施例的panorama_filtering_metadata()可以包括panorama_filtering_num字段、panorama_filtering_coordinate_x_div4字段、panorama_filtering_coordinate_y_div4字段、panorama_filtering_width_div4字段、panorama_filtering_height_div4字段和/或smoothing_filter_coeff()字段。
panorama_filtering_num字段可以指示是否应用滤波和/或滤波处理的数目。
panorama_filtering_coordinate_x_div4字段和panorama_filtering_coordinate_y_div4字段可以指示滤波被应用到的部分的第一像素坐标。可以通过将由panorama_filtering_coordinate_x_div4和panorama_filtering_coordinate_y_div4字段所指示的值乘以4来获得实际的坐标。这里，实际的坐标可以基于已恢复的全景图像。
panorama_filtering_width_div4字段和panorama_filtering_height_div4字段可以指示需要应用滤波的区域的大小(宽度和高度)。可以通过将这些字段的值乘以4来获得实际的大小。
smoothing_filter_coeff()字段可以指示每个内容项最适合的平滑滤波器系数。
图23是图示根据本发明的实施例的extraction_info_metadata()的组成的图。
根据本发明的实施例的extraction_info_metadata()可以包括sub_video_width_div8字段、sub_video_height_div8字段、sub_video_aspect_ratio字段、sub_video_view_id字段、sub_video_priority字段、sub_video_cropping_start_x_div8字段、sub_video_cropping_start_y_div8字段和/或sub_video_afd_bar()字段。
sub_video_width_div8字段、sub_video_height_div8字段以及sub_video_aspect_ratio字段可以指示与要分离或者裁切的子视频的分辨率信息相对应的宽度、高度以及长宽比信息。
sub_video_view_id字段可以指示用于标识裁切的图像的ID。
sub_video_priority字段可以指示要裁切的图像的优先级。
sub_video_cropping_start_x_div8字段和sub_video_cropping_start_y_div8字段可以指示用于使子视频与全景图像分离的坐标值的起始点(x,y)。可以通过将每个字段的值乘以8来获得实际的坐标。这里，extraction_info_metadata()可以包括指示坐标值的结束点(x,y)的字段。
sub_video_afd_bar()字段与包括在已在上面描述的前述panorama_composition_metadata()中的sub_video_afd_bar()字段相同。
图24是图示基于根据本发明的实施例的场景2的视频流的组成的图。
在为全景图像形成一个流的同时，可以通过根据本发明的实施例将固定ID指配给要裁切的每个区域来划分图像。在这种情况下，本发明的实施例可以在没有关于用于裁切的坐标值的信息的情况下使用sub_video_stream_id来划分并且/或者使全景图像分离。因此，可以减少比特的数目。根据本发明的实施例，与使用用于裁切的坐标值来划分全景图像的方法相比，可以减少比特的数目。
图25是图示根据本发明的实施例的ROI_info_metadata()的组成的图。
根据本发明的实施例，可以通过ROI_info_metadata()来发信号通知关于ROI的附加信息。因为在默认情况下提供关于全景图像的基本信息，所以本发明的实施例可以在解码的基础层流中附加地递送关于ROI的附加信息。这里，ROI可以被称为感兴趣区域。附加信息可以被称为增强数据和/或残差数据。
根据本发明的实施例的ROI_info_metadata()可以包括ROI_video_profile字段、ROI_video_level字段、ROI_video_tier字段、ROI_video_priority字段、ROI_video_dynamic_range字段、ROI_video_color_gamut字段、ROI_video_width_div8字段、ROI_video_height_div8字段、ROI_start_x_div8字段、ROI_start_y_div8字段和/或ROI_filtering_info_descriptor()。
ROI_video_profile字段、ROI_video_level字段以及ROI_video_tier字段可以指示关于ROI的简档、等级以及层级信息。
ROI_video_priority字段可以指示由前述ROI_num所指示的感兴趣区域的优先级。根据本发明的实施例，可以根据优先级提供高清晰度范围并且用户可以选择服务。
ROI_video_dynamic_range字段和ROI_video_color_gamut字段可以指示ROI的动态范围和色域。根据本发明的实施例，可以通过较高帧速率、高动态范围、宽色域、色度子采样(4:2:2或4:4:4)、较高分辨率等来提供高清晰度ROI服务。高帧速率、色度子采样(4:2:2或4:4:4)和较高分辨率可以通过等级(较高帧速率和较高分辨率)和简档(色度子采样)来标识并发信号通知。根据本发明的另一实施例的ROI_info_metadata()可以包括发信号通知高帧速率、色度子采样(4:2:2或4:4:4)和/或较高分辨率的字段。可以针对色度子采样以及针对比特深度来标识根据本发明的实施例的简档。
ROI_video_width_div8字段和ROI_video_height_div8字段指示ROI的分辨率。这里，实际的分辨率可以对应于(ROI_video_width_div8field value*8)*(ROI_video_height_div8field value*8)。根据本发明的实施例的ROI_info_metadata()可以包括指示ROI的长宽比的字段。
ROI_start_x_div8字段和ROI_start_y_div8字段可以指示ROI的起始坐标值(x,y)。坐标值(x,y)是整个全景图像的值并且可以通过将每个字段的值乘以8来获得实际的坐标值。本发明的另一实施例可以发信号通知ROI的结束点而不是其起始点。可以通过ROI_start_x_div8、ROI_start_y_div8、ROI_video_width_div8和/或ROI_video_height_div8字段来提供根据本发明的实施例的ROI服务。
ROI_filtering_info_descriptor()可以包括关于当ROI的增强层信号与基础层信号合并时必要的滤波处理的信息。根据本发明的实施例，可以在ROI的增强层信号与基础层信号合并时添加滤波。这里，ROI_filtering_info_descriptor()可以包括在前述panorama_filtering_metadata()中包含的字段。
图26是图示服务描述表(SDT)的组成的图。
根据本发明的实施例的SDT可以包括table_id字段、section_syntax_indicator字段、section_length字段、transport_stream_id字段、version_number字段、current_next_indicator字段、section_number字段、last_section_number字段、original_network_id字段、service_id字段、EIT_schedule_flag字段、EIT_present_following_flag字段、running_status字段、free_CA_mode字段、descriptors_loop_length字段、descriptor()和/或CRC_32字段。
table_id字段标识表的类型。table_id字段可以指示相关表区段构成SDT。
section_syntax_indicator字段指示紧跟该字段之后的表区段的格式。当该字段为0时，表区段指示短格式。当该字段为1时，表区段符合一般长格式。(section_syntax_indicator：section_syntax_indicator是将被设定为“1”的1比特字段。)
section_length字段指示相关表区段的长度。section_length字段可以指示从该字段到表区段的结尾的长度。(section_length：这个是12比特字段，其前两个比特将是“00”。它指定紧接在section_length字段之后开始并且包括CRC的区段的字节的数目。section_length将不超过1,021，使得整个区段具有1,024个字节的最大长度。)
transport_stream_id字段标识表中所描述的传输流(TS)。(transport_stream_id：这个是用作用于标识TS的表的16比特字段，关于其SDT从递送***内的任何其它复用通知。)
version_number字段指示专用表区段的版本号。接收机可以使用该字段以及将稍后描述的current_next_indicator字段来从存储在存储器中的表区段当中检测最新表区段。(version_number：这个5比特字段是sub_table的版本号。当发生在sub_table内承载的信息的改变时version_number将递增1。当它达到值“31”时，它回绕至“0”。当current_next_indicator被设定为“1”时，那么version_number将是当前适用的sub_table的版本号。当current_next_indicator被设定为“0”时，那么version_number将是下一个适用的sub_table的版本号。)
current_next_indicator字段在其值为1时指示当前递送的表是有效的，而在其值为0时指示当前递送的表当前不是有效的。(current_next_indicator：这个1比特指示符在被设定为“1”指示sub_table是当前适用的sub_table。当该比特被设定为“0”时，它指示所发送的sub_table尚不适用并且将是下一个sub_table有效。)
section_number字段指示表中的相关区段的编号。(section_number：这个8比特字段给出区段的编号。sub_table中的第一区段的section_number将是“0x00”。section_number将随着具有相同的table_id、transport_stream_id和original_network_id的每个附加区段而递增1。)
last_section_number字段指示来自构成表的区段当中的最后区段的编号。(last_section_number：这个8比特字段指定此区段为其一部分的sub_table的最后区段(即，具有最高section_number的区段)的编号。)
original_network_id字段可以标识发送表中所描述的服务的始发广播站。(original_network_id：这个16比特字段给出标识始发递送***的network_id的表。)
service_id字段标识存在于传输流内的每个服务。service_id字段可以具有与PMT中的program_number字段相同的功能。(service_id：这个是用作标签以从TS内的任何其它服务中标识这个服务的16比特字段。service_id与所对应的program_map_section中的program_number相同。)
EIT_schedule_flag字段在具有值1时指示EIT调度标志存在于当前TS中而在具有值0时指示EIT调度标志不存在。(EIT_schedule_flag：这个是在被设定为“1”时指示服务的EIT调度信息存在于当前TS中的1比特字段，参见TR 101 211[i.2]以得到关于EIT调度sub_table的发生之间的最大时间间隔的信息。如果该标志被设定为0，则服务的EIT调度信息不应该存在于TS中。)
EIT_present_following_flag字段在具有值1时指示服务的EIT_present_following信息存在于当前TS内而在具有值0时指示EIT_present_following信息不存在。(EIT_present_following_flag：这个是在被设定为“1”时指示服务的EIT_present_following信息存在于当前TS中的1比特字段，参见TR 101 211[i.2]以得到关于EIT目前/接着的sub_table的发生之间的最大时间间隔的信息。如果该标志被设定为0，则服务的EIT目前/接着的信息不应该存在于TS中。)
running_status字段指示服务状态。例如，当running_status字段在具有值1时可以指示相关服务“不在运行”，在具有值2时指示服务“在几秒内开始”，在具有值3时指示服务“正暂停”，在具有值4时指示服务“在运行”并且在具有值5时指示“服务停播”。(running_status：这个是指示如表6中所定义的服务的状态的3比特字段。对于NVOD参考服务running_status的值将被设定为“0”。)
free_CA_mode字段在具有值0时指示服务的组件流尚未被加扰而在具有值1时指示对一个或多个流的访问由CA***控制。CA***是有条件访问***的简称并且是指提供广播内容编码功能以及允许仅订户对编码的广播内容进行解码以观看广播内容以便将广播内容用户限于这些订户的功能的***。(free_CA_mode：这个1比特字段在被设定为0时指示服务的所有组件流未被加扰。在被设定为1时它指示对一个或多个流的访问由CA***控制。)
descriptors_loop_length字段指示紧跟该字段之后的描述符的总长度。(descriptors_loop_length：这个12比特字段给出接着的描述符的字节总长度。)
descriptor()是指描述每个服务的描述符。根据本发明的实施例，可以将前述panorama_composition_info包括在descriptor()中以便提供全景服务和/或节目指南信息。
CRC_32字段指示用来检查包括在相关表区段中的数据是否具有错误的CRC值。(CRC_32：这个是包含在解码器中给出寄存器的零输出的CRC值的32比特字段。)
图27是图示根据本发明的实施例的事件信息表(EIT)的组成的图。
根据本发明的实施例的EIT包括table_id字段、section_syntax_indicator字段、section_length字段、service_id字段、version_number字段、current_next_indicator字段、section_number字段、last_section_number字段、transport_stream_id字段、original_network_id字段、segment_last_section_number字段、last_table_id字段、event_id字段、start_time字段、duration字段、running_status字段、free_CA_mode字段、descriptors_loop_length字段、descriptor()字段和/或CRC_32字段。
table_id字段标识表的类型。table_id可以指示相关表区段构成EIT。
section_syntax_indicator字段指示紧跟该字段之后的表区段的格式。这个字段在具有值0时指示表区段是短格式而在具有值1时指示表区段符合一般长格式。
section_length字段指示相关表区段的长度。section_length字段可以指示从该字段到表区段的结尾的长度。
service_id字段标识存在于传输流内的每个服务。service_id字段可以具有与PMT中的program_number字段相同的功能。
version_number字段指示专用表区段的版本号。接收机可以使用该字段以及将稍后描述的current_next_indicator字段来从存储在存储器中的表区段当中检测最新表区段。
current_next_indicator字段在其值为1时指示当前递送的表是有效的，而在其值为0时指示当前递送的表当前不是有效的。
section_number字段指示表中的相关区段的编号。
last_section_number字段指示来自构成表的区段当中的最后区段的编号。
transport_stream_id字段标识表中所描述的传输流(TS)。
original_network_id字段可以标识发送表中所描述的服务或事件的始发广播站。
segment_last_section_number字段指示当子表存在时相关分段的最后区段编号。当子表未被分段时，由这个字段指示的值可以与由last_section_number字段指示的值相同。
last_table_id字段指示使用的最后表的ID。
event_id字段标识每个事件并且在一个服务内具有唯一值。
start_time字段指示相关事件的起始时间。
duration字段指示相关事件的持续时间。例如，当节目的持续时间是1小时45分钟30秒时，duration字段可以指示0x014530。
running_status字段指示相关事件的状态。
free_CA_mode字段在具有值0时指示服务的组件流尚未被加扰而在具有值1时指示对一个或多个流的访问由CA***控制。CA***是有条件访问***的简称并且是指提供广播内容编码功能以及允许仅订户对编码的广播内容进行解码以观看广播内容以便将广播内容用户限于这些订户的功能的***。
descriptors_loop_length字段指示紧跟该字段之后的描述符的总长度。
descriptor()是指描述每个服务的描述符。根据本发明的实施例，可以将前述panorama_composition_info包括在descriptor()中以便提供全景服务和/或节目指南信息。
CRC_32字段指示用来检查包括在相关表区段中的数据是否包含错误的CRC值。
可以在TS内以表的形式递送或者通过IP流以xml的形式递送根据本发明的实施例的EIT。
图28是图示根据本发明的实施例的包括在EIT中的linkage_descriptor()的组成的图。
根据本发明的实施例，linkage_descriptor()可以被包括在EIT的事件级描述符中。
根据本发明的实施例的linkage_descriptor()可以包括descriptor_length字段、transport_stream_id字段、original_network_id字段、service_id字段、linkage_type字段和/或advanced_event_linkage_info()。
descriptor_tag字段可以指示描述符是linkage_descriptor。
descriptor_length字段可以指示描述符的长度。
transport_stream_id字段可以指示包括信息服务的TS的ID。(这个是标识包含所指示的信息服务的TS的16比特字段。)
original_network_id字段可以指示信息服务的始发递送***的网络id。(这个16比特字段给出标识所指示的信息服务的始发递送***的network_id的表。)
service_id字段可以标识TS内的信息服务。(这个是唯一地标识TS内的信息服务的16比特字段。service_id与所对应的program_map_section中的program_number相同。)如果linkage_type字段具有值0x04，则service_id字段是不相关的，并且将被设定为0x0000。)
linkage_type字段可以指示信息服务的链接的类型。(这个是指定链接的类型的8比特字段。)
将稍后详细地描述advanced_event_linkage_info()。
根据本发明的实施例，当与由用户当前观看的广播服务相对应的全景事件和/或服务被指示时，0x0F可以被用作linkage_type类型。当与由用户当前观看的全景事件和/或服务相对应的HD和/或3D服务被指示时，0x0E可以被用作linkage_type类型。此外，当与由用户当前观看的全景事件和/或服务相对应的UHD服务被指示时，0x0E可以被用作linkage_type类型。
图29是图示根据本发明的实施例的当linkage_type为0x0E时根据link_type的目标服务的类型的图。
根据本发明的实施例，link_type值0可以指示目标服务是SD服务并且link_type值1可以指示目标服务是HD服务。link_type值2可以指示目标服务是帧兼容平面-立体服务,并且link_type值3可以指示目标服务是服务兼容平面立体服务。
参考图，当linkage_type是0x0E时，在指配了两个比特的link_type中没有剩余的比特，并且因此本发明的实施例可以指配0x0F的新linkage_type值并且使用link_type值和linkage_type值的组合来发信号通知目标事件和/或服务是全景事件和/或服务。这里，当目标服务是SD或HD服务时，extended_event_linkage_info()可以在无需修改的情况下被使用。
根据本发明的实施例，当linkage_type是0x0F时，advanced_event_linkage_info()可以包括指示目标事件和/或服务是全景事件和/或服务的link_type字段，将稍后对此进行详细的描述。
图30是图示根据本发明的实施例的advanced_event_linkage_info()的组成的图。
根据本发明的实施例，当linkage_type字段是0x0F时，发信号通知全景事件和/或服务的advanced_event_linkage_info()可以被包括在linkage_descriptor中。
根据本发明的实施例的advanced_event_linkage_info()可以包括num_link_event、link_simulcast、link_delivery_type、detail_info_flag、link_type、link_event_id、link_original_network_id、link_transport_stream_id、link_service_id、delivery_detail_info()和/或time_shift_detail_info()字段。
num_link_event可以指示链接的数目。
link_simulcast字段可以指示相关事件和/或服务是否被与当前事件和/或服务一起同时广播。例如，当link_simulcast字段的值是1时，link_simulcast字段可以指示相关事件和/或服务并且相关事件和/或服务在其之间没有时间差的情况下被同时广播。
link_delivery_type字段可以指示用来广播相关事件和/或服务的路径的类型(地面、卫星、有线电视、IP等)。当通过相同的路径或相同的方案来广播相关事件和/或服务时，可以将“001”指定为link_delivery_type字段。如果不同的传输参数(例如，调制方案相关参数)被用于相同的路径，则可以指定与该路径相对应的信息(例如，“010”与“100”之间的值)，并且可以通过将稍后描述的delivery_detail_info()来发信号通知详细参数信息。这里，link_delivery_type字段可以发信号通知相同事件的相同递送路径，诸如有线电视、IP或地面。
detail_info_flag字段可以指示是否包括关于有关链接事件和/或服务的物理递送参数的信息。
link_type字段指示相关事件或服务的服务类型。例如，detail_info_flag字段的值可以指示接着的UHD视频信息和/或全景服务信息。“001”指示4K UHD、8个比特以及4:2:0,，“010”指示4K UHD、10个比特以及4:2:0，“011”指示4K UHD、10个比特以及4:2:2，“0x10”指示全景，“0x11”指示全景、HDR提供、WCG提供。
link_event_id、link_original_network_id、link_transport_stream_id以及link_service_id字段可以分别指示相关事件和/或服务的event_id、original_network_id、transport_stream_id以及service_id。
delivery_detail_info()指示关于链接事件和/或服务的物理递送参数。例如，可以使用delivery_detail_info()来发信号通知诸如递送的事件数据的调制方案、频率信息以及FEC方案的信息。
time_shift_detail_info()可以在存在时间差时发信号通知关于链接事件和/或服务与当前事件和/或服务之间的时间差的信息。用分钟指示用于广播的时移的字段可以被包括在根据实施例的time_shift_detail_info()中。作为发信号通知时间差的另一示例，可以在相关EIT中参考event_id以及关于用该event_id标识的事件的时间信息。
图31是图示节目映射表(PMT)的组成以及包括在PMT中的panorama_composition_info()的位置的图。
根据本发明的实施例，panorama_composition_info()可以在PMT中被划分成节目级和视频(流)级并且在相应的等级发信号通知。
根据本发明的实施例的PMT包括table_id、section_syntax_indicator、section_length、program_number、version_number、current_next_indicator、section_number、last_section_number、PCR_PID、program_info_length、descriptor()、stream_type、elementary_PID、ES_info_length、descriptor()和/或CRC_32字段。
table_id字段标识表的类型。table_id字段可以指示相关表区段是否构成SDT。
section_syntax_indicator字段指示紧跟该字段之后的表区段的格式。当section_syntax_indicator字段是0时，相关表区段具有短格式。当section_syntax_indicator字段是1时，相关表区段具有一般长格式。
section_length字段指示相关表区段的长度。因为section_length字段指示从该字段到表区段的结尾的长度，所以可以通过将3个字节添加到由section_length字段所指示的值来获得表区段的实际的长度。
program_number字段标识存在于传输流中的每个节目服务或虚拟频道。
version_number字段指示专用表区段的版本号。接收机可以使用该字段以及将稍后描述的current_next_indicator字段来从存储在存储器中的表区段当中检测最新区段。
current_next_indicator字段值1指示当前递送的表是有效的，而current_next_indicator字段值0指示当前递送的表当前不是有效的但是将是有效的。
section_number字段指示表中的相关区段的编号。
last_section_number字段指示来自构成表的区段当中的最后区段的编号。
PCR_PID字段指示与用于节目服务的节目时钟基准(PCR)相对应的分组ID。
program_info_length字段指示描述以下节目信息的描述符的长度。
descriptor()是指描述与相关表区段相对应的节目的描述符。根据本发明的实施例，来自包括在panorama_composition_info中的字段当中的panorama_service_type、panorama_composition_info_ver、panorama_width_div32、panorama_height_div32、panorama_profile、panorama_level和/或panorama_tier字段可以被包括在在PMT的节目级下发信号通知的描述符中。
stream_type字段指示构成由表所描述的节目的每个单位流的类型。
elementary_PID字段指示构成由表所描述的节目的每个单位流的分组ID。根据本发明的实施例，当全景图像被划分成多个图像并且存在包括经划分的图像的多个流时，这个字段可以将不同的elementary_PID值分配给相应的流。
ES_info_length字段指示描述关于接着的单位流的信息ES_info的描述符的长度。
descriptor()是指指示关于构成由表所描述的节目的单位流中的一个的信息的描述符。根据本发明的实施例，来自包括在panorama_composition_info中的字段当中的panorama_stream_num、panorama_view_num、panorama_view_priority、included_stream_id、panorama_composition_metadata()、panorama_filtering_metadata()、cropping_region_num、extraction_info_metadata()、ROI_num、ROI_codec_type和/或ROI_info_metadata()字段可以被包括在在PMT的视频(流)级下发信号通知的描述符中。
CRC_32字段指示被用来检查包括在相关表区段中的数据是否包含错误的CRC值。
可以通过MPEGTS带内递送根据本发明的实施例的PMT或者可以通过IP以xml的形式递送包括PMT的PSI。
图32是图示根据本发明的实施例的地面虚拟频道表(TVCT)的组成的图。
根据本发明的实施例的panorama_composition_info可以被包括在TVCT的频道级描述符中。
根据本发明的实施例的TVCT可以包括table_id、section_syntax_indicator、private_indicator、section_length、transport_stream_id、version_number、current_next_indicator、section_number、last_section_number、protocol_version、num_channels_in_section、short_name、major_channel_number、minor_channel_number、modulation mode、carrier_frequency、channel_TSID、program_number、ETM_location、access_controlled、hidden、hide_guide、service_type、source_id、descriptors_length和/或descriptor()字段。
table_id字段标识表。
section_syntax_indicator字段是被设定为1以指示MPEG2private_section表的长形式的1比特字段。(这个1比特字段将被设定为“1”以总是指示MPEG2private_section表的“长”形式。)
private_indicator字段是设定为1的1比特字段。(这个1比特字段将被设定为‘1’。)
section_length字段指示紧跟这个字段之后的表区段的字节长度。(这个是12比特字段，其前两个比特将是“00”。它指定紧接在section_length字段之后开始并包括CRC的区段的字节的数目。section_length将不超过1021，使得整个区段具有1024个字节的最大长度。)
transport_stream_id字段指示表内的MPEG2传输流(TS)的id。(为了区分单个网络(地面、有线电视或卫星)内的每个传输流和另一传输流，MPEG2确立了16比特(范围从0到65535)transport_stream_identifier(其还被称作TSID)的使用。)
version_number字段是指示表的版本号的5比特字段。(这个5比特字段是PSIP_section的版本号。当发生在PSIP_section内承载的信息的改变时version_number将按模32递增1。当current_next_indicator被设定为‘0’时，那么version_number将是具有相同的table_id、table_id_extension和section_number的下一个适用的PSIP_section的版本号。
current_next_indicator字段是1比特字段并且指示表当前是适用的还是下一次适用。(1比特字段，其在被设定为‘1’时指示所发送的PSIP_section当前是适用的。当current_next_indicator被设定为“1”时，那么version_number将是当前适用的PSIP_section的版本号。当该比特被设定为‘0’时，它指示所发送的PSIP_section尚不是适用的并且将是具有相同的section_number、table_id_extension和table_id的下一个PSIP_section变得有效。)
section_number字段指示区段编号。(这个8比特字段是PSIP_section的版本号。PSIP表中的第一区段的section_number将是0x00。section_number将随着PSIP表中的每个附加区段而递增1。section_number的范围将由table_id和table_id_extension来定义。也就是说，针对每个PSIP表以及table_id_extension字段的值，存在section_number值的全范围的可能性。)
last_section_number字段标识最后区段的编号。(这个8比特字段指定此区段为其一部分的PSIP表的最后区段(即，具有最高section_number的区段)的编号。其范围与section_number字段相同。)
protocol_version字段具有用于允许当前表类型将来承载与当前协议中定义的参数不同的参数的功能。(8比特无符号整数字段，其功能是将来允许这个表类型承载可以与当前协议中定义的那些参数不同地构建的参数。目前，protocol_version的唯一有效值是零。protocol_version的非零值可以由这个标准的将来版本用来指示结构上不同的表。)
num_channels_in_section field指示虚拟频道定义的数目。(ATSC有线电视虚拟频道表CVCT表区段中的num_channels_in_section字段是指示要在表区段跟随的虚拟频道定义的数目的8比特字段。)
short_name字段是指示虚拟频道的短名称的112比特字段。(short_name字段是在ATSC CVCT表区段中给出虚拟频道的short_name的112比特字段。short_name的每个字母被格式化为16比特Unicode字符，其中高位字节被首先发送。所以，TVCT和CVCT条目的short_name是七个Unicode字符，SVCT条目的short_name是八个Unicode字符。如果显示器名称少于许可字符的数目，则0/0x00被附加到结尾直到已达到所分配数目的比特为止。)
major_channel_number字段指示与虚拟频道相关联的主频道的编号。(表示与在“for”循环的这个迭代中定义的虚拟频道相关联的“主”频道编号的10比特数字。每个虚拟频道将与主频道编号和次频道编号相关联。主频道编号与次频道编号一起作为用户对于虚拟频道的参考编号。major_channel_number将在1与99之间。major_channel_number的值将被设定为使得绝不会是在TVCT内重复的major_channel_number/minor_channel_number对)。
minor_channel_number字段指示与虚拟频道相关联的次频道的编号。(在范围0至999中表示“次”或“子”频道编号的10比特数字。这个字段与major_channel_number一起作为两部分频道编号，其中minor_channel_number表示编号的第二或右手部分。当service_type是模拟电视时，minor_channel_number将被设定为0。)
modulation_mode字段指示虚拟频道的传输载体的调制方案。(modulation_mode是在虚拟频道条目中告诉接收机被用来发送单独的频道的调制的8比特字段。)
carrier_frequency字段发送用于虚拟频道传输的载波频率信息。(载波频率是发送由承载虚拟频道的传输所使用的载波频率的32比特字段。)
channel_TSID字段指示承载与虚拟频道相关联的MPEG2节目的TS的MPEG2传输流ID。(channel_TSID是给出承载(或者对于不活动频道，将承载)虚拟频道的频道的transport_stream_id的16比特无符号整数字段。)
program_number字段标识TS内的每个节目服务或虚拟频道。(program_number是唯一地标识存在于传输流中的每个节目服务(或虚拟频道)的16比特无符号整数。)
ETM_location字段指示针对频道、事件或数据事件的扩展文本消息的存在与否。(ETM_location字段表示是否存在针对频道(频道扩展文本表或CETT)、事件(事件扩展文本表)或数据事件(数据扩展文本表)的扩展文本消息。)
access_controlled字段指示与相关虚拟频道相关联的事件是否是可控的。(当access_controlled被设定为‘1’时，意味着可以访问控制与此虚拟频道相关联的事件。当被设定为‘0’时，对事件的访问不受控制。)
hidden字段指示相关频道是否可通过虚拟频道编号的直接条目(或字段、属性或实体)访问。(当hidden被设定为‘1’时，意味着不能够通过虚拟频道编号的直接条目来访问频道。当被设定为‘0’时，能够通过直接条目访问虚拟频道。)
hide_guide字段指示相关频道是否可通过虚拟频道编号的直接条目(或字段、属性或实体)访问。(当hide_guide被设定为‘1’时，意味着不能够通过虚拟频道编号的直接条目来访问频道。当被设定为‘0’时，能够通过直接条目访问虚拟频道。)
service_type字段标识虚拟频道中设定的服务的类型。(service_type是标识虚拟频道中设定的服务的类型的6比特枚举字段。)根据本发明的实施例的全景服务的service_type可以被指定为参数化服务(0x07)、扩展参数化服务(0x09)和/或新DTV服务全景服务(0x10)。前述服务名称和值是示例性的并且可以被设定为其它名称或值。
source_id字段是16比特无符号整数并且指示与虚拟频道相关联的广播节目源。(标识与虚拟频道相关联的广播节目源的16比特无符号整数数字。在这个上下文中，源是视频、文本、数据或音频广播节目的一个特定源。源ID值零被保留。范围0x0001至0x0FFF中的源ID值在承载VCT的传输流内将是唯一的，然而值0x1000至0xFFFF在区域级将是唯一的。source_id 0x1000及以上的值将由通过ATSC指定的注册机构来发布和管理。)
descriptors_length字段发信号通知接着的描述符字段的字节长度。(descriptors_length是发信号通知接着的描述字段的字节长度。如果描述符不存在，则零将是适当的。)
descriptor()字段是位于表内的描述符循环。描述符循环可以包括附加描述符。可以将根据本发明的实施例的panorama_composition_info包括在descriptor()中。
图33是图示根据本发明的实施例的有线电视虚拟频道表(CVCT)的组成的图。
根据本发明的实施例的panorama_composition_info可以被包括在CVCT的频道级描述符中。
CVCT可以包括table_id、section_syntax_indicator、private_indicator、section_length、transport_stream_id、version_number、current_next_indicator、section_number、last_section_number、protocol_version、num_channels_in_section、short_name、major_channel_number、minor_channel_number、modulation mode、carrier_frequency、channel_TSID、program_number、ETM_location、access_controlled、hidden、path_select、out_of_band、hide_guide、service_type、source_id、descriptors_length和/或descriptor()字段。
table_id字段标识表。
section_syntax_indicator是被设定为1以指示MPEG2private_section表的长形式的1比特字段。(这个1比特字段将被设定为“1”以总是指示MPEG2private_section表的“长”形式。)
private_indicator字段是被设定为1的1比特字段。(这个1比特字段将被设定为“1”。)
section_length字段指示接着的表区段的字节长度。(这个是12比特字段，其前两个比特将是“00”。它指定紧接在section_length字段之后开始并且包括CRC的区段的字节的数目。section_length将不超过1021，使得整个区段具有1024个字节的最大长度。)
transport_stream_id字段指示表内的MPEG2TS的id。(为了区分单个网络(地面、有线电视或卫星)内的每个传输流和另一传输流，MPEG2确立了6比特(范围从0到65535)transport_stream_identifier(其还被称作TSID)的使用。)
version_number字段是指示表的版本号的5比特字段。(这个5比特字段是PSIP_section的版本号。当发生在PSIP_section内承载的信息的改变时version_number将按模32递增1。当current_next_indicator被设定为“0”时，那么version_number将是具有相同的table_id、table_id_extension和section_number的下一个适用的PSIP_section的版本号。)
current_next_indicator字段是1比特字段并且指示表当前是适用的还是下一次适用。(1比特字段，其在被设定为‘1’时指示所发送的PSIP_section当前是适用的。当current_next_indicator被设定为“1”时，那么version_number将是当前适用的PSIP_section的版本号。当该比特被设定为“0”时，它指示所发送的PSIP_section尚不是适用的并且将是具有相同的section_number、table_id_extension和table_id的下一个PSIP_section变得有效。)
section_number字段指示区段的编号。(这个8比特字段给出PSIP_section的编号。PSIP表中的第一区段的section_number将是0x00。section_number将随着PSIP表中的每个附加区段而递增1。section_number的范围将由table_id和table_id_extension来定义。也就是说，针对每个PSIP表以及table_id_extension字段的值，存在section_number值的全范围的可能性。)
last_section_number字段标识最后区段的编号。(这个8比特字段指定此区段为其一部分的PSIP表的最后区段(即，具有最高section_number的区段)的编号。其范围与针对section_number字段相同。)
protocol_version字段具有用于允许当前表类型将来承载与当前协议中定义的参数不同的参数的功能。(8比特无符号整数字段，其功能是将来允许这个表类型承载可以与当前协议中定义的那些参数不同地构建的参数。目前，protocol_version的唯一有效值是零。protocol_version的非零值可以由这个标准的将来版本用来指示结构上不同的表。)
num_channels_in_section字段指示虚拟频道定义的数目。(ATSC有线电视虚拟频道表CVCT表区段中的num_channels_in_section字段是指示在表区段中接着的虚拟频道定义的数目的8比特字段。)
short_name字段是指示虚拟频道的短名称的112比特字段。(short_name字段是在ATSC CVCT表中给出虚拟频道的short_name的112比特字段。short_name的每个字母被格式化为16比特Unicode字符，其中高位字节被首先发送。所以，TVCT和CVCT条目的short_name是七个Unicode字符，SVCT条目的short_name是八个Unicode字符。如果显示器名称少于许可字符的数目，则0/0x00被附加到结尾直到已达到所分配数目的比特为止。)
major_channel_number字段指示与虚拟频道相关联的主频道的编号。(表示与在“for”循环的这个迭代中定义的虚拟频道相关联的“主”频道编号的10比特数字。每个虚拟频道将与主频道编号和次频道编号相关联。主频道编号与次频道编号一起作为用户对于虚拟频道的参考号码。major_channel_number将在1与99之间。major_channel_number的值将被设定为使得绝不是在TVCT内重复的major_channel_number/minor_channel_number对)。
major_channel_number字段指示与虚拟频道相关联的主频道的编号。(在范围0至999中表示“次”或“子”频道编号的10比特数字。这个字段与major_channel_number一起作为两部分频道编号，其中minor_channel_number表示号码的第二或右手部分。当service_type是模拟电视时，minor_channel_number将被设定为0。)
modulation_mode字段指示虚拟频道的传输载体的调制方案。(modulation_mode是在虚拟频道条目中告诉接收机被用来发送单独的频道的调制的8比特字段。)
carrier_frequency字段发送由承载虚拟频道的传输所使用的载波频率信息。(载波频率是发送由承载虚拟频道的传输所使用的载波频率的32比特字段。)
channel_TSID字段指示承载与虚拟频道相关联的MPEG2节目的TS的MPEG2传输流ID。(channel_TSID是给出承载(或者对于不活动频道，将承载)虚拟频道的频道的transport_stream_id的16比特无符号整数字段。)
program_number字段标识TS内的每个节目服务或虚拟频道。(program_number是唯一地标识存在于传输流中的每个节目服务(或虚拟频道)的16比特无符号整数。)
ETM_location字段指示针对频道、事件或数据事件的扩展文本消息的存在与否。(ETM_location字段表示是否存在针对频道(频道扩展文本表或CETT)、事件(事件扩展文本表)或数据事件(数据扩展文本表)的扩展文本消息。)
access_controlled字段指示与相关虚拟频道相关联的事件是否是可控的。(当access_controlled被设定为‘1’时，意味着可以访问控制与此虚拟频道相关联的事件。当被设定为‘0’时，对事件的访问不受控制。)
hidden字段指示相关频道是否可通过虚拟频道编号的直接条目(或字段、属性或实体)访问。(当hidden被设定为“1”时，意味着不能够通过虚拟频道编号的直接条目来访问频道。当被设定为“0”时，能够通过直接条目访问虚拟频道。)
path_select字段是CVCT内的字段，其使虚拟频道与活动频道的传输路径相关联。(path_select是在有线电视虚拟频道表(CVCT)条目中使虚拟频道与活动频道或者当频道将活动时的传输路径相关联的1比特字段。)
out_of_band字段指示虚拟频道是否被承载在带外(OOB)物理传输信道上。(out_of_band是在有线电视虚拟频道表条目中的当被设定为“1”时被承载在带外物理传输频道上的1比特布尔字段。当清零或‘0’时，在调谐的复用内承载虚拟频道。当频道是不活动的时，out_of_band反映将在频道再次活动时有效的频道。)
hide_guide字段指示相关频道是否可通过虚拟频道编号的直接条目(或字段、属性或实体)访问。(当hide_guide被设定为“1”时，意味着不能够通过虚拟频道编号的直接条目来访问频道。当被设定为“0”时，能够通过直接条目访问虚拟频道。)
service_type字段标识虚拟频道中设定的服务的类型。(service_type是标识虚拟频道中设定的服务的类型的6比特枚举字段。)根据本发明的实施例的全景服务的service_type可以被指定为参数化服务(0x07)、扩展参数化服务(0x09)和/或新DTV服务全景服务(0x10)。前述服务名称和值是示例性的并且可以被设定为其它名称或值。
source_id字段是16比特无符号整数并且指示与虚拟频道相关联的广播节目源。(标识与虚拟频道相关联的广播节目的16比特无符号整数数字。在这个上下文中，源是视频、文本、数据或音频广播节目的一个特定源。源ID值零被保留。范围0x0001至0x0FFF中的源ID值在承载VCT的传输流内将是唯一的，然而值0x1000至0xFFFF在区域级将是唯一的。source_id 0x1000及以上的值将由通过ATSC指定的注册机构来发布和管理。)
descriptors_length字段发信号通知接着的描述符字段的字节长度。(descriptors_length是发信号通知接着的描述字段的字节长度。如果描述符不存在，则零将是适当的。)
descriptor()字段是位于表内的描述符循环。描述符循环可以包括附加描述符。可以将根据本发明的实施例的panorama_composition_info包括在descriptor()中。
图34是图示根据本发明的实施例的用于全景服务的service_type的组成的图。
根据本发明的实施例的全景服务的service_type可以被指定为参数化服务(0x07)、扩展参数化服务(0x09)和/或新DTV服务全景服务(0x10)。前述服务名称和值是示例性的并且可以被设定为其它名称和值。
当通过参数化服务(0x07)来发信号通知根据本发明的实施例的全景服务时，可以通过组件列表描述符和/或panorama_composition_info()来描述关于全景服务的信息。
当通过扩展参数化服务(0x09)来发信号通知根据本发明的实施例的全景服务时，可以通过组件列表描述符、参数化服务描述符和/或panorama_composition_info()来描述关于全景服务的信息。
当通过新DTV服务全景服务(0x10)来发信号通知根据本发明的实施例的全景服务时，可以通过panorama_composition_info()来描述关于全景服务的信息。
图35是图示根据本发明的实施例的component_list_descriptor()的组成的图。
根据本发明的实施例，可以使用component_list_descriptor()来发信号通知关于全景图像的流，并且根据本发明的实施例的component_list_descriptor()可以位于VCT(包括TVCT和CVCT)的频道级。根据本发明的实施例，关于包括在服务中的每个图像的每个基本流可以包括stream_info_details()，并且stream_info_details()可以发信号通知关于关于全景图像的流的信息。在根据本发明的实施例的全景服务中，即便当stream_type是MPEG2、AVC、HEVC等时，也可以使用根据本发明的实施例的stream_info_details()来发信号通知关于每个图像的信息。
根据本发明的实施例的component_list_descriptor()可以包括descriptor_tag、descriptor_length、alternate、component_count、stream_type、format_identifier、length_of_details和/或stream_info_details()字段。
descriptor_tag字段可以指示用于标识component_list_descriptor()的id。
descriptor_length字段可以指示这个描述符的长度。
alternate字段可以指示component_list_descriptor的相关实例是否是主信息。(该标志，在被设定为“1”时，指示component_list_descriptor()的这个实例是与虚拟频道相关联的流的第二“供替换的”描述。当该标志被设定为“0”时，描述符的实例中的流类型的集合是“主”或“优选”集合。如果仅一个component_list_descriptor()出现在描述符循环中，则alternate标志的值将被设定为“0”。)
component_count字段可以指示包括在相关频道(服务)中的组件(流)的数目。(这个7比特无符号整数将指定在接着的“for”循环中指定的组件的数目。该值将在1至36的范围内。)
stream_type字段可以指示相关组件的流类型。(这个8比特无符号字段将指示与“for”循环的这个迭代中所描述的组件相关联的stream_type。在范围0xC4至0xFF中的流类型标识专有地定义(不由ATSC标准描述)的流类型。)
format_identifier字段可以标识提供stream_type值的实体。(这个32比特无符号整数将对应于ISO/IEC 13818 1[7]2.6.9节中定义的MPEG2Registration Descriptor中的format_identifier并且将标识提供stream_type值的实体。除非适用的ATSC标准指定了不同的值，否则format_identifier的值将是0x4741 3934(ASCII的“GA94”)，在此情况下值将被使用。在ISO/IEC 13818-1[7]中定义并且其使用未由ATSC标准标准化的stream_type值将对于format_identifier使用值0x00000000。)
length_of_details字段可以指示接着的字段“stream_info_details()”的长度。(这个8比特无符号整数将指定接着的stream_info_details()字段的定义长度的字节长度。length_of_details的值将被设定为已针对所关联的stream_type值而定义的stream_info_details()字段的长度。该值将在内含0至246的范围内。)
stream_info_details()字段可以指示关于相关组件的详细信息。(这个字段将进一步提供和由先前stream_type字段中的值所标识的组件有关的信息。包含在stream_info_details()中的比特的含义和结构在被用在ATSC传输流中时将像在定义stream_type字段中的值的含义的标准中所指定的那样。如果ATSC标准为stream_type的给定值定义了stream_info_details()结构，则ATSC定义将优先于源自于任何其它标准开发组织的任何定义)。将在下面详细地描述stream_info_details()字段。
图36是图示当根据本发明的实施例的stream_type指示基础流时stream_info_details()的组成的图。
根据本发明的实施例，全景图像可以被划分成多个基本流(ES)并发送。该图图示来自ES当中的基础流的stream_info_details()的组成。
根据本发明的实施例的stream_info_details()可以包括panorama_base_view_profile、panorama_base_view_tier和/或panorama_base_view_level字段。
panorama_base_view_profile、panorama_base_view_tier以及panorama_base_view_level字段可以分别指示与基础流相对应的图像的简档、层级以及等级信息。
图37是图示当根据本发明的实施例的stream_type指示除基础流以外的流时stream_info_details()的组成的图。
根据本发明的实施例，全景图像可以被划分成多个ES并发送。该图图示来自ES当中的除基础流以外的流的stream_info_details()的组成。
根据本发明的实施例的stream_info_details()可以包括panorama_view_profile、panorama_view_tier和/或panorama_view_level字段。
panorama_view_profile、panorama_view_tier以及panorama_view_level字段可以分别指示与除基础流以外的流相对应的图像的简档、层级以及等级信息。
根据本发明的另一实施例，全景图像可以作为一个ES被发送。在这种情况下，前述component_list_descriptor()的component_count字段可以指示1，并且因此可以使用仅一个stream_info_details()。在这种情况下，可以通过图中所图示的stream_info_details()来发信号通知关于全景图像的ES。这里，由panorama_view_profile、panorama_view_tier和/或panorama_view_level字段所指示的信息可以与全景图像的简档、层级和/或等级信息相同。
图38是图示当主接收机在根据本发明的实施例的场景1中对所有流进行解码并且将经解码的流递送给子接收机时的接收机操作的图。
根据本发明的实施例的场景1可以向接收端发送构成全景图像的多个流。
根据本发明的实施例的接收机可以包括解复用器38010、第一解码器38020、第二解码器38030、信令信息处理器(区段数据处理器)38040、边界滤波单元38050和/或裁切单元38060。
解复用器可以接收构成全景图像和/或信令信息的流，提取流和/或信令信息并且将所提取的流和/或信令信息发送到解码器和/或信令信息处理器38040。
解码器(第一解码器和/或第二解码器)可以对从解复用器递送的流进行解码以生成划分的图像(视频1和/或视频2)。这里，解码器可以使用panorama_composition_information和/或由信令信息处理器处理的信令信息来对流进行解码。
信令信息处理器可以处理由解复用器提取的信令信息并且将经处理的信令信息递送给解码器。这里，信令信息可以包括前述PMT、VCT、EIT和/或SDT。
边界滤波单元可以使用panorama_filtering_metadata来从经划分的图像恢复全景图像。
裁切单元可以使用extraction_info_metadata来裁切由边界滤波单元恢复的全景图像，并且通过UPnP、HDMI和/或IP将经裁切的图像递送给另一接收机。
根据本发明的实施例，对构成全景图像的流进行接收和解码的接收机可以对应于主接收机，并且从主接收机接收裁切的图像的接收机可以对应于子接收机。
将给出根据本发明的实施例的接收机的详细操作的描述。
可以通过包括在视频元素流中的SEI RBSP(原始字节序列有效载荷)来接收根据本发明的实施例的panorama_composition_info()。这里，可以通过EIT、SDT或PMT来提供前述信息。
根据本发明的实施例的接收机可以通过解析HEVC NAL单元来读取具有与SEI数据相对应的nal_unit_type值以及52的payloadType值的panorama_composition_info SEI消息。此外，接收机可以解析panorama_service_type和关于全景图像的信息，即，panorama_resolution、panorama_profile、panorama_level以及panorama_tier信息，并且解析关于根据panorama_service_type的场景的附加信息。
在根据本发明的实施例的场景1中，发射机可以将全景图像划分成由panorama_stream_num所指示的数目的流，使得这些流包括与现有接收机兼容的图像并且对这些流进行编码。根据本发明的实施例的接收机可以针对每个基本流解析panorama_composition_metadata()。本发明的实施例可以允许16:9DTV接收机对在sub_video_base_view中作为基础视图发信号通知的图像进行解码和输出。当全景图像被划分并且使用多个DTV接收机来输出时，本发明的实施例可以允许每个DTV接收机基于sub_video_stream_id来对图像进行选择、解码和输出。根据本发明的实施例，可以使用由sub_video_priority字段指示的优先级来输出图像。
在根据本发明的实施例的场景2中，接收机可以使用包括在extraction_info_metadata()中的用于裁切的坐标值(sub_video_cropping_start_x、sub_video_cropping_start_y)来对全景图像进行解码并且使图像分离。如果16:9DTV接收机裁切全景图像的一部分并且在无需重新调整全景图像的大小的情况下输出经裁切的部分，则本发明的实施例可以通过sub_video_base_view字段来信号来使基础视图像分离。如果使用多个DTV接收机来输出全景图像，则根据本发明的实施例的接收机可以对图像进行解码，根据sub_video_stream_id对图像进行裁切并且输出经裁切的图像。
在根据本发明的实施例的场景4中，发射机可以将关于ROI的附加流作为增强层信号来发送。接收机可以通过解析ROI_info_metadata()来获取与ROI的分辨率和/或坐标信息相对应的宽度/高度信息。接收机可以使用所获取的信息来将增强层信号与全景图像和/或全景图像的一部分的基础层信号组合以对图像进行解码。根据本发明的实施例，高清晰度ROI可以被递送给第二装置或者显示在DTV接收机的屏幕或其一部分上。
在根据本发明的实施例的场景5中，当观看与全景图像分离的16:9事件时，根据本发明的实施例的接收机可以在链接描述符存在时解析关于事件的链接描述符。接收机可以在链接描述符中的linkage_type字段为0x0F时读取advanced_event_linkage_info()。根据本发明的实施例的接收机可以使用advanced_event_linkage_info()来获取关于链接的全景广播事件的详细信息。接收机可以向用户通知与正被观看的16:9事件相对应的全景广播服务可以使用所获取的图像来提供。当用户想要接收全景广播服务时，接收机可以使用从advanced_event_linkage_info()中获取的信息来接收全景广播服务。
图39是图示当每个接收机在根据本发明的实施例的场景1中对分离且分配给其的流进行解码时的接收机操作的图。
根据本发明的实施例的场景1可以向接收端发送构成全景图像的多个流。
根据本发明的实施例的接收机可以包括解复用器39010、解码器39020和/或信令信息处理器39030。
解复用器39010可以接收构成全景图像的流中的一个和/或信令信息，提取所接收到的流和/或信令信息并且将所提取的流和/或信令信息发送到解码器39020和/或信令信息处理器39030。
解码器可以对从解复用器发送的流进行解码以生成构成全景图像的图像中的一个。这里，解码器可以使用panorama_composition_information和/或由信令信息处理器处理的信令信息来对流进行解码。
信令信息处理器可以处理由解复用器提取的信令信息并且将经处理的信令信息递送给解码器。这里，信令信息可以包括前述PMT、VCT、EIT和/或SDT。
根据本发明的实施例，已接收到划分的流的每个接收机可以对流进行解码和显示。这里，所有接收机可以变成主接收机和/或子接收机。
图40是图示基于根据本发明的实施例的场景2的接收机操作的图。
根据本发明的实施例的场景2可以将全景图像编码成一个流并且将该流递送给接收端。
根据本发明的实施例的接收机可以包括解复用器40010、解码器40020和/或信令信息处理器(区段数据处理器)40030。
解复用器可以接收构成全景图像的流和/或信令信息，提取所接收到的流和/或信令信息并且将所提取的流和/或信令信息发送到解码器40020和/或信令信息处理器40030。这里，解复用器可以接收用于裁切全景图像的extraction_info_metadata。
解码器可以对从解复用器递送的流进行解码以生成全景图像。这里，解码器可以使用由信令信息处理器处理的信令信息来对流进行解码。解码器可以使用所接收到的extraction_info_metadata来裁切全景图像。
信令信息处理器可以处理由解复用器提取的信令信息并且将处理的信令信息递送给解码器。这里，信令信息可以包括前述PMT、VCT、EIT和/或SDT。
根据本发明的实施例，可以通过UPnP、HDMI和/或IP将裁切的图像(裁切的视频1和裁切的视频2)递送给主接收机和/或子接收机。
根据本发明的实施例，接收构成全景图像的流的接收机可以对应于主接收机，并且其它接收机可以对应于子接收机。
图41是图示当主接收机基于根据本发明的实施例的场景4对所有流进行解码并且将经解码的流递送给子接收机时的接收机操作的图。
为了提供用于ROI的高清晰度服务，根据本发明的实施例的场景4可以使用SHVC通过增强层来提供全景图像的一部分的增强数据，并且提供关于其的信令信息。
根据本发明的实施例的接收机可以包括解复用器41010、第一解码器(解码器1)41020、第二解码器(可缩放视频解码器2)41030、信令信息处理器(区段数据处理器)41040和/或ROI滤波单元41050。
解复用器可以接收构成全景图像的所有流和/或信令信息，提取流和/或信令信息并且将所提取的流和/或信令信息递送给解码器和/或信令信息处理器41040。
第一解码器可以对从解复用器递送的基础层流进行解码以生成基础视频图像(基础视频)。这里，第一解码器可以使用ROI_info_metadata和/或由信令信息处理器处理的信令信息来对基础层流进行解码。
第二解码器可以对从解复用器递送的增加层流进行解码以生成高清晰度视频图像。这里，第二解码器可以从第一解码器接收基础视频图像信号，并且使用接收到的基础视频图像信号和/或由信令信息处理器处理的信令信息来对增强层流进行解码。
信令信息处理器可以处理由解复用器提取的信令信息，并且将处理的信令信息递送给解码器。这里，信令信息可以包括前述PMT、VCT、EIT和/或SDT。
ROI滤波单元可以对ROI进行滤波以将ROI的增强层信号与基础层信号合并。这里，ROI滤波单元可以使用ROI_filtering_info_descriptor来对ROI进行滤波。
根据本发明的实施例，可以通过UPnP、HDMI和/或IP将所生成的高清晰度视频图像递送给主接收机和/或子接收机。主接收机可以通过PIP提供高清晰度服务。
根据本发明的实施例，对全景图像的基础层流和/或增强层流进行接收和解码的接收机可以对应于主接收机，并且从主接收机接收高清晰度视频图像的接收机可以对应于子接收机。
根据本发明的实施例，虽然主接收机可以输出基础层信号并且子接收机可以提供高清晰度服务，但是主接收机可以提供高清晰度服务并且子接收机可以输出基础层信号。
与主接收机对构成全景图像的所有流进行解码的本发明的实施例区分开，根据本发明的另一实施例，子接收机可以对基础层信号进行接收和解码，并且使用其可缩放视频解码器来对ROI的图像进行解码和/或显示。
根据本发明的实施例的接收机可以接收包括关于图像的流的广播流以及关于图像的信令信息(S42010)。这里，信令信息可以包括关于全景图像的信令信息。根据本发明的实施例的解复用器可以从所接收到的广播流中提取关于图像的流以及关于图像的信令信息(S42020)。根据本发明的实施例的解码器可以使用所提取的信令信息来对关于图像的流进行解码(S42030)。
根据本发明的另一实施例，关于图像的信令信息可以包括指示关于与当前观看的广播服务相对应的全景广播服务的信息的事件连接信息，并且关于全景图像的信令信息可以包括指示全景图像的组成的全景组成信息，已经参考图17和图30对此进行了详细的描述。
根据本发明的另一实施例，可以将前述图像划分成一个或多个图像，关于图像的流可以包括关于一个或多个划分的图像的流，并且解码器可以使用所提取的信令信息对关于划分的图像的流进行解码，已经参考图2、图6、图7、图38和图39对此进行了详细的描述。
根据本发明的实施例，前述广播流可以包括关于有关在图像中的用户ROI的附加信息的流，以用于提供ROI的高清晰度图像，解复用器可以从所接收到的广播流中提取关于图像的流、关于有关ROI的附加信息的流以及关于图像的信令信息，并且解码器可以使用所提取的信令信息来对所提取的关于图像的流和/或所提取的关于有关ROI的附加信息的流进行解码，已经参考图5、图16和图41对此进行了描述。
根据本发明的另一实施例，全景组成信息可以包括关于划分的图像的信息，已经参考图17、图19和图20对此进行了描述。
根据本发明的另一实施例，全景组成信息可以包括用于从经划分的图像去除块伪影的滤波信息，已经参考图17和图22对此进行了描述。
根据本发明的另一实施例，全景组成信息可以包括用于将全景图像裁切成一个或多个图像的信息，已经参考图3、图8、图17、图23、图38和图40对此进行了描述。
根据本发明的另一实施例，全景组成信息可以包括关于前述ROI的图像的信息，已经参考图17、图25和图41对此进行了描述。
根据本发明的另一实施例，广播信号接收方法可以包括显示经解码的图像流的步骤，并且在显示步骤中，当从用户接收到滚动请求时可以显示根据滚动请求移位的区域，已经参考图4、图9、图10至图15对此进行了描述。
图43是图示根据本发明的实施例的广播信号发送设备的配置的图。
根据本发明的实施例的广播信号发送设备43050可以包括用于对图像进行编码的编码器43010、用于将经编码的图像以及关于该图像的信令信息复用成一个广播流的复用器43020、用于生成包括复用的广播流的广播信号的广播信号生成器43030和/或用于发送所生成的广播信号的发射机43040。这里，信令信息可以包括关于全景图像的信令信息。
根据本发明的实施例的编码器43010可以对图像进行编码。根据本发明的实施例的复用器43020可以将编码的图像以及关于该图像的信令信息复用成一个广播流。这里，信令信息可以包括关于全景图像的信令信息。根据本发明的实施例的广播信号生成器43030可以生成包括经复用的广播流的广播信号。根据本发明的实施例的发射机43040可以发送所生成的广播信号。这里，发射机可以通过地面广播网络、互联网和/或有线电视网络来发送广播信号。
根据本发明的实施例的编码器、复用器、广播信号生成器和/或发射机可以对应于执行前述操作的硬件装置。也就是说，根据本发明的实施例的编码器、复用器、广播信号生成器和/或发射机可以对应于执行存储在存储器中的指令的处理器。
图44是图示根据本发明的实施例的广播信号接收设备的配置的图。
根据本发明的实施例的广播信号接收设备44040可以包括用于接收包括关于图像的流以及关于该图像的信令信息的广播流的接收机44010、用于从所接收到的广播流中提取关于图像的流以及关于图像的信令信息的解复用器44020和/或用于使用所提取的信令信息来对所提取的关于图像的流进行解码的解码器44030。
根据本发明的实施例的接收机44010可以接收包括关于图像的流以及关于该图像的信令信息的广播流。这里，信令信息可以包括关于全景图像的信令信息。根据本发明的实施例的解复用器44020可以从所接收到的广播流中提取关于图像的流以及关于图像的信令信息。根据本发明的实施例的解码器44030可以使用所提取的信令信息来对所提取的关于图像的流进行解码。
根据本发明的实施例的接收机、解复用器和/或解码器可以对应于执行前述操作的硬件装置。也就是说，根据本发明的实施例的接收机、解复用器和/或解码器可以对应于执行存储在存储器中的指令的处理器。
虽然为了方便已经参考相应的附图描述了实施例，但是可以组合这些实施例以实现新实施例。此外，设计存储用于实现前述实施例的程序的计算可读记录介质在本发明的范围内。
根据本发明的设备和方法不限于上述实施例的配置和方法，并且可以选择性地组合这些实施例中的全部或一些以获得各种修改。
根据本发明的图像处理方法可以作为存储在包括在网络装置中的处理器可读记录介质中的处理器可读代码被实现。处理器可读记录介质包括存储可由处理器读取的数据的所有种类的记录介质。处理器可读记录介质的示例包括ROM、RAM、CD-ROM、磁带、软盘、光学数据存储装置等，以及作为诸如通过互联网的传输的载波的实施方式。此外，处理器可读记录介质可以被分布到通过网络连接的计算机***，作为可以分布式方式读取的代码被存储并执行。
尽管已经出于说明性目的公开了本发明的优选实施例，但是本领域的技术人员将了解，在不脱离如所附权利要求中公开的本发明的范围和精神的情况下，各种修改、添加和替换是可能的。不应该根据本发明的技术精神或前景单独地理解这样的修改。
在本说明书中提及了设备和方法发明两者，并且设备和方法发明这两者的描述可以互补地适用于彼此。
[发明的模式]
已经在用于执行本发明的最佳模式下描述了各种实施例。
工业适用性
本发明适用于广播行业。

Claims (19)

1.一种发送广播信号的方法，包括：
对图像进行编码；
将编码的图像以及关于所述图像的信令信息复用成单个广播流，其中，所述信令信息包括关于全景图像的信令信息；
生成包括复用的广播流的广播信号；以及
发送所生成的广播信号。
2.根据权利要求1所述的方法，其中，关于所述图像的所述信令信息包括指示关于与当前观看的广播服务相对应的全景广播服务的信息的事件连接信息，并且关于所述全景图像的所述信令信息包括指示所述全景图像的组成的全景组成信息。
3.根据权利要求2所述的方法，其中，所述编码包括将所述图像划分成一个或多个图像并且对划分的图像分别进行编码。
4.根据权利要求2所述的方法，其中，所述编码包括对关于在所述图像中的用户感兴趣区域(ROI)的附加信息进行编码，以用于提供所述ROI的高清晰度图像，并且所述复用包括将编码的图像、关于所述图像的所述信令信息以及编码的ROI附加信息复用成单个广播流。
5.根据权利要求3所述的方法，其中，所述全景组成信息包括关于划分的图像的信息。
6.根据权利要求3所述的方法，其中，所述全景组成信息包括用于从划分的图像中去除块伪影的滤波信息。
7.根据权利要求2所述的方法，其中，所述全景组成信息包括用于将所述全景图像裁切成一个或多个图像的信息。
8.根据权利要求4所述的方法，其中，所述全景组成信息包括关于所述ROI的所述图像的信息。
9.一种接收广播信号的方法，包括：
接收包括关于图像的流以及关于所述图像的信令信息的广播流，其中，所述信令信息包括关于全景图像的信令信息；
从所接收到的广播流中提取关于所述图像的所述流以及关于所述图像的所述信令信息；以及
使用所提取的信令信息来对所提取的关于所述图像的流进行解码。
10.根据权利要求9所述的方法，其中，关于所述图像的所述信令信息包括指示关于与当前观看的广播服务相对应的全景广播服务的信息的事件连接信息，并且关于所述全景图像的所述信令信息包括指示所述全景图像的组成的全景组成信息。
11.根据要利要求10所述的方法，其中，所述图像被划分成一个或多个图像，并且关于所述图像的所述流包括关于所述一个或多个划分的图像的流，
其中，所述解码包括使用所提取的信令信息来对关于划分的图像的所述流分别进行解码。
12.根据权利要求10所述的方法，其中，所述广播流包括关于有关在所述图像中的用户的ROI的附加信息的流，以用于提供所述ROI的高清晰度图像，
其中，所述提取包括从所接收到的广播流中提取关于所述图像的所述流、关于所述ROI附加信息的所述流以及关于所述图像的所述信令信息，并且所述解码包括使用所提取的信令信息来对所提取的关于所述图像的流以及所提取的关于所述ROI附加信息的流进行解码。
13.根据权利要求11所述的方法，其中，所述全景组成信息包括关于经划分的图像的信息。
14.根据权利要求11所述的方法，其中，所述全景组成信息包括用于从划分的图像中去除块伪影的滤波信息。
15.根据权利要求10所述的方法，其中，所述全景组成信息包括用于将所述全景图像裁切成一个或多个图像的信息。
16.根据权利要求12所述的方法，其中，所述全景组成信息包括关于所述ROI的所述图像的信息。
17.根据权利要求9所述的方法，还包括显示解码的关于所述图像的流，
其中，所述显示包括当从用户接收到滚动请求时显示所述根据滚动请求移位的区域。
18.一种用于发送广播信号的设备，包括：
编码器，所述编码器用于对图像进行编码；
复用器，所述复用器用于将编码的图像以及关于所述图像的信令信息复用成单个广播流，其中，所述信令信息包括关于全景图像的信令信息；
广播信号生成器，所述广播信号生成器用于生成包括复用的广播流的广播信号；以及
发射机，所述发射机用于发送所生成的广播信号。
19.一种用于接收广播信号的设备，包括：
接收机，所述接收机用于接收包括关于图像的流以及关于所述图像的信令信息的广播流，其中，所述信令信息包括关于全景图像的信令信息；
解复用器，所述解复用器用于从所接收到的广播流中提取关于所述图像的所述流以及关于所述图像的所述信令信息；以及
解码器，所述解码器用于使用所提取的信令信息来对所提取的关于所述图像的流进行解码。
CN201580009219.0A 2014-02-18 2015-02-17 收发用于全景服务的广播信号的方法和设备 Pending CN106031180A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201461940838P 2014-02-18 2014-02-18
US61/940,838 2014-02-18
PCT/KR2015/001606 WO2015126144A1 (ko) 2014-02-18 2015-02-17 파노라마 서비스를 위한 방송 신호 송수신 방법 및 장치

Publications (1)

Publication Number Publication Date
CN106031180A true CN106031180A (zh) 2016-10-12

Family

ID=53878577

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580009219.0A Pending CN106031180A (zh) 2014-02-18 2015-02-17 收发用于全景服务的广播信号的方法和设备

Country Status (6)

Country Link
US (2) US9894422B2 (zh)
EP (1) EP3110160A4 (zh)
JP (1) JP6382329B2 (zh)
KR (1) KR101809968B1 (zh)
CN (1) CN106031180A (zh)
WO (1) WO2015126144A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108307219A (zh) * 2017-11-07 2018-07-20 深圳市佳创视讯技术股份有限公司 一种高清电视全景视频智能展示方法
CN108702528A (zh) * 2016-02-17 2018-10-23 Lg电子株式会社 发送360视频的方法、接收360视频的方法、发送360视频的设备和接收360视频的设备
CN109845274A (zh) * 2016-10-25 2019-06-04 索尼公司 发送设备、发送方法、接收设备和接收方法
CN110036641A (zh) * 2016-12-19 2019-07-19 高通股份有限公司 虚拟现实视频中的用信号表示的感兴趣区域或视点的优选呈现
CN110710222A (zh) * 2017-06-09 2020-01-17 索尼半导体解决方案公司 视频发送装置和视频接收装置
CN111373760A (zh) * 2017-11-30 2020-07-03 索尼公司 发送设备、发送方法、接收设备和接收方法
CN111557096A (zh) * 2018-01-12 2020-08-18 索尼公司 发送装置、发送方法、接收装置和接收方法

Families Citing this family (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102084104B1 (ko) 2013-07-25 2020-03-03 콘비다 와이어리스, 엘엘씨 종단간 m2m 서비스 계층 세션
US20170118503A1 (en) * 2014-06-20 2017-04-27 Sharp Kabushiki Kaisha Methods for xml representation of device capabilities
CN112511833A (zh) 2014-10-10 2021-03-16 索尼公司 再现装置
US10075701B2 (en) 2015-02-17 2018-09-11 Nextvr Inc. Methods and apparatus for mapping at least one received image to a surface of a model in a manner that efficiently uses the image content as a texture
US10362290B2 (en) 2015-02-17 2019-07-23 Nextvr Inc. Methods and apparatus for processing content based on viewing information and/or communicating content
KR20160133867A (ko) * 2015-05-13 2016-11-23 삼성전자주식회사 멀티 디스플레이 시스템 및 멀티 디스플레이 시스템의 동작 방법
US10582125B1 (en) * 2015-06-01 2020-03-03 Amazon Technologies, Inc. Panoramic image generation from video
WO2016199608A1 (ja) * 2015-06-12 2016-12-15 ソニー株式会社 情報処理装置および情報処理方法
US10313728B2 (en) * 2015-06-12 2019-06-04 Sony Corporation Information processing apparatus and information processing method
TWI547177B (zh) * 2015-08-11 2016-08-21 晶睿通訊股份有限公司 視角切換方法及其攝影機
CN108141576B (zh) * 2015-09-30 2020-09-04 三星电子株式会社 显示装置及其控制方法
US20170162230A1 (en) * 2015-12-04 2017-06-08 Livestream LLC Interactive digital camera for live crop editing and recording of video streams
US10506198B2 (en) 2015-12-04 2019-12-10 Livestream LLC Video stream encoding system with live crop editing and recording
CN105611213A (zh) * 2016-01-04 2016-05-25 京东方科技集团股份有限公司 一种图像处理方法、播放方法及相关的装置和***
US10645362B2 (en) * 2016-04-11 2020-05-05 Gopro, Inc. Systems, methods and apparatus for compressing video content
US10602191B2 (en) 2016-05-13 2020-03-24 Gopro, Inc. Apparatus and methods for video compression
US10956766B2 (en) 2016-05-13 2021-03-23 Vid Scale, Inc. Bit depth remapping based on viewing parameters
US10148875B1 (en) * 2016-05-17 2018-12-04 Scott Zhihao Chen Method and system for interfacing multiple channels of panoramic videos with a high-definition port of a processor
KR102535168B1 (ko) * 2016-05-26 2023-05-30 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 상호작용을 하는 클라이언트를 위한 파노라마 비디오 브로드캐스트 스트리밍
US20170347084A1 (en) * 2016-05-27 2017-11-30 Intel Corporation Virtual reality panoramic video system using scalable video coding layers
EP4336850A3 (en) 2016-07-08 2024-04-17 InterDigital Madison Patent Holdings, SAS Systems and methods for region-of-interest tone remapping
KR102567002B1 (ko) 2016-08-16 2023-08-14 삼성전자주식회사 영상 표시 장치 및 그 동작방법
US10951874B2 (en) * 2016-09-02 2021-03-16 Mediatek Inc. Incremental quality delivery and compositing processing
JP6943255B2 (ja) * 2016-10-26 2021-09-29 ソニーグループ株式会社 送信装置、送信方法、受信装置および受信方法
WO2018097947A2 (en) 2016-11-03 2018-05-31 Convida Wireless, Llc Reference signals and control channels in nr
US10887572B2 (en) * 2016-11-17 2021-01-05 Intel Corporation Suggested viewport indication for panoramic video
CN110235438B (zh) * 2016-12-01 2021-12-28 Lg 电子株式会社 图像显示设备和包含该图像显示设备的图像显示***
US10560682B2 (en) * 2017-01-13 2020-02-11 Gopro, Inc. Methods and apparatus for providing a frame packing arrangement for panoramic content
US11765406B2 (en) 2017-02-17 2023-09-19 Interdigital Madison Patent Holdings, Sas Systems and methods for selective object-of-interest zooming in streaming video
JP7212611B2 (ja) * 2017-02-27 2023-01-25 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 画像配信方法、画像表示方法、画像配信装置及び画像表示装置
KR102628139B1 (ko) * 2017-03-07 2024-01-22 인터디지털 매디슨 페턴트 홀딩스 에스에이에스 멀티-디바이스 프리젠테이션을 위한 맞춤형 비디오 스트리밍
US10609283B2 (en) * 2017-04-01 2020-03-31 Intel Corporation Sharing panoramic video images over a wireless display session
CN107018370B (zh) * 2017-04-14 2020-06-30 威盛电子股份有限公司 用于视频墙的显示方法及其***
US11049219B2 (en) 2017-06-06 2021-06-29 Gopro, Inc. Methods and apparatus for multi-encoder processing of high resolution content
US10679415B2 (en) * 2017-07-05 2020-06-09 Qualcomm Incorporated Enhanced signaling of regions of interest in container files and video bitstreams
KR102336997B1 (ko) * 2017-08-16 2021-12-08 삼성전자 주식회사 서버, 디스플레이장치 및 그 제어방법
WO2019066191A1 (ko) 2017-09-28 2019-04-04 엘지전자 주식회사 스티칭 및 리프로젝션 관련 메타데이터를 이용한 6dof 비디오를 송수신하는 방법 및 그 장치
US10798455B2 (en) 2017-12-22 2020-10-06 Comcast Cable Communications, Llc Video delivery
US10390063B2 (en) 2017-12-22 2019-08-20 Comcast Cable Communications, Llc Predictive content delivery for video streaming services
EP3761639A4 (en) 2018-02-27 2021-09-15 LG Electronics Inc. 360 DEGREE VIDEO TRANSMISSION / RECEPTION METHOD INCLUDING CAMERA LENS VIDEO INFORMATION, AND RELATED DEVICE
US11509937B2 (en) 2018-04-09 2022-11-22 Sk Telecom Co., Ltd. Method and apparatus for encoding/decoding video
WO2019199025A1 (ko) 2018-04-09 2019-10-17 에스케이텔레콤 주식회사 영상을 부호화/복호화하는 방법 및 그 장치
KR102648468B1 (ko) * 2018-04-10 2024-03-18 에스케이텔레콤 주식회사 레벨 설정 방법 및 이를 이용한 영상 복호화 장치
CN108566553B (zh) * 2018-04-25 2020-12-04 威盛电子股份有限公司 视频墙媒体播放***、方法及控制服务器
US10764494B2 (en) 2018-05-25 2020-09-01 Microsoft Technology Licensing, Llc Adaptive panoramic video streaming using composite pictures
US10666863B2 (en) * 2018-05-25 2020-05-26 Microsoft Technology Licensing, Llc Adaptive panoramic video streaming using overlapping partitioned sections
US11871451B2 (en) 2018-09-27 2024-01-09 Interdigital Patent Holdings, Inc. Sub-band operations in unlicensed spectrums of new radio
US11228781B2 (en) 2019-06-26 2022-01-18 Gopro, Inc. Methods and apparatus for maximizing codec bandwidth in video applications
US11481863B2 (en) 2019-10-23 2022-10-25 Gopro, Inc. Methods and apparatus for hardware accelerated image processing for spherical projections
USD996493S1 (en) 2020-12-07 2023-08-22 Applied Materials, Inc. Live streaming camera

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040027452A1 (en) * 2002-08-07 2004-02-12 Yun Kug Jin Method and apparatus for multiplexing multi-view three-dimensional moving picture
US20070172133A1 (en) * 2003-12-08 2007-07-26 Electronics And Telecommunications Research Instit System and method for encoding and decoding an image using bitstream map and recording medium thereof
KR20120086661A (ko) * 2011-01-26 2012-08-03 한국전자통신연구원 실시간 방송 프로그램의 기준 영상과 부가 영상간의 동기화 방법 및 이를 수행하는 송수신 시스템
CN103181172A (zh) * 2011-08-24 2013-06-26 松下电器产业株式会社 记录介质、再现装置、记录装置及记录方法

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5130794A (en) * 1990-03-29 1992-07-14 Ritchey Kurtis J Panoramic display system
US6859557B1 (en) 2000-07-07 2005-02-22 Microsoft Corp. System and method for selective decoding and decompression
JP2003115050A (ja) * 2001-10-04 2003-04-18 Sony Corp 映像データ処理装置及び映像データ処理方法、データ配信装置及びデータ配信方法、データ受信装置及びデータ受信方法、記憶媒体、並びにコンピュータ・プログラム
JP2004328204A (ja) * 2003-04-23 2004-11-18 Canon Inc 映像信号処理装置
KR100703715B1 (ko) 2005-05-17 2007-04-06 한국전자통신연구원 다시점 3차원 동영상 송수신 시스템
KR101255226B1 (ko) * 2005-09-26 2013-04-16 한국과학기술원 스케일러블 비디오 코딩에서 다중 ｒｏｉ 설정, 복원을위한 장치 및 방법
US8085852B2 (en) * 2007-06-26 2011-12-27 Mitsubishi Electric Research Laboratories, Inc. Inverse tone mapping for bit-depth scalable image coding
JP5018515B2 (ja) 2007-11-20 2012-09-05 ソニー株式会社 情報処理装置、情報処理方法、表示制御装置、表示制御方法、およびプログラム
EP2269371B1 (en) 2008-03-20 2018-01-31 Institut für Rundfunktechnik GmbH A method of adapting video images to small screen sizes
US8274544B2 (en) * 2009-03-23 2012-09-25 Eastman Kodak Company Automated videography systems
US9041772B2 (en) 2009-04-07 2015-05-26 Lg Electronics Inc. Broadcast transmitter, broadcast receiver, and 3D video data processing method thereof
US20100329361A1 (en) 2009-06-30 2010-12-30 Samsung Electronics Co., Ltd. Apparatus and method for in-loop filtering of image data and apparatus for encoding/decoding image data using the same
KR20150008840A (ko) * 2010-02-24 2015-01-23 아이피플렉 홀딩스 코포레이션 시각 장애인들을 지원하는 증강 현실 파노라마
JP5763306B2 (ja) * 2010-04-27 2015-08-12 レノボ・イノベーションズ・リミテッド（香港） 動画像通信システム
KR20120026013A (ko) 2010-09-08 2012-03-16 한국전자통신연구원 통신 시스템에서 데이터 송수신 장치 및 방법
WO2012091519A1 (ko) * 2010-12-31 2012-07-05 한국전자통신연구원 영상 정보 부호화 방법 및 복호화 방법과 이를 이용한 장치
BR112013020867A2 (pt) * 2011-02-16 2016-09-27 Panasonic Corp codificador de vídeo, método de codificação de vídeo, programa de codificação de vídeo, dispositivo de reprodução de vídeo, método de reprodução de vídeo, e programa de reprodução de vídeo
US20130286160A1 (en) * 2011-02-17 2013-10-31 Panasonic Corporation Video encoding device, video encoding method, video encoding program, video playback device, video playback method, and video playback program
EP2689583B1 (en) * 2011-03-21 2016-11-30 Intel Corporation Panorama picture scrolling
KR101685418B1 (ko) * 2011-04-27 2016-12-12 한화테크윈 주식회사 3차원 영상을 생성하는 감시 시스템
EP2712191A4 (en) * 2011-05-19 2015-06-24 Lg Electronics Inc VIDEO POWER TRANSMISSION DEVICE, VIDEO POWER RECEIVING DEVICE, VIDEO POWER TRANSMISSION METHOD AND VIDEO POWER RECEIVING METHOD
KR20130077246A (ko) 2011-12-29 2013-07-09 주식회사 카몬 스마트디바이스 상에서 파노라마 동영상 재생시 ｃｐｕ에 의한 과도 처리 경감방법 및 과도 처리 경감시스템
TWI569625B (zh) * 2012-04-06 2017-02-01 Sony Corp Image processing apparatus and method, program, and recording medium

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040027452A1 (en) * 2002-08-07 2004-02-12 Yun Kug Jin Method and apparatus for multiplexing multi-view three-dimensional moving picture
US20070172133A1 (en) * 2003-12-08 2007-07-26 Electronics And Telecommunications Research Instit System and method for encoding and decoding an image using bitstream map and recording medium thereof
KR20120086661A (ko) * 2011-01-26 2012-08-03 한국전자통신연구원 실시간 방송 프로그램의 기준 영상과 부가 영상간의 동기화 방법 및 이를 수행하는 송수신 시스템
CN103181172A (zh) * 2011-08-24 2013-06-26 松下电器产业株式会社 记录介质、再现装置、记录装置及记录方法

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108702528A (zh) * 2016-02-17 2018-10-23 Lg电子株式会社 发送360视频的方法、接收360视频的方法、发送360视频的设备和接收360视频的设备
US10880535B2 (en) 2016-02-17 2020-12-29 Lg Electronics Inc. Method for transmitting 360 video, method for receiving 360 video, apparatus for transmitting 360 video, and apparatus for receiving 360 video
CN109845274A (zh) * 2016-10-25 2019-06-04 索尼公司 发送设备、发送方法、接收设备和接收方法
CN109845274B (zh) * 2016-10-25 2021-10-12 索尼公司 发送设备、发送方法、接收设备和接收方法
CN110036641A (zh) * 2016-12-19 2019-07-19 高通股份有限公司 虚拟现实视频中的用信号表示的感兴趣区域或视点的优选呈现
CN110710222A (zh) * 2017-06-09 2020-01-17 索尼半导体解决方案公司 视频发送装置和视频接收装置
CN108307219A (zh) * 2017-11-07 2018-07-20 深圳市佳创视讯技术股份有限公司 一种高清电视全景视频智能展示方法
CN108307219B (zh) * 2017-11-07 2020-12-01 深圳市佳创视讯技术股份有限公司 一种高清电视全景视频智能展示方法
CN111373760A (zh) * 2017-11-30 2020-07-03 索尼公司 发送设备、发送方法、接收设备和接收方法
CN111557096A (zh) * 2018-01-12 2020-08-18 索尼公司 发送装置、发送方法、接收装置和接收方法

Also Published As

Publication number Publication date
WO2015126144A1 (ko) 2015-08-27
JP2017513280A (ja) 2017-05-25
US20180115806A1 (en) 2018-04-26
KR101809968B1 (ko) 2017-12-18
KR20160094384A (ko) 2016-08-09
US20160337706A1 (en) 2016-11-17
US9894422B2 (en) 2018-02-13
EP3110160A1 (en) 2016-12-28
JP6382329B2 (ja) 2018-08-29
EP3110160A4 (en) 2017-10-11

Similar Documents

Publication Publication Date Title
CN106031180A (zh) 收发用于全景服务的广播信号的方法和设备
CN102484729B (zh) 广播发送器、广播接收器及其3d视频数据处理方法
US9491434B2 (en) Method for processing three dimensional (3D) video signal and digital broadcast receiver for performing the method
US9036700B2 (en) Simulcast of stereoviews for 3D TV
US9055280B2 (en) Method and apparatus for transmitting digital broadcasting stream using linking information about multi-view video stream, and method and apparatus for receiving the same
US9338431B2 (en) Method and apparatus for processing a broadcast signal for 3D broadcast service
US10091486B2 (en) Apparatus and method for transmitting and receiving digital broadcasting signal
CN102860000B (zh) 产生用于提供三维多媒体服务的数据流的方法和设备以及用于接收所述数据流的方法和设备
CN104486612B (zh) 用于广播发射机的3d视频数据处理方法及广播接收机
CN104717479B (zh) 广播接收机及其3d广播数据处理方法
US9894407B2 (en) Apparatus for transreceiving signals and method for transreceiving signals
US8767045B2 (en) Apparatus and method of transmitting stereoscopic image data and apparatus and method of receiving stereoscopic image data
CN102388620B (zh) 广播接收机和三维视频数据处理方法
US20180213216A1 (en) Media data transmission device, media data reception device, media data transmission method, and media data rececption method
CN105075253A (zh) 用于处理3维广播信号的方法和设备
CN103081498B (zh) 数字接收器和用于在数字接收器中处理3d内容的方法
DE112013003531T5 (de) Signal-Sende-/Empfangsvorrichtung und Signal-Sende/-Empfangsverfahren
US9998800B2 (en) 3D broadcast service providing method and apparatus, and 3D broadcast service reproduction method and apparatus for using image of asymmetric aspect ratio

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20161012