CN104584547B - 用于处理3d广播服务的广播信号的方法和装置 - Google Patents

用于处理3d广播服务的广播信号的方法和装置 Download PDF

Info

Publication number
CN104584547B
CN104584547B CN201380041294.6A CN201380041294A CN104584547B CN 104584547 B CN104584547 B CN 104584547B CN 201380041294 A CN201380041294 A CN 201380041294A CN 104584547 B CN104584547 B CN 104584547B
Authority
CN
China
Prior art keywords
information
viewing
conditional information
content
conditional
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201380041294.6A
Other languages
English (en)
Other versions
CN104584547A (zh
Inventor
徐琮烈
崔智铉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN104584547A publication Critical patent/CN104584547A/zh
Application granted granted Critical
Publication of CN104584547B publication Critical patent/CN104584547B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178—Metadata, e.g. disparity information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074—Stereoscopic image analysis
    • H04N2013/0081—Depth or disparity estimation from stereoscopic image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00—Details of stereoscopic systems
    • H04N2213/005—Aspects relating to the "3D+depth" image format

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Library & Information Science (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

根据本发明的一个实施方式的一种用于处理三维(3D)广播信号的装置，包括：调谐器，其用于接收包含3D内容的广播信号；服务信息处理器，其用于解析从接收到的广播信号中接收的目标观看信息和至少一个参考观看条件信息；观看分析模块，其用于接收观众的观看条件信息，当接收到的观看条件信息不匹配目标观看条件信息时，解析包括在所述参考观看条件信息中的补偿类型信息，所述补偿类型信息包含与接收的观看条件信息最相关的信息，并且渲染所述3D内容，使得保持通过校正类型信息表达的元素；输出格式化器，其用于进行控制，使得显示被渲染的所述3D内容。

Description

用于处理3D广播服务的广播信号的方法和装置
技术领域
本发明涉及用于提供3D(三维)广播服务的方法和装置。更具体地，本发明涉及用于提供具有3D效果的3D广播内容的方法和装置，3D内容制作方想要在不同观看环境下为消费3D内容的观众提供所述3D效果。
背景技术
随着三维电视(3DTV)的供应变得普及，除了借助存储介质供应三维(3D)内容之外，借助数字广播传输3D图像也正变得活跃。
通常，3D图像通过使用人双眼的立体观原理来提供3D效果。由于双眼的视差，换句话讲，由于因人类双眼间大致65mm的距离造成的双眼视差，导致人能够察觉到深度感，因此，3D图像提供了允许用户左眼和右眼中的每个观看各自的平坦图像从而提供3D效果和深度感的视图。
这种3D图像显示方法包括立体方法、体方法、全息方法等。在立体方法的情况下，提供将供左眼观看的左观看图像和将供右眼观看的右观看图像，并且通过允许左眼和右眼中的每个通过偏光镜或显示装置本身分别观看左观看图像和右观看图像，观众可察觉到3D图像(或视图)效果。
同时，如果广播接收器能够精确地再现3D内容制作方想要的3D效果，则它可以是最佳图像，然而，根据观看条件，由立体图像构成的3D内容可实际上通过广播接收器显示不同的3D效果。当前3DTV接收器只提供对于特定观看条件而言固定的受限制3D图像。因此，目前观众不能充分且正确地欣赏(或体验)3D内容制作方法想要的3D效果，从而造成有区别地使观众对3D内容的满意度下降的缺点。
发明内容
技术目的
为了解决上述问题，本发明将要实现的技术目的涉及使当制作对应内容而不顾及各观众的观看条件的变化时，广播接收器提供3D内容提供方初始想要的3D效果。
技术解决方案
根据本发明的示例性实施方式的一种用于处理3D广播信号的装置包括：调谐器，其用于接收包含3D内容的广播信号；服务信息处理器，其用于解析从接收到的所述广播信号中接收的目标观看信息和至少一个参考观看条件信息，其中，所述目标观看条件信息包括指示用于观看3D内容的最佳屏幕尺寸的信息、指示用于观看3D内容的最佳观看距离的信息、指示用于观看3D内容的最佳IOD(眼间距离)的信息，其中，所述参考观看条件信息包括指示推荐的屏幕尺寸、推荐的观看距离、推荐的IOD的信息和补偿类型信息，所述补偿类型信息指示计算所述推荐的屏幕尺寸、所述推荐的观看距离、所述推荐的IOD所基于的元素，观看分析模块，其用于接收观众的观看条件信息，解析包括在所述参考观看条件信息中的、包含与接收的观看条件信息最相关的信息的补偿类型信息，并且渲染所述3D内容，使得保持通过校正类型信息表达的元素；输出格式化器，其用于进行控制，使得显示被渲染的所述3D内容。
优选地，所述服务信息处理器解析来自SEI消息的所述目标观看条件信息和至少一个参考观看条件信息，所述SEI消息被包括在针对所述3D内容的视频元素的视频头部中。
优选地，所述服务信息处理器解析来自PMT(节目映射表)中包括的立体3D渲染信息描述符的所述目标观看条件信息和至少一个参考观看条件信息。
优选地，所述服务信息处理器解析来自VCT(虚拟频道表)或SDT(服务描述表)中包括的立体3D渲染信息描述符的所述目标观看条件信息和至少一个参考观看条件信息。
优选地，所述参考观看条件信息还包括指示所述推荐的屏幕尺寸、所述推荐的观看距离、或所述推荐的IOD是否对应于有效信息的参考参数有效性信息。
优选地，所述参考观看条件信息还包括用于基于所述参考观看条件信息渲染所述3D内容的补偿参数信息。
优选地，所述补偿信息包括指示分别捕获所述3D内容的左图像和右图像的相机之间的距离的信息。
根据本发明的示例性实施方式的一种用于处理3D广播信号传输的方法包括：产生3D(三维)内容的步骤；产生目标观看条件信息或者一个或多个参考观看条件信息的步骤，其中，所述目标观看条件信息包括指示用于观看3D内容的最佳屏幕尺寸的信息、指示用于观看3D内容的最佳观看距离的信息、指示用于观看3D内容的最佳IOD(眼间距离)的信息，其中，所述参考观看条件信息包括指示推荐的屏幕尺寸、推荐的观看距离、推荐的IOD的信息和补偿类型信息，所述补偿类型信息指示计算所述推荐的屏幕尺寸、所述推荐的观看距离、所述推荐的IOD所基于的元素；产生包括所述3D内容和所述目标观看条件信息或者所述一个或多个参考观看条件信息的广播信号的步骤；传输产生的所述广播信号的步骤。
优选地，产生广播信号的步骤包括：将所述目标观看条件信息或者所述一个或多个参考观看条件信息***SEI消息的步骤，所述SEI消息被包括在所述3D内容的视频元件的视频头部中。
优选地，产生广播信号的步骤包括：通过将所述目标观看条件信息或者一个或多个参考观看条件信息包括在立体3D渲染信息描述符中来将上述信息***PMT(节目映射表)中的步骤。
优选地，产生广播信号的步骤包括：通过将所述目标观看条件信息或者一个或多个参考观看条件信息包括在立体3D渲染信息描述符中来将上述信息***VCT(虚拟频道表)或SDT(服务描述表)中的步骤。
优选地，所述参考观看条件信息还包括指示所述推荐的屏幕尺寸、所述推荐的观看距离、或所述推荐的IOD是否对应于有效信息的参考参数有效性信息。
优选地，所述参考观看条件信息还包括用于基于所述参考观看条件信息渲染所述3D内容的补偿参数信息。
优选地，所述补偿信息包括指示分别捕获所述3D内容的左图像和右图像的相机之间的距离的信息。
本发明的效果
根据本发明，不顾及用户的观看条件，可向用户提供当制作对应内容时3D内容制作方初始想要的3D效果。
根据本发明，在与常规(或传统)的广播***架构向后兼容的同时，可向用户提供当制作对应内容时3D内容制作方初始想要的3D效果。
根据本发明，通过使接收器执行最少数据处理，可向用户提供当制作对应内容时3D内容制作方初始想要的3D效果。
附图说明
图1示出根据本发明的示例性实施方式的视图合成模块。
图2示出根据本发明的示例性实施方式的最佳配合(或适应)观看条件的立体图像的装置。
图3示出根据本发明的示例性实施方式的提供最佳配合观看条件的立体图像的接收器的操作。
图4示出根据本发明的示例性实施方式的相对于屏幕尺寸的3D效果差异。
图5示出根据本发明的示例性实施方式的显示相对于屏幕尺寸而不受限制的3D效果所需的多个像素。
图6示出根据本发明的示例性实施方式的相对于IOD长度的3D效果差异。
图7示出根据本发明的示例性实施方式的在观看距离变化的情况下保持收敛角(alpha：α)以保持3D效果的方法。
图8示出根据本发明的示例性实施方式的保持视差角的方法。
图9示出根据本发明的示例性实施方式的保持观看距离的方法。
图10示出根据本发明的示例性实施方式的调节视差以保持观看距离的方法。
图11示出根据本发明的示例性实施方式的当接收到的参考观看条件信息和/或目标观看条件信息不匹配接收端中的观看条件信息时执行深度调节的方法。
图12示出根据本发明的示例性实施方式的立体3D渲染信息描述符。
图13示出根据本发明的示例性实施方式的针对compensation_type字段值的定义。
图14示出根据本发明的示例性实施方式的视图对描述符。
图15示出根据本发明的示例性实施方式的PMT(节目映射表)的部分。
图16示出根据本发明的示例性实施方式的VCT(虚拟频道表)的部分。
图17示出根据本发明的示例性实施方式的SDT(服务描述表)。
图18示出根据本发明的示例性实施方式的user_data_registered_itu_t_t35()。
图19示出根据本发明的示例性实施方式的user_identifier及其各自的user_structure()和DVB1_data()。
图20示出根据本发明的示例性实施方式的立体3D渲染信息SEI消息。
图21示出根据本发明的示例性实施方式的立体3D渲染信息SEI描述符。
图22示出根据本发明的示例性实施方式的提供最佳配合屏幕尺寸的立体图像的方法。
图23示出根据本发明的示例性实施方式的用于提供最佳配合观看条件的3D图像的发送方案。
图24示出根据本发明的示例性实施方式的立体3D观看条件信息描述符。
图25示出根据本发明的示例性实施方式的提供最佳配合观看条件的3D图像的接收器。
图26示出根据本发明的示例性实施方式的用于处理3D广播信号的方法。
具体实施方式
将参照附图详细描述可实现下述的以下目的的详细实现的本发明的优选示例性实施方式。此时，附图中示出并且相对于附图描述的本发明的构造和操作只被描述为至少一个示例性实施方式，因此，本发明的技术范围和精神极其基本构造和操作将不仅仅限于此。
另外，在任何可能的地方，尽管本发明中使用的术语基于本发明功能选自公知使用的术语，本文中使用的术语可按照本领域的任何技术人员的意图或实践或者伴随着新技术的到来而变化或修改。另外，在一些特定情况下，申请人根据他或她的辨别力选择本发明的描述中提到的术语中的一些，在本发明的描述的相关部分中描述了所述辨别力的详细含义。此外，要求的是，本发明的术语将不仅仅通过所使用的实际术语来定义，而是通过落入本发明的整体内容内和另外基于本发明的整体内容的含义来定义。
图1示出根据本发明的示例性实施方式的视图合成模块。
根据本发明的示例性实施方式的视图合成模块(1000)包括变形模块(1100、1200)、合并模块(1110、1210)、孔填充模块(1120、1220)和/或边界噪声去除模块(1130、1230)。
变形模块(1100、1200)对应于被构造成通过使用相机参数信息、深度类型信息、depth_near信息和/或depth_far信息向左图像和右图像分别应用深度信息来处理左图像和右图像的装置。相机参数信息包括关于正在形成3D内容的位置的相机的信息。深度类型信息指示向左图像和/或右图像分别提供深度信息的类型。例如，深度类型信息可通过使用左图像和/或右图像中正包括的对象的视差值来提供深度信息。本文中，视差代表用于指示3D图像的同一点的左图像和右图像中的每个分别的点之间的水平差。变形模块(1100、1200)接收左图像和右图像数据，然后接收左图像深度信息(L_depth)和右图像深度信息(R_depth)，然后向左图像数据和右图像数据中的每个应用此信息。左图像深度信息(L_depth)和右图像深度信息(R_depth)可被称为深度图。在这个过程期间，变形模块(1100、1200)可通过使用上述的相机参数信息、深度类型信息、depth_near信息和/或depth_far信息来对左图像和右图像执行渲染。
另选地，变形模块(1100、1200)可通过分别向左图像数据和右图像数据应用左图像深度信息和右图像深度信息来渲染左图像和右图像(或对左图像和右图像执行渲染)。同时，变形模块(1100、1200)可通过对左图像深度信息和右图像深度信息中的每个应用相机参数信息、深度类型信息、depth_near信息和/或depth_far信息来产生深度信息和/或图像孔信息。
合并模块(1110、1210)执行以下功能：接收由变形模块处理的左图像和右图像，通过对左图像和右图像应用图像深度信息来执行渲染，输出左图像和右图像中的一个。例如，一个合并模块(1110)可输出左图像，另一个合并模块(1210)可输出右图像。
孔填充模块(1120、1220)可通过使用图像孔信息执行补偿左图像或右图像中会存在的孔的过程。
边界噪声去除模块(1130、1230)执行消除(或去除)左图像或右图像的边界区中会出现的噪声的过程。
3D格式化器(1300)组合从视图合成模块(1000)输出的左图像和右图像并且将3D图像格式化。
在视图合成模块(1000)形成(或产生)新的左图像和右图像并且输出任意(或随机)视图(或视点)的情况下，各图像和深度图可经历附图中示出的4个步骤。此时，可提供诸如相机参数信息或深度类型信息等相关信息进行各图像和深度图的处理程序。
图2示出根据本发明的示例性实施方式的最佳配合(或适应)观看条件的立体图像的装置。
在接收端选择其自身任意视图的图像并且对其应用视图合成的情况下，可通过使用进行视图合成所需的信息(例如，相机参数信息、深度类型信息、depth_near信息和/或depth_far信息)，分别对各图像执行渲染。然而，不可以只通过以上提到的信息来提供最佳配合观看条件的3D图像，并且在意图提供对应3D图像的情况下，需要另外的信息。更具体地，需要用信号发送关于当前接收的立体图像正针对的特定观看条件的信息和与当将要支持另一个参考观看条件的情况对应的指导信息。
在本发明的示例性实施方式中，可从发送端发送的指导信息和可从接收端获取的观看条件信息都可被输入到视图合成模块，可基于这两种类型的信息来产生新立体图像(包括左图像和右图像的图像)。目标观看条件信息和参考观看条件信息和/或与之相关的参数信息可被包括在指导信息中。
可由视图合成模块执行观看条件适应视图合成。视图合成模块可分别针对第一视图和第二视图接收第一视图的视频元素、第二视图的视频元素、第一视图的深度元素、第二视图的深度元素、相机参数信息、深度类型信息、depth_near信息、和/或depth_far信息。视图合成模块可在基于此信息的考虑下对没有满足观看条件的3D图像执行渲染。
视图合成模块可另外地接收目标观看条件信息、参考观看条件信息、观看条件信息和相关参数。
目标观看条件信息对应于指示3D内容制作方或广播发送端的作为目标的观看条件的信息。目标观看条件信息可包括目标用户双眼之间的距离、目标显示屏和目标观众之间的距离、和/或目标显示装置的尺寸信息。通过参考目标观看条件信息，接收端可对3D图像执行渲染，达目标观看条件信息和接收端的观看条件之间的差异。更具体地，可对3D图像执行渲染，使得可覆盖基于目标观看条件信息改变(或变化)的观看条件的细节(或内容)。
参考观看条件信息对应于指示由3D内容制作方或广告发送端作为参考标准呈现的观看条件的信息。更具体地，参考观看条件信息可提供关于一个或多个参考观看条件的信息，并且在各参考观看条件下，可从发送端向接收端发送用于呈现3D图像的参数。参考观看条件信息可包括观众双眼之间的最佳距离、显示屏和用户双眼之间的最佳距离、用于显示3D内容制作方或广播发送端想要的3D效果的显示装置的最佳尺寸信息。接收端可参考具有与观看条件信息最近似的信息的参考观看条件信息，接着可对3D图像执行渲染，达参考观看条件信息和接收端的观看条件之间的差异。更具体地，可渲染3D图像，使得可覆盖基于参考观看条件信息改变的观看条件的细节。
观看条件信息对应于指示观众消费的3D内容的观看环境的信息。观看条件信息可包括诸如上面正在显示3D图像的屏幕的尺寸(屏幕尺寸)、观众双眼之间的距离(IOD；眼间距离)、屏幕和观众之间的距离(观看距离)等信息。视图合成模块从接收器接收观看条件信息，并且在存在与该观看条件信息匹配的目标观看条件信息的情况下，视图合成模块可通过使用与对应的目标观看条件信息相关的执行3D图像渲染的参数来对3D图像执行渲染。视图合成模块从接收器接收观看条件信息，并且在不存在与该观看条件信息匹配的目标观看条件信息或参考观看条件信息的情况下，视图合成模块可比较参考观看条件信息与该观看条件信息，接着可执行补偿这两个信息之间的差异的3D图像渲染。
图3示出根据本发明的示例性实施方式的提供最佳配合观看条件的立体图像的接收器的操作。
在观看条件信息匹配目标观看条件信息的情况下，例如，在存储在或输入到接收端的观看条件信息匹配接收到的立体像对1的目标观看条件信息的情况下，作为执行任何另外的深度条件的替代，接收到的输入(立体像对1)被直接输出(立体像对2)。
在观看条件信息不匹配目标观看条件信息的情况下，例如，在立体像对1的目标观看条件信息不匹配接收到的参考观看条件信息之中的由接收器获取(或得到)的观看条件信息的情况下，接收器搜索与获取的观看条件信息匹配的信息。
在存在匹配的参考观看条件信息的情况下，通过参考各个参数值，可执行深度调节(或3D图像渲染)，以形成(或产生)新立体像对，从而输出新形成的立体像对。
在不存在匹配的参考观看条件信息的情况下，在提供的参考观看条件信息之中，可参考与获取的观看条件信息最近似的参考观看条件信息，或者参考目标观看条件信息，以计算对于获取的观看条件信息而言足够的参数值，可通过使用这个参数值来形成(或产生)立体像对2。
图4示出根据本发明的示例性实施方式的相对于屏幕尺寸的3D效果差异。
在针对不同的屏幕尺寸输出相同的立体内容(3D内容)的情况下，各自的视差、观看距离、相应识别的对象的深度可有所不同。
当屏幕尺寸变小时，用于显示相同3D效果的深度预算变大，相反地，当屏幕尺寸变大时，用于显示相同3D效果的深度预算被更少地消耗。深度预算是指包括在3D图像中的固定量的3D效果(或深度)。
参照图4，在屏幕尺寸分别对应于W1和W2的情况下，应当清楚，为了感测相同深度，需要变化视差角和观看距离。
图5示出根据本发明的示例性实施方式的显示相对于屏幕尺寸而不受限制的3D效果所需的多个像素。
为了确定各屏幕尺寸分别的深度(或3D效果)的变化，可在IOD(眼间距离)分别的多个像素之间进行比较。在显示屏内，与IOD(＝65mm)的视差对应的深度(3D效果)对应于陷入屏幕背面的不受限制深度，对应于0mm视差的深度是指对应于屏幕表面的深度。尽管当视差等于0时的情况的深度感总是对应于屏幕正上方的位置而不顾及观看条件，但剩余视差按照屏幕尺寸显示不同的深度感。如图5中所示，当针对各样屏幕尺寸中的每个在对应于65mm视差的像素数量之间进行比较时，用于显示相同3D效果的视差的像素的数量大大变化。
图6示出根据本发明的示例性实施方式的相对于IOD长度的3D效果差异。
立体3D效果按照IOD尺寸变化。更具体地，在观众是儿童的情况下，IOD一般可以是小的，识别(或察觉)相同3D效果所需的深度预算也可以是小的，相反地，在观众是IOD比儿童大的成人的情况下，识别(或察觉)相同3D效果所需的深度预算可大于儿童的深度预算。
如图6中所示，相对于相同视差p1察觉的深度(或深度感)(D1)按照IOD值而变化。更具体地，在成人的情况下，由于IOD长度比儿童的IOD长度长，因此观众可感觉到允许对象被看到仿佛对象存在于与用户相距D1距离的3D效果，然而，在针对相同对象具有的IOD长度比成人的IOD长度短的儿童的情况下，观众可感觉到允许对象被看到仿佛对象存在于与用户相距D1’距离的3D效果。
图7示出根据本发明的示例性实施方式的在观看距离变化的情况下保持收敛角(alpha；α)以保持3D效果的方法。
对于各个2D图像的观看距离，由于存在由ITU-R针对各分辨率决定的推荐观看距离，因此发送端和接收端可将此设置为参考标准。相反，在立体内容(3D内容)的情况下，按照观看距离察觉的深度会存在差异，没有推荐各个观看距离的参考标准。因此，由发送端设置为参考标准的关于观看距离的信息被发送到接收端，接收端可以指此信息。
如上所述，由于立体内容的3D效果按照观看条件(诸如，屏幕尺寸、IOD、观看距离等)而变化，因此为了合适地传递3D内容制作方或广播站想要的3D效果，正需要的是提供3D内容从而允许按照各观看条件调节3D效果的方法。
当将要保持立体图像的3D效果时，正保持的元素可变化，可存在用于相应保持3D效果的多样方法。例如，可保持收敛角。在另一个示例中，可保持视差角。视差角可被定义为从适应角(accommodation angle)减去收敛角得到的值。当观众盯着屏幕上的特定点时，适应角代表均由将各眼连接到各个视点的直线组成的两个分段之间的角度。在又一个示例中，可参照观众(或基于观众)保持观看距离范围(例如，Dmin、Dmax)。在又一个实例中，可参照屏幕(或基于屏幕)保持观看距离范围(例如，|Dmin Dmax|)。在又一个实例中，可存在保持相对观看距离范围的方法。
在用于补偿3D内容的3D效果(深度)的方法的情况下，由于根据将要保持的元素，调节值可存在差异，因此当关于元素的信息(即，关于补偿类型的信息)被从发送端提供到接收端时，接收端可使用此信息，已经基于所述关于元素的信息计算出提供的参考观看条件信息及其相应的参考补偿参数。
图7对应于示出当正保持收敛角时的情况的附图。在其它观看条件相同的情况下，当观看距离变大时，需要视差(或像差)的绝对值相应增大。例如，在图7的(a)中，在将要保持的元素对应于α(alpha)的情况下，并且在观看距离增大的情况下，如图7的(b)中所示，为了保持α，还需要增大屏幕上的箭头(指示视差)。
在其它观看条件相同的情况下，当屏幕尺寸变大时，需要视差的绝对值相应减小。此时，应该保持视差。
在其它观看条件相同的情况下，当IOD变大时，需要视差(或像差)的绝对值相应减小。
图8示出根据本发明的示例性实施方式的保持视差角的方法。
当观看距离变大时，需要视差(或像差)的绝对值相应增大。但是，在观看距离增大至4m或更大的情况下，相对于此增大，最大视差值不会发生变化。
在其它观看条件相同的情况下，当屏幕尺寸变大时，也需要视差的绝对值与此增大成比例地减小。此时，可保持视差。
可保持视差(或像差)，而不顾及IOD尺寸的变化。
视差角可被定义为从适应角(Δ)减去收敛角得到的值。当观众正专注于屏幕的特定点时，适应角可被定义为均由将各眼连接到各个视点的直线组成的两个分段之间形成的角度。收敛角包括与观众正专注于远处图像时对应的收敛角(β)和与观众正专注于近处图像时对应的收敛角(α)。
根据本发明的示例性实施方式，视差角应该被保持在从适应角减去β角值得到的角度和从适应角减去α角值得到的角度之间。在观看偏离上述视差角范围的图像的情况下，这可造成用户体验到疲劳感。
图9示出根据本发明的示例性实施方式的保持观看距离的方法。
保持观看距离的方法包括基于观众保持观看距离的方法和基于屏幕保持观看距离的方法。
参照图9的(a)，当观众正关注最远处图像时，用户双眼和最远处图像之间的距离可被定义为最大距离(Dmax)，并且当观众正关注最近处图像时，用户双眼和最近处图像之间的距离可被定义为最小距离(Dmin)。基于观众保持观看距离的方法可对应于保持距离使得可在上述最小距离和最大距离之间显示3D效果的方法。更具体地，可通过即使观看条件改变也保持目标最小距离和目标最大距离来保持3D效果。
在其它观看条件相同的情况下，当观看距离变大时，需要视差(或像差)的绝对值相应增大。
在其它观看条件相同的情况下，当屏幕尺寸变大时，也需要视差的绝对值与此增大成比例地减小。此时，可保持视差。
当IOD变大时，需要视差(或像差)的绝对值相应增大。
参照图9的(b)，可基于屏幕(或参照屏幕)保持距离范围。这是指保持距离范围的绝对值(即，最大距离减去最小距离得到的值)的方法。
在其它观看条件相同的情况下，当观看距离变大时，需要视差(或像差)的绝对值相应增大。
在其它观看条件相同的情况下，当屏幕尺寸变大时，也需要视差的绝对值与此增大成比例地减小。此时，可保持视差。
当IOD变大时，需要视差(或像差)的绝对值相应增大。
图10示出根据本发明的示例性实施方式的调节视差以保持观看距离的方法。
根据本发明的示例性实施方式，当通过使用三角形的比例表达式保持观看距离时，可按照观看条件调节视差值。
另外，根据补偿类型，正应用于用于渲染的补偿参数的值也可变化，并且通过使用此信息，接收器可选择与最佳配合(或适应)观看环境的补偿类型相关的信息并且可应用所选择的信息。
图11示出根据本发明的示例性实施方式的当接收到的参考观看条件信息和/或目标观看条件信息不匹配接收端中的观看条件信息时执行深度调节的方法。
如上所述，按照观看条件的变化调节视差的方法还可应用于当不存在用于深度调节的发送参数时推导适于接收端的基线值。本文中，在形成3D内容时，基线值可以指分别捕获包括在3D内容中的左图像和右图像中的每个的相机之间的距离。
根据本发明的示例性实施方式，在不存在针对将要调节的参数(即，基线)的信息的情况下，接收端可以参考用信号发送的目标观看条件信息(或参考观看条件信息)及其相应的渲染参数值，从而能够推导适于接收端的观看条件的新参数。更具体地，在观看距离、屏幕尺寸、和/或IOD值从初始值开始变化的情况下，可通过确定关于将要如何相对于此变化应用视差的关系来推导新视差，可推导将基于新视差值调节的基线值。
如图11中所示，基于旧视差和新视差之间的关系，可通过使用三角形的比例表达式来推导基线值。推导的基线值可被用作用于调节像素位置的值或者用于显示左图像和右图像中的每个各自的特定图像的像素的数量。
图12示出根据本发明的示例性实施方式的立体3D渲染信息描述符。
立体3D渲染信息描述符可包括上述的目标观看条件信息、参考观看条件信息和/或相关参数信息(补偿参数)。
立体3D渲染信息描述符可包括view_pair_ID字段、target_parameter_valid_flag字段、target_display_size字段、target_IOD字段、target_viewing_distance字段、rendered_param()字段、num_of_references字段、ref_parameter_valid_flag字段、compensation_type字段、ref_display_size字段、ref_IOD字段、ref_viewing_distance字段、和/或ref_compensation_param()字段。
view_pair_ID字段对应于可标识当前正在接收的立体视图的标识符，并且通过使用这个值，可能可以辨别立体图像中包括的左图像和/或右图像被构造成哪个特定基本流(ES)。view_pair_ID字段可与view_pair_descriptor相关联地使用，随后将对此进行描述。
target_parameter_valid_flag字段标识与基本视图视频流和/或另外视图视频流相关的观看条件字段的有效性。
target_display_size字段是指对于正在发送的立体内容而言最佳的推荐显示尺寸。并且，在宽高比固定的情况下，target_display_size字段可使用与对角长度47英寸、55英寸等对应的值。target_display_size字段可被表达为显示宽度的距离。target_display_size字段可被处理成，只有当target_parameter_valid_flag的第一位等于1时才有效。
target_IOD字段是指对于正在发送的立体内容而言最佳的IOD(眼间距离)。通常，IOD被分布在40～80mm的范围内。target_IOD字段可被处理成，只有当target_parameter_valid_flag的第二位等于1时才有效。
target_viewing_distance字段指示对于观看正在发送的立体内容而言最佳的推荐观看距离。target_viewing_distance字段可被处理成，只有当target_parameter_valid_flag的第三位等于1时才有效。
rendered_param()字段：这个值可包括当接收器新渲染立体内容时可参考的值。并且，当制作正在发送的立体内容时，在rendered_param()字段中可包括的最典型值对应于分别捕获左图像和右图像中的每个的两个相机之间的基线距离，并且除此之外，还可定义用于补偿立体图像的其它参数。rendered_param()字段可被处理成，只有当target_parameter_valid_flag的第四位等于1时才有效。
num_of_references字段对应于产生(或形成)虚拟视图所需的指导信息(参考观看条件信息和各个参数集)的数量。
ref_parameter_valid_flag字段可指示参考观看条件信息的字段的有效性与虚拟视图的产生(或形成)相关。
compensation_type字段指示基于哪个因素(元素)计算了正在提供的参考观看条件和补偿参数。
尽管ref_display_size字段不对应于对于正在发送的立体内容而言最佳的值，但该字段指示可按照接收端条件参考的显示尺寸(屏幕尺寸)。ref_display_size字段可被处理成，只有当ref_parameter_specified_flag的第一位等于1时才有效。
ref_IOD字段不对应于对于正在发送的立体内容而言最佳的值，但该字段指示可按照接收端条件参考的IOD。ref_IOD字段可被处理成，只有当ref_parameter_specified_flag的第二位等于1时才有效。
ref_viewing_distance字段不对应于对于正在发送的立体内容而言最佳的值，但该字段指示可按照接收端条件参考的IOD。ref_viewing_distance字段可被处理成，只有当ref_parameter_specified_flag的第三位等于1时才有效。
ref_compensation_param()字段对应于当接收器新渲染立体内容时可参考的值，该字段包括对应于各个参考观看条件信息的补偿参数。ref_compensation_param()字段可被处理成，只有当ref_parameter_specified_flag的第四位等于1时才有效。
包括在ref_compensation_param()中的最典型值对应于当制作正在发送的立体内容时分别捕获左图像和右图像中的每个的两个相机之间的基线距离。例如，ref_baseline_distance字段可被包括在ref_compensation_param()中，该字段指示用于分析(或合成)对于各个参考观看条件信息而言最佳的3D图像的基线信息。除此之外，用于补偿立体图像的其它参数还可被包括在ref_compensation_param()中。
图13示出根据本发明的示例性实施方式的关于compensation_type字段值的定义。
当compensation_type字段的值被设置成“0x00”时，该字段指示计算与该条件相关的参考观看条件信息和补偿参数作为用于保持被称为收敛角的元素的条件。
当compensation_type字段的值被设置成“0x01”时，该字段指示计算与该条件相关的参考观看条件信息和补偿参数作为用于保持被称为视差角的元素的条件。
当compensation_type字段的值被设置成“0x02”时，该字段指示计算与该条件相关的参考观看条件信息和补偿参数作为用于基于观众保持被称为观看距离的元素的条件。
当compensation_type字段的值被设置成“0x03”时，该字段指示计算与该条件相关的参考观看条件信息和补偿参数作为用于基于屏幕保持被称为观看距离的元素的条件。
compensation_type字段的值“0x04”至“0x07”对应于保留下来供今后使用的值。
图14示出根据本发明的示例性实施方式的视图对描述符。
通过使用view_pair_ID字段，接收器可关联和处理立体3D渲染信息描述符和视图对描述符。
视图对描述符包括num_of_view_pairs字段、view_pair_ID字段、left_PID字段、和/或right_PID field。
num_of_view_pairs字段指示正包括在节目中的立体图像对的数量。
view_pair_ID字段对应于可标识各立体图像对的标识符，并且通过使用这个值，可识别被包括的左图像或右图像被构造成的特定ES流。
left_PID字段指示对应于左图像的图像的PID值。
right_PID字段指示对应于右图像的图像的PID值。
除了左图像和/或右图像的PID信息之外，视图对描述符还可包括可分别标识包括关于左图像的深度信息和/或关于右图像的深度信息的各流的PID信息。
图15示出根据本发明的示例性实施方式的PMT(节目映射表)的部分。
上述立体3D渲染信息描述符可被包括在PMT中，并且在这种情况下，立体3D渲染信息描述符可执行节目级用信号发送(选项1)。在这种情况下，立体3D渲染信息描述符发送针对被包括在节目中的立体图像的目标观看条件信息、参考观看条件信息和/或相关补偿参数。参照图15，在选项1的情况下，立体3D渲染信息描述符在PMT内的位置可以是已知的。
另选地，立体3D渲染信息描述符还可按对应于深度流的基本流(ES)级用信号发送对应信息(选项2)。参照图15，在选项2的情况下，立体3D渲染信息描述符在PMT内的位置可以是已知的。
另选地，立体3D渲染信息描述符可从对应于针对深度的视频基本流的ES级回路用信号发送对应信息(选项3)。参照图15，在选项3的情况下，立体3D渲染信息描述符在PMT内的位置可以是已知的。
可通过节目级view_pair_descriptor用信号发送被包括在节目中的发送立体图像的ES。在这种情况下，view_pair_descriptor可通过包括在PMT中进行发送。
图16示出根据本发明的示例性实施方式的VCT(虚拟频道表)的部分。
立体3D渲染信息描述符可通过被包括在TVCT中进行发送。在这种情况下，立体3D传染信息描述符可位于频道级描述符回路中(选项1)。
另选地，立体3D渲染信息描述符可位于常规(或传统)组件列表描述符中(选项2)，或者，通过扩展服务位置描述符，立体3D渲染信息描述符的字段可被包括在其中。(选项3)
发送包括在频道中的立体图像的ES可通过通道级view_pair_descriptor执行用信号发送。
图17示出根据本发明的示例性实施方式的SDT(服务描述表)。
SDT(服务描述表)对应于描述被包括在DVB_SI中的特定传输流中的服务的表。
根据本发明的示例性实施方式的SDT包括table_id字段、section_syntax_indicator字段、section_length字段、transport_stream_id字段、version_number字段、current_next_indicator字段、section_number字段、last_section_number字段、original_network_id字段、service_id字段、EIT_schedule_flag字段、EIT_present_following_flag字段、running_status字段、free_CA_mode字段、descriptors_loop_length字段、descriptor()字段、和/或CRC_32字段。
table_id字段是指示这个片段属于服务描述表的8位字段。
section_syntax_indicator字段是被设置成1的1位字段。
section_length字段是12位字段，其中，头两个位被设置成00。该字段指示从这个字段开始到包括CRC的片段的字节的数量。该字段的总片段长度不可超过1021并且等于最多1024个字节。
transport_stream_id字段是16位字段，执行用于识别TS的标记的功能。
version_number字段是5位字段，指示sub_table的版本号。
current_next_indicator字段被分配1位，当sub_table当前可应用时，字段被设置成1。在字段被设置成0的情况下，这指示还没应用sub_table并且还指示下一个表是有效的。
section_number字段被分配8位并且指示片段的数量。第一片段被赋予0x00的值，对于具有相同table_id、相同transport_stream_id和相同original_network_id的各额外片段，将值递增1。
last_section_number字段被分配8位并且指示各个sub_table的最后一个片段的数量(即，最高的section_number字段)，其中，这个字段对应于sub_table的一部分。
original_network_id字段是16位字段，对应于用于验证传输***的network_id的标记。
service_id字段是16位字段，用作将对应服务与包括在TS中的其它服务区分开的标记。这与program_map_section的program_number相同。
EIT_schedule_flag字段是1位字段，当它被设置成1时，指示对应服务的EIT调度信息被包括在当前TS中。当被设置成0时，它指示没有包括服务。
EIT_present_following_flag字段是1位字段，当它被设置成1时，指示对应服务的EIT_present_following信息被包括在当前TS中。当被设置成0时，它指示在当前TS中没有包括EIT_present_following信息。
running_status字段是3位字段，指示服务的状态。
free_CA_mode字段是1位字段，当它被设置成0时，指示对应服务的所有组成流没有被扰动。当被设置成1时，它指示一个或多个流正在受CA***控制。
descriptors_loop_length字段是12位字段，指示以字节为单位的下面描述符的总长度。
Descriptor()字段可包括针对服务的描述符。上述的立体3D渲染信息描述符和/或view_pair_descriptor可被包括在以上提到的descriptor()字段中。
CRC_32字段是32位字段，指示用于解码器中的寄存器的零输出的CRC值。
图18示出根据本发明的示例性实施方式的user_data_registered_itu_t_t35()。
可通过视频片段传输被包括在立体3D渲染信息描述符中的信息。
在H.264(或AVC)视频的情况下，正包括在立体3D渲染信息描述符中的信息可通过被包括在SEI(补充增强信息)片段中进行传输。在这种情况下，user_identifier和user_structure可被包括在user_data_registered_itu_t_135()中。更具体地，对应信息可替代user_data()从SEI载荷传输。SEI执行MPEG-2的用户数据和图片扩大的功能并且还可类似地构成位置。
图19示出根据本发明的示例性实施方式的user_identifier及其各自的user_structure()和DVB1_data()。
参照图19的(a)，在user_identifier具有“0x47413934(GA94)”的情况下，user_structure()包括DVB1_data()。
参照图19的(b)，DVB1_data()可包括user_data_type_code和/或user_data_type_structure()。
user_data_type_code指示user_data_type_structure()中带有的(或加载的)数据的不同类型。
根据本发明的示例性实施方式，user_data_type_structure()可包括被包括在上述立体3D渲染信息描述符中的信息。
图20示出根据本发明的示例性实施方式的立体3D渲染信息SEI消息。
立体3D渲染信息SEI消息可被包括在上述的user_data_type_structure()中。
立体3D渲染信息SEI消息包括stereo_3D_rendering_info_id字段、stereo_3D_rendering_info_cancel_flag字段、view_pair_id字段、target_parameter_valid_flag字段、target_display_size字段、target_IOD字段、target_viewing_distance字段、rendered_param()字段、num_of_references字段、ref_parameter_valid_flag字段、compensation_type字段、ref_display_size字段、ref_IOD字段、ref_viewing_distance字段、和/或ref_compensation_param()字段。
view_pair_ID字段的值与包括在节目级、频道级、和/或服务级的view_pair_descriptor中的信息相关联并且执行允许参考包括在view_pair_descriptor中的信息的功能。作为view_pair_ID的替代，左图像和右图像中的每个各自的ES的PID还可被直接用信号发送。
Stereo_3D_rendering_info_id字段指示用于识别包括在立体3D渲染信息SEI消息中的信息组合的识别编号。
在Stereo_3D_rendering_info_cancel_flag字段中，在该字段的值等于1的情况下，这指示不再应用已经被应用于前一图片的立体3D渲染信息。
立体3D渲染信息SEI消息字段指示为了通知与视频级的立体3D渲染相关的信息而传输Stereo_3D_rendering_info_data的方法。
将用图12中的上述的各字段的描述来取代剩余字段的描述。
在stereo_3D_rendering info SEI消息被包括在视频数据或深度流的情况下，可通过stereo_3D_rendering_info_data用信号发送关于对应流的图像的3D信息。
可通过SEI RBSP(原始字节序列载荷)接收stereo_3D_rendering_info_data()。在解析AVC NAL单元之后，当nal_unit_type值等于6时，它对应于SEI数据，通过读取payloadType值为4的user_data_registered_itu_t35SEI消息来验证user_identifier值。接收器通过读取user_structure()提取具有0x12的user_data_type_code的数据，其中，user_identifier值对应于0x47413934。通过从对应数据解析stereo_3D_rendering_info_data()，接收器获取与3D图像观看条件相关的信息和用于今后产生虚拟3D图像的信息。
图21示出根据本发明的示例性实施方式的立体3D渲染信息SEI描述符。
立体3D渲染信息SEI描述符可位于PMT的节目级或ES级，并且提供信令信息，使得可预先通过接收器以***级通知关于立体3D渲染信息SEI描述符是否被包括在对应视频中的信息。
立体3D渲染信息SEI描述符可包括Stereo_3D_rendering_info_SEI_message_exist_flag字段。
Stereo_3D_rendering_info_SEI_message_exist_flag字段指示可详细通知与立体3D渲染相关的信息的立体3D渲染SEI消息是否被包括在接收到的视频流中。
图22示出根据本发明的示例性实施方式的提供最佳配合屏幕尺寸的立体图像的方法。
在预先选择具有高分布水平的观看条件的情况下，并且在发送端预先形成最佳配合(或适应)的内容的情况下，为了使发送各情况各自的所有立体视图对所需的资源(诸如，带宽)最少，发送端可固定并且只发送一个图像并且可变化地发送剩余图像以最佳配合(或适应)各个屏幕尺寸。
例如，可通过2D频道发送所有接收器正使用的视频元素而不顾及接收器的屏幕尺寸，可通过3D频道发送包括最佳配合各屏幕尺寸的图像的视频元素。在正通过2D频道发送的图像和正通过3D频道发送的图像之中，接收器可组合最佳配合其屏幕尺寸的图像并且可渲染最佳配合其屏幕尺寸的3D图像。
可通过互联网发送包括大屏幕的图像的视频元素。
例如，发送端可通过广播网络发送包括屏幕尺寸为32英寸的接收器的图像的视频元素，发送端可通过互联网发送具有屏幕尺寸为42英寸或52英寸的接收器的图像的视频元素。
图23示出根据本发明的示例性实施方式的用于提供最佳配合观看条件的3D图像的发送方案。
在通过广播网络发送立体图像的情况下，可通过PMT节目级、TVCT频道级、SDT服务级、EIT事件级、和/或视频元素的视频头部来执行立体图像的发送。在通过视频元素的视频头部执行发送的情况下，发送所需的信息可被包括在SEI消息中。
在通过广播网络发送立体图像的情况下，2D频道可发送基础视图视频元素，3D频道可发送可结合从2D频道发送的基础视图视频元素渲染3D图像的另外视图视频元素，或者3D信道可将基础视图视频元素连同另外视图视频元素一起发送。
在通过广播网络发送立体图像的情况下，可经由信令提供针对基础视图视频元素和另外视图视频元素的组合的目标观看条件(例如，观看距离、屏幕尺寸、IOD等)相关的信息。在2D频道的情况下，可不提供被省略的上述信息。尽管在信令信息中不包括视频数据，但可包括可通过执行立体图像合成(或分析)而渲染的虚拟视点各自的条件信息。在信令信息中可包括可经由带外(宽带等)接收的关于另外视图视频元素(例如，提供对应视频元素的IP地址、ES PID、调度信息等)的信息。
在通过互联网或另一个信道(例如，非实时信道)发送立体图像的另外视图视频元素的情况下，并且在使用互联网的情况下，可执行IP层发送和/或视频级发送，并且在使用另一个信道的情况下，可通过PMT节目级、TVCT频道级、SDT服务级、EIT事件级、和/或视频元素的视频头部来执行另外视图视频元素的发送。在通过视频元素的视频头部执行发送的情况下，发送所需的信息可被包括在SEI消息中。
在通过互联网或另一个信道发送立体图像的另外视图视频元素的情况下，可通过以上提到的发送来发送基础图像各自的发送信息(例如，信道信息、PID等)。尽管在发送信息中不存在视频数据，但可借助立体图像合成(或分析)渲染的虚拟视点各自的控制信息可被包括在发送信息中。可参考图24和相应描述中的关于条件信息的细节。被构造成防止另外视图视频元素或其相关发送信息被传统接收器接收的字段可被包括在发送信息中。此字段的示例可包括被隐藏信道、未知服务类型等。
图24示出根据本发明的示例性实施方式的立体3D观看条件信息描述符。
在预先选择了具有高分布水平的观看条件的情况下，并且在发送端预先产生(或形成)最佳配合各观看条件的内容的情况下，为了使发送各情况各自的所有立体视图对所需的资源(诸如，带宽等)最少，发送端可固定并且只发送一个图像并且可通过单独的独立路径实时或非实时地发送剩余图像。
在这种情况下，view pair descriptor()可通过被包括在被发送另外视图视频的信道的发送片段信息中进行发送，3D视图对的构造信息可被包括在view pair descriptor()中。
立体3D观看条件信息描述符可包括base_channel_number字段、base_program_number字段、base_source_id字段、base_network_id字段、base_PID字段、和/或num_of_view_pairs字段。
在只通过当前信道或其它路径传输另外视图的情况下，base_channel_number字段指示发送相关基础视图视频的信道号。
在只通过当前信道或其它路径传输另外视图的情况下，base_program_number字段指示相关基础视图视频的节目号。
在只通过当前信道或其它路径传输另外视图的情况下，base_source_id字段对应于标识相关基础视图视频的源的标识符。
在只通过当前信道或其它路径传输另外视图的情况下，base_network_id字段对应于标识提供相关基础视图视频的网络的标识符。
在只通过当前信道或其它路径传输另外视图的情况下，base_PID字段指示发送相关基础视图视频的分组的PID。
num_of_view_pairs字段指示正提供的立体3D视图的数量。
将用图12中的上述的各字段的描述来取代剩余字段的描述。
图25示出根据本发明的示例性实施方式的提供最佳配合观看条件的3D图像的接收器。
提供适于观看条件的3D图像的接收器可包括调谐器和解调器(25010)、VSB解码器(25020)、传输分组分离器(25030)、第二解码器(25040)、MVC扩展层解码器(25050)、AVC层解码器(25060)、第一解码器(25070)、PSI/PSIP/SI处理器(25080)、视图合成模块(25090)、第一虚拟视图产生器(25100)、第二虚拟视图产生器(25110)、和/或输出格式化器(25120)。
调谐器和解调器(25010)对3D广播信道执行调谐并且解调接收到的信号。
VSB解码器(25020)解码被应用VSB的信号。尽管这个块的名字被称为VSB解码器，但这个块还可被视为解码被应用OFDM的信号的块。
传输分组分离器(25030)划分(或分开)来自广播信号的传输分组。更特别地，这样执行了过滤分组标识符的功能。
第二解码器(25040)解码第二图像(或第二视图)的深度信息。
MVC扩展层解码器(25050)解码第二图像的数据。
AVC层解码器(25060)解码第一图像的数据。
第一解码器(25070)解码第一图像的深度信息。
PSI/PSIP/SI处理器(25080)执行信令信号的处理。例如，这样执行了处理正包括在PSIP或DVB SI中的多样表的功能、或处理信令分组、信令片段等的功能。PSI/PSIP/SI处理器(25080)可执行包括在上述描述符中的处理信息的功能等。
视图合成模块(25090)执行图1或图2中描述的功能。将用图1或图2中的描述取代视图合成模块的详细描述。
第一虚拟视图产生器(25100)基于通过视图合成模块分析(或合成)的信息或数据，渲染第一虚拟视图(或图像)。例如，第一虚拟视图可对应于3D图像中包括的左图像。
第二虚拟视图产生器(25110)基于通过视图合成模块分析(或合成)的信息或数据，渲染第二虚拟视图(或图像)。例如，第二虚拟视图可对应于3D图像中包括的右图像。
输出格式化器(25120)通过组合第一虚拟视图和第二虚拟视图来格式化3D图像。
图26示出根据本发明的示例性实施方式的用于处理3D广播信号的方法。
接收器接收包括3D(三维)内容的广播信号(s26010)。
接收器解析接收到的广播信号中的目标观看条件信息和一个或多个参考观看条件信息(s26020)。本文中，目标观看条件信息包括指示用于观看3D内容的最佳屏幕尺寸的信息、指示用于观看3D内容的最佳观看距离的信息、指示用于观看3D内容的最佳IOD(眼间距离)的信息，参考观看信息包括推荐的屏幕尺寸、推荐的观看距离、推荐的IOD、指示补偿类型信息的信息，补偿类型信息指示计算推荐的屏幕尺寸、推荐的观看距离、推荐的IOD所基于的元素。
接收器接收观众的观看条件信息，并且在接收到的观看条件信息不匹配目标观看条件的情况下，在包括最接近接收到的观看条件信息的信息的参考观看条件信息中包括的补偿类型信息被解析，渲染3D内容，使得可保持由补偿类型信息指示的元素(s26030)。
接收器执行控制操作，使得可显示渲染的3D内容(s26040)。
尽管附图已经被区分和划分以便于描述本发明，但本发明可提供通过组合本发明的前述实施方式中的一些来构造新实施方式的设计。此外，无论何时本领域的技术人员需要，本发明的范围包括设计计算机可读的记录介质，所述计算机具有用于执行本文记录的本发明的上述实施方式的程序。
如上所述，根据本发明的装置和方法可不只限于根据本发明的示例性实施方式的上述构造和方法，因此，可通过完全或部分选择性组合本发明的各示例性实施方式来构造本发明的示例性实施方式的变形形式。
同时，根据本发明的处理与广播节目相关的广播信号的方法可被实现为可由设置在网络装置中、可由处理器读取的记录介质中的处理器读取的代码。可由处理器读取的记录介质包括存储可由处理器读取的数据的所有类型的记录装置。可由处理器读取的记录介质的示例可包括ROM、RAM、CD-ROM、磁带、软盘、光学数据存储装置等。另外，还可包括正以载波(诸如，经由互联网进行传输)形式实现的示例性记录介质。另外，可由处理器读取的记录介质可被分散在通过网络连接的计算机***内。另外，可通过使用散布(分散)方法存储和执行可由处理器读取的代码。
本领域的技术人员应该清楚，可在不脱离本说明书的精神或范围的情况下，在本说明书中进行各种修改和变形。因此，本说明书旨在涵盖本发明的修改形式和变形形式，只要它们落入随附权利要求书及其等同物的范围内。还清楚的是，本说明书的这种变形形式将不被独立于本说明书的技术范围或精神或者与本说明书的技术范围或精神分开理解。
另外，在本发明中同时描述装置发明和方法发明。因此，无论合适需要，可互补地应用这两个发明的描述。
用于执行本发明的模式
如上所述，描述用于执行本发明的模式作为用于执行本发明的最佳模式。
工业可应用性
本发明可用于与提供3DTV广播服务相关的一系列工业领域。

Claims (12)

1.一种用于处理三维3D广播信号的装置，该装置包括：
调谐器，其用于接收包含3D内容的广播信号；
服务信息处理器，其用于解析从接收到的所述广播信号中接收的目标观看条件信息和至少两个参考观看条件信息，
其中，所述目标观看条件信息包括指示用于观看3D内容的最佳屏幕尺寸的信息、指示用于观看3D内容的最佳观看距离的信息、指示用于观看3D内容的最佳眼间距离IOD的信息和基于所述目标观看条件信息渲染所述3D内容的参数信息，
其中，所述至少两个参考观看条件信息中的每一个包括指示参考屏幕尺寸、参考观看距离、参考IOD的信息、补偿类型信息和补偿参数信息，所述补偿类型信息指示收敛角、视差角和观看距离中的、导出所述参考屏幕尺寸、所述参考观看距离、所述参考IOD所基于的元素，所述补偿参数信息包括用于基于所述参考观看条件信息来渲染所述3D内容的参数，
观看分析模块，其用于接收观众的观看条件信息，解析包括在所述至少两个参考观看条件信息中的、包含与接收的观看条件信息最相关的信息的一个参考观看条件信息中的所述补偿类型信息，并且根据用于包含与接收的观看条件信息最相关的信息的所述一个参考观看条件信息的所述补偿参数信息来渲染所述3D内容，使得通过所述补偿类型信息来表达所述元素；以及
输出格式化器，其用于进行控制，使得显示被渲染的所述3D内容。
2.根据权利要求1所述的装置，其中，所述服务信息处理器解析来自SEI消息的所述目标观看条件信息和至少两个参考观看条件信息，所述SEI消息被包括在针对所述3D内容的视频元素的视频头部中。
3.根据权利要求1所述的装置，其中，所述服务信息处理器解析来自节目映射表PMT中包括的立体3D渲染信息描述符的所述目标观看条件信息和至少两个参考观看条件信息。
4.根据权利要求1所述的装置，其中，所述服务信息处理器解析来自虚拟频道表VCT或服务描述表SDT中包括的立体3D渲染信息描述符的所述目标观看条件信息和至少两个参考观看条件信息。
5.根据权利要求1所述的装置，其中，所述参考观看条件信息还包括指示所述参考屏幕尺寸、所述参考观看距离或所述参考IOD是否被有效处理的参考参数有效性信息。
6.根据权利要求1所述的装置，其中，所述补偿参数信息包括指示分别捕获所述3D内容的左图像和右图像的相机之间的距离的信息。
7.一种用于处理三维3D广播信号传输的方法，该方法包括：
产生3D内容的步骤；
产生目标观看条件信息和至少两个参考观看条件信息的步骤，
其中，所述目标观看条件信息包括指示用于观看3D内容的最佳屏幕尺寸的信息、指示用于观看3D内容的最佳观看距离的信息、指示用于观看3D内容的最佳眼间距离IOD的信息和基于所述目标观看条件信息渲染所述3D内容的参数信息，
其中，所述至少两个参考观看条件信息中的每一个包括指示参考屏幕尺寸、参考观看距离、参考IOD的信息、补偿类型信息和补偿参数信息，所述补偿类型信息指示收敛角、视差角和观看距离中的、导出所述参考屏幕尺寸、所述参考观看距离、所述参考IOD所基于的元素，所述补偿参数信息包括用于基于所述参考观看条件信息来渲染所述3D内容的参数，
产生包括所述3D内容及所述目标观看条件信息和所述至少两个参考观看条件信息的广播信号的步骤；以及
传输产生的所述广播信号的步骤，
其中，在接收器中将所述至少两个参考观看条件信息中的一个参考观看条件信息确定为与观众的观看条件信息最相关，并且在所述接收器中使用用于包含与所述观看条件信息最相关的信息的所述一个参考观看条件信息的所述补偿参数信息来渲染所述3D内容。
8.根据权利要求7所述的方法，其中，产生广播信号的步骤包括：
将所述目标观看条件信息和所述至少两个参考观看条件信息***SEI消息的步骤，所述SEI消息被包括在所述3D内容的视频元件的视频头部中。
9.根据权利要求7所述的方法，其中，产生广播信号的步骤包括：
通过将所述目标观看条件信息和所述至少两个参考观看条件信息包括在立体3D渲染信息描述符中来将上述信息***节目映射表PMT中的步骤。
10.根据权利要求7所述的方法，其中，产生广播信号的步骤包括：
通过将所述目标观看条件信息和所述至少两个参考观看条件信息包括在立体3D渲染信息描述符中来将上述信息***虚拟频道表VCT或服务描述表SDT中的步骤。
11.根据权利要求7所述的方法，其中，所述参考观看条件信息还包括指示所述参考屏幕尺寸、所述参考观看距离或所述参考IOD是否被有效处理的参考参数有效性信息。
12.根据权利要求7所述的方法，其中，所述补偿参数信息包括指示分别捕获所述3D内容的左图像和右图像的相机之间的距离的信息。
CN201380041294.6A 2012-06-05 2013-06-05 用于处理3d广播服务的广播信号的方法和装置 Expired - Fee Related CN104584547B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201261655491P 2012-06-05 2012-06-05
US61/655,491 2012-06-05
PCT/KR2013/004983 WO2013183947A1 (ko) 2012-06-05 2013-06-05 3d 방송 서비스를 위한 방송 신호 처리 방법 및 장치

Publications (2)

Publication Number Publication Date
CN104584547A CN104584547A (zh) 2015-04-29
CN104584547B true CN104584547B (zh) 2017-03-08

Family

ID=49712281

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380041294.6A Expired - Fee Related CN104584547B (zh) 2012-06-05 2013-06-05 用于处理3d广播服务的广播信号的方法和装置

Country Status (6)

Country Link
US (1) US9900578B2 (zh)
EP (1) EP2858363A4 (zh)
JP (1) JP6141971B2 (zh)
KR (1) KR102104898B1 (zh)
CN (1) CN104584547B (zh)
WO (1) WO2013183947A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9292329B2 (en) * 2011-02-10 2016-03-22 Microsoft Technology Licensing, Llc Virtual switch interceptor
US20160269711A1 (en) * 2014-02-21 2016-09-15 Lg Electronics Inc. Method and apparatus for processing 3-dimensional broadcasting signal
KR20160092362A (ko) * 2015-01-27 2016-08-04 한국전자통신연구원 3d 방송 서비스 제공 방법 및 상기 방법을 수행하는 3d 방송 제공 장치
CA2977718C (en) * 2015-04-27 2022-04-12 Sharp Kabushiki Kaisha Service signaling extensions
WO2016204323A1 (ko) * 2015-06-17 2016-12-22 (주)에프엑스기어 사용자 시점 연동형 영상 처리 장치 및 그 방법
MX2022004795A (es) * 2016-10-12 2022-12-16 Fraunhofer Ges Forschung Transmisión continua espacialmente desigual.

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101919259A (zh) * 2008-03-25 2010-12-15 三星电子株式会社 提供和再现三维视频内容的方法和设备及其记录介质

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2306826A (en) 1995-10-18 1997-05-07 Sharp Kk Display, method of calibrating an observer tracking display and observer tracking autostereoscopic 3D display
JPH09238367A (ja) 1996-02-29 1997-09-09 Matsushita Electric Ind Co Ltd テレビジョン信号送信方法，テレビジョン信号送信装置，テレビジョン信号受信方法，テレビジョン信号受信装置，テレビジョン信号送信受信方法，テレビジョン信号送信受信装置
US8269822B2 (en) 2007-04-03 2012-09-18 Sony Computer Entertainment America, LLC Display viewing system and methods for optimizing display view based on active tracking
CA2727569C (en) * 2008-06-09 2017-09-26 Vidyo, Inc. Improved view layout management in scalable video and audio communication systems
JP2010045584A (ja) 2008-08-12 2010-02-25 Sony Corp 立体画像補正装置、立体画像補正方法、立体画像表示装置、立体画像再生装置、立体画像提供システム、プログラム及び記録媒体
KR101623020B1 (ko) * 2009-02-01 2016-05-20 엘지전자 주식회사 방송 수신기 및 3ｄ 비디오 데이터 처리 방법
JP4576570B1 (ja) * 2009-06-08 2010-11-10 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 端末装置及びプログラム
CN105025309A (zh) * 2009-06-16 2015-11-04 Lg电子株式会社 广播发射机及其3d视频数据处理方法
BRPI1005171A2 (pt) * 2009-06-17 2019-07-02 Panasonic Corp meio de gravação de informações e dispositivo de reprodução destinado à reprodução de imagens em 3d
US8629899B2 (en) * 2009-08-06 2014-01-14 Qualcomm Incorporated Transforming video data in accordance with human visual system feedback metrics
WO2011033423A1 (en) * 2009-09-16 2011-03-24 Koninklijke Philips Electronics N.V. 3d screen size compensation
JP2011146828A (ja) * 2010-01-13 2011-07-28 Sony Corp データ構造、記録装置および記録方法、再生装置および再生方法、並びにプログラム
JP2011259289A (ja) * 2010-06-10 2011-12-22 Fa System Engineering Co Ltd 視聴状況対応３ｄ表示装置および３ｄ表示方法
JP5500645B2 (ja) * 2010-06-25 2014-05-21 Ｋｄｄｉ株式会社 映像調整装置、テレビ受信装置及びプログラム
EP2586209A1 (en) * 2010-06-28 2013-05-01 Thomson Licensing Method and apparatus for customizing 3-dimensional effects of stereo content
KR20120023268A (ko) 2010-09-01 2012-03-13 삼성전자주식회사 디스플레이 장치 및 그 영상 생성 방법
WO2012060569A2 (ko) 2010-11-02 2012-05-10 엘지전자 주식회사 디지털 방송 신호 수신 장치 및 방법
US9237331B2 (en) * 2011-01-18 2016-01-12 Disney Enterprises, Inc. Computational stereoscopic camera system
KR101028930B1 (ko) * 2011-01-19 2011-04-12 조용성 화면크기 보다 확장된 크기의 영상을 제공하는 영상신호 출력장치

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101919259A (zh) * 2008-03-25 2010-12-15 三星电子株式会社 提供和再现三维视频内容的方法和设备及其记录介质

Also Published As

Publication number Publication date
WO2013183947A1 (ko) 2013-12-12
US20150116455A1 (en) 2015-04-30
EP2858363A1 (en) 2015-04-08
JP6141971B2 (ja) 2017-06-07
EP2858363A4 (en) 2015-12-09
JP2015524209A (ja) 2015-08-20
KR20150023329A (ko) 2015-03-05
CN104584547A (zh) 2015-04-29
KR102104898B1 (ko) 2020-04-27
US9900578B2 (en) 2018-02-20

Similar Documents

Publication Publication Date Title
US9554198B2 (en) Digital broadcast receiving method providing two-dimensional image and 3D image integration service, and digital broadcast receiving device using the same
CN104584547B (zh) 用于处理3d广播服务的广播信号的方法和装置
US8248461B2 (en) Receiving system and method of processing data
US20160065935A1 (en) Method for processing three dimensional (3d) video signal and digital broadcast receiver for performing the method
EP2744214A2 (en) Transmitting device, receiving device, and transceiving method thereof
US9516294B2 (en) Digital broadcasting reception method capable of displaying stereoscopic image, and digital broadcasting reception apparatus using same
US20130002819A1 (en) Receiving system and method of processing data
US9628780B2 (en) Device and method for receiving digital broadcast signal
CA2819141C (en) Receiving device and method for receiving multiview three-dimensional broadcast signal
US9516086B2 (en) Transmitting device, receiving device, and transceiving method thereof
US9872041B2 (en) Method and apparatus for transceiving image component for 3D image
CA2845780C (en) Digital broadcast signal processing method and device
KR20110126101A (ko) 방송 수신기 및 3ｄ 비디오 데이터 처리 방법
EP2822282B1 (en) Signal processing device and method for 3d service
KR101844236B1 (ko) 3d (3-dimentional) 방송 서비스를 위한 방송 신호 송수신 방법 및 장치
US9866814B2 (en) Method of synchronizing reference image with additional image of real-time broadcasting program, and transceiver system for performing same
JP5684415B2 (ja) デジタル放送信号受信装置およびデジタル放送信号受信方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170308

Termination date: 20210605