JP5510097B2 - 信号伝送方法、信号送信装置および信号受信装置 - Google Patents
信号伝送方法、信号送信装置および信号受信装置 Download PDFInfo
- Publication number
- JP5510097B2 JP5510097B2 JP2010136901A JP2010136901A JP5510097B2 JP 5510097 B2 JP5510097 B2 JP 5510097B2 JP 2010136901 A JP2010136901 A JP 2010136901A JP 2010136901 A JP2010136901 A JP 2010136901A JP 5510097 B2 JP5510097 B2 JP 5510097B2
- Authority
- JP
- Japan
- Prior art keywords
- content
- display section
- image display
- stereoscopic image
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/27—Server based end-user applications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
- H04N13/178—Metadata, e.g. disparity information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/194—Transmission of image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Library & Information Science (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Details Of Television Systems (AREA)
- Television Systems (AREA)
Description
この発明は、信号伝送方法、信号送信装置および信号受信装置に関し、特に、ネットワークを通じてコンテンツを配信する信号伝送方法等に関する。
ネットワークを通じて3Dコンテンツを配信することが考えられている。3Dコンテンツは、全て3D信号で作られるとは限らない。3D信号は部分的に用いられる可能性がある。これは、長時間のコンテンツの場合、視聴者は常に3Dでは疲れるし、コンテンツ制作も全て3Dでは高くつくし、さらに、3D表現が効果的である映像は限られている。
3D対応端末と非対応端末向けのコンテンツは別コンテンツとして、あらかじめ端末の3D対応・非対応の確認をした上で、前者には3Dを含むコンテンツ、後者には2Dコンテンツを供給する、という方針でよい。3D対応端末のユーザが3D番組を視聴する場合でも、必ずしも3Dで見たいとは限らない。そのため、3D対応端末では、ユーザが2D視聴と3D視聴を選択、切り替えられるようにすることが求められる。またこの場合に2D視聴の画質も通常の2Dコンテンツと同等であることが望ましい。
2D、3Dの切り替えが発生するコンテンツの場合、端末は切り替えをリアルタイムに行えず有意の時間を要する可能性があることを考慮する必要がある。ここで、有意の時間を要するとは、視聴者が、その切り替えに気がつくということである。
例えば、特許文献1および特許文献2には、3D対応受信機で、2Dと3Dとを切り替えて表示させるための技術が記載されている。
3D対応端末である場合、配信される3Dコンテンツについて、全編が3D(立体)画像表示区間であるか部分的に3D画像表示区間であるか、また、部分的に3D画像表示区間である場合、先頭が3D画像表示区間であるか2D(二次元)画像表示区間であるかの情報を、コンテンツの再生に先立って知ることができれば便利である。
3D対応端末は、3Dコンテンツの最初に合わせた処理状態に事前に準備しておいて、3Dコンテンツの再生、表示にかかる時間を短縮することが可能となる。また、配信される3Dコンテンツについて全編が3D画像表示区間であることが分かれば、その後に、2D画像表示区間と3D画像表示区間の切り替えを監視することが必要なく、処理不可が軽減される。また、配信される3Dコンテンツについて部分的に3D画像表示区間であることが分かれば、2D画像表示区間と3D画像表示区間の切り替えを監視する処理状態に事前に準備しておくことが可能となる。
この発明の目的は、コンテンツが配信される3D対応端末の処理の便宜を図ることにある。
この発明の概念は、
ネットワークを通じて配信するコンテンツの少なくとも一部において立体画像を表示する立体画像表示区間が含まれている場合に、
上記コンテンツの立体画像表示区間が全体であるか一部であるかを示すと共に、上記コンテンツの立体画像表示区間が一部であるときにはさらに先頭の表示区間が立体画像表示区間であるか二次元画像表示区間であるかを示すコンテンツ情報を、上記コンテンツと併せて伝送する
信号伝送方法にある。
ネットワークを通じて配信するコンテンツの少なくとも一部において立体画像を表示する立体画像表示区間が含まれている場合に、
上記コンテンツの立体画像表示区間が全体であるか一部であるかを示すと共に、上記コンテンツの立体画像表示区間が一部であるときにはさらに先頭の表示区間が立体画像表示区間であるか二次元画像表示区間であるかを示すコンテンツ情報を、上記コンテンツと併せて伝送する
信号伝送方法にある。
この発明において、コンテンツはネットワークを通じて配信される。このコンテンツには、少なくとも一部において立体画像を表示する立体画像表示区間が含まれている。このコンテンツと併せてコンテンツ情報が伝送される。このコンテンツ情報は、コンテンツの立体画像表示区間が全体であるか一部であるかを示すと共に、コンテンツの立体像表示区間が一部であるときにはさらに先頭の表示区間が立体画像表示区間であるか二次元画像表示区間であるかを示す情報である。
例えば、コンテンツ情報は、コンテンツの再生に先立って配信される情報の内部に記述されて伝送される。また、例えば、コンテンツ情報は、コンテンツの内部に記述されて伝送される。ここで、コンテンツがMP4コンテナで伝送される場合、このコンテンツ情報はmoovコンテナの内部に記述されて伝送される。
このように、この発明においては、コンテンツと併せて、コンテンツの3D(立体)画像表示区間が全体であるか一部であるかを示すと共に、コンテンツの3D画像表示区間が一部であるときにはさらに先頭の表示区間が3D画像表示区間であるか2D(二次元)画像表示区間であるかを示すコンテンツ情報が伝送される。そのため、3D対応端末は、配信されるコンテンツについて、全体が3D画像表示区間であるか部分的に3D画像表示区間であるか、また、部分的に3D画像表示区間である場合、先頭が3D画像表示区間であるか2D画像表示区間であるかの情報を、このコンテンツ情報によりコンテンツの再生に先立って容易に知ることが可能となる。
また、この発明において、例えば、コンテンツの立体画像表示区間が一部であるとき、立体画像表示区間と二次元画像表示区間の切り換えタイミングに関する切り換え情報をコンテンツと併せて伝送する、ようにされてもよい。この場合、例えば、切り換え情報をコンテンツの内部に記述して伝送する、ようにしてもよい。この場合、3D対応端末は、コンテンツの3D画像表示区間と2D画像表示区間との切り替えタイミングを、このコンテンツと併せて伝送される切り替え情報により容易に知ることが可能となる。
また、この発明の他の概念は、
少なくとも一部において立体画像を表示する立体画像表示区間が含まれているコンテンツと、上記コンテンツの立体画像表示区間が全体であるか一部であるかを示すと共に、上記コンテンツの立体像表示区間が一部であるときにはさらに先頭の表示区間が立体画像表示区間であるか二次元画像表示区間であるかを示すコンテンツ情報を、ネットワークを通じて受信する受信部と、
上記受信部で受信される上記コンテンツを処理して表示画像を得るコンテンツ処理部と、
上記コンテンツ処理部が上記コンテンツの処理を開始する前に、上記受信部で受信される上記コンテンツ情報に基づいて、上記コンテンツ処理部を制御する制御部と
を備える信号受信装置にある。
少なくとも一部において立体画像を表示する立体画像表示区間が含まれているコンテンツと、上記コンテンツの立体画像表示区間が全体であるか一部であるかを示すと共に、上記コンテンツの立体像表示区間が一部であるときにはさらに先頭の表示区間が立体画像表示区間であるか二次元画像表示区間であるかを示すコンテンツ情報を、ネットワークを通じて受信する受信部と、
上記受信部で受信される上記コンテンツを処理して表示画像を得るコンテンツ処理部と、
上記コンテンツ処理部が上記コンテンツの処理を開始する前に、上記受信部で受信される上記コンテンツ情報に基づいて、上記コンテンツ処理部を制御する制御部と
を備える信号受信装置にある。
この発明において、受信部により、コンテンツが受信されると共に、コンテンツ情報が受信される。このコンテンツ情報は、コンテンツの3D(立体)画像表示区間が全体であるか一部であるかを示すと共に、コンテンツの3D画像表示区間が一部であるときにはさらに先頭の表示区間が3D画像表示区間であるか2D(二次元)画像表示区間であるかを示す情報である。
コンテンツ処理部により、受信部で受信されるコンテンツに対して再生処理が行われる。この再生処理により、表示画像データが得られる。この場合、コンテンツの3D画像表示区間では、3D画像データを構成する左眼画像データおよび右眼画像データが得られる。また、2次元画像表示区間では、2D画像データが得られる。
制御部により、受信部で受信されるコンテンツ情報に基づいて、コンテンツ処理部が制御される。この場合、制御部は、コンテンツ情報により、全体が3D画像表示区間であるか部分的に3D画像表示区間であるか、また、部分的に3D画像表示区間である場合、先頭が3D画像表示区間であるか2D画像表示区間であるかを知ることができる。そのため、例えば、コンテンツ処理部は、コンテンツの再生に先立って、コンテンツの最初に合わせた処理状態に制御される。
このように、この発明においては、コンテンツと併せて、コンテンツの3D画像表示区間が全体であるか一部であるかを示すと共に、コンテンツの3D画像表示区間が一部であるときにはさらに先頭の表示区間が3D画像表示区間であるか2D画像表示区間であるかを示すコンテンツ情報が受信され、このコンテンツ情報に基づいて、コンテンツ処理部が制御される。そのため、例えば、コンテンツ処理部を、コンテンツの再生に先立って、コンテンツの最初に合わせた処理状態に制御でき、コンテンツの再生、表示にかかる時間を短縮することが可能となる。
この発明によれば、コンテンツと併せて、コンテンツの3D(立体)画像表示区間が全体であるか一部であるかを示すと共に、コンテンツの3D画像表示区間が一部であるときにはさらに先頭の表示区間が3D画像表示区間であるか2D(二次元)画像表示区間であるかを示すコンテンツ情報が伝送されるものであり、コンテンツが配信される3D対応端末の処理の便宜を図ることができる。
以下、発明を実施するための形態(以下、「実施の形態」とする)について説明する。なお、説明を以下の順序で行う。
1.実施の形態
2.変形例
1.実施の形態
2.変形例
<1.実施の形態>
[コンテンツの送信形態]
この実施の形態においては、IPTV(Internet ProtocolTelevision)サーバ等のコンテンツサーバからネットワーク、例えばインターネットを介して、3D対応端末(受信機)に、コンテンツが配信される。最初に、この実施の形態で想定するコンテンツの送信形態(タイプ1〜タイプ4)について説明する。
[コンテンツの送信形態]
この実施の形態においては、IPTV(Internet ProtocolTelevision)サーバ等のコンテンツサーバからネットワーク、例えばインターネットを介して、3D対応端末(受信機)に、コンテンツが配信される。最初に、この実施の形態で想定するコンテンツの送信形態(タイプ1〜タイプ4)について説明する。
「タイプ1(Type1)について」
最初に、「タイプ1」を説明する。図1は、この「タイプ1」の送信形態を概念的に示している。この「タイプ1」においては、3Dのコンテンツは、全て3Dストリームのみの1ファイルで構成されている。2Dのコンテンツは、無いか、あっても直接的な結びつきが無い単なる別コンテンツとして用意される。
最初に、「タイプ1」を説明する。図1は、この「タイプ1」の送信形態を概念的に示している。この「タイプ1」においては、3Dのコンテンツは、全て3Dストリームのみの1ファイルで構成されている。2Dのコンテンツは、無いか、あっても直接的な結びつきが無い単なる別コンテンツとして用意される。
この「タイプ1」は、3Dのコンテンツのあり方としては基本的なものである。全編が3Dストリームであるので、ストリームに2D、3Dを示す制御信号を埋め込まなくてもよく、あるいは、3D対応端末では制御信号を監視する必要がない。しかし、コンテンツ全体を3Dとして制作すると自由度が奪われ、制作コストが高くなる。
この「タイプ1」は、伝送方式としてノンスケーラブル3D方式を適用する場合、3D対応端末において、3Dストリームから2D映像を生成するとき、ストリームの半分の画像データのみを用いて2D映像を生成するため、画質が劣化する。このノンスケーラブル3D方式には、サイドバイサイド(Side By Side;SBS)方式、トップアンドボトム(Top &Bottom)方式などがある。
また、この「タイプ1」は、伝送フ方式としてスケーラブル3D方式を適用する場合、3D対応端末における2D映像の視聴は、画質を劣化させること無く、かつシームレスに行うことが可能である。このスケーラブル3D方式には、MVC(Multi View Coding)方式などがある。
「タイプ2(Type2)について」
次に、「タイプ2」を説明する。図2は、この「タイプ2」の送信形態を概念的に示している。この「タイプ2」は、ノンスケーラブル3D方式の場合に適用が想定される送信形態である。この「タイプ2」においては、3Dのコンテンツは、全て3Dストリームのみの1ファイルで構成されている。この3Dのコンテンツと対応付けされている2Dのコンテンツ(サイマル2Dコンテンツ)により、3Dから2Dへの切り替えを可能にした送信形態である。
次に、「タイプ2」を説明する。図2は、この「タイプ2」の送信形態を概念的に示している。この「タイプ2」は、ノンスケーラブル3D方式の場合に適用が想定される送信形態である。この「タイプ2」においては、3Dのコンテンツは、全て3Dストリームのみの1ファイルで構成されている。この3Dのコンテンツと対応付けされている2Dのコンテンツ(サイマル2Dコンテンツ)により、3Dから2Dへの切り替えを可能にした送信形態である。
この「タイプ2」は、「タイプ1」と同様に、コンテンツ全体を全て3Dとして制作すると、自由度が奪われ、制作コストが高くなる。しかし、この「タイプ2」は、「タイプ1」の場合と異なり、サイマル2Dコンテンツの利用により、ノンスケーラブル3D方式の場合にも、3D対応端末において、3Dから2Dへの切り替えを行っても。本来の画質でサービスを提供できる。ただし、3Dのコンテンツとサイマル2Dコンテンツのペアリングの情報が必要となる共に、それに伴う運用と実装が複雑となる。
「タイプ3(Type3)について」
次に、「タイプ3」を説明する。図3は、この「タイプ3」の送信形態を概念的に示している。この「タイプ3」においては、コンテンツの一部が3D画像表示区間となっている。つまり、この「タイプ3」においては、1つのコンテンツに、3D画像表示区間と2D画像表示区間が含まれている。
次に、「タイプ3」を説明する。図3は、この「タイプ3」の送信形態を概念的に示している。この「タイプ3」においては、コンテンツの一部が3D画像表示区間となっている。つまり、この「タイプ3」においては、1つのコンテンツに、3D画像表示区間と2D画像表示区間が含まれている。
この「タイプ3」は、ストリーム上に2Dストリームと3Dストリームとを識別する制御信号を埋め込む必要があり、3D対応端末は、この制御信号を監視して、2D再生、3D再生を切り替える必要がある。
また、この「タイプ3」は、ノンスケーラブル3D方式を適用する場合には、3D対応端末において、3D画像表示区間での2D画像の視聴は、ストリームの半分のみを用いて2D映像を生成するので画質が劣化する。また、この「タイプ3」は、スケーラブル3D方式の場合には、3D対応端末における2D映像の視聴は、画質を劣化させることなく、シームレスに行うことが可能である。
「タイプ4(Type4)について」
次に、「タイプ4」を説明する。図4は、この「タイプ4」の送信形態を概念的に示している。この「タイプ4」は、ノンスケーラブル3D方式の場合に適用が想定される送信形態である。この「タイプ4」においては、「タイプ3」に対して、サイマル2Dコンテンツを加えることにより、3D対応端末において、3D画像表示区間での2D画像の視聴を、画質劣化なく行うことが可能となる。
次に、「タイプ4」を説明する。図4は、この「タイプ4」の送信形態を概念的に示している。この「タイプ4」は、ノンスケーラブル3D方式の場合に適用が想定される送信形態である。この「タイプ4」においては、「タイプ3」に対して、サイマル2Dコンテンツを加えることにより、3D対応端末において、3D画像表示区間での2D画像の視聴を、画質劣化なく行うことが可能となる。
この「タイプ4」において、3D対応端末は、基本的に3D映像を視聴する場合には部分3Dコンテンツを利用する。また、この「タイプ4」において、2D画像を視聴する場合には、3D非対応端末を含め、サイマル2Dコンテンツを利用する。また、この「タイプ4」において、3D映像から2D映像に切り替える場合には、3D対応端末は、サイマル2Dコンテンツを利用する。
[メタ情報、制御信号]
この実施の形態においては、コンテンツサーバからの上述した各送信形態のコンテンツの伝送に併せて、3Dに係るメタ情報および制御信号も伝送される。これらメタ情報および制御信号は、受信側において、上述したタイプ1〜タイプ4の送信形態に対処するために用いられる。メタ情報および制御信号のそれぞれを説明する。
この実施の形態においては、コンテンツサーバからの上述した各送信形態のコンテンツの伝送に併せて、3Dに係るメタ情報および制御信号も伝送される。これらメタ情報および制御信号は、受信側において、上述したタイプ1〜タイプ4の送信形態に対処するために用いられる。メタ情報および制御信号のそれぞれを説明する。
「メタ情報」
メタ情報は、コンテンツ全体に関する情報である。このメタ情報には、コンテンツ全体が3Dであるか部分的に3Dであるかを示す情報が含まれる。また、このメタ情報には、部分的に3Dである場合には、さらに先頭が2Dであるか3Dであるかを示す情報が含まれる。また、このメタ情報には、コンテンツが3Dである場合に、3Dの伝送方式を識別する情報が含まれる。3Dの伝送方式には、サイドバイサイド(Side By Side)方式、トップアンドボトム(Top & Bottom)方式、フレームシーケンシャル(Frame Sequential)方式、MVC(Multi View Coding)などがある。
メタ情報は、コンテンツ全体に関する情報である。このメタ情報には、コンテンツ全体が3Dであるか部分的に3Dであるかを示す情報が含まれる。また、このメタ情報には、部分的に3Dである場合には、さらに先頭が2Dであるか3Dであるかを示す情報が含まれる。また、このメタ情報には、コンテンツが3Dである場合に、3Dの伝送方式を識別する情報が含まれる。3Dの伝送方式には、サイドバイサイド(Side By Side)方式、トップアンドボトム(Top & Bottom)方式、フレームシーケンシャル(Frame Sequential)方式、MVC(Multi View Coding)などがある。
また、メタ情報には、コンテンツが3Dである場合に、サイマル2Dコンテンツを含むか否かの情報が含まれる。なお、サイマル2Dコンテンツが、コンテンツを配信するコンテンツサーバの内部で3Dコンテンツと同一のフォルダに存在しない場合もある。その場合、メタ情報には、サイマル2Dコンテンツの配信元のURL(Uniform Resource Locator)も含まれる。
「制御信号」
制御信号は、映像ストリームや音声ストリーム(AVストリーム)を直接制御するための信号である。この制御信号には、コンテンツが部分的に3Dである場合に、2Dと3Dを識別する信号が含まれる。この識別信号は、2Dと3Dの切り替えタイミングに関する切り替え情報である。
制御信号は、映像ストリームや音声ストリーム(AVストリーム)を直接制御するための信号である。この制御信号には、コンテンツが部分的に3Dである場合に、2Dと3Dを識別する信号が含まれる。この識別信号は、2Dと3Dの切り替えタイミングに関する切り替え情報である。
[メタ情報、制御信号の挿入位置]
メタ情報、制御信号の挿入位置について説明する。最初にメタ情報の挿入位置について説明する。メタ情報は、例えば、メタファイルの内部に挿入される(第1の方法)。また、メタ情報は、例えば、MP4コンテナ内部に挿入される(第2の方法)。また、制御信号は、MPEG4−AVCのビデオデータストリームを構成する各アクセスユニットのヘッダ部に挿入される。
メタ情報、制御信号の挿入位置について説明する。最初にメタ情報の挿入位置について説明する。メタ情報は、例えば、メタファイルの内部に挿入される(第1の方法)。また、メタ情報は、例えば、MP4コンテナ内部に挿入される(第2の方法)。また、制御信号は、MPEG4−AVCのビデオデータストリームを構成する各アクセスユニットのヘッダ部に挿入される。
「メタ情報の挿入位置(第1の例)」
図5は、メタ情報の挿入位置の第1の例を示す説明図である。この例では、コンテンツを再生するためのライセンス取得情報、コンテンツ取得情報などを含むメタファイル170に、メタ情報が記述されたメタ情報171が挿入されている。この場合、受信機は、メタファイル170からライセンス取得情報を得て、3Dコンテンツを再生するためのライセンスを取得する。また、この場合、受信機は、メタファイル170からコンテンツ取得情報を得て、3Dコンテンツを取得する。
図5は、メタ情報の挿入位置の第1の例を示す説明図である。この例では、コンテンツを再生するためのライセンス取得情報、コンテンツ取得情報などを含むメタファイル170に、メタ情報が記述されたメタ情報171が挿入されている。この場合、受信機は、メタファイル170からライセンス取得情報を得て、3Dコンテンツを再生するためのライセンスを取得する。また、この場合、受信機は、メタファイル170からコンテンツ取得情報を得て、3Dコンテンツを取得する。
なお、受信機は、メタファイル170に含まれる取得情報によりサイマル2Dコンテンツを再生するためのライセンス取得情報、コンテンツ取得情報などを含むメタファイル174を取得することもある。この場合、受信機は、メタファイル174からライセンス取得情報を得て、サイマル2Dコンテンツを再生するためのライセンスを取得し、また、メタファイル174からコンテンツ取得情報を得て、サイマル2Dコンテンツを取得する。
図6は、メタ情報171の記述例を示している。タグ<Stereoscopic_control>で囲まれた部分は、3Dの伝送方式を示す。この記述例では、「side_by_side」と記述されており、3Dの伝送方式がサイドバイサイド方式であることが示されている。例えば、トップアンドボトム方式である場合には「top_and_bottom」と記述され、MVC方式である場合には「mvc」と記述される。
また、タグ<status3d2d>で囲まれた部分は、コンテンツ全体が3Dであるか部分的に3Dであるかを示すと共に、部分的に3Dである場合には、さらに先頭が2Dであるか3Dであるかを示す。この記述例では、「partial3d_start3d」と記述されており、部分的に3Dであって先頭が3Dであることが示されている。例えば、コンテンツ全体が3Dである場合には「entire3d」と記述され、部分的に3Dであって先頭が2Dである場合には「partial3d_start2d」と記述される。
また、タグ<simul_2d_url>で囲まれた部分は、サイマル2Dコンテンツの配信元のURL(Uniform Resource Locator)を示す。なお、サイマル2Dコンテンツが存在しない場合は、この部分は記述されない。
「メタ情報の挿入位置(第2の例)」
図7は、メタ情報の挿入位置の第2の例を示す説明図である。この例は、MP4コンテナの内部にメタ情報を記述する場合について示している。図7では、moovコンテナの内部に「uuid CF3D」というユーザ定義のメタデータを用意し、この「uuid CF3D」にメタ情報を記述する。
図7は、メタ情報の挿入位置の第2の例を示す説明図である。この例は、MP4コンテナの内部にメタ情報を記述する場合について示している。図7では、moovコンテナの内部に「uuid CF3D」というユーザ定義のメタデータを用意し、この「uuid CF3D」にメタ情報を記述する。
図8は、メタ情報の挿入位置の第2の例におけるメタ情報の記述例を示している。この例は、MP4コンテナ内部にメタ情報を記述する場合のバイナリでの記述例である。図8には、それぞれの領域の長さ(ビット数)を併せて示している。なお、各領域の長さ(ビット数)は、この例に示したものに限定されないことは勿論である。
最初の「3D_2D_status」は、コンテンツ全体が3Dであるか部分的に3Dであるかを示すと共に、部分的に3Dである場合には、さらに先頭が2Dであるか3Dであるかを示す。「3D_2D_status=00」と記述されるときは、コンテンツは2Dのみであることを示す。また、「3D_2D_status=01」と記述されるときは、コンテンツ全体が3Dであることを示す。また、「3D_2D_status=10」と記述されるときは、部分的に3Dであって先頭が2Dであることを示す。さらに、「3D_2D_status=11」と記述されるときは、部分的に3Dであって先頭が3Dであることを示す。
次の「2D_simul_flag」は、サイマル2Dコンテンツがあるか否かを示す。「2D_Simul_flag=1」と記述されるときは、サイマル2Dコンテンツがあることを示す。また、「2D_Simul_flag=0」と記述されるときは、サイマル2Dコンテンツがないことを示す。
次の「3D_method_type」は、3Dの伝送方式を示す。「3D_method_type=0001」と記述されるときは、サイドバイサイド(SBS)方式を示す。また、「3D_method_type=0010」と記述されるときは、トップアンドボトム(T&B)方式を示す。また、「3D_method_type=0011」と記述されるときは、フレームシーケンシャル(FSQ)方式を示す。さらに、「3D_method_type=0100」と記述されるときは、MVC方式を示す。
次のif文以降は、「2D_Simul_flag=1」の場合に有効になる。「url_length」には後段のURL情報の長さについての情報が記述され、「url_text」には、サイマル2Dコンテンツの参照先のURL情報が記述される。
「制御信号の挿入位置」
図9は、制御信号の挿入位置を示す説明図である。この例では、MPEG4−AVCのビデオデータストリームを構成する各ユニットのヘッダ部に、制御信号が挿入される。この制御信号には、上述したように、部分的に3Dである場合に、2Dと3Dを識別する信号(切り替え情報)が含まれる。
図9は、制御信号の挿入位置を示す説明図である。この例では、MPEG4−AVCのビデオデータストリームを構成する各ユニットのヘッダ部に、制御信号が挿入される。この制御信号には、上述したように、部分的に3Dである場合に、2Dと3Dを識別する信号(切り替え情報)が含まれる。
図9に示すように、制御信号は、アクセスユニットの“SELs”の部分に、「FramePacking Arrangement SEI message」として、挿入される。なお、図9(a)は、GOP(Group Of Pictures)の先頭のアクセスユニットを示しており、図9(b)は、GOPの先頭以外のアクセスユニットを示している。
[コンテンツサーバのファイル構成例]
図10は、上述の「タイプ1」の送信形態におけるコンテンツサーバのファイル構成例を概略的に示している。図10(a)は、メタ情報の挿入位置が第1の例である場合を示している。この場合、コンテンツサーバは、全体が3Dコンテンツのファイルと共に、メタ情報が挿入されたメタファイルを有している。一方、図10(b)は、メタ情報の挿入位置が第2の例である場合を示している。この場合、コンテンツサーバは、メタ情報が挿入された全体が3Dコンテンツのファイルを有するが、メタ情報が挿入されたメタファイルを有していない。
図10は、上述の「タイプ1」の送信形態におけるコンテンツサーバのファイル構成例を概略的に示している。図10(a)は、メタ情報の挿入位置が第1の例である場合を示している。この場合、コンテンツサーバは、全体が3Dコンテンツのファイルと共に、メタ情報が挿入されたメタファイルを有している。一方、図10(b)は、メタ情報の挿入位置が第2の例である場合を示している。この場合、コンテンツサーバは、メタ情報が挿入された全体が3Dコンテンツのファイルを有するが、メタ情報が挿入されたメタファイルを有していない。
また、図11は、上述の「タイプ2」の送信形態におけるコンテンツサーバのファイル構成例を概略的に示している。図11(a)は、メタ情報の挿入位置が第1の例である場合を示している。この場合、コンテンツサーバは、全体が3Dコンテンツのファイル、サイマル2Dコンテンツのファイルと共に、メタ情報が挿入されたメタファイルを有している。一方、図11(b)は、メタ情報の挿入位置が第2の例である場合を示している。この場合、コンテンツサーバは、メタ情報が挿入された全体が3Dコンテンツのファイル、サイマル2Dコンテンツのファイルを有するが、メタ情報が挿入されたメタファイルを有していない。
また、図12は、上述の「タイプ3」の送信形態におけるコンテンツサーバのファイル構成例を概略的に示している。図12(a)は、メタ情報の挿入位置が第1の例である場合を示している。この場合、コンテンツサーバは、部分的に3Dコンテンツのファイルと共に、メタ情報が挿入されたメタファイルを有している。一方、図12(b)は、メタ情報の挿入位置が第2の例である場合を示している。この場合、コンテンツサーバは、メタ情報が挿入された部分的に3Dコンテンツのファイルを有するが、メタ情報が挿入されたメタファイルを有していない。
また、図13は、上述の「タイプ4」の送信形態におけるコンテンツサーバのファイル構成例を概略的に示している。図13(a)は、メタ情報の挿入位置が第1の例である場合を示している。この場合、コンテンツサーバは、部分的に3Dコンテンツのファイル、サイマル2Dコンテンツのファイルと共に、メタ情報が挿入されたメタファイルを有している。一方、図13(b)は、メタ情報の挿入位置が第2の例である場合を示している。この場合、コンテンツサーバは、メタ情報が挿入された部分的に3Dコンテンツのファイル、サイマル2Dコンテンツのファイルを有するが、メタ情報が挿入されたメタファイルを有していない。
[コンテンツサーバの構成]
図14は、コンテンツサーバ10の構成例を示している。コンテンツサーバ10は、コンテンツ保存部151と、メタ情報生成部152と、制御信号生成部153と、エンコード部154と、送信部155と、を含んで構成される。
図14は、コンテンツサーバ10の構成例を示している。コンテンツサーバ10は、コンテンツ保存部151と、メタ情報生成部152と、制御信号生成部153と、エンコード部154と、送信部155と、を含んで構成される。
コンテンツ保存部151は、例えばハードディスク等で構成され、コンテンツのデータを保存する。メタ情報生成部152は、コンテンツ全体に関する情報であるメタ情報を生成する。このメタ情報には、上述したように、コンテンツ全体が3Dであるか部分的に3Dであるかを示す情報、部分的に3Dである場合には、さらに先頭が2Dであるか3Dであるかを示す情報、さらに、3Dの伝送方式を識別する情報等のコンテンツ情報が含まれている(図6、図8参照)。
制御信号生成部153は、映像ストリームや音声ストリーム(AVストリーム)を直接制御するための制御信号を生成する。この制御信号には、上述したように、コンテンツが部分的に3Dである場合に、2Dと3Dを識別する信号、つまり、2Dと3Dの切り換えタイミングに関する切り換え情報が含まれている。
エンコード部154は、コンテンツ保存部151に保存されているコンテンツのデータおよびメタ情報生成部152で生成されたメタ情報、制御信号生成部153で生成された制御信号を、所定のエンコード方式でエンコードする。送信部155は、エンコード部154でのエンコード後のデータを、ネットワークを通じて受信機に配信する。
[受信機の構成]
次に、上述したコンテンツサーバ10から配信される、タイプ1〜タイプ4のコンテンツを受信する受信機20の構成例を説明する。受信機20としては、例えば、インターネットに接続できるテレビ受像機であってもよく、また、インターネットに接続できるパーソナルコンピュータ、携帯型の情報端末、例えば携帯型ゲーム機、携帯型音楽プレーヤ等のようなものであってもよい。
次に、上述したコンテンツサーバ10から配信される、タイプ1〜タイプ4のコンテンツを受信する受信機20の構成例を説明する。受信機20としては、例えば、インターネットに接続できるテレビ受像機であってもよく、また、インターネットに接続できるパーソナルコンピュータ、携帯型の情報端末、例えば携帯型ゲーム機、携帯型音楽プレーヤ等のようなものであってもよい。
図15は、受信機20の構成例を示している。この受信機20は、通信I/F102と、ストリーミング受信処理部104と、デマルチプレクサ106と、メタ情報処理部108と、制御信号処理部110と、ビデオデコーダ112と、字幕デコーダ114と、オーディオデコーダ116を有している。また、この受信機20は、2D3D制御部118と、3D処理部120と、2D変換部122と、セレクタ124と、字幕変換部126と、設定情報記憶部128を有している。また、この受信機20は、リモコンI/F130と、ストリーミング制御部132と、加算器134、136と、表示部138と、スピーカ140を有している。
通信I/F102は、コンテンツサーバ10からインターネットその他のネットワーク15を経由して送信されるストリームを受信する。通信I/F102が受信したストリームはストリーミング受信処理部104に送られる。
ストリーミング受信処理部104は、通信I/F102が受信したストリームに対して誤り訂正やストリーム同期化等の所定の受信処理を実行する。ストリーミング受信処理部104によって誤り訂正やストリーム同期化等、上記の所定の受信処理が実行されたストリームはデマルチプレクサ106に送られる。また、ストリーミング受信処理部104は、ストリーミング制御部132により、受信処理の対象となるストリームが指定される。
デマルチプレクサ106は、ストリーミング受信処理部104で所定の受信処理が行われたストリームを、映像や音声等に分離する。デマルチプレクサ106は、ストリームをメタデータ、制御データ、映像データ、音声データ、字幕データに分離する。デマルチプレクサ106は、ストリームから分離したメタデータをメタ情報処理部108に供給する。
また、デマルチプレクサ106は、ストリームから分離した制御信号を制御信号処理部110に供給する。また、デマルチプレクサ106は、ストリームから分離した映像データをビデオデコーダ112に供給する。また、デマルチプレクサ106は、ストリームから分離した字幕データを字幕デコーダ114に供給する。さらに、デマルチプレクサ106は、ストリームから分離したオーディオデータをオーディオデコーダ116に供給する。
メタ情報処理部108は、通信I/F102、あるいはデマルチプレクサ106から送られてくるメタ情報を受け取り、メタデータの解析を実行する。メタ情報処理部108でメタ情報を解析することにより、コンテンツサーバ10から送信されるコンテンツが2Dであるか3Dであるか、またコンテンツが3Dである場合の伝送方式は何であるか、等を知ることができる。メタ情報処理部108によるメタ情報の解析結果は2D3D制御部118に送られる。
制御信号処理部110は、デマルチプレクサ106から送られてくる制御信号を受け取り、制御信号の解析を実行する。制御信号処理部110で制御信号を解析することで、コンテンツサーバ10から送信されるコンテンツの、2Dから3Dへの、または3Dから2Dへの切り替えタイミングを把握することができる。制御信号処理部110による制御信号の解析結果は2D3D制御部118に送られる。
ビデオデコーダ112は、デマルチプレクサ106によって分離された、符号化映像データの供給を受け、供給された符号化映像データに対して所定のデコード処理を実行する。字幕デコーダ114は、デマルチプレクサ106によって分離された、符号化字幕データの供給を受け、供給された字幕データに対して所定のデコード処理を実行する。オーディオデコーダ116は、デマルチプレクサ106によって分離された、符号化音声データの供給を受け、供給された符号化音声データに対して所定のデコード処理を実行する。
2D3D制御部118は、メタ情報処理部108からのメタ情報の解析結果、および制御信号処理部110からの制御信号の解析結果を受け取り、これら解析結果を用いて、2D映像を表示する2D映像信号から、3D映像を表示する3D映像信号への切り替えを、またその逆の切り替えを制御する。2D3D制御部118は、設定情報記憶部128に記憶されている受信機20の設定情報から、受信機20の3D表示への対応状況を確認し、受信機20の設定に応じた制御を実行する。
3D処理部120は、ビデオデコーダ112から供給される映像信号に対して、2D3
D制御部118からの指示に基づいて、3D映像として表示させるための各種信号処理を実行する。3D処理部120における各種信号処理には、例えば、3D伝送方式に応じた映像データの並び替え等がある。3D処理部120で信号処理が行われた映像信号は加算器134に送られる。
D制御部118からの指示に基づいて、3D映像として表示させるための各種信号処理を実行する。3D処理部120における各種信号処理には、例えば、3D伝送方式に応じた映像データの並び替え等がある。3D処理部120で信号処理が行われた映像信号は加算器134に送られる。
2D変換部122は、ビデオデコーダ112から供給される映像信号に対して、3D映像から2D映像を生成するための変換処理を実行する。この2D変換部122での変換処理は、例えば「タイプ1」のような、全編3Dで制作されるコンテンツがコンテンツサーバ10から送信されてきた場合において、3Dではなく2Dで視聴をするときに実行される。2D変換部122で変換処理が行われた映像信号はセレクタ124に送られる。
セレクタ124は、ビデオデコーダ112から供給される映像信号と、2D変換部122で変換処理が行われた映像信号のいずれか一方を選択して出力する。セレクタ124による選択は2D3D制御部118の指示により行われる。セレクタ124で選択されて出力される映像信号は加算器136に送られる。
字幕変換部126は、字幕デコーダ114がデコードした字幕データを受け取り、3D映像に重畳するために3D変換処理を実行する。字幕変換部126が字幕データに対して3D変換処理を実行することで、映像だけでなく字幕も立体的に表示できる。
設定情報記憶部128は、受信機20に関する情報を記憶する。設定情報記憶部128に記憶されている、受信機20に関する情報としては、例えば3D映像の表示の対応・非対応、3D映像の表示に対応している際の、対応する3D映像の表示形式等の情報などがある。設定情報記憶部128に記憶されている、受信機20に関する情報は、2D3D制御部118での各種制御の際に設定情報記憶部128から読み出され、2D3D制御部118での各種制御に用いられる。
リモコンI/F130は、リモートコントローラ(リモコン)30からの信号を受信する。リモコンI/F130は、リモートコントローラ30からの信号を赤外線または無線によって受信する。リモコンI/F130は、リモートコントローラ30からの信号に応じて、2D3D制御部118およびストリーミング制御部132に指示を送出する。
例えば、リモートコントローラ30からの信号が、3D映像から2D映像への切り替えを指示するものであれば、リモコンI/F130は2D3D制御部118に対して3D映像から2D映像へ切り替えるよう指示し、2D3D制御部118は当該指示に基づいて、3D映像から2D映像への切り替え制御を開始する。また例えば、リモートコントローラ30からの信号が再生の停止やポーズ、可変速再生を指示するものであれば、リモコンI/F130は、ストリーミング制御部132に対して、リモートコントローラ30から指示された動作を行うように指示する。
ストリーミング制御部132は、2D3D制御部118からの、またはリモコンI/F130からの指示に応じて、再生開始、停止、ポーズ、可変速再生などの再生制御を実行する。また、ストリーミング制御部132は、特定のコンテンツの再生起動をかける制御も実行する。ストリーミング制御部132は、特定コンテンツの再生起動指示を受けると、通信I/F102に対しては指定のコンテンツにアクセス・受信するように指示する。また、ストリーミング制御部132は、特定コンテンツの再生起動指示を受けると、ストリーミング受信処理部104に対しては再生起動対象のコンテンツに対する所定の受信処理を実行するように指示する。
加算器134は、3D処理部120から出力される3D映像信号に、字幕変換部126で3D変換処理が実行された字幕データを重畳して、表示部138に出力する。また加算器136は、セレクタ124から出力される2D映像信号に、字幕デコーダ114でデコードされた字幕データを重畳して、表示部138に出力する。
表示部138は、加算器134,136から送られてくる2D信号および3D信号の内、2D3D制御部118からの指示によりいずれかを選択して画像を表示する。表示部138としては、例えば液晶パネルを用いることができるが、本発明にあっては液晶パネル以外の表示パネルを用いてもよい。スピーカ140は、オーディオデコーダ116で復号された音声信号を用いて音声を出力する。
[受信機の動作]
次に、受信機20の動作を、図16、図17のフローチャートに沿って説明する。コンテンツ再生が開始されると、受信機20(メタ情報処理部108)は、ステップS101において、メタ情報を取得して解析する。次に、受信機20(2D3D制御部118)は、その解析結果に基づき、コンテンツ全体が3Dであるか否かを判断する。
次に、受信機20の動作を、図16、図17のフローチャートに沿って説明する。コンテンツ再生が開始されると、受信機20(メタ情報処理部108)は、ステップS101において、メタ情報を取得して解析する。次に、受信機20(2D3D制御部118)は、その解析結果に基づき、コンテンツ全体が3Dであるか否かを判断する。
コンテンツ全体が3Dでなく、部分的に3Dであるとき、受信機20(2D3D制御部118)は、ステップS103において、さらにメタ情報の解析結果に基づき、コンテンツ先頭が3Dであるか否かを判断する。コンテンツ先頭が3Dであるとき、受信機20(2D3D制御部118)は、ステップS104において、3D処理部120等を3D信号処理状態に事前準備する。
ステップS102でコンテンツ全体が3Dであるとき、受信機20(2D3D制御部118)は、ステップS105において、全3Dフラグをセットし、制御信号を無視する状態となる。この状態では、受信機20(2D3D制御部118)は、制御信号を監視することが不要となる。その後、受信機20(2D3D制御部118)は、ステップS104の処理に進み、3D処理部120等を3D信号処理状態に事前準備する。
上述のステップS104で3D処理部120等を3D信号処理状態に事前準備した後、ステップS111において、受信機20(ストリーミング制御部132)は、コンテンツサーバ10のコンテンツへアクセスする。そして、コンテンツサーバ10からコンテンツが受信機20に送信されてくると、受信機20は、ステップS112で、3D映像を再生する。この場合、上述のステップS104で3D処理部120等が3D信号処理状態に事前準備されているので、コンテンツの再生・表示までにかかる時間を短縮できる。
次に、受信機20(2D3D制御部118)は、ステップS113において、再生コンテンツが全編3Dであるか否か、すなわち、全3Dフラグがセットされているか否かを判断する。全3Dフラグがセットされていないとき、受信機20(2D3D制御部118)は、ステップS114において、制御信号処理部110における制御信号の解析結果に基づき、再生コンテンツが3Dから2Dに変化したか否かを判断する。
再生コンテンツが3Dから2Dに変化していないとき、受信機20は、ステップS115の処理に移る。ステップS113で、全3Dフラグがセットされているときも、受信機20は、直ちに、ステップS115の処理に移る。このステップS115において、受信機20は、ユーザがリモートコントローラ30等により2D映像の再生に切り替えたかどうかを判断する。ユーザが2D映像の再生に切り替えてなければ、ステップS112に戻って、3D映像の再生を続ける。
ステップS115でユーザがリモートコントローラ30等により2D映像の再生に切り替えたとき、受信機20(2D3D制御部118)は、ステップS116において、メタ情報処理部108のメタ情報の解析結果に基づき、サイマル2Dコンテンツがあるか否かを判断する。サイマル2Dコンテンツがあるとき、受信機20(2D3D制御部118)は、ステップS117において、受信・再生しているコンテンツの先頭からの時間を算出し、ステップS118において、サイマル2Dコンテンツにアクセスする。そして、コンテンツサーバ10からコンテンツが受信機20に送信されてくると、受信機20は、ステップS119で、2D映像を再生する。
図18は、受信しているコンテンツにサイマル2Dコンテンツが存在する場合におけるコンテンツ切り替え処理の概要を示す説明図である。コンテンツサーバ10には、例えば3Dコンテンツ(ファイル名がA.mp4のコンテンツ)と同一のフォルダにサイマル2Dコンテンツ(ファイル名がAsim.mp4のコンテンツ)が保存されている。
受信機20は、3Dコンテンツからサイマル2Dコンテンツへ切り替える際には、ユーザのリモートコントローラ30等による切り替え操作時の、コンテンツの先頭からの時間位置を算出する。そして、受信機20は、コンテンツサーバ10で3Dコンテンツと同一フォルダに保存されているサイマル2Dコンテンツにアクセスし、算出した時間位置からの再生を開始する。このように3Dコンテンツからサイマル2Dコンテンツへ切り替えることで、受信機20はシームレスにコンテンツを再生できる。
次に、受信機20(2D3D制御部118)は、ステップS120において、ユーザがリモートコントローラ30等により3D映像の再生に切り替えたかどうかを判断する。ユーザが3D映像の再生に切り替えてなければ、ステップS119に戻って、2D映像の再生を続ける。
ステップS115でユーザがリモートコントローラ30等により3D映像の再生に切り替えたとき、受信機20(2D3D制御部118)は、ステップS121において、受信・再生しているコンテンツの先頭からの時間を算出し、ステップS122において、元のコンテンツにアクセスする。そして、コンテンツサーバ10からコンテンツが受信機20に送信されてくると、受信機20は、ステップS112で、3D映像を再生する。
図18を用いて、サイマル2Dコンテンツから3Dコンテンツへの切り替えを説明する。受信機20は、サイマル2Dコンテンツから3Dコンテンツへ切り替える際には、ユーザのリモートコントローラ30等による切り替え操作時の、コンテンツの先頭からの時間位置を算出する。そして、受信機20は、コンテンツサーバ10でサイマル2Dコンテンツと同一フォルダに保存されている3Dコンテンツにアクセスし、算出した時間位置からの再生を開始する。このようにサイマル2Dコンテンツから3Dコンテンツへ切り替えることで、受信機20はシームレスにコンテンツを再生できる。
また、上述のステップS103でコンテンツ先頭が2Dであるとき、受信機20(ストリーミング制御部132)は、ステップS123において、コンテンツサーバ10のコンテンツへアクセスする。そして、コンテンツサーバ10からコンテンツが受信機20に送信されてくると、受信機20は、ステップS124で、2D映像を再生する。
次に、受信機20(2D3D制御部118)は、ステップS125において、制御信号処理部110における制御信号の解析結果に基づき、再生コンテンツが2Dから3Dに変化したか否かを判断する。再生コンテンツが2Dから3Dに変化していないとき、受信機20は、ステップS124に戻って、2D映像の再生を続ける。一方、再生コンテンツが2Dから3Dに変化しているとき、受信機20は、ステップS112に戻って、3D映像を再生する。
また、上述のステップS116でサイマル2Dコンテンツがないとき、受信機20は、ステップS126において、3D映像を2D映像に変換して再生する。そして、受信機20(2D3D制御部118)は、ステップS127において、再生コンテンツが全編3Dであるか否か、すなわち、全3Dフラグがセットされているか否かを判断する。全3Dフラグがセットされていないとき、受信機20(2D3D制御部118)は、ステップS128において、制御信号処理部110における制御信号の解析結果に基づき、再生コンテンツが3Dから2Dに変化したか否かを判断する。
再生コンテンツが3Dから2Dに変化したとき、受信機20は、ステップS124に戻って、2D映像を再生する。再生コンテンツが3Dから2Dに変化していないとき、受信機20は、ステップS129の処理に移る。ステップS127で、全3Dフラグがセットされているときも、受信機20は、直ちに、ステップS129の処理に移る。
このステップS129において、受信機20は、ユーザがリモートコントローラ30等により3D映像の再生に切り替えたかどうかを判断する。ユーザが3D映像の再生に切り替えてなければ、ステップS126に戻って、2D映像の再生を続ける。ステップS129でユーザがリモートコントローラ30等により3D映像の再生に切り替えたとき、受信機20は、ステップS112に戻って、3D画像を再生する。
受信機20は、上述の動作をコンテンツの終了まで継続する。受信機20は、コンテンツサーバ10から送信されるメタ情報および制御信号に基づいて、3D映像の再生と2D映像の再生を切り替えることができる。
以上説明したように本発明の一実施形態によれば、コンテンツサーバ10から受信機20には、コンテンツと併せて、3Dに係るメタ情報および制御信号も伝送される。メタ情報には、コンテンツ全体が3Dであるか部分的に3Dであるかを示す情報、部分的に3Dである場合には、さらに先頭が2Dであるか3Dであるかを示す情報、コンテンツが3Dである場合に、3Dの伝送方式を識別する情報が含まれる。また、制御信号には、部分的に3Dであるコンテンツの場合に、2Dと3Dを識別する信号が含まれる。したがって、タイプ1〜タイプ4のいずれかの送信形態のコンテンツが送信されてくる場合に、受信機20は、その処理を良好に行うことができる。
また、この一実施形態によれば、受信機20は、メタ情報により、コンテンツ全体が3Dであるか部分的に3Dであるか、そして、部分的に3Dである場合には先頭が2Dであるか3Dであるかを、コンテンツの再生に先立って知ることができる。そのため、受信機20は、例えば、コンテンツ全体が3Dである場合、あるいは部分的に3Dであって先頭が3Dである場合には、3D処理部120等を3D信号処理状態に事前準備できる。そのため、コンテンツの再生・表示までにかかる時間を短縮できる。
<2.変形例>
なお、上述していないが、図16、図17のフローチャートに示す一連の処理は、ハードウエアにより実行させることもできるし、ソフトウエアにより実行させることもできる。一連の処理をソフトウエアにより実行させる場合には、そのソフトウエアを構成するプログラムが、専用のハードウエアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、プログラム記録媒体からインストールされる。
なお、上述していないが、図16、図17のフローチャートに示す一連の処理は、ハードウエアにより実行させることもできるし、ソフトウエアにより実行させることもできる。一連の処理をソフトウエアにより実行させる場合には、そのソフトウエアを構成するプログラムが、専用のハードウエアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、プログラム記録媒体からインストールされる。
また、通信とは、無線通信および有線通信は勿論、無線通信と有線通信とが混在した通信、すなわち、ある区間では無線通信が行われ、他の区間では有線通信が行われるようなものであっても良い。さらに、ある装置から他の装置への通信が有線通信で行われ、他の装置からある装置への通信が無線通信で行われるようなものであっても良い。
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
この発明は、信号伝送方法、信号送信装置および信号受信装置に適用可能であり、特にブロードバンド回線を利用して3D映像を配信する場合における信号伝送方法、信号送信装置および信号受信装置に適用可能である。
10 コンテンツサーバ
15 ネットワーク
20 受信機
30 リモートコントローラ
102 通信I/F
104 ストリーミング受信処理部
106 デマルチプレクサ
108 メタ情報処理部
110 制御データ処理部
112 ビデオデコーダ
114 字幕デコーダ
116 オーディオデコーダ
118 2D3D制御部
120 3D処理部
122 2D変換部
124 セレクタ
126 字幕変換部
128 設定情報記憶部
130 リモコンI/F
132 ストリーミング制御部
134、136 加算器
138 表示部
140 スピーカ
151 コンテンツ保存部
152 メタ情報生成部
153 制御データ生成部
154 エンコード部
155 送信部
170 メタファイル
15 ネットワーク
20 受信機
30 リモートコントローラ
102 通信I/F
104 ストリーミング受信処理部
106 デマルチプレクサ
108 メタ情報処理部
110 制御データ処理部
112 ビデオデコーダ
114 字幕デコーダ
116 オーディオデコーダ
118 2D3D制御部
120 3D処理部
122 2D変換部
124 セレクタ
126 字幕変換部
128 設定情報記憶部
130 リモコンI/F
132 ストリーミング制御部
134、136 加算器
138 表示部
140 スピーカ
151 コンテンツ保存部
152 メタ情報生成部
153 制御データ生成部
154 エンコード部
155 送信部
170 メタファイル
Claims (11)
- ネットワークを通じて配信するコンテンツの少なくとも一部において立体画像を表示する立体画像表示区間が含まれている場合に、
上記コンテンツの立体画像表示区間が全体であるか一部であるかを示すと共に、上記コンテンツの立体画像表示区間が一部であるときにはさらに先頭の表示区間が立体画像表示区間であるか二次元画像表示区間であるかを示すコンテンツ情報を、上記コンテンツと併せて伝送する
信号伝送方法。 - 上記コンテンツ情報を、上記コンテンツの再生に先だって配信される情報の内部に記述して伝送する
請求項1に記載の信号伝送方法。 - 上記コンテンツ情報を、上記コンテンツの内部に記述して伝送する
請求項1に記載の信号伝送方法。 - 上記コンテンツ情報を、MP4コンテナのmoovコンテナの内部に記述して伝送する
請求項3に記載の信号伝送方法。 - 上記コンテンツの立体画像表示区間が一部であるとき、上記立体画像表示区間と上記二次元画像表示区間の切り替えタイミングに関する切り替え情報を上記コンテンツと併せて伝送する
請求項1に記載の信号伝送方法。 - 上記切り替え情報を上記コンテンツの内部に記述して伝送する
請求項5に記載の信号伝送方法。 - 少なくとも一部において立体画像を表示する立体画像表示区間が含まれているコンテンツを、ネットワークを通じて送信する送信部を備え、
上記送信部は、上記コンテンツに併せて、上記コンテンツの立体画像表示区間が全体であるか一部であるかを示すと共に、上記コンテンツの立体像表示区間が一部であるときにはさらに先頭の表示区間が立体画像表示区間であるか二次元画像表示区間であるかを示すコンテンツ情報を送信する
信号送信装置。 - 少なくとも一部において立体画像を表示する立体画像表示区間が含まれているコンテンツを出力するコンテンツ出力部と、
上記コンテンツの立体画像表示区間が全体であるか一部であるかを示すと共に、上記コンテンツの立体像表示区間が一部であるときにはさらに先頭の表示区間が立体画像表示区間であるか二次元画像表示区間であるかを示すコンテンツ情報を生成するコンテンツ情報生成部と、
上記コンテンツ出力部から出力された上記コンテンツと共に、上記コンテンツ情報生成部で生成された上記コンテンツ情報を、ネットワークを通じて送信する送信部と
を備える信号送信装置。 - 上記コンテンツの立体画像表示区間が一部であるとき、上記立体画像表示区間と二次元画像表示区間の切り替えタイミングに関する切り替え情報を生成する切り替え情報生成部をさらに備え、
上記送信部は、上記切り替え情報生成部で生成された上記切り替え情報を、上記コンテンツと共に、さらに送信する
請求項8に記載の信号送信装置。 - 少なくとも一部において立体画像を表示する立体画像表示区間が含まれているコンテンツと、上記コンテンツの立体画像表示区間が全体であるか一部であるかを示すと共に、上記コンテンツの立体画像表示区間が一部であるときにはさらに先頭の表示区間が立体画像表示区間であるか二次元画像表示区間であるかを示すコンテンツ情報を、ネットワークを通じて受信する受信部と、
上記受信部で受信される上記コンテンツに対して再生処理を行うコンテンツ処理部と、
上記コンテンツ処理部が上記再生処理を開始する前に、上記受信部で受信される上記コンテンツ情報に基づいて、上記コンテンツ処理部を制御する制御部と
を備える信号受信装置。 - 上記受信部は、上記コンテンツの立体画像表示区間が一部であるとき、上記立体画像表示区間と二次元画像表示区間の切り替えタイミングに関する切り替え情報をさらに受信し、
上記制御部は、上記コンテンツの立体画像表示区間が一部であるとき、上記受信部で受信された上記切り替え情報に基づいて、上記コンテンツ処理部の処理を切り替える
請求項10に記載の信号受信装置。
Priority Applications (8)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010136901A JP5510097B2 (ja) | 2010-06-16 | 2010-06-16 | 信号伝送方法、信号送信装置および信号受信装置 |
RU2012152940/08A RU2012152940A (ru) | 2010-06-16 | 2011-06-03 | Способ передачи сигнала, устройство передачи сигнала и устройство приема сигнала |
EP11795582.3A EP2584784A4 (en) | 2010-06-16 | 2011-06-03 | SIGNAL TRANSMISSION METHOD, SIGNAL TRANSMISSION DEVICE, AND SIGNAL RECEIVING DEVICE |
US13/702,814 US20130081095A1 (en) | 2010-06-16 | 2011-06-03 | Signal transmitting method, signal transmitting device and signal receiving device |
PCT/JP2011/062852 WO2011158674A1 (ja) | 2010-06-16 | 2011-06-03 | 信号伝送方法、信号送信装置および信号受信装置 |
KR1020127031841A KR20130108080A (ko) | 2010-06-16 | 2011-06-03 | 신호 전송 방법, 신호 송신 장치 및 신호 수신 장치 |
CN2011800390172A CN103069813A (zh) | 2010-06-16 | 2011-06-03 | 信号发送方法、信号发送装置和信号接收装置 |
BR112012031334A BR112012031334A2 (pt) | 2010-06-16 | 2011-06-03 | método e dispositivo de transmissão de sinal, e, dispositivo de recepção de sinal |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010136901A JP5510097B2 (ja) | 2010-06-16 | 2010-06-16 | 信号伝送方法、信号送信装置および信号受信装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012004774A JP2012004774A (ja) | 2012-01-05 |
JP5510097B2 true JP5510097B2 (ja) | 2014-06-04 |
Family
ID=45348080
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010136901A Expired - Fee Related JP5510097B2 (ja) | 2010-06-16 | 2010-06-16 | 信号伝送方法、信号送信装置および信号受信装置 |
Country Status (8)
Country | Link |
---|---|
US (1) | US20130081095A1 (ja) |
EP (1) | EP2584784A4 (ja) |
JP (1) | JP5510097B2 (ja) |
KR (1) | KR20130108080A (ja) |
CN (1) | CN103069813A (ja) |
BR (1) | BR112012031334A2 (ja) |
RU (1) | RU2012152940A (ja) |
WO (1) | WO2011158674A1 (ja) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5778673B2 (ja) | 2010-06-23 | 2015-09-16 | パナソニック株式会社 | コンテンツ配信システム、再生装置、配信サーバ、再生方法及び配信方法 |
JP5092032B2 (ja) * | 2011-04-19 | 2012-12-05 | 株式会社東芝 | 映像受信装置および表示方式切換方法 |
EP2822287A1 (en) * | 2013-07-01 | 2015-01-07 | Thomson Licensing | Method and apparatus for frame accurate advertisement insertion |
EP2876890A1 (en) | 2013-11-21 | 2015-05-27 | Thomson Licensing | Method and apparatus for frame accurate synchronization of video streams |
KR102643537B1 (ko) | 2014-09-12 | 2024-03-06 | 소니그룹주식회사 | 송신 장치, 송신 방법, 수신 장치 및 수신 방법 |
GB2567624B (en) * | 2017-10-12 | 2021-05-26 | Canon Kk | Method, device and computer program for transmitting media content |
CN108683900B (zh) * | 2018-05-30 | 2020-04-14 | 北京奇艺世纪科技有限公司 | 一种图像数据处理方法及装置 |
CN113170088B (zh) * | 2018-10-08 | 2023-10-03 | 三星电子株式会社 | 用于生成包括三维视频内容的媒体文件的方法和装置,以及用于重放三维视频内容的方法和装置 |
CN115004699A (zh) * | 2020-11-30 | 2022-09-02 | 中兴通讯股份有限公司 | 沉浸式媒体的多图集封装 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
AU2158495A (en) * | 1994-03-28 | 1995-10-17 | Magma, Inc. | Two-dimensional and three-dimensional imaging device |
US6057884A (en) * | 1997-06-05 | 2000-05-02 | General Instrument Corporation | Temporal and spatial scaleable coding for video object planes |
US20020009137A1 (en) * | 2000-02-01 | 2002-01-24 | Nelson John E. | Three-dimensional video broadcasting system |
KR100454194B1 (ko) * | 2001-12-28 | 2004-10-26 | 한국전자통신연구원 | 다중 디스플레이 방식을 지원하는 양안식 동영상 부호화/복호화 장치 및 그 방법 |
JP4190357B2 (ja) * | 2003-06-12 | 2008-12-03 | シャープ株式会社 | 放送データ送信装置、放送データ送信方法および放送データ受信装置 |
KR100813961B1 (ko) * | 2005-06-14 | 2008-03-14 | 삼성전자주식회사 | 영상 수신장치 |
KR100657322B1 (ko) * | 2005-07-02 | 2006-12-14 | 삼성전자주식회사 | 로컬 3차원 비디오를 구현하기 위한 인코딩/디코딩 방법 및장치 |
EP2001235B1 (en) * | 2007-06-08 | 2013-05-22 | Samsung Electronics Co., Ltd. | MPEG-4 format extension for recording stereoscopic or synthetic 3D video data with related metadata |
US20080303832A1 (en) * | 2007-06-11 | 2008-12-11 | Samsung Electronics Co., Ltd. | Method of generating two-dimensional/three-dimensional convertible stereoscopic image bitstream and method and apparatus for displaying the same |
KR101362647B1 (ko) * | 2007-09-07 | 2014-02-12 | 삼성전자주식회사 | 2d 영상을 포함하는 3d 입체영상 파일을 생성 및재생하기 위한 시스템 및 방법 |
CN101868970B (zh) * | 2007-10-19 | 2015-01-21 | 三星电子株式会社 | 记录三维图像数据的方法 |
WO2009075495A1 (en) * | 2007-12-10 | 2009-06-18 | Samsung Electronics Co., Ltd. | System and method for generating and reproducing image file including 2d image and 3d stereoscopic image |
KR101506217B1 (ko) * | 2008-01-31 | 2015-03-26 | 삼성전자주식회사 | 스테레오스코픽 영상의 부분 데이터 구간 재생을 위한스테레오스코픽 영상 데이터스트림 생성 방법과 장치, 및스테레오스코픽 영상의 부분 데이터 구간 재생 방법과 장치 |
US8947504B2 (en) * | 2009-01-28 | 2015-02-03 | Lg Electronics Inc. | Broadcast receiver and video data processing method thereof |
JP2011082666A (ja) * | 2009-10-05 | 2011-04-21 | Sony Corp | 信号伝送方法、信号送信装置及び信号受信装置 |
US8964013B2 (en) * | 2009-12-31 | 2015-02-24 | Broadcom Corporation | Display with elastic light manipulator |
-
2010
- 2010-06-16 JP JP2010136901A patent/JP5510097B2/ja not_active Expired - Fee Related
-
2011
- 2011-06-03 WO PCT/JP2011/062852 patent/WO2011158674A1/ja active Application Filing
- 2011-06-03 US US13/702,814 patent/US20130081095A1/en not_active Abandoned
- 2011-06-03 RU RU2012152940/08A patent/RU2012152940A/ru not_active Application Discontinuation
- 2011-06-03 BR BR112012031334A patent/BR112012031334A2/pt not_active IP Right Cessation
- 2011-06-03 CN CN2011800390172A patent/CN103069813A/zh active Pending
- 2011-06-03 KR KR1020127031841A patent/KR20130108080A/ko not_active Application Discontinuation
- 2011-06-03 EP EP11795582.3A patent/EP2584784A4/en not_active Withdrawn
Also Published As
Publication number | Publication date |
---|---|
BR112012031334A2 (pt) | 2016-10-25 |
EP2584784A4 (en) | 2014-01-22 |
KR20130108080A (ko) | 2013-10-02 |
RU2012152940A (ru) | 2014-06-20 |
JP2012004774A (ja) | 2012-01-05 |
CN103069813A (zh) | 2013-04-24 |
WO2011158674A1 (ja) | 2011-12-22 |
US20130081095A1 (en) | 2013-03-28 |
EP2584784A1 (en) | 2013-04-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5510097B2 (ja) | 信号伝送方法、信号送信装置および信号受信装置 | |
WO2011043213A1 (ja) | 信号伝送方法、信号送信装置及び信号受信装置 | |
US10523915B2 (en) | Stereoscopic video and audio recording method, stereoscopic video and audio reproducing method, stereoscopic video and audio recording apparatus, stereoscopic video and audio reproducing apparatus, and stereoscopic video and audio recording medium | |
EP2103148B1 (en) | Transmitting/receiving digital realistic broadcasting involving beforehand transmisson of auxiliary information | |
JP2011066871A (ja) | コンテンツ伝送方法及び表示装置 | |
JP2016220230A (ja) | コンテンツ再生装置、コンテンツ再生方法、およびプログラム | |
JP2017022714A (ja) | 3dビデオ上に3dグラフィックスをオーバレイするための方法及び装置 | |
WO2013061525A1 (ja) | 放送受信装置、再生装置、放送通信システム、放送受信方法、再生方法およびプログラム | |
US20100103165A1 (en) | Image decoding method, image outputting method, and image decoding and outputting apparatuses | |
WO2013014880A1 (ja) | コンテンツ再生装置、コンテンツ再生方法、コンテンツ再生プログラム及びコンテンツ提供システム | |
JP2011138354A (ja) | 情報処理装置および情報処理方法 | |
US20110254919A1 (en) | Data structure, image processing apparatus and method, and program | |
JP5568404B2 (ja) | 映像表示システム及び再生装置 | |
WO2011161956A1 (ja) | コンテンツ配信システム、再生装置、配信サーバ、再生方法及び配信方法 | |
WO2012053151A1 (ja) | 再生装置及び再生方法 | |
JP5527730B2 (ja) | 再生装置 | |
WO2011161957A1 (ja) | コンテンツ配信システム、再生装置、配信サーバ、再生方法及び配信方法 | |
JP2011199388A (ja) | 再生装置、再生制御方法、およびプログラム | |
JP5527727B2 (ja) | 映像表示システム及び表示装置 | |
JP2011146828A (ja) | データ構造、記録装置および記録方法、再生装置および再生方法、並びにプログラム | |
JP2012054733A (ja) | 再生装置および再生方法 | |
KR20130046404A (ko) | 디지털 단말에서의 2d 모드 재생을 위한 송신 장치, 디지털 단말에서의 2d 모드 재생 장치 및 그 방법들 | |
JP2007288630A (ja) | Tv放送システム、ハードディスク内蔵型テレビジョン受像機、映像再生装置、及びテレビジョン受像機 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130522 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140225 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140310 |
|
LAPS | Cancellation because of no payment of annual fees |