JP5531972B2 - 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 - Google Patents
立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 Download PDFInfo
- Publication number
- JP5531972B2 JP5531972B2 JP2011005410A JP2011005410A JP5531972B2 JP 5531972 B2 JP5531972 B2 JP 5531972B2 JP 2011005410 A JP2011005410 A JP 2011005410A JP 2011005410 A JP2011005410 A JP 2011005410A JP 5531972 B2 JP5531972 B2 JP 5531972B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- data
- image data
- disparity
- eye image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 95
- 230000005540 biological transmission Effects 0.000 claims description 208
- 238000012545 processing Methods 0.000 claims description 163
- 239000013598 vector Substances 0.000 description 348
- GJWAPAVRQYYSTK-UHFFFAOYSA-N [(dimethyl-$l^{3}-silanyl)amino]-dimethylsilicon Chemical compound C[Si](C)N[Si](C)C GJWAPAVRQYYSTK-UHFFFAOYSA-N 0.000 description 49
- 238000001514 detection method Methods 0.000 description 45
- 230000008569 process Effects 0.000 description 31
- 239000000284 extract Substances 0.000 description 15
- 238000009432 framing Methods 0.000 description 15
- 238000010586 diagram Methods 0.000 description 14
- 230000005236 sound signal Effects 0.000 description 14
- 230000008859 change Effects 0.000 description 11
- 238000013075 data extraction Methods 0.000 description 10
- 238000011084 recovery Methods 0.000 description 9
- 102100031699 Choline transporter-like protein 1 Human genes 0.000 description 6
- 102100035954 Choline transporter-like protein 2 Human genes 0.000 description 6
- 102100039497 Choline transporter-like protein 3 Human genes 0.000 description 6
- 101000940912 Homo sapiens Choline transporter-like protein 1 Proteins 0.000 description 6
- 101000948115 Homo sapiens Choline transporter-like protein 2 Proteins 0.000 description 6
- 101000889279 Homo sapiens Choline transporter-like protein 3 Proteins 0.000 description 6
- 230000000750 progressive effect Effects 0.000 description 6
- 238000012856 packing Methods 0.000 description 5
- 230000001360 synchronised effect Effects 0.000 description 5
- 230000007175 bidirectional communication Effects 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 4
- 230000003321 amplification Effects 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 3
- 238000003199 nucleic acid amplification method Methods 0.000 description 3
- 230000006854 communication Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000001105 regulatory effect Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000000630 rising effect Effects 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000001276 controlling effect Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008929 regeneration Effects 0.000 description 1
- 238000011069 regeneration method Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/194—Transmission of image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/156—Mixing image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
- H04N13/178—Metadata, e.g. disparity information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
- H04N13/183—On-screen display [OSD] information, e.g. subtitles or menus
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/23614—Multiplexing of additional data and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
- H04N21/2381—Adapting the multiplex stream to a specific network, e.g. an Internet Protocol [IP] network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/16—Analogue secrecy systems; Analogue subscription systems
- H04N7/173—Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/24—Systems for the transmission of television signals using pulse code modulation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/139—Format conversion, e.g. of frame-rate or size
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2213/00—Details of stereoscopic systems
- H04N2213/005—Aspects relating to the "3D+depth" image format
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Library & Information Science (AREA)
- Human Computer Interaction (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Controls And Circuits For Display Device (AREA)
Description
画像領域を階層的に分割して得られた各階層のうち、選択された階層の各領域の左眼画像および右眼画像の一方に対する他方の視差情報を階層順に配置した視差情報セットを作成する視差情報作成部と、
左眼画像データおよび右眼画像データを含む立体画像データと共に、上記視差情報作成部で作成された視差情報セットを送信するデータ送信部とを備え、
上記視差情報作成部で作成される視差情報セットを構成する各視差情報には、該視差情報が属する最下層の位置情報が付加されている
立体画像データ送信装置にある。
左眼画像データおよび右眼画像データを含む立体画像データと共に、画像領域を階層的に分割して得られた各階層のうち、選択された階層の各領域の左眼画像および右眼画像の一方に対する他方の視差情報を階層順に配置した視差情報セットを受信するデータ受信部と、
上記データ受信部で受信された上記左眼画像データおよび上記右眼画像データと、上記データ受信部で受信された上記視差情報セットとを用い、左眼画像および右眼画像に重畳する同一の重畳情報に視差を付与し、上記重畳情報が重畳された左眼画像のデータおよび上記重畳情報が重畳された右眼画像のデータを得る画像データ処理部とを備え、
上記データ受信部で受信された上記視差情報セットを構成する各視差情報には、該視差情報が属する最下層の位置情報が付加されている
立体画像データ受信装置にある。
左眼画像および右眼画像の一方に対する他方の視差情報を出力する視差情報出力部と、 左眼画像データおよび右眼画像データを含む立体画像データと共に、上記視差情報出力部で出力された視差情報を送信するデータ送信部とを備え、
上記視差情報出力部で出力される視差情報は、上記画像データの所定単位毎の視差情報である
立体画像データ送信装置にある。
左眼画像データおよび右眼画像データを含む立体画像データと共に、視差情報を受信するデータ受信部と、
上記データ受信部で受信された、上記左眼画像データおよび上記右眼画像データと、上記視差情報とを用い、左眼画像および右眼画像に重畳する同一の重畳情報に視差を付与し、上記重畳情報が重畳された左眼画像のデータおよび上記重畳情報が重畳された右眼画像のデータを得る画像データ処理部とを備え、
上記データ受信部で受信される上記視差情報は、上記画像データの所定単位毎の視差情報であり、
上記画像データ処理部は、上記重畳情報の重畳期間において、上記画像データの所定単位毎に、上記重畳情報に、対応する視差情報による視差を付与する
立体画像データ受信装置にある。
左眼画像データおよび右眼画像データを含む立体画像データと共に、視差情報を受信するデータ受信部と、
上記データ受信部で受信された、上記左眼画像データおよび上記右眼画像データと、上記視差情報とを用い、左眼画像および右眼画像に重畳する同一の重畳情報に視差を付与し、上記重畳情報が重畳された左眼画像のデータおよび上記重畳情報が重畳された右眼画像のデータを得る画像データ処理部とを備え、
上記データ受信部で受信される上記視差情報は、上記画像データの所定単位毎の視差情報であり、
上記データ受信部は、少なくとも、上記重畳情報の重畳期間分の視差情報を、該重畳期間以前に受信し、
上記画像データ処理部は、上記重畳情報の重畳期間において、上記重畳情報の重畳期間において、上記重畳情報に、該重畳期間分の視差情報から選択された所定の視差情報による視差を付与する
立体画像データ受信装置にある。
1.実施の形態
2.変形例
[立体画像送受信システムの構成例]
図1は、実施の形態としての立体画像送受信システム10の構成例を示している。この立体画像送受信システム10は、放送局100と、セットトップボックス(STB:Set Top Box)200と、テレビ受信機300を有している。
放送局100は、ビットストリームデータを、放送波にのせて送信する。このビットストリームデータには、左眼画像データおよび右眼画像データを含む立体画像データ、音声データ、重畳情報データ、さらには視差情報(視差ベクトル)などが含まれる。ここで、重畳情報データは、クローズド・キャプションデータ、サブタイトルデータ、グラフィクスデータ、テキストデータなどである。
図2は、放送局100において、上述のビットストリームデータを生成する送信データ生成部110の構成例を示している。この構成例は、視差ベクトルを数値情報として送信する例である。この送信データ生成部110は、カメラ111L,111Rと、ビデオフレーミング部112と、ビデオエンコーダ113と、視差ベクトル検出部114と、視差ベクトルエンコーダ115を有している。
ここでは、立体画像データ(3D画像データ)の伝送方式として、以下の第1〜第3の方式を挙げるが、これら以外の伝送方式であってもよい。ここでは、図3に示すように、左眼(L)および右眼(R)の画像データが、それぞれ、決められた解像度、例えば 1920×1080pのピクセルフォーマットの画像データである場合を例にとって説明する。
視差ベクトルの検出例について説明する。ここでは、左眼画像に対する右眼画像の視差ベクトルを検出する例について説明する。図5に示すように、左眼画像を検出画像とし、右眼画像を参照画像とする。この例では、(xi,yi)および(xj,yj)の位置における視差ベクトルが検出される。
なお、上述の図2に示す送信データ生成部110は、視差ベクトルの伝送内容(図8参照)を独立したエレメンタリーストリームとして受信側に伝送する構成となっている。しかし、視差ベクトルの伝送内容を他のストリームの中に埋め込んで伝送することも考えられる。例えば、視差ベクトルの伝送内容は、ビデオのストリームにユーザデータとして埋め込まれて伝送される。また、例えば、視差ベクトルの伝送内容は、サブタイトル、グラフィクス、あるいはテキストのストリームに埋め込まれて伝送される。
図15は、送信データ生成部110Bの構成例を示している。この例も、視差ベクトルを数値情報として送信する例である。この送信データ生成部110Bは、視差ベクトルの伝送内容を、サブタイトルあるいはグラフィクスのデータストリームに埋め込んで伝送する構成となっている。この図15において、図2と対応する部分には同一符号を付し、その詳細説明は省略する。
また、上述の図2、図13、図15に示す送信データ生成部110,110A,110Bは、視差ベクトルを数値情報として送信する(図8参照)。しかし、視差ベクトルを数値情報として伝送する代わりに、画像に重畳するための重畳情報(例えば、サブタイトル情報、グラフィクス情報、テキスト情報等)のデータに送信側で視差情報を予め反映させて送信することも考えられる。
図2、図13、図15に示す送信データ生成部110,110A,110Bにおいて、視差ベクトル検出部114では、左眼画像データおよび右眼画像データに基づき、画像内の所定位置における視差ベクトル(視差情報)が検出される。送信データ生成部110,110A,110Bでは、視差ベクトル検出部114で検出された画像内の所定位置における視差情報をそのまま受信側に送信する構成となっている。
図1に戻って、セットトップボックス200は、放送局100から放送波にのせて送信されてくるビットストリームデータ(トランスポートストリーム)を受信する。このビットストリームデータには、左眼画像データおよび右眼画像データを含む立体画像データ、音声データ、重畳情報データ、さらには視差情報(視差ベクトル)が含まれる。ここで、重畳情報データは、例えば、サブタイトルデータ、グラフィクスデータ、テキストデータ(クローズド・キャプションデータを含む)等である。
セットトップボックス200の構成例を説明する。図35は、セットトップボックス200の構成例を示している。このセットトップボックス200は、ビットストリーム処理部201と、HDMI端子202と、アンテナ端子203と、デジタルチューナ204と、映像信号処理回路205と、HDMI送信部206と、音声信号処理回路207を有している。また、このセットトップボックス200は、CPU211と、フラッシュROM212と、DRAM213と、内部バス214と、リモコン受信部215と、リモコン送信機216を有している。
図36は、ビットストリーム処理部201の構成例を示している。このビットストリーム処理部201は、上述の図2、図22に示す送信データ生成部110,110Dに対応させた構成となっている。このビットストリーム処理部201は、デマルチプレクサ220と、ビデオデコーダ221と、サブタイトル・グラフィクスデコーダ222と、テキストデコーダ223と、オーディオデコーダ224と、視差ベクトルデコーダ225を有している。また、このビットストリーム処理部201は、立体画像用サブタイトル・グラフィクス発生部226と、立体画像用テキスト発生部227と、ビデオ重畳部228と、マルチチャネルスピーカコントロール部229を有している。
ここで、図36に示すビットストリーム処理部201の立体画像用サブタイトル・グラフィクス発生部226および立体画像用テキスト発生部227における重畳情報への視差の付与について、さらに説明する。
図40に示すビットストリーム処理部201Aは、上述の図13に示す送信データ生成部110Aに対応させた構成となっている。この図40において、図36と対応する部分には同一符号を付し、その詳細説明は省略する。
ここで、図40に示すビットストリーム処理部201Aの立体画像用サブタイトル・グラフィクス発生部226および立体画像用テキスト発生部227における重畳情報への視差の付与について、さらに説明する。
図44に示すビットストリーム処理部201Bは、上述の図15に示す送信データ生成部110Bに対応させた構成となっている。この図44において、図36と対応する部分には同一符号を付し、その詳細説明は省略する。
図45に示すビットストリーム処理部201Cは、上述の図21に示す送信データ生成部110Cに対応させた構成となっている。この図45において、図36と対応する部分には同一符号を付し、その詳細説明は省略する。
図1に戻って、テレビ受信機300は、セットトップボックス200からHDMIケーブル400を介して送られてくる立体画像データを受信する。このテレビ受信機300は、3D信号処理部301を有している。この3D信号処理部301は、立体画像データに対して、伝送方式に対応した処理(デコード処理)を行って、左眼画像データおよび右眼画像データを生成する。すなわち、この3D信号処理部301は、図2、図13、図15、図21、図22に示す送信データ生成部110,110A,110B,110C,110Dにおけるビデオフレーミング部112とは逆の処理を行う。そして、この3D信号処理部301は、立体画像データを構成する左眼画像データおよび右眼画像データを取得する。
テレビ受信機300の構成例を説明する。図46は、テレビ受信機300の構成例を示している。このテレビ受信機300は、3D信号処理部301と、HDMI端子302と、HDMI受信部303と、アンテナ端子304と、デジタルチューナ305と、ビットストリーム処理部306を有している。
図47は、図1の立体画像表示システム10における、セットトップボックス200のHDMI送信部(HDMIソース)206と、テレビ受信機300のHDMI受信部(HDMIシンク)303の構成例を示している。
上述したように、HDMI送信部206は、例えば、CPU211(図35参照)からの要求に応じて、HDMIケーブル400を介して接続されているHDMI受信部303から、E−EDIDを、DDC83を介して読み出す。そして、CPU211は、このE−EDIDに基づき、HDMI受信部303の性能の設定、例えば立体画像データの取り扱いが可能か否か等を認識する。
図53は、立体画像データのTMDS伝送データ構造の一つであるフレームパッキング(Frame packing)方式の3Dビデオフォーマット(3D Video Format)を示している。この3Dビデオフォーマットは、立体画像データとして、プログレッシブ方式の左眼(L)および右眼(R)の画像データを伝送するためのフォーマットである。
図35に示すセットトップボックス200においては、HDMIインタフェースにより、ベースバンドの立体画像データおよび音声データをテレビ受信機300に送信する構成となっている。しかし、セットトップボックスからテレビ受信機に、ビットストリーム処理部201で使用されている視差ベクトル(図8、図27参照)の全部または一部を視差情報セットとして、HDMIインタフェースにより送信して利用することも考えられる。
視差情報セットをHDMIインタフェースで送信する方法として、例えば、以下の(1)、(2)の方法が考えられる。
(1)HDMI Vendor Specific InfoFrame を利用する方法
(2)フレームパッキング方式等の3Dビデオフォーマット(3D Video Format)のアクティブスペース(Active Space)を利用する方法
なお、上述実施の形態においては、立体画像表示システム10が、放送局100、セットトップボックス200およびテレビ受信機300で構成されているものを示した。しかし、テレビ受信機300は、図46に示すように、セットトップボックス200内のビットストリーム処理部201と同等に機能するビットストリーム処理部201を備えている。したがって、図65に示すように、放送局100およびテレビ受信機300で構成される立体画像表示システム10Aも考えられる。
Claims (3)
- 画像領域を階層的に分割して得られた各階層のうち、選択された階層の各領域の左眼画像および右眼画像の一方に対する他方の視差情報を階層順に配置した視差情報セットを作成する視差情報作成部と、
左眼画像データおよび右眼画像データを含む立体画像データと共に、上記視差情報作成部で作成された視差情報セットを送信するデータ送信部とを備え、
上記視差情報作成部で作成される視差情報セットを構成する各視差情報には、該視差情報が属する最下層の位置情報が付加されている
立体画像データ送信装置。 - 画像領域を階層的に分割して得られた各階層のうち、選択された階層の各領域の左眼画像および右眼画像の一方に対する他方の視差情報を階層順に配置した視差情報セットを作成する視差情報作成ステップと、
左眼画像データおよび右眼画像データを含む立体画像データと共に、上記視差情報作成ステップで作成された視差情報セットを送信するデータ送信ステップとを有し、
上記視差情報作成ステップで作成される視差情報セットを構成する各視差情報には、該視差情報が属する最下層の位置情報が付加されている
立体画像データ送信方法。 - 左眼画像データおよび右眼画像データを含む立体画像データと共に、画像領域を階層的に分割して得られた各階層のうち、選択された階層の各領域の左眼画像および右眼画像の一方に対する他方の視差情報を階層順に配置した視差情報セットを受信するデータ受信部と、
上記データ受信部で受信された上記左眼画像データおよび上記右眼画像データと、上記データ受信部で受信された上記視差情報セットとを用い、左眼画像および右眼画像に重畳する同一の重畳情報に視差を付与し、上記重畳情報が重畳された左眼画像のデータおよび上記重畳情報が重畳された右眼画像のデータを得る画像データ処理部とを備え、
上記データ受信部で受信された上記視差情報セットを構成する各視差情報には、該視差情報が属する最下層の位置情報が付加されている
立体画像データ受信装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011005410A JP5531972B2 (ja) | 2009-06-29 | 2011-01-14 | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009153686 | 2009-06-29 | ||
JP2009153686 | 2009-06-29 | ||
JP2011005410A JP5531972B2 (ja) | 2009-06-29 | 2011-01-14 | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010007317A Division JP2011030182A (ja) | 2009-06-29 | 2010-01-15 | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011120261A JP2011120261A (ja) | 2011-06-16 |
JP5531972B2 true JP5531972B2 (ja) | 2014-06-25 |
Family
ID=43410928
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011005410A Expired - Fee Related JP5531972B2 (ja) | 2009-06-29 | 2011-01-14 | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 |
Country Status (9)
Country | Link |
---|---|
US (3) | US20110149024A1 (ja) |
EP (1) | EP2451165A4 (ja) |
JP (1) | JP5531972B2 (ja) |
KR (1) | KR20120097313A (ja) |
CN (1) | CN102165784A (ja) |
BR (1) | BRPI1004295A2 (ja) |
RU (2) | RU2463731C1 (ja) |
TW (1) | TW201116041A (ja) |
WO (1) | WO2011001851A1 (ja) |
Families Citing this family (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102131097B (zh) * | 2011-03-21 | 2016-05-18 | 中国电信股份有限公司 | 3d流媒体传输方法及*** |
TWI486052B (zh) * | 2011-07-05 | 2015-05-21 | Realtek Semiconductor Corp | 立體影像處理裝置以及立體影像處理方法 |
JP2013066075A (ja) * | 2011-09-01 | 2013-04-11 | Sony Corp | 送信装置、送信方法および受信装置 |
US9407897B2 (en) | 2011-09-30 | 2016-08-02 | Panasonic Intellectual Property Management Co., Ltd. | Video processing apparatus and video processing method |
JP2013085052A (ja) * | 2011-10-07 | 2013-05-09 | Hitachi Consumer Electronics Co Ltd | 表示装置及び再生装置 |
JP5868997B2 (ja) | 2011-11-25 | 2016-02-24 | 日立マクセル株式会社 | 画像伝送装置、画像伝送方法、画像受信装置および画像受信方法 |
KR101899324B1 (ko) * | 2011-12-28 | 2018-09-18 | 삼성전자주식회사 | 3d 입체 영상을 제공하는 디스플레이 장치 및 방법 |
CN106851239B (zh) | 2012-02-02 | 2020-04-03 | 太阳专利托管公司 | 用于使用视差信息的3d媒体数据产生、编码、解码和显示的方法和装置 |
US9451234B2 (en) | 2012-03-01 | 2016-09-20 | Sony Corporation | Transmitting apparatus, transmitting method, and receiving apparatus |
CN103517062B (zh) * | 2012-06-15 | 2016-05-25 | 晨星软件研发(深圳)有限公司 | 影像的同步方法及其装置 |
US9674499B2 (en) * | 2012-08-15 | 2017-06-06 | Qualcomm Incorporated | Compatible three-dimensional video communications |
CN107318027B (zh) * | 2012-12-27 | 2020-08-28 | 日本电信电话株式会社 | 图像编码/解码方法、图像编码/解码装置、以及图像编码/解码程序 |
EP2984824A4 (en) * | 2013-04-12 | 2016-11-09 | Intel Corp | SIMPLIFIED DEPTH CODING DEPENDING ON THE SIZE OF THE CODING UNIT FOR 3D VIDEO CODING |
CN106210746B (zh) * | 2013-07-12 | 2019-10-11 | 索尼公司 | 图像解码装置和方法 |
US10051364B2 (en) * | 2014-07-03 | 2018-08-14 | Qualcomm Incorporated | Single channel or multi-channel audio control interface |
KR102355472B1 (ko) * | 2014-09-12 | 2022-01-26 | 소니그룹주식회사 | 송신 장치, 송신 방법, 수신 장치 및 수신 방법 |
US9948913B2 (en) | 2014-12-24 | 2018-04-17 | Samsung Electronics Co., Ltd. | Image processing method and apparatus for processing an image pair |
JP6862830B2 (ja) * | 2014-12-29 | 2021-04-21 | ソニーグループ株式会社 | 送信装置、送信方法、受信装置および受信方法 |
CN105763848B (zh) * | 2016-03-03 | 2019-06-11 | 浙江宇视科技有限公司 | 鱼眼摄像机后端接入方法及*** |
JP6472845B2 (ja) * | 2017-08-28 | 2019-02-20 | マクセル株式会社 | 画像受信装置 |
EP3553590A1 (de) | 2018-04-13 | 2019-10-16 | Deutsche Telekom AG | Vorrichtung und verfahren zur aufzeichnung, übertragung und räumlichen rekonstruktion von bildern dreidimensionaler objekte |
GB2576696A (en) | 2018-07-27 | 2020-03-04 | Cross Flow Energy Company Ltd | Turbine |
WO2020032004A1 (ja) * | 2018-08-06 | 2020-02-13 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 三次元データ格納方法、三次元データ取得方法、三次元データ格納装置、及び三次元データ取得装置 |
CN114764824A (zh) * | 2020-12-30 | 2022-07-19 | 安霸国际有限合伙企业 | 使用导引节点的视差图构建 |
Family Cites Families (36)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06301390A (ja) * | 1993-04-12 | 1994-10-28 | Sanyo Electric Co Ltd | 立体音像制御装置 |
JP3157384B2 (ja) * | 1994-06-20 | 2001-04-16 | 三洋電機株式会社 | 立体映像装置 |
RU2097940C1 (ru) * | 1995-04-18 | 1997-11-27 | Акционерное общество закрытого типа "Ракурс-ЗД" | Способ получения и воспроизведения объемного изображения и устройство для его реализации |
US5612735A (en) * | 1995-05-26 | 1997-03-18 | Luncent Technologies Inc. | Digital 3D/stereoscopic video compression technique utilizing two disparity estimates |
US5619256A (en) * | 1995-05-26 | 1997-04-08 | Lucent Technologies Inc. | Digital 3D/stereoscopic video compression technique utilizing disparity and motion compensated predictions |
DE69736062T2 (de) * | 1996-02-28 | 2007-01-11 | Matsushita Electric Industrial Co., Ltd., Kadoma | Optische Platte mit verschachtelt aufgezeichneten Digitalvideo-Datenströmen, sowie Vorrichtungen und Verfahren zur Aufzeichnung auf und Wiedergabe von der optischen Platte |
JPH11113028A (ja) * | 1997-09-30 | 1999-04-23 | Toshiba Corp | 3次元映像表示装置 |
JPH11289555A (ja) * | 1998-04-02 | 1999-10-19 | Toshiba Corp | 立体映像表示装置 |
JP2000020698A (ja) * | 1998-07-06 | 2000-01-21 | Fuji Photo Film Co Ltd | 3次元画像ファイル作成方法および装置、画像生成方法および装置並びにこれらの方法をコンピュータに実行させるためのプログラムを記録したコンピュータ読取り可能な記録媒体 |
JP2000078611A (ja) * | 1998-08-31 | 2000-03-14 | Toshiba Corp | 立体映像受信装置及び立体映像システム |
JP2001061164A (ja) * | 1999-08-19 | 2001-03-06 | Toshiba Corp | 立体映像信号伝送方法 |
KR100424401B1 (ko) * | 2001-11-02 | 2004-03-24 | 전자부품연구원 | 검색기능을 포함한 3차원 입체영상을 위한 다시점영상통신 시스템 |
EP2357841B1 (en) * | 2002-03-27 | 2015-07-22 | Sanyo Electric Co., Ltd. | Method and apparatus for processing three-dimensional images |
JP2004274125A (ja) * | 2003-03-05 | 2004-09-30 | Sony Corp | 画像処理装置および方法 |
JP2004274642A (ja) * | 2003-03-12 | 2004-09-30 | Nippon Telegr & Teleph Corp <Ntt> | 3次元映像情報の伝送方法 |
JP4190357B2 (ja) | 2003-06-12 | 2008-12-03 | シャープ株式会社 | 放送データ送信装置、放送データ送信方法および放送データ受信装置 |
WO2006111893A1 (en) * | 2005-04-19 | 2006-10-26 | Koninklijke Philips Electronics N.V. | Depth perception |
JP4637672B2 (ja) * | 2005-07-22 | 2011-02-23 | 株式会社リコー | 符号化処理装置及び方法 |
JP2007166277A (ja) * | 2005-12-14 | 2007-06-28 | Nippon Telegr & Teleph Corp <Ntt> | 3次元画像情報の伝送方法、送信側装置および受信側装置 |
US20090284584A1 (en) * | 2006-04-07 | 2009-11-19 | Sharp Kabushiki Kaisha | Image processing device |
WO2008115222A1 (en) * | 2007-03-16 | 2008-09-25 | Thomson Licensing | System and method for combining text with three-dimensional content |
CN100496121C (zh) * | 2007-04-11 | 2009-06-03 | 宁波大学 | 一种交互式多视点视频***的图像信号处理方法 |
CN101072366B (zh) * | 2007-05-24 | 2010-08-11 | 上海大学 | 基于光场和双目视觉技术的自由立体显示***和方法 |
US20080303832A1 (en) * | 2007-06-11 | 2008-12-11 | Samsung Electronics Co., Ltd. | Method of generating two-dimensional/three-dimensional convertible stereoscopic image bitstream and method and apparatus for displaying the same |
JP2009135686A (ja) * | 2007-11-29 | 2009-06-18 | Mitsubishi Electric Corp | 立体映像記録方法、立体映像記録媒体、立体映像再生方法、立体映像記録装置、立体映像再生装置 |
KR100955578B1 (ko) * | 2007-12-18 | 2010-04-30 | 한국전자통신연구원 | 스테레오스코픽 콘텐츠 장면 재생 방법 및 그 장치 |
CN101350931B (zh) * | 2008-08-27 | 2011-09-14 | 华为终端有限公司 | 音频信号的生成、播放方法及装置、处理*** |
JP5577348B2 (ja) * | 2008-12-01 | 2014-08-20 | アイマックス コーポレイション | 内容順応情報を有する3次元動画提示方法及びシステム |
US8358331B2 (en) * | 2008-12-02 | 2013-01-22 | Lg Electronics Inc. | 3D caption display method and 3D display apparatus for implementing the same |
MX2011008609A (es) * | 2009-02-17 | 2011-09-09 | Koninklije Philips Electronics N V | Combinar datos de imagen tridimensional y graficos. |
JP2011030179A (ja) * | 2009-06-29 | 2011-02-10 | Sony Corp | 画像データ送信装置、制御方法およびプログラム |
JP5429034B2 (ja) * | 2009-06-29 | 2014-02-26 | ソニー株式会社 | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 |
JP5402715B2 (ja) * | 2009-06-29 | 2014-01-29 | ソニー株式会社 | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 |
JP2011030182A (ja) * | 2009-06-29 | 2011-02-10 | Sony Corp | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 |
JP5407968B2 (ja) * | 2009-06-29 | 2014-02-05 | ソニー株式会社 | 立体画像データ送信装置および立体画像データ受信装置 |
JP2011030180A (ja) * | 2009-06-29 | 2011-02-10 | Sony Corp | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 |
-
2010
- 2010-06-07 TW TW99118369A patent/TW201116041A/zh unknown
- 2010-06-22 US US13/059,020 patent/US20110149024A1/en not_active Abandoned
- 2010-06-22 CN CN201080002717XA patent/CN102165784A/zh active Pending
- 2010-06-22 BR BRPI1004295A patent/BRPI1004295A2/pt not_active IP Right Cessation
- 2010-06-22 KR KR20117003239A patent/KR20120097313A/ko not_active Application Discontinuation
- 2010-06-22 EP EP10794021.5A patent/EP2451165A4/en not_active Withdrawn
- 2010-06-22 RU RU2011105394/07A patent/RU2463731C1/ru not_active IP Right Cessation
- 2010-06-22 WO PCT/JP2010/060579 patent/WO2011001851A1/ja active Application Filing
-
2011
- 2011-01-14 JP JP2011005410A patent/JP5531972B2/ja not_active Expired - Fee Related
-
2012
- 2012-06-13 RU RU2012124406/08A patent/RU2012124406A/ru unknown
-
2013
- 2013-05-24 US US13/901,742 patent/US20140053220A1/en not_active Abandoned
- 2013-05-24 US US13/901,762 patent/US20140053224A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
RU2011105394A (ru) | 2012-08-20 |
US20110149024A1 (en) | 2011-06-23 |
KR20120097313A (ko) | 2012-09-03 |
CN102165784A (zh) | 2011-08-24 |
TW201116041A (en) | 2011-05-01 |
JP2011120261A (ja) | 2011-06-16 |
RU2012124406A (ru) | 2013-12-20 |
EP2451165A1 (en) | 2012-05-09 |
WO2011001851A1 (ja) | 2011-01-06 |
BRPI1004295A2 (pt) | 2016-03-15 |
EP2451165A4 (en) | 2013-12-04 |
US20140053220A1 (en) | 2014-02-20 |
US20140053224A1 (en) | 2014-02-20 |
RU2463731C1 (ru) | 2012-10-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5531972B2 (ja) | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 | |
JP5446913B2 (ja) | 立体画像データ送信装置および立体画像データ送信方法 | |
JP5407957B2 (ja) | 立体画像データ送信装置および立体画像データ受信装置 | |
JP5402715B2 (ja) | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 | |
WO2011001855A1 (ja) | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 | |
JP5407968B2 (ja) | 立体画像データ送信装置および立体画像データ受信装置 | |
TWI452892B (zh) | Image data transmission device, control method and program | |
JP5521486B2 (ja) | 立体画像データ送信装置および立体画像データ送信方法 | |
WO2011001854A1 (ja) | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 | |
JP5633259B2 (ja) | 立体画像データ送信装置、立体画像データ送信方法および立体画像データ受信装置 | |
JP2011166757A (ja) | 送信装置、送信方法および受信装置 | |
WO2012063675A1 (ja) | 立体画像データ送信装置、立体画像データ送信方法および立体画像データ受信装置 | |
JP2011010255A (ja) | 立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 | |
JP2013176141A (ja) | 立体画像データ受信装置および立体画像データ受信方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20121227 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130930 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20131105 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20131227 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140325 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140407 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5531972 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |