CN100586178C - 收发图像数据的设备和方法 - Google Patents

收发图像数据的设备和方法 Download PDF

Info

Publication number
CN100586178C
CN100586178C CN200610066841A CN200610066841A CN100586178C CN 100586178 C CN100586178 C CN 100586178C CN 200610066841 A CN200610066841 A CN 200610066841A CN 200610066841 A CN200610066841 A CN 200610066841A CN 100586178 C CN100586178 C CN 100586178C
Authority
CN
China
Prior art keywords
image
view data
rendering
parameter
transport stream
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN200610066841A
Other languages
English (en)
Other versions
CN1882080A (zh
Inventor
俞弼皓
河泰铉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN1882080A publication Critical patent/CN1882080A/zh
Application granted granted Critical
Publication of CN100586178C publication Critical patent/CN100586178C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/156—Mixing image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/356—Image reproducers having separate monoscopic and stereoscopic modes
    • H04N13/359—Switching between monoscopic and stereoscopic modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614—Multiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365—Multiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4347—Demultiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/243—Image signal generators using stereoscopic image cameras using three or more 2D image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/349—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/361—Reproducing mixed stereoscopic images; Reproducing mixed monoscopic and stereoscopic images, e.g. a stereoscopic image overlay window on a monoscopic image background

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

一种图像发送设备和方法以及一种图像接收设备和方法，所述图像接收设备包括：解码器，接收并解码包括图像数据和图像特征参数的图像信号来产生解码的图像信号，所述图像特征参数含有指示该图像数据是表示二维(2D)图像还是三维(3D)图像的信息；图像特征参数检测器，接收解码的图像信号，从解码的图像信号中提取并解释图像特征参数；和显示单元，从图像特征参数检测器接收图像特征参数，并根据该图像特征参数显示从解码器接收的图像数据，以在诸如可被显示在数字广播标准***上的3D图像广播等的各种领域中显示2D图像和3D图像。

Description

收发图像数据的设备和方法
本申请要求于2005年6月14日在韩国知识产权局提交的第10-2005-0051135号韩国专利申请的优先权，其公开全部包括于此以资参考。
技术领域
本发明涉及一种接收和发送图像的设备和方法及其传输流结构，更具体地说，涉及一种包括头的传输流结构，一种发送该传输流的设备和方法，以及一种从图像发送设备接收并显示该传输流的设备和方法，所述头在其预定位置含有表示二维(2D)/三维(3D)图像的特征的图像特征参数。
背景技术
近来，已进行了对广播要显示在数字电视(DTV)上的三维(3D)图像的研究。数字广播将诸如视频、音频、其它数据等的模拟信号转换为数字信号，压缩并发送该数字信号，随后接收数字信号并将它们转换和再现为原始视频、音频、和其它数据。与传统的模拟广播相比，数字广播提供高画质的服务。
此外，当前在进行使用如上所述的数字广播技术接收和显示3D图像的研究。接收和显示3D图像的传统方法使用双眼像差。使用双眼像差的接收和显示3D图像的方法包括：“立体视法(stereoscopy)”方法，其使用诸如偏振镜、LC快门镜等的眼镜观看3D图像；和“自立体视法(autostereoscopy)”方法，其允许使用包括双凸透镜、视差格栅、视差照明等用裸眼看3D图像。
使用偏振投影仪显示图像的立体视法方法已主要被应用于诸如剧院的公共场所。自立体视法方法已被应用于游戏、家庭电视、展览的显示器等。
到目前为止，许多研究已集中在使用自立体视法实现3D图像上，各种相关产品已进行销售。迄今已引入的大多数3D显示器仅可实现3D图像，并且比2D显示器贵很多。
然而，由于不是积极地提供3D图像内容，所以昂贵的3D图像显示器不能被充分利用并且成本效率低。
因此，目前正在进行对开发2D/3D可转换的显示器的研究，该显示器选择性地实现2D图像和3D图像，并且各种相关产品正被引入。
为了广播与裸眼看到的真实图像相似的3D图像，多视3D图像必须被获得和发送，随后被接收，最后被3D显示器再现。然而，由于多视3D图像包括大量数据，所以难以通过在现有数字广播***中使用的信道的带宽发送多视3D图像。由于此原因，正进行对发送和接收立体图像的研究。关于由MPEG(运动图像专家组)正在开发的3D图像相关标准，已在1996年开发了MPEG-2多视概况，并且与立体图像和多视图像的压缩相关的标准接近完成。同其一起，相关小组正活跃地进行对通过数字电视广播而发送和接收3D图像的研究。近来，正活跃地进行对发送和接收高分辨率(HD)立体图像的研究。同时，在包括数字广播***、仿真或医学分析***等的大多数的领域中，对实现3D图像以及2D图像的需求正在增长。然而，由于还没有开发出用于选择性地实现2D图像和3D图像的传输流结构的标准，所以必须进一步研究一种发送传输流的设备和方法以及一种接收和显示传输流的设备和方法。
发明内容
在数字广播***等中，本发明提供一种包括头的传输流结构，一种发送该传输流的设备和方法，以及一种接收并显示该传输流的设备和方法，所述头在其预定位置含有表示二维(2D)/三维(3D)图像的特征的图像特征参数。
根据本发明的一方面，提供一种用于数字广播***的传输流结构，包括：头，其包括图像特征参数，该图像特征参数含有指示在数字广播***中使用的图像数据是表示二维(2D)图像还是三维(3D)图像的信息；和净荷，其包括图像数据。
根据本发明的另一方面，提供一种图像发送设备，包括：存储单元，存储图像数据；图像特征参数产生器，创建指示存储的图像数据是表示二维(2D)图像还是表示三维(3D)图像的图像特征参数；和编码器，接收存储的图像数据和图像特征参数，对存储的图像数据和图像特征参数进行编码，从而存储的图像数据和图像特征参数被包括在传输流中。
根据本发明的另一方面，提供一种图像接收设备，包括：解码器，接收并解码包括图像数据和含有指示该图像数据是表示二维(2D)图像还是三维(3D)图像的信息的图像特征参数的图像信号；图像特征参数检测器，接收解码的图像信号并检测图像特征参数；和显示单元，根据从图像特征参数检测器接收的图像特征参数，显示从解码器接收的图像数据。
根据本发明的另一方面，提供一种图像发送方法，包括：(a)接收图像数据；(b)接收含有指示该图像数据是表示二维(2D)图像还是三维(3D)图像的信息的图像特征参数；(c)对图像数据和图像特征参数进行编码，从而图像数据和图像特征参数被包括在传输流中。
根据本发明的另一方面，提供一种图像接收方法，包括：(a)接收并解码包括图像数据和含有指示该图像数据是表示二维(2D)图像还是三维(3D)图像的信息的图像特征参数的图像信号；(b)接收解码的图像信号并检测图像特征参数；(c)接收在操作(b)中检测的图像特征参数；和(d)根据在操作(c)中接收的图像特征参数显示在操作(a)中解码的图像数据。
根据本发明的另一方面，提供一种已在其上实施了用于执行所述图像发送方法的计算机程序的计算机可读介质。
根据本发明的另一方面，提供一种已在其上实施了用于执行所述图像接收方法的计算机程序的计算机可读介质。
附图说明
通过参照附图对本发明的示例性、非限制性实施例进行的详细描述，本发明的以上和其它特点和优点将会变得更加清楚，其中：
图1是根据本发明的非限制性实施例的传输流结构的示图；
图2A和2B是根据本发明的非限制性实施例的解释关于三维(3D)图像的相机视点数量的示例的示图；
图3A至3D是示出根据本发明的非限制性实施例的3D图像的显示格式的示例的示图；
图4是根据本发明的非限制性实施例的图像发送设备的框图；
图5是根据本发明的非限制性实施例的图像接收设备的框图；
图6是示出根据本发明的非限制性实施例的图像发送方法的流程图；和
图7是示出根据本发明的非限制性实施例的图像接收方法的流程图。
具体实施方式
现在将参照附图更充分地描述本发明，本发明的示例性的非限制性实施例显示在附图中。
图1是根据本发明的非限制性实施例的传输流结构的示图。参照图1，该传输流由头100和净荷120组成。
传输流的头100包括用于显示在净荷120中包括的图像的控制信息。表示在净荷120中存储的图像数据的特征的图像特征参数102被包括在传输流头100的预定位置上。图像特征参数102包括2D/3D标识信息102a，该标识信息102a指示在净荷120中存储的图像数据是2D图像(例如，普通电视信号、VCR信号等)还是3D图像。如果在净荷120中存储的图像数据是3D图像，则图像特征参数102还可包括关于3D图像的相机视点数量的信息102b。这里，3D图像的相机视点数量指示当对象被相机拍摄并被制成图像时拍摄对象的不同角度的数量。将参照图2更详细地描述3D图像的相机视点数量。
此外，如果在净荷120中存储的图像数据是3D图像，则图像特征参数102还可包括3D图像的显示格式信息102c。这里，显示格式信息102c指示在其中单个场景被显示以形成3D图像的格式。更详细地说，3D图像的显示格式包括逐行格式、逐像素格式、自顶向下格式、并排格式等。将参照图3更详细地描述关于3D图像的显示格式的信息。
图2A和2B是根据本发明的当前的非限制性实施例的解释关于三维(3D)图像的相机视点数量的示例的示图。
参照图2A，由两个位于不同位置的相机221和222拍摄对象200。即，3D图像的相机视点的数量是2。这里，对象可以是静止对象或运动对象。两个相机221和222中的每个对相同的对象200分别拍摄左眼图像和右眼图像。
参照图2B，由四个位于不同位置的相机221、222、223和224拍摄对象200。即，3D图像的相机视点的数量是4。
在图2A和2B中，所述对象可以是静止对象或运动对象。
在图2A和2B中，3D图像的相机视点数量分别是二和四，然而，在本发明中，单个对象的相机视点数量不限于这些图。
图3A至3D是示出根据本发明的当前实施例的3D图像的显示格式的示例的示图。参照图3A至3D，图3A示出基于逐行格式的图像，图3B显示基于逐像素格式的图像，图3C示出基于自顶向下格式的图像，图3D示出基于逐侧格式的图像。
更详细地说，在下文中，将描述立体图像(左眼图像和右眼图像)的显示格式。左眼图像和右眼图像每个具有N×M的大小。基于图3A所示的逐行格式的图像是通过在垂直方向上对左眼图像和右眼图像分别进行1/2子采样以使左眼图像的像素和右眼图像的像素交替地位于各行而获得的3D图像。基于图3B所示的逐像素格式的图像是通过在水平方向上对左眼图像和右眼图像分别进行1/2子采样以使左眼图像的像素和右眼图像的像素交替地位于各行而获得的3D图像。基于图3C所示的自顶向下格式的图像是通过在垂直方向上对左眼图像和右眼图像分别进行1/2子采样，将采样的左眼图像置于上部并将采样的右眼图像置于下部而获得的3D图像。即，通过将每个具有N×M的大小的左眼图像和右眼图像分别子采样成N×M/2的大小并将采样结果分别置于上部和下部，获得N×M的大小的3D图像。基于图3D所示的逐侧格式的图像是通过在水平方向上对左眼图像和右眼图像分别进行1/2子采样，将采样的左眼图像置于左部并将采样的右眼图像置于右部而获得的3D图像。即，通过将每个具有N×M的大小的左眼图像和右眼图像分别子采样成N/2×M的大小并将采样结果分别置于左部和右部，获得N×M的大小的3D图像。
在如上所述的3D图像显示格式中，主要使用图3C所示的自顶向下格式和图3D所示的逐侧格式，这是因为它们当根据MPEG标准被压缩和发送时有效率。
图4是根据本发明的非限制性实施例的图像发送设备的框图。参照图4，该图像发送设备包括：存储单元400、图像特征参数产生器410、用户接口单元420、编码器430、和发送器440。存储单元400存储通过拍摄对象而获得的图像数据。在存储单元400中存储的图像数据可以是通过使用单个相机拍摄对象而获得的图像或通过使用多个相机拍摄对象而获得的图像。
即，在存储单元400中存储的图像数据可以是2D图像或基于以上参照图3A至3D描述的显示格式之一的3D图像，通过对由多个相机拍摄的左眼图像和右眼图像进行子采样和组合来获得所述3D图像。
图像特征参数产生器410创建表示在存储单元400中存储的图像数据的特征的图像特征参数。这里，图像特征参数包括指示所述图像数据是表示2D图像还是3D图像的信息。如果图像数据表示3D图像，则图像特征参数还可包括相机视点数量信息或显示格式信息。
用户接口单元420从用户接收用于控制图像特征参数产生器410的命令，并提供用于接收图像特征参数的输入/输出接口。用户可通过用户接口单元420创建表示在存储单元400中存储的图像数据的特征的图像特征参数。
根据本发明的非限制性实施例，使用用户接口单元420创建图像特征参数，然而，诸如当拍摄图像时创建图像特征参数的各种实施例是可行的。
编码器430从存储单元400接收通过拍摄对象而获得的图像数据以及由图像特征参数产生器410创建的图像特征参数。此外，编码器430对从存储单元400接收的图像数据和从图像特征参数产生器410接收的图像特征参数进行编码，并将接收的数据转换成传输流格式。这里，编码器430执行编码以将从存储单元400接收的图像数据包括在传输流的净荷中并将图像特征参数包括在传输流的头的预定位置。此外，编码器430使用诸如MPEG等的各种方法执行编码。发送器440根据诸如数字广播标准等的发送标准来发送编码的传输流。
图5是根据本发明的非限制性实施例的图像接收设备的框图。参照图5，该图像接收设备包括：接收器500、解码器510、图像特征参数检测器520、和显示单元530。
接收器500从图像发送设备接收图像信号。这里，通过接收器500接收的图像信号是具有传输流格式的图像信号。
解码器510根据图像发送设备使用的编码标准执行解码。如果已根据MPEG-2标准对图像信号进行编码，则解码器510根据该MPEG-2标准执行解码。更详细地说，解码器510使用诸如可变长度解码、逆DCT、逆量化、运动补偿等的解码技术，将考虑图像信号的时间、空间相关性而编码的图像信号恢复为编码前的原始图像和原始图像特征参数。
图像特征参数检测器520在包括在解码的传输流的头的预定位置的信息之中检测图像特征参数。这里，图像特征参数包括指示在净荷中包括的图像数据是2D图像还是3D图像的信息。此外，如果图像数据表示3D图像，则图像特征参数还可包括相机视点数量信息或显示格式信息。
显示单元530从图像特征参数检测器520接收图像特征参数并接收由解码器510解码的图像数据。此外，显示单元530将根据图像特征参数解码的图像数据显示在屏幕上。
更详细地说，如果图像特征参数指示2D图像，则显示单元530将从解码器510接收的解码的图像数据按二维显示在屏幕上。此外，如果图像特征参数指示3D图像，则显示单元530将从解码器510接收的解码的图像数据按三维显示在屏幕上。此外，如果图像特征参数指示3D图像并还包括相机视点数量信息或显示格式信息，则显示单元530根据相机视点数量信息或显示格式信息将解码的图像数据转换并显示成预定格式。
这里，在本发明中，显示单元530可以是2D/3D可转换的显示器。可使用各种方法实现2D/3D可转换的显示器。具体地，如在标题为“2D/3Dconvertible display”的第10-0440956号韩国专利申请中所公开的，根据本发明的显示单元530可包括：图像形成面板显示器、透镜单元、和选择性地向透镜单元提供电压的电源。此外，显示单元530可由2D/3D可转换的显示器实现，该2D/3D可转换的显示器包括在TFT-LCD之后的液晶快门并使用该液晶快门选择性地显示2D图像和3D图像。然而，上述示例仅仅是示例性的，根据本发明的显示单元530不限于此。
图6是示出根据本发明实施例的图像发送方法的流程图。参照图6，首先，接收通过拍摄对象而获得的图像数据(操作S600)。这里，图像数据是通过使用单个相机或多个相机拍摄对象而获得的图像数据。
接下来，接收表示图像数据的特征的图像特征参数(操作S610)。这里，图像特征参数包括指示在操作S600中接收的图像数据是2D图像还是3D图像的信息。如果该图像数据是3D图像，则图像特征参数还可包括相机视点数量信息或显示格式信息。
随后，在操作S600中接收的图像数据和在操作S610中接收的图像特征参数被编码并被转换为传输流格式(操作S620)。这里，图像数据被包括在传输流的净荷中，图像特征参数被包括在传输流的头的预定位置。在操作S620中，使用诸如MPEG等的编码方法执行编码。
接下来，根据数字广播标准等发送在操作S620中编码的传输流(操作S630)。
参照图4，本领域的技术人员将更详细地理解参照图6描述的图像发送方法。
图7是示出根据本发明的非限制性实施例的图像接收方法的流程图。参照图7，首先，通过天线接收包括图像数据和关于图像数据的图像特征参数的图像信号(操作S700)。这里，接收的图像信号是具有传输流格式的图像信号。
接下来，对接收的图像信号进行解码(操作S710)。然后，接收解码的图像信号并检测关于图像数据的图像特征参数(操作S720)。这里，图像特征参数包括指示在净荷中存储的图像数据表示2D图像还是3D图像的信息。如果图像数据表示3D图像，则图像特征参数还可包括相机视点数量信息和显示格式信息。
随后，在操作S720中检测的图像特征参数被输出到显示单元(操作S730)。
其后，根据在操作S730中发送的图像特征参数，在操作S710中解码的图像数据被显示在屏幕上(操作S740)。
参照图5，本领域的技术人员将更详细地理解参照图7描述的图像接收方法。
本发明还可被实施为计算机可读记录介质上的计算机可读代码。计算机可读记录介质是可存储在其后可由计算机***读取的数据的任何数据存储装置。计算机可读记录介质的示例包括：只读存储器(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘、光数据存储装置、和载波。计算机可读记录介质还可被分布到连接到网络的计算机***中，从而计算机可读代码以分布式方式被存储和执行。
如上所述，根据本发明，提供一种图像发送设备和方法、一种图像接收设备和方法、及其传输流结构，在需要更强的图像信息的许多领域中，它们能够显示2D图像和3D图像。例如，在医学分析领域、工程领域、仿真领域等中，将来将使用DTV标准***等来显示3D图像。
尽管已参照其示例性的非限制性实施例具体显示和描述了本发明，但本领域的普通技术人员应该理解，在不脱离由权利要求定义的本发明的精神和范围的情况下，可对其进行形式和细节上的各种改变。

Claims (24)

1、一种图像发送设备，包括：
存储单元，存储图像数据；
图像特征参数产生器，创建指示所述图像数据是表示2D图像还是表示3D图像的图像特征参数；和
编码器，接收图像数据和图像特征参数，对图像数据和图像特征参数进行编码，从而图像数据和图像特征参数被包括在传输流中，
其中，所述图像特征参数包括关于3D图像的显示格式的信息。
2、如权利要求1所述的图像发送设备，其中，编码器执行编码以将图像数据包括在传输流的净荷中并将图像特征参数包括在传输流的头中。
3、如权利要求1所述的图像发送设备，其中，编码器还包括发送传输流的发送单元。
4、如权利要求1所述的图像发送设备，还包括用户接口单元，其从用户接收用于控制图像特征参数产生器的命令，并提供用于接收图像特征参数的输入/输出接口。
5、如权利要求1所述的图像发送设备，其中，如果所述图像数据是3D图像，则图像特征参数还包括关于3D图像的相机视点数量的信息。
6、如权利要求1所述的图像发送设备，其中，3D图像的显示格式是逐行格式、逐像素格式、自顶向下格式、和并排格式中的一个。
7、如权利要求1所述的图像发送设备，其中，图像数据是数字广播***的数据。
8、一种图像接收设备，包括：
解码器，接收并解码包括图像数据和图像特征参数的图像信号来产生解码的图像信号，所述图像特征参数包括指示该图像数据是表示2D图像还是3D图像的信息；
图像特征参数检测器，接收解码的图像信号并检测图像特征参数；和
显示单元，根据从图像特征参数检测器接收的图像特征参数，显示从解码器接收的图像数据，
其中，所述图像特征参数包括关于3D图像的显示格式的信息。
9、如权利要求8所述的图像接收设备，还包括：
接收器，接收具有所述传输流格式的图像信号，该传输流格式具有包括图像特征参数的头以及包括图像数据的净荷，并且该接收器将图像信号输出到解码器。
10、如权利要求8所述的图像接收设备，其中，图像特征参数检测器检测在解码的图像信号的头中的图像特征参数。
11、如权利要求8所述的图像接收设备，其中，如果所述图像数据是3D图像，则图像特征参数还包括关于3D图像的相机视点数量的信息。
12、如权利要求8所述的图像接收设备，其中，3D图像的显示格式是逐行格式、逐像素格式、自顶向下格式、和并排格式中的一个。
13、如权利要求8所述的图像接收设备，其中，图像数据是数字广播***的数据。
14、一种图像发送方法，包括：
(a)接收图像数据；
(b)接收包括指示该图像数据是表示2D图像还是3D图像的信息的图像特征参数；
(c)对图像数据和图像特征参数进行编码，从而图像数据和图像特征参数被包括在传输流中，
其中，所述图像特征参数包括关于3D图像的显示格式的信息。
15、如权利要求14所述的图像发送方法，其中，在操作(c)中，图像数据被包括在传输流的净荷中，并且图像特征参数被包括在传输流的头中。
16、如权利要求14所述的图像发送方法，其中，操作(c)还包括发送传输流。
17、如权利要求14所述的图像发送方法，其中，如果所述图像数据是3D图像，则图像特征参数还包括关于3D图像的相机视点数量的信息。
18、如权利要求14所述的图像发送方法，其中，图像数据是数字广播***的数据。
19、一种图像接收方法，包括：
(a)接收并解码包括图像数据和含有指示该图像数据是表示2D图像还是3D图像的信息的图像特征参数的图像信号；
(b)接收解码的图像信号并检测图像特征参数；
(c)接收在操作(b)中检测的图像特征参数；和
(d)根据在操作(c)中接收的图像特征参数显示在操作(a)中解码的图像数据，
其中，所述图像特征参数包括关于3D图像的显示格式的信息。
20、如权利要求19所述的图像接收方法，在操作(a)之前还包括：
接收具有所述传输流格式的图像信号，该传输流格式具有包括表示图像数据的特征的图像特征参数的头以及包括图像数据的净荷。
21、如权利要求19所述的图像接收方法，其中，操作(d)包括：
(d1)接收在操作(a)中解码的图像数据作为输入图像数据；和
(d2)根据在操作(c)中接收的图像特征参数显示输入图像数据。
22、如权利要求19所述的图像接收方法，其中，在操作(b)中，通过检测在解码的图像信号的头中包括的信息来检测图像特征参数。
23、如权利要求19所述的图像接收方法，其中，如果所述图像数据是3D图像，则图像特征参数还包括关于3D图像的相机视点数量的信息。
24、如权利要求19所述的图像接收方法，其中，图像数据是数字广播***的数据。
CN200610066841A 2005-06-14 2006-03-29 收发图像数据的设备和方法 Expired - Fee Related CN100586178C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020050051135 2005-06-14
KR1020050051135A KR100813961B1 (ko) 2005-06-14 2005-06-14 영상 수신장치

Publications (2)

Publication Number Publication Date
CN1882080A CN1882080A (zh) 2006-12-20
CN100586178C true CN100586178C (zh) 2010-01-27

Family

ID=36952656

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200610066841A Expired - Fee Related CN100586178C (zh) 2005-06-14 2006-03-29 收发图像数据的设备和方法

Country Status (5)

Country Link
US (2) US20070008575A1 (zh)
EP (1) EP1734766A3 (zh)
JP (2) JP5328082B2 (zh)
KR (1) KR100813961B1 (zh)
CN (1) CN100586178C (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104427378A (zh) * 2013-09-09 2015-03-18 杭州海康威视数字技术股份有限公司 多类型业务数据流传输装置

Families Citing this family (121)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100777447B1 (ko) * 2006-02-06 2007-11-21 삼성전자주식회사 디지털 방송 송신 및 수신 장치 그리고 그에 적용되는로버스트 스트림 코딩 및 디코딩 방법
KR100842582B1 (ko) * 2007-01-08 2008-07-01 삼성전자주식회사 디지털 멀티미디어 데이터를 송수신하는 디지털 방송 시스템 및 그 방법
KR101360264B1 (ko) * 2007-05-07 2014-02-21 한국전자통신연구원 방송 서비스 방법
US20080303832A1 (en) * 2007-06-11 2008-12-11 Samsung Electronics Co., Ltd. Method of generating two-dimensional/three-dimensional convertible stereoscopic image bitstream and method and apparatus for displaying the same
KR101450145B1 (ko) * 2007-06-11 2014-10-13 삼성전자 주식회사 스테레오스코픽 영상 비트스트림 생성 방법 및 장치
EP2501137A3 (en) 2007-06-11 2012-12-12 Samsung Electronics Co., Ltd. Method and apparatus for generating header information of stereoscopic image
US8416247B2 (en) * 2007-10-09 2013-04-09 Sony Computer Entertaiment America Inc. Increasing the number of advertising impressions in an interactive environment
KR101457893B1 (ko) * 2007-10-10 2014-11-04 삼성전자주식회사 3차원 영상 시청시 발생하는 피로도 감소 방법 및 장치,그리고 저피로도 3차원 영상 데이터 스트림 생성 방법 및장치
US8390674B2 (en) 2007-10-10 2013-03-05 Samsung Electronics Co., Ltd. Method and apparatus for reducing fatigue resulting from viewing three-dimensional image display, and method and apparatus for generating data stream of low visual fatigue three-dimensional image
WO2009075495A1 (en) 2007-12-10 2009-06-18 Samsung Electronics Co., Ltd. System and method for generating and reproducing image file including 2d image and 3d stereoscopic image
KR101480186B1 (ko) * 2007-12-10 2015-01-07 삼성전자주식회사 2ｄ 영상과 3ｄ 입체영상을 포함하는 영상파일을 생성 및재생하기 위한 시스템 및 방법
US8866920B2 (en) 2008-05-20 2014-10-21 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
EP4336447A1 (en) 2008-05-20 2024-03-13 FotoNation Limited Capturing and processing of images using monolithic camera array with heterogeneous imagers
US11792538B2 (en) 2008-05-20 2023-10-17 Adeia Imaging Llc Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
KR101490689B1 (ko) * 2008-05-27 2015-02-06 삼성전자주식회사 카메라 파라미터를 이용한 스테레오스코픽 영상데이터스트림 생성 방법 및 그 장치와 스테레오스코픽 영상복원 방법 및 그 장치
BRPI0904620A2 (pt) * 2008-09-30 2020-08-18 Panasonic Corporation meio de gravação , dispositivo de reprodução, sistema lsi, método de reprodução,óculos, e dispositivo de exibição para imagens 3d
KR101537709B1 (ko) * 2008-12-30 2015-07-20 엘지전자 주식회사 이차원 영상과 3ｄ 영상의 통합 서비스가 가능한 디지털 방송 수신방법, 및 이를 이용한 디지털 방송 수신장치
JP5694952B2 (ja) * 2009-01-20 2015-04-01 コーニンクレッカ フィリップス エヌ ヴェ ３ｄ画像データの転送
US10742953B2 (en) 2009-01-20 2020-08-11 Koninklijke Philips N.V. Transferring of three-dimensional image data
RU2536388C2 (ru) * 2009-01-20 2014-12-20 Конинклейке Филипс Электроникс Н.В. Передача данных 3d изображения
US8947504B2 (en) 2009-01-28 2015-02-03 Lg Electronics Inc. Broadcast receiver and video data processing method thereof
US9041772B2 (en) * 2009-04-07 2015-05-26 Lg Electronics Inc. Broadcast transmitter, broadcast receiver, and 3D video data processing method thereof
JP5274359B2 (ja) * 2009-04-27 2013-08-28 三菱電機株式会社 立体映像および音声記録方法、立体映像および音声再生方法、立体映像および音声記録装置、立体映像および音声再生装置、立体映像および音声記録媒体
US8953017B2 (en) 2009-05-14 2015-02-10 Panasonic Intellectual Property Management Co., Ltd. Source device, sink device, communication system and method for wirelessly transmitting three-dimensional video data using packets
JP5463747B2 (ja) * 2009-06-15 2014-04-09 ソニー株式会社 受信装置、送信装置、通信システム、表示制御方法、プログラム、及びデータ構造
TW201119353A (en) 2009-06-24 2011-06-01 Dolby Lab Licensing Corp Perceptual depth placement for 3D objects
US9215435B2 (en) 2009-06-24 2015-12-15 Dolby Laboratories Licensing Corp. Method for embedding subtitles and/or graphic overlays in a 3D or multi-view video data
KR101347744B1 (ko) * 2009-08-19 2014-01-03 서울시립대학교 산학협력단 영상 처리 장치 및 방법
JP5433862B2 (ja) * 2009-09-30 2014-03-05 日立マクセル株式会社 受信装置及び表示制御方法
MX2012004265A (es) * 2009-10-20 2012-05-29 Samsung Electronics Co Ltd Metodo y aparato de generacion de flujo y metodo y aparato de procesamiento de flujo.
JP5482254B2 (ja) 2009-11-05 2014-05-07 ソニー株式会社 受信装置、送信装置、通信システム、表示制御方法、プログラム、及びデータ構造
WO2011063347A2 (en) 2009-11-20 2011-05-26 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
US8964013B2 (en) * 2009-12-31 2015-02-24 Broadcom Corporation Display with elastic light manipulator
US9247286B2 (en) * 2009-12-31 2016-01-26 Broadcom Corporation Frame formatting supporting mixed two and three dimensional video data communication
JP5450118B2 (ja) * 2010-01-14 2014-03-26 ソニー株式会社 映像伝送装置、映像表示装置、映像表示システム、映像伝送方法及びコンピュータプログラム
WO2011100735A1 (en) * 2010-02-15 2011-08-18 Thomson Licensing Apparatus and method for processing video content
US9426441B2 (en) * 2010-03-08 2016-08-23 Dolby Laboratories Licensing Corporation Methods for carrying and transmitting 3D z-norm attributes in digital TV closed captioning
JP5559614B2 (ja) * 2010-04-21 2014-07-23 日立マクセル株式会社 受信装置および受信方法
JP5848754B2 (ja) 2010-05-12 2016-01-27 ペリカン イメージング コーポレイション 撮像装置アレイおよびアレイカメラのためのアーキテクチャ
WO2011148554A1 (ja) * 2010-05-28 2011-12-01 日立コンシューマエレクトロニクス株式会社 受信装置および出力方法
WO2011151960A1 (ja) * 2010-06-02 2011-12-08 日立コンシューマエレクトロニクス株式会社 受信装置および出力方法
JP5710895B2 (ja) * 2010-06-02 2015-04-30 日立マクセル株式会社 デジタルコンテンツ受信装置およびデジタルコンテンツ受信方法
CN102907111A (zh) 2010-06-02 2013-01-30 日立民用电子株式会社 接收装置、显示控制方法、发送装置和发送方法
EP2579604A4 (en) * 2010-06-02 2013-10-30 Hitachi Consumer Electronics RECEIVING DEVICE AND OUTPUT METHOD
JP5510097B2 (ja) * 2010-06-16 2014-06-04 ソニー株式会社 信号伝送方法、信号送信装置および信号受信装置
JP5882896B2 (ja) * 2010-06-23 2016-03-09 パナソニック株式会社 コンテンツ配信システム、再生装置、配信サーバ、再生方法及び配信方法
JP2012034138A (ja) * 2010-07-29 2012-02-16 Toshiba Corp 信号処理装置及び信号処理方法
WO2012017687A1 (ja) * 2010-08-05 2012-02-09 パナソニック株式会社 映像再生装置
JP2012039340A (ja) * 2010-08-06 2012-02-23 Hitachi Consumer Electronics Co Ltd 受信装置および受信方法
WO2012023789A2 (ko) * 2010-08-17 2012-02-23 엘지전자 주식회사 디지털 방송 신호 수신 장치 및 방법
JP5602539B2 (ja) * 2010-08-20 2014-10-08 日立マクセル株式会社 受信装置
KR20120019635A (ko) * 2010-08-26 2012-03-07 삼성전자주식회사 방송 채널 전환 방법 및 이를 수행하는 방송 수신 장치
JP5483357B2 (ja) * 2010-08-27 2014-05-07 アルパイン株式会社 デジタルテレビ受信装置及びデジタルテレビ受信装置を設けた車載装置
JP2012114575A (ja) * 2010-11-22 2012-06-14 Sony Corp 画像データ送信装置、画像データ送信方法、画像データ受信装置および画像データ受信方法
US20130250051A1 (en) * 2010-12-13 2013-09-26 Electronics And Telecommunications Research Institute Signaling method for a stereoscopic video service and apparatus using the method
US8878950B2 (en) 2010-12-14 2014-11-04 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using super-resolution processes
JP2012148055A (ja) * 2010-12-27 2012-08-09 Fujifilm Corp 撮影画像表示装置および撮影画像表示方法
CN103430556A (zh) * 2011-03-18 2013-12-04 松下电器产业株式会社 显示装置、3d眼镜及3d影像视听***
US9519994B2 (en) 2011-04-15 2016-12-13 Dolby Laboratories Licensing Corporation Systems and methods for rendering 3D image independent of display size and viewing distance
EP2708019B1 (en) 2011-05-11 2019-10-16 FotoNation Limited Systems and methods for transmitting and receiving array camera image data
JP5814619B2 (ja) * 2011-05-18 2015-11-17 任天堂株式会社 表示制御プログラム、表示制御装置、表示制御システム、及び表示制御方法
US20130265459A1 (en) 2011-06-28 2013-10-10 Pelican Imaging Corporation Optical arrangements for use with an array camera
CN102263977B (zh) * 2011-08-01 2013-06-12 清华大学 一种用于移动终端的立体视频获取的方法和装置
US20130070060A1 (en) 2011-09-19 2013-03-21 Pelican Imaging Corporation Systems and methods for determining depth from multiple views of a scene that include aliasing using hypothesized fusion
IN2014CN02708A (zh) 2011-09-28 2015-08-07 Pelican Imaging Corp
CN103096014B (zh) * 2011-10-28 2016-03-30 华为技术有限公司 一种视频呈现方法和***
CN103260038A (zh) * 2012-02-20 2013-08-21 山东沃飞电子科技有限公司 三维内容发送和接收的方法、装置和***
EP2817955B1 (en) 2012-02-21 2018-04-11 FotoNation Cayman Limited Systems and methods for the manipulation of captured light field image data
US9210392B2 (en) 2012-05-01 2015-12-08 Pelican Imaging Coporation Camera modules patterned with pi filter groups
JP2015534734A (ja) 2012-06-28 2015-12-03 ペリカン イメージング コーポレイション 欠陥のあるカメラアレイ、光学アレイ、およびセンサを検出するためのシステムおよび方法
US20140002674A1 (en) 2012-06-30 2014-01-02 Pelican Imaging Corporation Systems and Methods for Manufacturing Camera Modules Using Active Alignment of Lens Stack Arrays and Sensors
SG11201500910RA (en) 2012-08-21 2015-03-30 Pelican Imaging Corp Systems and methods for parallax detection and correction in images captured using array cameras
WO2014032020A2 (en) 2012-08-23 2014-02-27 Pelican Imaging Corporation Feature based high resolution motion estimation from low resolution images captured using an array source
WO2014043641A1 (en) 2012-09-14 2014-03-20 Pelican Imaging Corporation Systems and methods for correcting user identified artifacts in light field images
US20140092281A1 (en) 2012-09-28 2014-04-03 Pelican Imaging Corporation Generating Images from Light Fields Utilizing Virtual Viewpoints
US9143711B2 (en) 2012-11-13 2015-09-22 Pelican Imaging Corporation Systems and methods for array camera focal plane control
CN104185994A (zh) * 2012-12-28 2014-12-03 华为技术有限公司 对视频内容的摄像机参数的编码和解码方法与装置
US9462164B2 (en) 2013-02-21 2016-10-04 Pelican Imaging Corporation Systems and methods for generating compressed light field representation data using captured light fields, array geometry, and parallax information
US9253380B2 (en) 2013-02-24 2016-02-02 Pelican Imaging Corporation Thin form factor computational array cameras and modular array cameras
WO2014138695A1 (en) 2013-03-08 2014-09-12 Pelican Imaging Corporation Systems and methods for measuring scene information while capturing images using array cameras
US8866912B2 (en) 2013-03-10 2014-10-21 Pelican Imaging Corporation System and methods for calibration of an array camera using a single captured image
US9521416B1 (en) 2013-03-11 2016-12-13 Kip Peli P1 Lp Systems and methods for image data compression
US9519972B2 (en) 2013-03-13 2016-12-13 Kip Peli P1 Lp Systems and methods for synthesizing images from image data captured by an array camera using restricted depth of field depth maps in which depth estimation precision varies
US9888194B2 (en) 2013-03-13 2018-02-06 Fotonation Cayman Limited Array camera architecture implementing quantum film image sensors
WO2014164550A2 (en) 2013-03-13 2014-10-09 Pelican Imaging Corporation System and methods for calibration of an array camera
US9106784B2 (en) 2013-03-13 2015-08-11 Pelican Imaging Corporation Systems and methods for controlling aliasing in images captured by an array camera for use in super-resolution processing
US9578259B2 (en) 2013-03-14 2017-02-21 Fotonation Cayman Limited Systems and methods for reducing motion blur in images or video in ultra low light with array cameras
US9100586B2 (en) 2013-03-14 2015-08-04 Pelican Imaging Corporation Systems and methods for photometric normalization in array cameras
US9445003B1 (en) 2013-03-15 2016-09-13 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information
US9497370B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Array camera architecture implementing quantum dot color filters
EP2973476A4 (en) 2013-03-15 2017-01-18 Pelican Imaging Corporation Systems and methods for stereo imaging with camera arrays
US10122993B2 (en) 2013-03-15 2018-11-06 Fotonation Limited Autofocus system for a conventional camera that uses depth information from an array camera
US9497429B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Extended color processing on pelican array cameras
JP5742886B2 (ja) * 2013-06-19 2015-07-01 沖電気工業株式会社 立体映像符号化装置、立体映像復号装置及び立体映像符号化システム、並びに、立体映像符号化プログラム及び立体映像復号プログラム
US9716885B2 (en) 2013-07-31 2017-07-25 Empire Technology Development Llc Encoding scheme
US9898856B2 (en) 2013-09-27 2018-02-20 Fotonation Cayman Limited Systems and methods for depth-assisted perspective distortion correction
US9185276B2 (en) 2013-11-07 2015-11-10 Pelican Imaging Corporation Methods of manufacturing array camera modules incorporating independently aligned lens stacks
WO2015074078A1 (en) 2013-11-18 2015-05-21 Pelican Imaging Corporation Estimating depth from projected texture using camera arrays
WO2015081279A1 (en) 2013-11-26 2015-06-04 Pelican Imaging Corporation Array camera configurations incorporating multiple constituent array cameras
JP2014082769A (ja) * 2013-11-27 2014-05-08 Sony Corp 受信装置、表示制御方法、プログラム、及びデータ構造
EP3062514A4 (en) 2013-12-04 2017-06-28 Olympus Corporation Wireless transmission system
US9497358B2 (en) * 2013-12-19 2016-11-15 Sony Interactive Entertainment America Llc Video latency reduction
JP5684415B2 (ja) * 2014-01-27 2015-03-11 日立マクセル株式会社 デジタル放送信号受信装置およびデジタル放送信号受信方法
KR102285955B1 (ko) 2014-02-07 2021-08-05 소니그룹주식회사 송신 장치, 송신 방법, 수신 장치, 수신 방법, 표시 장치 및 표시 방법
US10089740B2 (en) 2014-03-07 2018-10-02 Fotonation Limited System and methods for depth regularization and semiautomatic interactive matting using RGB-D images
US9521319B2 (en) 2014-06-18 2016-12-13 Pelican Imaging Corporation Array cameras and array camera modules including spectral filters disposed outside of a constituent image sensor
EP3467776A1 (en) 2014-09-29 2019-04-10 Fotonation Cayman Limited Systems and methods for dynamic calibration of array cameras
US9942474B2 (en) 2015-04-17 2018-04-10 Fotonation Cayman Limited Systems and methods for performing high speed video capture and depth estimation using array cameras
CN107635130A (zh) * 2016-07-18 2018-01-26 中兴通讯股份有限公司 一种实现3d图像显示的方法及装置
CN110944566B (zh) * 2017-05-19 2021-12-21 奥林巴斯株式会社 3d内窥镜装置和3d影像处理装置
US10482618B2 (en) 2017-08-21 2019-11-19 Fotonation Limited Systems and methods for hybrid depth regularization
MX2022003020A (es) 2019-09-17 2022-06-14 Boston Polarimetrics Inc Sistemas y metodos para modelado de superficie usando se?ales de polarizacion.
CA3157197A1 (en) 2019-10-07 2021-04-15 Boston Polarimetrics, Inc. Systems and methods for surface normals sensing with polarization
KR102558903B1 (ko) 2019-11-30 2023-07-24 보스턴 폴라리메트릭스, 인크. 편광 신호를 이용한 투명 물체 분할을 위한 시스템 및 방법
JP7462769B2 (ja) 2020-01-29 2024-04-05 イントリンジック イノベーション エルエルシー 物体の姿勢の検出および測定システムを特徴付けるためのシステムおよび方法
WO2021154459A1 (en) 2020-01-30 2021-08-05 Boston Polarimetrics, Inc. Systems and methods for synthesizing data for training statistical models on different imaging modalities including polarized images
US11953700B2 (en) 2020-05-27 2024-04-09 Intrinsic Innovation Llc Multi-aperture polarization optical systems using beam splitters
US12020455B2 (en) 2021-03-10 2024-06-25 Intrinsic Innovation Llc Systems and methods for high dynamic range image reconstruction
US11290658B1 (en) 2021-04-15 2022-03-29 Boston Polarimetrics, Inc. Systems and methods for camera exposure control
US11954886B2 (en) 2021-04-15 2024-04-09 Intrinsic Innovation Llc Systems and methods for six-degree of freedom pose estimation of deformable objects
US11689813B2 (en) 2021-07-01 2023-06-27 Intrinsic Innovation Llc Systems and methods for high dynamic range imaging using crossed polarizers

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AUPN732395A0 (en) * 1995-12-22 1996-01-25 Xenotech Research Pty Ltd Image conversion and encoding techniques
US5978029A (en) * 1997-10-10 1999-11-02 International Business Machines Corporation Real-time encoding of video sequence employing two encoders and statistical analysis
JPH11353495A (ja) 1998-06-10 1999-12-24 Nec Corp グラフィックス装置とグラフィック方法
KR100585058B1 (ko) * 1999-02-01 2006-06-01 삼성전자주식회사 캡션 디스플레이를 위한 엠펙 디코더 및 디코딩 방법
JP4497497B2 (ja) * 2001-01-22 2010-07-07 日本テレビ放送網株式会社 立体映像信号の伝送方法及び、そのシステム
KR100397511B1 (ko) * 2001-11-21 2003-09-13 한국전자통신연구원 양안식/다시점 3차원 동영상 처리 시스템 및 그 방법
US20040218269A1 (en) * 2002-01-14 2004-11-04 Divelbiss Adam W. General purpose stereoscopic 3D format conversion system and method
WO2003092303A1 (en) * 2002-04-25 2003-11-06 Sharp Kabushiki Kaisha Multimedia information generation method and multimedia information reproduction device
EP2262273A3 (en) * 2002-04-25 2013-12-04 Sharp Kabushiki Kaisha Image data creation device, image data reproduction device, and image data recording medium
WO2003092305A1 (en) * 2002-04-25 2003-11-06 Sharp Kabushiki Kaisha Image encodder, image decoder, record medium, and image recorder
JP2003333624A (ja) * 2002-05-10 2003-11-21 Sharp Corp 電子機器
JP4129408B2 (ja) * 2002-09-27 2008-08-06 シャープ株式会社 画像データ生成装置、画像データ再生装置、画像データ生成方法、画像データ再生方法
JP4259884B2 (ja) * 2003-01-20 2009-04-30 シャープ株式会社 画像データ作成装置およびそのデータを再生する画像データ再生装置
JP2004274253A (ja) * 2003-03-06 2004-09-30 Sharp Corp 映像記録装置および映像送信装置
JP4324435B2 (ja) * 2003-04-18 2009-09-02 三洋電機株式会社 立体視用映像提供方法及び立体映像表示装置
JP4190357B2 (ja) * 2003-06-12 2008-12-03 シャープ株式会社 放送データ送信装置、放送データ送信方法および放送データ受信装置
KR100716982B1 (ko) * 2004-07-15 2007-05-10 삼성전자주식회사 다차원 영상 포맷의 변환장치 및 방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104427378A (zh) * 2013-09-09 2015-03-18 杭州海康威视数字技术股份有限公司 多类型业务数据流传输装置

Also Published As

Publication number Publication date
EP1734766A3 (en) 2013-01-23
US20120224025A1 (en) 2012-09-06
JP5328082B2 (ja) 2013-10-30
JP2006352876A (ja) 2006-12-28
EP1734766A2 (en) 2006-12-20
JP2012110068A (ja) 2012-06-07
CN1882080A (zh) 2006-12-20
KR20060130450A (ko) 2006-12-19
US20070008575A1 (en) 2007-01-11
KR100813961B1 (ko) 2008-03-14

Similar Documents

Publication Publication Date Title
CN100586178C (zh) 收发图像数据的设备和方法
CN1882106B (zh) 转换图像显示模式的设备和方法
US8565517B2 (en) Method and apparatus for creating stereo image according to frequency characteristics of input image and method and apparatus for reproducing the created stereo image
CA2760100C (en) Broadcast transmitter, broadcast receiver and 3d video data processing method thereof
EP2391139B1 (en) 3D image data transmission and reception
EP2501137A2 (en) Method and apparatus for generating header information of stereoscopic image
EP2543191B1 (en) Method and apparatus for converting two-dimensional video content for insertion into three-dimensional video content
CN102300109A (zh) 输出音频信号的显示装置和方法
US9338430B2 (en) Encoding device, encoding method, decoding device, and decoding method
CA2772927C (en) Cable broadcast receiver and 3d video data processing method thereof
US9762884B2 (en) Encoding device, encoding method, decoding device, and decoding method for encoding multiple viewpoints for compatibility with existing mode allowing fewer viewpoints
EP2739054A1 (en) Encoding device and encoding method, and decoding device and decoding method
CN102843566A (zh) 一种3d视频数据的通讯方法和设备
KR100940209B1 (ko) 영상 디스플레이 모드 전환 방법, 장치, 및 그 방법을실행하기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는기록매체
KR101044952B1 (ko) 영상 송신 및 수신 방법과 장치 및 이의 전송 스트림 구조
KR101086437B1 (ko) 영상 송신 및 수신 방법과 장치 및 이의 전송 스트림 구조
JP7382186B2 (ja) 符号化装置、復号装置、及びプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20100127

Termination date: 20210329

CF01 Termination of patent right due to non-payment of annual fee