CN103828355A - 对视差图进行滤波的方法以及设备 - Google Patents

对视差图进行滤波的方法以及设备 Download PDF

Info

Publication number
CN103828355A
CN103828355A CN201280046617.6A CN201280046617A CN103828355A CN 103828355 A CN103828355 A CN 103828355A CN 201280046617 A CN201280046617 A CN 201280046617A CN 103828355 A CN103828355 A CN 103828355A
Authority
CN
China
Prior art keywords
parallax value
pixel
value
neighbor
parallax
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201280046617.6A
Other languages
English (en)
Other versions
CN103828355B (zh
Inventor
C.蒂博尔特
P.罗伯特
S.蒂博
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
InterDigital CE Patent Holdings SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of CN103828355A publication Critical patent/CN103828355A/zh
Application granted granted Critical
Publication of CN103828355B publication Critical patent/CN103828355B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/128—Adjusting depth or disparity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G06T7/55—Depth or shape recovery from multiple images
    • G06T7/593—Depth or shape recovery from multiple images from stereo images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/122—Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10004—Still image; Photographic image
    • G06T2207/10012—Stereo images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10028—Range image; Depth image; 3D point clouds
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20024—Filtering details

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)
  • Processing Or Creating Images (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

本发明涉及一种对与立体图像的视图之一相关联的视差图进行滤波的方法，包含以下步骤：通过与相邻像素（xn-1，xn+1）的视差值进行比较，识别与错误视差值（d(xn)）相关联的像素（xn）；以及，校正所识别的像素的视差值。

Description

对视差图进行滤波的方法以及设备
技术领域
本发明涉及立体图像，并且更具体地涉及一种对与这样的图像相关联的视差图进行滤波的方法以及设备。
背景技术
3D视图合成或者3D视图插值在于创建除了由源立体图像表现的呈现以外，还创建3D呈现。然后，调整3D呈现以适应所选择的应用或者用户。处理多视图屏幕所需的视图主要从单一立体图像得以重建。
实际上，该视图合成是基于该立体图像以及视差图。视差图一般与在立体图像的情况下的右侧或者左侧源图像相关联，并且为每个像元提供一条表示该像元在右侧图像中的位置与该像元在左侧图像中的位置之间的距离的数据（以像素数量的方式）。
该视图合成还可以基于深度图，因为通过使用本领域的技术人员所知道的算法引入诸如屏幕大小或者观察者与屏幕之间的距离的某些数据，能够从视差值返回深度值，反之亦然。
为了通过从右侧或者左侧源图像以及相关联的视差图进行插值来创建新的视图，将该视差图投影在想要产生的视图上。在该投影之后，能够得到与所期望的视图相对应的修改的视差图；该修改的视差图的每个像素指示视差值，然后将使用该视差值来修改与要重新产生的右侧或者左侧图像相对应的那些信息。
每个要***的像素的视差向量必须指向在右侧以及左侧图像中相同的对象点（object point）。
然而，需要管理遮蔽区域，因为在要***的图像中存在支持在一个图像中可见且在其他图像之中不存在的对象点的像素。实际上，这些在第一视图领域中的对象或者在第二视图场景的领域之外，或者被前景对象所遮蔽。必须仅从包含相应的点的图像来***这些特殊的像素。因此，需要识别这些特殊的像素并且给它们分配视差。
文献US2010/0215251说明了一种处理深度图的方法以及设备。该方法在于基于包含所捕捉的场景的深度信息的压缩的深度图来得到深度图。该场景包含对象。提供包含由在该深度图中的该对象所遮蔽的信息的遮蔽信息。然后，至少使用该遮蔽信息的一部分来减少在该深度图中的成形对象的失真。
因此，该文献涉及一种处理信息的方法，其中，该信息用于对涉及由对象所的区域的深度图的校正。
本发明的目的在于克服一个不同的问题，该问题涉及位于对象边缘的、所谓的过渡像素。实际上，如果例如场景包含两个处于固定且不同深度的平面对象，假设在该场景中仅存在具有两种不同视差的两种可能性，则与右侧视图或者左侧视图的元素相关联的视差图应该仅包含两个值：第一对象的视差值，以及不同的第二对象的视差值。
视差图仅包含两个视差值，在该情况下，容易将该视差图投影到在左侧视图与右侧视图之间的中间视图上，并且由此将两个图像之一***。
然而，这与在与作为两个对象边界的区域相对应的所谓的过渡区域中的情况不同，与所谓的过渡像素相关联的视差值产生于第一对象像素的视差值和第二对象像素的视差值的混合。
不幸的是，不能够为这样的像素正确地定义视差值。
因此，将自行提供一个对象的视差值与另一对象的视差值之间的中间视差值。不幸的是，该视差值不正确，因为它不指向两个图像中的相似像素。
在对视差图的投影期间，这样的值一方面将是不一致的，另一方面将不指向在这两个图像中的相同的对象，从而可能导致在所***的视图上的可见伪像。
该错误或者异常视差值的问题出现在通过视差图估计器得到的视差图以及在用于CGI内容的视差图中。
一种针对上述问题的可能的方案是使用未滤波的视差图（也就是说，在对象轮廓处是锯齿状的）。不幸的是，尽管该方案能够面对用于CGI内容的这种类型的图，视差估计器往往自然地产生不同的对象之间的中间值。本发明提出一种能够克服所提到的缺点的方法。
发明内容
本发明包含一种对与立体图像的视图之一相关联的视差图进行滤波的方法，其中，该立体图像包含至少一个对象，部分地覆盖由该对象所遮蔽的区域。该方法包含以下步骤：确定至少一个围绕该对象的过渡区域；识别该过渡区域的、其视差值通过与该对象或者该遮蔽区域相对应的相邻像素的视差值进行比较被认为是错误的像素；以及，根据涉及该像素是否属于该对象或者属于该遮蔽区域的标准，分配由该对象或者该遮蔽区域决定的新的视差值，由此校正所识别的像素的视差值。
因此，该方法能够进行智能的滤波，仅对可疑的视差值进行滤波，从而保留该视差图的绝大部分。
优选地，识别具有错误的视差值的像素的步骤在于，将其视差值未包含在相邻像素（xn-1，xn+1）的视差值中的任何像素识别为错误的。
根据本发明的变型，识别具有错误的视差值的像素的步骤在于，将其视差值以确定的阈值不同于相邻像素（xn-1，xn+1）的视差值的任何像素识别为错误的。
优选地，校正像素的错误视差值的步骤在于，使用根据相邻像素的视差计算出的值来替换所识别的像素的视差值。
根据本发明的变型，校正像素的错误视差值的步骤在于，去除所识别的像素的视差值。
优选地，校正像素的视差值的步骤在于，确定所识别的像素的视差值更接近于哪个相邻像素（xn-1，xn+1）的视差值，并且，使用与相邻像素（xn-1，xn+1）中的、其视差值是更接近的那一个的值相对应的替换值来替换所识别的像素的视差值。
优选地，本方法包含在从两个相邻像素（xn-1，xn+1）之中确定具有更高接近度的像素之后的另外的步骤：确定相邻像素的视差值和接下来的相邻像素（xn-2，xn+2）的视差值之间的视差值差值，并且根据该差值确定替换值。
本发明还包括一种用于产生用于显示三维图像的信号的设备，其中三维图像包含至少一个对象，部分地覆盖由该对象所遮蔽的区域，包含：用于传送与要传送的右侧或者左侧图像之一相对应的第一数据流以及与要传送的右侧或者左侧图像之一相关联的深度图相对应的第二数据流的设备；以及，用于接收用于显示三维图像的数据流的设备。它包含一种用于对视差图进行滤波的设备，该设备包含：用于确定至少一个围绕该对象的过渡区域的部件；用于识别该过渡区域的、其视差值（d(xn)）通过与该对象或者该遮蔽区域相对应的相邻像素（xn-1，xn+1）的视差值进行比较被认为是错误的像素（xn）的部件；以及，用于校正所识别的像素的错误视差值的部件。
附图说明
参考附图通过阅读以下说明将更好地呈现上述的本发明的特征、优点以及其他方面，附图中：
图1示出用于传送3D内容的***，该***包含在信号产生设备上或在接收器上的根据本发明的用于对视差图的元素进行滤波的设备；
图2示出解释根据本发明的滤波方法的概要图；
图3示出不具有滤波设备的***的视差图的视差值；
图4示出具有根据本发明的滤波设备的***的视差图的视差值。
具体实施方式
如图1所示的***是一种用于产生用于显示至少一个三维（3D）图像的信号的设备。该***在传送设备中包含：部件2，用于产生两条分别表示右侧和左侧图像的像素或者像元的数据流；部件3，用于产生与由每个图像的视差图表示的右侧或者左侧图像的像素的视差信息相对应的数据流；部件4，用于选择要传送的右侧或者左侧图像的数据流之一；部件5，用于传送与所选择的右侧或左侧图像相对应的数据流之一以及与视差图相对应的数据流。根据本发明，该***还包含：设备6，用于对视差图的不同元素的视差值进行滤波，使得能够检测错误值并且将这些值替换为另外的由视差图的相邻元素的视差决定的视差值，其中该设备与用于产生视差图的数据的部件相关联。
数据接收设备接收这两条分别与右侧或者左侧图像之一以及视差图相对应的数据流，并且经由接口7向屏幕或者显示设备8提供3D图像显示信号。根据本发明的变型，用于对视差图进行滤波的设备6位于信号接收设备上，而不在传送设备上。
根据本发明的方法在于对视差图进行滤波6，以便确定、删除或者替换“可疑的”视差值。“可疑的”视差值被理解为不与相邻像素的视差值之一相对应的过渡区域的像素的视差值。
该方法使得能够进行智能的滤波，其仅对可疑的视差值进行滤波，从而保留视差图的绝大部分。
视差图表示一条采样信息。因此，需要解决采样问题。这是根据本发明的方法在于对视差图进行滤波以便改善经历该采样缺陷的对象的轮廓的原因。
该滤波方法必须一方面正确地识别错误的视差值，另一方面校正这些值。
错误的视差值是真实视差值之间的中间值，因为这些视差值与对象所处的深度相对应。但是，视差值可能在不与屏幕平面相平行而存在的表面上局部地渐增或者渐减。检测算法的定义必须考虑这些不同的情况。
还优选地具有如下方案：其结果是连续的，以避免由包含不同校正的相邻且相似的像素或者从一帧到另一帧进行了不同的校正的对象边缘而造成的伪像。因此，建议替换视差值而不是去除视差值。然而，如果必须去除伪像，则仍然可以去除这些值。
此处所提出的方法与对于属于延x轴的水平线的像素的研究相关联，但是也可以使用垂直的信息。
如果像素xn的视差值d(xn)以大于|d(xn+2)-d(xn+1)|的值，或者以大于|d(xn-2)-d(xn-1)|的值而不同于水平直接相邻的两个像素xn-1和xn+1的视差值d(xn-1)和d(xn+1)，则这些像素xn的视差值d(xn)被确定为是错误的，其中：|d(xn+2)-d(xn+1)|是其中后一项的值d(xn+1)与其另外的水平相邻的像素(xn+2)的d(xn+2)之间的差值，|d(xn-2)-d(xn-1)|是其中后一项的值d(xn-1)与其另外的水平相邻的像素(xn-2)的d(xn-2)之间的差值。
根据本发明的变型，可以使用另外的标准来定义什么被认为是错误视差值。一种方法在于比较像素的视差值和根据相邻像素的视差所确定的阈值。
因此，可以添加阈值。例如，可以将如下像素确定为是错误的：其视差值（表示为像素）通过相对于其两个相邻像素多出两个像素而不同。
在应当去除这些错误值的情况下，优选使用不太严格的标准，以便尽可能最少地去除。
在根据本发明的方法中，通过将这些值d(xn)与四个另外的相邻像素xn-2、xn-1、xn+1、xn+2的视差值d(xn-2)、d(xn-1)、d(xn+1)或者d(xn-1)、d(xn+1)、d(xn+2)相比较，进行错误视差值的确定。
在图2中示出检测并校正具有错误视差值的像素的概要图。
第一步骤100对应于通过比较相邻像素N-1和N+1的视差值来识别具有错误视差值的像素N：
d(xn)≠d(xn-1)，并且
d(xn)≠d(xn+1)
然后，步骤101和102能够确定像素xn的视差d(xn)是否包含在像素xn-1和像素xn+1的那些视差d(xn-1)和d(xn+1)之间，并且在步骤101以及步骤102中，能够比较像素xn-1和xn+1：
d(xn-1)<d(xn)<d(xn+1)或者d(xn-1)>d(xn)>d(xn+1)
步骤103对应于视差值未包含在相邻像素的那些值之间的情况。需要校正该值。可以使用更接近的视差值来替换该值，或者可以去除该值。
然后，在步骤104以及105中，将在像素xn和xn-1之间的视差的差值与在xn和xn+1之间的视差的差值相比较。这些步骤对应于确定xn的视差值是更接近于xn+1的视差值，还是更接近于xn-1的视差值的接近度研究。在像素位于两个对象的边界的情况下，这意味着确定该像素更接近于哪个对象：|d(xn-1)-d(xn)|<|d(xn+1)-d(xn)|，
步骤106使得能够为与像素xn-1和xn-2相对应的对象考虑可变的（渐增的或者渐减的）视差。因此，该步骤使得能够为(xn)确定与最大值相对应的替换视差值，其中，该最大值是像素xn-1的视差d(xn-1)以及像素xn-2与xn-1的视差d(xn-2)和d(xn-1)之间的差值的和数。
类似地，在步骤107、108以及109期间，通过为与相邻像素xn-2和xn-1或者xn+1和xn+2相对应的对象考虑可变的视差来确定(xn)的视差替换值。如果d(xn)更接近于两个视差值中的较大的值，则确定最大值。并且，如果d(xn)更接近于两个视差值中的较小的值，则确定最小值。
在步骤110期间，如果像素的错误视差值大于在步骤106中所确定的该最大值，则使用所确定的该最大值替换像素xn的错误视差值：d’(xn)=最大值。
在步骤110期间，如果像素的错误视差值不大于在步骤106中所确定的该最大值，则使用像素xn-1的视差值替换像素xn的错误视差值：d’(xn)=d(xn-1)。
同样地，在步骤112期间，使用在先前的步骤中所确定的最小值替换像素xn的错误视差值：“d’(xn)=最小值”；或者使用随后的像素xn+1的视差值替换像素xn的错误视差值：“d’(xn)=d(xn+1)”。
类似地，在步骤114以及116期间，使用在先前的步骤中所确定的最小或者最大值替换像素xn的错误视差值，或者使用随后的像素xn+1或者先前的像素xn-1的视差值替换像素xn的错误视差值。
根据本发明的变型，可以通过考虑在视差或者具体的情况下的较大改变，以改进由该概要图所述的处理。
因此，步骤110至116优选地根据先前的标准为视差值分配新的值。可替代地，能够将该步骤替换为去除视差值。
在所有未涉及的情况下，认为视差值是正确且无需替换的。
本发明所提出的滤波方法是对称的，因此，使用相同的方式处理对象的右侧和左侧边缘，即便与这些边缘相关联的问题是不同的。
实际上，涉及作为伪像问题的，根据与左侧视图相关联的视差图对前景对象的右侧边缘进行插值，或者根据与右侧视图相关联的视差图对前景对象的左侧边缘进行插值的示例，在此是更重要的。
根据与左侧视图相关联的视差图对前景对象的左侧边缘进行插值，或者根据与右侧视图相关联的视差图对前景对象的右侧边缘进行插值，这两个另外的配置引起少得多的问题，因为错误值的投影比未被前景对象所遮蔽更加频繁。然而，预先滤波是有用的，因为在某些情况下，前景对象的部分边缘可以被恢复。
根据本发明的变型，该方法确保在前景对象的右侧边缘上的处理以根据与左侧视图相关联的视差图来进行插值。类似地，根据本发明的另一个变型，该方法确保在前景对象的左侧边缘上的处理以根据与右侧视图相关联的视差图来进行插值。
该分解发生在第一步骤（d(xn-1)<d(xn)<d(xn+1)或者d(xn-1)>d(xn)>d(xn+1)）期间，为了仅在一侧执行预先滤波，仅保留这些条件中的一个就足够了。
图3示出不具有滤波设备的***的包含两个不同视差元素的图像的视差图的视差值。这两个值分别用浅灰色和深灰色表示。在两个元素的过渡处，存在通过浅灰色和深灰色之间的灰色的中间的阴影表示的不同的视差值。
图4示出具有根据本发明的滤波设备的***的视差图的视差值。根据本发明的方法，在过渡处，错误视差值得以矫正并被替换为两个存在值之一。在滤波之后，视差图仅包含两个值。

Claims (10)

1.一种对与立体图像的视图之一相关联的视差图进行滤波的方法，该立体图像包含至少一个对象，部分地覆盖由该对象所遮蔽的区域，该方法包含以下步骤：
确定至少一个围绕该对象的过渡区域；
识别该过渡区域的、其视差值（d(xn)）通过与该对象或者该遮蔽区域相对应的相邻像素（xn-1，xn+1）的视差值进行比较被认为是错误的像素（xn）；
根据涉及该像素是否属于该对象或者属于该遮蔽区域的标准，分配由该对象或者该遮蔽区域决定的新的视差值，由此校正所识别的像素的视差值。
2.根据权利要求1所述的方法，其特征在于，识别其视差值被认为是错误的像素的步骤在于，将其视差值不等于所述相邻像素（xn-1，xn+1）的视差值之一的任何的像素识别为错误的。
3.根据权利要求1所述的方法，其特征在于，识别其视差值被认为是错误的像素的步骤在于，将其视差值以确定的阈值不同于所述相邻像素（xn-1，xn+1）的视差值的任何像素识别为错误的。
4.根据权利要求1所述的方法，其特征在于，校正像素的错误视差值的步骤在于，使用根据所述相邻像素的视差计算出的值来替换所识别的像素的视差值。
5.根据权利要求1所述的方法，其特征在于，校正像素的错误视差值的步骤在于，去除所识别的像素的视差值。
6.根据权利要求4所述的方法，其特征在于，校正像素的视差值的步骤在于，确定所识别的像素的视差值更接近于哪个相邻像素（xn-1，xn+1）的视差值，并且，使用与相邻像素（xn-1，xn+1）中的、其视差值是更接近的那一个的视差值相对应的替换值来替换所识别的像素的视差值。
7.根据权利要求6所述的方法，其特征在于，该方法包含在从两个相邻像素（xn-1，xn+1）之中确定具有更高接近度的像素之后的另外的步骤：确定相邻像素的视差值和接下来的相邻像素（xn-2，xn+2）的视差值之间的视差值差值，并且通过考虑该差值来确定替换值。
8.一种用于产生用于显示三维图像的信号的设备，其中三维图像包含至少一个对象，部分地覆盖由该对象所遮蔽的区域，包含：用于传送与要传送的右侧或者左侧图像之一相对应的第一数据流以及与要传送的右侧或者左侧图像之一相关联的深度图相对应的第二数据流的设备；以及，用于接收用于显示三维图像的数据流的设备；其特征在于，它包含用于对视差图进行滤波的设备，该滤波设备包含：
-用于确定至少一个围绕该对象的过渡区域的部件；
-用于识别该过渡区域的、其视差值（d(xn)）通过与该对象或者该遮蔽区域相对应的相邻像素（xn-1，xn+1）的视差值进行比较被认为是错误的像素（xn）的部件；以及，
-用于校正所识别的像素的错误视差值的部件。
9.根据权利要求8所述的用于产生信号的设备，其特征在于，与视差图相关联的滤波设备位于传送设备处。
10.根据权利要求8所述的用于产生信号的设备，其特征在于，与视差图相关联的滤波设备位于接收设备处。
CN201280046617.6A 2011-09-29 2012-09-27 对视差图进行滤波的方法以及设备 Expired - Fee Related CN103828355B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
FR1158739 2011-09-29
FR1158739 2011-09-29
PCT/FR2012/052195 WO2013045853A1 (fr) 2011-09-29 2012-09-27 Méthode et dispositif de filtrage d'une carte de disparité

Publications (2)

Publication Number Publication Date
CN103828355A true CN103828355A (zh) 2014-05-28
CN103828355B CN103828355B (zh) 2017-05-31

Family

ID=47071367

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280046617.6A Expired - Fee Related CN103828355B (zh) 2011-09-29 2012-09-27 对视差图进行滤波的方法以及设备

Country Status (7)

Country Link
US (1) US9299154B2 (zh)
EP (1) EP2761876A1 (zh)
JP (1) JP2014534665A (zh)
KR (1) KR20140069266A (zh)
CN (1) CN103828355B (zh)
BR (1) BR112014007263A2 (zh)
WO (1) WO2013045853A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9818232B2 (en) * 2015-08-26 2017-11-14 Adobe Systems Incorporated Color-based depth smoothing of scanned 3D model to enhance geometry in 3D printing
JP6991700B2 (ja) 2016-04-28 2022-01-12 キヤノン株式会社 情報処理装置、情報処理方法、プログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101822068A (zh) * 2007-10-11 2010-09-01 皇家飞利浦电子股份有限公司 用于处理深度图的方法和设备
US20100316284A1 (en) * 2009-06-10 2010-12-16 Samsung Electronics Co., Ltd. Three-dimensional image generation apparatus and method using region extension of object in depth map
WO2011097306A1 (en) * 2010-02-04 2011-08-11 Sony Corporation 2d to 3d image conversion based on image content

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3551467B2 (ja) * 1994-04-13 2004-08-04 松下電器産業株式会社 視差演算装置、視差演算方法及び画像合成装置
JP3769850B2 (ja) * 1996-12-26 2006-04-26 松下電器産業株式会社 中間視点画像生成方法および視差推定方法および画像伝送方法
US7015926B2 (en) 2004-06-28 2006-03-21 Microsoft Corporation System and process for generating a two-layer, 3D representation of a scene
WO2009001255A1 (en) 2007-06-26 2008-12-31 Koninklijke Philips Electronics N.V. Method and system for encoding a 3d video signal, enclosed 3d video signal, method and system for decoder for a 3d video signal
JP5156837B2 (ja) 2007-11-09 2013-03-06 トムソン ライセンシング 領域ベースのフィルタリングを使用する奥行マップ抽出のためのシステムおよび方法
FR2932911A1 (fr) * 2008-06-24 2009-12-25 France Telecom Procede et dispositif de remplissage des zones d'occultation d'une carte de profondeur ou de disparites estimee a partir d'au moins deux images.
US8106924B2 (en) 2008-07-31 2012-01-31 Stmicroelectronics S.R.L. Method and system for video rendering, computer program product therefor
JP5527856B2 (ja) 2008-09-25 2014-06-25 コーニンクレッカ フィリップス エヌ ヴェ 三次元画像データ処理
KR101468267B1 (ko) * 2008-10-02 2014-12-15 프라운호퍼-게젤샤프트 추르 푀르데룽 데어 안제반텐 포르슝 에 파우 중간 뷰 합성 및 멀티-뷰 데이터 신호 추출
EP2382791B1 (en) * 2009-01-27 2014-12-17 Telefonaktiebolaget L M Ericsson (PUBL) Depth and video co-processing
US8933925B2 (en) 2009-06-15 2015-01-13 Microsoft Corporation Piecewise planar reconstruction of three-dimensional scenes
JP2011060116A (ja) * 2009-09-11 2011-03-24 Fujifilm Corp 画像処理装置
US20110199469A1 (en) * 2010-02-15 2011-08-18 Gallagher Andrew C Detection and display of stereo images
US8428342B2 (en) * 2010-08-12 2013-04-23 At&T Intellectual Property I, L.P. Apparatus and method for providing three dimensional media content
WO2012100225A1 (en) * 2011-01-20 2012-07-26 University Of Iowa Research Foundation Systems and methods for generating a three-dimensional shape from stereo color images
US8837816B2 (en) * 2011-09-27 2014-09-16 Mediatek Inc. Method and apparatus for generating final depth information related map that is reconstructed from coarse depth information related map through guided interpolation

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101822068A (zh) * 2007-10-11 2010-09-01 皇家飞利浦电子股份有限公司 用于处理深度图的方法和设备
US20100316284A1 (en) * 2009-06-10 2010-12-16 Samsung Electronics Co., Ltd. Three-dimensional image generation apparatus and method using region extension of object in depth map
WO2011097306A1 (en) * 2010-02-04 2011-08-11 Sony Corporation 2d to 3d image conversion based on image content

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
ILSOON LIM ET AL: "REGION-BASED ADAPTIVE BILATERAL FILTER IN DEPTH MAP CODING", 《2011 18TH IEEE INTERNATIONAL CONFERENCEON IMAGE PROCESSING》 *
POLIN LAI ET AL: "DEPTH MAP PROCESSING WITH ITERATIVE JOINT MULTILATERAL FILTERING", 《28TH PICTURE CODING SYMPOSIUM,PCS2010》 *
QINGXIONG YANG ET AL: "Spatial-Depth Super Resolution for Range Images", 《IEEE XPLORE DIGITAL LIBRARY》 *
WAN-YU CHEN ET AL: "EFFICIENT DEPTH IMAGE BASED RENDERING WITH EDGE DEPENDENT DEPTH FILTER AND INTERPOLATION", 《IEEE XPLORE DIGITAL LIBRARY》 *

Also Published As

Publication number Publication date
US9299154B2 (en) 2016-03-29
BR112014007263A2 (pt) 2017-03-28
US20140226899A1 (en) 2014-08-14
CN103828355B (zh) 2017-05-31
KR20140069266A (ko) 2014-06-09
EP2761876A1 (fr) 2014-08-06
JP2014534665A (ja) 2014-12-18
WO2013045853A1 (fr) 2013-04-04

Similar Documents

Publication Publication Date Title
CN101682794B (zh) 用于处理深度相关信息的方法、装置和***
EP2316109B1 (en) Use of inpainting techniques for image correction
US8780172B2 (en) Depth and video co-processing
CN102077244B (zh) 用于在基于至少两个图像而估算的深度图或视差图的掩蔽域中进行填充的方法和装置
EP3580924B1 (en) Method and apparatus for processing an image property map
KR102224716B1 (ko) 스테레오 소스 영상 보정 방법 및 장치
US20140098100A1 (en) Multiview synthesis and processing systems and methods
US20140376635A1 (en) Stereo scopic video coding device, steroscopic video decoding device, stereoscopic video coding method, stereoscopic video decoding method, stereoscopic video coding program, and stereoscopic video decoding program
US8558875B2 (en) Video signal processing device
EP1815441B1 (en) Rendering images based on image segmentation
KR20090050783A (ko) 깊이맵 추정장치와 방법, 이를 이용한 중간 영상 생성 방법및 다시점 비디오의 인코딩 방법
Riechert et al. Fully automatic stereo-to-multiview conversion in autostereoscopic displays
CN105791795A (zh) 立体图像处理方法、装置以及立体视频显示设备
TWI540536B (zh) 處理三維場景之深度資料
CN103828355A (zh) 对视差图进行滤波的方法以及设备
Farid et al. Edge enhancement of depth based rendered images
CN104769943A (zh) 在多视图3dtv服务中处理边缘违反现象的方法和装置
KR20140001358A (ko) 차폐 영역 필터링 기반 영상 처리 방법
EP2745520B1 (en) Auxiliary information map upsampling
US20120170841A1 (en) Image processing apparatus and method
KR20100087963A (ko) 광류 정보를 이용한 중간 영상 생성 방법
JP2014072809A (ja) 画像生成装置、画像生成方法、画像生成装置用プログラム
JP2011239172A (ja) 映像処理装置
JP2014534665A5 (zh)
JP2011250334A (ja) 多視点画像補正装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20190522

Address after: France

Patentee after: Interactive Digital CE Patent Holding Company

Address before: I Si Eli Murli Nor, France

Patentee before: Thomson Licensing SA

CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170531

Termination date: 20190927