CN101176354B - 用于在3d显示器上再现图像数据的设备、***和方法 - Google Patents
用于在3d显示器上再现图像数据的设备、***和方法 Download PDFInfo
- Publication number
- CN101176354B CN101176354B CN2006800165807A CN200680016580A CN101176354B CN 101176354 B CN101176354 B CN 101176354B CN 2006800165807 A CN2006800165807 A CN 2006800165807A CN 200680016580 A CN200680016580 A CN 200680016580A CN 101176354 B CN101176354 B CN 101176354B
- Authority
- CN
- China
- Prior art keywords
- display
- signal
- picture signal
- space
- resolution
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/15—Processing image signals for colour aspects of image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
- H04N13/305—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using lenticular lenses, e.g. arrangements of cylindrical lenses
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2213/00—Details of stereoscopic systems
- H04N2213/003—Aspects relating to the "2D+depth" image format
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Controls And Circuits For Display Device (AREA)
- Image Processing (AREA)
- Facsimile Image Signal Circuits (AREA)
- Color Image Communication Systems (AREA)
- Processing Or Creating Images (AREA)
Abstract
公开了一种用于在3D显示器上再现图像数据的方法和设备。接收第一图像信号,然后以降低的空间分辨率再现第一图像信号的至少一个颜色分量以产生第二图像信号。对该第二图像信号进行空间滤波,其中在为所述显示器重构完整分辨率信号时平衡空间误差和视图误差。
Description
技术领域
本发明总体上属于图像信号处理领域。更具体地说,本发明涉及处理用于在3D双凸透镜或栅栏式显示器上显示的图像信号,尤其涉及当再现用于在3D双凸透镜或栅栏式显示器上显示的图像信号时保持所感知的图像质量。
背景技术
3D成像是双眼视差的函数,所述双眼视差向观察者提供相对深度感知。当被注视目标的图像落入到不对称的视网膜点上时,得到的视网膜差异给出了一种刺激,使得观察者的视觉***从中建立起立体视觉感知。在视觉***内,专门负责立体视觉的不同方面(例如精或粗立体视觉、深度运动、静止或横向运动立体视觉)、根据刺激联合或单独执行的分立神经子***为观察者建立起3D图像。当前存在各种不同的措施,用于将2D图像作为3D图像呈现给观察者的视觉***。
在文献WO/99/05559中记载了一种方法,用于控制显示设备的像素寻址,以便当覆盖双凸透镜屏(lenticular screen)和提供用于多视图交错的图像数据时将该显示设备作为多视图自动立体显示器来驱动。根据定义了至少双凸透镜屏透镜体间距(lenticule pitch)的数据以及相对于显示设备的总的双凸透镜屏位置,对于每个显示器彩色像素,导出该像素将要携带N个视图中的哪个视图。然后把针对所分配视图的相应像素数据选作显示器像素数据。尽管按照文献WO/99/05559中记载的方法进行控制的多视图显示设备的图像质量相对较好,但是产生被显示图像所需的信号处理的量却相当大。
当前采用2D光栅显示器的3D图形***典型地通过使用透视算法在2D图形光栅显示器上再现目标来达到3D真实感效果。
图1示出了用于在3D显示器上再现2.5D视频信号的已知信号处理***,其中显示器的构造使得视图被映射到单独的子像素上。再现***100接收YUVD信号,该YUVD信号由转换器102以一种已知的方式转换成RGBD信号。然后,换算器(scaler)104将RGBD换算成单独的R、G、B、D分量。视图再现器106随后再现RD、GD和BD信号以产生新的R、G、B信号。视图再现器106被用具体示例说明了9次。每次示例都在单一的颜色分量上操作。然后,在合并单元108中将R、G、B信号合并到一起,从而产生随后可在显示屏110上显示的最终RGB信号。
图2示出了针对依照图1中所示信号处理***的9视图显示器的各子像素上的视图编号。它执行两个主要功能:深度变换和重采样以便生成合适的子像素网格。考虑到当前的技术,由于视图再现器工作于高显示器分辨率的子像素位置,因此它的计算复杂度是很大的。另外,针对每个颜色分量的计算负荷相同。因此,存在必须执行的巨大的计算量以便在3D显示器上再现2.5D视频信号。由于计算是实时进行的,因而这种计算负荷要求相当大的处理功率和能量。
因此,改进的信号处理***将显出优势,特别是这样的再现***,它显著降低了在3D显示器上再现图像所需的计算量,同时平衡了空间误差和视图误差以便产生图像质量可接受的信号。
发明内容
因此,本发明优选地寻求以单一方式或任意组合方式减轻、缓解或消除一个或多个上述现有技术的缺陷和不足,并且通过提供一种依照所附的专利权利要求在3D显示器上进行图像数据的有效再现的方法、设备和计算机可读介质来至少(部分地)解决上述问题。
本发明的目的在于,当在3D双凸透镜或栅栏式(barrier)显示器上再现图像数据时,显著地节省开销,同时保持所感知的图像质量。这主要是通过在YUV域进行处理和降低U/V分辨率来实现的。通过在YUV/RGB矩阵中重新选择子像素值来平衡视图误差和空间误差。感知的图像质量只是略微有所降低。而且,YUV域中的处理允许自适应处理依赖于深度的亮度/对比度以便无缝接入处理链。这改善了所感知的深度印象。该信息至少减少了50%的计算负荷。
依照本发明的各方面,公开了一种用于在3D显示器上再现图像数据的方法、设备和计算机可读介质。
依照本发明的一个方面,提供了一种用于在3D显示器上再现图像数据的方法,所述方法包括以下步骤:
-接收第一图像信号;
-以降低的空间分辨率再现第一图像信号的至少一个颜色分量以产生第二图像信号;以及
-空间滤波所述第二图像信号,其中在为所述显示器重构完整分辨率信号时平衡空间误差和视图误差。
依照本发明的另一个方面,一种用于在3D显示器上再现图像数据的信号处理***,包括:
-用于接收第一图像信号的装置;
-用于以降低的空间分辨率再现第一图像信号的至少一个颜色分量以产生第二图像信号的装置;以及
-用于空间滤波所述第二图像信号的装置,其中在为所述显示器重构完整分辨率信号时平衡空间误差和视图误差。
依照本发明的另一个方面,提供了一种计算机可读介质,该计算机可读介质在其上包含有用于为3D显示器而再现图像数据的计算机程序,以供计算机处理,其中该计算机程序包括:
-用于以降低的空间分辨率再现第一图像信号的至少一个颜色分量以产生第二图像信号的代码段;以及
-用于空间滤波所述第二图像信号的代码段,其中在为所述显示器重构完整分辨率信号时平衡空间误差和视图误差。
本发明优于现有技术之处在于,它降低了再现***上的计算负荷,同时保持了在3D显示器上显示的图像的感知图像质量。
附图说明
根据本发明的下列实施例的描述以及参照附图,本发明的这些和其他方面、特征和优势将是显而易见的,并且将对其加以阐述,其中
图1示出了已知的信号处理***;
图2示出了针对依照图1中所示信号处理***的9视图显示器的各子像素上的视图编号;
图3示出了可用于本发明不同实施例中的多视图显示设备的透视示意图;
图4示出了依照本发明的一个实施例的信号处理***;
图5示出了依照本发明的另一个实施例的信号处理***;
图6示出了针对依照图5中所示信号处理***的9视图显示器的各子像素上的视图编号。
图7示出了依照本发明的一个实施例的计算机可读介质。
具体实施方式
下列描述集中在可应用到视频显示***特别是3D视频显示***的本发明的实施例上。但是可以理解的是,本发明并不限于该应用,而是可以应用到许多其他的视频显示***。而且,本发明适用于再现2.5D信号(扩充了深度的常规视频)、立体信号(左眼和右眼常规视频信号)或者甚至再现多视图(例如用于9视图显示的9幅图像)。此外,本发明适用于任何类型的图像数据(例如视频信号、静止图像,等等),尽管由于要求实时处理,节约计算负荷对于视频更为重要。
在下面的示例中,将首先参照图3描述具有斜置双凸透镜的直视型3D-LCD双凸透镜阵列显示设备100,以便阐明本发明。
可以理解的是,这些附图仅仅是示意性的并且不是按比例绘出。为了说明清楚起见,有些尺寸可能被夸大,而有些尺寸可能被缩小。还有,在合适的地方,所有这些附图的相同附图标记表示相同的部件和尺寸。
参照图3,显示设备10包含用作空间光调制器的传统LC矩阵显示面板11,该嵌板11包括排列成彼此垂直的行和列的单独可寻址和尺寸相似的光发生元件12的平面阵列。虽然图中只显示了一些光发生元件,实践中可以有大约800列(或2400色彩列,其RGB三元组用于提供全色显示)和600行显示元件。这些嵌板是众所周知的,这里将不再赘述。
这些光发生元件12的形状基本上是矩形的,并且彼此有规则地隔开,其中两相邻列中的光发生元件隔开一个沿列(垂直)方向延伸的间隙,两相邻行中的显示元件隔开一个沿行(水平)方向延伸的间隙。嵌板11属于有源矩阵类型,其中每个光发生元件与一个开关元件关联,该开关元件包括例如TFT或薄膜二极管、TDF,位于邻近该光发生元件的位置。
显示面板11由光源14照明,在这个示例中,该光源14包括沿显示元件阵列的区域延伸的平面背光源。来自光源14的光射向并穿过该嵌板,其中单独的光发生元件通过施加适当的驱动电压来驱动,以便按照传统的方式调制该光以产生显示输出。因此,构成所产生的显示器的光发生元件阵列与光发生元件的结构一致,每个光发生元件给出相应的显示像素。计算装置18根据输入信号为各个光发生元件计算亮度值。
在嵌板11输出侧(与面向光源14的一侧相对)上,放置了双凸透镜板15,该双凸透镜板15包括伸长、平行的双凸透镜或透镜元件,用作光学导向器装置以便向观察者的眼睛提供单独的图像,向远离嵌板11的、面向双凸透镜板15的一侧的观察者产生立体显示。具有传统形状的双凸透镜板15的双凸透镜包括光学(半)圆柱形会聚双凸透镜,例如形如凸圆柱形透镜或分级反射率圆柱形透镜。使用这种双凸透镜板和矩阵显示面板的自动立体显示设备在本领域是众所周知的,但是与这种设备中的双凸透镜沿平行于显示器像素列(对应于显示元件列)方向延伸的传统排列不同的是,图3的设备中的双凸透镜相对于光发生元件列倾斜排列,即它们的主纵轴与光发生元件结构的列方向成一定角度。这种排列被发现在降低分辨率损失和增强对光发生元件间的黑色区域的掩盖方面带来许多好处,如申请号为EP-A-0791847的专利申请中所记载的。专利申请PHNL050033EPP中记载了有关图3所示显示器的操作的描述,在此引入作为参考。
简而言之,再现过程包括几个操作。首先,为(例如来自视频+深度,或来自立体的)每个视图计算图像。然后将该图像适当缩放到视图分辨率。然后将该图像适当变换到视图的子像素位置。本领域技术人员可以理解的是,可以组合这些操作中的一些或全部操作。例如,如图2所示,首先分开进行垂直缩放,然后视图再现器执行这三个操作的所有水平处理。
在人类视觉***(HVS)中,锐度印象主要由亮度分量决定,受色度分量的影响要小得多。研究指出,这对于深度感知同样成立。此外,考虑大部分的信号能量存在于亮度分量中。进一步考虑与再现过程相比,颜色空间转换是一种相对低廉的操作。
由于锐度印象主要由亮度分量决定,并且亮度是G信号的最突出的部分,用于降低垂直分辨率的最有希望的候选对象是B信号,其次是R信号。依照本发明的第一实施例,并不为帧中的每行计算B和R分量。例如,仅计算帧中每偶数行上的B和R分量,而利用偶数行的垂直平均来计算奇数行上的B/R信号。结果,B和/或R分量的垂直分辨率降低了50%。
图4示出了依照本发明的第一实施例的视频信号处理***。本领域技术人员可以理解的是,该视频处理***可以是显示设备200(例如电视、计算机监视器、手持设备等等)的一部分。再现***201接收YUVD信号,该YUVD信号由转换器202按照已知的方式转换成RGBD信号。然后,该RGBD信号由换算器204换算成R、G、B、D分量。在这个实施例中,将对应帧中每个偶数行的RD、GD和BD分量发送给至少一个视图再现器206,以便为偶数行产生新的R、G、B信号。然后在合并单元210中将对应偶数行的R、G、B信号合并在一起。此外,将帧中每个奇数行的GD分量发送给视图再现器208(其作用与206相似),以便为帧中每个奇数行产生新的G信号。如下面将要更详细地描述的,视图再现器206、208按照这样的方式分别对其输出信号进行空间滤波,使得由再现过程中产生的空间和视图误差造成的可见伪像最小。如上所述,在合并单元212中将奇数行每侧上的偶数行的R和B信号的平均值与所计算的G信号合并,以便得到帧的奇数行的RGB信号。然后在单元214中将对应奇数和偶数行的RGB信号合并以得到最终的RGB信号,该最终的RGB信号被送往显示器216。
如上所述,再现过程产生空间误差和视图误差。空间误差涉及空间距离。空间距离越小,样本值就越相关,因此紧密的空间位置得到最小的误差。视图误差涉及视图编号。大的视图编号差异关联大的不对称性,因此最小的视图差异得到最小的误差。0视图误差仅允许使用来自同一视图的样本值,造成很大的空间距离,从而导致显著的总误差。在有些情况下,最小的空间误差造成导致很大的不对称性的很大的视图误差,从而导致显著的总误差。在本发明的这个实施例中,利用空间滤波平衡这两个误差,得到良好的图像质量。
实验表明,这种解决方案得到良好的结果。还要指出的是,误差不仅存在于垂直分辨率中,而且存在于深度中。垂直方向偏移一行导致1个视图误差。通过选择不同的滤波器拓扑结构,可以用空间精度换取深度精度。因此,空间滤波器设计要兼顾显示器的空间特性和深度特性。依照本发明的一个实施例,选取的空间滤波器尽量在空间误差校正和视图误差校正之间达到平衡,使得两个误差均不产生许多可见的伪像。这种解决方案被证明几乎不引入任何可见的伪像。由于相对于视图再现而言可以忽略取平均运算的计算负荷,这将计算量减小了1/3。
本领域技术人员可以理解的是,本发明也可用来计算对应奇数行的R、G、B值,并且使用奇数行的R和B值来估计偶数行的R和B值。此外,还可以理解的是,对于每两个奇数行、每三个行、每四个行等等,可以省略传统的奇数行的R和B值的计算。
依照本发明的另一实施例,再现过程在YUV域实现。图5示出了依照本发明的这个实施例的视频信号处理***。本领域技术人员可以理解的是,该视频处理***可以是显示设备300(例如电视、计算机监视器、手持设备等等)的一部分。再现***301接收YUVD信号,该YUVD信号被施加到换算器302。换算器302将该YUVD信号换算成单独的Y、U、V、D分量。在这个实施例中,YD、UD、VD分量被送往视图再现器304以产生新的Y、U、V信号。然后在合并单元中将这些Y、U、V信号合并在一起。然后转换器308将该合并的YUV信号转换成RGB信号。YUV信号到RGB信号的转换通过利用如上所述的特殊选择的空间滤波器而兼顾了显示器的空间特性和深度特性。然后将RGB信号送往显示器310。
乍看起来,这在引入误差的同时并不引起任何开销的节省。首先,应当尽可能地减小误差。稍后将说明U/V信号分辨率的降低是如何导致开销的显著节省的。所设计的视图再现器工作于屏幕的R、G和B子像素位置。为了在这些RGB位置上进行最优的YUV映射,考虑颜色空间转换矩阵;作为示例,给出如下的ITU-R BT.601-5颜色矩阵:
Y’=0.299*R’+0.587*G’+0.114*B’
U’=-0.169*R’-0.331*G’+0.500*B’
V’=0.500*R’-0.419*G’-0.081*B’
R’=Y’+1.402*V’
G’=Y’-0.344*U’-0.714*V’
B’=Y’+1.772*U’
最理想的情况是使用最突出的颜色分量,因此:将Y映射到G上(即将它看作G信号进行处理);将U映射到B上,将V映射到R上。这种从YUV到RGB子像素位置上的映射如图6所示。
除非采取了合适的预防措施,从YUV到RGB的转换会引起显著的深度误差。应当使最主要的贡献来自正确的位置。这导致如下用来计算R、G和B的像素:
R←(Y[x+1],V[x])
G←(Y[x],V[x-1],U[x+1])
B ←(Y[x-1],U[x])
其中x代表当前的像素位置。
这种设置导致最大视图误差为1。注意到从相邻像素([x-1]或[x+1])取值并不是最接近的空间位置。如果仅考虑了最优空间位置,那么所有值都取自位置[x]。
实验表明,这种转换只是引起感知图像质量的轻微退化。
作为进一步的改进,可以利用线性或统计排序滤波器进行某种滤波。一些示例如下:
对于R,利用Y[y,x+1]和Y[y,x-2]的线性滤波器;
对于R,利用Y[y,x+1]、Y[y-1,x+1]和Y[y,x-2]的中值滤波器;
对于B,利用Y[y,x-1]和Y[y,x+2]的线性滤波器;
对于B,利用Y[y,x-1]、Y[y+1,x-1]和Y[y,x+2]的中值滤波器,
其中y代表当前的行位置。
这样一来,得到处理U/V信号的再现器示例。这允许通过以下措施来利用这些通道上的降低的信号能量和带宽以及感知灵敏度:
-以降低的水平分辨率(典型的电视信号格式为4∶2∶2,其在垂直标量中将U/V数据量降低了50%)执行垂直标量;
-降低垂直标量的复杂度(例如滤波器抽头数和降低的精度);
-降低水平标量/重采样器的复杂度(例如滤波器抽头数和降低的精度),所述水平标量/重采样器是再现器的一部分。
粗略地说,与Y处理相比,U/V处理的复杂度可以至少降低50%。可以将YUV/RGB矩阵现在以更高的数据速率运行这一事实忽略。那么,这导致复杂度降低1/3。
依照本发明的另一实施例,上述U/V信号分辨率的降低得到利用。注意到输入信号的格式通常为4∶2∶2,在再现过程中应当只处理水平方向的一半像素。为了简化该解释,建议以降低的U/V分辨率不加任何修正地执行深度再现器;仅仅只计算一半的输出值。然后,需要在U/V值缺失的每个奇数像素位置处调整YUV到RGB的转换。对于这些奇数位置,建议使用下面的数据:
R ←(Y[y,x+1],V[y-2,x+1])
G ←(Y[y,x],V[y,x-1],U[y,x+1])
B←(Y[y,x-1],U[y-2,x+1])
但是,由于不能从相邻像素位置获得U/V值,还需要修改偶数位置处的计算;解决方案如下:
R←(Y[x+1],V[x])
G ←(Y[x],V[x+2],U[x-2])
B←(Y[x-1],U[x])
这导致最大视图误差为1。还应注意使用了垂直距离为两行(而不是来自前一行)的数据。这允许该实施例与将垂直分辨率降低到1/2的第一实施例的直接组合。还应注意的是,较大的两行空间误差仅出现在U和V信号中。
作为进一步的改进,可以利用线性或统计排序滤波器进行某种滤波。例如:
对于R,利用V[y-2,x+1]和V[y+2,x-1]的线性滤波器;
对于B,利用U[y-2,x+1]和U[y+2,x-1]的线性滤波器。
这些像素位置反映了在所要求像素位置周围的空间对称性。
开销的节省是显而易见的:垂直缩放和视图再现器两者都仅需50%的U/V计算。因此,计算量减小了1/3。
本发明的一个附加选项是应用依赖于深度的信号处理。由知觉研究可知,深度印象与亮度/对比度特性有关:场景的远处部分看起来比近处部分更加“雾蒙蒙”。可以容易地在本发明的再现阶段应用这个知识,因为现在在再现阶段亮度和深度信息两者都是可用的,并且可以例如通过可变增益(受控的深度)或查找表容易地达到依赖于深度的亮度/对比度调节。这使得深度印象有所改善。依赖于深度的信号处理的另一示例涉及锐度。通常,背景中的目标不在焦点上。这个观察可以应用到信号处理中:模糊背景可提高深度印象。因此,依赖于深度的锐度的降低可以增强深度印象。由于锐度印象主要由视频信号的亮度分量决定,将这种依赖于深度的锐度滤波器应用到YUV域中是有益的。此外,由于这种依赖于深度的滤波可以无缝地结合进以相对较低的附加开销处理YD信号的再现单元中,本发明提供了一种特别有益的***。所述再现过程的主要功能是向观察者提供不对称性深度暗示。借助于相关的信号处理,得到了附加的深度暗示。
设计的这些不同的实施例便于组合以得到最大的开销的节省:在甚至不考虑第二实施例的简化滤波器的情况下,第一和第三实施例两者都导致减少50%的U/V处理,因此,对于300%的常规RGB处理,分别对应100%的Y处理、25%的U和V处理。这使得总减小量为50%。
依照本发明的另一实施例,本发明可用于可切换2D/3D显示器中,其中该显示器可设置在工作于常规2D显示器的模式或者被切换到3D模式。结果,用于YUV到RGB转换的像素选择取决于所选择的2D或3D显示器模式。
在依照图7的本发明的另一实施例中,示意性地示出了一种计算机可读介质。计算机可读介质700在其上包含了用于在3D显示器上再现视频数据的计算机程序710,以供计算机713处理。该计算机程序包括:用于以降低的空间分辨率再现第一视频信号的至少一个颜色分量以产生第二信号的代码段714;以及用于空间滤波所述第二视频信号的代码段715,其中在为所述显示器重构完整分辨率信号时平衡空间误差和视图误差。
本发明可以以任何适当的方式来实现,包括硬件、软件、固件或其任意组合。本发明的实施例中的元件和组件可以以任何适当的方式从物理上、功能上和逻辑上实现。当然,所述功能可以在单个单元中、在多个单元中实现,或者作为其他功能单元的一部分。同样地,本发明可以在单个单元中实现,或者从物理上和功能上分布于不同的单元和处理器之间。
尽管上面参照特定实施例对本发明进行了描述,但并不意味着它仅限于这里提到的特定形式。更确切地说,本发明仅由所附的权利要求来限定,在这些所附的权利要求的范围内,不同于上述特定实施例的其他实施例(例如有别于上述的信号处理***)同样是可能的。
在所附的权利要求中,词语“包括”并不排除其他元件或步骤的存在。此外,尽管单独列出了多个装置、元件或方法步骤,但是这些装置、元件或方法步骤可以通过例如单个单元或处理器来实现。另外,尽管各个特征被包含在不同的权利要求中,但是这些特征的组合可能是有益的,这些特征包含于不同的权利要求并不意味着特征的组合是不可行的和/或不利的。而且,单数引用并不排除复数的存在。词语“一”、“一个”、“第一”、“第二”等等并不排除多个存在。权利要求中的附图标记仅仅用来使示例更清楚,不应当被视为以任何方式限制了权利要求的范围。
Claims (1)
1.一种用于在3D显示器上再现图像数据的方法,所述方法包括:
- 接收第一图像信号;
- 以降低的空间分辨率再现以深度信息进行扩充的第一图像信号的至少一个颜色分量来产生第二图像信号,该第二图像信号包括对应至少两个视图的像素,其中根据人类视觉***(HVS)的灵敏度将所述至少一个颜色分量选择为对锐度印象影响较小的颜色分量;以及
- 空间滤波所述第二图像信号,使得在为所述3D显示器重构完整分辨率信号时平衡空间误差和视图误差。
2.依照权利要求1的方法,其中所述空间滤波利用了具有最大视图误差的空间最近可用像素值。
3.依照权利要求1的方法,其中3D显示器是RGB显示器,具有降低的空间分辨率的颜色分量是B和/或R分量。
4.依照权利要求1的方法,其中用于所述空间滤波的空间滤波器的选择考虑了3D显示器的空间特性和视图特性。
5.依照权利要求3的方法,其中B和/或R分量具有降低了50%的垂直分辨率。
6.依照权利要求5的方法,其中空间滤波器包括相邻行间的垂直平均运算。
7.依照权利要求1的方法,其中再现过程在不同于3D显示器的显示颜色空间的颜色空间中进行。
8.依照权利要求7的方法,包括在再现至少一个颜色分量时应用依赖于深度的滤波,以便提供附加的深度暗示。
9.依照权利要求7的方法,其中从再现颜色空间到显示颜色空间的分量映射取决于再现分量中对显示分量的最突出贡献。
10.依照权利要求9的方法,其中对于RGB显示器而言,处理是在YUV域中进行的,并且映射是Y映射到G上、U映射到B上以及V映射到R上。
11.依照权利要求7的方法,其中再现颜色空间到显示颜色空间的转换考虑了显示器的空间特性和深度特性。
12.依照权利要求7的方法,其中处理是在YUV域中进行的,并且U和V信号上的空间分辨率的水平分辨率降低了50%。
13.依照权利要求12的方法,其中U和V信号的分辨率的垂直分辨率有所降低。
14.依照权利要求12的方法,包括以低于在Y上再现的精度执行在U和V上的再现。
15.依照权利要求10的方法,其中用于YUV到RGB转换的像素选择取决于所选择的显示器模式。
16.一种用于在3D显示器上再现图像数据的信号处理***,包括:
- 用于接收第一图像信号的装置(201、301);
- 用于以降低的空间分辨率再现以深度信息进行扩充的第一图像信号的至少一个颜色分量来产生第二图像信号的装置(204、302),该第二图像信号包括对应至少两个视图的像素,其中根据人类视觉***(HVS)的灵敏度将所述至少一个颜色分量选择为对锐度印象影响较小的颜色分量;以及
- 用于空间滤波所述第二图像信号的装置(206、208、304),其中在为所述3D显示器重构完整分辨率信号时平衡空间误差和视图误差。
17.用于为3D显示器再现图像数据的显示设备,包括:
- 用于接收第一图像信号的装置(201、301);
- 用于以降低的空间分辨率再现以深度信息进行扩充的第一图像信号的至少一个颜色分量来产生第二图像信号的装置(204、302),该第二图像信号包括对应至少两个视图的像素,其中根据人类视觉***(HVS)的灵敏度将所述至少一个颜色分量选择为对锐度印象影响较小的颜色分量;以及
- 用于空间滤波所述第二图像信号的装置(206、208、304),其中在为所述3D显示器重构完整分辨率信号时平衡空间误差和视图误差。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP05104030 | 2005-05-13 | ||
EP05104030.1 | 2005-05-13 | ||
PCT/IB2006/051374 WO2006120607A2 (en) | 2005-05-13 | 2006-05-02 | Cost effective rendering for 3d displays |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101176354A CN101176354A (zh) | 2008-05-07 |
CN101176354B true CN101176354B (zh) | 2013-07-24 |
Family
ID=37064655
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2006800165807A Expired - Fee Related CN101176354B (zh) | 2005-05-13 | 2006-05-02 | 用于在3d显示器上再现图像数据的设备、***和方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US7961196B2 (zh) |
EP (1) | EP1882368B1 (zh) |
JP (1) | JP5213701B2 (zh) |
CN (1) | CN101176354B (zh) |
WO (1) | WO2006120607A2 (zh) |
Families Citing this family (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2006117707A2 (en) * | 2005-04-29 | 2006-11-09 | Koninklijke Philips Electronics N.V. | A stereoscopic display apparatus |
US8624964B2 (en) | 2005-12-02 | 2014-01-07 | Koninklijke Philips N.V. | Depth dependent filtering of image signal |
EP2243300B1 (en) * | 2008-02-11 | 2013-04-10 | Koninklijke Philips Electronics N.V. | Autostereoscopic image output device |
KR101502365B1 (ko) * | 2008-11-06 | 2015-03-13 | 삼성전자주식회사 | 삼차원 영상 생성기 및 그 제어 방법 |
US20100253768A1 (en) * | 2009-03-23 | 2010-10-07 | Spatial View Inc. | Apparatus and method for generating and displaying a stereoscopic image on a mobile computing device |
JP2011019202A (ja) * | 2009-07-10 | 2011-01-27 | Sony Corp | 映像信号処理装置および映像表示装置 |
KR101897479B1 (ko) * | 2009-11-03 | 2018-09-12 | 코닌클리케 필립스 엔.브이. | 오토스테레오스코픽 디스플레이 디바이스 |
EP2323412A1 (en) | 2009-11-13 | 2011-05-18 | Koninklijke Philips Electronics N.V. | Generating an image signal |
US8520020B2 (en) * | 2009-12-14 | 2013-08-27 | Canon Kabushiki Kaisha | Stereoscopic color management |
EP2466898B1 (en) | 2010-12-20 | 2017-10-18 | Vestel Elektronik Sanayi ve Ticaret A.S. | A method and apparatus for calibration of stereo images |
CN103354997A (zh) * | 2011-02-18 | 2013-10-16 | 索尼公司 | 图像处理设备和图像处理方法 |
US9681121B2 (en) * | 2012-01-11 | 2017-06-13 | Ultra-D Coöperatief U.A. | Mobile display device |
KR20130088636A (ko) * | 2012-01-31 | 2013-08-08 | 삼성전자주식회사 | 영상 전송 장치 및 방법, 그리고 영상 재생 장치 및 방법 |
US10121273B2 (en) | 2013-08-08 | 2018-11-06 | University Of Florida Research Foundation, Incorporated | Real-time reconstruction of the human body and automated avatar synthesis |
US9756316B2 (en) * | 2013-11-04 | 2017-09-05 | Massachusetts Institute Of Technology | Joint view expansion and filtering for automultiscopic 3D displays |
US9967538B2 (en) | 2013-11-04 | 2018-05-08 | Massachussetts Institute Of Technology | Reducing view transitions artifacts in automultiscopic displays |
SG10201900004UA (en) * | 2014-12-19 | 2019-02-27 | Hfi Innovation Inc | Methods of palette based prediction for non-444 color format in video and image coding |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6023263A (en) * | 1996-06-07 | 2000-02-08 | U.S. Philips Corporation | Stereoscopic image display driver apparatus |
US6801243B1 (en) * | 1997-07-23 | 2004-10-05 | Koninklijke Philips Electronics N.V. | Lenticular screen adaptor |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5790086A (en) | 1995-01-04 | 1998-08-04 | Visualabs Inc. | 3-D imaging system |
US6064424A (en) | 1996-02-23 | 2000-05-16 | U.S. Philips Corporation | Autostereoscopic display apparatus |
US20030112863A1 (en) | 2001-07-12 | 2003-06-19 | Demos Gary A. | Method and system for improving compressed image chroma information |
AU2001294074A1 (en) * | 2001-10-02 | 2003-06-23 | Hewlett-Packard Company | Reduction of chromatic bleeding artifacts inimage |
US7589729B2 (en) * | 2002-05-15 | 2009-09-15 | Mental Images Gmbh | Image synthesis by rank-1 lattices |
EP1437898A1 (en) | 2002-12-30 | 2004-07-14 | Koninklijke Philips Electronics N.V. | Video filtering for stereo images |
US7703924B2 (en) * | 2004-10-25 | 2010-04-27 | The Trustees Of Columbia University In The City Of New York | Systems and methods for displaying three-dimensional images |
EP1842179A1 (en) | 2005-01-18 | 2007-10-10 | Koninklijke Philips Electronics N.V. | Multi-view display device |
-
2006
- 2006-05-02 CN CN2006800165807A patent/CN101176354B/zh not_active Expired - Fee Related
- 2006-05-02 EP EP06728110.5A patent/EP1882368B1/en not_active Not-in-force
- 2006-05-02 US US11/913,877 patent/US7961196B2/en not_active Expired - Fee Related
- 2006-05-02 WO PCT/IB2006/051374 patent/WO2006120607A2/en not_active Application Discontinuation
- 2006-05-02 JP JP2008510689A patent/JP5213701B2/ja not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6023263A (en) * | 1996-06-07 | 2000-02-08 | U.S. Philips Corporation | Stereoscopic image display driver apparatus |
US6801243B1 (en) * | 1997-07-23 | 2004-10-05 | Koninklijke Philips Electronics N.V. | Lenticular screen adaptor |
Also Published As
Publication number | Publication date |
---|---|
EP1882368B1 (en) | 2017-03-01 |
WO2006120607A2 (en) | 2006-11-16 |
EP1882368A2 (en) | 2008-01-30 |
US7961196B2 (en) | 2011-06-14 |
WO2006120607A3 (en) | 2007-03-08 |
JP5213701B2 (ja) | 2013-06-19 |
US20080252638A1 (en) | 2008-10-16 |
CN101176354A (zh) | 2008-05-07 |
JP2008541599A (ja) | 2008-11-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101176354B (zh) | 用于在3d显示器上再现图像数据的设备、***和方法 | |
KR101166248B1 (ko) | 수신된 이미지 데이터를 분석하는 방법, 컴퓨터 판독 가능한 저장 매체, 뷰 모드 분석 유닛, 및 디스플레이 디바이스 | |
JP5296962B2 (ja) | バリア装置,立体映像表示装置及びその駆動方法 | |
CN101107644B (zh) | 多视图显示设备 | |
US20190215507A1 (en) | 3d system including a marker mode | |
EP2497274B1 (en) | Autostereoscopic display device | |
EP2786583B1 (en) | Image processing apparatus and method for subpixel rendering | |
TWI683281B (zh) | 用於產生三維影像之方法及裝置 | |
US8633967B2 (en) | Method and device for the creation of pseudo-holographic images | |
US9253479B2 (en) | Method and apparatus for displaying partial 3D image in 2D image display area | |
JP4933846B2 (ja) | 立体映像表示装置、および3d映像−立体変換機 | |
KR102121389B1 (ko) | 무안경 3d 디스플레이 장치 및 그 제어 방법 | |
CN101390131A (zh) | 呈现输出图像 | |
CN101276061A (zh) | 三维图像显示装置及用于显示三维图像的方法 | |
WO2004043079A1 (ja) | 立体映像処理方法及び立体映像表示装置 | |
US10805601B2 (en) | Multiview image display device and control method therefor | |
US20170155895A1 (en) | Generation of drive values for a display | |
US11070783B2 (en) | 3D system | |
US10277879B2 (en) | 3D system including rendering with eye displacement | |
US10148933B2 (en) | 3D system including rendering with shifted compensation | |
CA2795955A1 (en) | Simultaneous reproduction of a plurality of images by means of a two-dimensional imaging matrix | |
US20170140571A1 (en) | 3d system including rendering with curved display | |
WO2006136978A1 (en) | Method and system for rendering image data on a 3d display | |
US10225542B2 (en) | 3D system including rendering with angular compensation |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20130724 Termination date: 20190502 |