CN102045577A - 用于三维立体显示的观察者跟踪***及三维立体显示*** - Google Patents
用于三维立体显示的观察者跟踪***及三维立体显示*** Download PDFInfo
- Publication number
- CN102045577A CN102045577A CN2010102940723A CN201010294072A CN102045577A CN 102045577 A CN102045577 A CN 102045577A CN 2010102940723 A CN2010102940723 A CN 2010102940723A CN 201010294072 A CN201010294072 A CN 201010294072A CN 102045577 A CN102045577 A CN 102045577A
- Authority
- CN
- China
- Prior art keywords
- image
- observer
- eyeglass
- tracking system
- shutter glasses
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 239000011521 glass Substances 0.000 claims abstract description 47
- 238000012545 processing Methods 0.000 claims abstract description 28
- 230000003287 optical effect Effects 0.000 claims description 10
- 238000004364 calculation method Methods 0.000 claims description 4
- 238000005286 illumination Methods 0.000 claims description 2
- 238000000034 method Methods 0.000 description 13
- 238000005516 engineering process Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 6
- 230000008030 elimination Effects 0.000 description 3
- 238000003379 elimination reaction Methods 0.000 description 3
- 210000003128 head Anatomy 0.000 description 3
- 210000004556 brain Anatomy 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 239000004744 fabric Substances 0.000 description 2
- 230000004927 fusion Effects 0.000 description 2
- 230000035807 sensation Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000000205 computational method Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 210000001328 optic nerve Anatomy 0.000 description 1
- 230000002688 persistence Effects 0.000 description 1
- 238000012797 qualification Methods 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Landscapes
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
本发明公开了用于三维立体显示的观察者跟踪***及三维立体显示***。观察者跟踪***包括快门眼镜、图像捕获装置及图像处理装置。快门眼镜包括左镜片及右镜片,左镜片及右镜片交替地开启和关闭。图像捕获装置包括摄像头,摄像头在连续的两种时刻分别采集快门眼镜的第一图像和第二图像,连续的两种时刻包括左镜片开启且右镜片关闭的第一种时刻及右镜片开启且左镜片关闭的第二种时刻。图像处理装置根据第一图像与第二图像计算得到左、右镜片的像位置,并计算获得左、右镜片的三维空间位置,并根据眼睛相对于快门眼镜的三维位置关系进一步计算获得眼睛的三维空间位置。从而能够实时自动跟踪眼睛的三维空间位置,消除图像观察失真变形的问题。
Description
技术领域
本发明涉及三维(3D)立体显示技术领域,尤其涉及一种用于三维立体显示的观察者跟踪***及三维立体显示***。
背景技术
众所周知,现实世界是三维立体世界,它为人的双眼提供了两幅具有位差的图像,映入双眼后即形成立体视觉所需的视差,然后经视神经中枢的融合反射,以及视觉心理反应便产生了三维立体感觉。
近年来,随着高清电视技术的发展,人们对于更加真实显示图像技术的追求也越来越高。利用这个三维立体成像的原理,通过显示器将两幅具有位差的左图像和右图像分别呈现给左眼和右眼,即可以获得3D的感觉。
然而,由于目前三维立体显示技术的局限性,观察者并不是在所有的位置都能观看到正确的三维立体图像,为解决前述观察者观看位置局限性的问题,三维立体显示***需要对观察者的三维空间位置,通常是观察者眼睛的三维空间位置进行较为准确的跟踪与定位,以便更准确地向观察者发送与其眼睛所在位置相对应的图像。目前,在三维立体显示技术中对观察者眼睛进行跟踪与定位的技术主要有:模板匹配法、边缘提取法、灰度分布、眨眼检测法、人脸结构特征法以及神经网络法等技术,但是应用这些技术一般需要对图像进行缩放、旋转等复杂的归一化处理,运算量大,而且对像素精度也要求较高。
因此,迫切需要提供改进以克服现有技术中存在的以上问题。
发明内容
本发明要解决的主要技术问题是提供一种用于三维立体显示的观察者跟踪***及三维立体显示***,能够实时自动跟踪观察者眼睛的三维空间位置,消除图像观察失真变形的问题,而且图像处理较为简单,无需复杂的计算过程。
为解决上述技术问题,本发明提供了如下技术方案:
本发明的一方面提供了一种用于三维立体显示的观察者跟踪***,其包括:
快门眼镜,其包括左镜片及右镜片,所述左镜片及所述右镜片交替地开启和关闭;
图像捕获装置,其包括摄像头,所述摄像头在连续的两个时刻分别采集所述快门眼镜的第一图像和第二图像,所述连续的两种时刻包括所述左镜片开启且所述右镜片关闭的第一种时刻及所述右镜片开启且所述左镜片关闭的第二种时刻;
图像处理装置,其根据所述第一图像与所述第二图像计算得到所述左镜片及所述右镜片的像位置,从而获得观察者的三维空间位置。
另一方面,所述图像处理装置进一步根据计算获得的所述左镜片及所述右镜片的三维空间位置,并结合佩戴所述快门眼镜时观察者的眼睛相对于所述快门眼镜的三维位置关系进一步计算获得所述观察者的眼睛的三维空间位置。
本发明的用于三维立体显示的观察者跟踪***能够实时地自动跟踪和定位观察者的眼睛的位置信息,实时获取观察者的眼睛的三维空间位置,从而能够保证观察者实时观看到不失真的三维立体图像,消除因眼睛位置移动而发生图像观察失真变形的问题。而且,本发明的用于三维立体显示的观察者跟踪***对于图像的处理较为简单,无需复杂的计算过程。
本发明的另一方面提供了一种三维立体显示***,其包括控制装置、显示装置以及如上所述的观察者跟踪***,所述控制装置根据所述观察者跟踪***获得的所述观察者的眼睛的三维空间位置,控制由所述显示装置显示对应的图像。
本发明的三维立体显示***能够根据实时获取的眼睛的三维空间位置,来实时地调整和控制由显示装置显示对应的图像,从而能够保证观察者实时观看到不失真的三维立体图像,消除因眼睛位置移动而发生图像观察失真变形的问题。而且,本发明的三维立体显示***对于图像的处理较为简单,无需复杂的计算过程。
通过以下参考附图的详细说明,本发明的其它方面和特征变得明显。但是应当知道,该附图仅仅为解释的目的设计,而不是作为本发明的范围的限定,这是因为其应当参考附加的权利要求。还应当知道,除非另外指出,不必要依比例绘制附图,它们仅仅力图概念地说明此处描述的结构和流程。
附图说明
下面将结合附图,对本发明的具体实施方式进行详细的说明,其中:
图1为本发明一种实施方式的三维立体显示***的结构示意图。
图2为图1所示的图像处理装置中图像减法单元的工作原理示意图。
图3为图1所示的图像处理装置中眼睛定位单元的三角测距原理示意图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图对本发明的具体实施方式做详细的说明。
图1为本发明一种实施方式的三维立体显示***的结构示意图。如图1所示,本发明的三维立体显示***包括用于三维立体显示的观察者跟踪***、控制装置40以及用于显示图像的显示装置50。其中用于三维立体显示的观察者跟踪***包括快门眼镜(ShutterGlasses)10、图像捕获装置20以及图像处理装置30。
快门眼镜10由观察者佩戴于其左、右眼的正前方,其包括左镜片及右镜片。其中快门眼镜10中的左、右镜片可以是利用液晶材料制成的。左镜片及右镜片可以交替地开启和关闭,优选地,快门眼镜10以不小于120赫兹(Hz)的第一频率进行左、右镜片的开启和关闭的动作切换,即在第一种时刻T1,快门眼镜10的状态为左镜片开启而右镜片关闭,而在与第一种时刻连续的第二种时刻T2,快门眼镜10的状态为右镜片开启而左镜片关闭。所谓左/右镜片的开启为左/右镜片透明,使得光线能够穿透过左/右镜片,进而光线能够进入到观察者的左/右眼;而所谓左/右镜片的关闭为左/右镜片不透明,使得光线不能穿透过左/右镜片,进而光线不能进入到观察者的左/右眼。
图像捕获装置20与图像处理装置30电性连接。图像捕获装置20捕获观察者佩戴的快门眼镜10的图像,然后将该图像传递给图像处理装置30;图像处理装置30将该图像经过相应的处理,得到观察者眼睛的三维空间位置。
图像捕获装置20与图像处理装置30既可以分别由单独的芯片来完成,也可以均集成在同一芯片上。如果是将图像捕获装置20与图像处理装置30集成于同一芯片,优选地,其可以是个人计算机配以图像采集卡,并且使用应用软件来完成;或者,优选地,其也可以采用专用集成电路(ASIC:Application Specific IntegratedCircuit)、数字信号处理(DSP:Digital Signal Processing)、ARM(Advanced RISC Machines)微处理器、以及现场可编程门阵列(FPGA:Field-Programmable Gate Array)等,进行基于嵌入式硬件平台来实现。
图像捕获装置20包括第一摄像头21、第二摄像头22以及照明装置(未图示)。照明装置向快门眼镜10发射照明光线,照明光线能够穿透开启的左镜片和/或右镜片,但却被关闭的右镜片和/或左镜片反射,被反射的照明光线分别被第一摄像头21和第二摄像头22采集。优选地,照明装置从靠近第一摄像头21和第二摄像头22的光学中心的位置发射红外照明光线。更优选地,照明装置发射红外LED照明光线。第一摄像头21和第二摄像头22可以是数字的或者是模拟的。第一摄像头21和第二摄像头22彼此相互间隔,并且主光轴相互平行且分别从不同位置同时采集快门眼镜的图像。图像捕获装置20能够接收快门眼镜10的左/右镜片的切换触发信号,从而触发第一摄像头21和第二摄像头22进行图像采集。第一摄像头21和第二摄像头22按照第二频率采集图像,并且第一摄像头21和第二摄像头22采集图像的速度为快门眼镜10的左/右镜片开启/关闭切换速度的整数倍,即第一频率是第二频率的整数倍。第一摄像头21和第二摄像头22从各自所在位置分别采集一路视频数据,每路视频数据包括第一种时刻T1采集的第一图像和第二种时刻T2采集的第二图像。
图像捕获装置20具有图像存储能力,从而在连续的第一种时刻T1和第二种时刻T2采集图像时,能够储存前一时刻采集的图像。
图像处理装置30包括图像减法单元31以及与图像减法单元31耦接的眼镜定位单位32。
图2为图像减法单元31的工作原理示意图,其中图2仅示出了针对第一摄像头21采集的第一路视频数据进行处理的工作原理。结合参考图2所示,第一摄像头21采集的第一路视频数据包括在第一种时刻T1采集的第一图像211和在第二种时刻T2采集的第二图像212。在T1时刻,快门眼镜10的左镜片开启而右镜片关闭,采集的第一图像211为左镜片区域暗而右镜片区域亮的图像;在T2时刻,快门眼镜10的左/右镜片进行切换,此时,右镜片开启而左镜片关闭,采集的第二图像212为右镜片区域暗而左镜片区域亮的图像。第一摄像头21在T1时刻采集的第一图像211和在T2时刻采集的第二图像212分别传送给图像处理装置30中的图像减法单元31。图像减法单元31将T1时刻采集的第一图像211与T2时刻采集的第二图像212进行图像相减的运算,则依据公知的相关图像处理理论,第一图像211与第二图像212相减之后将唯一得到左、右镜片为前景,而黑色为背景的图像,并将像素值不为黑色的区域确定为左镜片及右镜片所在的像位置。经过图像减法单元31的图像相减运算,可以获得第一路视频数据所对应的左镜片及右镜片的像位置(Xgl1,Ygl1)、(Xgr1,Ygr1)。
同样地,图像减法单元31针对第二摄像头22的由在第一种时刻T1采集的第一图像和在第二种时刻T2采集的第二图像构成的第二路视频数据进行类似的图像相减运算,从而可以获得第二路视频数据所对应的左镜片及右镜片的像位置(Xgl2,Ygl2)、(Xgr2,Ygr2)。
由于第一路视频数据从第一摄像头21位置采集,第二路视频数据从第二摄像头22位置采集,因此,第一路视频数据对应第一摄像头21位置,第二路视频数据对应第二摄像头22位置。图像处理装置30根据第一路、第二路视频数据对应的位置以及计算获得的第一路视频数据对应的左、右镜片的像位置(Xgl1,Ygl1)、(Xgr1,Ygr1)和第二路视频数据对应的左、右镜片的像位置(Xgl2,Ygl2)、(Xgr2,Ygr2),结合立体视觉三角测距理论,计算左镜片及右镜片的三维空间位置。图3为图像处理装置30中眼睛定位单元32的三角测距原理示意图,其中图3仅示出了根据立体视觉三角测距理论计算出左镜片的三维空间位置的原理示意。以下将结合参照图3详细说明眼睛定位单元32通过左镜片的像位置计算左镜片的三维空间位置的原理。依据公知的立体视觉三角测距理论,首先要建立摄像头坐标系(X,Y)和世界坐标系(x,y,z),并且依据公知的理论知识对摄像头坐标系与世界坐标系(也称之为绝对坐标系)进行标定,从而建立起摄像头坐标系与世界坐标系之间的联系。在图3中,摄像头坐标系(X,Y)中的X轴方向是与观察者的左、右眼(或者其所佩戴的快门眼镜的左、右镜片)连线平行的方向,Y轴方向是在像平面上与X轴垂直的方向,世界坐标系(x,y,z)中的x轴方向是与摄像头坐标系中的X轴方向相关联,世界坐标系中的y轴方向是与摄像头坐标系中的Y轴方向相关联,世界坐标系中的z轴方向是镜片的深度方向。
由于快门眼镜10以120Hz的频率快速切换T1时刻和T2时刻,因此,在T1时刻和T2时刻切换时,可以近似观察者的头部是没有运动的,即眼睛或者说是快门眼镜10的左/右镜片的位置是没有移动的。
如图3所示,假设在T1和T2时刻,观察者的左镜片具有三维空间位置物点P(x,y,z)。左镜片在第一摄像头21中的像位置为像点G1(Xgl1,Ygl1),左镜片在第二摄像头22中的像位置为像点G2(Xgl2,Ygl2)。则由物点P(x,y,z)、像点G1(Xgl1,Ygl1)与像点G2(Xgl2,Ygl2)三者之间构筑一个三角形。左镜片在第一摄像头21中的像点G1所在平面为第一像平面S1,左镜片在第二摄像头22中的像点G2所在平面为第二像平面S2。在第一像平面S1和第二像平面S2之间建立摄像头坐标系。已知第一摄像头21的主光轴210和第二摄像头22的主光轴220分别与第一像平面S1和第二像平面S2的交点为E1和E2,E1和E2也分别称之为第一摄像头21的主点和第二摄像头22的主点,第一摄像头21和第二摄像头22的焦点分别为F1和F2,焦点F1和F2分别在第一摄像头的光轴210和第二摄像头的光轴220上,其焦距分别为f1和f2,由于第一摄像头和第二摄像头相同,因此,f1=f2=f,f为已知的常数。已知第一摄像头21和第二摄像头22分别在第一像平面S1和第二像平面S2中的投影中心位于其光轴上,则第一、第二摄像头21、22的投影中心的连线距离为基线距离B。由于像点G1(Xgl1,Ygl1)和像点G2(Xgl2,Ygl2)在同一平面上,因此,像点G1与像点G2在Y轴上的坐标相同,即,Ygl1=Ygl2=Y,Y为已知的常数。则由三角几何关系可以得到,
则视差D(Disparity)=Xgl1-Xgl2。由于左镜片在摄像头坐标系中的坐标值(Xgl1,Ygl1)及(Xgl2,Ygl2)已经获得,因此,由上述公式可以计算出左镜片在世界坐标系中的三维空间位置坐标:
综上,结合立体视觉三角测距理论,根据第一路和第二路视频数据所对应的左镜片的像位置(Xgl1,Ygl1)和(Xgl2,Ygl2),能够很容易地计算出左镜片的三维空间位置。
同样地,眼睛定位单元32结合立体视觉三角测距理论,根据第一路和第二路视频数据所对应的右镜片的像位置(Xgr1,Ygr1)、(Xgr2,Ygr2)可以计算出右镜片的三维空间位置,其计算方法类似,故,此处不再作赘述。
考虑到眼睛定位单元32根据立体视觉三角测距理论计算出左、右镜片的三维空间位置的精确度问题,本发明的图像捕获装置20可以包括三个、四个、......、或者甚至更多个摄像头,只要满足摄像头的主光轴彼此相互平行即可,从而可以构筑多个三角形,其中每两个摄像头的像点和物点之间可以构筑一个三角形,例如,对于图像捕获装置20包括三个摄像头的情况,则可以构筑成三个三角形,然后针对每一个三角形按照以上计算过程分别进行处理,从而计算获得多个左/右镜片的三维空间位置,并对其求平均值,从而获得更为精确的左/右镜片的三维空间位置,提高了整个观察者跟踪***的精准度,降低其误判率。
另外,本发明的图像捕获装置20也并不限于包括两个或多个摄像头的情况,如果摄像头的拍摄频率足够快,则可以采用一个摄像头进行移动拍摄,同样可以获得从至少两个位置采集快门眼镜的图像的目的,而不脱离本发明的实质。因此,但凡能够实现从至少两个位置采集快门眼镜的图像的摄像装置均在本发明的保护范围之内。
图像处理装置30中的眼睛定位单元32可以根据计算获得的左镜片及右镜片的三维空间位置,进一步根据佩戴快门眼镜10时观察者的眼睛相对于快门眼镜10的三维位置关系,进而计算获得观察者的眼睛的三维空间位置。在一种实施方式中,由于观察者的左、右眼基本位于其所佩戴的快门眼镜10的正后方,所以,考虑到简化图像处理装置30的计算,可以将快门眼镜10的左、右镜片的中心区域近似认为是观察者的左、右眼所在的区域。并且,由于观察者的左、右眼距离快门眼镜10的机构的制约,所以,眼睛相对于快门眼镜10在深度方向的相对位置通常是固定的,可以将快门眼镜10在深度方向的位置近似认为是观察者的眼睛在深度方向的位置,从而由快门眼镜10的左镜片及右镜片的三维空间位置,图像处理装置30计算得出观察者的眼睛的三维空间位置。
控制装置40根据观察者跟踪***获得的观察者的眼睛的三维空间位置,来控制由显示模块50显示对应的图像。控制装置40用于控制快门眼镜10的左/右镜片的切换触发信号与显示装置50的刷新频率,即在左镜片开启而右镜片关闭的第一种时刻T1,根据左眼当前时刻的三维空间位置,控制装置40控制显示装置50显示对应的左眼图像,此时,由于快门眼镜10的左镜片开启而右镜片关闭,因此,仅能由观察者的左眼看到对应的左眼图像,而观察者的右眼由于右镜片关闭看不到任何图像。在右镜片开启而左镜片关闭的第二种时刻T2,根据右眼当前时刻的三维空间位置,控制装置40控制显示装置50显示对应的右眼图像,此时,由于快门眼镜10的右镜片开启而左镜片关闭,因此,仅能由观察者的右眼看到对应的右眼图像,而观察者的左眼由于左镜片关闭看不到任何图像。因为左眼图像和右眼图像是具有视差的图像,由于眼睛具有视觉暂留效应,则在T1和T2时刻,暂留于人脑中的左眼图像和右眼图像经过人脑的进一步的融合作用,则对于观察者来讲,形成了具有立体效应的一幅完整的图像。
若观察者的头部发生移动,即观察者的左、右眼的三维空间位置发生变化,则观察者跟踪***会实时地自动跟踪和定位观察者的眼睛的位置信息,实时获取观察者的眼睛的三维空间位置,控制装置40能够根据观察者跟踪***实时提供的眼睛的三维空间位置,来实时地调整和控制由显示装置50显示对应的图像,从而能够保证观察者实时观看到不失真的三维立体图像,消除因眼睛位置移动而发生图像观察失真变形的问题。而且,本发明的观察者跟踪***对于图像的处理较为简单,无需复杂的计算过程。
本发明虽然以较佳实施方式公开如上,但其并不是用来限定本发明,任何本领域技术人员在不脱离本发明的精神和范围内,都可以做出可能的变动和修改,因此本发明的保护范围应当以本发明权利要求所限定的范围为准。
Claims (15)
1.用于三维立体显示的观察者跟踪***,其特征在于,其包括:
快门眼镜,其包括左镜片及右镜片,所述左镜片及所述右镜片交替地开启和关闭;
图像捕获装置,其包括摄像头,所述摄像头在连续的两种时刻分别采集所述快门眼镜的第一图像和第二图像,所述连续的两种时刻包括所述左镜片开启且所述右镜片关闭的第一种时刻及所述右镜片开启且所述左镜片关闭的第二种时刻;
图像处理装置,其根据所述第一图像与所述第二图像计算得到所述左镜片及所述右镜片的像位置,并计算获得所述左镜片及所述右镜片的三维空间位置,从而获得观察者的三维空间位置。
2.如权利要求1所述的观察者跟踪***,其中,所述图像处理装置进一步根据计算获得的所述左镜片及所述右镜片的三维空间位置,并结合佩戴所述快门眼镜时观察者的眼睛相对于所述快门眼镜的三维位置关系进一步计算获得所述观察者的眼睛的三维空间位置。
3.如权利要求2所述的观察者跟踪***,其中,所述图像处理装置将所述第一图像与所述第二图像相减得到所述左镜片及所述右镜片为前景,黑色为背景的图像,并将像素值不为黑色的区域确定为所述左镜片及所述右镜片所在的像位置。
4.如权利要求2所述的观察者跟踪***,其中,所述图像捕获装置包括照明装置,所述照明装置向所述快门眼镜发射照明光线,所述照明光线穿透开启的所述左镜片和/或所述右镜片但被关闭的所述右镜片和/或所述左镜片反射,被反射的照明光线被所述摄像头采集。
5.如权利要求4所述的观察者跟踪***,其中,所述照明装置从靠近所述摄像头光学中心的位置发射红外照明光线。
6.如权利要求2所述的观察者跟踪***,其中,所述快门眼镜按照第一频率切换所述第一种时刻及所述第二种时刻,所述摄像头按照第二频率采集图像,所述第一频率是所述第二频率的整数倍。
7.如权利要求6所述的观察者跟踪***,其中,所述第一频率不小于120Hz。
8.如权利要求3所述的观察者跟踪***,其中,所述摄像头从至少两个位置采集所述快门眼镜的图像。
9.如权利要求8所述的观察者跟踪***,其中,所述图像捕获装置包括至少两个摄像头,所述至少两个摄像头的主光轴彼此相互平行且分别从不同位置同时采集所述快门眼镜的图像,每个摄像头分别从其所在位置采集一路视频数据,每路视频数据包括所述第一种时刻采集的第一图像和所述第二种时刻采集的第二图像。
10.如权利要求9所述的观察者跟踪***,其中,所述图像处理装置将所述每路视频数据的所述第一图像与所述第二图像相减后,计算得到该路视频数据对应的所述左镜片及所述右镜片的像位置。
11.如权利要求10所述的观察者跟踪***,其中,所述图像处理装置根据各路视频数据对应的位置及计算获得的各路视频数据对应的所述左镜片及所述右镜片的像位置,结合立体视觉三角测距理论,计算获得所述左镜片及所述右镜片的三维空间位置。
12.如权利要求2所述的观察者跟踪***,其中,图像捕获装置具有图像存储能力。
13.如权利要求2所述的观察者跟踪***,其中,所述图像处理装置将左、右镜片的中心区域视为观察者的左、右眼所在的区域,并且将快门眼镜在深度方向的位置视为观察者的眼睛在深度方向的位置,从而获得观察者的眼睛的三维空间位置。
14.一种三维立体显示***,其特征在于:其包括控制装置、显示装置以及如权利要求2至13中任一项所述的观察者跟踪***,所述控制装置根据所述观察者跟踪***获得的所述观察者的眼睛的三维空间位置,控制由所述显示装置显示对应的图像。
15.如权利要求14所述的三维立体显示***,其中,在所述第一种时刻,所述控制装置根据左眼当前时刻的三维空间位置,控制所述显示装置显示对应的左眼图像;在所述第二种时刻,所述控制装置根据右眼当前时刻的三维空间位置,控制所述显示装置显示对应的右眼图像。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 201010294072 CN102045577B (zh) | 2010-09-27 | 2010-09-27 | 用于三维立体显示的观察者跟踪***及三维立体显示*** |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 201010294072 CN102045577B (zh) | 2010-09-27 | 2010-09-27 | 用于三维立体显示的观察者跟踪***及三维立体显示*** |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102045577A true CN102045577A (zh) | 2011-05-04 |
CN102045577B CN102045577B (zh) | 2013-03-27 |
Family
ID=43911278
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN 201010294072 Active CN102045577B (zh) | 2010-09-27 | 2010-09-27 | 用于三维立体显示的观察者跟踪***及三维立体显示*** |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102045577B (zh) |
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102305970A (zh) * | 2011-08-30 | 2012-01-04 | 福州瑞芯微电子有限公司 | 一种自动跟踪人眼位置的裸眼三维显示方法及其结构 |
CN103096109A (zh) * | 2013-01-18 | 2013-05-08 | 昆山龙腾光电有限公司 | 多视图自动立体显示器及显示方法 |
CN104581126A (zh) * | 2014-12-16 | 2015-04-29 | 青岛歌尔声学科技有限公司 | 一种头戴显示设备的画面显示处理方法和处理装置 |
CN105120135A (zh) * | 2015-08-25 | 2015-12-02 | 努比亚技术有限公司 | 一种双目摄像头 |
US9332162B2 (en) | 2012-02-08 | 2016-05-03 | Hewlett-Packard Development Company, L.P. | System and method for video frame sequence control |
CN105867625A (zh) * | 2016-04-06 | 2016-08-17 | 四川东鼎里智信息技术有限责任公司 | 一种远距离手势控制方法 |
CN105867606A (zh) * | 2015-12-15 | 2016-08-17 | 乐视致新电子科技(天津)有限公司 | 虚拟现实头盔中的图像获取方法、装置及虚拟现实头盔 |
CN107147899A (zh) * | 2017-06-06 | 2017-09-08 | 北京德火新媒体技术有限公司 | 一种采用led 3d屏幕的cave显示***及方法 |
CN107239143A (zh) * | 2017-06-06 | 2017-10-10 | 北京德火新媒体技术有限公司 | 一种采用小间距led屏幕的cave显示***及方法 |
CN107787473A (zh) * | 2015-07-31 | 2018-03-09 | 谷歌有限责任公司 | 自动校准穿戴式眼睛跟踪***的独特反射镜片 |
CN108881892A (zh) * | 2018-05-23 | 2018-11-23 | 北京致臻智造科技有限公司 | 用于桌面式虚拟现实***的防眩晕方法、*** |
CN109151303A (zh) * | 2018-08-22 | 2019-01-04 | Oppo广东移动通信有限公司 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
CN109644260A (zh) * | 2016-09-29 | 2019-04-16 | 英特尔公司 | 动态光场显示器中进行深度扩展的混合立体渲染 |
CN109644266A (zh) * | 2016-05-26 | 2019-04-16 | 阿弗森医学有限公司 | 能够实现手术区域的深度感知的立体可视化*** |
CN110488489A (zh) * | 2018-05-15 | 2019-11-22 | 苹果公司 | 用于头戴式壳体的眼睛登记 |
CN112426333A (zh) * | 2020-11-24 | 2021-03-02 | 杭州集视智能科技有限公司 | 一种偏盲患者立体视觉辅助电子设备及其控制方法 |
WO2021110034A1 (zh) * | 2019-12-05 | 2021-06-10 | 北京芯海视界三维科技有限公司 | 眼部定位装置、方法及3d显示设备、方法 |
US11749018B1 (en) | 2019-05-28 | 2023-09-05 | Apple Inc. | Eye enrollment for head-mounted enclosure |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1175308A (zh) * | 1994-12-13 | 1998-03-04 | 齐诺技术有限公司 | 用于立体显示***的跟踪*** |
CN1330281A (zh) * | 2000-06-21 | 2002-01-09 | 艾派克科技股份有限公司 | 一种无线3维眼镜用信号自动跟踪*** |
US20090102915A1 (en) * | 2005-04-25 | 2009-04-23 | Svyatoslav Ivanovich Arsenich | Stereoprojection system |
US20100060720A1 (en) * | 2008-09-09 | 2010-03-11 | Yasutaka Hirasawa | Apparatus, method, and computer program for analyzing image data |
US20100103516A1 (en) * | 2008-10-27 | 2010-04-29 | Real D | Head-tracking enhanced stereo glasses |
-
2010
- 2010-09-27 CN CN 201010294072 patent/CN102045577B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1175308A (zh) * | 1994-12-13 | 1998-03-04 | 齐诺技术有限公司 | 用于立体显示***的跟踪*** |
CN1330281A (zh) * | 2000-06-21 | 2002-01-09 | 艾派克科技股份有限公司 | 一种无线3维眼镜用信号自动跟踪*** |
US20090102915A1 (en) * | 2005-04-25 | 2009-04-23 | Svyatoslav Ivanovich Arsenich | Stereoprojection system |
US20100060720A1 (en) * | 2008-09-09 | 2010-03-11 | Yasutaka Hirasawa | Apparatus, method, and computer program for analyzing image data |
US20100103516A1 (en) * | 2008-10-27 | 2010-04-29 | Real D | Head-tracking enhanced stereo glasses |
Cited By (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102305970A (zh) * | 2011-08-30 | 2012-01-04 | 福州瑞芯微电子有限公司 | 一种自动跟踪人眼位置的裸眼三维显示方法及其结构 |
US9332162B2 (en) | 2012-02-08 | 2016-05-03 | Hewlett-Packard Development Company, L.P. | System and method for video frame sequence control |
CN103096109A (zh) * | 2013-01-18 | 2013-05-08 | 昆山龙腾光电有限公司 | 多视图自动立体显示器及显示方法 |
CN103096109B (zh) * | 2013-01-18 | 2015-05-06 | 昆山龙腾光电有限公司 | 多视图自动立体显示器及显示方法 |
CN104581126A (zh) * | 2014-12-16 | 2015-04-29 | 青岛歌尔声学科技有限公司 | 一种头戴显示设备的画面显示处理方法和处理装置 |
CN107787473A (zh) * | 2015-07-31 | 2018-03-09 | 谷歌有限责任公司 | 自动校准穿戴式眼睛跟踪***的独特反射镜片 |
CN107787473B (zh) * | 2015-07-31 | 2020-10-20 | 谷歌有限责任公司 | 自动校准穿戴式眼睛跟踪***的独特反射镜片 |
CN105120135A (zh) * | 2015-08-25 | 2015-12-02 | 努比亚技术有限公司 | 一种双目摄像头 |
CN105867606A (zh) * | 2015-12-15 | 2016-08-17 | 乐视致新电子科技(天津)有限公司 | 虚拟现实头盔中的图像获取方法、装置及虚拟现实头盔 |
CN105867625A (zh) * | 2016-04-06 | 2016-08-17 | 四川东鼎里智信息技术有限责任公司 | 一种远距离手势控制方法 |
CN109644266A (zh) * | 2016-05-26 | 2019-04-16 | 阿弗森医学有限公司 | 能够实现手术区域的深度感知的立体可视化*** |
CN109644260A (zh) * | 2016-09-29 | 2019-04-16 | 英特尔公司 | 动态光场显示器中进行深度扩展的混合立体渲染 |
CN109644260B (zh) * | 2016-09-29 | 2021-12-21 | 英特尔公司 | 动态光场显示器中进行深度扩展的混合立体渲染 |
US11483543B2 (en) | 2016-09-29 | 2022-10-25 | Intel Corporation | Hybrid stereo rendering for depth extension in dynamic light field displays |
CN107239143A (zh) * | 2017-06-06 | 2017-10-10 | 北京德火新媒体技术有限公司 | 一种采用小间距led屏幕的cave显示***及方法 |
CN107147899A (zh) * | 2017-06-06 | 2017-09-08 | 北京德火新媒体技术有限公司 | 一种采用led 3d屏幕的cave显示***及方法 |
CN110488489A (zh) * | 2018-05-15 | 2019-11-22 | 苹果公司 | 用于头戴式壳体的眼睛登记 |
CN108881892A (zh) * | 2018-05-23 | 2018-11-23 | 北京致臻智造科技有限公司 | 用于桌面式虚拟现实***的防眩晕方法、*** |
CN109151303A (zh) * | 2018-08-22 | 2019-01-04 | Oppo广东移动通信有限公司 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
CN109151303B (zh) * | 2018-08-22 | 2020-12-18 | Oppo广东移动通信有限公司 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
US11749018B1 (en) | 2019-05-28 | 2023-09-05 | Apple Inc. | Eye enrollment for head-mounted enclosure |
WO2021110034A1 (zh) * | 2019-12-05 | 2021-06-10 | 北京芯海视界三维科技有限公司 | 眼部定位装置、方法及3d显示设备、方法 |
CN112426333A (zh) * | 2020-11-24 | 2021-03-02 | 杭州集视智能科技有限公司 | 一种偏盲患者立体视觉辅助电子设备及其控制方法 |
Also Published As
Publication number | Publication date |
---|---|
CN102045577B (zh) | 2013-03-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102045577B (zh) | 用于三维立体显示的观察者跟踪***及三维立体显示*** | |
US10282594B2 (en) | Electronic device, face recognition and tracking method and three-dimensional display method | |
CN102236245B (zh) | 单透镜2d/3d数字照相机 | |
CN102123291B (zh) | 智能型裸眼立体显示***及其控制方法 | |
CN104977716B (zh) | 目镜型显示装置及其显示控制方法 | |
US9838673B2 (en) | Method and apparatus for adjusting viewing area, and device capable of three-dimension displaying video signal | |
CN112507781B (zh) | 一种多维度多模态群体生物特征识别***以及方法 | |
US20160255336A1 (en) | 3D Intelligent Device and 3D Image Display Method therefor | |
US20160105665A1 (en) | Unassisted stereoscopic display device using directional backlight structure | |
CN104407440A (zh) | 具有视线跟踪功能的全息显示装置 | |
CN105635720A (zh) | 一种双镜头单传感器的立体视觉摄像机 | |
CN102508548A (zh) | 一种电子信息设备的操作方法及*** | |
CN109951698A (zh) | 用于检测反射的设备和方法 | |
CN104104942B (zh) | 立体图像显示设备及其眼睛追踪方法 | |
CN106937106A (zh) | 反射式3d显示装置 | |
JP2000184398A (ja) | 仮想画像立体合成装置、仮想画像立体合成方法、ゲ―ム装置及び記録媒体 | |
WO2023231674A1 (zh) | 液晶光栅的驱动方法及显示装置、其显示方法 | |
CN111308698B (zh) | 一种定向显示屏与一种感应式三维显示装置及其显示方法 | |
CN105049833B (zh) | 一种采用对称可调式背光结构的立体视检查方法和装置 | |
CN106772821B (zh) | 一种可交互裸眼3d*** | |
KR101785915B1 (ko) | 무안경 멀티뷰 또는 수퍼멀티뷰 영상 구현 시스템 | |
JP2004258594A (ja) | 広角度から鑑賞できる立体画像表示装置 | |
CN102223557B (zh) | 一种裸视全景立体成像***及方法 | |
CN205158454U (zh) | 基于红外标识点的跟踪装置 | |
CN113382225B (zh) | 一种基于全息沙盘的双目全息展示方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CP01 | Change in the name or title of a patent holder | ||
CP01 | Change in the name or title of a patent holder |
Address after: 215301 No. 1, Longteng Road, Kunshan, Jiangsu Patentee after: InfoVision Optoelectronics(Kunshan)Co.,Ltd. Address before: 215301 No. 1, Longteng Road, Kunshan, Jiangsu Patentee before: INFOVISION OPTOELECTRONICS (KUNSHAN) Co.,Ltd. |