CN102640036B - 生成三维图像信息的方法和装置 - Google Patents

生成三维图像信息的方法和装置 Download PDF

Info

Publication number
CN102640036B
CN102640036B CN201080040644.3A CN201080040644A CN102640036B CN 102640036 B CN102640036 B CN 102640036B CN 201080040644 A CN201080040644 A CN 201080040644A CN 102640036 B CN102640036 B CN 102640036B
Authority
CN
China
Prior art keywords
image
light
discr
polarization state
polarizer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201080040644.3A
Other languages
English (en)
Other versions
CN102640036A (zh
Inventor
托马斯·N·米切尔
伊奇罗·欣科达
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Front Street Investment Management Inc
Original Assignee
Front Street Investment Management Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Front Street Investment Management Inc filed Critical Front Street Investment Management Inc
Publication of CN102640036A publication Critical patent/CN102640036A/zh
Application granted granted Critical
Publication of CN102640036B publication Critical patent/CN102640036B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B35/00Stereoscopic photography
    • G03B35/02Stereoscopic photography by sequential recording
    • G03B35/04Stereoscopic photography by sequential recording with movement of beam-selecting members in a system defining two or more viewpoints
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00163Optical arrangements
    • A61B1/00193Optical arrangements adapted for stereoscopic vision
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00163Optical arrangements
    • A61B1/00194Optical arrangements adapted for three-dimensional imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B35/00Stereoscopic photography
    • G03B35/02Stereoscopic photography by sequential recording
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B35/00Stereoscopic photography
    • G03B35/18Stereoscopic photography by simultaneous viewing
    • G03B35/26Stereoscopic photography by simultaneous viewing using polarised or coloured light separating different viewpoint images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/207Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • H04N13/211Image signal generators using stereoscopic image cameras using a single 2D image sensor using temporal multiplexing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/207Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • H04N13/218Image signal generators using stereoscopic image cameras using a single 2D image sensor using spatial multiplexing

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Optics & Photonics (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • General Physics & Mathematics (AREA)
  • Biomedical Technology (AREA)
  • Molecular Biology (AREA)
  • Medical Informatics (AREA)
  • Veterinary Medicine (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Studio Devices (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Stereoscopic And Panoramic Photography (AREA)
  • Instruments For Viewing The Inside Of Hollow Bodies (AREA)

Abstract

公开了一种生成三维图像信息的方法和装置。所述方法包括将透镜的视场内捕捉到的光引导至透镜的孔径平面,在位于孔径平面附近的空间鉴别器处接收捕捉到的光,鉴别器包括被设置为通过单成像路径的第一部分传输具有第一光学状态的光的第一部分,以及被设置为通过单成像路径的第二部分传输具有第二光学状态的光的第二部分。单成像路径的第一部分和第二部分分别提供透镜的视场内的第一视角视点和第二视角视点,以分别在设置于透镜的图像平面处的图像传感器处形成第一图像和第二图像。第一图像从第一视角视点表征视场内的物体,第二图像从第二视角视点表征该物体,第一图像和第二图像一起可操作地用于表征物体的三维空间属性。所述方法还包括在图像传感器上的第一组传感器元件处接收第一图像,第一组传感器元件响应于具有第一光学状态的光,以及在图像传感器上的第二组传感器元件处接收第二图像,第二组传感器元件响应于具有第二光学状态的光。

Description

生成三维图像信息的方法和装置
技术领域
本发明一般涉及生成三维图像信息,并更特别地涉及使用单成像路径生成三维图像信息。
背景技术
在传统的二维(2D)成像中,表征三维(3D)场景中物体的光线被捕捉并映射至2D图像平面,因而深度信息未被记录。立体光学***能够通过从不同的视角视点生成独立的图像而生成表征深度信息的图像。例如该深度信息可被用于产生场景中点与点之间的3D尺寸。可选的是,该独立的图像可被分别独立地呈现给用户的左眼和右眼,以模仿人眼在观察真实场景时的行为,并允许用户在当前的观察中感知到深度。独立或立体的图像一般由具有一对空间上分离的成像路径的光学***或由使用单成像路径的不同部分生成,从而产生具有不同视角视点的图像。随后可使用眼镜来呈现所述图像,该眼镜能够选择性地允许独立的图像分别到达用户的左眼和右眼。可选的是,可配置特殊的显示器以将空间上分离的图像分别投影至用户的左眼和右眼。
立体成像的使用还可应用在外科手术中,其中,3D内窥镜可被用于为外科医生提供3D视觉。立体成像对于远程操作例如海底勘探同样也是具有使用价值的,其中,通过为远离机器致动器的操作员提供3D图像信息,使得机器致动器的控制更加便利。立体成像的其他应用可在物理测量***和娱乐工业中所使用的3D电影制作设备中被发现。
发明内容
根据本发明的一个方案,提供了一种使用具有单成像路径和相关视场的透镜生成三维图像信息的方法。该方法包括将在透镜的视场内捕捉到的光引导至该透镜的孔径平面,在位于该孔径平面附近的空间鉴别器(spatialdiscriminator)处接收捕捉到的光,该鉴别器包括被设置为通过单成像路径的第一部分传输具有第一光学状态的光的第一部分,以及被设置为通过单成像路径的第二部分传输具有第二光学状态的光的第二部分。所述单成像路径的第一部分和第二部分分别提透镜的视场内的第一视角视点和第二视角视点,以分别在设置于透镜的图像平面处的图像传感器处形成第一图像和第二图像。第一图像从第一视角视点表征视场内的物体,而第二图像从第二视角视点表征该物体,第一图像和第二图像一起可操作地用于表征物体的三维空间属性。所述方法还包括在图像传感器上的第一组传感器元件处接收第一图像,该第一组传感器元件响应于具有第一光学状态的光,以及在图像传感器上的第二组传感器元件处接收第二图像,该第二组传感器元件响应于具有第二光学状态的光。
接收第一图像和第二图像可包括分别在第一组传感器元件和第二组传感器元件处接收第一图像和第二图像,第一组传感器元件和第二组传感器元件中的每组包括:可操作地用于传输具有相应光学状态的光并阻挡具有不同于相应光学状态的光的传输的选择元件,以及位于该选择元件之下的相应的传感器元件。
每个相应的传感器元件可包括多个传感器元件。
接收第一图像和第二图像可包括分别在第一组传感器元件和第二组传感器元件处接收第一图像和第二图像,第一组传感器元件和第二组传感器元件以重复镶嵌模式排列,该重复镶嵌模式可操作地用于减小由图像传感器的传感器元件的重复频率导致的空间干涉。
鉴别器的第一部分可包括第一偏振器部分,第一偏振器部分被设置为通过单成像路径的第一部分传输具有第一偏振状态的光,该鉴别器的第二部分可包括第二偏振器部分,第二偏振器部分被设置为通过单成像路径的第二部分传输具有第二偏振状态的光。
接收第一图像可包括在第一组偏振器元件处接收第一图像,该第一组偏振器元件被设置为将具有第一偏振状态的光传输到相应的多个传感器元件,并阻挡具有第二偏振状态的光的传输;并且接收第二图像可包括在第二组偏振器元件处接收该第二图像,该第二组偏振器元件被设置为将具有第二偏振状态的光传输到相应的多个传感器元件,并阻挡具有第一偏振状态的光的传输。
接收捕捉到的光可包括:通过偏振器的第一部分接收具有左旋椭圆偏振状态的光,以及通过偏振器的第二部分接收具有右旋椭圆偏振状态的光;并且接收第一图像可包括在第一组偏振器元件处接收第一图像,该第一组偏振器元件可操作地用于传输具有左旋椭圆偏振状态的光并阻挡具有右旋椭圆偏振状态的光;并且接收第二图像可包括在第二组偏振器元件处接收该第二图像,该第二组偏振器元件可操作地用于传输具有右旋椭圆偏振状态的光并阻挡具有左旋椭圆偏振状态的光。
在第一组偏振器元件处接收第一图像可包括:在多个四分之一波片处接收第一图像,所述多个四分之一波片可操作地用于将右旋椭圆偏振状态变为第一线偏振状态,并可进一步包括:在相应的可操作地用于传输具有第一线偏振状态的光的多个线偏振器元件处接收第一图像;并且在第二组偏振器元件处接收第二图像可包括:在多个四分之一波片处接收该第二图像,所述多个四分之一波片可操作地用于将左旋椭圆偏振状态变为第二线偏振状态,并可进一步包括:在相应的可操作地用于传输具有第二线偏振状态的光的多个线偏振器元件处接收该第二图像。
左旋椭圆偏振状态可包括左旋圆偏振状态,右旋椭圆偏振状态可包括右旋圆偏振状态。
接收该捕捉到的光可包括:通过该偏振器的第一部分接收具有第一线偏振方向的光,以及通过该偏振器的第二部分接收具有第二线偏振方向的光,该第一线偏振方向垂直于该第二线偏振方向而定向;并且在第一组偏振器元件处接收第一图像可包括:在可操作地用于传输具有第一线偏振状态的光并阻挡具有右旋椭圆偏振状态的光的多个偏振器元件处接收该第一图像;并且在第二组偏振器元件处接收第二图像可包括:在可操作地用于传输具有第二线偏振状态的光并阻挡具有左旋椭圆偏振状态的光的多个偏振器元件处接收该第二图像。
该第一线偏振方向可被定向为45度。
在第一组偏振器元件处接收第一图像可包括:在可操作地用于传输具有第一偏振状态的光的多个线偏振器元件处接收第一图像;并且在第二组偏振器元件处接收第二图像可包括:在可操作地用于传输具有第二偏振状态的光的多个线偏振器元件处接收该第二图像。
该方法可包括选择性地将该鉴别器旋转大约90度以在横向和纵向的其中之一生成图像。
该鉴别器的第一部分可包括第一滤光器部分,该第一滤光器部分被设置为通过单成像路径的第一部分传输具有第一光谱属性的光;并且该鉴别器的第二部分可包括第二滤光器部分,该第二滤光器部分被设置为通过单成像路径的第二部分传输具有第二光谱属性的光,并且接收该第一图像可包括:在第一组传感器元件处接收该第一图像,该第一组传感器元件可操作地用于传输具有第一光谱属性的光并阻挡具有第二光谱属性的光的传输;并且接收第二图像可包括:在第二组传感器元件处接收该第二图像,该第二组传感器元件可操作地用于传输具有第二光谱属性的光并阻挡具有第一光谱属性的光的传输。
该第一光谱属性可包括第一组波长,该第二光谱属性可包括第二组波长,该第一组波长和第二组波长通过波长的差异而在波长上分开。
每个传感器元件可包括多个滤光元件,每个滤光元件可操作地用于传输在所述组的波长范围内的波长范围的光。
该多个滤光元件可被设置为,使得通过传感器元件的光在到达位于下方的滤色器阵列之前,接连地通过每个滤光元件。
多个滤光元件可互相邻近设置并覆盖相应的传感器元件,并且该滤光元件被配置为在将光引导至位于下方的相应的传感器元件以生成颜色信息时同时生成第一图像和第二图像。
该方法可包括生成表征第一图像和第二图像的图像信号,并可进一步包括处理图像信号以生成表征由第一组传感器元件接收到的第一图像的第一图像信号,以及生成表征由第二组传感器元件接收到的第二图像的第二图像信号;并且该处理可包括处理第一图像信号和第二图像信号,以使得该第一图像和第二图像具有相同的颜色外观。
第一组波长和第二组波长中的每组均可包括红色、绿色和蓝色的波长,并且该波长差异可在大约1nm到大约100nm之间。
接收该第一图像可包括:在第一组传感器元件处接收该第一图像,该第一组传感器元件具有覆盖其上的可操作地用于传输具有第一光谱属性的光的滤光元件;以及在第二组传感器元件处接收该第二图像,该第二组传感器元件具有覆盖其上的可操作地用于传输具有第二光谱属性的光的滤光元件。
每个滤光元件均可包括窄带光学带通滤波器,该窄带光学带通滤波器具有分别与第一光谱属性和第二光谱属性相对应的光谱响应。
该鉴别器的第一部分可包括可操作地用于传输光的第一组波长的滤光元件,该鉴别器的第二部分可包括可操作地用于传输光的第二组波长的滤光元件。
该方法可包括生成表征第一图像和第二图像的图像信号。
生成该图像信号可包括:使得图像传感器生成表征由第一组传感器元件接收到的第一图像的第一图像信号,以及使得该图像传感器生成表征由第二组传感器元件接收到的第二图像的第二图像信号。
生成该图像信号可包括:使得图像传感器生成表征在第一组传感器元件和第二组传感器元件中的每组处接收到的光的图像信号,并且可进一步包括:处理该图像信号以生成表征由第一组传感器元件接收到的第一图像的第一图像信号,以及生成表征由第二组传感器元件接收到的第二图像的第二图像信号。
将光引导至透镜的孔径平面可包括:将在透镜的视场内捕捉到的光引导至以下其中之一的透镜的孔径平面:该透镜的物理孔径的位置;或物理孔径的共轭面的位置。
在鉴别器处接收该捕捉到的光可包括:在鉴别器处接收该捕捉到的光,该鉴别器距离该孔径平面足够小的位移定位,使得由鉴别器的第一部分和第二部分的渐晕而引起的第一图像和第二图像中的强度变化低于人眼所能感知的阈值。
该位移可足够小,以使得与第一图像和第二图像相关的图像平面处的强度变化降低至30%以下。
在该鉴别器处接收捕捉到的光可包括:在鉴别器涂层处接收捕捉到的光,该鉴别器涂层被涂覆到设置在所述孔径平面附近的透镜元件的表面上。
该透镜可包括多个大致圆形的透镜元件,该透镜元件限定了大致圆形横截面的单成像路径,并且接收该捕捉到的光可包括:通过该鉴别器的左半部分传输具有该第一光学状态的光,以及通过该鉴别器的右半部分传输具有该第二光学状态的光,该鉴别器的左半部分和右半部分分别限定该单成像路径的左半圆部分和右半圆部分。
该透镜可包括多个大致圆形的透镜元件,该透镜元件限定了大致圆形横截面的单成像路径,并且接收该捕捉到的光可包括:通过鉴别器的左扇形部分传输具有第一光学状态的光,以及通过鉴别器的右扇形部分传输具有第二光学状态的光,该左扇形部分和右扇形部分围绕透镜的垂直中心线设置。
该方法可包括改变该成像路径的第一部分和第二部分的范围,以在形成该第一图像和第二图像时使得第一视角视点和第二视角视点的位置变化,这种视角视点的变化导致三维空间属性的表征的相应变化。
该透镜可包括:第一孔径,其被设置为阻挡入射到该鉴别器的第一部分上的光或者阻挡通过该鉴别器的第一部分传输的光;以及第二孔径,其被设置为阻挡入射到该鉴别器的第二部分上的光或者阻挡通过该鉴别器的第二部分传输的光。
该方法可包括组合来自第一图像和第二图像的图像信息,以生成相应的视角视点位置之间间距减小的第三图像和第四图像。
该组合可包括:按比例调节第一图像和第二图像的强度。
根据本发明的另一方案,提供了一种使用具有单成像路径和相关视场的透镜生成三维图像信息的装置。该装置包括具有单成像路径的透镜,该单成像路径可操作地用于将在该透镜的视场内捕捉到的光引导至该透镜的孔径平面。该装置还包括位于所述孔径平面附近的空间鉴别器,该鉴别器包括被设置为通过单成像路径的第一部分传输具有第一光学状态的光的第一部分,以及被设置为通过单成像路径的第二部分传输具有第二光学状态的光的第二部分。该单成像路径的第一部分和第二部分分别提供该透镜的视场内的第一视角视点和第二视角视点,以分别在该透镜的图像平面处形成第一图像和第二图像,该第一图像从第一视角视点表征视场内的物体,而该第二图像从第二视角视点表征该物体。该第一图像和第二图像一起可操作地用于表征所述物体的三维空间属性。该装置进一步包括设置在该透镜的图像平面处的图像传感器,该图像传感器包括响应于具有所述第一光学状态的光的第一组传感器元件,以及响应于具有所述第二光学状态的光的第二组传感器元件。
该图像传感器可包括第一组传感器元件和第二组传感器元件,第一组传感器元件和第二组传感器元件中的每组包括可操作地用于传输具有相应光学状态的光并阻挡具有不同于该相应光学状态的光的选择元件,以及位于该选择元件之下的相应的传感器元件。
每个相应的传感器元件可包括多个传感器元件。
该第一组传感器元件和第二组传感器元件可分别以重复镶嵌模式排列,该重复镶嵌模式可操作地用于减小由图像传感器的传感器元件的重复频率导致的空间干涉。
该鉴别器的第一部分可包括第一偏振器部分,第一偏振器部分被设置为通过该单成像路径的第一部分传输具有第一偏振状态的光,并且该鉴别器的第二部分可包括第二偏振器部分,第二偏振器部分被设置为通过该单成像路径的第二部分传输具有第二偏振状态的光。
该图像传感器可包括:第一组传感器元件,其被设置为将具有第一偏振状态的光传输到相应的多个传感器元件,并阻挡具有第二偏振状态的光的传输;以及第二组传感器元件,其被配置为将具有第二偏振状态的光传输到相应的多个传感器元件,并阻挡具有第一偏振状态的光的传输。
偏振器的第一部分被可操作地配置为:通过该偏振器的第一部分传输具有左旋椭圆偏振状态的光,以及通过该偏振器的第二部分传输具有右旋椭圆偏振状态的光,并且该第一组图像传感器元件可包括第一组偏振器元件,第一组偏振器元件可操作地用于传输具有左旋椭圆偏振状态的光并阻挡具有右旋椭圆偏振状态的光;并且该第二组图像传感器元件可包括第二组偏振器元件,第二组偏振器元件可操作地用于传输具有右旋椭圆偏振状态的光并阻挡具有左旋椭圆偏振状态的光。
该第一组偏振器元件中的每一个均可包括可操作地将右旋椭圆偏振状态变为第一线偏振状态的四分之一波片,和可操作地用于传输具有第一线偏振状态的光的线偏振器元件;并且该第二组偏振器元件中的每一个均可包括可操作地将左旋椭圆偏振状态变为第二线偏振状态的四分之一波片,和可操作地用于传输具有第二线偏振状态的光的线偏振器元件。
该左旋椭圆偏振状态可包括左旋圆偏振状态,并且该右旋椭圆偏振状态可包括右旋圆偏振状态。
该偏振器的第一部分可具有第一线偏振方向,并且该偏振器的第二部分可具有第二线偏振方向,该第一线偏振方向垂直于该第二线偏振方向而定向,该第一组偏振器元件中的每一个均可包括可操作地用于传输具有第一线偏振状态的光并阻挡具有右旋椭圆偏振状态的光的偏振器元件,并且该第二组偏振器元件中的每一个均可包括可操作地用于传输具有第二线偏振状态的光并阻挡具有左旋椭圆偏振状态的光的偏振器元件。
该第一线偏振方向可被定向为45度。
该第一组偏振器元件可包括可操作地用于传输具有第一偏振状态的光的多个线偏振器元件,并且该第二组偏振器元件可包括可操作地用于传输具有第二偏振状态的光的多个线偏振器元件。
该鉴别器被可操作地配置为选择性地旋转大约90度以在横向和纵向的其中之一生成图像。
该鉴别器的第一部分可包括第一滤光器部分,第一滤光器部分被设置为通过单成像路径的第一部分传输具有第一光谱属性的光,该鉴别器的第二部分可包括第二滤光器部分,第二滤光器部分被设置为通过单成像路径的第二部分传输具有第二光谱属性的光,并且该第一组传感器元件被可操作地配置为,传输具有第一光谱属性的光并阻挡具有第二光谱属性的光的传输;并且该第二组传感器元件被可操作地配置为,传输具有第二光谱属性的光并阻挡具有第一光谱属性的光的传输。
该第一光谱属性可包括第一组波长,该第二光谱属性可包括第二组波长,该第一组波长和第二组波长通过波长的差异而在波长上分开。
每个传感器元件可包括多个滤光元件,每个滤光元件可操作地用于传输在该组的波长范围内的波长范围的光。
该多个滤光元件可被设置为,使得通过该传感器元件的光在到达位于下方的滤色器阵列之前,接连地通过每个滤光元件。
该多个滤光元件可互相邻近设置并覆盖相应的传感器元件,并且该滤光元件被配置在将光引导至位于下方的相应的传感器元件以生成颜色信息时同时生成该第一图像和第二图像。
该图像传感器被可操作地配置为生成表征第一图像和第二图像的图像信号,并可进一步包括控制器,控制器被可操作地配置为处理该图像信号以生成表征由第一组传感器元件接收到的第一图像的第一图像信号,以及生成表征由第二组传感器元件接收到的第二图像的第二图像信号,并且该控制器被可操作地配置为对第一图像信号和第二图像信号进行图像处理,以使得第一图像和第二图像具有相同的颜色外观。
第一组波长和第二组波长中的每组均可包括红色、绿色和蓝色的波长,并且该波长的差异在大约1nm到大约100nm之间。
该图像传感器可包括第一组传感器元件和第二组传感器元件,该第一组传感器元件具有覆盖其上的可操作地用于传输具有所述第一光谱属性的光的滤光元件,并且所述第二组传感器元件具有覆盖其上的可操作地用于传输具有所述第二光谱属性的光的滤光元件。
每个滤光元件可包括窄带光学带通滤波器,该窄带光学带通滤波器具有分别与第一谱属性和第二光谱属性相对应的光谱响应。
该鉴别器的第一部分可包括可操作地用于传输光的该第一组波长的滤光元件,该鉴别器的第二部分可包括可操作地用于传输光的该第二组波长的滤光元件。
该图像传感器被可操作地配置为生成表征第一图像和第二图像的图像信号。
该图像传感器被可操作地配置为,生成表征由第一组传感器元件接收到的第一图像的第一图像信号,以及生成表征由第二组传感器元件接收到的第二图像的第二图像信号。
该图像传感器被可操作地配置为,生成表征在第一组传感器元件和第二组传感器元件中的每组处接收到的光的图像信号;并处理该图像信号以生成表征由第一组传感器元件接收到的第一图像的第一图像信号,以及生成表征由第二组传感器元件接收到的第二图像的第二图像信号。
该透镜的孔径平面可包括位于以下其中之一的透镜的孔径平面:该透镜的物理孔径的位置,或者该物理孔径的共轭的位置。
该鉴别器可距离孔径平面足够小的位移定位,使得由该鉴别器的第一部分和第二部分的渐晕而引起的第一图像和第二图像中的强度变化低于人眼所能感知的阈值。
该位移可足够小,以使得与第一图像和第二图像相关的图像平面处的强度变化降低至30%以下。
该鉴别器可包括涂覆到设置在该孔径平面附近的透镜元件的表面上的鉴别器涂层。
该透镜可包括多个大致圆形的透镜元件,该透镜元件限定了大致圆形横截面的单成像路径,并且该鉴别器可包括可操作地用于传输具有第一光学状态的光的左半部分以及可操作地用于传输具有第二光学状态的光的右半部分,该鉴别器的左半部分和右半部分分别限定该单成像路径的左半圆部分和右半圆部分。
该透镜可包括多个大致圆形的透镜元件,该透镜元件限定了大致圆形横截面的单成像路径,并且该鉴别器可包括可操作地用于传输具有第一光学状态的光的左扇形部分以及可操作地用于传输具有第二光学状态的光的右扇形部分,该左扇形部分和右扇形部分围绕透镜的垂直中心线设置。
该鉴别器可为可操作地用于改变该成像路径的第一部分和第二部分的范围,以在形成该第一图像和第二图像时使得该第一视角视点和第二视角视点的位置变化,这种视角视点的变化导致三维空间属性的表征的相应变化。
该装置可包括:第一孔径,其被设置为阻挡入射到所述鉴别器的第一部分上的光或者阻挡通过所述鉴别器的第一部分传输的光;以及第二孔径,其被设置为阻挡入射到所述鉴别器的第二部分上的光或者阻挡通过所述鉴别器的第二部分传输的光。
该装置可包括控制器,该控制器被可操作地配置为组合来自第一图像和第二图像的图像信息,以生成相应的视角视点位置之间间距减小的第三图像和第四图像。
该控制器被可操作地配置,以通过按比例调节该第一图像和第二图像的强度来组合该图像信息。
通过下述结合附图对本发明具体实施例的描述,本发明的其他方案和特征对本领域普通技术人员来说将变得显而易见。
附图说明
附图图示了本发明的实施例,在附图中,
图1为根据本发明第一实施例的生成三维图像信息的装置的立体图;
图2为图1所示的装置中使用的图像传感器的局部剖开立体图;
图3为图2所示的图像传感器的一部分的分解图;
图4为描述图1所示的装置的运行状态的俯视图;
图5为表示图4所示的装置所生成的图像的示意图;
图6为描述图1至图4中所示的装置的一个可选实施例中所使用的干涉滤光器的透射光谱图;
图7为根据本发明的可选实施例中的图2所示的图像传感器的一部分的分解图;以及
图8至图10为示出图1所示的装置中所使用的偏振器的可选实施例的系列图。
具体实施方式
参考图1,示出了根据本发明第一实施例的生成三维图像信息的装置100。该装置100包括透镜102,该透镜102具有一般沿着中心轴103定向的单成像路径。透镜102可操作地将该透镜视场内捕捉到的光引导至该透镜的孔径平面104。
装置100还包括空间鉴别器108,空间鉴别器108位于孔径平面104附近。孔径平面104可为透镜102的物理孔径平面或者可以是物理孔径平面的共轭面。鉴别器108包括:第一部分110,其被设置为通过单成像路径的第一部分传输具有第一光学状态的光,以及第二部分112,其被设置为通过单成像路径的第二部分传输具有第二光学状态的光。单成像路径的第一部分110和第二部分112分别提供该透镜102视场内的第一视角视点和第二视角视点,以分别在该透镜的图像平面114上形成第一图像和第二图像。该第一图像从第一视角视点表征该视场内的物体(例如物体116),该第二图像从第二视角视点表征该物体。该第一图像和第二图像一起可操作来表征物体116的三维空间属性。
装置100还包括:图像传感器106,其设置在透镜102的图像平面114处。图像传感器106包括:第一组传感器元件138,其响应于具有第一光学状态的光,以及第二组传感器元件139,其响应于具有第二光学状态的光。图像传感器106可实施为电荷耦合器件(CCD)传感器或者主动像素传感器(比如CMOS主动像素传感器)。
图像传感器106包括输出端128,用于生成图像信号。装置100还包括控制器130,该控制器130具有输入端132,以从图像传感器的输出端128接收图像信号。在一个实施例中,输出端128可包括多个平行的信号线以能够从图像传感器106并行读出图像信号。该控制器可包括:处理器电路,其被可操作地配置用于执行图像信号的处理。
在图1所示的实施例中,透镜102包括:多个透镜元件118、120和122,其组成变焦透镜组124并限定孔径平面104的位置。变焦透镜组124的焦距可通过移动透镜元件118和120来改变。透镜102还包括聚焦透镜126以将图像聚焦到图像平面114。在其他实施例中,透镜102可由更多或更少数量的透镜元件组成,并且所述透镜元件可为成像中所使用的定焦、长焦或其他类型的透镜。
参考图2,示出了根据本发明第一实施例的图像传感器200。该图像传感器200包括光敏层202,光敏层202包括多个传感器元件204,传感器元件204可操作地用于生成表征在一段时间内入射到传感器元件上的光子通量的电荷或电压。图像传感器200进一步包括:滤色器阵列206,其覆盖光敏层202并具有多个滤色元件208。每个滤色元件208覆盖一个传感器元件204,以提供滤色元件和传感器元件之间的一一对应。与通常的图像传感器类似,层202和206一起可包括CCD图像传感器或CMOS主动像素传感器。
图像传感器200还包括选择层210和212。在一个实施例中,层210和212包括选择元件214,选择元件214可操作地用于选择性地传输具有第一光学状态和第二光学状态中的其中一种光学状态的光,并阻挡具有另一种光学状态的光的传输。
图3示出了根据本发明一个实施例的图像传感器200的一部分216的分解图。参考图3,在该实施例中每个选择元件214包括在层212上的四分之一波片元件218以及在层210上的线偏振器元件220。在图3中,层212上的一部分四分之一波片218标记为“R”,表明该波片被定向以将右旋圆偏振光变为具有第一偏振方向(如-45°)的线偏振光。层212上的其他四分之一波片218标记为“L”,表明该波片被定向以将左旋圆偏振光变为线偏振光(如+45°)。类似地,层210上的一部分线偏振器220标记为“-”,表明该偏振器被定向以传输具有第一偏振方向(如-45°)的线偏振光,层210上的其他线偏振器标记为“+”,表明该线偏振器被定向以传输具有第二偏振方向(如+45°)的线偏振光。波片218和偏振器220具有基本相同的大小,并且每个标记为“R”的波片覆盖标记为“-”的偏振器,而每个标记为“L”的波片覆盖标记为“+”的偏振器。波片218和偏振器220可通过例如,传统的平版沉积或光刻来制作。
滤色器阵列层206包括多个滤色元件208,在该实施例中所述多个滤色元件208以拜尔(Bayer)滤镜模式排列,其具有两个绿色或亮度敏感元件G、一个红色色度敏感元件R以及一个蓝色色度敏感元件B。G、R和B滤色元件208中的每一个为选择元件214(由四分之一波片元件218和线偏振器元件220组成)的四分之一大小,因而由四个滤色元件(GRBG)组成的拜尔单元222具有与单个选择元件相同的大小,并位于相应的选择元件之下。
最后,在光敏层202上的多个传感器元件204中的每一个都具有与覆盖其上的滤色元件208相一致的大小和排列。因而传感器元件204的光谱响应被覆盖其上的滤色元件208所调制,从而允许图像中的颜色信息根据图像信号而恢复。
空间鉴别器
一般来说,从透镜102的视场接收到的光将具有随机的线偏振。在一个实施例中,空间鉴别器108的第一部分110可以包括附有四分之一波片的线偏振器。该线偏振器可被定向,使得入射到该线偏振器上并具有第一偏振方向(如-45°)的线偏振光成分通过该线偏振器传输。该四分之一波片被定向,使得具有-45°偏振方向的光变为左旋圆偏振光。因而在该实施例中鉴别器的第一部分110传输左旋圆偏振光。
类似地,空间鉴别器108的第二部分112也可包括线偏振器,该线偏振器被定向,使得入射到该线偏振器上并具有第二偏振方向(如+45°)的线偏振光成分通过该线偏振器传输。该四分之一波片被定向,使得具有+45°偏振方向的光变为右旋圆偏振光。因而在该实施例中鉴别器的第二部分112传输右旋圆偏振光。
运行
参考图4和图5对在图2和图3中所示的图像传感器200的运行作进一步的描述,图4和图5示出了装置100的俯视图。
参考图4,自透镜102的视场内的第一点140散发出的光线142可以包括随机偏振光,透镜102捕捉该光并将其引导至孔径平面104,在孔径平面104处光线通过鉴别器108的第一部分110。通过鉴别器108的第一部分110传输的光线144具有左旋圆偏振,并被聚焦到图像平面114上的点146上。返回参考图3,入射到在层212上的标记为“L”的四分之一波片218上的具有左旋圆偏振的光线,其偏振状态从左旋圆偏振光变为+45°的线偏振光。标记为“+”的线偏振器元件220通过相应的滤色元件208和传感器元件204传输+45°的偏振光,以促进该第一图像的记录。入射到层212上的标记为“L”的四分之一波片218上的右旋圆偏振的光线,其偏振状态从右旋圆偏振光变为-45°的线偏振光,并被标记为“+”的线偏振器元件所阻挡。
返回参考图4,透镜102捕捉视场内的第二点148所散发的光线150,并将其引导至孔径平面104,在孔径平面104处该光线通过鉴别器108的第二部分112。通过鉴别器108的第二部分112传输的光线152具有右旋圆偏振,并被聚焦到图像平面114上的点154上。返回参考图3,入射到层212上的标记为“R”的四分之一波片218上的具有右旋圆偏振的光线,其偏振状态从右旋圆偏振光变为-45°的线偏振光。标记为“-”的线偏振器元件220通过相应的滤色元件208和传感器元件204传输-45°的偏振光,以促进该第二图像的记录。入射到层212上的标记为“R”的四分之一波片218上的具有左旋圆偏振的光线,其偏振状态从右旋圆偏振光变为+45°的线偏振光,并被标记为“-”的线偏振器元件所阻挡。
有利的是,第一图像和第二图像在图像传感器元件204处可同时得到,并可通过读出在一时间段内积聚在图像传感器元件204上的信号值而分离。对于视频图像,所述时间段可根据期望的帧速率(例如,对于NTSC视频信号为30帧每秒)来设置。在一个实施例中,所有的传感器元件作为像素流在一单独的操作中从图像传感器200中被读出,控制器130(图1所示)根据图像传感器200的选择层210和212上的选择元件214的特定排列,将像素分为第一图像像素和第二图像像素。在其他实施例中,与第一图像相关的传感器元件可在第一时间段内被读出,而与第二图像相关的传感器元件可在第二时间段被读出。
参考图5,其示出了图1所示的物体116的示例性的第一图像160和第二图像162。由于鉴别器108的第一部分110所限定的单成像路径的第一部分偏离中心轴103,所以第一图像160具有来自物体116一侧的视角视点,并向左偏离图像中央164。第二图像162具有来自物体116的另一侧的视角视点,并向右偏离图像中央164。当第一图像160和第二图像162被选择性地分别引导至用户的左眼和右眼时,用户将能够以与观察实际物体116时辨识其3D信息的很大程度上相同的方式,辨别该图像中的3D信息。
第一图像160和第二图像162可作为单独的视频域交替地在视频显示器上显示。各种类型的主动型或被动型眼镜可用于将这些被显示的第一图像160和第二图像162引导至用户的眼睛。被动型眼镜一般依赖于对该被显示的图像额外的波长或偏振处理,使得该眼镜中的被动滤光元件分离图像。主动型眼镜一般包括用于接收来自显示器的同步信号的接收装置,以交替地将第一图像160和第二图像162分别传输至左眼和右眼。可选的是,第一图像160和第二图像162可被处理,以匹配各自的图像中的可识别特征并确定该识别特征之间的侧向偏移。该被确定的侧向偏移与装置100的成像参数信息一起,可用于计算一个物体上的不同点之间的、或不同深度的物体之间的深度差异。
有利的是,鉴别器108可为被动元件,例如被动偏振器元件,该被动元件允许使用相对薄的材料,例如吸收偏振薄膜或薄膜偏振器。这些材料允许鉴别器108即使是在透镜元件之间具有受限制间距的透镜102中,仍可置于十分接近孔径平面104之处或孔径平面104处。有利的是,使得在至少透镜102的孔径平面附近处发生选择性地传输/阻挡光以生成第一图像和第二图像,从而减少或消除由于选择性地通过单成像路径的第一部分和第二部分传输光而产生的图像渐晕。在某些实施例中,鉴别器108可位于透镜的光圈(未图示)附近,所述光圈限定***孔径并控制由透镜102所捕捉到的光的量。可选的是,鉴别器108的第一部分110和第二部分112可作为涂层被直接涂覆到限定该透镜的孔径平面的透镜元件或位于该透镜的孔径平面附近的透镜元件上。
为了使用特定的透镜获得期望的成像质量或性能,可使用光学灵敏分析来获得代表鉴别器108距离孔径平面104的最大位移的距离容限。这种分析可考虑到由鉴别器108的第一部分110和第二部分112所产生的渐晕而引起的第一图像和第二图像中的几何偏移,并且所述距离容限将提供距离孔径平面的最大距离以满足用于可接受的3D成像质量的标准。成像质量受使鉴别器108远离孔径平面移动的影响的程度取决于组成透镜102的透镜元件的配置以及所期望的***成像性能。在非常高性能的成像***中,鉴别器108不得不位于非常接近于孔径平面104之处以使渐晕最小化,从而使得第一图像和第二图像在图像中具有基本均匀的图像强度。在低性能的成像***中,可以允许在图像边缘处的相当程度的图像强度下降,因为人眼对于这种下降不是非常敏感。在不重要的成像应用中,可以接受在图像的外边缘处的30%至90%的图像下降,且可以通过计算机图像处理或其他光学处理来补偿所述下降。
返回参考图3,在所示实施例中,以镶嵌模式重复“R”和“L”四分之一波片218。在所示实施例中,第一行具有重复模式“RLLRLLR”,第二行具有重复模式“LRRLRRL”。可使用各种重复镶嵌模式。这种重复镶嵌模式可操作地用于减少空间干涉影响,例如在使用规则的重复模式时可能出现的莫尔条纹。
可选的是,在另一个实施例中,鉴别器108可被配置为线偏振器,其具有被配置为传输-45°偏振光的第一部分110和被配置为传输+45°偏振光的第二部分110。在该实施例中,选择层212不是必须的,层210上的元件220将执行选择元件的功能。在这一实施例中,当装置100如图1所示定向时,其被配置为在通常称之为“横向”(也就是图像的最长尺寸水平定向)的方向生成图像。由此得到的第一图像和第二图像被分离为右图像和左图像,有利的是,使得该第一图像和第二图像与通常被用户水平方向分离的右眼和左眼所观察到的图像相对应。尽管如此,尤其在静止图像拍摄中,摄像机的用户通常在横向和纵向(也就是图像的最长尺寸垂直定向)捕捉图像。在装置100的一可选实施例中,该装置可被配置为允许以横向模式或纵向模式配置。特别地,鉴别器108可沿着箭头136所示的方向旋转大约90°,由此在图1所示的装置的方向中,该第一图像和第二图像为垂直分离的。在这种配置下,当装置100被定向为以纵向模式捕捉图像时,第一图像和第二图像将保持水平分离,由此提供具有各自的右视角视点和左视角视点的第一图像和第二图像。鉴别器108大约90°的旋转可由具有致动器的机械旋转器来执行,该致动器可由用户手动操作。可选的是,该机械旋转器可由电动机响应于用户纵向模式的选择或自动响应于由定位传感器所生成的定位信号来致动,定位传感器例如为加速计或重力传感器(未图示)。
在图3和图4所示的实施例中,第一偏振方向和第二偏振方向分别为相对于垂直方向呈-45°和+45°,但在其他实施例中该偏振方向可以其他的方式定向(例如垂直和水平方向)。有利的是,将第一偏振方向和第二偏振方向定向为±45°,可防止由于从透镜102的视场接收到的光被部分偏振而导致第一图像和第二图像之间出现差异,这种差异会发生在光从例如路面或水体的表面反射时。
在另一实施例中,鉴别器108的第一部分110可以包括可操作用于传输具有左旋椭圆偏振状态的光的偏振器,鉴别器108的第二部分112可以包括可操作用于传输具有右旋椭圆偏振状态的光的偏振器。
光谱鉴别器的实施例
在其他实施例中,鉴别器108的第一部分110和第二部分112可由滤光器或影响光的另一性质或状态的光学元件来代替,以生成第一图像和第二图像。例如,鉴别器108的第一部分110可包括第一滤光器部分,第一滤光器部分被设置为用于通过单成像路径的第一部分传输具有第一光谱属性的光,鉴别器的第二部分可包括第二滤光器部分,第二滤光器部分被设置为用于通过单成像路径的第二部分传输具有第二光谱属性的光。在该实施例中,图像传感器200的第一组选择元件将被相应地配置,以通过传输具有第一光谱属性的光线阻挡具有第二光谱属性的光的传输来形成第一图像。类似地,图像传感器200的第二组选择元件被相应地配置,以通过传输具有第二光谱属性的光和阻挡具有第一光谱属性的光的传输来形成第二图像。
参考图6,该部分110和112可被实施为干涉滤光器,该干涉滤光器传输特定窄波段波长,例如蓝光、绿光和红光。图6示出了这种干涉滤光器的传输光谱图700和702。鉴别器108的第一部分110可被配置为如700所示的传输第一组波长λB1、λG1、λR1,第二部分112可被配置为如702所示的透射第二组波长λB2、λG2、λR2
参考图7,依据本实施例的图像传感器200的部分216可被配置,使得选择层212和210被选择层750代替。选择层750包括在图7中标记为λ1并响应于第一组波长的选择元件752。选择层750还包括标记为λ2并响应第二组波长的选择元件752。该选择元件可包括吸收滤光器、干涉滤光器或它们的组合,其中,该滤光器仅响应于波段非常窄的波长。在其他实施例中,滤光器可被制作成在传输波段的边缘提供明显的波长跃迁(transition),由此在第一组波长和第二组波长中的每组中容纳三个以上的波长范围。
当第二组波长702通过单成像路径被接收时,在部分112传输第二组波长的同时部分110阻挡这些波长,并在图像平面114处成像以形成第一图像。当第一组波长700通过单成像路径被接收时,在部分110传输第一组波长的同时部分112阻挡这些波长,并在图像平面114处成像以形成第二图像。选择元件752具有与鉴别器108的相应的第一部分和第二部分基本相同的光谱响应,因而选择层750将各个波长传输至位于下方的多个滤色元件208和多个传感器元件204,从而促进第一图像和第二图像的记录。
然后可以处理第一图像和第二图像,以重构图像的颜色,由此人眼将感知到如在***中不存在滤色器时所感知到的色域。这种处理通常与使用拜尔滤色器阵列的常规的摄像机所使用的颜色重构处理相类似。波长的差异可在大约1nm至100nm之间。这种图像处理可包括改变第一组波长和第二组波长中的特定波长的相对强度,由此用户将不会感知到两个图像之间的光谱差异,即使该图像具有略微偏移的光谱。
在图7所示的实施例中,每个λ1选择元件752包括可操作用于过滤图6中所示的波长范围700中的每一个波长范围的滤光器,每个λ2选择元件752包括可操作用于过滤图6中所示的波长范围702中的每一个波长范围的滤光器。这些滤光器可包括三个单独的滤光器层,每层均被调整以过滤750和752所示的波长范围的其中一个。
在另一个实施例中,可以省略滤色器阵列206,每个选择元件752可被配置用于执行滤色器阵列的功能。例如,每个λ1选择元件752可包括四个邻近设置的滤光元件,例如,一个λB1元件、一个λR1元件以及两个λG1元件(在拜尔型滤色器阵列的情况下)。类似地,每个λ2选择元件752可包括四个邻近设置的滤光元件,例如,一个λB2元件、一个λR元件以及两个λG2元件。有利的是,该实施例可用于将颜色分离功能和图像分离功能合并在一个单独的适当配置的层中。
可变立体视觉
在图1和图3所示的实施例中,单成像路径为圆形形状,鉴别器108的第一部分110延伸以覆盖该成像路径的第一半圆部分,而第二部分112延伸以覆盖该成像路径的第二半圆部分。在一个实施例中,第一部分110和第二部分112被配置为线偏振器(例如-45°和+45°),每个部分可延伸以覆盖如图8、图9和图10所示的单成像路径的小于半圆区域的扇形部分。参考图8,可设置鉴别器108的尺寸,使得第一部分110和第二部分112向外延伸并超出成像路径406。单成像路径(虚线406所示)中被第一部分110所覆盖的区域的形心表示为550,而单成像路径中被第二部分112所覆盖的区域的形心表示为552。形心550和552可被视为限定通过透镜形成的第一图像和第二图像的各自的视角的中心,该透镜例如为图1所示的透镜102。两个形心550和552之间的距离D表征图像之间的立体间距,其约等于装置所生成的“3D数量”。
参考图9,通过沿着箭头554的方向朝内移动鉴别器108的第一部分110,以及沿着箭头556的方向朝内移动第二部分112,在两个偏振器部分之间形成重叠区域558。通过该重叠区域558的光将通过鉴别器108具有-45°偏振方向的部分和具有+45°偏振方向的部分,因而无论该光的偏振方向如何其都将被阻挡。在该情况下,形心550和552均向外偏移,由此视场视点也向外偏移,提供了第一图像和第二图像之间更大的立体间距。
参考图10,鉴别器108的第一部分110沿着箭头560的方向、以及第二部分112沿着箭头562的方向进一步朝内移动,使得两个偏振器部分之间的重叠区域564的范围增大。通过该重叠区域564的光将再次通过鉴别器108具有-45°和+45°偏振方向的部分而被阻挡。在该情况下,形心550和552再次向外偏移并进一步改变视角视点。
在一个实施例中,鉴别器108的第一部分110和第二部分112的移动可由致动器(例如微型步进电动机)来执行,且形心之间的分离程度可被改变,同时形成第一图像和第二图像以提供不同的立体视觉,这些内容已在共有的、于2009年7月10日提交的、名称为“METHODANDAPPARATUSFORGENERATINGTHREEDIMENSIONALIMAGEINFORMATIONUSINGASINGLEIMAGINGPATH(使用单成像路径生成三维图像信息的方法和装置)”、申请号为PCT/CA2009/000957的PCT专利申请中被公开,并且该申请的全部内容被引用到本发明中作为参考。
在另一实施例中,由鉴别器108的第一部分110和第二部分112分别形成的第一图像和第二图像,可用于通过组合该第一图像和第二图像以生成第三图像和第四图像。例如,利用如图8、图9或图10的任一个示出的所设置的鉴别器108的第一部分110和第二部分112,第一图像和第二图像的一部分可通过某种原则组合以生成第三图像。类似地,第一图像和第二图像的一部分可通过另一种原则组合以生成第四图像。在一个实施例中,组合的原则可为依照第一比例调节第一图像的强度,依照第二比例调节第二图像的强度,然后归一化并组合按比例调节后的图像以生成第三图像。类似地,第四图像可通过依照第二比例调节第一图像的强度,依照第一比例调节第二图像的强度,然后归一化并组合按比例调节后的图像而形成第四图像。
由于包含一部分或者一定比例的第一图像和第二图像,第三图像和第四图像之间的立体间距被有效地减小。该处理可由控制器130(图1所示)来执行,并可用于进一步减小图8至图10的任一个中提供的立体间距。这种变化可用于提供从微小或无立体间距(也就是实质上为2D)到用于3D图像生成的较大的立体间距之间的转变。
在一可选实施例中,空间鉴别器108的第一部分110和第二部分112(图1所示)可分别包括覆盖各自部分的第一可调孔径和第二可调孔径(未示出)。该孔径有助于选择单成像路径的相应的第一部分和第二部分以形成第一图像和第二图像。有利的是,引入适当配置的孔径允许仅使用鉴别器108的第一部分110和第二部分112的一部分区域来形成第一图像和第二图像。例如,可预期的是,通过改变单成像路径的第一部分和第二部分各自的数值孔径条件来增大第一图像和第二图像中的焦深。这种数值孔径的改变可通过减小第一孔径和第二孔径的大小以阻挡成像路径的各个部分中的一部分来获得。在一个实施例中,该孔径可作为机械致动孔径,例如机械式光圈。在其他实施例中,该孔径可被实施为光电孔径,例如通过使用液晶材料。该电子孔径可被实施为鉴别器108的一部分。
有利的是,在此公开的实施例使得使用单成像路径生成3D图像信息更加便利。此外,在图像传感器处发生第一图像和第二图像的分离,并且在图像传感器处同时得到第一图像和第二图像,由此使得以比那些依据时间分离图像的***更快的帧速率来促进视频图像的捕捉。
本发明的特定实施例已经被描述和阐明,所述实施例应被视为对本发明的示意性描述,而非对根据随附的权利要求书所解释的本发明的限制。

Claims (14)

1.一种使用具有单成像路径和相关视场的透镜生成三维图像信息的方法,所述方法包括:
将在透镜的视场内捕捉到的光引导至所述透镜的孔径平面;
在位于所述孔径平面附近的空间鉴别器处接收所述捕捉到的光,所述鉴别器包括被设置为通过单成像路径的第一部分传输具有第一光学状态的光的第一部分,以及被设置为通过单成像路径的第二部分传输具有第二光学状态的光的第二部分,所述单成像路径的所述第一部分和第二部分分别提供透镜的视场内的第一视角视点和第二视角视点,以分别在设置于所述透镜的图像平面处的图像传感器处形成第一图像和第二图像,所述第一图像从所述第一视角视点表征视场内的物体,而所述第二图像从所述第二视角视点表征所述物体,所述第一图像和第二图像一起可操作地用于表征所述物体的三维空间属性;
在所述图像传感器上的第一组选择元件处接收所述第一图像,所述第一组选择元件中的每一个覆盖所述图像传感器的至少一个传感器元件,并被配置为传输具有所述第一光学状态的光;以及
在所述图像传感器上的第二组选择元件处接收所述第二图像,所述第二组选择元件中的每一个覆盖所述图像传感器的至少一个传感器元件,并被配置为传输具有所述第二光学状态的光,
其中所述鉴别器的所述第一部分包括第一偏振器部分,第一偏振器部分被设置为通过所述单成像路径的第一部分传输具有第一偏振状态的光,并且其中所述鉴别器的所述第二部分包括第二偏振器部分,第二偏振器部分被设置为通过所述单成像路径的第二部分传输具有第二偏振状态的光,并且其中:
接收所述第一图像包括在第一组选择元件处接收所述第一图像,所述第一组选择元件被设置为将从所述第一偏振器部分接收到的光传输到相应的多个传感器元件,并阻挡从所述第二偏振器部分接收到的光;并且
接收所述第二图像包括在第二组选择元件处接收所述第二图像,所述第二组选择元件被设置为将从所述第二偏振器部分接收到的光传输到相应的多个传感器元件,并阻挡从所述第一偏振器部分接收到的光,
其中所述鉴别器可操作地用于改变所述成像路径的第一部分的形心和所述成像路径的第二部分的形心之间的距离,以在形成所述第一图像和第二图像时使得所述第一视角视点和第二视角视点的位置变化,所述视角视点位置的变化导致所述三维空间属性的表征的相应变化。
2.根据权利要求1所述的方法,其中:
接收所述捕捉到的光包括:通过所述第一偏振器部分接收具有左旋椭圆偏振状态的光,以及通过所述第二偏振器部分接收具有右旋椭圆偏振状态的光;并且
每个选择元件包括:
四分之一波片,其被配置为使得从所述鉴别器的所述第一部分接收到的光和从所述鉴别器的所述第二部分接收到的光的两者之一成为线偏振光;以及
在所述四分之一波片和所述至少一个传感器元件之间的线偏振器,所述线偏振器被设置为传输从所述鉴别器的所述第一部分接收到的光和从所述鉴别器的所述第二部分接收到的光的两者之一。
3.根据权利要求2所述的方法,其中所述左旋椭圆偏振状态包括左旋圆偏振状态,并且其中所述右旋椭圆偏振状态包括右旋圆偏振状态。
4.根据权利要求1所述的方法,其中接收所述捕捉到的光包括:通过所述第一偏振器部分接收具有第一线偏振方向的光,以及通过所述第二偏振器部分接收具有第二线偏振方向的光,所述第一线偏振方向垂直于所述第二线偏振方向而定向,并且其中:
在所述第一组选择元件处接收所述第一图像包括:在被设置为传输具有所述第一线偏振状态的光并阻挡具有所述第二线偏振状态的光的多个偏振器元件处接收所述第一图像;并且
在所述第二组选择元件处接收所述第二图像包括:在被设置为传输具有所述第二线偏振状态的光并阻挡具有所述第二线偏振状态的光的多个偏振器元件处接收所述第二图像。
5.根据权利要求1所述的方法,进一步包括组合来自第一图像和第二图像的图像信息,以生成相应的视角视点位置之间间距减小的第三图像和第四图像。
6.根据权利要求5所述的方法,其中所述组合包括按比例调节所述第一图像和第二图像的强度。
7.一种使用具有单成像路径和相关视场的透镜生成三维图像信息的装置,所述装置包括:
具有单成像路径的透镜,所述单成像路径可操作地用于将在透镜的视场内捕捉到的光引导至透镜的孔径平面;
位于所述孔径平面附近的空间鉴别器,所述鉴别器包括被设置为通过单成像路径的第一部分传输具有第一光学状态的光的第一部分,以及被设置为通过单成像路径的第二部分传输具有第二光学状态的光的第二部分,所述单成像路径的所述第一部分和第二部分分别提供透镜的视场内的第一视角视点和第二视角视点,以分别在透镜的图像平面处形成第一图像和第二图像,所述第一图像从所述第一视角视点表征视场内的物体,而所述第二图像从所述第二视角视点表征所述物体,所述第一图像和第二图像一起可操作地用于表征所述物体的三维空间属性;以及
设置在所述透镜的所述图像平面处的图像传感器,所述图像传感器包括传输具有所述第一光学状态的光的第一组选择元件,以及在所述图像传感器上传输具有所述第二光学状态的光的第二组选择元件,每个选择元件覆盖所述图像传感器的至少一个传感器元件,
其中:
所述鉴别器的所述第一部分包括第一偏振器部分,第一偏振器部分被设置为通过所述单成像路径的第一部分传输具有第一偏振状态的光;
所述鉴别器的所述第二部分包括第二偏振器部分,第二偏振器部分被设置为通过所述单成像路径的第二部分传输具有第二偏振状态的光;
所述第一组选择元件被设置为将从所述第一偏振器部分接收到的光传输到相应的多个传感器元件,并阻挡从所述第二偏振器部分接收到的光;并且
所述第二组选择元件被设置为将从所述第二偏振器部分接收到的光传输到相应的多个传感器元件,并阻挡从所述第一偏振器部分接收到的光,并且
其中所述鉴别器可操作地用于改变所述成像路径的第一部分的形心和所述成像路径的第二部分的形心之间的距离,以在形成所述第一图像和第二图像时使得所述第一视角视点和第二视角视点的位置变化,所述视角视点位置的变化导致所述三维空间属性的表征的相应变化。
8.根据权利要求7所述的装置,其中:
所述第一偏振状态是左旋椭圆偏振状态,并且所述第二偏振状态是右旋椭圆偏振状态;并且
每个选择元件包括:
四分之一波片,其被设置为使得从所述鉴别器的所述第一部分接收到的光和从所述鉴别器的所述第二部分接收到的光的两者之一成为线偏振光;以及
在所述四分之一波片和所述至少一个传感器元件之间的线偏振器,所述线偏振器被设置为传输从所述鉴别器的所述第一部分接收到的光和从所述鉴别器的所述第二部分接收到的光的两者之一。
9.根据权利要求8所述的装置,其中所述左旋椭圆偏振状态包括左旋圆偏振状态,并且其中所述右旋椭圆偏振状态包括右旋圆偏振状态。
10.根据权利要求7所述的装置,其中所述第一偏振状态为第一线偏振方向,并且所述第二偏振状态为第二线偏振方向,所述第一线偏振方向垂直于所述第二线偏振方向而定向,并且其中:
所述第一组选择元件中的每一个均包括被设置为传输具有第一线偏振状态的光并阻挡具有第二偏振状态的光的偏振器元件;并且
所述第二组选择元件中的每一个均包括被设置为传输具有第二线偏振状态的光并阻挡具有第二偏振状态的光的偏振器元件。
11.根据权利要求10所述的装置,其中所述第一线偏振方向被定向为相对于垂直方向为-45度和+45度的其中之一。
12.根据权利要求7所述的装置,其中所述鉴别器被可操作地配置,以选择性地旋转大约+90度和大约-90度的其中之一,以在横向和纵向的其中之一生成图像。
13.根据权利要求7所述的装置,其中所述鉴别器包括涂覆到位于所述孔径平面附近的透镜元件的表面上的鉴别器涂层。
14.根据权利要求7所述的装置,其中所述鉴别器包括:第一可调孔径,其被设置为限制通过所述鉴别器的所述第一部分传输的光;以及第二可调孔径,其被设置为限制通过所述鉴别器的所述第二部分传输的光。
CN201080040644.3A 2009-07-10 2010-07-12 生成三维图像信息的方法和装置 Expired - Fee Related CN102640036B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CAPCT/CA2009/000957 2009-07-10
PCT/CA2009/000957 WO2011003168A1 (en) 2009-07-10 2009-07-10 Method and apparatus for generating three dimensional image information using a single imaging path
PCT/CA2010/001093 WO2011003208A1 (en) 2009-07-10 2010-07-12 Method and apparatus for generating three-dimensional image information

Publications (2)

Publication Number Publication Date
CN102640036A CN102640036A (zh) 2012-08-15
CN102640036B true CN102640036B (zh) 2016-02-17

Family

ID=43428692

Family Applications (2)

Application Number Title Priority Date Filing Date
CN200980161394.6A Expired - Fee Related CN102725688B (zh) 2009-07-10 2009-07-10 使用单成像路径生成三维图像信息的方法和装置
CN201080040644.3A Expired - Fee Related CN102640036B (zh) 2009-07-10 2010-07-12 生成三维图像信息的方法和装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN200980161394.6A Expired - Fee Related CN102725688B (zh) 2009-07-10 2009-07-10 使用单成像路径生成三维图像信息的方法和装置

Country Status (7)

Country Link
US (2) US9298078B2 (zh)
EP (2) EP2452228A4 (zh)
JP (2) JP2012532347A (zh)
KR (2) KR101598653B1 (zh)
CN (2) CN102725688B (zh)
TW (1) TWI531209B (zh)
WO (2) WO2011003168A1 (zh)

Families Citing this family (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102725688B (zh) * 2009-07-10 2015-04-01 管理前街不同收入阶层的前街投资管理有限公司 使用单成像路径生成三维图像信息的方法和装置
KR20140030343A (ko) 2010-06-25 2014-03-12 프론트 스트릿 인베스트먼트 매니지먼트 아이엔씨. 에즈 메니저 포 프론트 스트릿 다이버시파이드 인컴 클래스 3 차원 이미지 정보를 발생시키는 방법 및 장치
TWI488470B (zh) * 2011-03-28 2015-06-11 Jvc Kenwood Corp Dimensional image processing device and stereo image processing method
JP2012203274A (ja) * 2011-03-28 2012-10-22 Sony Corp 撮像装置および電子機器
US9338435B2 (en) * 2011-06-01 2016-05-10 Gvbb Holdings S.A.R.L. Grid modulated single lens 3-D camera
EP2724192A4 (en) * 2011-06-21 2015-09-02 Front Street Diversified Income Class By Its Manager Front Street Invest Man Inc METHOD AND DEVICE FOR GENERATING INFORMATION ON THREE-DIMENSIONAL IMAGES
JP6076970B2 (ja) * 2011-06-21 2017-02-08 フロント、ストリート、インベストメント、マネジメント、インコーポレイテッド、アズ、マネジャー、フォー、フロント、ストリート、ダイバーシファイド、インカム、クラスFront Street Investment Management Inc., As Manager For Front Street Diversified Income Class 3次元画像情報を生成する方法および装置
JP5982751B2 (ja) * 2011-08-04 2016-08-31 ソニー株式会社 画像処理装置、および画像処理方法、並びにプログラム
EP2912995A1 (en) * 2011-09-08 2015-09-02 FRONT STREET INVESTMENT MANAGEMENT INC. as manager for Front Street Diversified Income Class Method and apparatus for illuminating a field of view of an optical system for generating three dimensional image information
US9456735B2 (en) * 2012-09-27 2016-10-04 Shahinian Karnig Hrayr Multi-angle rear-viewing endoscope and method of operation thereof
JP5831105B2 (ja) * 2011-09-30 2015-12-09 ソニー株式会社 撮像装置及び撮像方法
US8937646B1 (en) 2011-10-05 2015-01-20 Amazon Technologies, Inc. Stereo imaging using disparate imaging devices
JP6217918B2 (ja) 2012-01-27 2017-10-25 パナソニックIpマネジメント株式会社 アレイ状光学素子、撮像用部材、撮像素子、撮像装置および測距装置
JP6156787B2 (ja) * 2012-07-25 2017-07-05 パナソニックIpマネジメント株式会社 撮影観察装置
JP6044328B2 (ja) * 2012-12-26 2016-12-14 株式会社リコー 画像処理システム、画像処理方法およびプログラム
US9456752B2 (en) * 2013-03-14 2016-10-04 Aperture Diagnostics Ltd. Full-field three-dimensional surface measurement
US20210108922A1 (en) * 2013-05-14 2021-04-15 The Charles Stark Draper Laboratory, Inc. Star Tracker with Adjustable Light Shield
US9726617B2 (en) * 2013-06-04 2017-08-08 Kla-Tencor Corporation Apparatus and methods for finding a best aperture and mode to enhance defect detection
US9255887B2 (en) 2013-06-19 2016-02-09 Kla-Tencor Corporation 2D programmable aperture mechanism
KR101476820B1 (ko) * 2014-04-07 2014-12-29 주식회사 썸텍 3d 비디오 현미경 장치
WO2015187261A1 (en) * 2014-06-01 2015-12-10 Capso Vision, Inc. Reconstruction of images from an in vivo multi-camera capsule with confidence matching
US20160057405A1 (en) * 2014-08-22 2016-02-25 George E. Duckett, III Compact Stereoscopic Lens System for Medical or Industrial Imaging Device
KR102312273B1 (ko) * 2014-11-13 2021-10-12 삼성전자주식회사 거리영상 측정용 카메라 및 그 동작방법
DE102014017281A1 (de) * 2014-11-21 2016-05-25 e.solutions GmbH Optische Detektionsvorrichtung und Verfahren zum Steuern derselben
KR101639685B1 (ko) * 2015-02-12 2016-07-14 한국생산기술연구원 카메라용 액티브 필터 장치 및 그 액티브 필터링 방법
JP6153675B2 (ja) * 2015-05-12 2017-06-28 オリンパス株式会社 立体内視鏡装置
CA2986033A1 (en) * 2015-05-12 2016-11-17 Ikem C AJAELO Electronic drop dispensing device and method of operation thereof
CN104935915B (zh) * 2015-07-17 2018-05-11 珠海康弘发展有限公司 成像装置、三维成像***及三维成像方法
JP2018019020A (ja) * 2016-07-29 2018-02-01 ソニーセミコンダクタソリューションズ株式会社 撮像装置
CN110121289B (zh) * 2016-12-28 2022-02-08 奥林巴斯株式会社 摄像装置、内窥镜以及内窥镜***
WO2018152066A1 (en) 2017-02-14 2018-08-23 Ototechnologies Corp. Ear canal modeling using pattern projection
US10972643B2 (en) * 2018-03-29 2021-04-06 Microsoft Technology Licensing, Llc Camera comprising an infrared illuminator and a liquid crystal optical filter switchable between a reflection state and a transmission state for infrared imaging and spectral imaging, and method thereof
US10365554B1 (en) * 2018-04-04 2019-07-30 Intuitive Surgical Operations, Inc. Dynamic aperture positioning for stereo endoscopic cameras
US10924692B2 (en) 2018-05-08 2021-02-16 Microsoft Technology Licensing, Llc Depth and multi-spectral camera
KR102124623B1 (ko) * 2018-08-31 2020-06-18 주식회사 하이딥 지문 인식이 가능한 디스플레이 장치
CN109597275A (zh) * 2018-11-29 2019-04-09 同济大学 一种基于双楔形棱镜的轴向分布式三维成像方法
CN112312047B (zh) * 2019-08-01 2024-04-16 格科微电子(上海)有限公司 降低图像传感器电源噪声的方法
EP4206755A4 (en) * 2020-10-05 2024-03-06 Sony Group Corporation VISION DETECTION DEVICE AND DISPLAY DEVICE
CN114445497A (zh) * 2022-03-01 2022-05-06 上海涛影医疗科技有限公司 图像定位及动态图像生成方法、装置、***及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5222477A (en) * 1991-09-30 1993-06-29 Welch Allyn, Inc. Endoscope or borescope stereo viewing system
US5588948A (en) * 1993-02-17 1996-12-31 Olympus Optical Co. Ltd. Stereoscopic endoscope
CN1220807A (zh) * 1997-02-04 1999-06-23 索尼国际(欧洲)股份有限公司 适于显示3维图象的方法和装置
CN1228849A (zh) * 1996-08-17 1999-09-15 福莱库有限公司 产生三维图象的基底
US6359664B1 (en) * 1990-06-11 2002-03-19 Reveo, Inc. Electro-optical display system for visually displaying polarized spatially multiplexed images of 3-D objects for use in stereoscopically viewing the same with high image quality and resolution

Family Cites Families (73)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US2255631A (en) 1940-07-09 1941-09-09 Cyril A Schulman Microscope
US3464766A (en) 1966-10-28 1969-09-02 Us Interior Stereo-image alternator system
US3712199A (en) 1970-09-23 1973-01-23 Video West Inc Three-dimensional color photographic process, apparatus and product
JPS5440937B1 (zh) 1970-10-23 1979-12-06
US4021846A (en) 1972-09-25 1977-05-03 The United States Of America As Represented By The Secretary Of The Navy Liquid crystal stereoscopic viewer
US3825328A (en) * 1973-09-10 1974-07-23 W Hoch Optical system for a stereoscopic motion picture camera
GB1502274A (en) 1974-02-14 1978-03-01 Hopkins H Microscope and magnification changer
US4103260A (en) * 1977-01-03 1978-07-25 Hughes Aircraft Company Spatial polarization coding electro-optical transmitter
US4196966A (en) 1978-05-01 1980-04-08 Malis Leonard I Binocular magnification system
US4303316A (en) 1978-10-19 1981-12-01 Mcelveen Robert H Process for recording visual scenes for reproduction in stereopsis
US4392710A (en) 1979-11-22 1983-07-12 Pilkington P. E. Limited Optical apparatus
US4568160A (en) 1983-06-03 1986-02-04 Mgs Incorporated Process and apparatus for 3-dimensional moving pictures
US4651201A (en) 1984-06-01 1987-03-17 Arnold Schoolman Stereoscopic endoscope arrangement
US4601552A (en) 1984-10-22 1986-07-22 Jessmore Floyd E Binocular construction having adjustable filters
US4761066A (en) 1986-01-14 1988-08-02 Carter William J Stereoscopic optical system
US4924853A (en) 1989-05-22 1990-05-15 Medical Dimensions, Inc. Stereoscopic medical viewing device
US5059009A (en) 1990-04-12 1991-10-22 Mckinley Optics, Incorporated Endoscope relay lens
US5097359A (en) 1990-04-12 1992-03-17 Mckinley Optics, Inc. Endoscope relay lens configuration
US5094523A (en) 1990-05-11 1992-03-10 Eye Research Institute Of Retina Foundation Bidirectional light steering apparatus
US5198877A (en) 1990-10-15 1993-03-30 Pixsys, Inc. Method and apparatus for three-dimensional non-contact shape sensing
JPH04251239A (ja) * 1991-01-09 1992-09-07 Hiroyoshi Sugibuchi 立体視撮影装置
US5122650A (en) 1991-04-18 1992-06-16 Mckinley Optics, Inc. Stereo video endoscope objective lens system
US5471237A (en) * 1992-06-26 1995-11-28 Apollo Camer, Llc Single lens stereoscopic video camera
GB9324047D0 (en) 1993-11-23 1994-01-12 Watts Jonathan Image detecting apparatus
CA2177165C (en) 1993-11-23 2006-04-11 Jonathan Robert Watts Stereoscopic imaging arrangement and viewing arrangement
CA2123077C (en) * 1994-04-14 2001-09-04 Anthony B. Greening Single lens stereoscopic imaging system
JPH0836229A (ja) 1994-07-21 1996-02-06 Canon Inc ステレオアダプター
US6882473B2 (en) * 1995-03-02 2005-04-19 Carl Zeiss Jena Gmbh Method for generating a stereoscopic image of an object and an arrangement for stereoscopic viewing
US6348994B1 (en) * 1995-03-02 2002-02-19 Carl Zeiss Jena Gmbh Method for generating a stereoscopic image of an object and an arrangement for stereoscopic viewing
EP0730181B1 (de) * 1995-03-02 2000-12-20 CARL ZEISS JENA GmbH Verfahren zur Erzeugung des stereoskopischen Bildes eines Objektes sowie Anordnung zur stereoskopischen Betrachtung
US5532777A (en) 1995-06-06 1996-07-02 Zanen; Pieter O. Single lens apparatus for three-dimensional imaging having focus-related convergence compensation
WO1997003378A1 (en) * 1995-07-07 1997-01-30 International Telepresence Corporation System with movable lens for producing three-dimensional images
US5703677A (en) 1995-11-14 1997-12-30 The Trustees Of The University Of Pennsylvania Single lens range imaging method and apparatus
US5835133A (en) 1996-01-23 1998-11-10 Silicon Graphics, Inc. Optical system for single camera stereo video
US6006001A (en) 1996-12-02 1999-12-21 The Research Foundation Of Cuny Fiberoptic assembly useful in optical spectroscopy
KR100261582B1 (ko) 1997-11-06 2000-07-15 윤종용 3차원 영상 프로젝션 디스플레이장치
US6239912B1 (en) * 1998-09-11 2001-05-29 Nikon Corporation Focal point detection apparatus
US7683926B2 (en) 1999-02-25 2010-03-23 Visionsense Ltd. Optical device
US6563105B2 (en) 1999-06-08 2003-05-13 University Of Washington Image acquisition with depth enhancement
JP3863319B2 (ja) * 1999-06-29 2006-12-27 富士フイルムホールディングス株式会社 視差画像撮像装置及びカメラ
US6275335B1 (en) 1999-07-16 2001-08-14 Sl3D, Inc. Single-lens 3D method, microscope, and video adapter
US6546208B1 (en) 1999-11-22 2003-04-08 Sl3D, Inc. Stereoscopic telescope with camera
JP2004510173A (ja) 2000-05-24 2004-04-02 ピーター オー ザネン 3−d画像を作成する装置
JP2002034056A (ja) * 2000-07-18 2002-01-31 Scalar Corp 立体視用画像の撮像装置、立体視用画像の撮像方法
JP3564383B2 (ja) * 2000-11-15 2004-09-08 日本電信電話株式会社 3次元動画入力装置
US6624935B2 (en) 2000-12-06 2003-09-23 Karl Store Imaging, Inc. Single-axis stereoscopic video imaging system with centering capability
US7324279B2 (en) 2000-12-28 2008-01-29 Texas Instruments Incorporated Dual modulator projection system
US20020131170A1 (en) 2001-01-12 2002-09-19 Bryan Costales Stereoscopic aperture valves
JP2004309868A (ja) * 2003-04-08 2004-11-04 Sony Corp 撮像装置及び立体映像生成装置
KR20060096072A (ko) 2003-11-14 2006-09-05 가부시키가이샤 아프리코트 내시경 장치 및 이것을 사용한 촬영 방법
JP2005159755A (ja) * 2003-11-26 2005-06-16 Fuji Photo Film Co Ltd 画像処理装置及び画像処理プログラム
US20060279740A1 (en) * 2003-12-31 2006-12-14 Badami Vivek G Optically balanced instrument for high accuracy measurement of dimensional change
US7426039B2 (en) * 2003-12-31 2008-09-16 Corning Incorporated Optically balanced instrument for high accuracy measurement of dimensional change
US7227568B2 (en) 2004-04-03 2007-06-05 Li Sun Dual polarizing light filter for 2-D and 3-D display
US7959294B2 (en) * 2004-05-26 2011-06-14 Tibor Balogh Method and apparatus for generating 3D images
FR2889318B1 (fr) * 2005-07-26 2007-12-28 Commissariat Energie Atomique Dispositif de traitement de faisceaux optiques reconfigurable
EP1764644B1 (en) * 2005-09-09 2017-08-30 Viavi Solutions Inc. Optimally oriented trim retarders
US7559653B2 (en) 2005-12-14 2009-07-14 Eastman Kodak Company Stereoscopic display apparatus using LCD panel
WO2007070721A2 (en) * 2005-12-15 2007-06-21 Michael Mehrle Stereoscopic imaging apparatus incorporating a parallax barrier
US7978892B2 (en) 2006-10-25 2011-07-12 D4D Technologies, Llc 3D photogrammetry using projected patterns
WO2008068753A2 (en) * 2006-12-04 2008-06-12 Ben-Gurion University Of The Negev - Research And Development Authority Polarization independent birefringent tunable filters
JP4931668B2 (ja) 2007-03-29 2012-05-16 富士フイルム株式会社 複眼撮像装置
TW200921042A (en) * 2007-11-07 2009-05-16 Lite On Semiconductor Corp 3D multi-degree of freedom detecting device and detecting method thereof
TW200921044A (en) * 2007-11-07 2009-05-16 Lite On Semiconductor Corp 3D position detecting device and detecting method thereof
US8025416B2 (en) * 2008-02-18 2011-09-27 3D4K Displays, Inc. Integrated optical polarization combining prism for projection displays
JP2009169096A (ja) * 2008-01-16 2009-07-30 Fujifilm Corp 撮像デバイス
DE102008000467A1 (de) * 2008-02-29 2009-09-10 Seereal Technologies S.A. Vorrichtung zum Auslesen von Hologrammen
US8737721B2 (en) * 2008-05-07 2014-05-27 Microsoft Corporation Procedural authoring
US8204299B2 (en) * 2008-06-12 2012-06-19 Microsoft Corporation 3D content aggregation built into devices
US20100103276A1 (en) * 2008-10-28 2010-04-29 Border John N Split aperture capture of rangemap for 3d imaging
CN101588513B (zh) * 2009-01-07 2011-05-18 深圳市掌网立体时代视讯技术有限公司 一种立体摄像装置及方法
CN102725688B (zh) 2009-07-10 2015-04-01 管理前街不同收入阶层的前街投资管理有限公司 使用单成像路径生成三维图像信息的方法和装置
DE102010044502A1 (de) * 2010-09-06 2012-03-08 Leica Microsystems (Schweiz) Ag Sonderbeleuchtungs-Video-Operations-Stereomikroskop

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6359664B1 (en) * 1990-06-11 2002-03-19 Reveo, Inc. Electro-optical display system for visually displaying polarized spatially multiplexed images of 3-D objects for use in stereoscopically viewing the same with high image quality and resolution
US5222477A (en) * 1991-09-30 1993-06-29 Welch Allyn, Inc. Endoscope or borescope stereo viewing system
US5588948A (en) * 1993-02-17 1996-12-31 Olympus Optical Co. Ltd. Stereoscopic endoscope
CN1228849A (zh) * 1996-08-17 1999-09-15 福莱库有限公司 产生三维图象的基底
CN1220807A (zh) * 1997-02-04 1999-06-23 索尼国际(欧洲)股份有限公司 适于显示3维图象的方法和装置

Also Published As

Publication number Publication date
CN102725688A (zh) 2012-10-10
EP2452228A1 (en) 2012-05-16
WO2011003208A1 (en) 2011-01-13
EP2452224A1 (en) 2012-05-16
TW201108715A (en) 2011-03-01
TWI531209B (zh) 2016-04-21
CN102725688B (zh) 2015-04-01
EP2452224A4 (en) 2015-06-03
KR101598653B1 (ko) 2016-02-29
US9298078B2 (en) 2016-03-29
US9442362B2 (en) 2016-09-13
JP5840607B2 (ja) 2016-01-06
US20130038690A1 (en) 2013-02-14
CN102640036A (zh) 2012-08-15
JP2012532347A (ja) 2012-12-13
KR101758377B1 (ko) 2017-07-26
JP2012532348A (ja) 2012-12-13
KR20120039440A (ko) 2012-04-25
WO2011003168A1 (en) 2011-01-13
EP2452228A4 (en) 2015-06-03
KR20120093825A (ko) 2012-08-23
US20120188347A1 (en) 2012-07-26

Similar Documents

Publication Publication Date Title
CN102640036B (zh) 生成三维图像信息的方法和装置
US9247233B2 (en) Anagylphic stereoscopic image capture device
CN102236245B (zh) 单透镜2d/3d数字照相机
CN202750183U (zh) 视差成像设备和视差成像***
CN105637428B (zh) 全息三维显示***和方法
CN105637415B (zh) 全息三维信息采集、还原装置及方法
US9664612B2 (en) Method and apparatus for generating three-dimensional image information
US20120002018A1 (en) Three-dimensional image capture device
US20120320164A1 (en) Stereoscopic camera with polarizing apertures
CN102576154A (zh) 立体显示***
CN101883215A (zh) 成像设备
US9479743B2 (en) Single lens 3-D camera
US20140218478A1 (en) Method and apparatus for stereoscopic imaging
CN103052914A (zh) 三维摄像装置
CN109660786A (zh) 一种裸眼3d立体成像及观测方法
CN103827730B (zh) 用于生成三维图像信息的方法和装置
US20150229910A1 (en) Method and apparatus for stereoscopic imaging
Arai Three-dimensional television system based on spatial imaging method using integral photography
JPH07250352A (ja) 立体撮像表示方式
TWI530711B (zh) 用於產生三維影像資訊之方法和設備
JP2002344998A (ja) 立体画像表示装置
CN103369340A (zh) 多维led显示屏立体显示方法及多维led显示屏
WO2013061334A1 (en) 3d stereoscopic imaging device with auto parallax
Arai Three-dimensional television system based on integral photography
JPH0634339A (ja) 3次元画像入力装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: FRONT STREET INVESTMENT MANAGEMENT INC., AS MANAGE

Free format text: FORMER OWNER: ISEE3D INC.

Effective date: 20130704

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20130704

Address after: Ontario, Canada

Applicant after: Front Street Investment Management Inc., as manager for Front Street Diversified Income Class

Address before: Ontario, Canada

Applicant before: ISee3D Inc.

C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160217

Termination date: 20180712

CF01 Termination of patent right due to non-payment of annual fee