CN101228460A - 编码孔径成像*** - Google Patents
编码孔径成像*** Download PDFInfo
- Publication number
- CN101228460A CN101228460A CNA2006800269897A CN200680026989A CN101228460A CN 101228460 A CN101228460 A CN 101228460A CN A2006800269897 A CNA2006800269897 A CN A2006800269897A CN 200680026989 A CN200680026989 A CN 200680026989A CN 101228460 A CN101228460 A CN 101228460A
- Authority
- CN
- China
- Prior art keywords
- coded aperture
- imaging system
- mask
- imaging
- detector array
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 194
- 238000000034 method Methods 0.000 claims abstract description 58
- 238000004422 calculation algorithm Methods 0.000 claims description 45
- 230000005855 radiation Effects 0.000 claims description 41
- 230000000007 visual effect Effects 0.000 claims description 24
- 230000008859 change Effects 0.000 claims description 20
- 238000003491 array Methods 0.000 claims description 18
- 239000004973 liquid crystal related substance Substances 0.000 claims description 11
- 230000015572 biosynthetic process Effects 0.000 claims description 6
- 230000002093 peripheral effect Effects 0.000 claims description 3
- 230000003287 optical effect Effects 0.000 abstract description 27
- 230000004075 alteration Effects 0.000 abstract description 7
- 238000005516 engineering process Methods 0.000 description 30
- 230000000694 effects Effects 0.000 description 25
- 230000005540 biological transmission Effects 0.000 description 19
- 238000012545 processing Methods 0.000 description 19
- 230000008901 benefit Effects 0.000 description 15
- 230000008569 process Effects 0.000 description 11
- 238000013461 design Methods 0.000 description 9
- 230000003044 adaptive effect Effects 0.000 description 7
- 230000000295 complement effect Effects 0.000 description 7
- 239000000758 substrate Substances 0.000 description 6
- 230000000875 corresponding effect Effects 0.000 description 5
- 230000002349 favourable effect Effects 0.000 description 5
- 239000000463 material Substances 0.000 description 5
- 238000004458 analytical method Methods 0.000 description 4
- 238000005452 bending Methods 0.000 description 4
- 229910021542 Vanadium(IV) oxide Inorganic materials 0.000 description 3
- 238000005311 autocorrelation function Methods 0.000 description 3
- 239000005262 ferroelectric liquid crystals (FLCs) Substances 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 238000005457 optimization Methods 0.000 description 3
- 230000010287 polarization Effects 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 230000035945 sensitivity Effects 0.000 description 3
- GRUMUEUJTSXQOI-UHFFFAOYSA-N vanadium dioxide Chemical compound O=[V]=O GRUMUEUJTSXQOI-UHFFFAOYSA-N 0.000 description 3
- 230000004304 visual acuity Effects 0.000 description 3
- MARUHZGHZWCEQU-UHFFFAOYSA-N 5-phenyl-2h-tetrazole Chemical compound C1=CC=CC=C1C1=NNN=N1 MARUHZGHZWCEQU-UHFFFAOYSA-N 0.000 description 2
- 229910000661 Mercury cadmium telluride Inorganic materials 0.000 description 2
- 239000004988 Nematic liquid crystal Substances 0.000 description 2
- MCMSPRNYOJJPIZ-UHFFFAOYSA-N cadmium;mercury;tellurium Chemical compound [Cd]=[Te]=[Hg] MCMSPRNYOJJPIZ-UHFFFAOYSA-N 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000001816 cooling Methods 0.000 description 2
- 210000002858 crystal cell Anatomy 0.000 description 2
- 230000002950 deficient Effects 0.000 description 2
- 230000005670 electromagnetic radiation Effects 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 238000001093 holography Methods 0.000 description 2
- WPYVAWXEWQSOGY-UHFFFAOYSA-N indium antimonide Chemical compound [Sb]#[In] WPYVAWXEWQSOGY-UHFFFAOYSA-N 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 239000002245 particle Substances 0.000 description 2
- 230000010363 phase shift Effects 0.000 description 2
- 238000002203 pretreatment Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 230000001105 regulatory effect Effects 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 206010038743 Restlessness Diseases 0.000 description 1
- 238000010521 absorption reaction Methods 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 238000007334 copolymerization reaction Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000006378 damage Effects 0.000 description 1
- 238000000354 decomposition reaction Methods 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 238000001962 electrophoresis Methods 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000002329 infrared spectrum Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000009413 insulation Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 239000000615 nonconductor Substances 0.000 description 1
- NJPPVKZQTLUDBO-UHFFFAOYSA-N novaluron Chemical compound C1=C(Cl)C(OC(F)(F)C(OC(F)(F)F)F)=CC=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F NJPPVKZQTLUDBO-UHFFFAOYSA-N 0.000 description 1
- 238000009206 nuclear medicine Methods 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 238000007639 printing Methods 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 230000002285 radioactive effect Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 238000002310 reflectometry Methods 0.000 description 1
- 230000011514 reflex Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000010008 shearing Methods 0.000 description 1
- 230000035939 shock Effects 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 229910052710 silicon Inorganic materials 0.000 description 1
- 239000010703 silicon Substances 0.000 description 1
- 238000003325 tomography Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01T—MEASUREMENT OF NUCLEAR OR X-RADIATION
- G01T1/00—Measuring X-radiation, gamma radiation, corpuscular radiation, or cosmic radiation
- G01T1/29—Measurement performed on radiation beams, e.g. position or section of the beam; Measurement of spatial distribution of radiation
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01T—MEASUREMENT OF NUCLEAR OR X-RADIATION
- G01T1/00—Measuring X-radiation, gamma radiation, corpuscular radiation, or cosmic radiation
- G01T1/29—Measurement performed on radiation beams, e.g. position or section of the beam; Measurement of spatial distribution of radiation
- G01T1/2914—Measurement of spatial distribution of radiation
- G01T1/2921—Static instruments for imaging the distribution of radioactivity in one or two dimensions; Radio-isotope cameras
- G01T1/295—Static instruments for imaging the distribution of radioactivity in one or two dimensions; Radio-isotope cameras using coded aperture devices, e.g. Fresnel zone plates
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B15/00—Measuring arrangements characterised by the use of electromagnetic waves or particle radiation, e.g. by the use of microwaves, X-rays, gamma rays or electrons
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/0007—Image acquisition
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/58—Means for changing the camera field of view without moving the camera body, e.g. nutating or panning of optics or image sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B2207/00—Coding scheme for general features or characteristics of optical elements and systems of subclass G02B, but not including elements and systems which would be classified in G02B6/00 and subgroups
- G02B2207/129—Coded aperture imaging
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/30—Transforming light or analogous information into electric information
- H04N5/33—Transforming infrared radiation
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- High Energy & Nuclear Physics (AREA)
- Molecular Biology (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Optics & Photonics (AREA)
- Computing Systems (AREA)
- Electromagnetism (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Image Input (AREA)
- Image Processing (AREA)
Abstract
本发明涉及编码孔径成像设备和方法。在一个方面,编码孔径成像器具有至少一个检测器阵列和可重新配置的编码孔径掩模装置。可重新配置的编码孔径掩模装置可以显示多个编码孔径掩模,以便跨越不同的视场和/或以不同的分辨率提供成像,而无需任何移动部件或庞大的光学组件。可以使用多于一个检测器阵列来提供大面积成像而无需无缝拼接,并且这代表本发明的另一方面。本发明还涉及到在可见波段、紫外波段或红外波段内使用编码孔径成像。教导了使用编码孔径成像来通过弯曲的光学元件进行成像,因为图像解码可以自动去除由该弯曲元件引入的任何像差。
Description
本发明涉及一种具有可重新配置的编码孔径掩模的编码孔径成像***,特别是涉及一种具有可调节的成像性能而无需移动部件的成像***,并且涉及用于在紫外波长、可见波长和红外波长操作的编码孔径成像设备。
用于观察场景的光学***在从CCTV安全***到监视/侦察***的各种各样的情况下被采用。对于这些***来说,常常需要能够调节所述***的成像性能,例如在分辨率或图像更新速率方面进行调节。另一个例子是需要在大的观测场(FOR,field-of-regard)上扫描成像器,所述FOR比瞬时视场(FOV)大许多倍。
光学***的机械扫描是公知的,例如透镜或反射镜装置的移动可以改变FOR内的FOV,或者整个成像***可以被移动。然而,光学组件的移动通常需要庞大并且笨重的机械移动装置,而在某些应用中,使得尺寸和重量最小化是重要的。此外,机械扫描的***可能会生成不希望的振动,这些振动使得所采集的图像失真。此外,大并且笨重的光学组件或整个***的快速移动可能会具有较大的转动惯量,从而可能会是成问题的。
还公知使用空间光调制器(SLM)来显示衍射图案,其中具有显示器阵列,以便实现扫描成像***,例如参见已公开的PCT申请WO2000/17810。可以显示不同的衍射图案,这些衍射图案把来自所述场景的不同部分的辐射导向检测器。因此,在没有任何移动部件的情况下实现了扫描,从而可以减小所述光学***的重量和体积。这种衍射光学装置通常可用在窄频带(单色)上,因为这些光学装置是高度色散的。所述衍射光学装置的效率常常也较低。
本发明的目的是提供一种成像***,其减轻了至少某些上述缺陷,并且提供了一定程度的更通用的成像器可适配性。
因此,根据本发明,提供了一种编码孔径成像***,其具有检测器阵列和编码孔径掩模装置,其中该编码孔径掩模装置是可重新配置的。
编码孔径成像是一种公知的成像技术,其主要被用在高能量成像中,诸如被用在X射线或γ射线成像中,其中适当的透镜材料并不普遍存在,例如参见E.Fenimore和T.M.Cannon的“Coded apertureimaging with uniformly redundant arrays(利用均匀冗余阵列的编码孔径成像)”(Applied Optics,第17卷,第3期,第337-347页,1978年2月1日)。已经对于三维成像提出了编码孔径成像,例如参见Cannon TM、Fenimore EE的“Tomographical imaging usinguniformly redundant arrays(利用均匀冗余阵列的X线断层摄影成像)”(Applied Optics18,第7期,第1052-1057页,1979年)。
编码孔径成像利用了与针孔摄影机相同的原理,但是编码孔径成像不具有单个小孔径,而是使用具有孔径阵列的编码孔径掩模。所述孔径的小尺寸导致高角分辨率,但是孔径数目的增多会使得到达所述检测器的辐射增多,从而会增大信噪比。每个孔径把所述场景的图像传递到所述检测器阵列,并且因此该检测器阵列处的图案是一系列重叠的图像,并且不能被识别为该场景。需要进行处理以便由所记录的数据重建所述原始场景图像。该重建过程需要关于所使用的孔径阵列的知识,并且该孔径阵列被编码以便允许后续的质量良好的图像重建。因此,编码孔径成像与传统的成像技术大不相同。在传统的成像中,在所述检测器阵列处形成的空间强度图案是所述***光学装置所采集的共聚焦(in focus)图像。在编码孔径成像器中,在所述检测器阵列处形成的强度图案是与图像以及与该编码孔径阵列相关的编码图像图案。
使用可重新配置的编码孔径掩模装置允许在不同的时间显示不同的编码孔径掩模。这例如允许在不需要任何庞大的移动部件的情况下改变所述成像***的方向和FOV。此外,还可以通过改变显示在所述编码孔径掩模装置上的编码孔径掩模来改变该成像***的分辨率。还可能使用多个不同的编码孔径阵列来对相同的场景进行成像,也就是说分别利用不同的掩模来采集一场景的多个帧。多帧成像可以提高图像质量,并且本发明允许分别利用不同的掩模来快速采集数个不同的帧,其中每个掩模可以按照要求被自由适配。已知的编码孔径成像***使用固定的掩模,而不是使用可重新配置的掩模装置。这里使用的与掩模装置相关的术语“可重新配置”指的是掩模装置具有可重新配置区域,在该区域内可以提供所述掩模图案,并且可以按照需要把该可重新配置区域内的掩模装置的任何部分设置成不透明的(即阻止来自所述场景的辐射到达所述检测器阵列)或透射的(从而允许来自场景的辐射到达检测器)。例如,所述可重新配置的掩模装置可以被像素化,其中每个有源像素能够被单独设置成透射的或不透明的,以便提供多种不同的可能掩模。
All Systems公司的国际专利申请WO 97/26557描述了一种编码孔径成像***,其具有展现出正方形反对称均匀冗余阵列的掩模。该掩模图案被设置成使得该编码孔径阵列在第一位置处展现出第一图案,并且在已旋转的第二位置处展现出互补的第二图案。因此,可以通过围绕其轴旋转掩模来提供两个不同但互补的掩模图案。使用两个互补图案可用于消除背景噪声。WO 97/26557的编码孔径掩模装置允许对固定掩模进行重新定位,以便提供新的阵列图案,然而该掩模装置并不是可重新配置的掩模装置,并且不会提供对视场的尺寸或方向或者所得到的图像的分辨率的控制。所述***还被限制到最多两个不同的掩模,因此在所使用的编码孔径阵列方面没有灵活性。
被显示在所述编码孔径掩模装置上(即在所述掩模装置的整个区域上)的图案在这里被称作编码孔径掩模。该编码孔径掩模中的至少部分是编码孔径阵列。编码孔径阵列是孔径的被构图阵列(patternedarray),这些孔径允许辐射从所述场景到达所述检测器阵列,使得在该检测器阵列处形成的辐射图案虽然不能被直接识别为场景图像,但是可以对其进行处理以显现场景图像。所述编码孔径掩模中形成所述编码孔径阵列的区域可以是所述编码孔径掩模装置的全部或仅仅是其一部分。也就是说,显示在所述掩模装置上的整个图案是编码孔径阵列,或者如下面更加详细地描述的那样,仅仅所述图案中的部分是编码孔径阵列,该掩模的剩余部分阻挡辐射到达所述检测器。本领域技术人员将很清楚地知道能被显示的编码孔径阵列。为了避免疑问,这里使用的术语“孔径”并不意味着掩模装置中的物理孔洞,而是仅仅意味着允许辐射到达所述检测器的图案区域,并且所述编码孔径阵列可以是透射的或反射的。所述编码孔径阵列是所述孔径的构思图案位于其中的区域。
因此,优选地,所述编码孔径掩模装置可以被重新配置,以便提供编码孔径掩模,所述编码孔径掩模为所述***提供不同的视场。按照这种方式,可以在不需要任何宏观移动部件的情况下在观测场内改变成像***性能,该观测场可以大许多倍。所述不同的编码孔径掩模可以被设置成使得仅仅该编码孔径掩模的部分包括编码孔径阵列,并且该编码孔径阵列在所述掩模中的位置限定所述视场。换句话说,只有所述掩模装置的一部分可以被用来限定编码孔径阵列,该掩模的剩余部分阻挡辐射到达所述检测器阵列。因此,能够到达检测器阵列的来自所述场景的仅有的辐射是穿过所述编码孔径阵列的辐射,因此该编码孔径阵列相对于该检测器阵列的位置以及该编码孔径阵列的尺寸将限定所述***的视场。在显示于所述掩模装置上的掩模内移动所述编码孔径阵列的位置将会改变辐射所能到达检测器阵列的方向,从而将改变所述视场的方向和尺寸。因此,所述掩模装置的总尺寸限定所述***的观测场,并且可以比被写到可重新配置的掩模装置的编码孔径阵列的尺寸大许多,但是所述视场可以被控制,以便例如提供扫描或者跟踪场景中的对象。
优选地,所述编码孔径掩模装置可以被重新配置来提供具有不同分辨率的编码孔径掩模。例如,可以显示不同的编码孔径掩模,这些编码孔径阵列具有不同的有效孔径尺寸和间距。所述编码孔径掩模装置还可以被重新配置来提供具有不同的编码孔径阵列的编码孔径掩模。
此外,与固定掩模***相比,改变掩模图案的能力可以有利于提高成像性能,例如通过组合来自多个掩模图案的所检测到的强度,可以实现提高的图像分辨率和/或质量。可以使用数个掩模图案来对相同的场景进行成像,以便改进图像处理,例如,可以使用多于两个掩模图案,这取决于需求,可以使用五个或更多或者十个或更多的不同掩模图案。所使用的掩模图案或者所使用的掩模图案的组合可以被自由适配,并且例如响应于场景演变而变化。
本发明特别适用于在可见、近红外、热红外或紫外波段内的多功能、高分辨率成像,诸如可以在监视中所使用的那样。几乎所有这种类型的成像***都使用折射的、反射的或衍射的光学组件,并且本领域技术人员将不会想到编码孔径成像将适用于此。就其本质来说,编码孔径成像阻挡来自视场的大量辐射到达检测器,从而可能降低所检测到的辐射的信噪比。此外,必须对所检测到的输出执行信号处理技术,以便解码并恢复所成像的场景。当考虑可见、UV或IR波长下的高分辨率编码孔径成像时,衍射的效应可能也是显著的。编码孔径成像通常被用于高能量辐射成像或粒子成像。对于这种应用来说,孔径尺寸以及掩模到检测器的间距使得所述衍射效应不显著。当使用可见波段辐射以用于高分辨率成像时,衍射效应开始模糊在检测器阵列处形成的图案,从而使得重建更加困难。因此,本领域技术人员之前忽略了把编码孔径成像用于可见波段或附近波段的成像***。然而,本发明人不仅实现了令编码孔径成像适用于多功能成像(包括在可见、UV和IR波长下的成像),而且在把编码孔径成像应用于此时还具有数个优点。
如所提及的那样,在使用相对大的编码孔径掩模装置时,可以在该掩模的不同部分处提供多种不同尺寸的编码孔径阵列,以便在无需任何移动部件的情况下给出具有变化的分辨率的多种不同视场。此外,由于一系列场景图像在检测器阵列上的不同位置处重叠,所以如果有任何坏点,则在所述掩模和/或检测器阵列中将仍然会获得完整的图像,并且所述坏点的效应将在整个图像上被平均掉。这意味着没有丢失任何信息,这在监视类型应用中是非常有用的。此外,如所提及的那样,由所述检测器阵列记录的图像并没有复制所述视场中的场景。只有在对所记录的图像进行处理之后,才能恢复原始场景图像。这在之前将被视为缺点。然而,在所述成像***正被远程地使用并且正在把所记录的图像传送回基站的情况下,或者在记录图像以用于之后分析的情况下,应当注意到,所记录的信息被有效地加密。产生了经过自然加密而离开检测器的数据流,该数据流可以给出防止拦截或干扰的安全性。此外,所述加密密钥(实际上是所述掩模图案)可以被随意改变,这是因为所述掩模是可重新配置的。还应当注意到,利用编码孔径成像***,来自所述场景中的任何单个位置的光都不是被聚焦到所述检测器阵列的单个部分上,从而所述***还将提供对于来自亮源(例如激光源)的破坏的保护。
所述编码孔径掩模装置可以被重新配置,从而使得所述编码孔径掩模具有处在该掩模的不同位置处的多个不同的编码孔径阵列。换句话说,在该掩模上的不同位置处同时使用两个或多个不同的编码孔径阵列。因此,每个编码孔径阵列将把来自所述场景的不同部分的辐射传递到所述检测器。很明显,在该检测器处的强度图案将包括来自每个编码孔径阵列的单元。然而,可以对所得到的强度信号进行处理,以便重建与每个编码孔径阵列相关联的场景图像。换句话说,所述成像器能够分别利用所述检测器的全分辨率同时在多个方向上进行成像。因此,本发明允许具有多个中央凹补片(foveal patch)的成像器。
不同的编码孔径阵列可以具有不同的分辨率和/或尺寸。例如,所述编码孔径掩模的一个编码孔径阵列可以具有非常高的分辨率,并且因此提供所述场景的一个部分的详细视图,而另一个编码孔径阵列具有针对该场景的不同部分的较低分辨率。
优选地,每个编码孔径阵列与其他编码孔径阵列不相关,也就是说,在各个单独掩模图案之间的互相关中不应当有显著的峰值。
所述编码孔径掩模装置可以是平面的或非平面的。例如,该掩模装置可以与设备中的孔径共形。弯曲的编码孔径掩模装置可以优化所述成像***的观测场。例如,与平面编码孔径装置相比,弯曲的编码孔径掩模装置可以增大给定***孔径的FOV。此外,非平面的编码孔径掩模装置可以具有预定的形状,从而在使用中,该编码孔径掩模装置与所述平台的形状共形。例如,本发明的成像***可以被嵌入到飞机或其他机载(airborne)平台中,例如被嵌入在机翼或飞机机头中。
传统的成像***通常必须位于外壳内,该外壳处在飞机外表面上的窗的后面。为了避免导致图像中的像差的该窗的效应,所述窗通常将必须是半球状或平坦的,从而该窗的光学效应并不会引入不可接受的图像像差或失真。这可能会涉及到使用非最佳的窗形状,该非最佳的窗形状可能会增大阻力并且要求更为稳定的安装等等。
本发明允许使用弯曲的或有刻面的(faceted)编码孔径掩模装置,该编码孔径掩模装置与在其上安装该编码孔径掩模装置的平台的形状共形。在飞机的例子中,该编码孔径掩模装置可以与窗共形,并且与其相邻地来定位。这确保了所述***的输入孔径最大化并且给出了最佳视场,而无需与所述平台的形状有偏差。在其中所述编码孔径掩模装置对于其操作环境来说足够稳定的某些情况下,所述编码孔径掩模装置可以形成所述窗。不管是不是可重新配置的,使用具有非平面编码孔径掩模的编码孔径成像器都代表了本发明的另一方面。
本发明的另一优点在于,不管是平面的还是弯曲的,编码孔径掩模装置都可以被用来通过无需是半球状的弯曲的或有刻面的表面来进行成像。在任意视场处使用的特定编码孔径阵列和处理算法可以补偿在不同视场处的所述弯曲表面的光学效应的任何差异。使用被设置成通过弯曲表面进行成像的编码孔径成像器代表了本发明的另一方面,并且本发明还提供一种成像***,该成像***具有被设置成通过非平面元件进行成像的编码孔径成像器。很明显,该非平面元件对于操作波长下的辐射必须是至少部分地透射的,并且例如可以包括表面中的窗。如所提及的那样,该非平面元件不需要是半球状的,并且实际上可以是不规则的,而本发明的这一方面的成像***仍然将产生无像差的图像。本发明的这一方面的编码孔径成像器包括至少一个检测器以及编码孔径掩模装置,并且可以很方便地是根据本发明的第一方面的编码孔径成像器。所述非平面元件可以形成平台(诸如飞行器)的外表面的部分,并且可以具有空气动力学形状,也就是说该非平面元件的形状主要由空气动力学因素支配。
本发明的第一方面的可重新配置的编码孔径掩模装置可以是能够在其表面的至少部分上显示编码孔径阵列的任何可重新配置的设备。该掩模装置可以被像素化,并且每个像素应当可以在透射的与不透明的之间切换。应当注意到,这里使用的术语“透射的”应当被视为意味着在该像素处允许至少一些入射辐射从该掩模向所述检测器阵列传递,而“不透明的”则应当被视为在该像素处阻挡至少一些入射辐射向该检测器阵列传递,其中,与不透明的像素相比,透射的像素允许显著更多的辐射到达检测器。所述可重新配置的掩模装置可以是反射设备,诸如是数字微镜设备,其中所述像素的反射率被改变,以便把来自所述场景的辐射反射到检测器阵列(透射的)或者不反射到检测器阵列(不透明的)。
所述可重新配置的编码孔径掩模装置可以具有控制器,该控制器适于把至少一个编码孔径掩模写到该编码孔径掩模装置上。可以利用多个不同的编码孔径掩模对该控制器进行预编程,并且该控制器可以被适配来在特定时间把特定掩模写到该可重新配置的掩模装置上。例如,该控制器可以写对应于低分辨率监视模式的掩模,直到检测到目标,并且随后该控制器写对应于与所检测到的目标重合的高分辨率窄FOV的掩模。
优选地,可以在相对较短的时标内重新配置所述编码孔径掩模装置。优选地,可以在少于15ms、或少于10ms或少于5ms内重新配置该掩模装置。所述编码孔径掩模装置的分辨率优选地与可能在所述***中使用的检测器的分辨率相匹配,其例如大约是可见波段中的5μm直到长波热红外波段中的25μm。所述编码孔径阵列中的像素可以由所述编码孔径掩模装置的一组数个单独像素形成。因此,可以通过组合各组像素来仿真具有更大有效像素的掩模装置。
如所提及的那样,本发明的成像***可以被用于在紫外波段中进行成像,并且因此可以在大约380nm或更低和/或大约10nm或更高的波长或波长范围下操作。本发明还可以被用于可见波段成像,并且因此可以在大约780nm或更低和/或大约380nm或更高的波长或波长范围下操作。本发明还可以被用于红外波段成像,并且因此可以在大约780nm或更高和/或大约1mm或更低的波长或波长范围下操作。例如,所述成像***可以被用在中间IR波段中,即在3μm或以上和/或5μm或以下的波长下,或者可以被用在长波IR波段中,即在8微米或以上和/或14μm或以下的波长下。然而,本领域技术人员将认识到,还可以适当地使用其他波长范围。
优选地,所述编码孔径掩模装置是双稳态的,也就是说,在不施加电源的情况下,像素将存在于两个稳定透射状态之一下。这样做的优点在于,一旦该编码孔径掩模装置被配置成特定掩模之后,就不需要电源来维持该掩模。
所述编码孔径掩模装置可以包括至少一个空间光调制器。该空间光调制器可以是液晶设备。液晶设备可以在可见和红外波段内操作,并且可以快速切换。双稳态液晶设备是公知的,例如铁电液晶设备。其他适当的可重新配置的掩模装置包括MEMS或MOEMS调制器、电致变色设备、电泳设备以及电光调制器。例如,对于红外应用可以使用二氧化钒调制器。
所述检测器阵列优选地具有高灵敏度和动态范围、良好的信噪比特性、高像素计数以及小像素间距。很明显,所使用的检测器阵列将取决于操作波长。对于可见和近红外波段可以使用CMOS检测器阵列或CCD阵列。对于热红外波段可以得到多种冷却的或未冷却的检测器技术,其中包括碲镉汞(CMT)和锑化铟(InSb)检测器阵列。在需要大检测器阵列的应用中,可以有彼此邻近设置的多于一个检测器阵列。因此,本发明允许利用多个较小的检测器阵列来实现大面积检测器。实际上,使用编码孔径成像具有大面积成像的优点。如上所述,由于一系列场景图像在所述检测器阵列上的不同位置处重叠,所以如果有任何坏点,则仍然将获得完整的图像,并且所述坏点的效应将在整个图像上被平均掉。这对于相邻检测器阵列之间的任何间隙同样成立。与传统的成像不同,CAI***中的检测器阵列之间的任何间隙的效应将被平均掉,并且仍然可以获得完整的图像,而在传统的成像中,检测器阵列之间的间隙将导致图像中的间隙。这样做是有利的,因为标准检测器阵列往往具有围绕该阵列的***设置的写入/寻址电路。因此,无法把具有有效检测器区域和无效***区域的多个标准检测器阵列无缝地拼接在一起以形成更大的检测器,从而使得有效区域是邻接的,即一个有效区域的末端连着相邻检测器区域的开头。因此,大面积成像要求定制检测器,并且在所能生产的检测器阵列的尺寸方面有限制。然而,通过利用编码孔径成像***,可以使用标准检测器阵列,并且所述平均化效应意味着可以相对简单且便宜地获得大面积无缝成像或非标准长宽比成像。这适用于具有固定视场(即固定编码孔径掩模)或利用可重新配置的编码孔径掩模装置的可变视场的成像***。
因此,在本发明的另一方面,提供了一种编码孔径成像***,其具有被设置成通过编码孔径掩模从场景接收辐射的多个检测器阵列。如所提及的那样,每个检测器阵列具有用于接收辐射的有效检测器区域和无效***区域,并且至少一个检测器阵列的有效区域与相邻检测器阵列的有效区域不邻接。这里关于本发明的其他方面描述的所有实施例和优点都适用于使用多个检测器阵列的方面。
虽然平面检测器阵列在本发明的所有方面中都是优选的(由于其易于制造因此易于得到并且成本较低),但是如果需要的话,所述检测器阵列可以是弯曲的或有刻面的。
如上所述,到达所述检测器阵列的辐射图案可以被认为是所述场景的一系列重叠图像,一幅图像来自每个孔径,并且要求进行信号处理来解码所检测到的图案。因此,所述***可以包括用于解码所述检测器阵列的输出的处理器,以便产生图像。优选地,该处理器被适配成应用多种解码算法来解码所述图像。在该***被设置成通过弯曲表面进行成像的情况下,所述解码算法补偿由穿过该弯曲表面的辐射所导致的任何像差效应。
可以使用多种不同的解码算法。所使用的算法将取决于其中使用所述成像***的特定应用,并且还可能受到所要求的帧率、图像质量和可用信号处理资源的影响。可以存储不同的算法,以便在某些情况下使用。
所述解码算法可以方便地包括去卷积算法。可替换地,所述解码算法可以包括互相关算法。所述解码可以包括对解空间的迭代搜索以便恢复图像,例如最大熵方法和对源的迭代去除。所述处理可以被适配来执行一种或多种上述解码算法。
本领域技术人员将认识到,在无衍射的情况下,在编码孔径成像***的检测器阵列处所记录的信号可以被描述为场景强度与所述编码孔径阵列的孔径函数的卷积加上某个噪声。因此,所有解码算法的目的都是通过使用掩模图案的知识来恢复场景图像,例如通过执行去卷积或互相关来恢复场景图像。
然而,在衍射效应很显著的情况下,在所述检测器阵列处的强度图案不再直接对应于所述孔径函数。相反,在所述检测器阵列处形成的衍射图案实际上是所述掩模图案的模糊形式。因此,基于所述编码孔径阵列的孔径函数的解码算法将导致模糊的图像。
因此,对所述图像进行处理可以涉及多级过程。在第一步,形成所述场景的第一图像。这个第一图像将由于任何衍射效应而被模糊。随后,可以应用至少一个图像增强步骤来提高图像质量。
形成第一图像的所述步骤可以使用对于传统的编码孔径阵列已知的任何处理技术。然而,由于图像去卷积是一种不适定的(ill posed)逆问题,所以优选地可以应用适用于对不适定的逆问题求解的多种技术。在一个优选实施例中,在产生第一图像时可以应用Tikhonov正则化技术。Tikhonov正则化是求解逆问题的一种公知技术,例如参见M.Bertero和P.Boccacci的“Introduction to Inverse Problems inImaging(关于成像中的逆问题的介绍)”(Institute of PhysicsPublishing,1998年,ISBN 0750304359)的第108页,该文献在下文中被称作Bertero&Boccacci。可替换地,可以应用维纳(Weiner)滤波技术。还可以使用诸如Landweber迭代法之类的迭代技术,参见Bertero&Boccacci的第291页。
为了进一步提高图像质量,可以在第一模糊图像上执行至少一个图像增强步骤。该模糊图像可以被视为与点扩散函数卷积的真实图像。于是,该图像增强步骤是要恢复所述真实图像。
优选地,所述图像增强步骤涉及到把第一图像划分成一系列图像区域以及处理这些子图像以提高质量,所述点扩散函数在所述图像区域上相对不变。把所述图像划分成多个小图像区域不仅确保所述点扩散函数对于该区域在空间上是不变的,而且与尝试处理整幅图像相比还易于计算。优选地,在每个小图像区域上对所述逆问题进行求解,并且在该区域的中心处的解的值被保留为所述解。随后把该区域移动多个像素,并且重复所述过程。
优选地,对于每个图像区域求解所述逆问题是Tikhonov正则化,该Tikhonov正则化可以利用傅立叶方法来实现。可替换地,如D AFish、J Grochmalicki和ER Pike在“Scanning singular-valuedecomposition method for restoration of images withspace-variant blur(关于恢复带有空间变化的模糊的图像的奇异值分解方法的分析)”(J.Op t.Soc.Am A,13,第3期,1996年,第464-469页)中所提出的那样,可以使用截断奇异函数扩展(truncated singularfunction expansion)。该方法的计算量比Tikhonov正则化更大。该方法要求计算与所述点扩散函数相关联的奇异值分解(SVD)。然而,如果所述点扩散函数在空间上是不变的,则SVD仅仅需要被计算一次以处理整幅图像。
由于编码孔径成像涉及到不相干成像,所以所述真实图像必须是非负的。该先验信息可以被包括在所述逆问题的解中(例如参见GD deVilliers、ER Pike和B McNally的“Positive solutions to linearinverse problems(线性逆问题的正解)”(Inverse Problems 15,1999年,第615-635页))。
还可以利用Landweber迭代法的变型把正性(positivity)合并到所述解中,并且这种做法可能更容易实现(参见Bertero&Boccacci的第291页)。应当注意到,Richardson-Lucy方法(也被称作期望最大化方法)具有与所构想的Landweber方法类似的性能,尽管其计算量更大,(Bertero&Boccacci的第179页)。
在具有所述图像具有较少数目的点目标的先验知识的情况下,所述图像增强步骤可以附加地或可替换地使用涉及到曲线拟合的超分辨率方法。
如果将使用所述编码孔径成像器来进行跟踪,则可能只有在实施跟踪的情况下才需要所述高分辨率补片。这将大大削减计算负荷。因此,所述方法可以涉及到只在图像的感兴趣部分(即所述场景的移动部分或可能的或被确认的目标的区域)处执行图像增强的步骤。
所述图像增强步骤还可以涉及到组合来自所述场景的多幅图像的数据。通过利用不同的编码孔径掩模获取该场景的数幅图像,有可能生成关于该场景的附加信息。本质上,可以在所述数据上施加某种统计结构。
特别是在所述编码孔径成像器被用于目标跟踪的情况下,可以组合来自多于一幅图像的信息。优选地,使用一种“检测前跟踪”方案。检测前跟踪算法之前已经被用在雷达和声纳领域中,并且把来自传感器的数次数据采集的数据一起用来改进目标识别。类似的方法可以被用于来自编码孔径成像***的不同图像。
因此,所述图像处理可以采用三级过程。在第一级,产生所述场景的第一图像。由于衍射效应,该图像将是该场景的被模糊图像。在第二级,可以把该图像划分成多个图像区域,并且可以对每个图像区域进行处理以便提高图像质量。最后,在第三级,可以组合来自其他图像的数据,以进一步提高所述图像的至少部分的图像质量。
如所提及的那样,可以通过获取所述场景的多个帧来提高已解码图像的质量,其中每个帧是利用不同的编码孔径阵列来捕获的。通过使用可重新配置的掩模装置,本发明可以非常容易地改变所述编码孔径掩模装置,并且采集所述场景的多个帧。可以利用适当的权重把所述不同帧组合在一起(正如可以利用适当的权重把针对不同的编码孔径阵列的掩模孔径函数组合在一起)。
所述处理器本身可以是实现用来解码所述图像的多种算法的数字信号处理器。当与所述可重新配置的编码孔径掩模组合使用时,这为所述成像***给出了增加的灵活度。适当的信号处理硬件包括检测器芯片上处理、微处理器、CPU或图形处理器(GPU)或其群集、现场可编程门阵列以及专用集成电路或其任意组合。
然而,如所提及的那样,所述检测器输出是自然加密的图像,因此在某些应用中,所述***可以包括发送器或记录器,用于发送/记录所述检测器输出以用于后续解码。所使用的编码孔径阵列可以随时间改变,周期性地改变或响应于某种外部指示而改变,以便改变所述加密“密钥”。
因此,本发明提供一种可适配的成像***,其可以在包括可见波段和紫外波段的波段范围内操作。如上所述,先前的编码孔径成像***并未被认为适于在可见波段或紫外波段中进行成像。因此,在本发明的另一方面,提供了一种可见波段成像***,其包括检测器阵列和可见波段编码孔径掩模装置。因此,本发明还可用于可以与可见波段***一起使用的掩模装置和解码算法。类似地,在本发明的另一方面,提供了一种紫外波段成像***,其包括检测器阵列和紫外波段编码孔径掩模装置。本发明的第一方面的所有实施例和优点都适用于本发明的这些方面-特别地,所述可见波段编码孔径掩模装置和紫外波段编码孔径掩模装置可以是可重新配置的。
除了改变所述FOV之外,本发明所提供的可重新配置的成像性能的另一例子是,通过制作粗糙结构(即具有大像素和像素间距)的编码孔径阵列,可以降低图像分辨率和数字信号处理器的处理负荷,从而对于给定数量的信号处理资源或***能量消耗允许更快的图像解码。
在本发明的另一方面,提供了一种成像方法,其包括以下步骤:把检测器阵列设置成通过可重新配置的编码孔径阵列装置观察场景;以及把编码孔径掩模写到该编码孔径掩模装置上。本发明的方法具有上面关于本发明的第一方面所描述的所有优点。
所述方法可以涉及到把第一编码孔径掩模写到所述编码孔径掩模装置上,并且随后把第二编码孔径掩模写到该编码孔径掩模装置上,其中第一和第二编码孔径掩模具有不同的视场和/或分辨率。此外,可以按照要求写不同的编码孔径掩模。如上所述,可以通过改变所述编码孔径阵列在所述编码孔径掩模内的位置(即所述编码孔径阵列出现在所述编码孔径掩模装置上的位置)来改变所述掩模的FOV。可以通过改变所述阵列中的孔径的间距和尺寸来改变分辨率。可以在所述编码孔径掩模装置上提供多中央凹(multifoveal)补片,以便提供单独的高质量图像。
所述方法优选地包括对所述检测器阵列的输出进行解码以便提供图像的步骤。这可以由本地处理器在该检测器阵列的输出上直接完成,或者可以发送所述输出以便进行远程解码或记录,并且稍后进行处理。所述解码步骤包括应用去卷积算法、互相关算法以及迭代解搜索中的一种或多种。
现在将例如仅仅参照附图来描述本发明,其中:
图1示意性地示出了根据本发明的编码孔径成像***;
图2示出了简单的平面编码孔径掩模装置,其可以操作在两种模式下,即a)完全FOR低分辨率成像模式和b)高分辨率窄FOV成像模式;
图3示出了可以在不同时间使用的某些掩模图案;
图4示出了弯曲的编码孔径掩模装置;
图5示出了对场景、典型的掩模图案、检测器阵列处的强度图案以及已解码图像的仿真;
图6示出了利用编码孔径成像***的3D成像的原理;
图7示出了利用去卷积算法来仿真衍射对图像质量的影响的数值计算的结果;以及
图8示出了被设置来通过弯曲表面进行成像的编码孔径成像***。
传统的摄影机***在其透镜***的焦平面处产生聚焦图像,其实际上固定了所述摄影机的深度。在这种***中,聚焦透镜通过引入径向变化的相移而提供了检测器前处理的所需元素,从而能够在单独射线束已经传播到所述透镜的焦平面时产生图像。菲涅耳衍射透镜***和波带片利用较薄的结构产生必需的相移,但是仍然要求单独射线束传播相同的距离。传统的反射和折射透镜***约束了当前的摄影机设计,而高性能***相对庞大并且昂贵地来生产。这种摄影机***的可适配性也受到限制,并且操控所述视场例如可能涉及到移动具有大转动惯量的庞大的光学组件。
本发明在重量轻、可适配的成像***中使用编码孔径成像(CAI)。CAI基于与针孔摄影机相同的原理。在针孔摄影机中,在离开景深更大的针孔的所有距离处都形成无色差的图像,从而允许期望更为紧凑的成像***。然而,主要的不利结果是差的强度吞吐量(intensitythroughput),这是由针孔的小的光收集特性所造成的。然而,所述摄影机仍然能够以由该针孔的直径所确定的分辨率产生图像,但是必须考虑衍射效应。通过使用针孔阵列,可以把所述***的光吞吐量提高几个数量级,同时保留角分辨率。对应于所述场景的每个视点,每个检测器元件都看到来自各个针孔的贡献相加的结果。
理解CAI的操作原理的另一种方式是观察到这是一种纯几何学成像技术。来自所述***的观测场(FOR)内的场景中的每个点的光都把所述编码孔径的阴影投射到所述检测器阵列上。检测器测量这些阴影的强度总和。所述编码孔径被特别设计成使得其自相关函数较尖锐并且具有非常低的旁瓣。通常使用伪随机或均匀冗余阵列(URA)(诸如在E.Fenimore和T.M.Cannon的“Coded aperture imaging withuniformly redundant arrays(利用均匀冗余阵列的编码孔径成像)”(Applied Optics,第17卷,第3期,第337-347页,1978年2月1日)中描述的均匀冗余阵列),其中对检测器强度图案的去卷积可以产生对所述场景中的点分布的良好近似。
图1示意性地示出了编码孔径成像***的例子,其总体上被标记为2。来自场景4中的点的光射线落到显示掩模的可重新配置的掩模装置6上。在该例中,整个掩模形成特定的编码孔径阵列。该编码孔径阵列充当阴影掩模,并且因此在检测器阵列8上产生一系列重叠的编码图像。在该检测器阵列上的每个像素处,来自重叠的编码图像的强度被求和。来自该检测器阵列8的输出被传递到处理器10,随后可以在该处利用多种数字信号处理技术从所述检测器信号中解码所述场景的图像。所述编码孔径掩模装置受到控制器12的控制,该控制器12控制该可重新配置的掩模装置来显示不同的编码孔径掩模。
如图2中所示,可重新配置的掩模装置6相对于检测器阵列8的尺寸和关系限定所述成像***的观测场。图2a示出了显示掩模的可重新配置的掩模装置,该掩模具有跨越其整个面积的粗糙的编码孔径阵列。图2a中的成像***正操作在全观测场(FOR)成像模式下,并且生成整个FOR的相对低分辨率的图像。该可重新配置的掩模装置可以随后被重新配置到图2b中示出的高分辨率模式,在该模式下,仅仅该掩模的小区域显示更精细分辨率的编码孔径阵列,该掩模的剩余部分是不透明的。辐射只能通过该掩模中承载所述编码孔径阵列的部分到达检测器阵列8,从而仅仅观测到窄视场(FOV),但是由于整个检测器阵列都接收辐射,所以图像的分辨率得到提高。因此,可以根据特定需求很容易地改变所述***的分辨率和FOV。例如,如果所述成像***将被用在安全监视***中,则其通常可以操作在全FOR低分辨率模式下,以监控区域。然而,当需要时,可以选择特定FOV以进行高分辨率成像。例如,如果要检测图像中的运动(由操作员检测或者利用图像处理自动检测),则可以对所述掩模装置进行重新配置,以便给出其中发生所述运动的区域的高分辨率图像。
显而易见,所述***的视场由显示在所述可重新配置的掩模装置上的编码孔径阵列的尺寸和位置确定。改变小阵列在所述掩模装置上的位置会改变所述视场。因此,通过简单地重新配置所述掩模装置以改变所述编码孔径阵列的位置,可以很容易地操纵所述成像***的视场。图3示出了可以被使用的一系列掩模图案。
在时间t=0处,整个掩模装置处在全FOR监视模式下,其中显示全尺寸的编码孔径阵列。在时间t=1处,该***切换到高分辨率跟踪及识别模式,在该模式下,仅仅该掩模中的部分显示编码孔径阵列,并且所述位置被移动(t=2、3等等),以跟踪场景中的对象。
因此,本发明提供了一种具有可快速重新配置的编码掩模,其可重新配置的程度足够高,以允许来自大FOR的辐射选择性地落在所述检测器阵列上。可以使用平面的掩模装置或弯曲的掩模装置或具有刻面的掩模装置。图4示出了弯曲掩模装置40的例子。如同平面掩模装置一样,弯曲掩模装置可以显示不同的编码孔径阵列,以提供不同的分辨率,并且可以改变该编码孔径阵列在所述掩模装置上的位置以改变所述FOV。然而,弯曲掩模装置的优点在于可以对于给定的***孔径进一步增大所述FOR,尽管其更难以制造。如上所述,所述编码孔径掩模装置的形状可以被设计成匹配其使用环境。例如,如果所述成像***将被用在飞机机翼中,则可以使用弯曲掩模装置,该曲线与机翼形状的曲线相匹配。这意味着在使用中,该成像***可以位于所述机翼中的适当部分处,其具有最佳的FOV而不会有损空气动力特性。可替换地,可以使用平面的或弯曲的或具有刻面的掩模,并且所述***可以被设置成通过弯曲表面(诸如机翼或飞机机头中的窗)进行成像,而不会遭受不可接受的光学像差。图8示出了编码孔径成像***,其具有检测器阵列8和被设置成通过弯曲表面82进行成像的编码孔径掩模6。
在所有情况下,该CAI方法所必需的相对宽的***孔径对于***质量和惯性具有相对小的影响,因为所述可重新配置的编码掩模的厚度纯粹由机械强度因素确定。更为传统的成像方法将要求***孔径中的某种形式的光强度,并且这与此处提出的CAI技术相比将有可能显著增大质量和转动惯量。
与具有可操纵的FOV的大多数其他***不同,本方法的特征在于,在所述CAI***中没有宏观移动部件。这在***响应时间、功率要求以及振动减轻方面产生显著的优点。取决于所选择的自适应掩模技术,所述灵活成像***的时间性能将有可能受到检测器阵列积分和读出时间的限制。
所述自适应掩模装置的关键要求是:其能够被重新配置;其所具有的像素可以在感兴趣的波段上被快速(对于某些应用理想地是<5ms)切换成透明的或不透明的;其分辨率能力与可能和所述***一起使用的检测器的分辨率能力相匹配(可见波段内的~5μm直到长波热波段(LWIR)内的25μm)。有利的要求包括在弯曲基板上制造的能力以及双稳态透射的能力。后者将对所述***的低功率操作有贡献,其中当所述掩模未被配置时对于该掩模不要求能量。
在可见波段内,可以采用多种液晶显示器技术。例如,对于可见和近红外波段掩模(原理上,热波段操作也是可能的)可以使用铁电液晶设备,其快速、固有地是二元的并且具有简单的矩阵寻址需求。所述铁电液晶设备还可能展现出双稳态行为。已经论证了小于10μs的切换速度、小至2μm的像素尺寸以及具有超过108个像素的像素计数的设备。可替换地,可以使用双稳态向列液晶技术,例如在美国专利6,249,332中所描述的表面光栅对准的顶点(zenithally)双稳态液晶。这是真实双稳态技术的例子,其可以利用塑料基板制造,并且是稳定的,可以抵抗机械冲击。
本领域技术人员将认识到,可以使用其他液晶技术作为自适应掩模装置。所述这些液晶技术中的某一些还可以被用到热红外,尽管某些向列液晶的切换速度可能会随着液晶单元间隙的平方而降低,而所述液晶单元间隙的平方必定会随着操作波长而增大。向列液晶切换速度由松弛效应控制,并且因此在10.6μm下是相当慢的~1s。铁电体可能是更适当的,其切换是完全电驱动的。附加的因素是,大多数相关的LC模式不可避免地具有某种偏振依赖性,从而必须有起偏振器和/或波片用于其操作。虽然增加的复杂度和降低的光学透射可能被视为缺陷,但是其属性还可以被用来为所述成像器给出增加的功能,例如给出偏振鉴别或分析。
可替换的不依赖于偏振的技术包括电致变色(当前致力于电子书应用)以及各种类型的悬浮粒子设备。
对于红外应用,二氧化钒调制器可以被用于自适应掩模。薄膜二氧化钒(VO2)在340K经历剪切相位变换。这种材料的电属性及红外光学属性受到所述相位变换的严重影响。在该相变温度以下,VO2是“不良”电绝缘体,并且在红外光谱区域内具有最小吸收。在该相变温度以上,VO2是不良导体,并且在红外内是不透明的。已经证实了绝缘相位与导电相位之间的快速电切换(20ns)。若干研究人员已经对于多种红外应用探究了这种材料以及相关材料,并且所述材料可以被适配成用于可重新配置的CAI掩模用途。
用于可重新配置的掩模装置的另一种有用候选技术是微光电机械***(MOEMS)空间光学调制器。MOEMS光学调制器是公知的,其中的某些利用光学干涉效应来控制光束的强度和/或相位。例如,在GB0521251中描述的调制器利用光学干涉效应来控制(多个)光束的强度和/或相位,并且是基于单个MOEMS光学调制器或MOEMS光学调制器阵列,其中,一个或多个可移动微镜被悬挂在基板之上。在该基板(例如硅)是透光的波长下,该装置可以被用于透射所述波长,并且该装置对于大得多的波长范围可以被用于反射。基于此类技术的调制器对于本发明是特别有用的。这种调制器能够调制具有多个波长和/或入射角的电磁辐射,或者可以被设置成调制具有单个波长的电磁辐射。
所述光学调制器可以被适配成调制对红外辐射的透射,更为优选地是调制以下各项中的至少一种:短波红外(SWIR)辐射(0.8-2.5μm)大气窗、中波红外(MWIR)辐射(3-5μm)大气窗以及长波红外(LWIR)辐射(8-14μm)大气窗。很方便的是,所述光学调制器基板对于SWIR、MWIR和LWIR辐射基本上是透射的。这种特性涉及到在所述光学调制器的基板层上制造光学谐振器之前的该基板层的透射属性。
本发明的自适应CAI方法的重要优点是在所述***中使用多种检测器技术的能力。对于检测器选择的许多考虑因素与对于更为传统的成像***相同。为了最大化所述***的性能,理想的检测器阵列特性包括高灵敏度和动态范围、良好的信噪比性能、高像素计数以及小像素间距。出于多种原因,未冷却的操作是优选的。执行芯片上检测器前处理的某种能力可能是有利的。
在可见波段和近红外波段中,可以使用的检测器阵列技术是互补金属氧化物半导体(CMOS)和电荷耦合器件(CCD)。二者在超过5百万像素的像素计数中均是可用的。CCD是一种成熟的技术,其优点是更高的灵敏度(比CMOS好~1个数量级)、更高的图像质量(低的固定图案噪声)、更小的像素间距(与7-8μm的CMOS相比,2.5μm或更小)。然而,CMOS技术仍然在进步,并且提供了把辅助电路(定时逻辑、曝光控制、模数转换、信号预处理等等)合并到检测器芯片上的能力。这样允许具有更小的***体积以及更低的功率消耗(例如低~3到10倍)的单芯片成像解决方案。对于可适配的CAI成像***来说,CMOS技术的主要优点是图像读出的灵活性。这种灵活性的例子有像素组合(binning)(即组合来自各组像素的输出)以及选择性加窗(windowing)(在高帧率下读出阵列的部分)。与适当的数字处理体系结构和算法相组合,这种操作模式将允许多种可适配的操作模式。
在热波段中,有多种冷却的和未冷却的热红外检测器技术可用。在这些技术当中,碲镉汞(CMT)和锑化铟(InSb)技术是用于热波段自适应CAI的主要候选。影响CAI性能的一个重要因素是检测器噪声的影响。这在热波段***中可能是更严重的问题。数值仿真表明,所检测到的强度图案的差的信噪比有降低已解码图像的对比度的效果。
本发明的自适应CAI方法的优点是其灵活性。可以使用多种解码算法。取决于当时的应用需要,可以相应地选择最适当的算法和参数。可以在先验已知的信息变为可用时对其进行更新,并且其可以进一步提高性能。还可以按照自然加密的方式把未解码或部分解码的图像从所述CAI***传送到远程位置,以便允许在需要时进行更为复杂的分析。
在现有技术中已经可得到多种CAI解码算法,这些解码算法中的大部分是针对离线解码开发的,所述离线编码涉及到与X射线、g射线以及放射线成像相关联的相对低像素计数检测器。对于实时解码应用来说,在选择适当算法时要考虑的因素包括对将要使用的检测器的信噪比特性的优化、掩模类型、与高效解码计算机体系结构的协同配合以及支持多种性能选项的可适配性。
在最一般的情况下,可以用下式来描述离开检测器阵列D的信号:
D(x,y)=S(x,y)A(x,y)+N(x,y) (1)
其中,x、y是二维信号分布的横线坐标,S是来自所述场景的信号,A是所述***中的掩模的孔径函数,N是在检测器处引入的噪声,并且是卷积运算符。所有这种算法的目的都是以尽可能少的伪像来恢复S(x,y)的部分(或全部)。取决于可使用CAI的应用,可以通过多种量度来量化这些伪像。例如,观看图像的人可能要求与用于自动(基于机器的)解译的量度不同的量度;检测、识别和/或跟踪将类似地要求适当的优化。
去卷积方法
利用去卷积来进行解码:
Si(x,y)=F-1[F(D(x,y))/F(A(x,y))]=S(x,y)+F-1[F(N(x,y))/F(A(x,y))] (2)
其中,F是傅立叶变换运算符。虽然在计算方面效率很高,但是F(A(x,y))可能具有小项(例如是大二元阵列的一般属性),从而导致有噪声的重建。适当的掩模设计将最小化这种效应。公知的是,精确的去卷积容易受到噪声的影响,因此与某些其他算法相比,检测器噪声对这种去卷积算法的影响可能更大。如在许多基于傅立叶的方法中那样,快速傅里叶变换(FFT)的速度可以导致这种算法的高效计算实现方式。图5示出了使用这种算法的结果。利用随机二元掩模52来对原始的3-5μm波段场景50进行成像。可以看出,在该检测器阵列处记录的像素强度54是编码图案。利用逆算法对该编码图案进行解码,以便产生原始图像的高质量版本56。
互相关方法
在这种技术中,通过将D(x,y)与阵列G(x,y)相关来解码S(x,y):
S’(x,y)=D(x,y)G(x,y)=S(x,y)A(x,y)G(x,y)+N(x,y))A(x,y)(3)
在G=A的简单情况下,掩模设计A使得其自相关非常近似德尔塔函数,而且具有小旁瓣。开发了均匀冗余阵列,以便在小阵列尺寸下实现这一点。如果是这种情况,则可以实现合理质量的重建。然而,即使在理想情况下,所述掩模函数的真正的积极特性也将导致自相关峰值的0.5倍的基值(pedestal),从而与理想情况的去卷积算法相比将导致重建质量的相关联的降低。更一般来说,G被选择成使得G≠A。在这种情况下,所述方法被称作“平衡互相关”,并且对于G的适当选择可以得到良好质量的重建。
同样地,基于傅立叶的实现方式在计算方面可以是高效的。一种紧密关联的方法是维纳滤波,其中使用加权的互相关。这种方法对于具有较差自相关函数的掩模来说是有用的。
最初的迹象是,在理想的无噪声情况(N=0)下,与所述去卷积算法相比,所述互相关方法所产生的重建较差。然而,对于N>0,所述互相关可能更为稳定。
在所述掩模装置于不同位置处提供多于一个不同的编码孔径阵列的情况下(以便同时提供不同的视场),所述检测器阵列将实际上是由每个所述编码孔径阵列所贡献的所有强度图案的总和。然而,对于任何一个所述阵列,基于所述孔径图案来处理信号都将仅仅显现如由该阵列所看到的图像。因此,可以恢复与每个单独的视场相关联的图像。
迭代恢复方法
可以使用对解空间的迭代搜索来恢复高质量图像。这些技术的例子包括最大熵方法和Land Weber算法。这些技术更加灵活,并且可以允许合并先验信息、区分优先次序的解码以及最小化由于噪声所导致的效应。虽然可以实现非常高质量的重建,但是这些算法的迭代特性使得它们相对慢,特别是对于大阵列尺寸尤其如此。
光子标记
把所检测到的光子经由所述掩模朝向所述场景中的特定角度位置进行背投影,有可能在所选区域上重建图像。这样,可用的计算资源可以被对准感兴趣的场景部分。因此,在利用CAI技术对场景进行中央凹的并且灵活的成像时,上述方法是另一种非常有价值的技术。
3D图像检索
在诸如核医学之类的应用中,CAI已经被用于3D图像检索。在这种应用中,CAI常常被称作“不相干全息术”。其原因是CAI图像是二维强度分布(与许多全息图一样),并且通过适当地选择解码内核(与在全息术中使用正确的“参考波”类似),可以检索所述场景的3D信息。深度分辨率通常比x-y分辨率低一数量级。图6示出了简单的原理:更加远离所述***的源60比起更近的源62所投射的编码孔径的阴影更小。
很明显,这种操作模式在许多应用中将是非常有价值的。在实现高质量三维***点扩散函数方面,基于强大的非线性优化的掩模设计显示出其前景。
有多种数字处理技术可用,这些技术允许进行视频速率后处理以及对所检测到的强度的图像进行解码。除了检测器芯片上处理(例如通过CMOS检测器阵列而成为可能)之外,所述数字处理技术还包括CPU和图形处理器(GPU)及其群集、数字信号处理(DSP)芯片、现场可编程阵列(FPGA)以及专用集成电路(ASIC)。FPGA是非常有吸引力的,因为它们灵活并且可以很经济地实现,而且可以被重新配置,因此通常将被使用在要求灵活性的***中。对于生产***,很可能将使用ASIC。ASIC具有更高的性能、更低的质量和功率消耗以及更低的单位成本数量。
除了定制的算法实现方式之外,FPGA和ASIC还提供比通用中央处理单元(CPU)更高的性能。例如,CPU/FPGA/ASIC的当前性能是-1-2Gflop/20Gflop/200Gflop(Gflop=每秒千兆次浮点运算)。FPGA和ASIC设备都有可能达到每秒千兆比特的数据传输速率。DSP、FPGA和ASIC的功率消耗与CPU相比也是有利的。作为当前的现有技术的例子,已知的高吞吐量快速傅里叶变换(FFT)核心在8.4ms内执行1024×1024的8比特FFT,并且在~17ms内执行涉及到2次FFT和与预先计算的内核(如在某些类别的CAI解码算法中所使用的那样)的标量乘法的去卷积或相关运算。
从前述内容可以明显看出,对所接收的强度图案进行解码要求关于所使用的特定编码孔径阵列的掩模孔径函数的知识。通常利用关于掩模及其相对于所述检测器阵列的位置的知识来在理论上计算所述掩模孔径函数。然而,这要求精确地对准所述掩模。方位中的任何未对准都是特别重要的,因为所述掩模的旋转可能导致由检测器感知到的不同图案。
为了降低对于精确对准的需求并且提高处理精度,校准类型的步骤可以涉及到利用所述编码孔径成像设备来对参考对象进行成像,以及利用由于该参考对象而在所述检测器阵列上得到的强度图案来形成解码图案。如果具有特定编码孔径的编码孔径成像(CAI)***被用来对点源进行成像,则所述检测器上的强度图案将实际上是由所述编码孔径所投射的阴影。因此,该强度图案给出了该特定编码孔径在相对于该检测器阵列的特定位置和方位下所要求的解码图案。
因此,所述强度图案被记录并且可以被直接用作所述解码算法中的掩模图案。直接使用该掩模图案可以具有这样的优点:所述掩模的任何衍射效应都存在于所记录的强度图案中。如前所述,CAI是一种纯几何学的成像技术。结果,可以预期由所述编码孔径掩模导致的任何衍射都会对成像性能产生不利影响。对于给定的波长,随着掩模到检测器距离的增大以及随着掩模孔径的减小,衍射都将变得更加显著。
在进行处理时,捕获固有地包括衍射效应的编码孔径掩模的图像可能在图像质量方面提供优点。
可以在进行存储之前处理所捕获的图案,以便例如提高对比度。
可替换地,可以使用理论上的掩模图案,但是在对所述参考对象进行成像时所记录的数据能被用来确定实际编码孔径阵列的未对准程度。可以把所捕获的强度图案与理论图案相关,并且基于所述相关把例如对方位的任何调节施加到所述理论图案。这样做的实际方法是检查所捕获的强度图案与理论图案的经过缩放和旋转的版本之间的相关性。产生最高相关性峰值的版本将表明所捕获的图案的缩放比例和方位。
由于所述编码孔径掩模装置是可重新配置的,所有其可以被重新配置成数个不同掩模中的任何一个,其中的每个掩模具有不同的编码孔径阵列,和/或所述编码孔径阵列位于该掩模装置上的不同位置处。因此,可以很方便地利用每个不同的掩模配置来对适当定位的参考对象进行成像,并且使用所述检测器处的强度图案来确定每个不同配置的解码图案。
如上所述,本发明允许使用弯曲的编码孔径阵列。为这种弯曲的编码孔径阵列生成理论上的解码图案可能涉及到大量计算。使用具有检测器阵列的弯曲的编码孔径阵列允许直接确定解码图案,而无需任何处理。
所述点源可以是利用显微镜物镜被聚焦到一点的激光束。对于远距离成像应用,所述点源可以是场景中的闪光或者由激光照亮的反向反射器。很明显,当记录来自点源的强度图案时,与该点源的强度相比,所述场景的剩余部分的强度水平应当较低。可以使用波长特定的点源来确保该点源的强度,或者该点源可以具有已调制的输出,并且可以使用对所述检测器阵列上的强度图案的处理来提取具有匹配调制并且因此对应于该点源的信号。
在通过长距离成像时,利用使用中的视场内的点源也可能是有利的,因为这样做允许进行大气像差校正。诸如由强照明装置(比如激光器)照亮的反向反射器那样的电源可以被定位在所述场景内。由辐射穿过大气的传播所导致的任何大气像差(即光学信号的失真)将导致该点源具有如在所述编码孔径成像器处所感知到的失真形状。于是,在所述检测器阵列处接收到的强度图案将是由正被这种失真源照亮的掩模所导致的强度图案。于是,该强度图案可以被用作解码图案,以用于解码任何图像。利用这种图案解码的失真点源的图像将实际上给出所述未失真点源的图像。因此,如果点源位于将被成像的场景内并且由该点源产生的强度图案被用作所述解码图案,则所述辐射从场景到成像器的传播中的任何失真都将被补偿。
如所提及的那样,CAI是纯几何学成像技术。结果,可以预期由所述编码孔径掩模导致的任何衍射都会对成像性能造成不利影响。对于给定的波长,随着掩模到检测器的距离增大以及随着掩模孔径减小,衍射将变得更加显著。对于基于CAI的成像器的最大角分辨率的情况,掩模孔径间距与检测器像素间距的尺寸相近,并且通常是所成像的光波长的大小的~10倍。计算表明,在这种情况下会发生显著的衍射。
幸运的是,已经发现衍射对已解码图像质量的影响可能不像所预期的那么严重:即使利用简单的去卷积内核也可以恢复良好的图像。在图7中示出了一例子,该图示出了具有不同衍射量的三个投影的掩模图案的仿真,即衍射掩模投影70、少许衍射72和严重衍射74。底行表示所重建的图像,并且可以看出,衍射对于图像质量确实具有某种影响。利用非衍射内核,在这些仿真中使用基本的去卷积。
还可以通过使用更为复杂的算法来进一步最小化衍射效应,例如使用多个数据帧和/或使用专门设计的孔径(比如软孔径函数)来最小化。所述函数可以由灰度透射函数形成,或者可以是二元透射类型,其中所述孔径的边缘具有子波长结构。还有可能使用如下掩模,该掩模的图案刻意导致感兴趣波段的入射辐射的衍射,并且在检测器阵列上产生作为调节良好的编码图案的衍射图案,也就是说,当***对来自场景的单一点进行成像时,形成在该检测器阵列处的衍射图案具有带有小旁瓣的尖锐的自相关函数。换句话说,在设计所述掩模时可以考虑到衍射,并且所述掩模依赖于衍射来产生编码图案。
使用被设计来导致衍射的掩模与传统的编码孔径成像的类似之处在于,其产生可以被解码来重建场景图像的编码图案。然而,与传统的编码孔径成像不同,可以刻意地使用导致衍射的掩模图案但是确保所衍射的图案本身是调节良好的,而在传统的编码孔径成像中,所述掩模图案被设计成调节良好的,并且确保只有最小的衍射,并且在处理中补偿来自该掩模的任何衍射效应。
这意味着确定角分辨率的是所述检测器阵列上的投影图案的特征尺寸。其不必与所述编码衍射掩模的特征尺寸直接相关(如标准编码孔径成像的情况那样),这允许一定程度的更大设计自由度。
应当注意到,使用考虑衍射来设计的编码孔径掩模与诸如在WO2000/17810中描述的使用衍射透镜的方法大不相同。利用衍射透镜的成像器用具有相同功能的衍射元件取代了传统的透镜。因此,这些***教导了衍射透镜,所述衍射透镜对辐射进行聚焦,以便在检测器平面处形成图像,其中,如在传统成像中那样,所述检测器阵列处的空间强度就是所述图像的空间强度。本发明的掩模并不对辐射进行聚焦,并且并不在检测器平面中产生图像。由具有衍射透镜的成像器成像的点源会在所述检测器阵列上产生一点。如果编码孔径阵列被设置成对该相同点进行成像,则结果将是所述检测器阵列(或其一大部分)上的编码强度图案,即需要被解码以便重建所述图像的不同于该图像的强度图案。使用考虑衍射来设计的掩模仅仅意味着在感兴趣的波长下,所述检测器阵列上的强度图案是调节良好的。
如果所述衍射掩模在检测器阵列处生成调节良好的图案,则可以按照类似于传统的编码孔径成像的方式基于该衍射图案使用简单的解码算法。可以使用更高级的解码技术来提高分辨率。
在热波段***中,检测器噪声可能更成问题。由于所述二元CAI掩模本身吸收了至少一半的进入的场景能量,所以导致这种情况被恶化。本发明的数值仿真表明,所检测到的强度图案的较差的信噪比会降低已解码图像的对比度。更为复杂的算法可以减轻这些效应。
如上所述,在提高图像质量和/或分辨率方面,使用多帧成像是特别有利的。使用多个不同的编码孔径掩模来对所述场景进行成像,并且组合来自多个帧的数据。使用几个不同的掩模可以减少信号中的噪声,并且还可以提高最终图像的分辨率。所使用的不同掩模的数目可以根据应用和根据场景演变而变化。例如,在缓慢改变的场景中或者在需要高质量图像的情况下,可以采集数个不同的帧,例如采集十个或二十个或五十个或一百个。在快速改变的场景中或者当跟踪移动目标时,可以组合较少的帧。然而,本发明提供了改变所组合的帧数以及按照需要使用的掩模图案的能力。
Claims (34)
1.一种编码孔径成像***,其包括检测器阵列和编码孔径掩模装置,其中,该编码孔径掩模装置是可重新配置的。
2.如权利要求1所述的成像***,其中,所述编码孔径掩模装置能被重新配置,以便提供具有不同视场的编码孔径掩模。
3.如权利要求2所述的成像***,其中,仅仅所述编码孔径掩模的部分包括编码孔径阵列,并且其中,该编码孔径阵列在掩模中的位置限定所述视场。
4.如任一在前权利要求所述的成像***,其中,所述编码孔径掩模装置能被重新配置,以便提供具有不同分辨率的编码孔径掩模。
5.如任一在前权利要求所述的成像***,其中,所述编码孔径掩模装置能被重新配置,以便提供具有不同编码孔径阵列的编码孔径掩模。
6.如任一在前权利要求所述的成像***,其中,所述可重新配置的编码孔径掩模装置包括控制器,该控制器被适配成把至少一个编码孔径掩模写到该编码孔径掩模装置上。
7.根据权利要求6所述的成像***,其中,利用多个不同的编码孔径掩模对所述控制器进行预编程。
8.如任一在前权利要求所述的成像***,其中,所述编码孔径掩模装置是非平面的。
9.如任一在前权利要求所述的成像***,其中,所述编码孔径掩模装置在少于150ms内、或少于100ms内、或少于50ms内、或少于15ms内、或少于10ms内、或少于5ms内能被重新配置。
10.如任一在前权利要求所述的成像***,其中,所述编码孔径掩模装置包括空间光调制器。
11.如权利要求10所述的成像***,其中,所述空间光调制器是双稳态的。
12.如权利要求10或11所述的成像***,其中,所述空间光调制器是液晶设备。
13.如任一在前权利要求所述的成像***,其包括处理器,该处理器被适配成对所述检测器阵列的输出进行解码来提供图像。
14.如权利要求13所述的成像***,其中,所述处理器被适配成应用多种解码算法,以便对所述检测器阵列的输出进行解码。
15.如权利要求13或14中的任一权利要求所述的成像***,其中,所述处理器组合来自所述检测器阵列的多帧数据,每一帧是利用不同的编码孔径掩模来采集的。
16.如权利要求1-12中的任一权利要求所述的成像***,其包括发送器/记录器,用于发送/记录所述检测器阵列的未被解码的输出。
17.如权利要求16所述的成像***,其中,所述可重新配置的编码孔径阵列装置被适配成改变所显示的编码孔径掩模,以便改变图像加密。
18.一种可见波段成像***,其包括检测器阵列和可见波段编码孔径掩模装置。
19.一种紫外波段成像***,其包括检测器阵列和紫外波段编码孔径掩模装置。
20.一种红外波段成像***,其包括检测器阵列和红外波段编码孔径掩模装置。
21.一种成像方法,其包括以下步骤:把检测器阵列设置成通过可重新配置的编码孔径阵列装置来观看场景,以及把编码孔径掩模写到该编码孔径掩模装置上。
22.如权利要求21所述的成像方法,其把第一编码孔径掩模写到所述编码孔径掩模装置上,并且随后把第二编码孔径掩模写到该编码孔径掩模装置上。
23.如权利要求22所述的成像方法,其中,第一和第二编码孔径掩模具有不同的视场和/或分辨率。
24.如权利要求21到23中的任一权利要求所述的成像方法,其中,该方法包括以下步骤:对所述检测器阵列的输出进行解码,以便提供图像。
25.如权利要求24所述的方法,其中,所述解码步骤包括:应用去卷积算法、互相关算法以及迭代解搜索中的一种或多种。
26.如权利要求22所述的方法,其中,该方法涉及到在解码所述图像时组合利用多个不同的编码孔径掩模所采集的数据。
27.一种成像***,其包括被设置成通过非平面元件进行成像的编码孔径成像器。
28.如权利要求27所述的成像***,其中,所述编码孔径成像器包括至少一个检测器和编码孔径掩模装置。
29.如权利要求28所述的成像***,其中,所述编码孔径掩模装置是能被重新配置的。
30.如权利要求27-29中的任一权利要求所述的成像***,其中,所述非平面元件形成平台的外表面的部分。
31.如权利要求27-30中的任一权利要求所述的成像***,其中,所述非平面元件具有空气动力学形状。
32.一种编码孔径成像***,其具有多个检测器阵列,所述检测器阵列被设置成通过编码孔径掩模接收来自场景的辐射。
33.如权利要求32所述的编码孔径成像***,其中,每个检测器阵列具有用于接收辐射的有效检测器区域和无效***区域。
34.如权利要求29-30中的任一权利要求所述的编码孔径成像***,其中,至少一个检测器阵列的有效区域与相邻检测器阵列的有效区域不邻接。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
GB0510470.8 | 2005-05-23 | ||
GBGB0510470.8A GB0510470D0 (en) | 2005-05-23 | 2005-05-23 | Coded aperture imaging system |
Publications (1)
Publication Number | Publication Date |
---|---|
CN101228460A true CN101228460A (zh) | 2008-07-23 |
Family
ID=34834483
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNA2006800269897A Pending CN101228460A (zh) | 2005-05-23 | 2006-05-23 | 编码孔径成像*** |
Country Status (9)
Country | Link |
---|---|
US (1) | US7888626B2 (zh) |
EP (1) | EP1883839B1 (zh) |
JP (1) | JP5334574B2 (zh) |
KR (1) | KR20080021040A (zh) |
CN (1) | CN101228460A (zh) |
AU (1) | AU2006250988A1 (zh) |
CA (1) | CA2608377A1 (zh) |
GB (1) | GB0510470D0 (zh) |
WO (1) | WO2006125975A1 (zh) |
Cited By (35)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102273213A (zh) * | 2009-01-29 | 2011-12-07 | 三星电子株式会社 | 图像数据获得方法和图像数据获得设备 |
CN102540238A (zh) * | 2010-12-31 | 2012-07-04 | 同方威视技术股份有限公司 | 伽马相机和利用伽马相机检测辐射射线的方法 |
CN102595171A (zh) * | 2012-02-03 | 2012-07-18 | 浙江工商大学 | 一种多通道空时编码孔径的动态光场成像方法和成像*** |
CN102592514A (zh) * | 2011-01-10 | 2012-07-18 | 三星电子株式会社 | 具有光感测功能的有机发光二极管显示装置 |
CN102871638A (zh) * | 2012-10-16 | 2013-01-16 | 广州市盛光微电子有限公司 | 一种医用近距离成像方法、***以及探头 |
CN102891956A (zh) * | 2012-09-25 | 2013-01-23 | 北京理工大学 | 基于编码孔径透镜阵列的压缩成像***的设计方法 |
CN102890974A (zh) * | 2012-10-16 | 2013-01-23 | 中国科学院高能物理研究所 | 编码孔径成像***及其编码码板 |
CN102973245A (zh) * | 2012-11-30 | 2013-03-20 | 广州市盛光微电子有限公司 | 一种近距离成像装置 |
CN103827920A (zh) * | 2011-09-28 | 2014-05-28 | 皇家飞利浦有限公司 | 根据图像的对象距离确定 |
CN103995273A (zh) * | 2014-05-08 | 2014-08-20 | 中国科学院高能物理研究所 | 一种全景成像装置及探头 |
CN104015358A (zh) * | 2014-06-03 | 2014-09-03 | 中国科学院高能物理研究所 | 一种编码准直器的制作方法 |
CN104115484A (zh) * | 2012-02-07 | 2014-10-22 | 阿尔卡特朗讯 | 无透镜压缩图像采集 |
CN104182579A (zh) * | 2014-08-20 | 2014-12-03 | 天津大学 | 一种编码掩模光学成像***的建模方法 |
CN104581166A (zh) * | 2014-12-08 | 2015-04-29 | 天津大学 | 一种基于多通道采集影像的压缩成像***及方法 |
CN106232045A (zh) * | 2014-01-04 | 2016-12-14 | 韦杰.阿加沃尔 | 用于光动力学疗法的装置和方法 |
CN106768327A (zh) * | 2016-12-06 | 2017-05-31 | 中国科学院光电技术研究所 | 一种液晶可调谐滤波器成像光谱重建方法 |
CN107736012A (zh) * | 2015-06-17 | 2018-02-23 | 麦克赛尔株式会社 | 摄像装置 |
CN107896292A (zh) * | 2016-10-04 | 2018-04-10 | 株式会社日立制作所 | 摄像装置和摄像方法 |
CN108318911A (zh) * | 2018-04-04 | 2018-07-24 | 中国科学院高能物理研究所 | 编码板 |
CN108801468A (zh) * | 2018-07-05 | 2018-11-13 | 南开大学 | 一种微悬臂梁阵列光学读出成像***和方法 |
CN109814290A (zh) * | 2019-03-15 | 2019-05-28 | 京东方科技集团股份有限公司 | 一种显示装置及其控制方法、计算机可读介质 |
CN110780333A (zh) * | 2019-09-30 | 2020-02-11 | 南京航空航天大学 | 一种基于双编码板的伽马相机及其用于放射性物质定位的方法 |
CN111201776A (zh) * | 2017-10-19 | 2020-05-26 | 索尼公司 | 成像设备和方法以及图像处理设备和方法 |
CN111201780A (zh) * | 2017-10-19 | 2020-05-26 | 索尼公司 | 成像装置和方法以及图像处理装置和方法 |
CN111213158A (zh) * | 2018-08-29 | 2020-05-29 | 指纹卡有限公司 | 具有编码孔掩模的显示器内光学指纹传感器 |
CN111310514A (zh) * | 2018-12-11 | 2020-06-19 | 上海耕岩智能科技有限公司 | 编码遮罩生物特征重建方法及存储介质 |
CN111310513A (zh) * | 2018-12-11 | 2020-06-19 | 上海耕岩智能科技有限公司 | 编码遮罩式屏下生物特征识别结构、***及方法 |
CN111344533A (zh) * | 2017-10-27 | 2020-06-26 | 诺基亚技术有限公司 | 用于检测光的装置、***和方法 |
CN111788824A (zh) * | 2018-03-06 | 2020-10-16 | 索尼公司 | 图像处理装置、成像装置以及图像处理方法 |
CN113710160A (zh) * | 2019-02-18 | 2021-11-26 | 阿戈斯佩技术公司 | 用于医学成像***的准直器及其图像重构方法 |
US11223787B2 (en) | 2017-10-19 | 2022-01-11 | Sony Corporation | Information processing apparatus, information processing method, and imaging apparatus |
US11318332B2 (en) | 2019-02-13 | 2022-05-03 | Alpheus Medical, Inc. | Methods of treating tumors with pro drugs |
US11375103B2 (en) | 2017-10-19 | 2022-06-28 | Sony Corporation | Imaging device, image processing apparatus, and image processing method |
US11399134B2 (en) | 2018-03-14 | 2022-07-26 | Sony Corporation | Image processing apparatus, imaging apparatus, and image processing method |
CN116563117A (zh) * | 2023-07-11 | 2023-08-08 | 长春理工大学 | 基于计算成像技术的超分辨率共形窗口成像***及方法 |
Families Citing this family (76)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB0510470D0 (en) | 2005-05-23 | 2005-06-29 | Qinetiq Ltd | Coded aperture imaging system |
GB2434936A (en) | 2006-02-06 | 2007-08-08 | Qinetiq Ltd | Imaging system having plural distinct coded aperture arrays at different mask locations |
GB2434935A (en) | 2006-02-06 | 2007-08-08 | Qinetiq Ltd | Coded aperture imager using reference object to form decoding pattern |
GB0602380D0 (en) | 2006-02-06 | 2006-03-15 | Qinetiq Ltd | Imaging system |
GB2434877A (en) | 2006-02-06 | 2007-08-08 | Qinetiq Ltd | MOEMS optical modulator |
GB2434937A (en) * | 2006-02-06 | 2007-08-08 | Qinetiq Ltd | Coded aperture imaging apparatus performing image enhancement |
GB2434934A (en) * | 2006-02-06 | 2007-08-08 | Qinetiq Ltd | Processing coded aperture image data by applying weightings to aperture functions and data frames |
GB0615040D0 (en) | 2006-07-28 | 2006-09-06 | Qinetiq Ltd | Processing method for coded apperture sensor |
US8129686B2 (en) * | 2007-09-12 | 2012-03-06 | Morpho Detection, Inc. | Mask for coded aperture systems |
US8229294B2 (en) * | 2007-12-10 | 2012-07-24 | Mitsubishi Electric Research Laboratories, Inc. | Cameras with varying spatio-angular-temporal resolutions |
US8243353B1 (en) | 2008-04-07 | 2012-08-14 | Applied Science Innovations, Inc. | Holography-based device, system and method for coded aperture imaging |
GB0814562D0 (en) * | 2008-08-08 | 2008-09-17 | Qinetiq Ltd | Processing for coded aperture imaging |
GB0822281D0 (en) * | 2008-12-06 | 2009-01-14 | Qinetiq Ltd | Optically diverse coded aperture imaging |
KR101563728B1 (ko) | 2009-01-30 | 2015-10-27 | 삼성전자 주식회사 | 가변 모듈레이터를 이용한 다중시야 광필드 데이터 획득장치 및 그 방법 |
WO2010103527A2 (en) * | 2009-03-13 | 2010-09-16 | Ramot At Tel-Aviv University Ltd. | Imaging system and method for imaging objects with reduced image blur |
US9594346B2 (en) * | 2009-04-01 | 2017-03-14 | Ben-Gurion University Of The Negev Research And Development Authority | Method and system for imaging an object using incoherent light |
GB0906449D0 (en) * | 2009-04-15 | 2009-05-20 | Phase Focus Ltd | Improvements in imaging |
CN102802509B (zh) * | 2009-05-27 | 2017-06-09 | 美国亚德诺半导体公司 | 多用途光学传感器 |
JP5361546B2 (ja) * | 2009-06-03 | 2013-12-04 | キヤノン株式会社 | レンズ装置、及びその制御方法 |
CN101964866B (zh) * | 2009-07-24 | 2013-03-20 | 鸿富锦精密工业(深圳)有限公司 | 计算摄像型数码相机 |
EP2296031A1 (en) * | 2009-09-11 | 2011-03-16 | Astrium Limited | Detecting electromagnetic radiation |
US8558182B2 (en) * | 2009-10-09 | 2013-10-15 | University Of Rochester | Optical element, device, method, and applications |
JP5477464B2 (ja) * | 2010-04-21 | 2014-04-23 | 富士通株式会社 | 撮像装置 |
DE102010023344A1 (de) | 2010-06-10 | 2012-01-19 | Arnold & Richter Cine Technik Gmbh & Co. Betriebs Kg | Kameraobjektiv und Kamerasystem |
US20120069209A1 (en) * | 2010-09-22 | 2012-03-22 | Qualcomm Mems Technologies, Inc. | Lensless camera controlled via mems array |
US9344736B2 (en) | 2010-09-30 | 2016-05-17 | Alcatel Lucent | Systems and methods for compressive sense imaging |
US9319578B2 (en) | 2012-10-24 | 2016-04-19 | Alcatel Lucent | Resolution and focus enhancement |
CN102542091B (zh) * | 2010-12-30 | 2013-06-05 | 中国科学院沈阳自动化研究所 | 一种光电成像过程软件仿真平台的实现方法 |
GB201104876D0 (en) | 2011-03-23 | 2011-05-04 | Mbda Uk Ltd | Optical processing method and apparatus |
GB201104873D0 (en) | 2011-03-23 | 2011-05-04 | Mbda Uk Ltd | Encoded image processing apparatus and method |
JP5830348B2 (ja) | 2011-10-26 | 2015-12-09 | オリンパス株式会社 | 撮像装置 |
JP2015019119A (ja) | 2011-11-10 | 2015-01-29 | パナソニック株式会社 | 画ブレ補正装置 |
US8912493B2 (en) * | 2012-01-13 | 2014-12-16 | Raytheon Company | High resolution thermography |
US20140098063A1 (en) * | 2012-10-10 | 2014-04-10 | Research In Motion Limited | Electronic device with proximity sensing |
US10298858B2 (en) * | 2012-11-30 | 2019-05-21 | Robert Bosch Gmbh | Methods to combine radiation-based temperature sensor and inertial sensor and/or camera output in a handheld/mobile device |
US8907288B2 (en) * | 2013-02-15 | 2014-12-09 | Raytheon Company | Digitally scanned multi-cell electro-optic sensor |
US9431141B1 (en) | 2013-04-30 | 2016-08-30 | The United States Of America As Represented By The Secretary Of The Air Force | Reconfigurable liquid attenuated collimator |
US9654741B2 (en) * | 2013-07-09 | 2017-05-16 | Siemens Energy, Inc. | System and method for optical fiber based image acquisition suitable for use in turbine engines |
US9681051B2 (en) | 2013-08-19 | 2017-06-13 | Massachusetts Institute Of Technology | Method and apparatus for motion coded imaging |
JP5700319B1 (ja) * | 2013-09-24 | 2015-04-15 | 株式会社豊田放射線研究所 | 放射線源可視化装置及び放射線源可視化方法 |
JP2015133594A (ja) | 2014-01-10 | 2015-07-23 | 株式会社リコー | 撮像モジュール及び撮像装置 |
EP3102976B1 (en) * | 2014-02-06 | 2020-10-07 | Bar-Ilan University | System and method for imaging with pinhole arrays |
ES2897650T3 (es) * | 2014-05-22 | 2022-03-02 | Australian Nuclear Science & Tech Organisation | Detección de imágenes de rayos gamma |
US9526468B2 (en) | 2014-09-09 | 2016-12-27 | General Electric Company | Multiple frame acquisition for exposure control in X-ray medical imagers |
US9922173B2 (en) * | 2014-09-18 | 2018-03-20 | Claydo Lab Ltd. | Digital rights management |
US9721755B2 (en) | 2015-01-21 | 2017-08-01 | Arcam Ab | Method and device for characterizing an electron beam |
EP3251338A1 (en) | 2015-01-29 | 2017-12-06 | William Marsh Rice University | Lensless imaging system using an image sensor with one or more attenuating layers |
US10151629B2 (en) | 2015-03-19 | 2018-12-11 | University Of Delaware | Spectral imaging sensors and methods with time of flight sensing |
US10928252B2 (en) | 2016-02-11 | 2021-02-23 | Carrier Corporation | Compressive sensing detector |
US10753869B2 (en) | 2016-07-29 | 2020-08-25 | William Marsh Rice University | Lensless imaging device for microscopy and fingerprint biometric |
JP6753474B2 (ja) * | 2016-12-26 | 2020-09-09 | 日本電気株式会社 | レーダー間干渉除去方法、信号処理装置、信号処理方法および信号処理プログラム |
US10620316B2 (en) | 2017-05-05 | 2020-04-14 | Qualcomm Incorporated | Systems and methods for generating a structured light depth map with a non-uniform codeword pattern |
US10987071B2 (en) * | 2017-06-29 | 2021-04-27 | University Of Delaware | Pixelated K-edge coded aperture system for compressive spectral X-ray imaging |
US10712129B2 (en) * | 2017-08-23 | 2020-07-14 | Rosemount Aerospace Inc. | Terminal-imaging seeker with software defined optics |
WO2019078335A1 (ja) * | 2017-10-19 | 2019-04-25 | ソニー株式会社 | 撮像装置および方法、並びに、画像処理装置および方法 |
WO2019078333A1 (ja) * | 2017-10-19 | 2019-04-25 | ソニー株式会社 | 撮像装置、露出制御方法、プログラム、及び、撮像素子 |
EP3743681A1 (en) | 2018-01-22 | 2020-12-02 | Fnv Ip B.V. | Surveying instrument for and surveying method of surveying reference points |
KR102457462B1 (ko) * | 2018-03-06 | 2022-10-21 | 삼성전자주식회사 | 전자장치의 이미지 처리 장치 및 방법 |
US11423814B2 (en) * | 2018-08-02 | 2022-08-23 | Meta Platforms Technologies, Llc | Wearable display with coherent replication |
JP2020067625A (ja) * | 2018-10-26 | 2020-04-30 | 国立大学法人九州工業大学 | 光学装置 |
CA3121279A1 (en) | 2018-11-30 | 2020-06-04 | Joseph J.K. MA | Ocular systems, devices, and methods |
JP6737325B2 (ja) * | 2018-12-25 | 2020-08-05 | 株式会社リコー | 撮像モジュール及び撮像装置 |
US20220099850A1 (en) * | 2019-01-07 | 2022-03-31 | Lensfree Ltd. | System and method for use in imaging |
JP6636663B2 (ja) * | 2019-02-28 | 2020-01-29 | マクセル株式会社 | 撮像装置及び画像生成方法 |
US11308310B2 (en) | 2019-03-21 | 2022-04-19 | Samsung Electronics Co., Ltd. | Electronic device including image sensor and method of operating the same |
US11889199B2 (en) * | 2019-06-04 | 2024-01-30 | Sony Group Corporation | Imaging device, signal processing device, signal processing method, program, and imaging apparatus |
US11132757B2 (en) * | 2019-08-27 | 2021-09-28 | Rosemount Aerospace Inc. | Secure image transmission |
EP3805810A1 (de) | 2019-10-07 | 2021-04-14 | Siemens Healthcare GmbH | Röntgenbildgebungsvorrichtung und röntgenbildgebungsverfahren |
WO2021111888A1 (ja) * | 2019-12-03 | 2021-06-10 | ソニーグループ株式会社 | 撮像装置の製造装置、および撮像装置の製造方法、並びに撮像装置 |
JP6947891B2 (ja) * | 2019-12-18 | 2021-10-13 | マクセル株式会社 | 携帯情報端末 |
JP6770164B2 (ja) * | 2019-12-18 | 2020-10-14 | マクセル株式会社 | 撮像装置 |
US11624588B2 (en) | 2020-06-25 | 2023-04-11 | Simmonds Precision Products, Inc. | Coded aperture seeker for navigation |
EP4207736A4 (en) * | 2020-08-27 | 2024-01-31 | Panasonic Intellectual Property Corporation of America | IMAGE PROCESSING DEVICE, METHOD FOR TRAINING A MACHINE LEARNING MODEL, IDENTIFICATION DEVICE AND IMAGE PROCESSING METHOD |
JP7137290B2 (ja) * | 2020-09-24 | 2022-09-14 | マクセル株式会社 | 撮像装置 |
DE102020127891A1 (de) * | 2020-10-22 | 2022-04-28 | Deutsches Zentrum für Luft- und Raumfahrt e.V. | System und Verfahren zur optischen Kommunikation |
US20240154784A1 (en) * | 2022-11-02 | 2024-05-09 | Nec Laboratories America, Inc. | Optical encryption camera |
Family Cites Families (87)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US3860821A (en) * | 1970-10-02 | 1975-01-14 | Raytheon Co | Imaging system |
US3791275A (en) | 1972-10-17 | 1974-02-12 | Xerox Corp | Multiple image formation through self-imaging |
US3961191A (en) * | 1974-06-26 | 1976-06-01 | Raytheon Company | Coded imaging systems |
US4075483A (en) * | 1976-07-12 | 1978-02-21 | Raytheon Company | Multiple masking imaging system |
US4092540A (en) * | 1976-10-26 | 1978-05-30 | Raytheon Company | Radiographic camera with internal mask |
US4165462A (en) * | 1977-05-05 | 1979-08-21 | Albert Macovski | Variable code gamma ray imaging system |
US4209780A (en) * | 1978-05-02 | 1980-06-24 | The United States Of America As Represented By The United States Department Of Energy | Coded aperture imaging with uniformly redundant arrays |
JPS55146411A (en) | 1979-05-01 | 1980-11-14 | Junpei Tsujiuchi | Image reproducing method using coded opening |
JPS5860723A (ja) * | 1981-10-06 | 1983-04-11 | Hamamatsu Tv Kk | コ−ド化板でエンコ−ドされた像の再生装置 |
US4830485A (en) | 1987-11-23 | 1989-05-16 | General Electric Company | Coded aperture light detector for three dimensional camera |
DE4003698C2 (de) | 1990-02-07 | 1994-09-08 | Wild Heerbrugg Ag | Wellenfrontsensor |
JPH045620A (ja) | 1990-04-23 | 1992-01-09 | Canon Inc | 光電変換装置 |
US5115335A (en) * | 1990-06-29 | 1992-05-19 | The United States Of America As Represented By The Secretary Of The Air Force | Electrooptic fabry-perot pixels for phase-dominant spatial light modulators |
US5233459A (en) * | 1991-03-06 | 1993-08-03 | Massachusetts Institute Of Technology | Electric display device |
US5311360A (en) * | 1992-04-28 | 1994-05-10 | The Board Of Trustees Of The Leland Stanford, Junior University | Method and apparatus for modulating a light beam |
US5477383A (en) | 1993-02-05 | 1995-12-19 | Apa Optics, Inc. | Optical array method and apparatus |
US5448053A (en) | 1993-03-01 | 1995-09-05 | Rhoads; Geoffrey B. | Method and apparatus for wide field distortion-compensated imaging |
US5448395A (en) * | 1993-08-03 | 1995-09-05 | Northrop Grumman Corporation | Non-mechanical step scanner for electro-optical sensors |
FR2710161B1 (fr) * | 1993-09-13 | 1995-11-24 | Suisse Electronique Microtech | Réseau miniature d'obturateurs de lumière. |
US5606165A (en) | 1993-11-19 | 1997-02-25 | Ail Systems Inc. | Square anti-symmetric uniformly redundant array coded aperture imaging system |
DE4342526A1 (de) * | 1993-12-15 | 1995-06-22 | Forschungszentrum Juelich Gmbh | Durchstrahlung diffuser Streuer mit hoher Ortsauflösung |
DE69426689T2 (de) | 1993-12-20 | 2001-08-02 | Eastman Kodak Co., Rochester | CCD-Bildsensor mit reduziertem Übersprechen zwischen Fotodioden |
US5500761A (en) * | 1994-01-27 | 1996-03-19 | At&T Corp. | Micromechanical modulator |
US5519529A (en) * | 1994-02-09 | 1996-05-21 | Martin Marietta Corporation | Infrared image converter |
US5636052A (en) * | 1994-07-29 | 1997-06-03 | Lucent Technologies Inc. | Direct view display based on a micromechanical modulation |
US5841579A (en) * | 1995-06-07 | 1998-11-24 | Silicon Light Machines | Flat diffraction grating light valve |
US5636001A (en) * | 1995-07-31 | 1997-06-03 | Collier; John | Digital film camera and digital enlarger |
JPH09113819A (ja) | 1995-10-13 | 1997-05-02 | Fuji Photo Optical Co Ltd | ズーム機能を有する電子内視鏡装置 |
US5825528A (en) * | 1995-12-26 | 1998-10-20 | Lucent Technologies Inc. | Phase-mismatched fabry-perot cavity micromechanical modulator |
GB2314664A (en) | 1996-06-27 | 1998-01-07 | Sharp Kk | Address generator,display and spatial light modulator |
US5710656A (en) * | 1996-07-30 | 1998-01-20 | Lucent Technologies Inc. | Micromechanical optical modulator having a reduced-mass composite membrane |
US5838484A (en) * | 1996-08-19 | 1998-11-17 | Lucent Technologies Inc. | Micromechanical optical modulator with linear operating characteristic |
AUPO615297A0 (en) | 1997-04-10 | 1997-05-08 | Commonwealth Scientific And Industrial Research Organisation | Imaging system and method |
US5870221A (en) * | 1997-07-25 | 1999-02-09 | Lucent Technologies, Inc. | Micromechanical modulator having enhanced performance |
US6069361A (en) * | 1997-10-31 | 2000-05-30 | Eastman Kodak Company | Imaging resolution of X-ray digital sensors |
US7006132B2 (en) * | 1998-02-25 | 2006-02-28 | California Institute Of Technology | Aperture coded camera for three dimensional imaging |
GB2350472B (en) | 1998-03-10 | 2002-03-13 | Secr Defence | Three-dimensional imaging system |
US5953161A (en) * | 1998-05-29 | 1999-09-14 | General Motors Corporation | Infra-red imaging system using a diffraction grating array |
US5995251A (en) * | 1998-07-16 | 1999-11-30 | Siros Technologies, Inc. | Apparatus for holographic data storage |
US5949571A (en) * | 1998-07-30 | 1999-09-07 | Lucent Technologies | Mars optical modulators |
US5943155A (en) * | 1998-08-12 | 1999-08-24 | Lucent Techonolgies Inc. | Mars optical modulators |
GB9820664D0 (en) * | 1998-09-23 | 1998-11-18 | Isis Innovation | Wavefront sensing device |
MXPA01003035A (es) | 1998-09-24 | 2002-04-09 | Secr Defence | Mejoras relacionadas a reconocimiento de patron. |
US6034807A (en) * | 1998-10-28 | 2000-03-07 | Memsolutions, Inc. | Bistable paper white direct view display |
AU2730000A (en) | 1999-01-29 | 2000-08-18 | Digilens Inc. | Optical sensor |
US6392235B1 (en) * | 1999-02-22 | 2002-05-21 | The Arizona Board Of Regents On Behalf Of The University Of Arizona | Coded-aperture system for planar imaging of volumetric sources |
US6195412B1 (en) * | 1999-03-10 | 2001-02-27 | Ut-Battelle, Llc | Confocal coded aperture imaging |
US6396976B1 (en) * | 1999-04-15 | 2002-05-28 | Solus Micro Technologies, Inc. | 2D optical switch |
US6430333B1 (en) * | 1999-04-15 | 2002-08-06 | Solus Micro Technologies, Inc. | Monolithic 2D optical switch and method of fabrication |
US6519073B1 (en) * | 2000-01-10 | 2003-02-11 | Lucent Technologies Inc. | Micromechanical modulator and methods for fabricating the same |
US6737652B2 (en) * | 2000-09-29 | 2004-05-18 | Massachusetts Institute Of Technology | Coded aperture imaging |
US6467879B1 (en) * | 2000-10-16 | 2002-10-22 | Xerox Corporation | Method and apparatus for preventing degradation of electrostatically actuated devices |
US6424450B1 (en) * | 2000-11-29 | 2002-07-23 | Aralight, Inc. | Optical modulator having low insertion loss and wide bandwidth |
GB0029224D0 (en) | 2000-11-30 | 2001-01-17 | Secr Defence | Optical filters |
US20020086456A1 (en) | 2000-12-19 | 2002-07-04 | Cunningham Shawn Jay | Bulk micromachining process for fabricating an optical MEMS device with integrated optical aperture |
US6804429B2 (en) * | 2001-02-09 | 2004-10-12 | The Board Of Trustees Of The Leland Stanford Junior University | Reconfigurable wavelength multiplexers and filters employing micromirror array in a gires-tournois interferometer |
US7026602B2 (en) * | 2001-04-13 | 2006-04-11 | Research Triangle Institute | Electromagnetic radiation detectors having a microelectromechanical shutter device |
JP2003004441A (ja) * | 2001-06-18 | 2003-01-08 | Hitachi Ltd | 距離計測方法および距離計測機能を有する画像入力装置 |
US7158180B2 (en) * | 2001-12-31 | 2007-01-02 | Texas Instruments Incorporated | System and method for varying exposure time for different parts of a field of view while acquiring an image |
US7283112B2 (en) * | 2002-03-01 | 2007-10-16 | Microsoft Corporation | Reflective microelectrical mechanical structure (MEMS) optical modulator and optical display system |
US6990368B2 (en) * | 2002-04-04 | 2006-01-24 | Surgical Navigation Technologies, Inc. | Method and apparatus for virtual digital subtraction angiography |
US6819463B2 (en) * | 2002-05-10 | 2004-11-16 | Corporation For National Research Initiatives | Electro-optic phase-only spatial light modulator |
GB2418028B (en) | 2003-05-07 | 2007-08-01 | Qinetiq Ltd | Dynamic optical reflector and interrogation system |
KR20060115961A (ko) * | 2003-05-13 | 2006-11-13 | 익시이드 이미징 리미티드 | 이미지 해상도를 향상시키기 위한 광학적 방법 및 시스템 |
US7110082B2 (en) | 2003-06-24 | 2006-09-19 | Asml Holding N.V. | Optical system for maskless lithography |
DE60305022T2 (de) | 2003-07-02 | 2006-11-23 | Berner Fachhochschule Hochschule für Technik und Architektur Biel | Verfahren und Vorrichtung zur Abbildung mit kodierter Blende |
US6856449B2 (en) * | 2003-07-10 | 2005-02-15 | Evans & Sutherland Computer Corporation | Ultra-high resolution light modulation control system and method |
GB2414881A (en) | 2004-06-01 | 2005-12-07 | Imp College Innovations Ltd | Imaging system capable of reproducing a wide range of intensities |
US7283231B2 (en) * | 2004-07-20 | 2007-10-16 | Duke University | Compressive sampling and signal inference |
US7767949B2 (en) * | 2005-01-18 | 2010-08-03 | Rearden, Llc | Apparatus and method for capturing still images and video using coded aperture techniques |
US7671321B2 (en) * | 2005-01-18 | 2010-03-02 | Rearden, Llc | Apparatus and method for capturing still images and video using coded lens imaging techniques |
US7235773B1 (en) * | 2005-04-12 | 2007-06-26 | Itt Manufacturing Enterprises, Inc. | Method and apparatus for image signal compensation of dark current, focal plane temperature, and electronics temperature |
FR2884618B1 (fr) * | 2005-04-19 | 2008-06-06 | Commissariat Energie Atomique | Dispositif limitant l'apparition d'artefacts de decodage pour gamma camera a masque code. |
WO2006116673A1 (en) * | 2005-04-28 | 2006-11-02 | The Board Of Trustees Of The University Of Illinois | Mutliplex near-field microscopy with diffractive elements |
GB0510470D0 (en) | 2005-05-23 | 2005-06-29 | Qinetiq Ltd | Coded aperture imaging system |
US7336353B2 (en) | 2005-10-17 | 2008-02-26 | Duke University | Coding and modulation for hyperspectral imaging |
GB0521251D0 (en) | 2005-10-19 | 2005-11-30 | Qinetiq Ltd | Optical modulation |
TWI287703B (en) * | 2005-10-25 | 2007-10-01 | Denmos Technology Inc | Data driver, apparatus and method for data driver power on current reducing thereof |
JP5551872B2 (ja) | 2005-11-09 | 2014-07-16 | ユニバーシティ・オブ・ジ・ウィトウォーターズランド・ヨハネスブルク | 符号化開口、放射線撮像装置、符号化開口の視界制限方法および放射線画像化方法 |
GB0602380D0 (en) * | 2006-02-06 | 2006-03-15 | Qinetiq Ltd | Imaging system |
GB2434935A (en) | 2006-02-06 | 2007-08-08 | Qinetiq Ltd | Coded aperture imager using reference object to form decoding pattern |
GB2434934A (en) * | 2006-02-06 | 2007-08-08 | Qinetiq Ltd | Processing coded aperture image data by applying weightings to aperture functions and data frames |
US7773218B2 (en) | 2006-04-17 | 2010-08-10 | Duke University | Spatially-registered wavelength coding |
US7646549B2 (en) * | 2006-12-18 | 2010-01-12 | Xceed Imaging Ltd | Imaging system and method for providing extended depth of focus, range extraction and super resolved imaging |
US7626150B2 (en) | 2007-03-05 | 2009-12-01 | Raytheon Company | System and method for capturing image data over a wide field of view with high resolution |
WO2008133957A1 (en) * | 2007-04-23 | 2008-11-06 | California Institute Of Technology | Single-lens, single-sensor 3-d imaging device with a central aperture for obtaining camera position |
US7541592B2 (en) * | 2007-07-07 | 2009-06-02 | Northrop Grumman Systems Corporation | Coded aperture compton telescope imaging sensor |
-
2005
- 2005-05-23 GB GBGB0510470.8A patent/GB0510470D0/en not_active Ceased
-
2006
- 2006-05-23 CA CA002608377A patent/CA2608377A1/en not_active Abandoned
- 2006-05-23 AU AU2006250988A patent/AU2006250988A1/en not_active Abandoned
- 2006-05-23 CN CNA2006800269897A patent/CN101228460A/zh active Pending
- 2006-05-23 JP JP2008512909A patent/JP5334574B2/ja not_active Expired - Fee Related
- 2006-05-23 KR KR1020077029867A patent/KR20080021040A/ko not_active Application Discontinuation
- 2006-05-23 WO PCT/GB2006/001890 patent/WO2006125975A1/en active Application Filing
- 2006-05-23 US US11/920,345 patent/US7888626B2/en not_active Expired - Fee Related
- 2006-05-23 EP EP06743967A patent/EP1883839B1/en not_active Not-in-force
Cited By (66)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102273213A (zh) * | 2009-01-29 | 2011-12-07 | 三星电子株式会社 | 图像数据获得方法和图像数据获得设备 |
CN102540238B (zh) * | 2010-12-31 | 2014-08-13 | 同方威视技术股份有限公司 | 伽马相机和利用伽马相机检测辐射射线的方法 |
CN102540238A (zh) * | 2010-12-31 | 2012-07-04 | 同方威视技术股份有限公司 | 伽马相机和利用伽马相机检测辐射射线的方法 |
CN102592514A (zh) * | 2011-01-10 | 2012-07-18 | 三星电子株式会社 | 具有光感测功能的有机发光二极管显示装置 |
CN102592514B (zh) * | 2011-01-10 | 2015-09-30 | 三星电子株式会社 | 具有光感测功能的有机发光二极管显示装置 |
US9450033B2 (en) | 2011-01-10 | 2016-09-20 | Samsung Electronics Co., Ltd. | Organic light emitting diode (OLED) display apparatus having light sensing function |
CN103827920A (zh) * | 2011-09-28 | 2014-05-28 | 皇家飞利浦有限公司 | 根据图像的对象距离确定 |
CN102595171A (zh) * | 2012-02-03 | 2012-07-18 | 浙江工商大学 | 一种多通道空时编码孔径的动态光场成像方法和成像*** |
CN104115484A (zh) * | 2012-02-07 | 2014-10-22 | 阿尔卡特朗讯 | 无透镜压缩图像采集 |
CN102891956A (zh) * | 2012-09-25 | 2013-01-23 | 北京理工大学 | 基于编码孔径透镜阵列的压缩成像***的设计方法 |
CN102890974A (zh) * | 2012-10-16 | 2013-01-23 | 中国科学院高能物理研究所 | 编码孔径成像***及其编码码板 |
CN102890974B (zh) * | 2012-10-16 | 2015-09-02 | 中国科学院高能物理研究所 | 编码孔径成像***及其编码码板 |
CN102871638A (zh) * | 2012-10-16 | 2013-01-16 | 广州市盛光微电子有限公司 | 一种医用近距离成像方法、***以及探头 |
CN102973245B (zh) * | 2012-11-30 | 2014-08-06 | 广州市盛光微电子有限公司 | 一种近距离成像装置 |
CN102973245A (zh) * | 2012-11-30 | 2013-03-20 | 广州市盛光微电子有限公司 | 一种近距离成像装置 |
CN106232045A (zh) * | 2014-01-04 | 2016-12-14 | 韦杰.阿加沃尔 | 用于光动力学疗法的装置和方法 |
US10675482B2 (en) | 2014-01-04 | 2020-06-09 | Craniovation, Inc. | Device and method for use of photodynamic therapy |
CN103995273A (zh) * | 2014-05-08 | 2014-08-20 | 中国科学院高能物理研究所 | 一种全景成像装置及探头 |
CN103995273B (zh) * | 2014-05-08 | 2016-08-24 | 中国科学院高能物理研究所 | 一种全景成像装置及探头 |
CN104015358A (zh) * | 2014-06-03 | 2014-09-03 | 中国科学院高能物理研究所 | 一种编码准直器的制作方法 |
CN104015358B (zh) * | 2014-06-03 | 2016-10-12 | 中国科学院高能物理研究所 | 一种编码准直器的制作方法 |
CN104182579B (zh) * | 2014-08-20 | 2017-02-15 | 天津大学 | 一种编码掩模光学成像***的建模方法 |
CN104182579A (zh) * | 2014-08-20 | 2014-12-03 | 天津大学 | 一种编码掩模光学成像***的建模方法 |
CN104581166A (zh) * | 2014-12-08 | 2015-04-29 | 天津大学 | 一种基于多通道采集影像的压缩成像***及方法 |
CN104581166B (zh) * | 2014-12-08 | 2018-06-19 | 天津大学 | 一种基于多通道采集影像的压缩成像***及方法 |
CN107736012A (zh) * | 2015-06-17 | 2018-02-23 | 麦克赛尔株式会社 | 摄像装置 |
CN107896292A (zh) * | 2016-10-04 | 2018-04-10 | 株式会社日立制作所 | 摄像装置和摄像方法 |
US10551532B2 (en) | 2016-10-04 | 2020-02-04 | Hitachi, Ltd. | Imaging device and imaging method |
CN106768327A (zh) * | 2016-12-06 | 2017-05-31 | 中国科学院光电技术研究所 | 一种液晶可调谐滤波器成像光谱重建方法 |
CN106768327B (zh) * | 2016-12-06 | 2018-05-15 | 中国科学院光电技术研究所 | 一种液晶可调谐滤波器成像光谱重建方法 |
CN111201776A (zh) * | 2017-10-19 | 2020-05-26 | 索尼公司 | 成像设备和方法以及图像处理设备和方法 |
US11659289B2 (en) | 2017-10-19 | 2023-05-23 | Sony Corporation | Imaging apparatus and method, and image processing apparatus and method |
CN111201780B (zh) * | 2017-10-19 | 2022-09-16 | 索尼公司 | 成像装置和方法以及图像处理装置和方法 |
US11375103B2 (en) | 2017-10-19 | 2022-06-28 | Sony Corporation | Imaging device, image processing apparatus, and image processing method |
CN111201780A (zh) * | 2017-10-19 | 2020-05-26 | 索尼公司 | 成像装置和方法以及图像处理装置和方法 |
CN111201776B (zh) * | 2017-10-19 | 2022-06-28 | 索尼公司 | 成像设备和方法以及图像处理设备和方法 |
US11336799B2 (en) | 2017-10-19 | 2022-05-17 | Sony Corporation | Imaging device including pixels having individually settable incident angle directivity |
US11223787B2 (en) | 2017-10-19 | 2022-01-11 | Sony Corporation | Information processing apparatus, information processing method, and imaging apparatus |
CN111344533A (zh) * | 2017-10-27 | 2020-06-26 | 诺基亚技术有限公司 | 用于检测光的装置、***和方法 |
US11441889B2 (en) | 2017-10-27 | 2022-09-13 | Nokia Technologies Oy | Apparatus, systems, and methods for detecting light |
CN111788824A (zh) * | 2018-03-06 | 2020-10-16 | 索尼公司 | 图像处理装置、成像装置以及图像处理方法 |
CN111788824B (zh) * | 2018-03-06 | 2022-07-08 | 索尼公司 | 图像处理设备、成像设备以及图像处理方法 |
US11663708B2 (en) | 2018-03-06 | 2023-05-30 | Sony Corporation | Image processing apparatus, imaging apparatus, and image processing method |
US11399134B2 (en) | 2018-03-14 | 2022-07-26 | Sony Corporation | Image processing apparatus, imaging apparatus, and image processing method |
CN108318911B (zh) * | 2018-04-04 | 2024-02-27 | 中国科学院高能物理研究所 | 编码板 |
CN108318911A (zh) * | 2018-04-04 | 2018-07-24 | 中国科学院高能物理研究所 | 编码板 |
CN108801468A (zh) * | 2018-07-05 | 2018-11-13 | 南开大学 | 一种微悬臂梁阵列光学读出成像***和方法 |
CN111213158B (zh) * | 2018-08-29 | 2022-03-08 | 指纹卡安娜卡敦知识产权有限公司 | 具有编码孔掩模的显示器内光学指纹传感器 |
CN111213158A (zh) * | 2018-08-29 | 2020-05-29 | 指纹卡有限公司 | 具有编码孔掩模的显示器内光学指纹传感器 |
CN111310514A (zh) * | 2018-12-11 | 2020-06-19 | 上海耕岩智能科技有限公司 | 编码遮罩生物特征重建方法及存储介质 |
CN111310513A (zh) * | 2018-12-11 | 2020-06-19 | 上海耕岩智能科技有限公司 | 编码遮罩式屏下生物特征识别结构、***及方法 |
US11730980B2 (en) | 2019-02-13 | 2023-08-22 | Alpheus Medical, Inc. | Methods of using planar acoustic waves for non-invasive sonodynamic therapy |
US11865372B2 (en) | 2019-02-13 | 2024-01-09 | Alpheus Medical, Inc. | Methods of treating tumors with drugs |
US11491353B2 (en) | 2019-02-13 | 2022-11-08 | Alpheus Medical, Inc. | Zero vergence ultrasound waves for sonodynamic therapy |
US11617904B2 (en) | 2019-02-13 | 2023-04-04 | Alpheus Medical, Inc. | Methods of treating tumors with pro drugs |
US11980777B2 (en) | 2019-02-13 | 2024-05-14 | Alpheus Medical, Inc. | Methods of producing randomized ultrasound waves for sonodynamic therapy |
US11318332B2 (en) | 2019-02-13 | 2022-05-03 | Alpheus Medical, Inc. | Methods of treating tumors with pro drugs |
US11975156B2 (en) | 2019-02-13 | 2024-05-07 | Alpheus Medical, Inc. | Methods of using planar or defocused acoustic waves for non-invasive sonodynamic therapy |
US11724132B2 (en) | 2019-02-13 | 2023-08-15 | Alpheus Medical, Inc. | Zero vergence ultrasound waves for sonodynamic therapy |
US11872414B2 (en) | 2019-02-13 | 2024-01-16 | Alpheus Medical, Inc. | Methods of using ultrasound waves for sonodynamic therapy |
CN113710160A (zh) * | 2019-02-18 | 2021-11-26 | 阿戈斯佩技术公司 | 用于医学成像***的准直器及其图像重构方法 |
CN109814290B (zh) * | 2019-03-15 | 2021-11-16 | 京东方科技集团股份有限公司 | 一种显示装置及其控制方法、计算机可读介质 |
CN109814290A (zh) * | 2019-03-15 | 2019-05-28 | 京东方科技集团股份有限公司 | 一种显示装置及其控制方法、计算机可读介质 |
CN110780333A (zh) * | 2019-09-30 | 2020-02-11 | 南京航空航天大学 | 一种基于双编码板的伽马相机及其用于放射性物质定位的方法 |
CN116563117B (zh) * | 2023-07-11 | 2023-09-15 | 长春理工大学 | 基于计算成像技术的超分辨率共形窗口成像***及方法 |
CN116563117A (zh) * | 2023-07-11 | 2023-08-08 | 长春理工大学 | 基于计算成像技术的超分辨率共形窗口成像***及方法 |
Also Published As
Publication number | Publication date |
---|---|
KR20080021040A (ko) | 2008-03-06 |
AU2006250988A1 (en) | 2006-11-30 |
WO2006125975A1 (en) | 2006-11-30 |
CA2608377A1 (en) | 2006-11-30 |
JP2008542863A (ja) | 2008-11-27 |
JP5334574B2 (ja) | 2013-11-06 |
EP1883839B1 (en) | 2012-07-25 |
GB0510470D0 (en) | 2005-06-29 |
US20090095912A1 (en) | 2009-04-16 |
US7888626B2 (en) | 2011-02-15 |
EP1883839A1 (en) | 2008-02-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101228460A (zh) | 编码孔径成像*** | |
US9124808B2 (en) | Foveated imaging system and method | |
CN103968945B (zh) | 基于二阶压缩感知的超灵敏光谱成像天文望远镜及方法 | |
JP2013535931A (ja) | 圧縮撮像装置の画像取得時間の減少 | |
Mu et al. | Demonstration of a snapshot full-Stokes division-of-aperture imaging polarimeter using Wollaston prism array | |
US20090016481A1 (en) | Coded aperture imaging system | |
CN109828285B (zh) | 一种双波段时域压缩感知高速成像方法及装置 | |
Yang et al. | Compressed ultrafast photography by multi-encoding imaging | |
CN104570000A (zh) | 一种基于混沌压缩编码的光学综合孔径成像***及方法 | |
US10110834B2 (en) | Hadamard enhanced sensors | |
CN104019898A (zh) | 一种超灵敏光谱成像天文望远镜及天文光谱成像方法 | |
Ofek et al. | The large array survey telescope—system overview and performances | |
CN103925997A (zh) | 编码模板多目标超分辨率主动成像***及方法 | |
CN104019899A (zh) | 一种超灵敏天文望远镜及其天文图像获取方法 | |
WO2020072104A1 (en) | Optical multiplexing and overlaid subpixel processing | |
Yu et al. | Ghost imaging based on Pearson correlation coefficients | |
CN103916600A (zh) | 编码模板多目标超分辨率成像***及方法 | |
Slinger et al. | An investigation of the potential for the use of a high resolution adaptive coded aperture system in the mid-wave infrared | |
Kuusela | Single-pixel camera | |
Li et al. | A brief review on 2D and 3D image reconstruction using single-pixel imaging | |
CN102155992A (zh) | 一种偏振-超光谱压缩成像方法与*** | |
Vaughn et al. | Spatio-temporal hybrid color-polarization channeled sensors | |
Qiu et al. | Image reconstruction using different speckles and methods | |
Iwane | Light-field optics and its potential applications | |
Horisaki et al. | Multidimensional TOMBO imaging and its applications |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Open date: 20080723 |