CN101656835A - 图像拾取设备、显示器和图像处理设备 - Google Patents

图像拾取设备、显示器和图像处理设备 Download PDF

Info

Publication number
CN101656835A
CN101656835A CN200910167363A CN200910167363A CN101656835A CN 101656835 A CN101656835 A CN 101656835A CN 200910167363 A CN200910167363 A CN 200910167363A CN 200910167363 A CN200910167363 A CN 200910167363A CN 101656835 A CN101656835 A CN 101656835A
Authority
CN
China
Prior art keywords
image
image pickup
parts
pixel data
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN200910167363A
Other languages
English (en)
Other versions
CN101656835B (zh
Inventor
山本健二
早坂健吾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN101656835A publication Critical patent/CN101656835A/zh
Application granted granted Critical
Publication of CN101656835B publication Critical patent/CN101656835B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/40—Circuit details for pick-up tubes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0075—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for altering, e.g. increasing, the depth of field or depth of focus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Studio Devices (AREA)
  • Stereoscopic And Panoramic Photography (AREA)
  • Image Processing (AREA)

Abstract

公开了图像拾取设备、显示器和图像处理设备。图像拾取设备包括：图像拾取透镜；获得图像拾取数据的图像拾取装置；在图像拾取透镜的成像平面上的微透镜阵列；和基于图像拾取数据产生图像的图像处理部件。微透镜阵列包括多个微透镜，其每一个与图像拾取装置的像素对应地提供。图像处理部件包括视差图像产生部件和调整大小部件。视差图像产生部件从图像拾取数据提取像素数据，并合成像素数据以产生多个视差图像。每一个所提取的像素数据对应于位于图像拾取装置的图像拾取区域中的相同位置的每一个像素，每个区域与每个微透镜对应。调整大小部件对每个视差图像调整大小以改变其分辨率。

Description

图像拾取设备、显示器和图像处理设备
技术领域
本发明涉及每个均包括微透镜阵列(microlens array)的图像拾取设备、显示器和图像处理设备。
背景技术
已经提出并开发了各种图像拾取设备。并且已经提出了关于通过拾取图像获得的图像拾取数据执行预定图像处理以输出已处理的图像拾取数据的图像拾取设备。
例如，国际专利公开No.06/039486和Ren.Ng等人，“Light FieldPhotography with a Hand-Held Plenoptic Camera”，Stanford Tech Report CTSR2005-02提出了使用被称为“光场摄影(Light Field Photography)”的技术的图像拾取设备。所述图像拾取设备包括图像拾取透镜、微透镜阵列、图像拾取装置和图像处理部件，且从图像拾取装置获得的图像拾取数据包括在感光面上光的强度分布以及关于光的传播方向的信息。由此，图像处理部件重建从任意视场(field of view)或任意焦点观看的图像(以下称为已重建的图像)。
发明内容
上述微透镜阵列包括多个微透镜，且将图像拾取装置中的多个像素分配给每个微透镜。那么，在通过上述技术重建的图像中的像素的数目等于微透镜阵列中微透镜的数目，因为在通过上述技术获得的图像拾取数据中，形成每个微透镜的图像区域(单元图像)，并通过微透镜阵列的坐标确定关于重建图像的二维坐标的信息。因此，在重建图像中的像素的数目等于通过将图像拾取装置的像素的总数除以分配给每个微透镜的像素的数目所确定的值。另一方面，分配给每个微透镜的像素的数目等于关于光线的角度的信息的分辨率，并且是来自任意视场或任意焦点的重建图像的分辨率，因此分配给每个微透镜的像素的数目与二维坐标中像素的数目具有权衡(trade-off)关系。
现在，考虑图像分辨率的调整大小(缩小和放大)。在关于通过上述技术获得的图像拾取数据执行调整大小处理的情况中，难以改变与微透镜的数目对应的单元图像的数目。因此，不对由图像拾取数据产生的重建图像的分辨率调整大小。另外，该情况等效于改变每个单元图像中的像素的数目，即：所获得的光线的角分辨率。因此，还没有建立在所获得的图像拾取数据中对重建图像的分辨率调整大小从而包括关于光线的传播方向的信息的技术，即：改变单元图像(其每一个对于每个微透镜而形成)的数目的技术，且期望实现这种技术。
需要提供能够在所获得的图像拾取数据中改变单元图像(其每一个对于每个微透镜而形成)的数目从而包括关于光线的传播方向的信息的图像拾取设备、显示器和图像处理设备。
根据本发明的实施例，提供了图像拾取设备，包括：图像拾取透镜；图像拾取装置，其基于检测到的光获得图像拾取数据；微透镜阵列，其包括多个微透镜，并被排列在图像拾取透镜的成像平面上，其中与图像拾取装置的多个像素对应地提供每一个微透镜；和图像处理部件，其基于从图像拾取装置获得的图像拾取数据产生图像。在该情况下，图像处理部件包括：视差图像产生部件，其从图像拾取数据中提取像素数据，然后合成像素数据以产生多个视差图像，其中每一个像素数据与位于图像拾取装置的图像拾取区域中相同位置的每一个像素相对应，每一个图像拾取区域与每一个微透镜相对应；和调整大小部件，其关于每一个视差图像执行调整大小处理以改变其分辨率。
在根据本发明实施例的图像拾取设备中，在微透镜阵列上形成通过图像拾取透镜的对象的图像。然后，到微透镜阵列的入射光线通过微透镜阵列到达图像拾取装置。由此，在图像拾取装置上形成与每个微透镜对应的对象的图像，且获得包括关于光线的位置的信息以及关于光线的传播方向的信息的图像拾取数据。基于该图像拾取数据，在图像处理部件中，由视差图像产生部件形成与微透镜的数目相等的多个视差图像。调整大小部件关于每一个视差图像执行调整大小处理。换句话说，改变每个视差图像中像素的数目。
根据本发明的实施例，提供了显示器，包括：图像处理部件，其基于通过图像拾取光学***获得的图像拾取数据产生图像，所述图像拾取光学***具有图像拾取透镜和在图像拾取透镜和图像拾取装置之间提供的、且包括多个微透镜的微透镜阵列，其中与图像拾取装置的多个像素对应地提供每一个微透镜；和显示部件，其显示由图像处理部件产生的图像。在该情况下，图像处理部件包括：视差图像产生部件，其从图像拾取数据提取像素数据，然后合成像素数据以产生多个视差图像，其中每一个像素数据与位于图像拾取装置的图像拾取区域中相同位置的每一个像素相对应，每一个图像拾取区域与每一个微透镜相对应；和调整大小部件，其关于每一个视差图像执行调整大小处理以改变其分辨率。
根据本发明的实施例，提供了图像处理设备，包括：图像处理部件，其基于通过图像拾取光学***获得的图像拾取数据产生图像，所述图像拾取光学***具有图像拾取透镜和在图像拾取透镜和图像拾取装置之间提供的、且包括多个微透镜的微透镜阵列，其中与图像拾取装置的多个像素对应地提供每一个微透镜。在该情况下，图像处理部件包括：视差图像产生部件，其从图像拾取数据提取像素数据，然后合成像素数据以产生多个视差图像，其中每一个像素数据与位于图像拾取装置的图像拾取区域中相同位置的每一个像素相对应，每一个图像拾取区域与每一个微透镜相对应；和调整大小部件，其关于每一个视差图像执行调整大小处理以改变其分辨率。
在根据本发明的实施例的显示器和图像处理设备中，在图像处理部件中，首先，视差图像产生部件对于通过具有微透镜阵列的图像拾取光学***获得的图像拾取数据，产生与微透镜的数目相等的多个视差图像。调整大小部件关于每一个所产生的视差图像执行调整大小处理。换句话说，改变每个视差图像中像素的数目。
在根据本发明实施例的图像拾取设备和图像处理设备中，视差图像产生部件基于通过检测保持光线的传播方向的光获得的图像拾取数据产生多个视差图像，然后调整大小部件关于多个视差图像中的每一个执行调整大小处理，所以在从图像拾取装置获得的图像拾取数据中，与微透镜对应的图像拾取区域(单元图像)的数目可能变化。由此，在显示器中，可以显示具有任意分辨率的图像。
通过以下描述本发明的其他和另外的目的、特征和优点将更加全面地显现。
附图说明
图1是根据本发明实施例的图像拾取设备的整体配置的图示。
图2是图1中图示的图像处理部件的整体配置的功能框图。
图3是用于描述关于进入图像拾取装置的光线的信息的示意图。
图4是与从图像拾取装置获得的图像拾取数据对应的拾取图像。
图5A和图5B是用于描述图2中图示的视差图像产生部件的视差图像产生操作的示意图。
图6A和图6B是用于描述图2中图示的调整大小部件的调整大小操作的示意图。
图7A和图7B是用于描述图2中图示的重排部件的重排操作的示意图。
图8A和图8B是用于描述图2中图示的调整大小部件的另一调整大小处理(修改1)的示意图。
图9是用于描述图8中的调整大小处理之后的像素数据重排的示意图。
图10是根据修改2的图像处理部件的整体配置的功能框图。
图11是根据本发明实施例的显示器的主要部分的配置的截面图。
图12是图11中图示的图像处理部件的整体配置的功能框图。
图13是根据修改3的图像处理部件的整体配置的功能框图。
具体实施方式
以下将参考附图详细描述本发明的优选实施例。
图1图示根据本发明实施例的图像拾取设备(图像拾取设备1)的整体配置。图像拾取设备1拾取对象2的图像，并关于该图像执行预定的图像处理，由此输出图像数据Dout。图像拾取设备1包括孔径光阑(aperture stop)10、图像拾取透镜11、微透镜阵列12、图像拾取装置13、图像处理部件14、图像拾取装置驱动部件15和控制部件16。
孔径光阑10是图像拾取透镜11的光学孔径光阑。
图像拾取透镜11是用于拾取对象的图像的主透镜，且包括例如用在摄像机、照相机等中的一般图像拾取透镜。
在微透镜阵列12中，排列将在之后描述的多个微透镜，且在图像拾取透镜11的焦平面(成像平面)上排列微透镜阵列12。例如，每个微透镜由固体透镜、液晶透镜、衍射透镜等制成。将图像拾取装置13中的多个像素分配给微透镜阵列12中的一个微透镜。
图像拾取装置13接收或检测来自微透镜阵列12的光线以产生包括多个像素数据的图像拾取数据D0，且将图像拾取装置13排列在微透镜阵列12的焦平面(成像平面)上。图像拾取装置13包括以矩阵形式排列的诸如CCD(电荷耦合器件)或CMOS(互补金属氧化物半导体)之类的多个二维固态图像拾取装置。
在这种图像拾取装置13的感光面(靠近微透镜阵列12的平面)上，以矩阵形式排列数目为M×N个(M和N均为整数)的图像拾取像素，且将多个图像拾取像素分配给微透镜阵列12中的一个微透镜。例如，感光面上的图像拾取像素的数目是M×N＝3720×2520＝9374400个，且将9374400个图像拾取像素的3×3＝9个图像拾取像素分配给一个微透镜。将在之后描述的重建图像的分辨率(例如，任意视场中的分辨率、基于重调焦距算术处理的深度方向中的分辨率(任意焦点中的分辨率)等)随着作为分配给每个微透镜的像素的数目的值m和n的增加而增加。另一方面，因为值(M/m)和(N/n)与重建图像的分辨率有关，所以重建图像的分辨率随着值(M/m)和(N/n)的增加而增加。如上所述，在重建图像的分辨率和以任意视场或任意焦点的分辨率之间存在权衡关系。
图像处理部件14关于从图像拾取装置13获得的图像拾取数据D0执行预定图像处理，并输出通过执行图像处理获得的图像拾取数据Dout。将在之后详细描述图像处理部件14。
图像拾取装置驱动部件15驱动图像拾取装置13，并控制图像拾取装置13的感光操作。
控制部件16控制图像处理部件14和图像拾取装置驱动部件15的操作，且包括例如微计算机等。
接下来，以下将参考图2详细描述图像处理部件14的配置。图2图示图像处理部件14的整体配置的功能框图。
例如，图像处理部件14包括缺陷校正部件141、箝位(clamp)处理部件142、视差图像产生部件143、调整大小部件144、重排部件145、降噪部件146、边缘增强部件147、白平衡调整部件148和伽玛校正部件149。
缺陷校正部件141校正包括在图像拾取数据D0中的诸如损失或无效之类的缺陷(由图像拾取装置13中的异常所引起的缺陷)。箝位处理部件142关于通过缺陷校正部件142的缺陷校正所获得的图像拾取数据执行设置每一个像素数据的黑电平的处理(箝位处理)。
视差图像产生部件143从自箝位处理部件142提供的图像拾取数据中产生与微透镜阵列12中微透镜的数目相等的多个视差图像。将由视差图像产生部件143产生的多个视差图像作为图像数据D1提供给调整大小部件144。
调整大小部件144关于从视差图像产生部件143提供的图像数据D1执行调整大小处理，以产生具有改变的分辨率的多个视差图像(改变数目的像素)。将具有由调整大小部件144改变的分辨率的多个视差图像作为图像数据D2提供给重排部件145。将在之后详细描述上述视差图像产生部件143和上述调整大小部件144的处理操作。
重排部件145关于形成从调整大小部件144提供的图像数据D2的像素数据执行重排处理，以使得像素数据再次位于原始图像拾取数据D0的像素排列中的相应位置，由此获得图像数据D3。将通过重排处理获得的图像数据D3提供给降噪部件146。
降噪部件146执行减少包括在从重排部件145提供的图像数据中的噪音的处理(例如，当在暗处或具有不足的感光度的地方拾取图像时产生的噪音)。边缘增强部件147执行边缘增强处理，即：关于从降噪部件146提供的图像数据增强图像的边缘的处理。
白平衡调整部件148关于从边缘增强部件147提供的图像数据执行调整由各装置之间的个体差异(比如图像拾取装置13的光谱灵敏度、照明条件等的差异)影响的颜色平衡的处理(白平衡调整处理)。
伽玛校正部件149关于从白平衡调整部件148提供图像数据执行预定伽玛校正(色调或对比度校正)，从而产生图像拾取数据Dout。
接下来，参考图1到图7A和图7B，以下将详细描述根据本实施例的图像拾取设备1的功能和效果。图3是用于描述关于包括在图像拾取数据D0中的光线的信息的示意图。图4是与图像拾取数据D0对应的实际拾取的图像。图5A和图5B是用于描述视差图像产生部件143中的视差图像产生操作的示意图。图6A和图6B是用于描述调整大小部件144中的调整大小操作的示意图。图7A和图7B是用于描述重排部件145中的重排操作的示意图。
在图像拾取设备1中，在微透镜阵列12上形成通过图像拾取透镜11的对象2的图像。然后，到微透镜阵列12的入射光线通过微透镜阵列12以由图像拾取装置13检测。在这时，在图像拾取装置13中的取决于入射光线的入射方向的位置检测到微透镜阵列12的入射光线。然后，根据图像拾取装置驱动部件15的驱动操作，从图像拾取装置13获得图像拾取数据D0，且将图像拾取数据D0输入到图像处理部件14中。
现在，以下将参考图3描述由图像拾取装置13检测到的光线。如图3所示，在图像拾取透镜11的图像拾取透镜平面上定义直角坐标系(u，v)，且在图像拾取装置13的图像拾取平面上定义直角坐标系(x，y)。在图像拾取透镜11的图像拾取透镜平面和图像拾取装置13的图像拾取平面之间的距离被定义为“F”。然后，如图所示的通过图像拾取透镜11和图像拾取装置13的光线L1由四元函数LF(x，y，u，v)表示。因此，将关于光线L1的传播方向的信息以及关于光线L1的位置的信息记录在图像拾取装置13中。换句话说，由分配给每个微透镜的多个图像拾取像素的排列确定光线的入射方向。因此，从图像拾取装置13获得的图像拾取数据D0包括光线的强度以及关于光线的传播方向的信息。
此外，在图像拾取装置13上形成对于每个微透镜的对象2的图像。如图3所示，在与图像拾取数据D0对应的拾取图像(光场图像)中，与微透镜阵列12中的微透镜的二维排列对应地形成多个单元图像U1。换句话说，形成与微透镜的数目相等的多个单元图像U1。此外，每个单元图像U1包括多个像素数据，且与位于单元图像U1中相同位置的像素对应的像素数据保持关于光线的相同传播方向的信息。为了简单起见，以下将描述在将3×3个像素分配给一个微透镜的情况下包括图像拾取数据D0的6×6个单元图像U1的区域S。
当将上述图像拾取数据D0输入到图像处理部件14中时，缺陷校正部件141校正图像拾取数据D0中的缺陷，且箝位处理部件142设置图像拾取数据D0的适当的黑电平，然后将图像拾取数据D0输入到视差图像产生部件143中。
视差图像产生部件143基于图像拾取数据D0产生多个视差图像。更具体地说，如图5A所示，从图像拾取数据D0提取与位于单元图像U1中相同位置的像素对应的像素数据(在附图中由相同附图标记指示的区域中的数据)，且合成所提取的像素数据。由此，如图5B所示，产生9个视差图像D11到D19。所产生的视差图像D11到D19是来自不同视点的图像，且每个具有6×6的分辨率(像素数目)。将这样的视差图像D11到D19作为图像数据D1输入到调整大小部件144中。
在调整大小部件144中，如图6A所示，对与图像数据D1对应的9个视差图像D11到D19调整大小。在该实施例中，执行视差图像D11到D19中的每一个的减小分辨率(6×6)的调整大小处理(以下称为图像缩小处理)。通过关于例如任意数目的像素的数据执行结合(integration)处理来实现图像减小处理。由此，如图6B所示，产生具有减小的分辨率(例如，3×3)的视差图像D21到D29。将所产生的视差图像D21到D29作为图像数据D2输入到重排部件145中。
在重排部件145中，如图7A所示，关于形成视差图像D21到D29的多个像素数据执行重排处理，以使得所述多个像素数据位于原始图像拾取数据D0的像素排列中的相应位置。由此，如图7B所示，获得包括3×3＝9个单元图像的图像数据D3。
关于这种图像数据D3依次执行通过降噪部件146的降噪处理、通过边缘增强部件147的边缘增强处理、通过白平衡调整部件148的白平衡调整处理和通过伽玛校正部件149的伽玛校正，由此从图像处理部件14输出图像数据D3作为图像数据Dout。
如上所述，在图像拾取设备1中，在图像处理部件14中，视差图像产生部件143基于图像拾取数据D0产生多个视差图像D11到D19，且调整大小部件144关于视差图像D11到D19执行调整大小处理，由此改变每一个视差图像D11到D19的分辨率(像素的数目)。由此，获得图像拾取数据D0和包括不同数目的单元图像U1的图像数据(图像数据D2或D3或图像数据Dout)。因此，产生具有任意分辨率的视差图像，并且无论微透镜阵列12中的微透镜的数目如何，将图像拾取数据D0中单元图像U1的数目改变为任意数。
此外，当执行减小视差图像D11到D19的分辨率的图像减小处理作为调整大小处理时，实现记录容量的减少或计算时间的减少。
另外，图像拾取设备1可以进一步包括图像存储部件(没有图示)，且可以将通过重排部件145的重排处理获得的图像数据Dout或图像数据D3存储在图像存储部件中。
接下来，以下将描述本发明的修改。类似的组件由与根据实施例的图像拾取设备1的组件类似的数字表示，且将不进一步描述。
修改1
图8A和图8B是用于描述上述图像处理部件14的调整大小部件144中的另一调整大小操作的示意图。图9是通过关于通过图8A和8B中的调整大小处理获得的图像数据D4，在重排部件145中执行重排处理获得的图像数据D5的示意图。
在该修改中，如图8A所示，调整大小部件144执行增大每一个视差图像D11到D19的分辨率(6×6)的调整大小处理(以下称为图像放大处理)。例如，通过执行诸如双三次内插处理之类的各种像素内插处理来实现图像放大处理。由此，如图8B所示，产生具有增大的分辨率(例如，9×9)的视差图像D41到D49。将所产生的视差图像D41到D49作为图像数据D4输入到重排部件145中。
在重排部件145中，关于形成与图像数据D4对应的9个视差图像D41到D49的多个像素数据执行重排处理，以使得多个像素数据位于原始图像拾取数据D0的像素排列(与光场图像对应的排列)中的相应位置。由此，如图9所示，产生其中形成9×9＝81个单元图像U1的图像数据D5。因此，作为调整大小部件144中的调整大小处理，可以执行除图像缩小处理之外的图像放大处理。
修改2
图10是根据修改2的图像处理部件24的整体配置的功能框图。在该修改中，不包括根据实施例的图像处理部件14中的重排部件145。更具体地说，视差图像产生部件143基于图像拾取数据D0产生视差图像，然后调整大小部件144基于视差图像执行调整大小处理。然后，不将通过调整大小处理获得的图像数据D2提供给重排部件145，且降噪部件146、边缘增强部件147、白平衡调整部件148和伽玛校正部件149中的每一个均关于图像数据D2执行预定处理，且输出已处理的图像数据D2作为图像数据Dout2。
因此，在图像处理部件24中，可以不包括重排部件145。换句话说，可以输出通过调整大小处理获得的多个视差图像(来自任意视点的图像)作为图像数据Dout2。
图11是图示根据本发明实施例的显示器2的主要部分的配置的截面图。图12是根据该实施例的图像处理部件23的整体配置的功能框图。显示器2包括显示部件20、微透镜阵列21和图像处理部件23(图11中没有图示)。显示器2是所谓的全景摄影(integral photography)***3D显示器，其通过将图像数据Dout3从图像处理部件23提供到显示部件20来显示三维(3D)图像。另外，类似的组件由与图像拾取设备1的组件类似的数字表示，且将不进一步描述。
显示部件20是用于显示诸如图形形式或字符之类的图像的显示装置，且由其中以矩阵形式排列多个显示像素的LCD(液晶显示器)配置。显示部件20包括背光200、偏振器201、液晶单元202、偏振器203和滤色镜204。显示部件20基于图像数据Dout3，通过液晶单元202调制从背光200发出的光，以向着微透镜阵列21之上方发出显示光Lout。
液晶单元202包括一对透明基底(没有图示)和在该对透明基底之间排列的液晶层(没有图示)。液晶单元202基于图像数据Dout3，响应于在透明基底之间施加的电压，调制来自背光200的入射光。
偏振器201选择性地允许在进入液晶单元202的光的一个偏振方向中的光通过，且偏振器203选择性地允许在从液晶单元202发出的光的另一偏振方向中的光通过。排列偏振器201和203从而液晶单元202在偏振器201和203之间，以使得偏振轴彼此垂直。
滤色镜204选择性地允许在已经通过液晶单元202和偏振器203的光的、与其自己的发射颜色对应的波长范围中的光(例如，红光，绿光或蓝光)通过。
微透镜阵列21包括排列的多个微透镜，并实现所谓的全景三维显示(integral three-dimensional display)。例如，每个微透镜由固体透镜、液晶透镜、衍射透镜等制成。
图像处理部件23基于由根据实施例的图像拾取设备1的图像拾取光学***(即：孔径光阑10、图像拾取透镜11、微透镜阵列12和图像拾取装置13)获得的图像拾取数据D0，执行预定图像处理。如图12所示，图像处理部件23包括，例如，缺陷校正部件141、箝位处理部件142、视差图像产生部件143、调整大小部件144、重排部件145、降噪部件146、边缘增强部件147、白平衡调整部件148、伽玛校正部件149和翻转部件(flipping section)150。换句话说，在该实施例中，在根据实施例的图像处理部件14中在伽玛校正部件149之后排列关于图像数据执行翻转处理的翻转部件150。
翻转部件150关于通过由重排部件145的重排处理获得的图像数据D3，对于每个单元图像U1执行翻转处理，因为与对应于由上述图像拾取光学***获得的图像拾取数据D0的拾取图像相反，由微透镜阵列21空间地(即，水平地和垂直地)翻转与图像数据Dout3对应的实际显示的图像。
在该实施例中，缺陷校正部件141和箝位处理部件12关于图像拾取数据D0执行预定处理，然后关于图像拾取数据D0执行通过视差图像产生部件143的视差图像产生处理、通过调整大小部件144的调整大小处理和通过重排部件145的重排处理，以获得图像数据D3。由此，如在该实施例的情况下那样，任意地改变图像拾取数据D0中的单元图像U1的数目。然后，关于图像数据D3执行在降噪部件146、边缘增强部件147、白平衡调整部件148和伽玛校正部件149中的预定处理，然后将图像数据D3输入到翻转部件150中。在翻转部件150中对于每个单元图像U1关于图像数据D3执行翻转处理，且将经历翻转处理的图像数据D3作为图像数据Dout3输入到显示部件20中。
另一方面，在显示部件20中，当基于上述图像数据Dout3在液晶单元202的透明基底之间施加电压时，调制从背光200发出的光以通过显示部件20，然后向着微透镜阵列21之上方发出光以作为显示光Lout。在这时，取决于微透镜阵列21的微透镜中像素的位置，以不同的角度方向发出配置基于图像数据Dout3产生的显示光Lout的光线。然后，这些光线进入观看者的左眼和右眼，作为具有不同视差的视差图像。由此，对于观看者来说，显示图像看起来好像图像漂浮在微透镜阵列21之上方一样。
在该情况下，在全景3D显示器中，图像数据Dout3的单元图像U1的数目必需等于或小于微透镜阵列21中的微透镜的数目。在这一点上，任意地设置图像数据Dout3中单元图像U1的数目而无论在图像拾取设备1的微透镜阵列12中的微透镜的数目如何。因此，图像数据Dout3的单元图像U1的数目可以与微透镜阵列21的配置对应地改变。例如，在微透镜阵列21中的微透镜的数目是a×b的情况下，数目是固定的，所以在图像数据Dou3中单元图像U1的数目最大可以被设置为a×b。在这时，在单元图像U1的数目是a×b的情况下，在显示屏幕的整个区域(微透镜阵列21之上的整个区域)上显示图像。此外，在单元图像U1的数目小于a×b的情况下，在显示屏幕的部分区域(微透镜阵列21之上的部分区域)上显示图像。
如上所述，在该实施例中，在图像处理部件23的视差图像产生部件143、调整大小部件144和重排部件145中，根据微透镜阵列21的配置任意地改变图像拾取数据D的单元图像U1的数目，所以当执行全景3D显示时，显示具有期望分辨率的3D图像而无论在图像拾取侧微透镜阵列12中的微透镜的数目和在显示侧微透镜阵列21中的微透镜的数目如何。
另外，显示器2进一步包括图像存储部件(没有图示)，且可以将通过翻转处理获得的图像数据Dout3、通过重排处理获得的图像数据D3或通过调整大小处理获得的图像数据D2存储在图像存储部件中。
修改3
图13是根据实施例的修改3的图像处理部件25的整体配置的功能框图。图像处理部件25基于由根据实施例的图像拾取设备1的图像拾取光学***获得的图像拾取数据D0执行预定图像处理。除了在通过视差图像产生部件143的视差图像产生处理和通过调整大小部件144的调整大小处理之间执行通过翻转部件150的翻转处理之外，图像处理部件25具有与图像处理部件23相同的配置。换句话说，当将作为多个视差图像的图像数据D1输入到翻转部件150中时，关于多个视差图像的每一个执行翻转处理以获得图像数据D4。关于图像数据D4依次执行通过调整大小部件144的调整大小处理和通过重排部件145的重排处理，然后降噪部件146、边缘增强部件147、白平衡调整部件148和伽玛校正部件149关于图像数据D4执行预定处理。由此，输出图像数据Dout4。
因此，不仅可以在通过重排部件145的重排处理之后，而且可以在通过重排部件145的重排处理之前(更具体地说，在视差图像产生处理之后并在调整大小处理之前)执行通过翻转部件150的翻转处理。替代地，可以在调整大小处理之后并在重排处理之前执行翻转处理。在这种情况下，获得如在该实施例中的效果的相同的效果。
虽然参考实施例描述了本发明，但本发明不限于此，且可以进行各种各样的修改。例如，作为示例，描述了将3×3＝9个像素分配给一个微透镜的配置。但是，本发明不限于此，且可以通过视差图像中像素的所需数目、单元图像的所需数目或设计规格来确定分配给一个微透镜的像素的数目。
此外，在上述实施例中，图像处理部件被描述为图像拾取设备1或显示器2的构成组件之一。但是，不是必须在图像拾取设备1或显示器2中布置图像处理部件。例如，在图像拾取设备1中，可以在另一设备(例如，PC(个人计算机)等)中布置图像处理部件，且可以将由图像拾取光学***获得的图像拾取数据转送到PC，并且可以关于PC中的图像拾取数据执行图像处理。进一步，同样在显示器2中，如上所述可以在另一设备中布置图像处理部件，且可以将从图像处理部件获得的图像数据传送到显示部件。
本申请包括与于2008年8月21日在日本专利局提交的日本优先权专利申请JP2008-212831中公开的主题相关的主题，将其全部内容通过引用完全包括于此。
本领域技术人员应该理解根据设计要求及其它因素，可产生各种修改、组合、部分组合和替代，只要它们在所附权利要求及其等效物的范围之内即可。

Claims (9)

1.一种图像拾取设备，包括：
图像拾取透镜；
图像拾取装置，其基于检测到的光获得图像拾取数据；
微透镜阵列，其包括多个微透镜，并被排列在图像拾取透镜的成像平面上，其中与所述图像拾取装置的多个像素对应地提供每一个微透镜；和
图像处理部件，其基于从所述图像拾取装置获得的所述图像拾取数据产生图像，
其中，所述图像处理部件包括
视差图像产生部件，其从所述图像拾取数据中提取像素数据，然后合成所述像素数据以产生多个视差图像，其中每一个像素数据与位于所述图像拾取装置的图像拾取区域中相同位置的每一个像素对应，每一个图像拾取区域与每一个微透镜对应，和
调整大小部件，关于每一个视差图像执行调整大小处理以改变其分辨率。
2.如权利要求1所述的图像拾取设备，其中
所述图像处理部件包括重排部件，其关于形成经历了通过所述调整大小部件的调整大小处理的多个视差图像的每一个的像素数据执行像素数据重排，以使得所述像素数据在所述调整大小处理之后位于像素数据排列中的相应位置。
3.如权利要求1所述的图像拾取设备，进一步包括图像存储部件，其存储经历了所述调整大小处理的所述视差图像的图像数据。
4.一种显示器，包括：
图像处理部件，其基于通过图像拾取光学***获得的图像拾取数据产生图像，所述图像拾取光学***具有图像拾取透镜和在图像拾取透镜和图像拾取装置之间提供的、且包括多个微透镜的微透镜阵列，其中与所述图像拾取装置的多个像素对应地提供每一个微透镜；和
显示部件，其显示由所述图像处理部件产生的图像，
其中，所述图像处理部件包括
视差图像产生部件，其从所述图像拾取数据中提取像素数据，然后合成所述像素数据以产生多个视差图像，其中每一个像素数据与位于所述图像拾取装置的图像拾取区域中相同位置的每一个像素对应，每一个图像拾取区域与每一个微透镜对应和
调整大小部件，其关于每一个视差图像执行调整大小处理以改变其分辨率。
5.如权利要求4所述的显示器，进一步包括在所述显示部件的发光平面上的第二微透镜阵列。
6.如权利要求5所述的显示器，其中
所述图像处理部件包括
重排部件，其关于形成经历了通过所述调整大小部件的调整大小处理的多个视差图像的每一个的像素数据执行像素数据重排，以使得所述像素数据在所述调整大小处理之后位于像素数据排列中的相应位置，和
翻转部件，关于经历了所述像素数据重排的所述图像数据执行空间翻转处理。
7.如权利要求4所述的显示器，其中
所述视差图像产生部件将所述提取的像素数据合成为所述多个视差图像，然后关于所述多个视差图像中的每一个执行空间翻转处理，
所述调整大小部件关于经历了所述空间翻转处理的每一个视差图像执行调整大小处理，和
所述图像处理部件进一步包括重排部件，关于形成经历了通过所述调整大小部件的调整大小处理的多个视差图像的每一个的像素数据执行像素数据重排，以使得所述像素数据在所述调整大小处理之后位于像素数据排列中的相应位置。
8.如权利要求5所述的显示器，其中
所述调整大小部件关于所述多个视差图像执行调整大小处理，以使得在每一个视差图像中像素的数目等于在所述第二微透镜阵列中的微透镜的数目。
9.一种图像处理设备，包括：
图像处理部件，其基于通过图像拾取光学***获得的图像拾取数据产生图像，所述图像拾取光学***具有图像拾取透镜和在图像拾取透镜和图像拾取装置之间提供的、且包括多个微透镜的微透镜阵列，其中与所述图像拾取装置的多个像素对应地提供每一个微透镜，
其中，所述图像处理部件包括
视差图像产生部件，其从所述图像拾取数据中提取像素数据，然后合成所述像素数据以产生多个视差图像，其中每一个像素数据与位于所述图像拾取装置的图像拾取区域中相同位置的每一个像素对应，每一个图像拾取区域与每一个微透镜对应和
调整大小部件，其关于每一个视差图像执行调整大小处理以改变其分辨率。
CN2009101673633A 2008-08-21 2009-08-21 图像拾取设备、显示器和图像处理设备 Expired - Fee Related CN101656835B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2008212831A JP4538766B2 (ja) 2008-08-21 2008-08-21 撮像装置、表示装置および画像処理装置
JP212831/08 2008-08-21

Publications (2)

Publication Number Publication Date
CN101656835A true CN101656835A (zh) 2010-02-24
CN101656835B CN101656835B (zh) 2012-10-31

Family

ID=41360078

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009101673633A Expired - Fee Related CN101656835B (zh) 2008-08-21 2009-08-21 图像拾取设备、显示器和图像处理设备

Country Status (4)

Country Link
US (1) US8502911B2 (zh)
EP (1) EP2157801A3 (zh)
JP (1) JP4538766B2 (zh)
CN (1) CN101656835B (zh)

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102547095A (zh) * 2010-12-17 2012-07-04 佳能株式会社 图像感测装置及图像感测装置的控制方法
CN102595170A (zh) * 2011-01-06 2012-07-18 索尼公司 图像摄取装置和图像处理方法
CN102783162A (zh) * 2010-03-03 2012-11-14 株式会社尼康 摄像装置
CN102870032A (zh) * 2010-06-16 2013-01-09 株式会社尼康 图像显示装置
CN102957863A (zh) * 2011-08-19 2013-03-06 佳能株式会社 摄像设备、图像处理设备和图像处理方法
CN103019021A (zh) * 2012-12-27 2013-04-03 Tcl集团股份有限公司 一种3d光场相机及其拍摄图像的处理方法
CN103297683A (zh) * 2012-03-01 2013-09-11 佳能株式会社 图像处理设备及图像处理方法
CN103317229A (zh) * 2013-07-11 2013-09-25 苏州大学 一种标签签注方法与***
CN103516974A (zh) * 2012-06-15 2014-01-15 佳能株式会社 图像记录装置及图像再现装置
CN103563366A (zh) * 2011-03-29 2014-02-05 索尼公司 图像拾取装置、图像拾取设备、图像处理方法、光圈控制方法及程序
CN103765882A (zh) * 2011-08-26 2014-04-30 株式会社尼康 三维图像显示装置
CN104076416A (zh) * 2013-03-27 2014-10-01 富士施乐株式会社 透镜阵列及其制造方法
CN104391344A (zh) * 2014-10-15 2015-03-04 东南大学 一种用于消除主瓣畸变像差的微透镜阵列设计方法
CN104459954A (zh) * 2013-09-18 2015-03-25 株式会社东芝 成像透镜和固态成像设备
CN105093472A (zh) * 2015-08-25 2015-11-25 华为技术有限公司 成像装置和成像方法
CN106471804A (zh) * 2014-07-04 2017-03-01 三星电子株式会社 用于图像捕捉和同时深度提取的方法及装置
CN106842386A (zh) * 2010-06-03 2017-06-13 株式会社尼康 拍摄装置
US9872012B2 (en) 2014-07-04 2018-01-16 Samsung Electronics Co., Ltd. Method and apparatus for image capturing and simultaneous depth extraction
US10375292B2 (en) 2014-03-13 2019-08-06 Samsung Electronics Co., Ltd. Image pickup apparatus and method for generating image having depth information
CN111510700A (zh) * 2020-06-18 2020-08-07 深圳市汇顶科技股份有限公司 图像采集装置
WO2022012503A1 (en) * 2020-07-17 2022-01-20 Shenzhen GOODIX Technology Co., Ltd. Passive three-dimensional image sensing based on chromatic focal differentiation
WO2023230965A1 (zh) * 2022-06-01 2023-12-07 京东方科技集团股份有限公司 显示方法及装置

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8189089B1 (en) 2009-01-20 2012-05-29 Adobe Systems Incorporated Methods and apparatus for reducing plenoptic camera artifacts
US8860833B2 (en) 2010-03-03 2014-10-14 Adobe Systems Incorporated Blended rendering of focused plenoptic camera data
JP5488221B2 (ja) * 2010-06-09 2014-05-14 株式会社ニコン 撮像装置
JP2016001326A (ja) * 2010-06-16 2016-01-07 株式会社ニコン 画像表示装置
JP6230911B2 (ja) * 2010-07-16 2017-11-15 フィリップス ライティング ホールディング ビー ヴィ 距離測定のためのライトプロジェクタ及びビジョンシステム
US8803918B2 (en) 2010-08-27 2014-08-12 Adobe Systems Incorporated Methods and apparatus for calibrating focused plenoptic camera data
US8749694B2 (en) 2010-08-27 2014-06-10 Adobe Systems Incorporated Methods and apparatus for rendering focused plenoptic camera data using super-resolved demosaicing
US8665341B2 (en) 2010-08-27 2014-03-04 Adobe Systems Incorporated Methods and apparatus for rendering output images with simulated artistic effects from focused plenoptic camera data
US8724000B2 (en) * 2010-08-27 2014-05-13 Adobe Systems Incorporated Methods and apparatus for super-resolution in integral photography
US9197798B2 (en) 2011-03-25 2015-11-24 Adobe Systems Incorporated Thin plenoptic cameras using microspheres
JP5757128B2 (ja) * 2011-03-29 2015-07-29 ソニー株式会社 撮像装置、撮像素子、画像処理方法およびプログラム
JP5747679B2 (ja) * 2011-06-17 2015-07-15 国立研究開発法人情報通信研究機構 ３次元画像の提示方法
JP2017182076A (ja) * 2011-08-26 2017-10-05 株式会社ニコン 画像表示装置
JP5662907B2 (ja) * 2011-08-26 2015-02-04 日本放送協会 Ｉｐ立体ディスプレイ
JP5623356B2 (ja) * 2011-08-29 2014-11-12 キヤノン株式会社 撮像装置
JP5871535B2 (ja) * 2011-09-22 2016-03-01 キヤノン株式会社 撮像装置及び撮像装置の制御方法
GB2507462A (en) * 2011-12-19 2014-05-07 David James Variable multi-view display
JP5310837B2 (ja) * 2011-12-28 2013-10-09 カシオ計算機株式会社 画像生成装置、デジタルカメラ、方法、及びプログラム
JP5852465B2 (ja) * 2012-02-15 2016-02-03 日本放送協会 空間情報補間装置およびそのプログラム
JP6039301B2 (ja) * 2012-08-09 2016-12-07 キヤノン株式会社 撮像装置、撮像システム、撮像装置の制御方法、プログラム、および、記憶媒体
US9052518B2 (en) * 2012-11-30 2015-06-09 Lumenco, Llc Slant lens interlacing with linearly arranged sets of lenses
JP2014164174A (ja) * 2013-02-26 2014-09-08 Toshiba Corp 固体撮像装置、携帯情報端末、および固体撮像システム
JP6274901B2 (ja) * 2013-03-25 2018-02-07 キヤノン株式会社 撮像装置及びその制御方法
CA2934528C (en) * 2013-12-17 2022-06-28 Marsupial Holdings Inc. Integrated microoptic imager, processor, and display
EP3116216A4 (en) * 2014-03-03 2017-02-15 Panasonic Intellectual Property Management Co., Ltd. Image pickup apparatus
KR102228456B1 (ko) * 2014-03-13 2021-03-16 삼성전자주식회사 깊이 정보를 갖는 영상을 생성하는 영상 획득 장치 및 영상 획득 방법
KR102211862B1 (ko) * 2014-04-09 2021-02-03 삼성전자주식회사 이미지 센서 및 이를 포함하는 이미지 센서 시스템
JP6598473B2 (ja) * 2015-02-27 2019-10-30 キヤノン株式会社 撮像装置および画像処理装置
JP6289515B2 (ja) * 2016-01-12 2018-03-07 キヤノン株式会社 撮像装置及び撮像装置の制御方法

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7428329B2 (en) * 2003-05-28 2008-09-23 Fuji Machine Mfg. Co., Ltd. Pickup image processing device of electronic part mounting device and pickup image processing method
CN100414566C (zh) * 2003-06-19 2008-08-27 邓兴峰 平面图像全景重建立体图像的方法
GB2403864A (en) * 2003-07-10 2005-01-12 Ocuity Ltd Pixel arrangement for an autostereoscopic display
CN1580947A (zh) * 2003-08-16 2005-02-16 劳国华 用于产生全方位立体数码图像的***和方法
JP4752031B2 (ja) 2004-10-01 2011-08-17 ボード オブ トラスティーズ オブ ザ レランド スタンフォード ジュニア ユニバーシティ 撮像の装置と方法
JP4826152B2 (ja) * 2005-06-23 2011-11-30 株式会社ニコン 画像合成方法及び撮像装置
JP5036253B2 (ja) * 2005-08-31 2012-09-26 株式会社東芝 三次元画像表示用要素画像アレイの作成方法、作成装置、および作成プログラム
KR100730406B1 (ko) * 2005-11-16 2007-06-19 광운대학교 산학협력단 중간 요소 영상을 이용한 입체 영상 표시 장치
WO2007092581A2 (en) * 2006-02-07 2007-08-16 The Board Of Trustees Of The Leland Stanford Junior University Correction of optical aberrations
KR100841321B1 (ko) * 2006-09-29 2008-06-26 엘지전자 주식회사 입체영상 표시장치
JP5040493B2 (ja) * 2006-12-04 2012-10-03 ソニー株式会社 撮像装置及び撮像方法
US8103111B2 (en) * 2006-12-26 2012-01-24 Olympus Imaging Corp. Coding method, electronic camera, recording medium storing coded program, and decoding method
JP5171069B2 (ja) 2007-03-05 2013-03-27 株式会社Ｎｂｃメッシュテック 防塵性を有する触媒担持体
KR101329962B1 (ko) * 2007-05-07 2013-11-13 엘지디스플레이 주식회사 입체영상 표시장치
US7956924B2 (en) * 2007-10-18 2011-06-07 Adobe Systems Incorporated Fast computational camera based on two arrays of lenses
US7962033B2 (en) * 2008-01-23 2011-06-14 Adobe Systems Incorporated Methods and apparatus for full-resolution light-field capture and rendering

Cited By (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9341935B2 (en) 2010-03-03 2016-05-17 Nikon Corporation Image capturing device
CN102783162A (zh) * 2010-03-03 2012-11-14 株式会社尼康 摄像装置
CN106842386A (zh) * 2010-06-03 2017-06-13 株式会社尼康 拍摄装置
CN106842386B (zh) * 2010-06-03 2019-08-30 株式会社尼康 拍摄装置
CN106604017A (zh) * 2010-06-16 2017-04-26 株式会社尼康 图像显示装置
CN102870032A (zh) * 2010-06-16 2013-01-09 株式会社尼康 图像显示装置
US11079607B2 (en) 2010-06-16 2021-08-03 Nikon Corporation Image display device
CN107577058A (zh) * 2010-06-16 2018-01-12 株式会社尼康 图像显示装置
US10317686B2 (en) 2010-06-16 2019-06-11 Nikon Corporation Image display device
CN106604017B (zh) * 2010-06-16 2018-10-16 株式会社尼康 图像显示装置
US8711269B2 (en) 2010-12-17 2014-04-29 Canon Kabushiki Kaisha Image sensing apparatus and method of controlling the image sensing apparatus
CN102547095B (zh) * 2010-12-17 2014-10-29 佳能株式会社 图像感测装置及图像感测装置的控制方法
CN102547095A (zh) * 2010-12-17 2012-07-04 佳能株式会社 图像感测装置及图像感测装置的控制方法
CN102595170B (zh) * 2011-01-06 2016-07-06 索尼公司 图像摄取装置和图像处理方法
US9432656B2 (en) 2011-01-06 2016-08-30 Sony Corporation Image capturing device including lens array and processing
CN102595170A (zh) * 2011-01-06 2012-07-18 索尼公司 图像摄取装置和图像处理方法
CN103563366A (zh) * 2011-03-29 2014-02-05 索尼公司 图像拾取装置、图像拾取设备、图像处理方法、光圈控制方法及程序
CN103563366B (zh) * 2011-03-29 2016-10-19 索尼公司 图像拾取装置、图像拾取设备、图像处理方法、光圈控制方法及程序
CN102957863B (zh) * 2011-08-19 2015-10-28 佳能株式会社 摄像设备、图像处理设备和图像处理方法
US9456118B2 (en) 2011-08-19 2016-09-27 Canon Kabushiki Kaisha Image capturing apparatus, image processing apparatus, and image processing method for generating auxiliary information for captured image
CN102957863A (zh) * 2011-08-19 2013-03-06 佳能株式会社 摄像设备、图像处理设备和图像处理方法
CN103765882B (zh) * 2011-08-26 2017-12-15 株式会社尼康 三维图像显示装置
CN107801020A (zh) * 2011-08-26 2018-03-13 株式会社尼康 三维图像显示装置
CN103765882A (zh) * 2011-08-26 2014-04-30 株式会社尼康 三维图像显示装置
CN103297683B (zh) * 2012-03-01 2016-06-15 佳能株式会社 图像处理设备及图像处理方法
CN103297683A (zh) * 2012-03-01 2013-09-11 佳能株式会社 图像处理设备及图像处理方法
US10021309B2 (en) 2012-06-15 2018-07-10 Canon Kabushiki Kaisha Image recording apparatus and image reproducing apparatus
CN103516974A (zh) * 2012-06-15 2014-01-15 佳能株式会社 图像记录装置及图像再现装置
US9451148B2 (en) 2012-06-15 2016-09-20 Canon Kabushiki Kaisha Image recording apparatus and image reproducing apparatus
CN103516974B (zh) * 2012-06-15 2017-03-01 佳能株式会社 图像记录装置及图像再现装置
CN103019021A (zh) * 2012-12-27 2013-04-03 Tcl集团股份有限公司 一种3d光场相机及其拍摄图像的处理方法
CN103019021B (zh) * 2012-12-27 2016-05-11 Tcl集团股份有限公司 一种3d光场相机及其拍摄图像的处理方法
CN104076416A (zh) * 2013-03-27 2014-10-01 富士施乐株式会社 透镜阵列及其制造方法
CN103317229A (zh) * 2013-07-11 2013-09-25 苏州大学 一种标签签注方法与***
CN104459954A (zh) * 2013-09-18 2015-03-25 株式会社东芝 成像透镜和固态成像设备
US10375292B2 (en) 2014-03-13 2019-08-06 Samsung Electronics Co., Ltd. Image pickup apparatus and method for generating image having depth information
CN106471804A (zh) * 2014-07-04 2017-03-01 三星电子株式会社 用于图像捕捉和同时深度提取的方法及装置
US9872012B2 (en) 2014-07-04 2018-01-16 Samsung Electronics Co., Ltd. Method and apparatus for image capturing and simultaneous depth extraction
CN104391344B (zh) * 2014-10-15 2015-12-02 东南大学 一种用于消除主瓣畸变像差的微透镜阵列设计方法
CN104391344A (zh) * 2014-10-15 2015-03-04 东南大学 一种用于消除主瓣畸变像差的微透镜阵列设计方法
US10393990B2 (en) 2015-08-25 2019-08-27 Huawei Technologies Co., Ltd. Imaging apparatus and imaging method
CN105093472A (zh) * 2015-08-25 2015-11-25 华为技术有限公司 成像装置和成像方法
WO2017031948A1 (zh) * 2015-08-25 2017-03-02 华为技术有限公司 成像装置和成像方法
CN111510700A (zh) * 2020-06-18 2020-08-07 深圳市汇顶科技股份有限公司 图像采集装置
WO2022012503A1 (en) * 2020-07-17 2022-01-20 Shenzhen GOODIX Technology Co., Ltd. Passive three-dimensional image sensing based on chromatic focal differentiation
CN114286951A (zh) * 2020-07-17 2022-04-05 深圳市汇顶科技股份有限公司 基于色焦差异的被动三维图像感测
US11582436B2 (en) 2020-07-17 2023-02-14 Shenzhen GOODIX Technology Co., Ltd. Passive three-dimensional image sensing based on chromatic focal differentiation
CN114286951B (zh) * 2020-07-17 2023-06-09 深圳市汇顶科技股份有限公司 基于色焦差异的被动三维图像感测
WO2023230965A1 (zh) * 2022-06-01 2023-12-07 京东方科技集团股份有限公司 显示方法及装置

Also Published As

Publication number Publication date
CN101656835B (zh) 2012-10-31
JP4538766B2 (ja) 2010-09-08
US8502911B2 (en) 2013-08-06
EP2157801A2 (en) 2010-02-24
EP2157801A3 (en) 2010-06-30
US20100045844A1 (en) 2010-02-25
JP2010050707A (ja) 2010-03-04

Similar Documents

Publication Publication Date Title
CN101656835B (zh) 图像拾取设备、显示器和图像处理设备
CN101800854B (zh) 图像拾取装置
CN101883215B (zh) 成像设备
CN102917235B (zh) 图像处理装置和图像处理方法
CN101738840B (zh) 图像摄取设备
US9100639B2 (en) Light field imaging device and image processing device
CN101500086B (zh) 图像拾取装置
US6750904B1 (en) Camera system for three dimensional images and video
CN104662887B (zh) 图像处理设备、图像处理方法和具有该图像处理设备的摄像设备
US8902291B2 (en) Three-dimensional image pickup device
CN106101551B (zh) 图像处理装置、图像处理方法、摄像装置及显示设备
US8908054B1 (en) Optics apparatus for hands-free focus
CN103688536B (zh) 图像处理装置、图像处理方法
TWI527434B (zh) 利用光場相機產生立體影像的方法及光場相機
CN101500085A (zh) 图像摄取装置
CN101867707A (zh) 成像装置
US20180047185A1 (en) Light field metadata
CN103327223A (zh) 摄像装置
CN102209254A (zh) 一种一维集成成像方法和装置
CN105122793A (zh) 图像处理装置、摄像装置及图像处理程序
EP3065395A1 (en) Processing of light field data
WO2013018471A1 (ja) 撮像装置
CN213634008U (zh) 一种裸眼三维图像显示装置
CN115280766B (zh) 图像传感器、成像装置、电子设备、图像处理***及信号处理方法
CN107071391B (zh) 一种增强显示3d裸眼图形的方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20121031

Termination date: 20170821