CN107404609B - 用于传送阵列照相机图像数据的方法 - Google Patents

用于传送阵列照相机图像数据的方法 Download PDF

Info

Publication number
CN107404609B
CN107404609B CN201710422675.9A CN201710422675A CN107404609B CN 107404609 B CN107404609 B CN 107404609B CN 201710422675 A CN201710422675 A CN 201710422675A CN 107404609 B CN107404609 B CN 107404609B
Authority
CN
China
Prior art keywords
image data
data
line
focal planes
pixels
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710422675.9A
Other languages
English (en)
Other versions
CN107404609A (zh
Inventor
A·K·J·麦克玛霍恩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fotonation Ltd
Original Assignee
Quick Map Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Quick Map Co Ltd filed Critical Quick Map Co Ltd
Publication of CN107404609A publication Critical patent/CN107404609A/zh
Application granted granted Critical
Publication of CN107404609B publication Critical patent/CN107404609B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H04N23/957—Light-field or plenoptic cameras or camera modules

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了用于传送和接收阵列照相机图像数据的***和方法。描述了用于传送和接收由包含多个焦平面的成像器阵列捕获的图像数据的***和方法。本发明的一个实施例包含：使用照相机模块中的多个活动的焦平面捕获图像数据，这里，通过独立的透镜叠层在每个活动的焦平面上形成图像；通过交织由所述多个活动的焦平面捕获的图像数据来产生线图像数据；以及传送线图像数据和附加数据。

Description

用于传送阵列照相机图像数据的方法
本申请是基于申请号为201280029399.5、申请日为2012年5月11日、发明名称为“用于传送和接收阵列照相机图像数据的***和方法”的专利申请的分案申请。
技术领域
本发明一般涉及阵列照相机，更具体地，涉及从成像器(imager)阵列向诸如处理器的外部装置的图像数据的传送。
背景技术
在典型的照相机中，光通过照相机一端的开口(孔径)进入并通过透镜叠层(stack)被引向焦平面。透镜叠层创建光学通道，该光学通道在焦平面上形成场景的图像。焦平面包含光敏像素的阵列，这些像素是当经由光学元件接收光时产生信号的传感器的一部分。常用的传感器包含CCD(电荷耦合器件)传感器和CMOS(互补金属氧化物半导体)传感器。
传统的照相机典型地使用单个焦平面以捕获单个图像(每一次一个)。来自焦平面的每个像素的图像数据然后直接从焦平面被发送到处理器。处理器可操纵图像数据，以用于诸如编码图像数据、存储图像数据、转发图像数据或者修改图像数据。在许多情况下，在焦平面与处理器之间利用标准接口，该标准接口指定在焦平面与处理器之间传送数据的格式。
移动产业处理器接口联盟(MIPI)是颁布用于一致性的接口规范以促进移动装置中的再利用和兼容性的非赢利组织。MIPI已创建了用于照相机与处理器之间的接口的照相机串行接口2(c)接口格式(MIPI接口格式)。
发明内容
根据本发明的实施例的***和方法涉及由包含多个焦平面的照相机模块捕获的图像数据的传送和/或接收。在数个实施例中，图像数据被用于产生线图像数据，该线图像数据交织由不同的焦平面的像素捕获的图像数据。在许多实施例中，照相机模块中的传感器还产生描述捕获的图像数据的附加数据。在大量的实施例中，附加数据与线图像数据一起被传送，并被接收线图像数据的装置上的接口电路使用以识别线图像数据中的哪些像素与由照相机模块的焦平面捕获的所述多个图像中的一个或多个相关联。
本发明的一个实施例包含使用照相机模块中的多个活动的焦平面捕获图像数据，这里，通过独立的透镜叠层在每个活动的焦平面上形成图像；通过交织由所述多个活动的焦平面捕获的图像数据来产生线图像数据；以及传送线图像数据和附加数据。
另一个实施例还包括提供用于从捕获的图像数据解交织多个图像的信息的附加数据，以及与线图像数据一起传送该附加数据。
在另一个实施例中，附加数据描述成像器阵列。
在又一个实施例中，附加数据包含从描述以下方面的附加数据的群组中选择的数据：成像器阵列中的焦平面的数量；成像器阵列中的焦平面阵列的维度；在活动的焦平面的每个维度中的像素的数量；在活动的焦平面的每一个中的像素的积分时间；以及在活动的焦平面的每一个中的像素的增益。
在又一个实施例中，描述像素的增益的附加数据包含描述活动的焦平面的每一个中的像素的模拟增益的附加数据和描述活动的焦平面的每一个中的像素的数字增益的附加数据。
在又一个实施例中，产生线图像数据还包括通过使用预定处理来组合来自所述多个活动的焦平面的捕获的图像数据。
在又一个实施例中，预定处理从用于组合捕获的图像数据的多个预定处理中选择；并且，附加数据包含指示被用于组合捕获的图像数据的预定处理的附加数据。
在又一个实施例中，每个活动的焦平面包括包含多个行像素的像素阵列，所述包含多个行像素的像素阵列还形成多个列像素，并且用于组合捕获的图像数据的预定处理包括交织来自从活动的焦平面中的每一个选择的行的图像数据。
在又一个实施例中，用于组合捕获的图像数据的预定处理包括使用模数处理，这里，模数处理涉及通过交织来自被选择的行中的每一个的预定数量的像素来组合由活动的焦平面的被选择的行中的像素的每一个捕获的图像数据。
在又一个实施例中，附加数据描述线图像数据中的至少一个。
在又一个实施例中，附加数据包含从由描述以下方面的附加数据组成的群组中选择的数据：每个活动的焦平面开始捕获图像数据的时间；以及被用于捕获用于产生线图像数据的图像数据的活动的焦平面的每一个中的行的行数量。
另一个实施例还包含将线图像数据和描述捕获的图像数据的附加数据分成包，以生成至少一个数据包。此外，传送线图像数据和附加数据还包括传送至少一个数据包。
在又一个实施例中，数据包包含包头，该包头含有多条线图像数据和附加数据的至少一部分；并且，含在包头中的附加数据描述成像器阵列。
在又一个实施例中，数据包还包含包脚，该包脚指示所述多条线图像数据的传送的结束。
在又一个实施例中，数据包包括多条线图像数据和与所述多条线图像数据中的每一条相关联的线头，并且每个线头包含描述与线头相关联的线图像数据的附加数据。
在又一个实施例中，线头还包括描述成像器阵列的附加数据。
又一个实施例还包含：在帧消隐间隔期间中止传送；在帧间隔之间传送所述多条线图像数据和描述捕获的图像数据的附加数据；以及在线消隐间隔期间中止多条线图像数据和描述捕获的图像数据的附加数据的传送。
又一个实施例中还包含连续地传送线图像数据和附加数据，直到所有的数据被传送。
在又一个实施例中，照相机模块中的每个透镜叠层具有不同的视场。
一种用于接收图像数据的方法的实施例包含：使用接口电路从包含多个焦平面的照相机模块接收图像数据，这里，图像数据包括通过交织来自多个图像的像素而产生的线图像数据，所述多个图像使用所述多个焦平面捕获；以及使用接口电路识别作为所述多个图像中的至少一个的一部分的图像数据中的像素。
在用于接收图像数据的方法的另一个实施例中，照相机模块还产生描述捕获的图像数据的附加数据，并且所述方法还包含：接收附加数据；以及使用接口电路识别作为所述多个图像中的至少一个的一部分的图像数据中的像素还包括：使用附加数据识别作为所述多个图像中的至少一个的一部分的图像数据中的像素。
在用于接收图像数据的方法的另一个实施例中，附加数据包含从由描述以下方面的附加数据组成的群组中选择的数据：成像器阵列中的焦平面的数量；成像器阵列中的焦平面阵列的维度；在焦平面的每个维度中的像素的数量；在焦平面的每一个中的像素的积分时间；以及在焦平面的每一个中的像素的增益。
在另一个实施例中，描述像素的增益的附加数据包含描述活动的焦平面的每一个中的像素的模拟增益的附加数据和描述活动的焦平面的每一个中的像素的数字增益的附加数据。
在另一个实施例中，使用多个预定处理中的一个产生接收的线图像数据；并且附加数据识别被用于产生线图像数据的预定处理。
在另一个实施例中，接口电路包含被配置为识别作为所述多个图像中的至少一个的一部分的图像数据中的像素的处理器。
根据本发明的实施例的用于接收图像数据的***的实施例包含：接口电路，其被配置为从包含多个焦平面的照相机模块接收图像数据，这里，图像数据包括通过交织来自多个图像的像素而产生的线图像数据，所述多个图像使用所述多个焦平面捕获。此外，接口电路还被配置为使用接口电路识别作为所述多个图像中的至少一个的一部分的图像数据中的像素。
在用于接收图像数据的***的另一个实施例中，照相机模块还产生描述捕获的图像数据的附加数据，并且接口电路还被配置为：接收附加数据；以及使用附加数据识别作为所述多个图像中的至少一个的一部分的图像数据中的像素。
在用于接收图像数据的***的另一个实施例中，附加数据包含从由描述以下方面的附加数据组成的群组中选择的数据：成像器阵列中的焦平面的数量；成像器阵列中的焦平面阵列的维度；在焦平面的每个维度中的像素的数量；在焦平面的每一个中的像素的积分时间；以及在焦平面的每一个中的像素的增益。
在又一个实施例中，描述像素的增益的附加数据包含描述焦平面的每一个中的像素的模拟增益的附加数据和描述焦平面的每一个中的像素的数字增益的附加数据。
在又一个实施例中，接口电路包含被配置为识别作为所述多个图像中的至少一个的一部分的图像数据中的像素的处理器。
附图说明
图1示出根据本发明的实施例的阵列照相机。
图2示出根据本发明的实施例的成像器阵列。
图3示出根据本发明的实施例的作为包传送的图像数据。
图4示出根据本发明的实施例的作为与MIPI CSI-2标准接口格式兼容的包的图像数据的传送。
图5是根据本发明的实施例的线图像数据的传送的示图。
图6是根据本发明的实施例的传送由成像器阵列捕获的图像数据的处理。
图7a～7c在概念上示出根据本发明的实施例的通过使用模数处理交织来自多个焦平面的图像数据而被传送的线图像数据。
具体实施方式
现在转到附图，传送和接收由成像器阵列捕获的图像数据的***和方法被示出。在数个实施例中，成像器阵列被配置为向处理器传送图像数据和描述被传送的图像数据的附加数据。接收图像数据的装置可使用附加数据重构由成像器阵列捕获的场景(也称为光场)的多个图像。在数个实施例中，图像数据和描述图像数据的附加数据作为可包含包头以及线图像数据的图像数据包而被传送，其中，线头位于每条线图像数据之前。线图像数据包含由成像器阵列的焦平面捕获的图像数据并且可被利用以构建场景的多个图像。线头可包含识别包含在线图像数据中的特定的像素和焦平面的数据。在存在包头的实施例中，包头可包含描述照相机模块以使得处理器能够从图像数据的包构建图像的嵌入数据。
在各种实施例中，一条线(line)图像数据可与一行(row)、一列(column)或任意组织的图像数据对应，该图像数据与来自图像(其由成像器阵列中的焦平面的一个或多个捕获)的特定的像素对应。在许多实施例中，线图像数据可包含来自成像器阵列的焦平面中的一些或全部的特定的像素。
由成像器阵列中的焦平面捕获的所有图像数据可构成低分辨率图像(这里的术语低分辨率仅用于与可通过超分辨率处理合成的较高分辨率图像对比)，处理器可与由成像器阵列捕获的其它图像相结合地使用该低分辨率图像以通过超分辨率处理来构建较高分辨率图像。在2010年12月14日提交的标题为“Systems and Methods for SynthesizingHigh Resolution Images Using Super Resolution Processes”的美国专利申请No.12/967,807中讨论了超分辨率处理，其公开内容通过全部引用而被加入本文。然而，与向执行超分辨率处理的处理器传送图像相比，根据本发明的实施例的传送多个图像的处理是更一般的。因此，根据本发明的实施例的处理可被用于在各种应用中传送所捕获的场景的多个图像的图像数据，这些应用包含但不限于：涉及对正(register)从不同的视角捕获的图像的慢动作视频应用，以及涉及捕获一系列图像组以通过使用超分辨率处理合成一系列高分辨率帧的传统视频应用。
在数个实施例中，成像器阵列被配置为通过接口格式传送由焦平面产生的图像数据。捕获的图像数据根据接口格式作为包被传送。这些包可适于符合任意的接口格式，这些接口格式包含但不限于MIPI CSI-2接口格式(MIPI接口格式)。
以下进一步讨论根据本发明的实施例的成像器阵列、用于在成像器阵列和处理器之间传输捕获的图像数据的接口格式、以及用于经由接口格式将捕获的图像数据格式化为包以用于传输的处理。
***架构
根据本发明的许多实施例的阵列照相机可包含照相机模块和处理器。照相机模块可包含照相机的阵列。在各种实施例中，阵列照相机包含照相机模块和处理器。照相机模块可包含成像器阵列，该成像器阵列是包含焦平面的阵列的传感器。每个焦平面包含用于捕获通过透镜叠层形成在焦平面上的图像的像素的阵列。焦平面可由传统的CIS(CMOS图像传感器)、CCD(电荷耦合器件)、高动态范围传感器元件、多光谱传感器元件以及它们的各种替代形成，但并不限于这些。在许多实施例中，每个焦平面的像素具有类似的物理性能，并且通过同一透镜叠层接收光。此外，每个焦平面中的像素可与同一滤色器相关联。在多个实施例中，焦平面中的至少一个包含Bayer图案(pattern)过滤器。在数个实施例中，焦平面被独立地控制。在其它的实施例中，经由单个的一组控制来控制成像器阵列中的焦平面的操作。
图1中示出根据本发明的实施例的阵列照相机。阵列照相机100包含被配置为经由接口格式向接收装置108传送(106)图像数据的照相机模块102，该接口格式涉及描述所传送的图像数据的附加数据的传送。照相机模块102包含照相机104的阵列。照相机模块102中的照相机104通过透镜叠层和焦平面的组合形成。照相机模块102可包含透镜叠层的光学仪器(optic)阵列和焦平面的成像器阵列。这些多个照相机104在任意给定的时间可以是活动的(active)或者不活动的(inactive)。标题为“Architectures for imager arrays andarray cameras”的美国专利申请No.13/106,797、以及标题为“Capturing and processingof images using monolithic camera array with heterogeneous imagers”的美国专利申请No.12/952,106中讨论了阵列照相机，这两个申请的公开内容通过全部引用而被加入本文。由这些多个照相机捕获的图像数据被从每个照相机的焦平面发送到处理器。焦平面可具有不同的成像特性，诸如改变的曝光时间、开始时间以及结束时间。因此，由每个焦平面捕获的图像数据的传送定时可改变。因此，成像器阵列可传送描述图像数据的附加数据，以使得接收图像数据的装置能够适当地从接收的图像数据重构图像。
在许多实施例中，阵列照相机100通过使用可具有不同的成像特性的多个照相机104来捕获图像。阵列照相机100可单独地控制照相机中的每一个，以获得增强的图像捕获和/或增强处理(诸如(但不限于)可应用于捕获的图像的超分辨率处理)。例如，焦平面的每个像素可捕获光的不同波长，或者可捕获光的强度、改变的曝光时间、开始时间或结束时间。一旦阵列照相机100已开始通过使用成像器阵列上的像素捕获图像数据，焦平面就可开始将通过使用像素而捕获的图像数据传送到接收装置108。由不同的照相机模块捕获的图像数据可被交织(interleave)以传送到接收装置108，该接收装置108包含被配置为接收图像数据的接口电路。在许多实施例中，接口电路在硬件中和/或通过使用处理器实现。接收装置108然后可从接收的包来组织捕获的图像数据并适当地组合图像数据，以重构由成像器阵列中的焦平面的一个或多个捕获的图像。
在示出的实施例中，可通过照相机模块102捕获场景的多个图像。当图像数据被捕获时，照相机模块102向接收装置108传送图像数据。在通过照相机捕获图像数据之后，照相机模块102通过使用照相机模块102上的一小部分本地数据存储单元来传送图像数据，该照相机模块102上的本地数据存储单元存储捕获的图像数据。照相机模块102管理图像数据的捕获和传送，使得存储单元中所存储的被捕获的图像数据在将下一组图像数据捕获并加载到存储单元中所花费的时间内被成像器阵列102传送。以这种方式，照相机模块可通过使用比照相机模块中的像素的总数少的多个本地数据存储单元来连续地缓冲并传送图像数据。
由成像器阵列传送的一条线(line)图像数据可被视为等于焦平面的一行(row)(列(column))中像素的数量乘以焦平面的数量。在数个实施例中，成像器阵列上的传送器电路的时钟频率被设为期望的输出数据速率，并且内部焦平面像素速率被设为期望的输出数据速率的1/N(这里，N是焦平面的总数)。在许多图像传送协议中，一旦线的开始条件被发送，所有的图像数据就不中断地被传送，直到线的结束。因此，可以开发足够数量的数据存储单元和缓冲机构，其一旦存在足够的存储像素时就开始像素的传输，使得所有的像素在到达图像数据的线的结束的时间之前已被捕获和传送。例如，如果包含16个焦平面的成像器阵列(如4×4阵列那样)传送来自所有焦平面的图像数据，那么在焦平面读出开始之前存在很少的、被利用的数据存储器，因为数据大致以它被读取的速率传送。但是，如果同一成像器阵列仅具有一个活动的成像器，那么几乎所有来自焦平面的一行(列)的像素被存储，原因在于缓冲器读取比它被写入快16倍。因此，数据存储需求将是一行像素(即，一条线图像数据的1/16)。当8个焦平面是活动时，来自所有8个焦平面的数据的一半在传送开始之前被缓冲以避免下溢(underflow)。因此，被利用的数据存储单元的总数等于四行像素或一条线图像数据的四分之一。以上的示例示出成像器阵列的数据存储需求可如何基于活动的焦平面的数量而改变。在许多实施例中，成像器阵列内的存储单元的总数小于一条线图像数据的四分之一。在数个实施例中，成像器阵列内的存储单元的总数等于一条线图像数据。在数个实施例中，数据存储单元的总数介于一条线图像数据的四分之一与一整条线图像数据之间。在多个实施例中，存储单元的总数等于或大于一条线图像数据。当照相机模块传送捕获的图像数据时，描述图像数据的附加数据的加入使得接收图像数据的***装置能够重构由成像器阵列102中每个活动的照相机所捕获的图像。
根据本发明的许多实施例的成像器阵列被配置为经由接口格式输出图像数据，该接口格式适应经由多个焦平面捕获的图像数据的传输。在数个实施例中，成像器阵列被配置为根据接口格式传送捕获的图像数据，该接口格式与诸如(但不限于)MIPI CSI-2接口格式(MIPI接口格式)、照相机链接接口格式、以及通用串行总线(USB)接口格式或FireWire接口格式的任意一种的标准接口格式兼容。当通过成像器阵列输出从多个焦平面捕获的图像数据时，接收图像数据的装置面临将图像数据组装(assemble)成场景的多个图像的任务。
尽管以上讨论了特定的阵列照相机***架构，但是，根据本发明的实施例，可以利用适于特定应用需求的阵列照相机的各种***架构中的任意一种。以下讨论根据本发明实施例的由成像器阵列上的多个焦平面捕获的图像数据以及描述图像数据的、使得接收器能够从图像数据重构图像的附加数据的传送。
焦平面的识别
由于根据本发明的许多实施例的成像器阵列可通过使用多于一个的焦平面来捕获图像数据的事实，因此，用于传送捕获的图像数据的处理包含识别被用于捕获特定的一组图像数据的特定的焦平面的机制。对于识别成像器阵列内的特定的焦平面，典型地采用惯例。图2中概念性地示出根据本发明的实施例的成像器阵列上的焦平面。示出的成像器阵列200包含焦平面202的5×5阵列。每个焦平面202包含像素的阵列。
成像器阵列上的焦平面可被视为以焦平面的“M”行(在行轴上被表示为符号“m”)和焦平面的“N”列(在列轴上被表示为符号“n”)的矩阵布置。单个焦平面可基于它们在成像器阵列内的位置而被识别。在某些实施例中，使用通过下式定义焦平面号的编号惯例：
焦平面号＝(m+(n＊M))+1
这里，m是成像器阵列从0到M-1的水平索引；
n是成像器阵列从0到N-1的垂直索引；
M是在水平方向上的焦平面的总数；
N是在垂直方向上的焦平面的总数。
在示出的实施例中，焦平面的水平索引或行从0到4编号。焦平面的垂直索引或列从0到4编号。从而，在示出的焦平面的阵列中，对于总数为25的焦平面，每行和每列具有5个焦平面。在许多实施例中，编号在成像器阵列的左上角处开始。在其它实施例中，使用替代的惯例对焦平面编号。
尽管以上讨论了特定的焦平面编号惯例，但可以利用各种不同的惯例中的任意一种来识别焦平面。考虑到特定的惯例，被利用以捕获特定的图像数据的焦平面的标识(identity)可与图像数据一起传送。以下进一步讨论用于与识别捕获图像数据的焦平面的信息一起传送图像数据的处理。
将由多个焦平面捕获的图像数据分成包(packetize)
在数个实施例中，可通过以处理器可从接收的图像数据重构场景的图像的方式将图像数据和/或描述图像数据的附加数据***包中来将来自多个焦平面的图像数据分成包。图3中示出根据本发明的实施例的、由成像器阵列传送的包含图像数据和描述图像数据的附加数据的包的概念示图。包302包含包头(header)304和包脚(footer)306。包302还包含多条线308图像数据，其中，每条线308图像数据包含线头310和线脚312。在许多实施例中，包头304和/或线头310以接收包的装置可通过使用包含包内所含有的线图像数据的图像数据来重构多个图像的方式含有描述图像数据的附加数据。包含在包内的线图像数据的数量典型地依赖于特定应用的需求。在许多实施例中，包可含有对于单个被捕获的光场的所有的线图像数据。术语光场可用于描述多个二维图像(其为从不同的视角捕获的场景的二维图像)。在其它实施例中，被捕获的光场的线图像数据可被分割并在多个包中被发送。在许多实施例中，由来自不同焦平面的一条线像素内的各个像素或像素群组(group)捕获的图像数据可在图像数据的包内被交织。
在多个实施例中，包头304含有嵌入数据。在许多实施例中，嵌入数据以处理器可确定包中图像数据的结构并从接收自照相机模块的数据重构图像的方式来描述产生图像数据的照相机模块。在数个实施例中，包头304包含嵌入数据，诸如(但不限于)成像器阵列中的焦平面的数量、每个焦平面的图像捕获的定时、被读出的特定焦平面的标识、焦平面中像素的总数、由焦平面拍摄的图像的分辨率、像素读出的定时以及焦平面的增益。如以下所讨论的那样，以上描述的嵌入数据不需要包含在包头中，并且信息中的一些或全部可以不同的方式伴随着图像数据被传送，这些方式包含但不限于将附加数据定位在包中的其它地方和/或在单独的包中传送附加数据。以下进一步讨论根据本发明的实施例的描述成像数据的嵌入数据。
在示出的实施例中，线308图像数据的包含线头310。线头识别成像器阵列中捕获线图像数据内所含有的图像数据的焦平面或多个焦平面和像素。处理器可利用线头来识别线310图像数据内所含有的特定的图像数据。在各种实施例中，线头310包含信息，诸如(但不限于)捕获线内的图像数据的焦平面的标识、和/或用于捕获线数据内所含有的图像数据的特定的像素或一组像素的标识、以及时间戳。换句话讲，根据本发明实施例的格式化包内的线图像数据不需要与通过使用单个焦平面中的单条线像素所捕获的图像数据对应。实际上，根据本发明实施例的图像数据包可包含线图像数据，其含有由不同的线像素所捕获的和/或来自不同焦平面的图像数据。在线头中包含描述线图像数据的附加数据允许处理器从复用到单个包或包的流中的多个图像接收图像数据并处理。以下进一步讨论根据本发明的实施例的可包含在线头中(或其它地方)的不同类型的嵌入数据。
每条线308图像数据可包含指示与前面的(preceding)线头310相关联的线308图像数据已结束的线脚312。并且，每个包302可包含指示与先前的(prior)包头304相关联的图像数据已结束的包脚306。在许多实施例中，成像器阵列被配置为产生多个包302以含有由焦平面捕获的图像数据，并且每个包包含多条线图像数据。
由于当成像器阵列传送数据时由不同焦平面中的不同像素组捕获图像数据的方式，因此处理器典型地不能预测它将从成像器阵列接收图像数据的次序。在许多实施例中，处理器在不参照对于线图像数据的线头和/或包头的情况下并不了解捕获线图像数据内所含有的图像数据的焦平面或多个焦平面。然而，在其它实施例中，成像器阵列对于特定的焦平面捕获图像数据的次序加以限制(例如，参见以下相对于7a-7c的讨论)，并且处理器可依赖于图像数据捕获的预定次序来重构图像数据。尽管相对于从不同的焦平面捕获图像数据的方式对捕获图像数据的次序加以限制可减少图像阵列的灵活性，但是图像数据从成像器阵列被接收的可预测的方式通过去除识别捕获图像数据的像素和/或焦平面的信息可导致连同图像数据而传送的附加数据的量的减少。在许多实施例中，限制成像器阵列捕获图像数据的方式使得图3所示的包头、包脚、线头和/或线脚能够被消除。
尽管以上描述了在包头和/或线头内包含特定的信息，但是，根据本发明的实施例，使得能够从复用到单个包或包的流中的图像数据重构多个图像的任意信息均可被加入图像数据的包中。以下进一步讨论与MIPI接口格式兼容的图像数据的传送。
与MIPI接口格式兼容的图像数据传送
在数个实施例中，成像器阵列以与现有接口格式(其用于通过包含单个焦平面的传统照相机传送图像数据)兼容的方式传送图像数据和描述图像数据的附加数据。图4中示出根据本发明的实施例的作为与MIPI CSI-2标准接口格式(MIPI接口格式)兼容的包而被传送的图像数据和描述图像数据的附加数据的概念示图。概念示图可被阅读为涉及X方向420上从左到右、以及Y方向422上从上到下的传送。传送以MIPI帧消隐(blanking)间隔402开始。MIPI帧开始(MFS)410指示器然后被成像器阵列发送，随后是MIPI头412的一部分。根据本发明的实施例产生的数据包作为嵌入数据被***到标准MIPI容器(container)内。因此，MIPI容器内的第一条线数据可包含含有关于产生图像数据的焦平面的信息的包头424(参见以上的讨论)。
MIPI容器的第一条线的传送通过MIPI脚406的传送来完成。在MIPI线消隐间隔408期间存在中止，并且然后传送MIPI头412的下一部分。MIPI容器的下一条线包含线414图像数据。在成像器阵列传送线图像数据的次序未被预定的实施例中，线头位于线图像数据之前，并且线脚位于线图像数据之后。在线图像数据被以预定的次序传送的实施例(参见例如图7a～7c的讨论)中，可以不利用线头和/或线脚。
传送MIPI脚、在MIPI线消隐间隔期间中止、传送MIPI头的一部分、以及传送MIPI容器内的线图像数据的处理继续，直到包内所有的线图像数据被传送。在数个实施例中，嵌入的包脚在MIPI容器中被传送，以指示包的传送完成。在传送包之后，通过传送MIPI脚406和MIPI帧尾(end)416来完成MIPI容器的传送。尽管图4所示的包涉及在MIPI容器的线消隐间隔之间传送一条线图像数据，但是在许多实施例中，包头和线图像数据与MIPI容器的线消隐间隔不对应。换句话讲，MIPI容器的单个线消隐间隔可含有来自两条或更多条线图像数据的图像数据。因此，线头和/或线脚被用于识别容器内的各条线图像数据。
很容易理解，图4所示的处理涉及在传统的MIPI容器内格式化根据本发明的实施例产生的包含图像数据和描述图像数据的附加数据的数据包。以这种方式，成像器阵列可利用被开发用于能够传送由单个焦平面捕获的图像数据的接口标准，以使得能够传送含有多个焦平面(即，光场)所捕获的图像数据的数据包。在其它实施例中，类似的处理可被利用以通过使用其它的容器和/或接口格式(包含(但不限于)CameraLink接口格式、USB接口格式或Firewire接口格式)来传送以上面概述的方式格式化的包。
描述成像器阵列的附加数据
根据本发明的许多实施例的成像器阵列，可在由成像器阵列传送的图像数据中的包头或其它地方嵌入描述成像器阵列的附加数据。处理器可利用描述成像器阵列的附加数据来从包内所含有的图像数据重构图像。在各种实施例中，描述成像器阵列的附加数据被分为固定描述符(descriptor)和动态描述符。固定描述符是作为特定于阵列照相机配置的固定值的、并且在阵列照相机操作期间不变化的、包头内的数据片段(piece)。动态描述符是可在阵列照相机操作期间改变的、嵌入数据内的数据片段。在许多实施例中，动态描述符是描述诸如(但不限于)焦平面曝光时间或者焦平面处理增益的操作状态的参数。在数个实施例中，成像器阵列传送图像数据以及包含焦平面的总数、第一维度中每个焦平面读出的像素的总数、第二维度中每个焦平面读出的像素的总数、每个焦平面中像素的积分时间以及施加到每个焦平面中的每个像素的增益(可分为模拟增益和数字增益)中的至少一个的附加数据。被传送的描述成像器阵列的特定数据典型地依赖于通过其它来源向接收装置提供的关于成像器阵列的信息。在许多实施例中，诸如积分时间的成像特性可由诸如处理器的接收装置指定，并且相关的焦平面的成像特性响应于指令而已被更新的信息被成像器阵列传送以发送到接收装置。在许多实施例中，成像器阵列传送图像数据和向每个焦平面中的每个像素施加的增益(可分为模拟增益和数字增益)以及附加数据，该附加数据包含活动的焦平面中像素的积分时间、以及焦平面的总数、第一维度中每个焦平面读出的像素的总数、第二维度中每个焦平面读出的像素的总数中的至少一个。在其它实施例中，包含附加的信息片段的信息的各种组合中的任意一种可作为根据本发明的实施例的描述图像数据的附加数据传送。
在许多实施例中，成像器阵列内的传送器在包头中包含描述成像器阵列的附加数据，以允许处理器内的接收器依次确定包内的数据的结构，以用于处理器中的软件重构来自照相机的图像数据。包头中描述成像器阵列的附加数据主要依赖于特定的应用和阵列照相机配置。
在数个实施例中，描述成像器阵列的附加数据通过使用嵌入的8位非图像数据(数据类型＝0×12)格式(其作为MIPI接口标准的一部分而被指定)来作为MIPI容器内的嵌入数据被传送。下表提供根据本发明的许多实施例的可在传送的描述成像器阵列的附加数据中利用的各种固定描述符的结构。除非另外说明，否则，字节次序是MSB优先。在数个实施例中，以下固定描述符中的一个、多个和/或全部可作为包头内的嵌入数据被包含：
Figure GDA0002245220080000161
下表提供根据本发明的许多实施例的可在传送的描述成像器阵列的附加数据中利用的各种动态描述符的结构。除非另外说明，否则，字节次序是MSB优先。在数个实施例中，以下固定描述符中的一个、多个和/或全部可作为包头内的嵌入数据被包含：
Figure GDA0002245220080000162
Figure GDA0002245220080000171
Figure GDA0002245220080000181
参照上表，以下进一步讨论描述符中的每一个。此外，尽管对于固定描述符和动态描述符在整个说明书的实施例中使用特定数量的字节，但是在适于特定应用的其它实施例中可利用任意数量的字节。
“数据识别(ID)”是可在嵌入数据的开始处使用的5个字节的固定描述符。可通过诸如(但不限于)“PICAM”的ASCII字符串代表其值。
“装置ID”是可用作装置识别字的4个字节的固定描述符。
“修订ID”是长度为两个字节的固定描述符。“修订ID”是硅修订字并且描述成像器阵列的版本。
“制造商ID”是长度为8个字节的固定描述符。“制造商ID”是制造商识别符。
“阵列格式，M，N”是长度为1个字节的固定描述符。“阵列格式”描述成像器阵列中的焦平面的数量。在数个实施例中，阵列格式指定值M和N，这里，M是成像器阵列中每行焦平面的数量，N是成像器阵列中每列焦平面的数量。
“焦平面图像数据捕获开始时间标签计数器频率”是长度为2个字节的、指示用于产生焦平面图像数据捕获开始时间标签计数器频率值的频率的固定描述符。在数个实施例中，使用16位固定精度8.8格式(0～255.99609MHz，步长为0.00390625MHz)代表频率。在其它实施例中，各种数据值中的任意一种可被利用以适于特定应用的精度代表包时间标签值。
“活动的焦平面”是长度为8个字节的动态描述符。“活动的焦平面”描述符描述在即将到来的包中读出的焦平面。某些实施例提供多达64个焦平面的支持。在其它实施例中，焦平面的数量可超过64个焦平面，并且嵌入数据指示焦平面的适当的数量。每个位与成像器阵列内的单个焦平面对应，其中1指示包含有通过使用焦平面捕获的图像数据。
“总像素X”是长度为2＊M＊N的、描述在X轴方向上每个焦平面读出的像素的数量的动态描述符。在数个实施例中，每个像素具有与它相关联的16位字。不活动的焦平面(焦平面不是读出的一部分)被设为0×0000h。
“总像素Y”是长度为2＊M＊N的、描述沿Y轴方向每个焦平面读出的像素的数量的动态描述符。不活动的焦平面(焦平面不是读出的一部分)被设为0×0000h。
“积分时间”是长度为3＊M＊N的、以毫秒为单位描述每个焦平面(与即将到来的包中的第一行数据对应)的积分时间的动态描述符。不活动的焦平面(焦平面不是读出的一部分)被设为0×000000h。
“模拟增益”是长度为I＊M＊N的、描述线性单元中每个焦平面(与即将到来的包中的第一行数据对应)的模拟增益的动态描述符。在数个实施例中，使用8位定点5.3格式(0～31.875×步长为0.125)代表增益。不活动的焦平面(焦平面不是读出的一部分)被设为0×00h。
“数字增益”是长度为1＊M＊N的、描述线性单元中每个焦平面(与即将到来的包中的第一行数据对应)的数字增益的动态描述符。在数个实施例中，通过使用7位定点3.4格式代表增益。不活动的焦平面(焦平面不是读取的一部分)被设为0×00h。
“包装模数”是限定用于将来自活动的焦平面的像素数据交织为线图像数据的包装模数处理的、2字节长度的动态描述符。
“用户”是可被利用支持***能力扩展的可变长度的动态描述符。
“填充”是允许将嵌入数据部分的长度扩展为等于具有前面的线头和后尾的线脚的线图像数据的、可变长度的动态描述符。填充字节的值未被指定，并且依赖于特定数据部分的需要是可改变的。
尽管以上公开了以特定的格式描述成像器阵列的特定的附加数据片段，但是，根据本发明的实施例的由成像器阵列传送的描述成像器阵列的附加数据(如果有的话)依赖于特定应用的需求。在许多实施例中，描述成像器阵列的其它的附加数据片段和/或以上的附加数据片段的组合可被传送，使得接收信息的处理器可从由根据本发明的实施例的成像器阵列捕获的图像数据重构图像。因此，在成像器阵列与处理器之间传送图像数据的方式决不限于包含描述成像器阵列的特定的一组附加数据的传送。然而，包含(但不限于)以上识别的动态描述符中的一个或多个的、描述成像器阵列的特定的附加数据组可有利于通过处理器对图像进行重构。
描述线图像数据的附加数据
根据本发明的许多实施例的成像器阵列将由一个或多个焦平面内的像素群组捕获的图像数据格式化为线图像数据，并可将线图像数据与描述线图像数据的附加数据一起传送到其它装置。单条线图像数据典型地与由成像器阵列中每个活动的焦平面内的一行或一列像素所捕获的图像数据对应。然而，在许多实施例中，线图像数据可与从一个或多个活动的焦平面的一行或多行中的像素所捕获的图像数据对应(参见以下图7a～7c的讨论)。在图4所示的数据包的传送的背景中，线图像数据(可能包含含有描述图像数据的线的附加数据的线头和线脚)在MIPI容器内在线消隐间隔之间被传送。
图5中概念性地示出根据本发明的实施例的通过成像器阵列的含有描述线图像数据的附加数据的线头和线图像数据传送。线图像数据500以含有描述线图像数据的附加数据的线头502开始，随后是捕获的图像数据504，并且以指示特定的线图像数据完成的脚结束。重新参照图4，当根据与MIPI接口格式类似的传送格式传送线图像数据时，线头和线脚位于数据414内(即，与包头(PH)424和包脚(PF)426不同)。尽管许多讨论提到在线头中包含描述线图像数据的附加数据，但是在许多实施例中也可在线头中包含描述成像器阵列的附加数据。此外，描述线图像数据的附加信息不需要位于线头内，而可在相对于图像数据的其它地方被发送。
可以利用各种不同的控制方案控制通过成像器阵列的焦平面内的不同像素捕获图像数据的、并且相对于通过成像器阵列的捕获图像数据的传送的定时。在数个实施例中，每一次一行(或列)像素捕获来自特定的焦平面的图像数据。如上所述，成像器阵列中的焦平面可被单独地控制。因此，从每个焦平面读取图像数据的行的次序可依赖于包含但不限于与每个焦平面相关联的曝光时间的控制参数而改变。当图像数据由像素捕获时，图像数据被读出。图像数据典型地不直接从像素传送，而是被缓冲。缓冲的数据量典型地依赖于捕获图像数据的速率和可通过成像器阵列片外(off-chip)传送图像数据的速率。如以上所讨论的那样，缓冲的像素数据量也可依赖于活动的焦平面的数量。
在大量的实施例中，线图像数据可以是来自每个活动的焦平面的一行像素数据、来自每个活动的焦平面的一列像素数据或由一个或多个焦平面内的像素捕获的任意其它的图像数据群组。因此，术语“线”是通用术语。在许多实施例中，线图像数据包含从单个焦平面中的像素捕获的图像数据。在其它实施例中，线图像数据包含从多个焦平面捕获的图像数据。描述线图像数据的附加数据允许接收器上的软件或硬件确定从哪个焦平面、焦平面上的哪些像素和/或哪行/列捕获线图像数据内的特定的图像数据。
在数个实施例中，通过使用MIPI接口格式内限定的RAW8或者RAW10数据格式来传送图像数据，尽管在必要时可支持其它的数据格式，这些其它的数据格式包含涉及每个像素8位的格式和涉及每个像素10位的格式。
在各种实施例中，可通过使用下式来计算当发生光场的捕获时由成像器阵列所传送的、具有伴随的线头(其含有描述图像数据的附加数据)的图像数据(即，包含与由成像器阵列中的焦平面中的每一个捕获的场景的图像相关联的所有图像数据)的尺寸(以字节为单位)：
((X＊N)+P)＊Y＊k
这里，X是特定的焦平面内一行像素中的总像素
Y是沿Y轴的总像素，
N是阵列中焦平面的数量，
P是线头长度，
k是由于每个像素10位传送而可被使用的标量因子(这里，每个像素8位(bits perpixel，bpp)产生k＝1，10bpp产生k＝1.25)。
在每个像素10位传送的情况下，每条线数据填充附加的像素以提供4的整数倍。填充像素可具有0×3Fh的值。
在许多实施例中，描述线图像数据的附加数据可包含关于来自每个焦平面的图像数据所属于的帧的定时信息以及每个焦平面中从中读出线图像数据中的图像数据的行(列)号中的一个或多个。在多个实施例中，每条线数据位于含有描述线图像数据的附加信息的线头之前，其向处理器提供关于线数据的必要的信息以重构由焦平面捕获的图像。下表提供可包含在根据本发明的实施例中的线头中以使得处理器能够重构图像的附加数据：
Figure GDA0002245220080000231
参照上表，以下进一步讨论描述符中的每一个。此外，尽管对于固定描述符和动态描述符在整个说明书的实施例中使用特定数量的字节，但是在适于特定应用的其它实施例中可利用任意数量的字节。
“焦平面图像数据捕获开始时间标签”在长度上等于或小于4＊M＊N字节，并且描述每个焦平面的与焦平面读出的相对开始时间对应的32位数(标称)。从传感器阵列内的传送器内部的以时钟周期为单位计数的自由运行32位计数器捕获焦与像素相关联的图像数据的开始，这里，在嵌入数据中限定计数器的频率。不活动的焦平面(在包头的嵌入数据的活动焦平面域中限定)可使其焦平面图像数据捕获开始时间标签省略。注意，在每个像素10位传送模式中，各个字节被扩展到10位并以2LSBs＝00填充。
“行号”在长度上等于或小于2＊M＊N字节，并且描述每个焦平面的指示随后的图像数据来自焦平面中哪个物理行或线的16位线号(标称)(位的适当数量依赖于线像素的数量，并且不需要为16位)。可传送的非物理行或线(虚行或线)可使其行或线号设为0×ffffh。不活动的焦平面(在嵌入数据的活动焦平面域中限定)可使其线号省略。在每个像素10位传送模式中，各个字节被扩展到10位并以2LSBs＝00填充。
“填充”在长度上具有可变的字节(在某实施例中诸如为0或2)。可变的填充范围使得在每个像素10位传送的情况下线头落在模5字节边界上。在数个实施例中，填充字具有0×3Fh的值。
尽管以上公开了以特定的格式描述线图像数据的特定的附加数据片段，但是，由根据本发明的实施例的成像器阵列伴随着图像数据的线传送的描述图像数据的线的附加数据(如果有的话)依赖于特定应用的需求。在许多实施例中，以上的附加数据片段和/或其它的附加数据片段的组合在线头中被传送，使得接收描述图像数据的线的附加数据的处理器可从由根据本发明的实施例的成像器阵列捕获的图像数据重构图像。因此，在成像器阵列与处理器之间传送数据的方式决不限于包含描述图像数据的线的特定的一组附加数据的传送。然而，描述图像数据的线的附加数据的特定的组可有利于通过处理器对图像进行重构。
在线头中包含描述成像器阵列的附加数据
如以上所讨论的那样，描述成像器阵列的附加数据可被利用以允许接收器确定包中的图像数据的结构并重构图像。在某些实施例中，描述成像器阵列的附加数据可包含在线头中，该线头还可包含描述图像数据的线的附加数据。这在包头长度可被限制或者描述成像器阵列的附加信息的单独传送是不期望的某些实施例中会是有利的。
下表包含可被包含在根据本发明的实施例的线头中以使得处理器能够对图像进行重构的、描述成像器阵列的附加数据：
Figure GDA0002245220080000241
Figure GDA0002245220080000251
参照上表，以下进一步讨论描述符中的每一个。此外，尽管对于固定描述符和动态描述符在整个说明书中的实施例中使用特定数量的字节，但是在适于特定的应用的其它实施例中可利用任意数量的字节。
“自由运行模式”在长度上等于2字节，并且描述“FR”的ASCII码的固定值。注意，在每个像素10位传送模式中，各个字节被扩展到10位并以2LSBs＝00填充。
“包计数器”在长度上等于2字节，并且描述任意的包数量计数器。当复位时它可被初始化为零，对于以MIPI接口格式传送的每个包它被增加1，并且在0xffff处反转。注意，在每个像素10位传送模式中，各个字节被扩展到10位并以2LSBs＝00填充。
“行号”在长度上等于或小于2＊M＊N字节，并且描述指示随后的图像数据来自焦平面中的哪个物理行或线的、每个焦平面的16位行或线号(标称)(位的适当数量依赖于像素的线的数量，并且不需要为16位)。可传送的非物理行或线(虚行或线)可使其行或线号设为0×ffffh。不活动的焦平面(在嵌入数据的活动焦平面域中限定)可使其线号省略。在每个像素10位传送模式中，各个字节被扩展到10位并以2LSBs＝00填充。
“填充”在长度上具有可变的字节(在某实施例中诸如为0或2)。可变的填充范围使得在每个像素10位传送的情况下线头落在模5字节边界上。在数个实施例中，填充字具有0×3Fh的值。
尽管以上公开了可被包含在线头中的、描述成像器阵列的特定的附加数据片段，但是，根据本发明的实施例的由成像器阵列与线图像一起传送的附加数据依赖于特定应用的需求。在许多实施例中，描述成像器阵列的以上的附加数据片段和/或描述成像器阵列和/或一条或多条线图像数据的其它的附加数据片段的组合在线头中被传送，使得接收信息的处理器可从由成像器阵列捕获的图像数据重构图像。因此，在成像器阵列与接收器之间传送数据的方式决不限于包含线头或包头中的特定的一组附加数据的传送。
光场捕获和传送处理
根据本发明的许多实施例的成像器阵列可通过使用多个焦平面来捕获图像数据，并将图像数据和描述图像数据的附加数据传送到处理器。如上所述，在特定的容器内传送图像数据和描述图像数据的附加数据的需要可影响数据传送的方式。如上所述，描述图像数据的附加数据典型地依赖于图像数据被捕获的方式和用于捕获光场的成像器阵列的特性。
图6中示出根据本发明的实施例的通过使用成像器阵列捕获光场并向诸如(但不限于)处理器的外部装置传送图像数据和描述图像数据的附加数据的处理。处理600可通过传送包含描述成像器阵列的附加数据的包头(602)开始。如上所述，包头的传送可以是可选择的。在处理期间，通过成像器阵列中的像素捕获(604)图像数据。在各种实施例中，捕获(604)图像数据涉及控制捕获图像数据时所使用的像素设置和像素。在某些实施例中，像素设置可每个焦平面全局地执行。在许多实施例中，处理还包含在捕获图像数据之后重设(reset)像素。
在许多实施例中，通过成像器阵列传送(606)包含描述线图像数据的附加数据的线头，然后传送(608)捕获的线图像数据。如上所述，线图像数据可包含来自一个或多个焦平面的图像数据，并且附加数据可在线图像数据内识别捕获图像数据的焦平面和/或像素群组。当完成线图像数据的传送时，可可选地由成像器阵列传送(610)线脚以指示完成线图像数据的传送。该处理重复，直到使用多个焦平面完成光场的捕获(即，从不同的视点(viewpoint)捕获多个二维图像)的确定(612)被做出。在通过成像器阵列完成图像数据的传送之后，成像器阵列可可选地传送(614)指示数据包的完成的包脚。如上所述，传送图像数据和描述图像数据的附加数据的特定方式通常由接口格式(例如，MIPI接口格式)来指定。
在数个实施例中，基于被配置为以预定的顺序传送捕获的图像数据和/或捕获预定量的图像数据的图像数据来省略线头、线脚和/或包脚。尽管以上相对于图6所示的处理讨论了传送图像数据和描述图像数据的附加数据的特定处理，但是，根据本发明的实施例可以利用各种处理中的任意一种，这些处理使得能够传送使用不同的焦平面捕获的线图像数据、以及可被利用以从线图像数据重构多个图像的附加数据。以下进一步讨论通过成像器阵列以预定的方式传送捕获的图像数据的处理。
交织来自多个焦平面的图像数据
在多个实施例中，来自多个焦平面的图像数据可以预定的方式交织，以简化图像数据的传送并且减少伴随着图像数据传送的描述图像数据的附加数据的量。在许多实施例中，成像器阵列使用“模数”方案以将捕获的图像数据以预定的方式交织成包。模数方案涉及从成像器阵列内每一个活动的焦平面(或者一组焦平面中的每个焦平面)中的同一像素群组(诸如相同的一行、多行、一列、或多列)捕获并传送图像数据。在其它实施例中，模数方案可涉及从一组焦平面指定特定的行(或列)并然后从每个特定的行(或列)读出对应的像素或像素群组。
图7a～7c中示出根据本发明的实施例的捕获和传送图像数据的三个不同的模数处理。图7a中示出根据第一模数处理726传送的线图像数据，并涉及在传送来自被选择行(其来自20个焦平面中的每一个)的第二像素704之前传送来自一行(其从总共20个焦平面中的每一个选择)的第一像素702。因此，图7a所示的处理可被称为模1处理。很容易理解，焦平面的数量是任意的。在数个实施例中，可在在传送图像数据之前传送的线头内所含有的附加数据中指定由每个焦平面传送的特定的行。
类似地，图7b中概念性地示出根据第二模数处理728传送的线图像数据，并涉及传送像素对(其来自活动的焦平面的每一个中的被选择行)。在示出的实施例中，在传送被选择行的第三像素710和第四像素712之前传送第一像素706和第二像素708(其来自总共20个焦平面的每一个中的被选择行)。该处理重复传送来自每个焦平面中的被选择行的像素对，直到完成由被选择的像素行所捕获的图像数据的传送。因此，图7b所示的处理可被称为数2处理。
图7c中概念性地示出根据第三模数处理730传送的线图像数据，并涉及在传送第四像素720、第五像素722以及第六像素(未示出)(其来自被选择行中的每一个)之前传送行(其从总共20个活动的焦平面中的每一个选择)的第一像素714、第二像素716以及第三像素718。该处理重复传送来自每个焦平面中的相关行的三像素组，直到完成由被选择的像素行所捕获的图像数据的传送。因此，图7c所示的处理可被称为模3处理。
对于每个模数传送处理，来自每个活动的焦平面中的被选择行的图像数据的传送可继续，直到所有焦平面中的所有像素被传送。在支持不同的模数传送处理的实施例中，成像器阵列可提供指示模数处理正被利用的附加数据。此外，成像器阵列可提供描述图像数据的附加数据，以使得能够从包含(但不限于)附加数据的图像数据重构图像，该附加数据指示活动的焦平面和/或相对于每条线图像数据的、指定从中读出图像数据的每个活动焦平面中的被选择行(列)的信息。尽管以上讨论了特定的传送处理，但是根据本发明的实施例，可以任意的次序传送图像数据，并且不限于在模数传送处理中交织来自多个焦平面的图像数据。
尽管以上的描述含有本发明的许多特定的实施例，但是它们不应被解释为对本发明的范围的限制，而应解释为其实施例的示例。因此，应当理解，在不背离本发明的范围和精神的情况下，可通过具体描述的方式以外的方式实施本发明。因此，本发明的实施例应在所有方面被视为解释性的，不是限制性的。

Claims (14)

1.一种传送图像数据的方法，包括：使用照相机模块中的成像器阵列中的多个活动的焦平面捕获图像数据，这里，通过独立的透镜叠层在多个活动的焦平面中的每一个上形成图像；通过使用预定处理对由多个活动的焦平面捕获的图像数据进行组合和交织来产生至少一条线图像数据，所述预定处理是从用于对捕获的图像数据进行组合的多个预定处理中选择的；产生提供用于从所述至少一条线图像数据解交织多个图像的信息的附加数据，这里，所述附加数据指示从用于对捕获的图像数据进行组合的多个预定处理中选择的预定处理；以及与所述至少一条线图像数据一起传送所述附加数据。
2.根据权利要求1所述的方法，其中，所述附加数据描述所述成像器阵列。
3.根据权利要求2所述的方法，其中，所述附加数据包含从由描述以下方面的附加数据组成的群组中选择的数据：成像器阵列中的焦平面的数量；成像器阵列中的焦平面阵列的维度；多个活动的焦平面的每个维度中的像素的数量；多个活动的焦平面的每一个中的像素的积分时间；以及多个活动的焦平面的每一个中的像素的增益。
4.根据权利要求3所述的方法，其中，描述多个活动的焦平面的每一个中的像素的增益的附加数据包含描述多个活动的焦平面的每一个中的像素的模拟增益的附加数据和描述多个活动的焦平面的每一个中的像素的数字增益的附加数据。
5.根据权利要求1所述的方法，其中：多个活动的焦平面中的每一个包括包含多个行像素的像素阵列，所述包含多个行像素的像素阵列还形成多个列像素；并且从用于对捕获的图像数据进行组合的多个预定处理中选择的预定处理包括对来自从活动的焦平面中的每一个选择的行的图像数据进行交织。
6.根据权利要求1所述的方法，其中，从用于对捕获的图像数据进行组合的多个预定处理中选择的预定处理包括使用模数处理，这里，所述模数处理涉及通过对来自被选择的行中的每一个的预定数量的像素进行交织来组合由多个活动的焦平面的被选择的行中的像素捕获的图像数据。
7.根据权利要求1所述的方法，其中，所述附加数据描述至少一条线图像数据中的至少一条。
8.根据权利要求7所述的方法，其中，所述附加数据包含从由描述以下方面的附加数据组成的群组中选择的数据：多个活动的焦平面中的每一个开始捕获图像数据的时间；以及用于捕获用于产生所述至少一条线图像数据的图像数据的多个活动的焦平面的每一个中的行的行数量。
9.根据权利要求1所述的方法，其中，所述照相机模块中的每个透镜叠层具有不同的视场。
10.一种传送图像数据的方法，包括：使用照相机模块中的成像器阵列中的多个活动的焦平面捕获图像数据，这里，通过独立的透镜叠层在每个活动的焦平面上形成图像；通过对由多个活动的焦平面捕获的图像数据进行交织来产生至少一条线图像数据；产生提供用于从至少一条线图像数据解交织多个图像的信息的附加数据；将所述至少一条线图像数据和描述捕获的图像数据的附加数据分成包以生成至少一个数据包；以及传送所述至少一个数据包；其中，所述至少一个数据包包括所述至少一条线图像数据中的至少一条和与所述至少一条线图像数据中的至少一条中的每一条相关联的线头，并且每个线头包含描述与该线头相关联的线图像数据的附加数据；并且其中，线头还包括描述所述成像器阵列的附加数据。
11.根据权利要求10所述的方法，其中：所述至少一个数据包包括包头，该包头包含所述至少一条线图像数据中的至少一条和附加数据的至少一部分；并且包含在包头中的附加数据描述所述成像器阵列。
12.根据权利要求10所述的方法，其中，所述至少一个数据包还包括包脚，该包脚指示所述至少一条线图像数据中的至少一条的传送的结束。
13.根据权利要求10所述的方法，还包括：在帧消隐间隔期间中止传送；在帧间隔之间传送所述至少一条线图像数据中的至少一条和附加数据；以及在线消隐间隔期间中止多条线图像数据和附加数据的传送。
14.根据权利要求10所述的方法，还包括连续地传送含有所述至少一条线图像数据和附加数据的所述至少一个数据包，直到所有的数据被传送。
CN201710422675.9A 2011-05-11 2012-05-11 用于传送阵列照相机图像数据的方法 Active CN107404609B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201161484920P 2011-05-11 2011-05-11
US61/484,920 2011-05-11
CN201280029399.5A CN103765864B (zh) 2011-05-11 2012-05-11 用于传送和接收阵列照相机图像数据的***和方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201280029399.5A Division CN103765864B (zh) 2011-05-11 2012-05-11 用于传送和接收阵列照相机图像数据的***和方法

Publications (2)

Publication Number Publication Date
CN107404609A CN107404609A (zh) 2017-11-28
CN107404609B true CN107404609B (zh) 2020-02-11

Family

ID=47075470

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201710422675.9A Active CN107404609B (zh) 2011-05-11 2012-05-11 用于传送阵列照相机图像数据的方法
CN201280029399.5A Active CN103765864B (zh) 2011-05-11 2012-05-11 用于传送和接收阵列照相机图像数据的***和方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201280029399.5A Active CN103765864B (zh) 2011-05-11 2012-05-11 用于传送和接收阵列照相机图像数据的***和方法

Country Status (6)

Country Link
US (6) US8305456B1 (zh)
EP (1) EP2708019B1 (zh)
JP (1) JP2014519741A (zh)
KR (1) KR101973822B1 (zh)
CN (2) CN107404609B (zh)
WO (1) WO2012155119A1 (zh)

Families Citing this family (80)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8866920B2 (en) 2008-05-20 2014-10-21 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
KR101733443B1 (ko) 2008-05-20 2017-05-10 펠리칸 이매징 코포레이션 이종 이미저를 구비한 모놀리식 카메라 어레이를 이용한 이미지의 캡처링 및 처리
US11792538B2 (en) 2008-05-20 2023-10-17 Adeia Imaging Llc Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
US9479768B2 (en) * 2009-06-09 2016-10-25 Bartholomew Garibaldi Yukich Systems and methods for creating three-dimensional image media
US8514491B2 (en) 2009-11-20 2013-08-20 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
WO2011143501A1 (en) 2010-05-12 2011-11-17 Pelican Imaging Corporation Architectures for imager arrays and array cameras
US8878950B2 (en) 2010-12-14 2014-11-04 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using super-resolution processes
WO2012155119A1 (en) 2011-05-11 2012-11-15 Pelican Imaging Corporation Systems and methods for transmitting and receiving array camera image data
US20130265459A1 (en) 2011-06-28 2013-10-10 Pelican Imaging Corporation Optical arrangements for use with an array camera
JP2014521117A (ja) 2011-06-28 2014-08-25 ペリカン イメージング コーポレイション アレイカメラで使用するための光学配列
WO2013043751A1 (en) 2011-09-19 2013-03-28 Pelican Imaging Corporation Systems and methods for controlling aliasing in images captured by an array camera for use in super resolution processing using pixel apertures
IN2014CN02708A (zh) 2011-09-28 2015-08-07 Pelican Imaging Corp
TWI528786B (zh) * 2011-11-14 2016-04-01 鴻海精密工業股份有限公司 資訊傳輸裝置
US9412206B2 (en) 2012-02-21 2016-08-09 Pelican Imaging Corporation Systems and methods for the manipulation of captured light field image data
US10600235B2 (en) 2012-02-23 2020-03-24 Charles D. Huston System and method for capturing and sharing a location based experience
EP2817785B1 (en) 2012-02-23 2019-05-15 Charles D. Huston System and method for creating an environment and for sharing a location based experience in an environment
US10937239B2 (en) 2012-02-23 2021-03-02 Charles D. Huston System and method for creating an environment and for sharing an event
US9210392B2 (en) 2012-05-01 2015-12-08 Pelican Imaging Coporation Camera modules patterned with pi filter groups
WO2014005123A1 (en) 2012-06-28 2014-01-03 Pelican Imaging Corporation Systems and methods for detecting defective camera arrays, optic arrays, and sensors
US20140002674A1 (en) 2012-06-30 2014-01-02 Pelican Imaging Corporation Systems and Methods for Manufacturing Camera Modules Using Active Alignment of Lens Stack Arrays and Sensors
US8619082B1 (en) 2012-08-21 2013-12-31 Pelican Imaging Corporation Systems and methods for parallax detection and correction in images captured using array cameras that contain occlusions using subsets of images to perform depth estimation
US20140055632A1 (en) 2012-08-23 2014-02-27 Pelican Imaging Corporation Feature based high resolution motion estimation from low resolution images captured using an array source
WO2014043641A1 (en) 2012-09-14 2014-03-20 Pelican Imaging Corporation Systems and methods for correcting user identified artifacts in light field images
US20140092281A1 (en) 2012-09-28 2014-04-03 Pelican Imaging Corporation Generating Images from Light Fields Utilizing Virtual Viewpoints
US9207759B1 (en) 2012-10-08 2015-12-08 Edge3 Technologies, Inc. Method and apparatus for generating depth map from monochrome microlens and imager arrays
US9386298B2 (en) * 2012-11-08 2016-07-05 Leap Motion, Inc. Three-dimensional image sensors
WO2014078443A1 (en) * 2012-11-13 2014-05-22 Pelican Imaging Corporation Systems and methods for array camera focal plane control
US9462164B2 (en) 2013-02-21 2016-10-04 Pelican Imaging Corporation Systems and methods for generating compressed light field representation data using captured light fields, array geometry, and parallax information
WO2014133974A1 (en) 2013-02-24 2014-09-04 Pelican Imaging Corporation Thin form computational and modular array cameras
US8978984B2 (en) 2013-02-28 2015-03-17 Hand Held Products, Inc. Indicia reading terminals and methods for decoding decodable indicia employing light field imaging
US9638883B1 (en) 2013-03-04 2017-05-02 Fotonation Cayman Limited Passive alignment of array camera modules constructed from lens stack arrays and sensors based upon alignment information obtained during manufacture of array camera modules using an active alignment process
US9110240B2 (en) 2013-03-05 2015-08-18 Rambus Inc. Phase gratings with odd symmetry for high-resolution lensed and lensless optical sensing
WO2014138695A1 (en) * 2013-03-08 2014-09-12 Pelican Imaging Corporation Systems and methods for measuring scene information while capturing images using array cameras
US8866912B2 (en) 2013-03-10 2014-10-21 Pelican Imaging Corporation System and methods for calibration of an array camera using a single captured image
US9521416B1 (en) 2013-03-11 2016-12-13 Kip Peli P1 Lp Systems and methods for image data compression
US9888194B2 (en) 2013-03-13 2018-02-06 Fotonation Cayman Limited Array camera architecture implementing quantum film image sensors
US9106784B2 (en) 2013-03-13 2015-08-11 Pelican Imaging Corporation Systems and methods for controlling aliasing in images captured by an array camera for use in super-resolution processing
WO2014165244A1 (en) 2013-03-13 2014-10-09 Pelican Imaging Corporation Systems and methods for synthesizing images from image data captured by an array camera using restricted depth of field depth maps in which depth estimation precision varies
WO2014160142A1 (en) * 2013-03-13 2014-10-02 Pelican Imaging Corporation Systems and methods for using alignment to increase sampling diversity of cameras in an array camera module
US9124831B2 (en) 2013-03-13 2015-09-01 Pelican Imaging Corporation System and methods for calibration of an array camera
US9578259B2 (en) 2013-03-14 2017-02-21 Fotonation Cayman Limited Systems and methods for reducing motion blur in images or video in ultra low light with array cameras
WO2014153098A1 (en) 2013-03-14 2014-09-25 Pelican Imaging Corporation Photmetric normalization in array cameras
US10122993B2 (en) 2013-03-15 2018-11-06 Fotonation Limited Autofocus system for a conventional camera that uses depth information from an array camera
US9438888B2 (en) 2013-03-15 2016-09-06 Pelican Imaging Corporation Systems and methods for stereo imaging with camera arrays
US9497370B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Array camera architecture implementing quantum dot color filters
US9633442B2 (en) 2013-03-15 2017-04-25 Fotonation Cayman Limited Array cameras including an array camera module augmented with a separate camera
US9445003B1 (en) 2013-03-15 2016-09-13 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information
US9497429B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Extended color processing on pelican array cameras
US8833660B1 (en) 2013-05-28 2014-09-16 Symbol Technologies, Inc. Converting a data stream format in an apparatus for and method of reading targets by image capture
US9898856B2 (en) 2013-09-27 2018-02-20 Fotonation Cayman Limited Systems and methods for depth-assisted perspective distortion correction
US9426343B2 (en) 2013-11-07 2016-08-23 Pelican Imaging Corporation Array cameras incorporating independently aligned lens stacks
US10119808B2 (en) 2013-11-18 2018-11-06 Fotonation Limited Systems and methods for estimating depth from projected texture using camera arrays
EP3075140B1 (en) 2013-11-26 2018-06-13 FotoNation Cayman Limited Array camera configurations incorporating multiple constituent array cameras
US10089740B2 (en) 2014-03-07 2018-10-02 Fotonation Limited System and methods for depth regularization and semiautomatic interactive matting using RGB-D images
US9247117B2 (en) 2014-04-07 2016-01-26 Pelican Imaging Corporation Systems and methods for correcting for warpage of a sensor array in an array camera module by introducing warpage into a focal plane of a lens stack array
US9521319B2 (en) 2014-06-18 2016-12-13 Pelican Imaging Corporation Array cameras and array camera modules including spectral filters disposed outside of a constituent image sensor
JP2017531976A (ja) 2014-09-29 2017-10-26 フォトネイション ケイマン リミテッド アレイカメラを動的に較正するためのシステム及び方法
CN107431833B (zh) 2015-02-27 2021-08-27 索尼公司 发送装置、发送方法、接收装置和接收方法
US9942474B2 (en) 2015-04-17 2018-04-10 Fotonation Cayman Limited Systems and methods for performing high speed video capture and depth estimation using array cameras
EP3104595A1 (en) * 2015-06-08 2016-12-14 Thomson Licensing Light field imaging device
US10284825B2 (en) 2015-09-08 2019-05-07 Rambus Inc. Systems with integrated refractive and diffractive optics
CN105578051A (zh) * 2015-12-30 2016-05-11 小米科技有限责任公司 图像捕捉方法和装置
US10647266B2 (en) * 2016-05-17 2020-05-12 Magna Electronics Inc. Vehicle vision system with forward viewing camera
JP6695739B2 (ja) * 2016-05-26 2020-05-20 ソニーセミコンダクタソリューションズ株式会社 処理装置、画像センサ、およびシステム
KR102557662B1 (ko) 2017-02-09 2023-07-19 삼성전자주식회사 이미지 처리 장치 및 이를 포함하는 전자 장치
US10482618B2 (en) 2017-08-21 2019-11-19 Fotonation Limited Systems and methods for hybrid depth regularization
KR102641559B1 (ko) * 2017-11-10 2024-02-28 소니 세미컨덕터 솔루션즈 가부시키가이샤 송신 장치
US20210364817A1 (en) * 2018-03-05 2021-11-25 Carnegie Mellon University Display system for rendering a scene with multiple focal planes
CN108540689B (zh) * 2018-04-09 2020-10-02 珠海全志科技股份有限公司 图像信号处理器、应用处理器及移动装置
DE112020004391T5 (de) 2019-09-17 2022-06-02 Boston Polarimetrics, Inc. Systeme und verfahren zur oberflächenmodellierung unter verwendung von polarisationsmerkmalen
MX2022004163A (es) 2019-10-07 2022-07-19 Boston Polarimetrics Inc Sistemas y metodos para la deteccion de estandares de superficie con polarizacion.
CN114787648B (zh) 2019-11-30 2023-11-10 波士顿偏振测定公司 用于使用偏振提示进行透明对象分段的***和方法
US11195303B2 (en) 2020-01-29 2021-12-07 Boston Polarimetrics, Inc. Systems and methods for characterizing object pose detection and measurement systems
CN115428028A (zh) 2020-01-30 2022-12-02 因思创新有限责任公司 用于合成用于在包括偏振图像的不同成像模态下训练统计模型的数据的***和方法
WO2021243088A1 (en) 2020-05-27 2021-12-02 Boston Polarimetrics, Inc. Multi-aperture polarization optical systems using beam splitters
US12020455B2 (en) 2021-03-10 2024-06-25 Intrinsic Innovation Llc Systems and methods for high dynamic range image reconstruction
US11954886B2 (en) 2021-04-15 2024-04-09 Intrinsic Innovation Llc Systems and methods for six-degree of freedom pose estimation of deformable objects
US11290658B1 (en) 2021-04-15 2022-03-29 Boston Polarimetrics, Inc. Systems and methods for camera exposure control
US11689813B2 (en) 2021-07-01 2023-06-27 Intrinsic Innovation Llc Systems and methods for high dynamic range imaging using crossed polarizers
DE102023204555A1 (de) 2023-05-16 2024-03-14 Zf Friedrichshafen Ag Computerimplementiertes Verfahren und Computerprogramm zum Vorbereiten von Datenfeldern für eine Daten-Komprimierung

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6502097B1 (en) * 1999-12-23 2002-12-31 Microsoft Corporation Data structure for efficient access to variable-size data objects
US6750488B1 (en) * 1998-08-18 2004-06-15 Deutsches Zentrum für Luft- und Raumfahrt e.V. Focal plane plate for a high-resolution camera with light-sensitive semiconductor sensors
WO2008045198A2 (en) * 2006-10-04 2008-04-17 Eastman Kodak Company Providing multiple video signals from single sensor
CN102037717A (zh) * 2008-05-20 2011-04-27 派力肯成像公司 使用具有异构成像器的单片相机阵列的图像拍摄和图像处理

Family Cites Families (807)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4124798A (en) 1965-12-09 1978-11-07 Thompson Kenneth B Optical viewing apparatus
US4198646A (en) 1978-10-13 1980-04-15 Hughes Aircraft Company Monolithic imager for near-IR
US4323925A (en) * 1980-07-07 1982-04-06 Avco Everett Research Laboratory, Inc. Method and apparatus for arraying image sensor modules
JPS5769476A (en) 1980-10-16 1982-04-28 Fuji Xerox Co Ltd Reader control system
JPS5925483A (ja) 1982-08-04 1984-02-09 Hitachi Denshi Ltd 固体撮像装置
US4652909A (en) 1982-09-14 1987-03-24 New York Institute Of Technology Television camera and recording system for high definition television having imagers of different frame rate
US4460449A (en) 1983-01-03 1984-07-17 Amerace Corporation Apparatus for making a tool
EP0289885A1 (de) 1987-05-08 1988-11-09 Siemens Aktiengesellschaft Blendensystem zur Erzeugung mehrerer Teilchensonden mit veränderbarem Querschnitt
JPS6437177A (en) 1987-08-03 1989-02-07 Canon Kk Image pickup device
DE58902538D1 (de) * 1988-05-19 1992-12-03 Siemens Ag Verfahren zur beobachtung einer szene und einrichtung zur durchfuehrung des verfahrens.
US5070414A (en) 1988-09-20 1991-12-03 Kabushiki Kaisha Toshiba Method and apparatus for reading image information formed on material
JPH02285772A (ja) 1989-04-26 1990-11-26 Toshiba Corp 画像読取装置
US5157499A (en) 1990-06-29 1992-10-20 Kabushiki Kaisha N A C High-speed video camera using solid-state image sensor
US5144448A (en) 1990-07-31 1992-09-01 Vidar Systems Corporation Scanning apparatus using multiple CCD arrays and related method
US5325449A (en) 1992-05-15 1994-06-28 David Sarnoff Research Center, Inc. Method for fusing images and apparatus therefor
JP3032382B2 (ja) 1992-07-13 2000-04-17 シャープ株式会社 デジタル信号のサンプリング周波数変換装置
US5659424A (en) 1993-05-25 1997-08-19 Hitachi, Ltd. Projecting lens and image display device
JPH0715457A (ja) * 1993-06-18 1995-01-17 Hitachi Ltd ディジタル通信切替方式
EP0677821A3 (en) 1994-04-14 1996-03-06 Hewlett Packard Co Enlargement of a digital image by slaving.
US20020195548A1 (en) 2001-06-06 2002-12-26 Dowski Edward Raymond Wavefront coding interference contrast imaging systems
US5629524A (en) 1995-02-21 1997-05-13 Advanced Scientific Concepts, Inc. High speed crystallography detector
US5933190A (en) 1995-04-18 1999-08-03 Imec Vzw Pixel structure, image sensor using such pixel structure and corresponding peripheral circuitry
US6005607A (en) 1995-06-29 1999-12-21 Matsushita Electric Industrial Co., Ltd. Stereoscopic computer graphics image generating apparatus and stereoscopic TV apparatus
GB2302978A (en) 1995-07-04 1997-02-05 Sharp Kk LIquid crystal device
US5880691A (en) 1995-11-07 1999-03-09 California Institute Of Technology Capacitively coupled successive approximation ultra low power analog-to-digital converter
JPH09181913A (ja) 1995-12-26 1997-07-11 Olympus Optical Co Ltd カメラシステム
US5793900A (en) 1995-12-29 1998-08-11 Stanford University Generating categorical depth maps using passive defocus sensing
US5973844A (en) 1996-01-26 1999-10-26 Proxemics Lenslet array systems and methods
US6124974A (en) 1996-01-26 2000-09-26 Proxemics Lenslet array systems and methods
US6493465B2 (en) 1996-02-21 2002-12-10 Canon Kabushiki Kaisha Matching point extracting method and apparatus therefor
US5832312A (en) 1996-02-22 1998-11-03 Eastman Kodak Company Watertight body for accommodating a photographic camera
US5911008A (en) 1996-04-30 1999-06-08 Nippon Telegraph And Telephone Corporation Scheme for detecting shot boundaries in compressed video data using inter-frame/inter-field prediction coding and intra-frame/intra-field coding
US6002743A (en) 1996-07-17 1999-12-14 Telymonde; Timothy D. Method and apparatus for image acquisition from a plurality of cameras
GB9616262D0 (en) 1996-08-02 1996-09-11 Philips Electronics Nv Post-processing generation of focus/defocus effects for computer graphics images
US6141048A (en) * 1996-08-19 2000-10-31 Eastman Kodak Company Compact image capture device
US6137535A (en) 1996-11-04 2000-10-24 Eastman Kodak Company Compact digital camera with segmented fields of view
US5808350A (en) 1997-01-03 1998-09-15 Raytheon Company Integrated IR, visible and NIR sensor and methods of fabricating same
JPH10232626A (ja) 1997-02-20 1998-09-02 Canon Inc 立体画像表示装置
US5801919A (en) 1997-04-04 1998-09-01 Gateway 2000, Inc. Adjustably mounted camera assembly for portable computers
US6097394A (en) 1997-04-28 2000-08-01 Board Of Trustees, Leland Stanford, Jr. University Method and system for light field rendering
NO304715B1 (no) * 1997-05-06 1999-02-01 Dimensions As FremgangsmÕte ved bildebehandling
US6515701B2 (en) 1997-07-24 2003-02-04 Polaroid Corporation Focal plane exposure control system for CMOS area image sensors
US6563537B1 (en) 1997-07-31 2003-05-13 Fuji Photo Film Co., Ltd. Image signal interpolation
JP3430935B2 (ja) 1997-10-20 2003-07-28 富士ゼロックス株式会社 画像読取装置及びレンズ
NO305728B1 (no) * 1997-11-14 1999-07-12 Reidar E Tangen Optoelektronisk kamera og fremgangsmÕte ved bildeformatering i samme
JP4243779B2 (ja) 1997-11-14 2009-03-25 株式会社ニコン 拡散板の製造方法および拡散板、並びにマイクロレンズアレイの製造方法およびマイクロレンズアレイ
US6069365A (en) 1997-11-25 2000-05-30 Alan Y. Chow Optical processor based imaging system
JPH11242189A (ja) 1997-12-25 1999-09-07 Olympus Optical Co Ltd 像形成法、像形成装置
US6721008B2 (en) 1998-01-22 2004-04-13 Eastman Kodak Company Integrated CMOS active pixel digital camera
JPH11223708A (ja) 1998-02-09 1999-08-17 Nikon Corp 圧子およびマイクロ光学素子アレイの製造方法
US6054703A (en) 1998-03-20 2000-04-25 Syscan, Inc. Sensing module for accelerating signal readout from image sensors
US6160909A (en) 1998-04-01 2000-12-12 Canon Kabushiki Kaisha Depth control for stereoscopic images
KR100307883B1 (ko) 1998-04-13 2001-10-19 박호군 정합화소수를이용한유사도측정방법및이를구현하기위한장치
JP3931936B2 (ja) 1998-05-11 2007-06-20 セイコーエプソン株式会社 マイクロレンズアレイ基板及びその製造方法並びに表示装置
US6205241B1 (en) 1998-06-01 2001-03-20 Canon Kabushiki Kaisha Compression of stereoscopic images
US6137100A (en) 1998-06-08 2000-10-24 Photobit Corporation CMOS image sensor with different pixel sizes for different colors
US6069351A (en) 1998-07-16 2000-05-30 Intel Corporation Focal plane processor for scaling information from image sensors
US6903770B1 (en) * 1998-07-27 2005-06-07 Sanyo Electric Co., Ltd. Digital camera which produces a single image based on two exposures
US6340994B1 (en) 1998-08-12 2002-01-22 Pixonics, Llc System and method for using temporal gamma and reverse super-resolution to process images for use in digital display systems
US6269175B1 (en) 1998-08-28 2001-07-31 Sarnoff Corporation Method and apparatus for enhancing regions of aligned images using flow estimation
US6879735B1 (en) 1998-09-14 2005-04-12 University Of Utah Reasearch Foundation Method of digital image enhancement and sharpening
US6310650B1 (en) 1998-09-23 2001-10-30 Honeywell International Inc. Method and apparatus for calibrating a tiled display
GB2343320B (en) * 1998-10-31 2003-03-26 Ibm Camera system for three dimentional images and video
JP3596314B2 (ja) 1998-11-02 2004-12-02 日産自動車株式会社 物体端の位置計測装置および移動体の通行判断装置
US6611289B1 (en) * 1999-01-15 2003-08-26 Yanbin Yu Digital cameras using multiple sensors with multiple lenses
JP3875423B2 (ja) 1999-01-19 2007-01-31 日本放送協会 固体撮像素子およびそれ用の映像信号出力装置
US6603513B1 (en) 1999-02-16 2003-08-05 Micron Technology, Inc. Using a single control line to provide select and reset signals to image sensors in two rows of a digital imaging device
US6563540B2 (en) 1999-02-26 2003-05-13 Intel Corporation Light sensor with increased dynamic range
US20020063807A1 (en) 1999-04-19 2002-05-30 Neal Margulis Method for Performing Image Transforms in a Digital Display System
US6819358B1 (en) 1999-04-26 2004-11-16 Microsoft Corporation Error calibration for digital image sensors and apparatus using the same
US6292713B1 (en) 1999-05-20 2001-09-18 Compaq Computer Corporation Robotic telepresence system
JP2001008235A (ja) 1999-06-25 2001-01-12 Minolta Co Ltd ３次元データの再構成のための画像入力方法及び多眼式データ入力装置
JP2001042042A (ja) 1999-07-27 2001-02-16 Canon Inc 撮像装置
US6801653B1 (en) 1999-08-05 2004-10-05 Sony Corporation Information processing apparatus and method as well as medium
US7015954B1 (en) 1999-08-09 2006-03-21 Fuji Xerox Co., Ltd. Automatic video system using multiple cameras
US6647142B1 (en) 1999-08-19 2003-11-11 Mitsubishi Electric Research Laboratories, Inc. Badge identification system
US6771833B1 (en) 1999-08-20 2004-08-03 Eastman Kodak Company Method and system for enhancing digital images
US6628330B1 (en) 1999-09-01 2003-09-30 Neomagic Corp. Color interpolator and horizontal/vertical edge enhancer using two line buffer and alternating even/odd filters for digital camera
US6358862B1 (en) 1999-09-02 2002-03-19 Micron Technology, Inc Passivation integrity improvements
US6639596B1 (en) 1999-09-20 2003-10-28 Microsoft Corporation Stereo reconstruction from multiperspective panoramas
US6774941B1 (en) 1999-10-26 2004-08-10 National Semiconductor Corporation CCD output processing stage that amplifies signals from colored pixels based on the conversion efficiency of the colored pixels
US6671399B1 (en) 1999-10-27 2003-12-30 Canon Kabushiki Kaisha Fast epipolar line adjustment of stereo pairs
US6674892B1 (en) 1999-11-01 2004-01-06 Canon Kabushiki Kaisha Correcting an epipolar axis for skew and offset
JP2001195050A (ja) 1999-11-05 2001-07-19 Mitsubishi Electric Corp グラフィックアクセラレータ
WO2001039512A1 (en) 1999-11-26 2001-05-31 Sanyo Electric Co., Ltd. Device and method for converting two-dimensional video to three-dimensional video
JP3950926B2 (ja) * 1999-11-30 2007-08-01 エーユー オプトロニクス コーポレイション 画像表示方法、ホスト装置、画像表示装置、およびディスプレイ用インターフェイス
JP3728160B2 (ja) 1999-12-06 2005-12-21 キヤノン株式会社 奥行き画像計測装置及び方法、並びに複合現実感提示システム
US7068851B1 (en) 1999-12-10 2006-06-27 Ricoh Co., Ltd. Multiscale sharpening and smoothing with wavelets
FI107680B (fi) * 1999-12-22 2001-09-14 Nokia Oyj Menetelmä videokuvien lähettämiseksi, tiedonsiirtojärjestelmä, lähettävä videopäätelaite ja vastaanottava videopäätelaite
US6476805B1 (en) 1999-12-23 2002-11-05 Microsoft Corporation Techniques for spatial displacement estimation and multi-resolution operations on light fields
JP2001194114A (ja) 2000-01-14 2001-07-19 Sony Corp 画像処理装置および画像処理方法、並びにプログラム提供媒体
US6523046B2 (en) 2000-02-25 2003-02-18 Microsoft Corporation Infrastructure and method for supporting generic multimedia metadata
JP2001264033A (ja) 2000-03-17 2001-09-26 Sony Corp 三次元形状計測装置とその方法、三次元モデリング装置とその方法、およびプログラム提供媒体
US6571466B1 (en) 2000-03-27 2003-06-03 Amkor Technology, Inc. Flip chip image sensor package fabrication method
JP2001277260A (ja) 2000-03-30 2001-10-09 Seiko Epson Corp マイクロレンズアレイ、その製造方法及びその製造用原盤並びに表示装置
WO2001075949A1 (fr) 2000-04-04 2001-10-11 Advantest Corporation Appareil d'exposition multifaisceau comprenant une lentille electronique multiaxe, et procede de fabrication d'un dispositif a semi-conducteur
US20020015536A1 (en) 2000-04-24 2002-02-07 Warren Penny G. Apparatus and method for color image fusion
JP2001337263A (ja) 2000-05-25 2001-12-07 Olympus Optical Co Ltd 測距装置
KR20030028553A (ko) 2000-07-21 2003-04-08 더 트러스티스 오브 콜롬비아 유니버시티 인 더 시티 오브 뉴욕 이미지 모자이크 방법 및 장치
US7154546B1 (en) 2000-08-07 2006-12-26 Micron Technology, Inc. Pixel optimization for color
US7200261B2 (en) 2000-08-25 2007-04-03 Fujifilm Corporation Parallax image capturing apparatus and parallax image processing apparatus
US7085409B2 (en) 2000-10-18 2006-08-01 Sarnoff Corporation Method and apparatus for synthesizing new video and/or still imagery from a collection of real video and/or still imagery
US6734905B2 (en) 2000-10-20 2004-05-11 Micron Technology, Inc. Dynamic range extension for CMOS image sensors
US7262799B2 (en) * 2000-10-25 2007-08-28 Canon Kabushiki Kaisha Image sensing apparatus and its control method, control program, and storage medium
US6476971B1 (en) 2000-10-31 2002-11-05 Eastman Kodak Company Method of manufacturing a microlens array mold and a microlens array
JP3918499B2 (ja) 2000-11-01 2007-05-23 セイコーエプソン株式会社 間隙測定方法、間隙測定装置、形状測定方法、形状測定装置並びに液晶装置の製造方法
US6788338B1 (en) 2000-11-20 2004-09-07 Petko Dimitrov Dinev High resolution video camera apparatus having two image sensors and signal processing
US7490774B2 (en) 2003-11-13 2009-02-17 Metrologic Instruments, Inc. Hand-supportable imaging based bar code symbol reader employing automatic light exposure measurement and illumination control subsystem integrated therein
JP2002171537A (ja) * 2000-11-30 2002-06-14 Canon Inc 複眼撮像系、撮像装置および電子機器
WO2002045003A1 (en) 2000-12-01 2002-06-06 Imax Corporation Techniques and systems for developing high-resolution imagery
WO2002047031A2 (en) 2000-12-05 2002-06-13 Yeda Research And Development Co. Ltd. Apparatus and method for alignment of spatial or temporal non-overlapping image sequences
JP2002252338A (ja) 2000-12-18 2002-09-06 Canon Inc 撮像装置及び撮像システム
JP2002195910A (ja) 2000-12-26 2002-07-10 Omron Corp 光学部品の検査装置
JP2002209226A (ja) 2000-12-28 2002-07-26 Canon Inc 撮像装置
US7805680B2 (en) 2001-01-03 2010-09-28 Nokia Corporation Statistical metering and filtering of content via pixel-based metadata
JP3957460B2 (ja) * 2001-01-15 2007-08-15 沖電気工業株式会社 伝送ヘッダ圧縮装置、動画像符号化装置及び動画像伝送システム
US6635941B2 (en) 2001-03-21 2003-10-21 Canon Kabushiki Kaisha Structure of semiconductor device with improved reliability
JP2002324743A (ja) 2001-04-24 2002-11-08 Canon Inc 露光方法及び装置
US6443579B1 (en) 2001-05-02 2002-09-03 Kenneth Myers Field-of-view controlling arrangements
US7235785B2 (en) 2001-05-11 2007-06-26 Irvine Sensors Corp. Imaging device with multiple fields of view incorporating memory-based temperature compensation of an uncooled focal plane array
US20020167537A1 (en) 2001-05-11 2002-11-14 Miroslav Trajkovic Motion-based tracking with pan-tilt-zoom camera
WO2002096096A1 (en) 2001-05-16 2002-11-28 Zaxel Systems, Inc. 3d instant replay system and method
US7738013B2 (en) 2001-05-29 2010-06-15 Samsung Electronics Co., Ltd. Systems and methods for power conservation in a CMOS imager
AU2002305780A1 (en) 2001-05-29 2002-12-09 Transchip, Inc. Patent application cmos imager for cellular applications and methods of using such
US6482669B1 (en) 2001-05-30 2002-11-19 Taiwan Semiconductor Manufacturing Company Colors only process to reduce package yield loss
US6525302B2 (en) 2001-06-06 2003-02-25 The Regents Of The University Of Colorado Wavefront coding phase contrast imaging systems
US20030025227A1 (en) 2001-08-02 2003-02-06 Zograph, Llc Reproduction of relief patterns
US8675119B2 (en) 2001-08-09 2014-03-18 Trustees Of Columbia University In The City Of New York Adaptive imaging using digital light processing
DE60141901D1 (de) 2001-08-31 2010-06-02 St Microelectronics Srl Störschutzfilter für Bayermusterbilddaten
JP3978706B2 (ja) 2001-09-20 2007-09-19 セイコーエプソン株式会社 微細構造体の製造方法
JP2003139910A (ja) 2001-10-30 2003-05-14 Sony Corp 光学素子、その製造方法およびその製造装置、並びにそれを用いた液晶表示装置および画像投影型表示装置
DE10153237A1 (de) 2001-10-31 2003-05-15 Lfk Gmbh Verfahren und Vorrichtung zur automatisierten Bestimmung der Modulations-Transfer-Funktion (MTF) von Focal-Plane-Array (FPA)- Kameras
JP3705766B2 (ja) 2001-11-28 2005-10-12 独立行政法人科学技術振興機構 画像入力装置
EP1468314A4 (en) 2001-12-18 2006-12-13 Univ Rochester ILLUSTRATION USING AN ASPHARIAN MULTI-FUNGI CASE FOR MAINTAINING AN ADVANCED SHARPNESS
US7302118B2 (en) 2002-02-07 2007-11-27 Microsoft Corporation Transformation of images
US20030179418A1 (en) 2002-03-19 2003-09-25 Eastman Kodak Company Producing a defective pixel map from defective cluster pixels in an area array image sensor
US8369607B2 (en) 2002-03-27 2013-02-05 Sanyo Electric Co., Ltd. Method and apparatus for processing three-dimensional images
JP2003298920A (ja) 2002-03-29 2003-10-17 Fuji Photo Film Co Ltd デジタルカメラ
US20030188659A1 (en) 2002-04-05 2003-10-09 Canadian Bank Note Company Limited Method and apparatus for reproducing a color image based on monochrome images derived therefrom
US6856314B2 (en) 2002-04-18 2005-02-15 Stmicroelectronics, Inc. Method and system for 3D reconstruction of multiple views with altering search path and occlusion modeling
JP3567327B2 (ja) 2002-05-08 2004-09-22 富士写真光機株式会社 撮像レンズ
US6783900B2 (en) 2002-05-13 2004-08-31 Micron Technology, Inc. Color filter imaging array and method of formation
JP2004048644A (ja) 2002-05-21 2004-02-12 Sony Corp 情報処理装置、情報処理システム、及び対話者表示方法
JP2003347192A (ja) 2002-05-24 2003-12-05 Toshiba Corp エネルギービーム露光方法および露光装置
US7013318B2 (en) * 2002-05-29 2006-03-14 Raytheon Company Method and system for encapsulating cells
JP2004088713A (ja) 2002-06-27 2004-03-18 Olympus Corp 撮像レンズユニットおよび撮像装置
US7129981B2 (en) 2002-06-27 2006-10-31 International Business Machines Corporation Rendering system and method for images having differing foveal area and peripheral view area resolutions
JP4147059B2 (ja) 2002-07-03 2008-09-10 株式会社トプコン キャリブレーション用データ測定装置、測定方法及び測定プログラム、並びにコンピュータ読取可能な記録媒体、画像データ処理装置
JP2004037924A (ja) 2002-07-04 2004-02-05 Minolta Co Ltd 撮像装置
EP1537550A2 (en) 2002-07-15 2005-06-08 Magna B.S.P. Ltd. Method and apparatus for implementing multipurpose monitoring system
US20040012689A1 (en) 2002-07-16 2004-01-22 Fairchild Imaging Charge coupled devices in tiled arrays
JP2004078296A (ja) 2002-08-09 2004-03-11 Victor Co Of Japan Ltd 画像生成装置
US7447380B2 (en) 2002-09-12 2008-11-04 Inoe Technologies, Llc Efficient method for creating a viewpoint from plurality of images
US20040050104A1 (en) 2002-09-18 2004-03-18 Eastman Kodak Company Forming information transfer lens array
US20040207836A1 (en) 2002-09-27 2004-10-21 Rajeshwar Chhibber High dynamic range optical inspection system and method
US7084904B2 (en) 2002-09-30 2006-08-01 Microsoft Corporation Foveated wide-angle imaging system and method for capturing and viewing wide-angle images in real time
US7477781B1 (en) 2002-10-10 2009-01-13 Dalsa Corporation Method and apparatus for adaptive pixel correction of multi-color matrix
US20040075654A1 (en) 2002-10-16 2004-04-22 Silicon Integrated Systems Corp. 3-D digital image processor and method for visibility processing for use in the same
JP4171786B2 (ja) 2002-10-25 2008-10-29 コニカミノルタホールディングス株式会社 画像入力装置
US7742088B2 (en) 2002-11-19 2010-06-22 Fujifilm Corporation Image sensor and digital camera
KR101237945B1 (ko) 2002-11-21 2013-02-28 비젼 Ⅲ 이미징 인코퍼레이티드 무안경식 디스플레이를 위한 시차 이미지의 특정한 정렬시스템 및 방법
US20040105021A1 (en) 2002-12-02 2004-06-03 Bolymedia Holdings Co., Ltd. Color filter patterns for image sensors
US20040114807A1 (en) 2002-12-13 2004-06-17 Dan Lelescu Statistical representation and coding of light field data
US6878918B2 (en) 2003-01-09 2005-04-12 Dialdg Semiconductor Gmbh APS pixel with reset noise suppression and programmable binning capability
US7340099B2 (en) 2003-01-17 2008-03-04 University Of New Brunswick System and method for image fusion
DE10301941B4 (de) 2003-01-20 2005-11-17 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Kamera und Verfahren zur optischen Aufnahme eines Schirms
US7379592B2 (en) 2003-01-21 2008-05-27 United States Of America As Represented By The Secretary Of The Navy System and method for significant dust detection and enhancement of dust images over land and ocean
US7005637B2 (en) 2003-01-31 2006-02-28 Intevac, Inc. Backside thinning of image array devices
US7515747B2 (en) 2003-01-31 2009-04-07 The Circle For The Promotion Of Science And Engineering Method for creating high resolution color image, system for creating high resolution color image and program creating high resolution color image
US7308157B2 (en) 2003-02-03 2007-12-11 Photon Dynamics, Inc. Method and apparatus for optical inspection of a display
CN100369481C (zh) * 2003-02-04 2008-02-13 松下电器产业株式会社 代码变换方法及其装置
US7595817B1 (en) 2003-02-12 2009-09-29 The Research Foundation Of State University Of New York Linear system based, qualitative independent motion detection from compressed MPEG surveillance video
US20040165090A1 (en) 2003-02-13 2004-08-26 Alex Ning Auto-focus (AF) lens and process
JP2004266369A (ja) 2003-02-21 2004-09-24 Sony Corp 固体撮像装置およびその駆動方法
US7106914B2 (en) 2003-02-27 2006-09-12 Microsoft Corporation Bayesian image super resolution
US7148861B2 (en) 2003-03-01 2006-12-12 The Boeing Company Systems and methods for providing enhanced vision imaging with decreased latency
US8218052B2 (en) 2003-03-07 2012-07-10 Iconix Video, Inc. High frame rate high definition imaging system and method
US7218320B2 (en) 2003-03-13 2007-05-15 Sony Corporation System and method for capturing facial and body motion
US6801719B1 (en) 2003-03-14 2004-10-05 Eastman Kodak Company Camera using beam splitter with micro-lens image amplification
US7206449B2 (en) 2003-03-19 2007-04-17 Mitsubishi Electric Research Laboratories, Inc. Detecting silhouette edges in images
US7425984B2 (en) 2003-04-04 2008-09-16 Stmicroelectronics, Inc. Compound camera and methods for implementing auto-focus, depth-of-field and high-resolution functions
US7373005B2 (en) 2003-04-10 2008-05-13 Micron Technology, Inc. Compression system for integrated sensor devices
US7097311B2 (en) 2003-04-19 2006-08-29 University Of Kentucky Research Foundation Super-resolution overlay in multi-projector displays
US6958862B1 (en) 2003-04-21 2005-10-25 Foveon, Inc. Use of a lenslet array with a vertically stacked pixel array
US7428330B2 (en) 2003-05-02 2008-09-23 Microsoft Corporation Cyclopean virtual imaging via generalized probabilistic smoothing
SE525665C2 (sv) 2003-05-08 2005-03-29 Forskarpatent I Syd Ab Matris av pixlar samt elektronisk bildanordning innefattande nämnda matris av pixlar
RU2005138159A (ru) 2003-05-13 2006-07-27 Экссид Имиджинг Лтд. (Il) Способ повышения разрешения в оптическом изображении и система для его осуществления
JP2004348674A (ja) 2003-05-26 2004-12-09 Noritsu Koki Co Ltd 領域検出方法及びその装置
CN1574894A (zh) 2003-06-02 2005-02-02 宾得株式会社 多焦距成像装置和具有该多焦距成像装置的移动装置
JP2004363478A (ja) 2003-06-06 2004-12-24 Sanyo Electric Co Ltd 半導体装置の製造方法
KR100539234B1 (ko) 2003-06-11 2005-12-27 삼성전자주식회사 투명 고분자 소재를 적용한 씨모스형 이미지 센서 모듈 및그 제조방법
US6818934B1 (en) 2003-06-24 2004-11-16 Omnivision International Holding Ltd Image sensor having micro-lens array separated with trench structures and method of making
US7362918B2 (en) 2003-06-24 2008-04-22 Microsoft Corporation System and method for de-noising multiple copies of a signal
US7090135B2 (en) 2003-07-07 2006-08-15 Symbol Technologies, Inc. Imaging arrangement and barcode imager for imaging an optical code or target at a plurality of focal planes
US7388609B2 (en) 2003-07-07 2008-06-17 Zoran Corporation Dynamic identification and correction of defective pixels
US20050007461A1 (en) 2003-07-11 2005-01-13 Novatek Microelectronic Co. Correction system and method of analog front end
JP3731589B2 (ja) 2003-07-18 2006-01-05 ソニー株式会社 撮像装置と同期信号発生装置
US7233737B2 (en) 2003-08-12 2007-06-19 Micron Technology, Inc. Fixed-focus camera module and associated method of assembly
US7643703B2 (en) 2003-09-03 2010-01-05 Battelle Energy Alliance, Llc Image change detection systems, methods, and articles of manufacture
US20050084179A1 (en) 2003-09-04 2005-04-21 Keith Hanna Method and apparatus for performing iris recognition from an image
WO2005027038A2 (en) 2003-09-08 2005-03-24 Honda Motor Co., Ltd. Systems and methods for directly generating a view using a layered approach
JP4020850B2 (ja) 2003-10-06 2007-12-12 株式会社東芝 磁気記録媒体の製造方法、製造装置、インプリントスタンパ及びその製造方法
US7079251B2 (en) 2003-10-16 2006-07-18 4D Technology Corporation Calibration and error correction in multi-channel imaging
WO2005041562A1 (ja) 2003-10-22 2005-05-06 Matsushita Electric Industrial Co., Ltd. 撮像装置とその製造方法、携帯機器、及び撮像素子とその製造方法
US7840067B2 (en) 2003-10-24 2010-11-23 Arcsoft, Inc. Color matching and color correction for images forming a panoramic image
JP4118916B2 (ja) 2003-11-11 2008-07-16 オリンパス株式会社 マルチスペクトル画像撮影装置
JP4235539B2 (ja) 2003-12-01 2009-03-11 独立行政法人科学技術振興機構 画像構成装置及び画像構成方法
US20050128509A1 (en) 2003-12-11 2005-06-16 Timo Tokkonen Image creating method and imaging device
US7453510B2 (en) 2003-12-11 2008-11-18 Nokia Corporation Imaging device
US7328288B2 (en) 2003-12-11 2008-02-05 Canon Kabushiki Kaisha Relay apparatus for relaying communication from CPU to peripheral device
JP3859158B2 (ja) 2003-12-16 2006-12-20 セイコーエプソン株式会社 マイクロレンズ用凹部付き基板、マイクロレンズ基板、透過型スクリーン、およびリア型プロジェクタ
US7511749B2 (en) 2003-12-18 2009-03-31 Aptina Imaging Corporation Color image sensor having imaging element array forming images on respective regions of sensor elements
US7123298B2 (en) 2003-12-18 2006-10-17 Avago Technologies Sensor Ip Pte. Ltd. Color image sensor with imaging elements imaging on respective regions of sensor elements
US7376250B2 (en) 2004-01-05 2008-05-20 Honda Motor Co., Ltd. Apparatus, method and program for moving object detection
US7496293B2 (en) 2004-01-14 2009-02-24 Elbit Systems Ltd. Versatile camera for various visibility conditions
US7773143B2 (en) 2004-04-08 2010-08-10 Tessera North America, Inc. Thin color camera having sub-pixel resolution
US8134637B2 (en) 2004-01-28 2012-03-13 Microsoft Corporation Method and system to increase X-Y resolution in a depth (Z) camera using red, blue, green (RGB) sensing
US7453688B2 (en) 2004-01-29 2008-11-18 Inventec Corporation Multimedia device for portable computers
US20050185711A1 (en) 2004-02-20 2005-08-25 Hanspeter Pfister 3D television system and method
SE527889C2 (sv) 2004-03-17 2006-07-04 Thomas Jeff Adamo Apparat för avbildning av ett objekt
JP2006047944A (ja) 2004-03-24 2006-02-16 Fuji Photo Film Co Ltd 撮影レンズ
JP4468442B2 (ja) 2004-03-31 2010-05-26 キヤノン株式会社 イメージングシステム性能測定
US7633511B2 (en) 2004-04-01 2009-12-15 Microsoft Corporation Pop-up light field
JP4665422B2 (ja) 2004-04-02 2011-04-06 ソニー株式会社 撮像装置
US8634014B2 (en) 2004-04-05 2014-01-21 Hewlett-Packard Development Company, L.P. Imaging device analysis systems and imaging device analysis methods
US7091531B2 (en) 2004-04-07 2006-08-15 Micron Technology, Inc. High dynamic range pixel amplifier
US8049806B2 (en) 2004-09-27 2011-11-01 Digitaloptics Corporation East Thin camera and associated methods
US7620265B1 (en) 2004-04-12 2009-11-17 Equinox Corporation Color invariant image fusion of visible and thermal infrared video
JP2005303694A (ja) 2004-04-13 2005-10-27 Konica Minolta Holdings Inc 複眼撮像装置
US7292735B2 (en) 2004-04-16 2007-11-06 Microsoft Corporation Virtual image artifact detection
US7773404B2 (en) 2005-01-07 2010-08-10 Invisage Technologies, Inc. Quantum dot optical devices with enhanced gain and sensitivity and methods of making same
US8218625B2 (en) 2004-04-23 2012-07-10 Dolby Laboratories Licensing Corporation Encoding, decoding and representing high dynamic range images
US20060034531A1 (en) 2004-05-10 2006-02-16 Seiko Epson Corporation Block noise level evaluation method for compressed images and control method of imaging device utilizing the evaluation method
JP4691552B2 (ja) 2004-05-14 2011-06-01 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 乳癌診断システム及び方法
US7355793B2 (en) 2004-05-19 2008-04-08 The Regents Of The University Of California Optical system applicable to improving the dynamic range of Shack-Hartmann sensors
US20050265633A1 (en) 2004-05-25 2005-12-01 Sarnoff Corporation Low latency pyramid processor for image processing systems
JP2005354124A (ja) 2004-06-08 2005-12-22 Seiko Epson Corp 複数の低画素密度画像からの高画素密度画像の生成
US7330593B2 (en) 2004-06-25 2008-02-12 Stmicroelectronics, Inc. Segment based image matching method and system
JP4479373B2 (ja) 2004-06-28 2010-06-09 ソニー株式会社 イメージセンサ
JP4408755B2 (ja) 2004-06-28 2010-02-03 Ｎｅｃエレクトロニクス株式会社 デインタリーブ装置、移動通信端末及びデインタリーブ方法
US7447382B2 (en) 2004-06-30 2008-11-04 Intel Corporation Computing a higher resolution image from multiple lower resolution images using model-based, robust Bayesian estimation
JP2006033228A (ja) 2004-07-14 2006-02-02 Victor Co Of Japan Ltd 画像撮像装置
JP2006033493A (ja) 2004-07-16 2006-02-02 Matsushita Electric Ind Co Ltd 撮像装置
US7189954B2 (en) 2004-07-19 2007-03-13 Micron Technology, Inc. Microelectronic imagers with optical devices and methods of manufacturing such microelectronic imagers
JP2006033570A (ja) 2004-07-20 2006-02-02 Olympus Corp 画像生成装置
US8027531B2 (en) 2004-07-21 2011-09-27 The Board Of Trustees Of The Leland Stanford Junior University Apparatus and method for capturing a scene using staggered triggering of dense camera arrays
GB0416496D0 (en) 2004-07-23 2004-08-25 Council Of The Central Lab Of Imaging device
US7068432B2 (en) 2004-07-27 2006-06-27 Micron Technology, Inc. Controlling lens shape in a microlens array
US20060023197A1 (en) 2004-07-27 2006-02-02 Joel Andrew H Method and system for automated production of autostereoscopic and animated prints and transparencies from digital and non-digital media
DE102004036469A1 (de) 2004-07-28 2006-02-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Kameramodul, hierauf basierendes Array und Verfahren zu dessen Herstellung
US7333652B2 (en) 2004-08-03 2008-02-19 Sony Corporation System and method for efficiently performing a depth map recovery procedure
US20060028476A1 (en) 2004-08-03 2006-02-09 Irwin Sobel Method and system for providing extensive coverage of an object using virtual cameras
JP2006050263A (ja) 2004-08-04 2006-02-16 Olympus Corp 画像生成方法および装置
US7430339B2 (en) 2004-08-09 2008-09-30 Microsoft Corporation Border matting by dynamic programming
US7609302B2 (en) 2004-08-11 2009-10-27 Micron Technology, Inc. Correction of non-uniform sensitivity in an image array
US7645635B2 (en) 2004-08-16 2010-01-12 Micron Technology, Inc. Frame structure and semiconductor attach process for use therewith for fabrication of image sensor packages and the like, and resulting packages
US7061693B2 (en) 2004-08-16 2006-06-13 Xceed Imaging Ltd. Optical method and system for extended depth of focus
WO2006036398A2 (en) 2004-08-23 2006-04-06 Sarnoff Corporation Method and apparatus for producing a fused image
US7916180B2 (en) 2004-08-25 2011-03-29 Protarius Filo Ag, L.L.C. Simultaneous multiple field of view digital cameras
US8124929B2 (en) 2004-08-25 2012-02-28 Protarius Filo Ag, L.L.C. Imager module optical focus and assembly method
US7795577B2 (en) 2004-08-25 2010-09-14 Richard Ian Olsen Lens frame and optical focus assembly for imager module
EP1812968B1 (en) * 2004-08-25 2019-01-16 Callahan Cellular L.L.C. Apparatus for multiple camera devices and method of operating same
US7564019B2 (en) 2005-08-25 2009-07-21 Richard Ian Olsen Large dynamic range cameras
CN100489599C (zh) 2004-08-26 2009-05-20 财团法人秋田企业活性化中心 液晶透镜
JP4057597B2 (ja) 2004-08-26 2008-03-05 独立行政法人科学技術振興機構 光学素子
US20060046204A1 (en) 2004-08-31 2006-03-02 Sharp Laboratories Of America, Inc. Directly patternable microlens
US20060055811A1 (en) 2004-09-14 2006-03-16 Frtiz Bernard S Imaging system having modules with adaptive optical elements
US7145124B2 (en) 2004-09-15 2006-12-05 Raytheon Company Multispectral imaging chip using photonic crystals
JP3977368B2 (ja) 2004-09-30 2007-09-19 クラリオン株式会社 駐車支援システム
DE102004049676A1 (de) 2004-10-12 2006-04-20 Infineon Technologies Ag Verfahren zur rechnergestützten Bewegungsschätzung in einer Vielzahl von zeitlich aufeinander folgenden digitalen Bildern, Anordnung zur rechnergestützten Bewegungsschätzung, Computerprogramm-Element und computerlesbares Speichermedium
JP2006119368A (ja) 2004-10-21 2006-05-11 Konica Minolta Opto Inc 広角光学系、撮像レンズ装置、モニタカメラ及びデジタル機器
JP4534715B2 (ja) 2004-10-22 2010-09-01 株式会社ニコン 撮像装置および画像処理プログラム
DE102004052994C5 (de) 2004-11-03 2010-08-26 Vistec Electron Beam Gmbh Multistrahlmodulator für einen Partikelstrahl und Verwendung des Multistrahlmodulators zur maskenlosen Substratsstrukturierung
US7598996B2 (en) 2004-11-16 2009-10-06 Aptina Imaging Corporation System and method for focusing a digital camera
EP1831657B1 (en) 2004-12-03 2018-12-05 Fluke Corporation Method for a visible light and ir combined image camera
US7483065B2 (en) 2004-12-15 2009-01-27 Aptina Imaging Corporation Multi-lens imaging systems and methods using optical filters having mosaic patterns
US8854486B2 (en) 2004-12-17 2014-10-07 Mitsubishi Electric Research Laboratories, Inc. Method and system for processing multiview videos for view synthesis using skip and direct modes
US7728878B2 (en) 2004-12-17 2010-06-01 Mitsubishi Electric Research Labortories, Inc. Method and system for processing multiview videos for view synthesis using side information
CN101198964A (zh) 2005-01-07 2008-06-11 格斯图尔泰克股份有限公司 使用红外图案照射创建对象的三维图像
US7073908B1 (en) 2005-01-11 2006-07-11 Anthony Italo Provitola Enhancement of depth perception
US7767949B2 (en) 2005-01-18 2010-08-03 Rearden, Llc Apparatus and method for capturing still images and video using coded aperture techniques
US7671321B2 (en) 2005-01-18 2010-03-02 Rearden, Llc Apparatus and method for capturing still images and video using coded lens imaging techniques
US7602997B2 (en) 2005-01-19 2009-10-13 The United States Of America As Represented By The Secretary Of The Army Method of super-resolving images
US7408627B2 (en) 2005-02-08 2008-08-05 Canesta, Inc. Methods and system to quantify depth data accuracy in three-dimensional sensors using single frame capture
US7965314B1 (en) 2005-02-09 2011-06-21 Flir Systems, Inc. Foveal camera systems and methods
US7561191B2 (en) * 2005-02-18 2009-07-14 Eastman Kodak Company Camera phone using multiple lenses and image sensors to provide an extended zoom range
CN101189487B (zh) 2005-03-11 2010-08-11 形创有限公司 三维扫描自动参考***和设备
JP2006258930A (ja) 2005-03-15 2006-09-28 Nikon Corp マイクロレンズの製造方法、及びマイクロレンズ用の型の製造方法
WO2006102181A1 (en) 2005-03-21 2006-09-28 Massachusetts Institute Of Technology (Mit) Real-time, continuous-wave terahertz imaging using a microbolometer focal-plane array
WO2006100903A1 (ja) 2005-03-23 2006-09-28 Matsushita Electric Industrial Co., Ltd. 車載撮像装置
US7297917B2 (en) 2005-03-24 2007-11-20 Micron Technology, Inc. Readout technique for increasing or maintaining dynamic range in image sensors
JP4545190B2 (ja) 2005-03-24 2010-09-15 パナソニック株式会社 撮像装置
US7683950B2 (en) 2005-04-26 2010-03-23 Eastman Kodak Company Method and apparatus for correcting a channel dependent color aberration in a digital image
US7656428B2 (en) * 2005-05-05 2010-02-02 Avago Technologies General Ip (Singapore) Pte. Ltd. Imaging device employing optical motion sensor as gyroscope
WO2006123581A1 (ja) 2005-05-18 2006-11-23 Hitachi Medical Corporation 放射線撮影装置及び画像処理プログラム
US8411182B2 (en) 2005-06-02 2013-04-02 Xerox Corporation System for controlling integration times of photosensors in an imaging device
US7968888B2 (en) 2005-06-08 2011-06-28 Panasonic Corporation Solid-state image sensor and manufacturing method thereof
JP2006345233A (ja) 2005-06-09 2006-12-21 Fujifilm Holdings Corp 撮像装置及びデジタルカメラ
KR100813961B1 (ko) * 2005-06-14 2008-03-14 삼성전자주식회사 영상 수신장치
US7364306B2 (en) 2005-06-20 2008-04-29 Digital Display Innovations, Llc Field sequential light source modulation for a digital display system
JP4826152B2 (ja) 2005-06-23 2011-11-30 株式会社ニコン 画像合成方法及び撮像装置
US20070102622A1 (en) 2005-07-01 2007-05-10 Olsen Richard I Apparatus for multiple camera devices and method of operating same
JP4577126B2 (ja) 2005-07-08 2010-11-10 オムロン株式会社 ステレオ対応づけのための投光パターンの生成装置及び生成方法
WO2007014293A1 (en) 2005-07-25 2007-02-01 The Regents Of The University Of California Digital imaging system and method to produce mosaic images
CA2553473A1 (en) 2005-07-26 2007-01-26 Wa James Tam Generating a depth map from a tw0-dimensional source image for stereoscopic and multiview imaging
WO2007013250A1 (ja) 2005-07-26 2007-02-01 Matsushita Electric Industrial Co., Ltd. 複眼方式の撮像装置
US7969488B2 (en) 2005-08-03 2011-06-28 Micron Technologies, Inc. Correction of cluster defects in imagers
US7929801B2 (en) 2005-08-15 2011-04-19 Sony Corporation Depth information for auto focus using two pictures and two-dimensional Gaussian scale space theory
US20070041391A1 (en) 2005-08-18 2007-02-22 Micron Technology, Inc. Method and apparatus for controlling imager output data rate
US20070040922A1 (en) 2005-08-22 2007-02-22 Micron Technology, Inc. HDR/AB on multi-way shared pixels
US7964835B2 (en) 2005-08-25 2011-06-21 Protarius Filo Ag, L.L.C. Digital cameras with direct luminance and chrominance detection
US20070258006A1 (en) 2005-08-25 2007-11-08 Olsen Richard I Solid state camera optics frame and assembly
US20070083114A1 (en) 2005-08-26 2007-04-12 The University Of Connecticut Systems and methods for image resolution enhancement
JP4804856B2 (ja) 2005-09-29 2011-11-02 富士フイルム株式会社 単焦点レンズ
WO2007036055A1 (en) 2005-09-30 2007-04-05 Simon Fraser University Methods and apparatus for detecting defects in imaging arrays by image analysis
WO2007044725A2 (en) 2005-10-07 2007-04-19 The Board Of Trustees Of The Leland Stanford Junior University Microscopy arrangements and approaches
US8300085B2 (en) 2005-10-14 2012-10-30 Microsoft Corporation Occlusion handling in stereo imaging
JP4773179B2 (ja) 2005-10-14 2011-09-14 富士フイルム株式会社 撮像装置
US7806604B2 (en) 2005-10-20 2010-10-05 Honeywell International Inc. Face detection and tracking in a wide field of view
KR100730406B1 (ko) 2005-11-16 2007-06-19 광운대학교 산학협력단 중간 요소 영상을 이용한 입체 영상 표시 장치
JP4389865B2 (ja) 2005-11-17 2009-12-24 ソニー株式会社 固体撮像素子の信号処理装置および信号処理方法並びに撮像装置
EP1958458B1 (en) 2005-11-30 2016-08-17 Telecom Italia S.p.A. Method for determining scattered disparity fields in stereo vision
US7599547B2 (en) 2005-11-30 2009-10-06 Microsoft Corporation Symmetric stereo model for handling occlusion
JP4516516B2 (ja) 2005-12-07 2010-08-04 本田技研工業株式会社 人物検出装置、人物検出方法及び人物検出プログラム
TWI296480B (en) 2005-12-19 2008-05-01 Quanta Comp Inc Image camera of an electronic device
JP4501855B2 (ja) 2005-12-22 2010-07-14 ソニー株式会社 画像信号処理装置、撮像装置、および画像信号処理方法、並びにコンピュータ・プログラム
JP2007180730A (ja) 2005-12-27 2007-07-12 Eastman Kodak Co デジタルカメラおよびデータ管理方法
WO2007077283A1 (en) 2005-12-30 2007-07-12 Nokia Corporation Method and device for controlling auto focusing of a video camera by tracking a region-of-interest
US7855786B2 (en) 2006-01-09 2010-12-21 Bae Systems Spectral Solutions Llc Single camera multi-spectral imager
US7675080B2 (en) 2006-01-10 2010-03-09 Aptina Imaging Corp. Uniform color filter arrays in a moat
WO2007083579A1 (ja) 2006-01-20 2007-07-26 Matsushita Electric Industrial Co., Ltd. 複眼方式のカメラモジュール及びその製造方法
DE102006004802B4 (de) 2006-01-23 2008-09-25 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Bilderfassungssystem und Verfahren zur Herstellung mindestens eines Bilderfassungssystems
JP4834412B2 (ja) 2006-02-03 2011-12-14 富士フイルム株式会社 固体撮像装置およびこれを用いた電子内視鏡
US20070201859A1 (en) 2006-02-24 2007-08-30 Logitech Europe S.A. Method and system for use of 3D sensors in an image capture device
US7391572B2 (en) 2006-03-01 2008-06-24 International Business Machines Corporation Hybrid optical/electronic structures fabricated by a common molding process
US7924483B2 (en) 2006-03-06 2011-04-12 Smith Scott T Fused multi-array color image sensor
US7616254B2 (en) 2006-03-16 2009-11-10 Sony Corporation Simple method for calculating camera defocus from an image scene
US8360574B2 (en) 2006-03-20 2013-01-29 High Performance Optics, Inc. High performance selective light wavelength filtering providing improved contrast sensitivity
US7606484B1 (en) 2006-03-23 2009-10-20 Flir Systems, Inc. Infrared and near-infrared camera hyperframing
JP4615468B2 (ja) * 2006-03-23 2011-01-19 富士フイルム株式会社 撮影装置
US7342212B2 (en) 2006-03-31 2008-03-11 Micron Technology, Inc. Analog vertical sub-sampling in an active pixel sensor (APS) image sensor
US7916934B2 (en) 2006-04-04 2011-03-29 Mitsubishi Electric Research Laboratories, Inc. Method and system for acquiring, encoding, decoding and displaying 3D light fields
US8044994B2 (en) 2006-04-04 2011-10-25 Mitsubishi Electric Research Laboratories, Inc. Method and system for decoding and displaying 3D light fields
TW200740212A (en) 2006-04-10 2007-10-16 Sony Taiwan Ltd A stitching accuracy improvement method with lens distortion correction
CN101064780B (zh) 2006-04-30 2012-07-04 台湾新力国际股份有限公司 利用透镜失真校正的影像接合准确度改善方法及装置
US20070263114A1 (en) 2006-05-01 2007-11-15 Microalign Technologies, Inc. Ultra-thin digital imaging device of high resolution for mobile electronic devices and method of imaging
US7580620B2 (en) 2006-05-08 2009-08-25 Mitsubishi Electric Research Laboratories, Inc. Method for deblurring images using optimized temporal coding patterns
US9736346B2 (en) 2006-05-09 2017-08-15 Stereo Display, Inc Imaging system improving image resolution of the system with low resolution image sensor
US7889264B2 (en) 2006-05-12 2011-02-15 Ricoh Co., Ltd. End-to-end design of superresolution electro-optic imaging systems
US7916362B2 (en) 2006-05-22 2011-03-29 Eastman Kodak Company Image sensor with improved light sensitivity
US8139142B2 (en) 2006-06-01 2012-03-20 Microsoft Corporation Video manipulation of red, green, blue, distance (RGB-Z) data including segmentation, up-sampling, and background substitution techniques
IES20070229A2 (en) 2006-06-05 2007-10-03 Fotonation Vision Ltd Image acquisition method and apparatus
US20070177004A1 (en) 2006-06-08 2007-08-02 Timo Kolehmainen Image creating method and imaging device
JP4631811B2 (ja) 2006-06-12 2011-02-16 株式会社日立製作所 撮像装置
JP5106870B2 (ja) 2006-06-14 2012-12-26 株式会社東芝 固体撮像素子
FR2902530A1 (fr) 2006-06-19 2007-12-21 St Microelectronics Rousset Procede de fabrication de lentilles, notamment pour imageur comprenant un diaphragme
TWI362550B (en) 2007-06-21 2012-04-21 Ether Precision Inc The method for manufacturing the image captures unit
US7925117B2 (en) 2006-06-27 2011-04-12 Honeywell International Inc. Fusion of sensor data and synthetic data to form an integrated image
KR100793369B1 (ko) 2006-07-06 2008-01-11 삼성전자주식회사 분해능이 향상되는 이미지 센서 및 이를 이용한 이미지감지 방법
US20080024683A1 (en) 2006-07-31 2008-01-31 Niranjan Damera-Venkata Overlapped multi-projector system with dithering
JP2008039852A (ja) 2006-08-01 2008-02-21 Agc Techno Glass Co Ltd ガラス光学素子及びその製造方法
US20080030592A1 (en) 2006-08-01 2008-02-07 Eastman Kodak Company Producing digital image with different resolution portions
US8406562B2 (en) 2006-08-11 2013-03-26 Geo Semiconductor Inc. System and method for automated calibration and correction of display geometry and color
EP1892688B1 (fr) 2006-08-24 2010-09-01 Valeo Vision Procédé de détermination de passage d'un véhicule dans un goulet
US8687087B2 (en) 2006-08-29 2014-04-01 Csr Technology Inc. Digital camera with selectively increased dynamic range by control of parameters during image acquisition
US8306063B2 (en) 2006-08-29 2012-11-06 EXFO Services Assurance, Inc. Real-time transport protocol stream detection system and method
KR100746360B1 (ko) 2006-08-31 2007-08-06 삼성전기주식회사 스템퍼 제조방법
NO326372B1 (no) 2006-09-21 2008-11-17 Polight As Polymerlinse
US7918555B2 (en) 2006-09-25 2011-04-05 Ophthonix, Inc. Methods and lenses for correction of chromatic aberration
JP4403162B2 (ja) 2006-09-29 2010-01-20 株式会社東芝 立体画像表示装置および立体画像の作製方法
US20080080028A1 (en) 2006-10-02 2008-04-03 Micron Technology, Inc. Imaging method, apparatus and system having extended depth of field
WO2008044937A1 (en) 2006-10-11 2008-04-17 Ignis Display As Design of compact adjustable lens
US8883019B2 (en) 2006-10-11 2014-11-11 Polight As Method for manufacturing adjustable lens
US8073196B2 (en) 2006-10-16 2011-12-06 University Of Southern California Detection and tracking of moving objects from a moving platform in presence of strong parallax
US7702229B2 (en) 2006-10-18 2010-04-20 Eastman Kodak Company Lens array assisted focus detection
JP4349456B2 (ja) 2006-10-23 2009-10-21 ソニー株式会社 固体撮像素子
US20100103175A1 (en) 2006-10-25 2010-04-29 Tokyo Institute Of Technology Method for generating a high-resolution virtual-focal-plane image
US7888159B2 (en) 2006-10-26 2011-02-15 Omnivision Technologies, Inc. Image sensor having curved micro-mirrors over the sensing photodiode and method for fabricating
JP4452951B2 (ja) 2006-11-02 2010-04-21 富士フイルム株式会社 距離画像生成方法及びその装置
KR20080043106A (ko) 2006-11-13 2008-05-16 삼성전자주식회사 광학렌즈 및 그 제조방법
US8059162B2 (en) 2006-11-15 2011-11-15 Sony Corporation Imaging apparatus and method, and method for designing imaging apparatus
US20080118241A1 (en) 2006-11-16 2008-05-22 Tekolste Robert Control of stray light in camera systems employing an optics stack and associated methods
EP2084491A2 (en) 2006-11-21 2009-08-05 Mantisvision Ltd. 3d geometric modeling and 3d video content creation
KR20080047002A (ko) 2006-11-24 2008-05-28 엘지이노텍 주식회사 카메라모듈의 렌즈 어셈블리 및 그 제작 방법
US20100265385A1 (en) * 2009-04-18 2010-10-21 Knight Timothy J Light Field Camera Image, File and Configuration Data, and Methods of Using, Storing and Communicating Same
JP4406937B2 (ja) 2006-12-01 2010-02-03 富士フイルム株式会社 撮影装置
US8559705B2 (en) 2006-12-01 2013-10-15 Lytro, Inc. Interactive refocusing of electronic images
US8570426B2 (en) 2008-11-25 2013-10-29 Lytro, Inc. System of and method for video refocusing
JP5040493B2 (ja) 2006-12-04 2012-10-03 ソニー株式会社 撮像装置及び撮像方法
US8242426B2 (en) 2006-12-12 2012-08-14 Dolby Laboratories Licensing Corporation Electronic camera having multiple sensors for capturing high dynamic range images and related methods
US7646549B2 (en) 2006-12-18 2010-01-12 Xceed Imaging Ltd Imaging system and method for providing extended depth of focus, range extraction and super resolved imaging
US8213500B2 (en) 2006-12-21 2012-07-03 Sharp Laboratories Of America, Inc. Methods and systems for processing film grain noise
TWI324015B (en) 2006-12-22 2010-04-21 Ind Tech Res Inst Autofocus searching method
US8103111B2 (en) * 2006-12-26 2012-01-24 Olympus Imaging Corp. Coding method, electronic camera, recording medium storing coded program, and decoding method
US20080158259A1 (en) 2006-12-28 2008-07-03 Texas Instruments Incorporated Image warping and lateral color correction
US7973823B2 (en) 2006-12-29 2011-07-05 Nokia Corporation Method and system for image pre-processing
US20080158698A1 (en) 2006-12-29 2008-07-03 Chao-Chi Chang Lens barrel array and lens array and the method of making the same
US20080165257A1 (en) 2007-01-05 2008-07-10 Micron Technology, Inc. Configurable pixel array system and method
US8655052B2 (en) 2007-01-26 2014-02-18 Intellectual Discovery Co., Ltd. Methodology for 3D scene reconstruction from 2D image sequences
JP5024992B2 (ja) 2007-02-02 2012-09-12 株式会社ジャパンディスプレイセントラル 表示装置
US7792423B2 (en) 2007-02-06 2010-09-07 Mitsubishi Electric Research Laboratories, Inc. 4D light field cameras
JP4969474B2 (ja) * 2007-02-09 2012-07-04 オリンパスイメージング株式会社 復号方法、復号装置、及び復号プログラム
JP4386083B2 (ja) 2007-02-27 2009-12-16 トヨタ自動車株式会社 駐車支援装置
JP4153013B1 (ja) 2007-03-06 2008-09-17 シャープ株式会社 撮像レンズ、撮像ユニットおよびそれを備えた携帯型情報端末
US7755679B2 (en) 2007-03-07 2010-07-13 Altasens, Inc. Apparatus and method for reducing edge effect in an image sensor
US7729602B2 (en) 2007-03-09 2010-06-01 Eastman Kodak Company Camera using multiple lenses and image sensors operable in a default imaging mode
US7676146B2 (en) 2007-03-09 2010-03-09 Eastman Kodak Company Camera using multiple lenses and image sensors to provide improved focusing capability
US7859588B2 (en) 2007-03-09 2010-12-28 Eastman Kodak Company Method and apparatus for operating a dual lens camera to augment an image
US7683962B2 (en) 2007-03-09 2010-03-23 Eastman Kodak Company Camera using multiple lenses and image sensors in a rangefinder configuration to provide a range map
JP4915859B2 (ja) 2007-03-26 2012-04-11 船井電機株式会社 物体の距離導出装置
JP2008242658A (ja) 2007-03-26 2008-10-09 Funai Electric Co Ltd 立体物体の撮像装置
US7738017B2 (en) 2007-03-27 2010-06-15 Aptina Imaging Corporation Method and apparatus for automatic linear shift parallax correction for multi-array image systems
US8165418B2 (en) 2007-03-30 2012-04-24 Brother Kogyo Kabushiki Kaisha Image processor
TWI433052B (zh) 2007-04-02 2014-04-01 Primesense Ltd 使用投影圖案之深度製圖
US8098941B2 (en) 2007-04-03 2012-01-17 Aptina Imaging Corporation Method and apparatus for parallelization of image compression encoders
US8213711B2 (en) 2007-04-03 2012-07-03 Her Majesty The Queen In Right Of Canada As Represented By The Minister Of Industry, Through The Communications Research Centre Canada Method and graphical user interface for modifying depth maps
CN101281282A (zh) 2007-04-04 2008-10-08 鸿富锦精密工业（深圳）有限公司 镜头模组
JP2008258885A (ja) 2007-04-04 2008-10-23 Texas Instr Japan Ltd 撮像装置および撮像装置の駆動方法
US7923801B2 (en) 2007-04-18 2011-04-12 Invisage Technologies, Inc. Materials, systems and methods for optoelectronic devices
WO2009023044A2 (en) 2007-04-24 2009-02-19 21 Ct, Inc. Method and system for fast dense stereoscopic ranging
KR100869219B1 (ko) 2007-05-03 2008-11-18 동부일렉트로닉스 주식회사 이미지 센서 및 그 제조방법
US8462220B2 (en) 2007-05-09 2013-06-11 Aptina Imaging Corporation Method and apparatus for improving low-light performance for small pixel image sensors
US7812869B2 (en) 2007-05-11 2010-10-12 Aptina Imaging Corporation Configurable pixel array system and method
JP4341695B2 (ja) 2007-05-17 2009-10-07 ソニー株式会社 画像入力処理装置、撮像信号処理回路、および、撮像信号のノイズ低減方法
JP4337911B2 (ja) 2007-05-24 2009-09-30 ソニー株式会社 撮像装置、撮像回路、および撮像方法
US20080298674A1 (en) 2007-05-29 2008-12-04 Image Masters Inc. Stereoscopic Panoramic imaging system
US7733575B2 (en) 2007-05-31 2010-06-08 Artificial Muscle, Inc. Optical systems employing compliant electroactive materials
US8290358B1 (en) 2007-06-25 2012-10-16 Adobe Systems Incorporated Methods and apparatus for light-field imaging
KR101545008B1 (ko) 2007-06-26 2015-08-18 코닌클리케 필립스 엔.브이. 3ｄ 비디오 신호를 인코딩하기 위한 방법 및 시스템, 동봉된 3ｄ 비디오 신호, 3ｄ 비디오 신호용 디코더에 대한 방법 및 시스템
JP5160643B2 (ja) 2007-07-12 2013-03-13 トムソン ライセンシング ２次元画像からの３次元オブジェクト認識システム及び方法
US8125619B2 (en) 2007-07-25 2012-02-28 Eminent Electronic Technology Corp. Integrated ambient light sensor and distance sensor
JP5006727B2 (ja) 2007-07-26 2012-08-22 株式会社リコー 画像処理装置およびデジタルカメラ
US8019215B2 (en) 2007-08-06 2011-09-13 Adobe Systems Incorporated Method and apparatus for radiance capture by multiplexing in the frequency domain
EP2034338A1 (en) 2007-08-11 2009-03-11 ETH Zurich Liquid Lens System
EP2026563A1 (en) 2007-08-14 2009-02-18 Deutsche Thomson OHG System and method for detecting defective pixels
US7782364B2 (en) 2007-08-21 2010-08-24 Aptina Imaging Corporation Multi-array sensor with integrated sub-array for parallax detection and photometer functionality
US7973834B2 (en) 2007-09-24 2011-07-05 Jianwen Yang Electro-optical foveated imaging and tracking system
US20090086074A1 (en) 2007-09-27 2009-04-02 Omnivision Technologies, Inc. Dual mode camera solution apparatus, system, and method
US7940311B2 (en) 2007-10-03 2011-05-10 Nokia Corporation Multi-exposure pattern for enhancing dynamic range of images
JP5172267B2 (ja) 2007-10-09 2013-03-27 富士フイルム株式会社 撮像装置
US8049289B2 (en) 2007-10-11 2011-11-01 Dongbu Hitek Co., Ltd. Image sensor and method for manufacturing the same
US7956924B2 (en) 2007-10-18 2011-06-07 Adobe Systems Incorporated Fast computational camera based on two arrays of lenses
US7920193B2 (en) 2007-10-23 2011-04-05 Aptina Imaging Corporation Methods, systems and apparatuses using barrier self-calibration for high dynamic range imagers
US7777804B2 (en) 2007-10-26 2010-08-17 Omnivision Technologies, Inc. High dynamic range sensor with reduced line memory for color interpolation
WO2009061814A2 (en) 2007-11-05 2009-05-14 University Of Florida Research Foundation, Inc. Lossless data compression and real-time decompression
US7852461B2 (en) 2007-11-15 2010-12-14 Microsoft International Holdings B.V. Dual mode depth imaging
US20090128644A1 (en) 2007-11-15 2009-05-21 Camp Jr William O System and method for generating a photograph
US8351685B2 (en) 2007-11-16 2013-01-08 Gwangju Institute Of Science And Technology Device and method for estimating depth map, and method for generating intermediate image and method for encoding multi-view video using the same
US8126279B2 (en) 2007-11-19 2012-02-28 The University Of Arizona Lifting-based view compensated compression and remote visualization of volume rendered images
KR20090055803A (ko) 2007-11-29 2009-06-03 광주과학기술원 다시점 깊이맵 생성 방법 및 장치, 다시점 영상에서의변이값 생성 방법
JP5010445B2 (ja) 2007-11-29 2012-08-29 パナソニック株式会社 マイクロレンズアレイ用金型の製造方法
GB2455316B (en) 2007-12-04 2012-08-15 Sony Corp Image processing apparatus and method
WO2009073950A1 (en) 2007-12-13 2009-06-18 Keigo Izuka Camera system and method for amalgamating images to create an omni-focused image
TWI353778B (en) 2007-12-21 2011-12-01 Ind Tech Res Inst Moving object detection apparatus and method
US7880807B2 (en) 2007-12-26 2011-02-01 Sony Ericsson Mobile Communications Ab Camera system with mirror arrangement for generating self-portrait panoramic pictures
US20110031381A1 (en) 2007-12-28 2011-02-10 Hiok-Nam Tay Light guide array for an image sensor
TWI362628B (en) 2007-12-28 2012-04-21 Ind Tech Res Inst Methof for producing an image with depth by using 2d image
JP4413261B2 (ja) 2008-01-10 2010-02-10 シャープ株式会社 撮像装置及び光軸制御方法
JP5198295B2 (ja) 2008-01-15 2013-05-15 富士フイルム株式会社 撮像素子の位置調整方法、カメラモジュール製造方法及び装置、カメラモジュール
US8189065B2 (en) 2008-01-23 2012-05-29 Adobe Systems Incorporated Methods and apparatus for full-resolution light-field capture and rendering
US7962033B2 (en) 2008-01-23 2011-06-14 Adobe Systems Incorporated Methods and apparatus for full-resolution light-field capture and rendering
JP4956452B2 (ja) 2008-01-25 2012-06-20 富士重工業株式会社 車両用環境認識装置
US8824833B2 (en) 2008-02-01 2014-09-02 Omnivision Technologies, Inc. Image data fusion systems and methods
GB0802290D0 (en) 2008-02-08 2008-03-12 Univ Kent Canterbury Camera adapter based optical imaging apparatus
US8319301B2 (en) 2008-02-11 2012-11-27 Omnivision Technologies, Inc. Self-aligned filter for an image sensor
JP2009206922A (ja) 2008-02-28 2009-09-10 Funai Electric Co Ltd 複眼撮像装置
CN101520532A (zh) 2008-02-29 2009-09-02 鸿富锦精密工业（深圳）有限公司 复合镜片
US9094675B2 (en) 2008-02-29 2015-07-28 Disney Enterprises Inc. Processing image data from multiple cameras for motion pictures
TWI489394B (zh) 2008-03-03 2015-06-21 Videoiq Inc 用於追蹤、索引及搜尋之物件匹配
US8098955B2 (en) * 2008-03-25 2012-01-17 Point Grey Research Inc. Efficient selection and application of regions of interest in digital imaging
WO2009119229A1 (ja) 2008-03-26 2009-10-01 コニカミノルタホールディングス株式会社 ３次元撮像装置及び３次元撮像装置の校正方法
US8497905B2 (en) 2008-04-11 2013-07-30 nearmap australia pty ltd. Systems and methods of capturing large area images in detail including cascaded cameras and/or calibration features
US8259208B2 (en) 2008-04-15 2012-09-04 Sony Corporation Method and apparatus for performing touch-based adjustments within imaging devices
US7843554B2 (en) 2008-04-25 2010-11-30 Rockwell Collins, Inc. High dynamic range sensor system and method
US8155456B2 (en) 2008-04-29 2012-04-10 Adobe Systems Incorporated Method and apparatus for block-based compression of light-field images
US8280194B2 (en) 2008-04-29 2012-10-02 Sony Corporation Reduced hardware implementation for a two-picture depth map algorithm
US8724921B2 (en) 2008-05-05 2014-05-13 Aptina Imaging Corporation Method of capturing high dynamic range images with objects in the scene
EP2283644A4 (en) 2008-05-09 2011-10-26 Ecole Polytech PICTURE SENSOR WITH NONLINEAR REACTION
JP2009273035A (ja) 2008-05-09 2009-11-19 Toshiba Corp 画像圧縮装置、画像伸張装置及び画像処理装置
US8208543B2 (en) 2008-05-19 2012-06-26 Microsoft Corporation Quantization and differential coding of alpha image data
US8866920B2 (en) 2008-05-20 2014-10-21 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
US8442355B2 (en) 2008-05-23 2013-05-14 Samsung Electronics Co., Ltd. System and method for generating a multi-dimensional image
US8125559B2 (en) 2008-05-25 2012-02-28 Avistar Communications Corporation Image formation for large photosensor array surfaces
US8131097B2 (en) 2008-05-28 2012-03-06 Aptina Imaging Corporation Method and apparatus for extended depth-of-field image restoration
US8244058B1 (en) 2008-05-30 2012-08-14 Adobe Systems Incorporated Method and apparatus for managing artifacts in frequency domain processing of light-field images
JP2009300268A (ja) * 2008-06-13 2009-12-24 Nippon Hoso Kyokai <Nhk> ３次元情報検出装置
KR20100002032A (ko) 2008-06-24 2010-01-06 삼성전자주식회사 영상 생성 방법, 영상 처리 방법, 및 그 장치
WO2009157273A1 (ja) 2008-06-25 2009-12-30 コニカミノルタオプト株式会社 撮像光学系及び撮像用レンズの製造方法
US7710667B2 (en) 2008-06-25 2010-05-04 Aptina Imaging Corp. Imaging module with symmetrical lens system and method of manufacture
KR101000531B1 (ko) 2008-06-26 2010-12-14 에스디씨마이크로 주식회사 데이터 전송 범위가 증대되는 무선랜을 이용한 씨씨티브이관리시스템
US7916396B2 (en) 2008-06-27 2011-03-29 Micron Technology, Inc. Lens master devices, lens structures, imaging devices, and methods and apparatuses of making the same
US8326069B2 (en) 2008-06-30 2012-12-04 Intel Corporation Computing higher resolution images from multiple lower resolution images
US7773317B2 (en) 2008-07-01 2010-08-10 Aptina Imaging Corp. Lens system with symmetrical optics
US7920339B2 (en) 2008-07-02 2011-04-05 Aptina Imaging Corporation Method and apparatus providing singlet wafer lens system with field flattener
US8456517B2 (en) 2008-07-09 2013-06-04 Primesense Ltd. Integrated processor for 3D mapping
KR101445185B1 (ko) 2008-07-10 2014-09-30 삼성전자주식회사 복수 개의 영상촬영유닛을 구비한 플렉시블 영상촬영장치및 그 제조방법
US8284240B2 (en) 2008-08-06 2012-10-09 Creaform Inc. System for adaptive three-dimensional scanning of surface characteristics
CN101656259A (zh) 2008-08-20 2010-02-24 鸿富锦精密工业（深圳）有限公司 影像感测器封装结构、封装方法及相机模组
WO2010021666A1 (en) 2008-08-20 2010-02-25 Thomson Licensing Refined depth map
US7924312B2 (en) 2008-08-22 2011-04-12 Fluke Corporation Infrared and visible-light image registration
JP5105482B2 (ja) 2008-09-01 2012-12-26 船井電機株式会社 光学的条件設計方法及び複眼撮像装置
US20110181797A1 (en) 2008-09-01 2011-07-28 Lensvector Inc. Wafer-level fabrication of liquid crystal optoelectronic devices
US8098297B2 (en) 2008-09-03 2012-01-17 Sony Corporation Pre- and post-shutter signal image capture and sort for digital camera
KR20100028344A (ko) 2008-09-04 2010-03-12 삼성전자주식회사 휴대단말의 영상 편집 방법 및 장치
JP5238429B2 (ja) 2008-09-25 2013-07-17 株式会社東芝 立体映像撮影装置および立体映像撮影システム
US8553093B2 (en) 2008-09-30 2013-10-08 Sony Corporation Method and apparatus for super-resolution imaging using digital imaging devices
US9064476B2 (en) 2008-10-04 2015-06-23 Microsoft Technology Licensing, Llc Image super-resolution using gradient profile prior
US8310525B2 (en) 2008-10-07 2012-11-13 Seiko Epson Corporation One-touch projector alignment for 3D stereo display
JP5547739B2 (ja) 2008-10-15 2014-07-16 イノベイティブ テクノロジー ディストリビューターズ エルエルシー オプティカルフローの決定のためのデジタル処理方法およびシステム
JP2010096723A (ja) 2008-10-20 2010-04-30 Funai Electric Co Ltd 物体の距離導出装置
US8436909B2 (en) 2008-10-21 2013-05-07 Stmicroelectronics S.R.L. Compound camera sensor and related method of processing digital images
WO2010050728A2 (ko) 2008-10-27 2010-05-06 엘지전자 주식회사 가상 뷰 이미지 합성 방법 및 장치
US8063975B2 (en) 2008-10-29 2011-11-22 Jabil Circuit, Inc. Positioning wafer lenses on electronic imagers
KR101502597B1 (ko) 2008-11-13 2015-03-13 삼성전자주식회사 고심도 입체 영상 표시가 가능한 디스플레이 장치 및 방법
WO2010057081A1 (en) 2008-11-14 2010-05-20 The Scripps Research Institute Image analysis platform for identifying artifacts in samples and laboratory consumables
AU2008246243B2 (en) * 2008-11-19 2011-12-22 Canon Kabushiki Kaisha DVC as generic file format for plenoptic camera
US8289440B2 (en) 2008-12-08 2012-10-16 Lytro, Inc. Light field data acquisition devices, and methods of using and manufacturing same
US8013904B2 (en) 2008-12-09 2011-09-06 Seiko Epson Corporation View projection matrix based high performance low latency display pipeline
KR101200490B1 (ko) 2008-12-10 2012-11-12 한국전자통신연구원 영상 정합 장치 및 방법
US8149323B2 (en) 2008-12-18 2012-04-03 Qualcomm Incorporated System and method to autofocus assisted by autoexposure control
JP4631966B2 (ja) 2008-12-22 2011-02-16 ソニー株式会社 画像処理装置、および画像処理方法、並びにプログラム
CN101770060B (zh) 2008-12-27 2014-03-26 鸿富锦精密工业（深圳）有限公司 相机模组及其组装方法
US8405742B2 (en) 2008-12-30 2013-03-26 Massachusetts Institute Of Technology Processing images having different focus
US8259212B2 (en) 2009-01-05 2012-09-04 Applied Quantum Technologies, Inc. Multiscale optical system
US9177389B2 (en) 2009-01-09 2015-11-03 Konica Minolta Holdings, Inc. Motion vector generation apparatus and motion vector generation method
US20100177411A1 (en) 2009-01-09 2010-07-15 Shashikant Hegde Wafer level lens replication on micro-electrical-mechanical systems
US9354490B2 (en) 2009-01-09 2016-05-31 New York University Method, computer-accessible, medium and systems for facilitating dark flash photography
US8315476B1 (en) * 2009-01-20 2012-11-20 Adobe Systems Incorporated Super-resolution with the focused plenoptic camera
US8189089B1 (en) 2009-01-20 2012-05-29 Adobe Systems Incorporated Methods and apparatus for reducing plenoptic camera artifacts
US8300108B2 (en) 2009-02-02 2012-10-30 L-3 Communications Cincinnati Electronics Corporation Multi-channel imaging devices comprising unit cells
US20100194860A1 (en) 2009-02-03 2010-08-05 Bit Cauldron Corporation Method of stereoscopic 3d image capture using a mobile device, cradle or dongle
US8761491B2 (en) 2009-02-06 2014-06-24 Himax Technologies Limited Stereo-matching processor using belief propagation
US8290301B2 (en) 2009-02-06 2012-10-16 Raytheon Company Optimized imaging system for collection of high resolution imagery
KR101776955B1 (ko) 2009-02-10 2017-09-08 소니 주식회사 고체 촬상 장치와 그 제조 방법, 및 전자 기기
WO2010095440A1 (ja) 2009-02-20 2010-08-26 パナソニック株式会社 記録媒体、再生装置、及び集積回路
US8520970B2 (en) 2010-04-23 2013-08-27 Flir Systems Ab Infrared resolution and contrast enhancement with fusion
KR20100099896A (ko) 2009-03-04 2010-09-15 삼성전자주식회사 메타데이터 생성 방법 및 장치, 그 메타데이터를 이용하여 영상을 처리하는 방법 및 장치
US8207759B2 (en) * 2009-03-12 2012-06-26 Fairchild Semiconductor Corporation MIPI analog switch for automatic selection of multiple inputs based on clock voltages
CN105681633B (zh) 2009-03-19 2019-01-18 数字光学公司 双传感器照相机及其方法
US8106949B2 (en) 2009-03-26 2012-01-31 Seiko Epson Corporation Small memory footprint light transport matrix capture
US8450821B2 (en) 2009-03-26 2013-05-28 Micron Technology, Inc. Method and apparatus providing combined spacer and optical lens element
US7901095B2 (en) 2009-03-27 2011-03-08 Seiko Epson Corporation Resolution scalable view projection
JP4529010B1 (ja) 2009-03-30 2010-08-25 シャープ株式会社 撮像装置
JP5222205B2 (ja) 2009-04-03 2013-06-26 Ｋｄｄｉ株式会社 画像処理装置、方法及びプログラム
WO2010116366A1 (en) 2009-04-07 2010-10-14 Nextvision Stabilized Systems Ltd Video motion compensation and stabilization gimbaled imaging system
US20100259610A1 (en) 2009-04-08 2010-10-14 Celsia, Llc Two-Dimensional Display Synced with Real World Object Movement
US8294099B2 (en) 2009-04-10 2012-10-23 Bae Systems Information And Electronic Systems Integration Inc. On-wafer butted microbolometer imaging array
JP5463718B2 (ja) 2009-04-16 2014-04-09 ソニー株式会社 撮像装置
US8717417B2 (en) 2009-04-16 2014-05-06 Primesense Ltd. Three-dimensional mapping and imaging
US8908058B2 (en) 2009-04-18 2014-12-09 Lytro, Inc. Storage and transmission of pictures including multiple frames
US20120249550A1 (en) 2009-04-18 2012-10-04 Lytro, Inc. Selective Transmission of Image Data Based on Device Attributes
ATE551841T1 (de) 2009-04-22 2012-04-15 Raytrix Gmbh Digitales bildgebungsverfahren zum synthetisieren eines bildes unter verwendung der mit einer plenoptischen kamera aufgezeichneten daten
CN101527046B (zh) 2009-04-28 2012-09-05 青岛海信数字多媒体技术国家重点实验室有限公司 一种运动检测方法、装置和***
KR101671021B1 (ko) 2009-04-30 2016-11-10 삼성전자주식회사 스테레오스코픽 영상 데이터 전송 장치 및 방법
US8271544B2 (en) 2009-05-01 2012-09-18 Creative Technology Ltd Data file having more than one mode of operation
DE102009003110A1 (de) 2009-05-14 2010-11-18 Robert Bosch Gmbh Bildverarbeitungsverfahren zur Bestimmung von Tiefeninformation aus wenigstens zwei mittels eines Stereokamerasystems aufgenommenen Eingangsbildern
US8203633B2 (en) 2009-05-27 2012-06-19 Omnivision Technologies, Inc. Four-channel color filter array pattern
KR20100130423A (ko) 2009-06-03 2010-12-13 삼성전자주식회사 웨이퍼-레벨 렌즈 모듈 및 이를 구비하는 촬상 모듈
US8766808B2 (en) 2010-03-09 2014-07-01 Flir Systems, Inc. Imager with multiple sensor arrays
CN101931742B (zh) 2009-06-18 2013-04-24 鸿富锦精密工业（深圳）有限公司 影像感测模组及取像模组
US20100321640A1 (en) 2009-06-22 2010-12-23 Industrial Technology Research Institute Projection display chip
JP5254893B2 (ja) 2009-06-26 2013-08-07 キヤノン株式会社 画像変換方法及び装置並びにパターン識別方法及び装置
WO2011008443A2 (en) 2009-06-29 2011-01-20 Lensvector Inc. Wafer level camera module with active optical element
JP2011030184A (ja) 2009-07-01 2011-02-10 Sony Corp 画像処理装置、及び、画像処理方法
US8212197B2 (en) 2009-07-02 2012-07-03 Xerox Corporation Image sensor with integration time compensation
JP2011017764A (ja) 2009-07-07 2011-01-27 Konica Minolta Opto Inc 撮像レンズ，撮像装置及び携帯端末
US8345144B1 (en) * 2009-07-15 2013-01-01 Adobe Systems Incorporated Methods and apparatus for rich image capture with focused plenoptic cameras
US20110019243A1 (en) 2009-07-21 2011-01-27 Constant Jr Henry J Stereoscopic form reader
CN101964866B (zh) 2009-07-24 2013-03-20 鸿富锦精密工业（深圳）有限公司 计算摄像型数码相机
GB0912970D0 (en) * 2009-07-27 2009-09-02 St Microelectronics Res & Dev Improvements in or relating to a sensor and sensor system for a camera
US8436893B2 (en) 2009-07-31 2013-05-07 3Dmedia Corporation Methods, systems, and computer-readable storage media for selecting image capture positions to generate three-dimensional (3D) images
US8577183B2 (en) 2009-08-05 2013-11-05 Raytheon Company Resolution on demand
WO2011018678A1 (en) 2009-08-11 2011-02-17 Ether Precision, Inc. Method and device for aligning a lens with an optical system
CA2771018C (en) 2009-08-14 2017-06-13 Genesis Group Inc. Real-time image and video matting
JP2011044801A (ja) 2009-08-19 2011-03-03 Toshiba Corp 画像処理装置
US8154632B2 (en) 2009-08-24 2012-04-10 Lifesize Communications, Inc. Detection of defective pixels in an image sensor
KR101680300B1 (ko) 2009-08-31 2016-11-28 삼성전자주식회사 액체 렌즈 및 그 제조방법
US9274699B2 (en) 2009-09-03 2016-03-01 Obscura Digital User interface for a large scale multi-user, multi-touch system
US8411146B2 (en) 2009-09-04 2013-04-02 Lockheed Martin Corporation Single camera color and infrared polarimetric imaging
FR2950153B1 (fr) 2009-09-15 2011-12-23 Commissariat Energie Atomique Dispositif optique a membrane deformable a actionnement piezoelectrique
US20140076336A1 (en) 2009-09-17 2014-03-20 Ascentia Health, Inc. Ear insert for relief of tmj discomfort and headaches
US9497386B1 (en) * 2009-09-22 2016-11-15 Altia Systems Inc. Multi-imager video camera with automatic exposure control
KR101727094B1 (ko) 2009-10-02 2017-04-17 코닌클리케 필립스 엔.브이. ３ｄ 비디오에서 추가 뷰들을 생성하기 위한 뷰포인트들을 선택하는 방법
KR101807886B1 (ko) 2009-10-14 2017-12-11 돌비 인터네셔널 에이비 깊이 맵 처리를 위한 방법 및 디바이스
DE102009049387B4 (de) * 2009-10-14 2016-05-25 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung, Bildverarbeitungsvorrichtung und Verfahren zur optischen Abbildung
US8199165B2 (en) 2009-10-14 2012-06-12 Hewlett-Packard Development Company, L.P. Methods and systems for object segmentation in digital images
US8502909B2 (en) 2009-10-19 2013-08-06 Pixar Super light-field lens
WO2011056574A1 (en) 2009-10-26 2011-05-12 Olaf Andrew Hall-Holt Dental imaging system and method
KR20120084775A (ko) 2009-10-30 2012-07-30 휴렛-팩커드 디벨롭먼트 컴퍼니, 엘.피. 입체 디스플레이 시스템
WO2011053711A1 (en) 2009-10-30 2011-05-05 Invisage Technologies, Inc. Systems and methods for color binning
WO2011055655A1 (ja) 2009-11-05 2011-05-12 コニカミノルタオプト株式会社 撮像装置、光学ユニット、ウエハレンズ積層体及びウエハレンズ積層体の製造方法
WO2011058876A1 (ja) 2009-11-13 2011-05-19 富士フイルム株式会社 測距装置、測距方法、測距プログラムおよび測距システムならびに撮像装置
JP5399215B2 (ja) 2009-11-18 2014-01-29 シャープ株式会社 多眼カメラ装置および電子情報機器
US8643701B2 (en) 2009-11-18 2014-02-04 University Of Illinois At Urbana-Champaign System for executing 3D propagation for depth image-based rendering
US8514491B2 (en) * 2009-11-20 2013-08-20 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
WO2011066275A2 (en) 2009-11-25 2011-06-03 Massachusetts Institute Of Technology Actively addressable aperture light field camera
KR101608970B1 (ko) 2009-11-27 2016-04-05 삼성전자주식회사 광 필드 데이터를 이용한 영상 처리 장치 및 방법
US8400555B1 (en) 2009-12-01 2013-03-19 Adobe Systems Incorporated Focused plenoptic camera employing microlenses with different focal lengths
US8730338B2 (en) 2009-12-01 2014-05-20 Nokia Corporation Set of camera modules hinged on a body and functionally connected to a single actuator
JP5446797B2 (ja) 2009-12-04 2014-03-19 株式会社リコー 撮像装置
US8446492B2 (en) 2009-12-10 2013-05-21 Honda Motor Co., Ltd. Image capturing device, method of searching for occlusion region, and program
JP5387377B2 (ja) 2009-12-14 2014-01-15 ソニー株式会社 画像処理装置、および画像処理方法、並びにプログラム
US9030530B2 (en) 2009-12-15 2015-05-12 Thomson Licensing Stereo-image quality and disparity/depth indications
US20110153248A1 (en) 2009-12-23 2011-06-23 Yeming Gu Ophthalmic quality metric system
EP2518995B1 (en) 2009-12-24 2018-08-22 Sharp Kabushiki Kaisha Multocular image pickup apparatus and multocular image pickup method
JP4983905B2 (ja) 2009-12-25 2012-07-25 カシオ計算機株式会社 撮像装置、３ｄモデリングデータ生成方法、および、プログラム
KR101643607B1 (ko) 2009-12-30 2016-08-10 삼성전자주식회사 영상 데이터 생성 방법 및 장치
CN102117576A (zh) 2009-12-31 2011-07-06 鸿富锦精密工业（深圳）有限公司 电子相框
CN102118551A (zh) 2009-12-31 2011-07-06 鸿富锦精密工业（深圳）有限公司 成像装置
CN102131044B (zh) 2010-01-20 2014-03-26 鸿富锦精密工业（深圳）有限公司 相机模组
WO2011097508A2 (en) 2010-02-04 2011-08-11 University Of Southern California Combined spectral and polarimetry imaging and diagnostics
US8593512B2 (en) 2010-02-05 2013-11-26 Creative Technology Ltd Device and method for scanning an object on a working surface
US8326142B2 (en) 2010-02-12 2012-12-04 Sri International Optical image systems
JP5387856B2 (ja) 2010-02-16 2014-01-15 ソニー株式会社 画像処理装置、画像処理方法、画像処理プログラムおよび撮像装置
US8648918B2 (en) 2010-02-18 2014-02-11 Sony Corporation Method and system for obtaining a point spread function using motion information
EP2537332A1 (en) 2010-02-19 2012-12-26 Dual Aperture, Inc. Processing multi-aperture image data
KR101802238B1 (ko) 2010-02-23 2017-11-29 삼성전자주식회사 휴대용 단말기에서 입체 영상 데이터를 생성하기 위한 장치 및 방법
KR20110097690A (ko) 2010-02-23 2011-08-31 삼성전자주식회사 다시점 정지 영상 서비스 제공 방법 및 그 장치, 다시점 정지 영상 서비스 수신 방법 및 그 장치
WO2011106798A1 (en) 2010-02-28 2011-09-01 Osterhout Group, Inc. Local advertising content on an interactive head-mounted eyepiece
US8860833B2 (en) * 2010-03-03 2014-10-14 Adobe Systems Incorporated Blended rendering of focused plenoptic camera data
US20110222757A1 (en) 2010-03-10 2011-09-15 Gbo 3D Technology Pte. Ltd. Systems and methods for 2D image and spatial data capture for 3D stereo imaging
US20110221950A1 (en) 2010-03-12 2011-09-15 Doeke Jolt Oostra Camera device, wafer scale package
WO2011116203A1 (en) 2010-03-17 2011-09-22 Pelican Imaging Corporation Fabrication process for mastering imaging lens arrays
US8310538B2 (en) 2010-03-19 2012-11-13 Fujifilm Corporation Imaging apparatus, method, program, and recording medium used in the program
JP5679978B2 (ja) 2010-03-19 2015-03-04 パナソニックＩｐマネジメント株式会社 立体視用画像位置合わせ装置、立体視用画像位置合わせ方法、及びそのプログラム
US8736733B2 (en) 2010-03-19 2014-05-27 Invisage Technologies, Inc. Dark current reduction in image sensors via dynamic electrical biasing
WO2011118135A1 (ja) * 2010-03-25 2011-09-29 パナソニック株式会社 送信装置、受信装置、送信方法および受信方法
US8285033B2 (en) 2010-04-01 2012-10-09 Seiko Epson Corporation Bi-affinity filter: a bilateral type filter for color images
US8896668B2 (en) * 2010-04-05 2014-11-25 Qualcomm Incorporated Combining data from multiple image sensors
US20110242355A1 (en) * 2010-04-05 2011-10-06 Qualcomm Incorporated Combining data from multiple image sensors
US8600186B2 (en) 2010-04-26 2013-12-03 City University Of Hong Kong Well focused catadioptric image acquisition
US9053573B2 (en) 2010-04-29 2015-06-09 Personify, Inc. Systems and methods for generating a virtual camera viewpoint for an image
US20110267264A1 (en) 2010-04-29 2011-11-03 Mccarthy John Display system with multiple optical sensors
US20130250150A1 (en) 2010-05-03 2013-09-26 Michael R. Malone Devices and methods for high-resolution image and video capture
US9256974B1 (en) 2010-05-04 2016-02-09 Stephen P Hines 3-D motion-parallax portable display software application
US8885890B2 (en) 2010-05-07 2014-11-11 Microsoft Corporation Depth map confidence filtering
KR20110124473A (ko) 2010-05-11 2011-11-17 삼성전자주식회사 다중시점 영상을 위한 3차원 영상 생성 장치 및 방법
KR101756910B1 (ko) 2010-05-11 2017-07-26 삼성전자주식회사 감쇠 패턴을 포함하는 마스크를 이용한 광 필드 영상 처리 장치 및 방법
WO2011143501A1 (en) * 2010-05-12 2011-11-17 Pelican Imaging Corporation Architectures for imager arrays and array cameras
US20130147979A1 (en) 2010-05-12 2013-06-13 Pelican Imaging Corporation Systems and methods for extending dynamic range of imager arrays by controlling pixel analog gain
JP5545016B2 (ja) 2010-05-12 2014-07-09 ソニー株式会社 撮像装置
WO2011142774A1 (en) 2010-05-14 2011-11-17 Omnivision Technologies, Inc. Alternative color image array and associated methods
US8576293B2 (en) * 2010-05-18 2013-11-05 Aptina Imaging Corporation Multi-channel imager
US8602887B2 (en) 2010-06-03 2013-12-10 Microsoft Corporation Synthesis of information from multiple audiovisual sources
US20120062697A1 (en) 2010-06-09 2012-03-15 Chemimage Corporation Hyperspectral imaging sensor for tracking moving targets
US20110310980A1 (en) * 2010-06-22 2011-12-22 Qualcomm Mems Technologies, Inc. Apparatus and methods for processing frames of video data across a display interface using a block-based encoding scheme and a tag id
KR20120000485A (ko) 2010-06-25 2012-01-02 삼성전자주식회사 예측 모드를 이용한 깊이 영상 부호화 장치 및 방법
EP2403234A1 (en) 2010-06-29 2012-01-04 Koninklijke Philips Electronics N.V. Method and system for constructing a compound image from data obtained by an array of image capturing devices
CN101883291B (zh) 2010-06-29 2012-12-19 上海大学 感兴趣区域增强的视点绘制方法
US8493432B2 (en) 2010-06-29 2013-07-23 Mitsubishi Electric Research Laboratories, Inc. Digital refocusing for wide-angle images using axial-cone cameras
US9406132B2 (en) 2010-07-16 2016-08-02 Qualcomm Incorporated Vision-based quality metric for three dimensional video
GB2482022A (en) 2010-07-16 2012-01-18 St Microelectronics Res & Dev Method for measuring resolution and aberration of lens and sensor
US8386964B2 (en) 2010-07-21 2013-02-26 Microsoft Corporation Interactive image matting
US20120019700A1 (en) 2010-07-26 2012-01-26 American Technologies Network Corporation Optical system with automatic mixing of daylight and thermal vision digital video signals
US20120026342A1 (en) * 2010-07-27 2012-02-02 Xiaoguang Yu Electronic system communicating with image sensor
US20120026451A1 (en) 2010-07-29 2012-02-02 Lensvector Inc. Tunable liquid crystal lens with single sided contacts
CN102375199B (zh) 2010-08-11 2015-06-03 鸿富锦精密工业（深圳）有限公司 相机模组
US8428342B2 (en) 2010-08-12 2013-04-23 At&T Intellectual Property I, L.P. Apparatus and method for providing three dimensional media content
US8836793B1 (en) 2010-08-13 2014-09-16 Opto-Knowledge Systems, Inc. True color night vision (TCNV) fusion
US8493482B2 (en) 2010-08-18 2013-07-23 Apple Inc. Dual image sensor image processing system and method
US8749694B2 (en) * 2010-08-27 2014-06-10 Adobe Systems Incorporated Methods and apparatus for rendering focused plenoptic camera data using super-resolved demosaicing
US8665341B2 (en) * 2010-08-27 2014-03-04 Adobe Systems Incorporated Methods and apparatus for rendering output images with simulated artistic effects from focused plenoptic camera data
US8724000B2 (en) * 2010-08-27 2014-05-13 Adobe Systems Incorporated Methods and apparatus for super-resolution in integral photography
GB2483434A (en) 2010-08-31 2012-03-14 Sony Corp Detecting stereoscopic disparity by comparison with subset of pixel change points
US20120056982A1 (en) 2010-09-08 2012-03-08 Microsoft Corporation Depth camera based on structured light and stereo vision
US9013550B2 (en) 2010-09-09 2015-04-21 Qualcomm Incorporated Online reference generation and tracking for multi-user augmented reality
WO2012036903A1 (en) 2010-09-14 2012-03-22 Thomson Licensing Compression methods and apparatus for occlusion data
US9013634B2 (en) 2010-09-14 2015-04-21 Adobe Systems Incorporated Methods and apparatus for video completion
US8780251B2 (en) 2010-09-20 2014-07-15 Canon Kabushiki Kaisha Image capture with focus adjustment
WO2012039043A1 (ja) 2010-09-22 2012-03-29 富士通株式会社 ステレオ画像生成装置、ステレオ画像生成方法及びステレオ画像生成用コンピュータプログラム
US20120086803A1 (en) 2010-10-11 2012-04-12 Malzbender Thomas G Method and system for distance estimation using projected symbol sequences
US20140192238A1 (en) 2010-10-24 2014-07-10 Linx Computational Imaging Ltd. System and Method for Imaging and Image Processing
JP5657343B2 (ja) 2010-10-28 2015-01-21 株式会社ザクティ 電子機器
WO2012056437A1 (en) 2010-10-29 2012-05-03 École Polytechnique Fédérale De Lausanne (Epfl) Omnidirectional sensor array system
US9137503B2 (en) 2010-11-03 2015-09-15 Sony Corporation Lens and color filter arrangement, super-resolution camera system and method
US9065991B2 (en) 2010-11-04 2015-06-23 Lensvector Inc. Methods of adjustment free manufacture of focus free camera modules
US20120113232A1 (en) 2010-11-10 2012-05-10 Sony Pictures Technologies Inc. Multiple camera system and method for selectable interaxial separation
MY150361A (en) 2010-12-03 2013-12-31 Mimos Berhad Method of image segmentation using intensity and depth information
WO2012078126A1 (en) 2010-12-08 2012-06-14 Thomson Licensing System and method for trinocular depth acquisition with triangular sensor
US8878950B2 (en) 2010-12-14 2014-11-04 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using super-resolution processes
JP5963422B2 (ja) 2010-12-17 2016-08-03 キヤノン株式会社 撮像装置、表示装置、コンピュータプログラムおよび立体像表示システム
US9177381B2 (en) 2010-12-22 2015-11-03 Nani Holdings IP, LLC Depth estimate determination, systems and methods
US8682107B2 (en) 2010-12-22 2014-03-25 Electronics And Telecommunications Research Institute Apparatus and method for creating 3D content for oriental painting
US8565709B2 (en) 2010-12-30 2013-10-22 Apple Inc. Digital signal filter
JP5699609B2 (ja) 2011-01-06 2015-04-15 ソニー株式会社 画像処理装置および画像処理方法
EP2666048A4 (en) 2011-01-20 2014-06-04 Fivefocal Llc PASSIV ATHERMALIZED INFRARED IMAGING SYSTEM AND MANUFACTURING METHOD THEREFOR
US8717467B2 (en) 2011-01-25 2014-05-06 Aptina Imaging Corporation Imaging systems with array cameras for depth sensing
US8581995B2 (en) 2011-01-25 2013-11-12 Aptina Imaging Corporation Method and apparatus for parallax correction in fused array imaging systems
JP5594477B2 (ja) 2011-01-26 2014-09-24 Ｎｌｔテクノロジー株式会社 画像表示装置、画像表示方法、及びプログラム
EP2668617A1 (en) 2011-01-27 2013-12-04 Metaio GmbH Method for determining correspondences between a first and a second image, and method for determining the pose of a camera
US20120200726A1 (en) 2011-02-09 2012-08-09 Research In Motion Limited Method of Controlling the Depth of Field for a Small Sensor Camera Using an Extension for EDOF
CA2767023C (en) 2011-02-09 2014-09-09 Research In Motion Limited Increased low light sensitivity for image sensors by combining quantum dot sensitivity to visible and infrared light
US8698885B2 (en) 2011-02-14 2014-04-15 Intuitive Surgical Operations, Inc. Methods and apparatus for demosaicing images with highly correlated color channels
US20140176592A1 (en) 2011-02-15 2014-06-26 Lytro, Inc. Configuring two-dimensional image processing based on light-field parameters
US8406548B2 (en) 2011-02-28 2013-03-26 Sony Corporation Method and apparatus for performing a blur rendering process on an image
RU2551649C2 (ru) 2011-02-28 2015-05-27 Фуджифилм Корпорэйшн Устройство формирования цветного изображения
US8537245B2 (en) 2011-03-04 2013-09-17 Hand Held Products, Inc. Imaging and decoding device with quantum dot imager
CA2769358C (en) 2011-03-08 2016-06-07 Research In Motion Limited Quantum dot image sensor with dummy pixels used for intensity calculations
US9565449B2 (en) 2011-03-10 2017-02-07 Qualcomm Incorporated Coding multiview video plus depth content
KR101792501B1 (ko) 2011-03-16 2017-11-21 한국전자통신연구원 특징기반의 스테레오 매칭 방법 및 장치
US8824821B2 (en) 2011-03-28 2014-09-02 Sony Corporation Method and apparatus for performing user inspired visual effects rendering on an image
US20120249853A1 (en) 2011-03-28 2012-10-04 Marc Krolczyk Digital camera for reviewing related images
US9030528B2 (en) 2011-04-04 2015-05-12 Apple Inc. Multi-zone imaging sensor and lens array
FR2974449A1 (fr) 2011-04-22 2012-10-26 Commissariat Energie Atomique Circuit integre imageur et dispositif de capture d'images stereoscopiques
US20120274626A1 (en) 2011-04-29 2012-11-01 Himax Media Solutions, Inc. Stereoscopic Image Generating Apparatus and Method
WO2012155119A1 (en) 2011-05-11 2012-11-15 Pelican Imaging Corporation Systems and methods for transmitting and receiving array camera image data
US8843346B2 (en) 2011-05-13 2014-09-23 Amazon Technologies, Inc. Using spatial information with device interaction
US8629901B2 (en) 2011-05-19 2014-01-14 National Taiwan University System and method of revising depth of a 3D image pair
US20120293489A1 (en) 2011-05-20 2012-11-22 Himax Technologies Limited Nonlinear depth remapping system and method thereof
JP5797016B2 (ja) 2011-05-30 2015-10-21 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
JP5762142B2 (ja) 2011-05-31 2015-08-12 キヤノン株式会社 撮像装置、画像処理装置およびその方法
US9635274B2 (en) 2011-06-15 2017-04-25 Microsoft Technology Licensing, Llc High resolution multispectral image capture
JP2013005259A (ja) 2011-06-17 2013-01-07 Sony Corp 画像処理装置、および画像処理方法、並びにプログラム
JP2014521117A (ja) 2011-06-28 2014-08-25 ペリカン イメージング コーポレイション アレイカメラで使用するための光学配列
US20130265459A1 (en) 2011-06-28 2013-10-10 Pelican Imaging Corporation Optical arrangements for use with an array camera
US8773513B2 (en) 2011-07-01 2014-07-08 Seiko Epson Corporation Context and epsilon stereo constrained correspondence matching
US9300946B2 (en) 2011-07-08 2016-03-29 Personify, Inc. System and method for generating a depth map and fusing images from a camera array
JP2013024886A (ja) 2011-07-14 2013-02-04 Sanyo Electric Co Ltd 撮像装置
JP5780865B2 (ja) 2011-07-14 2015-09-16 キヤノン株式会社 画像処理装置、撮像システム、画像処理システム
US9363535B2 (en) 2011-07-22 2016-06-07 Qualcomm Incorporated Coding motion depth maps with depth range variation
US9264689B2 (en) 2011-08-04 2016-02-16 Semiconductor Components Industries, Llc Systems and methods for color compensation in multi-view video
BR112014003165A2 (pt) 2011-08-09 2017-03-01 Samsung Electronics Co Ltd método para codificar um mapa de profundidade de dados de vídeo de múltiplas visualizações, aparelho para codificar um mapa de profundidade de dados de vídeo de múltiplas visualizações, método para decodificar um mapa de profundidade de dados de vídeo de múltiplas visualizações, e aparelho para decodificar um mapa de profundidade de dados de vídeo de múltiplas visualizações
US8432435B2 (en) 2011-08-10 2013-04-30 Seiko Epson Corporation Ray image modeling for fast catadioptric light field rendering
US8866951B2 (en) 2011-08-24 2014-10-21 Aptina Imaging Corporation Super-resolution imaging systems
US8704895B2 (en) 2011-08-29 2014-04-22 Qualcomm Incorporated Fast calibration of displays using spectral-based colorimetrically calibrated multicolor camera
WO2013043751A1 (en) 2011-09-19 2013-03-28 Pelican Imaging Corporation Systems and methods for controlling aliasing in images captured by an array camera for use in super resolution processing using pixel apertures
JP5879549B2 (ja) 2011-09-20 2016-03-08 パナソニックＩｐマネジメント株式会社 ライトフィールド撮像装置、および画像処理装置
CN103828361B (zh) 2011-09-21 2015-04-29 富士胶片株式会社 图像处理装置、方法，立体图像获取装置，便携式电子设备，打印机和立体图像播放器装置
US8724893B2 (en) 2011-09-27 2014-05-13 Thomson Licensing Method and system for color look up table generation
US8908083B2 (en) 2011-09-28 2014-12-09 Apple Inc. Dynamic autofocus operations
IN2014CN02708A (zh) 2011-09-28 2015-08-07 Pelican Imaging Corp
JP5831105B2 (ja) 2011-09-30 2015-12-09 ソニー株式会社 撮像装置及び撮像方法
CN104185808A (zh) 2011-10-11 2014-12-03 派力肯影像公司 包括自适应光学元件的透镜堆叠阵列
EP2582128A3 (en) 2011-10-12 2013-06-19 Canon Kabushiki Kaisha Image-capturing device
US20130107072A1 (en) 2011-10-31 2013-05-02 Ankit Kumar Multi-resolution ip camera
JP5149435B1 (ja) 2011-11-04 2013-02-20 株式会社東芝 映像処理装置および映像処理方法
US9692991B2 (en) 2011-11-04 2017-06-27 Qualcomm Incorporated Multispectral imaging system
EP2590138B1 (en) 2011-11-07 2019-09-11 Flir Systems AB Gas visualization arrangements, devices, and methods
WO2013072875A2 (en) 2011-11-15 2013-05-23 Technion Research & Development Foundation Ltd. Method and system for transmitting light
US20130121559A1 (en) 2011-11-16 2013-05-16 Sharp Laboratories Of America, Inc. Mobile device with three dimensional augmented reality
US9661310B2 (en) 2011-11-28 2017-05-23 ArcSoft Hanzhou Co., Ltd. Image depth recovering method and stereo image fetching device thereof
EP2600316A1 (en) 2011-11-29 2013-06-05 Inria Institut National de Recherche en Informatique et en Automatique Method, system and software program for shooting and editing a film comprising at least one image of a 3D computer-generated animation
WO2013119706A1 (en) 2012-02-06 2013-08-15 Pelican Imaging Corporation Systems and methods for extending dynamic range of imager arrays by controlling pixel analog gain
US9172889B2 (en) 2012-02-09 2015-10-27 Semiconductor Components Industries, Llc Imaging systems and methods for generating auto-exposed high-dynamic-range images
US9412206B2 (en) 2012-02-21 2016-08-09 Pelican Imaging Corporation Systems and methods for the manipulation of captured light field image data
JP5860304B2 (ja) 2012-02-23 2016-02-16 キヤノン株式会社 撮像装置及びその制御方法、プログラム、並びに記憶媒体
JP6112824B2 (ja) 2012-02-28 2017-04-12 キヤノン株式会社 画像処理方法および装置、プログラム。
EP2637139A1 (en) 2012-03-05 2013-09-11 Thomson Licensing Method and apparatus for bi-layer segmentation
EP2836869B1 (en) 2012-04-13 2020-10-14 Automation Engineering, Inc. Active alignment using continuous motion sweeps and temporal interpolation
JP2015523102A (ja) 2012-04-16 2015-08-13 チルドレンズ ナショナル メディカル センターＣｈｉｌｄｒｅｎ’Ｓ Ｎａｔｉｏｎａｌ Ｍｅｄｉｃａｌ Ｃｅｎｔｅｒ 手術及び介入処置での追跡及び制御の為のデュアルモードステレオイメージングシステム
US9210392B2 (en) 2012-05-01 2015-12-08 Pelican Imaging Coporation Camera modules patterned with pi filter groups
WO2013169671A1 (en) 2012-05-09 2013-11-14 Lytro, Inc. Optimization of optical systems for improved light field capture and manipulation
JP5929553B2 (ja) 2012-06-28 2016-06-08 ソニー株式会社 画像処理装置、撮像装置、画像処理方法およびプログラム
WO2014005123A1 (en) 2012-06-28 2014-01-03 Pelican Imaging Corporation Systems and methods for detecting defective camera arrays, optic arrays, and sensors
US8896594B2 (en) 2012-06-30 2014-11-25 Microsoft Corporation Depth sensing with depth-adaptive illumination
US20140002674A1 (en) 2012-06-30 2014-01-02 Pelican Imaging Corporation Systems and Methods for Manufacturing Camera Modules Using Active Alignment of Lens Stack Arrays and Sensors
US9147251B2 (en) 2012-08-03 2015-09-29 Flyby Media, Inc. Systems and methods for efficient 3D tracking of weakly textured planar surfaces for augmented reality applications
US8988566B2 (en) 2012-08-09 2015-03-24 Omnivision Technologies, Inc. Lens array for partitioned image sensor having color filters
US8619082B1 (en) 2012-08-21 2013-12-31 Pelican Imaging Corporation Systems and methods for parallax detection and correction in images captured using array cameras that contain occlusions using subsets of images to perform depth estimation
US20140055632A1 (en) 2012-08-23 2014-02-27 Pelican Imaging Corporation Feature based high resolution motion estimation from low resolution images captured using an array source
CN104584545B (zh) 2012-08-31 2017-05-31 索尼公司 图像处理装置、图像处理方法、以及信息处理装置
WO2014043641A1 (en) 2012-09-14 2014-03-20 Pelican Imaging Corporation Systems and methods for correcting user identified artifacts in light field images
US9143673B2 (en) 2012-09-19 2015-09-22 Google Inc. Imaging device with a plurality of pixel arrays
US20140092281A1 (en) 2012-09-28 2014-04-03 Pelican Imaging Corporation Generating Images from Light Fields Utilizing Virtual Viewpoints
TW201415879A (zh) 2012-10-12 2014-04-16 Wintek Corp 影像擷取裝置
EP2915325A4 (en) 2012-10-31 2016-06-01 Invisage Technologies Inc PICTURE AND VIDEO RECORDING WITH ADVANCED VIEW FIELD
WO2014078443A1 (en) 2012-11-13 2014-05-22 Pelican Imaging Corporation Systems and methods for array camera focal plane control
CN105556944B (zh) 2012-11-28 2019-03-08 核心光电有限公司 多孔径成像***和方法
US9001226B1 (en) 2012-12-04 2015-04-07 Lytro, Inc. Capturing and relighting images using multiple devices
US9088369B2 (en) 2012-12-28 2015-07-21 Synergy Microwave Corporation Self injection locked phase locked looped optoelectronic oscillator
US20140183334A1 (en) 2013-01-03 2014-07-03 Visera Technologies Company Limited Image sensor for light field device and manufacturing method thereof
US9270876B2 (en) 2013-01-05 2016-02-23 The Lightco Inc. Methods and apparatus for using multiple optical chains in parallel with multiple different exposure times
KR20140094395A (ko) 2013-01-22 2014-07-30 삼성전자주식회사 복수 개의 마이크로렌즈를 사용하여 촬영하는 촬영 장치 및 그 촬영 방법
US9497380B1 (en) 2013-02-15 2016-11-15 Red.Com, Inc. Dense field imaging
US9462164B2 (en) 2013-02-21 2016-10-04 Pelican Imaging Corporation Systems and methods for generating compressed light field representation data using captured light fields, array geometry, and parallax information
WO2014133974A1 (en) 2013-02-24 2014-09-04 Pelican Imaging Corporation Thin form computational and modular array cameras
US20150002734A1 (en) 2013-07-01 2015-01-01 Motorola Mobility Llc Electronic Device with Modulated Light Flash Operation for Rolling Shutter Image Sensor
US9638883B1 (en) 2013-03-04 2017-05-02 Fotonation Cayman Limited Passive alignment of array camera modules constructed from lens stack arrays and sensors based upon alignment information obtained during manufacture of array camera modules using an active alignment process
WO2014138695A1 (en) 2013-03-08 2014-09-12 Pelican Imaging Corporation Systems and methods for measuring scene information while capturing images using array cameras
US8866912B2 (en) 2013-03-10 2014-10-21 Pelican Imaging Corporation System and methods for calibration of an array camera using a single captured image
US9521416B1 (en) 2013-03-11 2016-12-13 Kip Peli P1 Lp Systems and methods for image data compression
US9888194B2 (en) 2013-03-13 2018-02-06 Fotonation Cayman Limited Array camera architecture implementing quantum film image sensors
WO2014160142A1 (en) 2013-03-13 2014-10-02 Pelican Imaging Corporation Systems and methods for using alignment to increase sampling diversity of cameras in an array camera module
US9106784B2 (en) 2013-03-13 2015-08-11 Pelican Imaging Corporation Systems and methods for controlling aliasing in images captured by an array camera for use in super-resolution processing
US9124831B2 (en) 2013-03-13 2015-09-01 Pelican Imaging Corporation System and methods for calibration of an array camera
WO2014165244A1 (en) 2013-03-13 2014-10-09 Pelican Imaging Corporation Systems and methods for synthesizing images from image data captured by an array camera using restricted depth of field depth maps in which depth estimation precision varies
US9578259B2 (en) 2013-03-14 2017-02-21 Fotonation Cayman Limited Systems and methods for reducing motion blur in images or video in ultra low light with array cameras
US9633442B2 (en) 2013-03-15 2017-04-25 Fotonation Cayman Limited Array cameras including an array camera module augmented with a separate camera
WO2014144157A1 (en) 2013-03-15 2014-09-18 Pelican Imaging Corporation Optical arrangements for use with an array camera
US9497370B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Array camera architecture implementing quantum dot color filters
WO2014149902A1 (en) 2013-03-15 2014-09-25 Pelican Imaging Corporation Systems and methods for providing an array projector
US9438888B2 (en) 2013-03-15 2016-09-06 Pelican Imaging Corporation Systems and methods for stereo imaging with camera arrays
US9445003B1 (en) 2013-03-15 2016-09-13 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information
US9497429B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Extended color processing on pelican array cameras
US9898856B2 (en) 2013-09-27 2018-02-20 Fotonation Cayman Limited Systems and methods for depth-assisted perspective distortion correction
US20150098079A1 (en) 2013-10-09 2015-04-09 Hilti Aktiengesellschaft System and method for camera based position and orientation measurement
US20150104101A1 (en) 2013-10-14 2015-04-16 Apple Inc. Method and ui for z depth image segmentation
US9426343B2 (en) 2013-11-07 2016-08-23 Pelican Imaging Corporation Array cameras incorporating independently aligned lens stacks
US10119808B2 (en) 2013-11-18 2018-11-06 Fotonation Limited Systems and methods for estimating depth from projected texture using camera arrays
EP3075140B1 (en) 2013-11-26 2018-06-13 FotoNation Cayman Limited Array camera configurations incorporating multiple constituent array cameras
US9979878B2 (en) 2014-02-21 2018-05-22 Light Labs Inc. Intuitive camera user interface methods and apparatus
JP6211435B2 (ja) 2014-02-26 2017-10-11 株式会社アドバンテスト 半導体装置の製造方法
US10089740B2 (en) 2014-03-07 2018-10-02 Fotonation Limited System and methods for depth regularization and semiautomatic interactive matting using RGB-D images
US9521319B2 (en) 2014-06-18 2016-12-13 Pelican Imaging Corporation Array cameras and array camera modules including spectral filters disposed outside of a constituent image sensor
JP6512928B2 (ja) * 2015-04-28 2019-05-15 キヤノン株式会社 画像符号化装置、画像処理装置、画像符号化方法
US9679526B2 (en) * 2015-06-30 2017-06-13 Nxp Usa, Inc. Display system, an integrated circuit for use in the display system, and a method of displaying at least two images on at least two screens
JP6626295B2 (ja) * 2015-09-09 2019-12-25 キヤノン株式会社 画像符号化装置、画像処理装置、画像符号化方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6750488B1 (en) * 1998-08-18 2004-06-15 Deutsches Zentrum für Luft- und Raumfahrt e.V. Focal plane plate for a high-resolution camera with light-sensitive semiconductor sensors
US6502097B1 (en) * 1999-12-23 2002-12-31 Microsoft Corporation Data structure for efficient access to variable-size data objects
WO2008045198A2 (en) * 2006-10-04 2008-04-17 Eastman Kodak Company Providing multiple video signals from single sensor
CN102037717A (zh) * 2008-05-20 2011-04-27 派力肯成像公司 使用具有异构成像器的单片相机阵列的图像拍摄和图像处理

Also Published As

Publication number Publication date
CN103765864A (zh) 2014-04-30
KR20140045373A (ko) 2014-04-16
US20160269626A1 (en) 2016-09-15
CN103765864B (zh) 2017-07-04
WO2012155119A1 (en) 2012-11-15
EP2708019A1 (en) 2014-03-19
US20120287291A1 (en) 2012-11-15
US10218889B2 (en) 2019-02-26
US20130057710A1 (en) 2013-03-07
CN107404609A (zh) 2017-11-28
JP2014519741A (ja) 2014-08-14
US10742861B2 (en) 2020-08-11
EP2708019B1 (en) 2019-10-16
US20190174040A1 (en) 2019-06-06
KR101973822B1 (ko) 2019-04-29
US20180131852A1 (en) 2018-05-10
EP2708019A4 (en) 2014-10-08
US9197821B2 (en) 2015-11-24
US8305456B1 (en) 2012-11-06
US8692893B2 (en) 2014-04-08
US9866739B2 (en) 2018-01-09
US20140218546A1 (en) 2014-08-07

Similar Documents

Publication Publication Date Title
CN107404609B (zh) 用于传送阵列照相机图像数据的方法
US9521416B1 (en) Systems and methods for image data compression
JP6014991B2 (ja) 画像出力装置、画像出力方法、画像処理装置、画像処理方法、プログラム、データ構造、および撮像装置
US8098941B2 (en) Method and apparatus for parallelization of image compression encoders
US6151069A (en) Dual mode digital camera for video and still operation
CN111295887B (zh) 具有感兴趣区域模式选择的发送装置和方法
JPWO2014084072A1 (ja) イメージセンサおよびそのデータ伝送方法、情報処理装置および情報処理方法、電子機器、並びにプログラム
CN101355644A (zh) 将图像稳定数据嵌入图像数据的图像传感器设备和方法
US20090066804A1 (en) Data-processing circuit and video camera
US20070046683A1 (en) Image processor, imaging device, and image processing system
US20220053053A1 (en) Transmission device, transmission method, reception device, reception method, and transmission-reception device
EP1293090A1 (en) Dual-mode cmos integrated imager
CN113556497A (zh) 一种传输多摄像头数据的方法
US20060209335A1 (en) Image transmitter
US20120099655A1 (en) Image encoder and method for encoding images
US20230260244A1 (en) Solid-state imaging element, imaging device, and information processing system
JP6896151B2 (ja) ビデオデータを転送するための方法及び装置
KR101541123B1 (ko) 이미지 시그널 프로세서의 이미지 데이터 출력 장치
KR20210096090A (ko) 수신 장치 및 송신 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20190815

Address after: Ai Er Langeerwei

Applicant after: DIGITALOPTICS CORPORATION EUROPE LIMITED

Address before: American California

Applicant before: FOTONATION Cayman Ltd

GR01 Patent grant
GR01 Patent grant