JP2017531976A - アレイカメラを動的に較正するためのシステム及び方法 - Google Patents
アレイカメラを動的に較正するためのシステム及び方法 Download PDFInfo
- Publication number
- JP2017531976A JP2017531976A JP2017536232A JP2017536232A JP2017531976A JP 2017531976 A JP2017531976 A JP 2017531976A JP 2017536232 A JP2017536232 A JP 2017536232A JP 2017536232 A JP2017536232 A JP 2017536232A JP 2017531976 A JP2017531976 A JP 2017531976A
- Authority
- JP
- Japan
- Prior art keywords
- image
- calibration data
- camera
- feature
- geometric calibration
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 117
- 239000013598 vector Substances 0.000 claims abstract description 143
- 230000008569 process Effects 0.000 claims abstract description 80
- 238000012545 processing Methods 0.000 claims description 69
- 230000001419 dependent effect Effects 0.000 claims description 21
- 238000012937 correction Methods 0.000 claims description 19
- 238000012549 training Methods 0.000 claims description 5
- 230000015654 memory Effects 0.000 claims description 3
- 238000004458 analytical method Methods 0.000 claims description 2
- 230000004044 response Effects 0.000 claims description 2
- 238000013507 mapping Methods 0.000 claims 1
- 230000003068 static effect Effects 0.000 claims 1
- 230000000875 corresponding effect Effects 0.000 description 43
- 238000001514 detection method Methods 0.000 description 9
- 238000003491 array Methods 0.000 description 8
- 238000013213 extrapolation Methods 0.000 description 7
- 230000008859 change Effects 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 238000000513 principal component analysis Methods 0.000 description 4
- 230000009466 transformation Effects 0.000 description 4
- 238000007499 fusion processing Methods 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 3
- 238000007781 pre-processing Methods 0.000 description 3
- 230000002459 sustained effect Effects 0.000 description 3
- 238000006073 displacement reaction Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000008447 perception Effects 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 230000003595 spectral effect Effects 0.000 description 2
- 238000012952 Resampling Methods 0.000 description 1
- 230000003416 augmentation Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000008602 contraction Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 238000003702 image correction Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000035939 shock Effects 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 230000036962 time dependent Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000000844 transformation Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/80—Geometric correction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
- H04N17/002—Diagnosis, testing or measuring for television systems or their details for television cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
- G06T2207/10012—Stereo images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10052—Images from lightfield camera
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Processing (AREA)
- Studio Devices (AREA)
- Geometry (AREA)
- Image Analysis (AREA)
Abstract
アレイカメラを動的に較正して、動作寿命にわたって生じ得る幾何学的形状の変化に対処するためのシステム及び方法を開示する。動的較正処理は、シーンの画像セットを取得することと、画像内で対応する特徴を識別することと、を含み得る。幾何学的較正データを使用して画像を修正し、対応する特徴を観察する位置における幾何学的較正データの残差ベクトルを決定できる。次いで、残差ベクトルを使用して、カメラアレイの更新した幾何学的較正データを決定できる。いくつかの実施形態では、残差ベクトルを使用して、幾何学的較正データを更新する残差ベクトル較正データ場を生成する。多数の実施形態では、残差ベクトルを使用して、多数の異なる幾何学的較正データセットから、カメラアレイの現在の幾何学的形状に最適な幾何学的較正セットを選択する。
Description
本願は、一般にカメラアレイに関し、より具体的にはカメラアレイの動的較正に関する。
あるシーンを双眼視すると、このシーンの微妙に異なる画像が2つ生成される。これは、各眼の視野が異なるためである。両眼視差(つまり、視差)と呼ばれるこれらの差異は、情景の奥行計算に使用できる情報をもたらし、奥行知覚の主な手段を提供する。立体的な奥行知覚に伴う奥行感はまた、観察者が移動中に片眼だけでシーンを眺めるときなど、他の条件下で得ることができる。観察した視差を使用して、そのシーンに含まれる対象物の奥行情報を得ることができる。マシンビジョンにおける類似の原則を使用して、奥行情報を収集することができる。
ある距離だけ離れた2台のカメラは、同一シーンの写真を撮ることができ、撮像画像は、2つ、又は3つ以上の画像のピクセルをずらすことによって比較して、一致する画像部分を検出することができる。2つの異なるカメラ視野間での対象物のずれ量は視差と呼ばれ、対象物までの距離と反比例する。最良の一致をもたらす、多数の画像で対象物のずれを検出する視差探索を使用して、カメラと関連カメラの焦点距離との間の基線距離(並びにカメラの追加特性に関する知識)に基づいて対象物までの距離を計算することができる。大部分のカメラ構成において、2つ又は3つ以上の画像間で対応を検出するには、二次元での探索を必要とする。しかしながら、修正を使用して、視差探索を簡略化することができる。修正とは、2つ又は3つ以上の画像を共通像平面に投影するために使用できる変換処理である。修正によって画像セットを同一平面に投影するとき、視差探索はエピポーラ線に沿った一次元探索となる。
ごく最近では、研究者らは、より幅広の合成開口部にわたって存在する複数台のカメラを使用して、明視野像を撮っている(例えば、Stanford Multi Camera Array)。シーン内のあらゆる点における全方向からの光を特徴とする4D機能として定義されることが多い明視野は、あるシーンの二次元(2D)画像の2D収集として解釈できる。実用上の制約により、通常、明視野を形成する、シーンの一連の2D画像を同時に撮ることは困難である。しかしながら、各カメラが画像データを収集した時点に近いほど、光度(例えば、そうでなければ感知できない蛍光灯のフリッカー)又は対象物の動作の変化が撮像画像間で時間依存性のばらつきもたらす傾向が小さくなる。明視野の獲得及び再サンプリングを含む処理を使用して、大口径を有するカメラのシミュレーションを行うことができる。例えば、あるシーンに向けられたM×Nのカメラアレイは、視野がアレイの視野と同じ大きさであるレンズの焦点効果をシュミレーションできる。多数の実施形態では、カメラは矩形パターンに配置する必要はなく、環状構成及び/又は特定用途の要件に適した任意の構成などの構成を有することができる。このようなカメラアレイの使用法は、合成開口撮影法と呼ばれることもある。
本発明の様々な実施形態によるシステム及び方法は、カメラアレイの動的較正を実行する。一実施形態は、複数台のカメラを使用してシーンの画像セットを取得することであって、この画像セットは、基準画像と、別視点の画像と、を含む、ことと、画像処理アプリケーションの指示を受けるプロセッサを使用して、画像セットで特徴を検出することと、画像処理アプリケーションの指示を受けるプロセッサを使用して、基準画像内で検出した特徴に対応する特徴を別視点の画像内で識別することと、画像処理アプリケーションの指示を受けるプロセッサを使用して、幾何学的較正データセットに基づいて画像セットを修正することと、画像処理アプリケーションの指示を受けるプロセッサを使用して、基準画像及び別視点の画像で対応として識別した特徴の位置で観測したずれに基づいて、別視点の画像内で特徴を観測した位置における幾何学的較正データの残差ベクトルを決定することと、画像処理アプリケーションの指示を受けるプロセッサを使用して、残差ベクトルに基づいて別視点の画像を撮ったカメラの更新した幾何学的較正データを決定することと、画像処理アプリケーションの指示を受けるプロセッサを使用して、更新した幾何学的較正データに基づいて、別視点の画像を撮ったカメラが撮った画像を修正することと、を含む。
更なる実施形態では、別視点の画像内で特徴を観測した位置における幾何学的較正データの残差ベクトルを決定することは、エピポーラ線に沿って基準画像及び別視点の画像で対応として識別した特徴の位置で観測したずれの成分に基づいて、基準画像内で検出した特徴への対応として識別した、別視点の画像内の特徴の奥行を予測することと、対応する特徴の予測奥行に基づいて、基準画像及び別視点の画像で対応として識別した特徴の位置で観測したずれに適用する、シーンに依存する幾何補正を決定することと、シーンに依存する幾何補正を基準画像及び別視点の画像で対応として識別した特徴の位置で観測したずれに適用して、別視点の画像内で特徴を観測した位置における幾何学的較正データの残差ベクトルを取得することと、を含む。
別の実施形態では、残差ベクトルに基づいて、別視点の画像を撮ったカメラの更新した幾何学的較正データを決定することは、少なくとも内挿処理を使用して、残差ベクトルから残差ベクトル較正場を生成することを含む。
更なる実施形態では、残差ベクトルに基づいて、別視点の画像を撮ったカメラの更新した幾何学的較正データを決定することは、残差ベクトルから残差ベクトル較正場を生成するときに外挿処理を使用することを更に含む。
更に別の実施形態はまた、別視点の画像を撮ったカメラに関する幾何学的較正データセットに残差ベクトル較正場を適用することも含む。
更なる実施形態はまた、残差ベクトル較正場を基底ベクトルセットにマップすることと、不完全な基底ベクトルセットの線形結合を使用して、ノイズを除去した残差ベクトル較正場を生成することと、を含む。
更に別の実施形態では、基底ベクトルセットは、残差ベクトル較正場のトレーニングデータセットから学習する。
再び更なる実施形態では、基底ベクトルセットは、主成分分析を使用して、残差ベクトル較正場のトレーニングデータセットから学習する。
再び別の実施形態では、別視点の画像を撮ったカメラの更新した幾何学的較正データを決定することは、別視点の画像内で特徴を観測した位置における幾何学的較正データの少なくとも残差ベクトルに基づいて、複数の幾何学的較正データセットから更新した幾何学的較正データセットを選択することを含む。
更に別の実施形態はまた、複数台のカメラを使用してシーンの追加画像セットを取得することと、この追加画像セットを使用して幾何学的較正データの残差ベクトルを決定することと、を含む。加えて、残差ベクトルに基づいて、別視点の画像を撮ったカメラの更新した幾何学的較正データを決定することはまた、追加画像セットを使用して決定した幾何学的較正データの残差ベクトルを使用することを含む。
別の更なる実施形態はまた、特徴密度閾値を満たしていない、カメラの視野内の少なくとも1つの領域を検出することを含む。加えて、特徴密度閾値を満たしていない、カメラの視野内の少なくとも1つの領域を検出することに応えて、シーンの追加画像セットを取得する。
更なる実施形態では、追加画像セットを使用して決定した残差ベクトルを使用することは、追加画像セットを使用して決定した残差ベクトルを使用して、密度閾値を満たさなかったカメラの視野内の少なくとも1つの地域に関する、更新した幾何学的較正データを決定することを更に含む。
更に別の実施形態はまた、画像処理アプリケーションの指示を受けるプロセッサを使用して、ユーザーインターフェースを介してプロンプトを提供することを含み、これらのプロンプトはカメラアレイの方向を指示して、追加画像セットの取得中に、基準画像及び別視点の画像で対応と識別した特徴の位置を特徴密度閾値を満たしていないカメラの視野内の少なくとも1つの領域内に移動させる。
再び更なる実施形態は、複数台のカメラを使用してシーンの画像セットを取得することであって、この画像セットは、基準画像と、別視点の画像と、を含む、ことと、画像処理アプリケーションの指示を受けるプロセッサを使用して、画像セットで特徴を検出することと、画像処理アプリケーションの指示を受けるプロセッサを使用して、基準画像内で検出した特徴に対応する特徴を別視点の画像内で識別することと、画像処理アプリケーションの指示を受けるプロセッサを使用して、幾何学的較正データセットに基づいて画像セットを修正することと、画像処理アプリケーションの指示を受けるプロセッサを使用して、基準画像及び別視点の画像で対応として識別した特徴の位置で観測したずれに基づいて、幾何学的較正データの有効性を決定することと、を含む。
再び更に別の実施形態では、基準画像及び別視点の画像で対応として識別した特徴の位置で観測したずれに基づいて、幾何学的較正データの有効性を決定することは、エピポーラ線から離れた位置までの観測したずれの程度を決定することを含む。
再び更なる実施形態はまた、画像処理アプリケーションの指示を受けるプロセッサを使用して、基準画像及び別視点の画像で対応として識別した特徴の位置で観測したずれに基づいて、別視点の画像内で特徴を観測した位置における幾何学的較正データの残差ベクトルを決定すること、並びに画像処理アプリケーションの指示を受けるプロセッサを使用して、残差ベクトルに基づいて、別視点の画像を撮ったカメラの更新した幾何学的較正データを決定することによって更新した幾何学的較正データを動的に生成することを含む。
更に別の実施形態では、別視点の画像内で特徴を観測した位置における幾何学的較正データの残差ベクトルを決定することは、画像処理アプリケーションの指示を受けるプロセッサを使用して、エピポーラ線に沿って基準画像及び別視点の画像で対応として識別した特徴の位置で観測したずれに基づいて、基準画像内で検出した特徴への対応として識別した、別視点の画像内の特徴の奥行を予測することと、基準画像及び別視点の画像で一致として識別した特徴の位置で観測したずれに適用する、シーンに依存する幾何補正を決定することと、シーンに依存する幾何学補正を基準画像及び別視点の画像で対応として識別した特徴の位置で観測したずれに適用して、別視点の画像内で観測した位置における幾何学的較正データの残差ベクトルを取得することと、を含む。
更に別の実施形態では、残差ベクトルに基づいて、別視点の画像を撮ったカメラの更新した幾何学的較正データを決定することは、少なくとも内挿処理を使用して、残差ベクトルから残差ベクトル較正場を生成することを含む。
更に別の実施形態では、別視点の画像を撮ったカメラの更新した幾何学的較正データを決定することは、別視点の画像内で特徴を観測した位置における幾何学的較正データの少なくとも残差ベクトルに基づいて、複数の幾何学的較正データセットから更新した幾何学的較正データセットを選択することを含む。
更に別の実施形態はまた、複数台のカメラを使用してシーンの追加画像セットを取得することと、この追加画像セットを使用して残差ベクトルを決定することと、を含む。加えて、残差ベクトルに基づいて、別視点の画像を撮ったカメラの更新した幾何学的較正データを決定することはまた、追加画像セットを使用して決定した残差ベクトルを使用することを含む。
別の更なる実施形態は、複数台のカメラを含む、少なくとも1つのカメラアレイと、プロセッサと、画像処理アプリケーションを含むメモリと、を備える。加えて、この画像処理アプリケーションは、複数台のカメラを使用してシーンの画像セットを取得すること(この画像セットは、基準画像と、別視点の画像と、を含む)、画像セットで特徴を検出すること、基準画像内で検出し特徴に対応する特徴を別視点の画像内で識別すること、幾何学的較正データセットに基づいて画像セットを修正すること、基準画像及び別視点の画像で対応として識別した特徴の位置で観測したずれに基づいて、別視点の画像内で特徴を観測した位置における幾何学的較正データの残差ベクトルを決定すること、残差ベクトルに基づいて、別視点の画像を撮ったカメラの更新した幾何学的較正データを決定すること、並びに更新した幾何学的較正データに基づいて、別視点の画像を撮ったカメラが撮った画像を修正すること、をプロセッサに指示する。
ここで図を参照すると、本発明の実施形態による、カメラアレイを動的に較正するためのシステム及び方法が図示されている。マルチカメラシステムは、様々な用途でますます人気が高まっており、これらの正確な機能は、カメラで撮った画像を互いに正確に合わせる能力に依存する。様々な画像を互いに合わせることの複雑性は、画像を修正することによって著しく低減する。これは、通常、オフラインの較正処理に依存しており、構造(例えば、レンズ特性及び/又はカメラアセンブリの製造ばらつき)、相対位置、及び方向(アレイの幾何学的形状と呼ばれることが多い)の結果としてアレイ内のカメラによって持ち込まれる、対応ピクセルのシーンに依存しないずれに関する情報を取得する。実際には、アレイ内のカメラが搭載される機械構造は、温度変化、及び/又は機械的衝撃などの現場条件など(ただし、これらに限定されない)様々な要因に対して異なる反応を示す。カメラアレイ内のカメラの相対位置の変化が説明されなければ、この変化は、カメラが撮った画像の位置合わせに影響を及ぼして、奥行予測及び/又はカメラアレイ内のカメラが収集した画像データから生成した画像(例えば、超解像によって生成した画像及び/又はフィルタ若しくは効果に基づいて奥行を適用することによって生成した画像)の低下をもたらす。本発明の様々な実施形態によるシステム及び方法は、カメラアレイの幾何学的較正を評価し、任意の撮像シーンにおける堅牢な特徴照合によって幾何学的較正を適応的に調整できる。幾何学的較正が以前の較正値から段階的に劣化すると仮定すると、本発明の多くの実施形態によるカメラアレイ内のカメラの劣化を利用して、新しい較正パラメータ及び/又はカメラ間の新しい幾何学的関係を説明する既存の較正パラメータに対する調整を決定できる。
多数の実施形態では、特徴照合を使用して、既存の較正データがもはや有効ではないカメラアレイを識別する。実世界でのシーンの特徴は、アレイ内のカメラが撮った各画像セットで識別できる。カメラの幾何学的較正によって画像が正確に修正されると、対応する特徴は、カメラアレイからの特徴の距離に基づいて決定された位置において、エピポーラ線上に位置する(修正画像を仮定した場合)。アレイ内のカメラ間の幾何学的関係が変化し、較正データがもはや有効ではないとき、対応する特徴は、特定の奥行と一致する、エピポーラ線のずれに基づいて予測される、画像内の位置にはない。したがって、幾何学的較正データを使用して修正した画像セット内の対応する特徴の実際の位置と、予期された絶対的な、又は互いに対して相対的な位置との差異を使用して、幾何学的較正データがもはや有効ではないときを識別することができる。更に、この差異を使用して、新しい幾何学的較正データを動的に生成し、及び/又はカメラアレイが使用できる幾何学的較正データを更新し、奥行予測及び/又は超解像処理など(ただし、これらに限定されない)以降の画像処理を実行できる。
本発明の多くの実施形態によるシステム及び方法は、カメラアレイの幾何学的形状の変化がカメラアレイ内のカメラの内因性パラメータ(すなわち、像点のピクセル座標をカメラの基準座標系の対応する座標に関連付けるパラメータ)に影響する場合、画像セット内の対応する特徴を使用して、動的較正を実行できる。カメラの内因性パラメータは、通常、カメラの焦点距離、ピクセルスキュー、レンズ歪みパラメータ、及び主点である。いくつかの実施形態では、動的較正はまた、基準カメラに対して定義した基線に沿ったカメラの移動を含む、カメラアレイの外因性パラメータにおける変換に対処できる。カメラの外因性パラメータは、既知の世界基準フレームに対してカメラ基準フレームの位置及び方向を定義するパラメータである。カメラアレイの場合、外因性パラメータは、基準カメラに対して定義されることが多い。これらの基線及び/又はカメラ方向の変化に制約されない移動では、更に較正処理を実行して、更新した幾何学的較正データを取得することが必要な場合がある。
更新した幾何学的較正データを動的に生成する処理は、動的較正処理中に基準カメラとして使用したカメラの視野全体にわたって識別した特徴を使用する。動的較正処理で直面し得る課題は、多くの実世界でのシーンには特徴を持たない領域(例えば、白壁)が含まれることである。いくつかの実施形態では、カメラアレイ内の多数の異なるカメラを基準カメラとして使用する動的較正処理を繰り返すことによって、幾何学的較正データを更に改善することができる。このようにして、カメラの視野の異なる部分からの特徴を使用して、対応を評価できる。様々な実施形態では、様々な時点で収集した多数の画像セットを使用して、完全な幾何学的較正データセットを構築できる。多数のセットを使用することによって、基準カメラの視野内の領域の幾何学的較正データは、最大数の特徴及び/又は閾値を超える特徴の密度が特定領域内に存在する画像セットに基づいて選択できる。次いで、多数の画像セットから生成した幾何学的較正データを統合して、カメラの視野全体を対象とする幾何学的較正データセットを生成できる。多数の実施形態では、動的較正処理は誘導される。カメラアレイによって生成されるユーザーインターフェースは、カメラアレイを移動して、第1の画像の第1領域で検出した特徴が第2画像の第2領域に表示されるようにカメラアレイの方向を変更するようにユーザーに指示できる。このようにして、カメラアレイは、基準カメラの視野全体に対して経時的に、完全な動的較正データセットを迅速に構築できる。
特定の実施形態では、異なる幾何学的較正データセットを使用して対応を決定し、観測した対応する特徴に最適な幾何学的較正データセットを使用して、画像処理を実行する。このようにして、例えば、異なる動作条件に対応する様々な幾何学的較正データセットがカメラアレイに提供され得、観測したシーン特徴に最適な幾何学的較正データを使用して、画像処理を実行できる。
本発明の様々な実施形態による、幾何学的較正データを検証し、カメラアレイを動的に構成するためのシステム及び方法については、以下で詳述する。
アレイカメラ
アレイカメラ
異なる視点からの画像データ(すなわち、明視野画像)の収集に使用できるカメラモジュールを含むアレイカメラは、異なる解像度、視野、及び/又は色フィルタなど(ただし、これらに限定されない)異なる撮像特性を有する一次元カメラ、二次元(2D)カメラ、モノリシックカメラ、非モノリシックカメラ、グリッド配置で配列されたカメラ、非グリッド配置で配列されたカメラ、及び/又は結合カメラであり得る。様々なアレイカメラアーキテクチャは、米国特許第9,077,893号(名称「Capturing and Processing of Images using Non−Grid Camera Arrays」、Venkataramanら)、米国特許出願公開第2015/0122411号(名称「Methods of Manufacturing Array Camera Modules Incorporating Independently Aligned Lens Stacks」、Roddaら)、同第2015/0161798号、(名称「Array Cameras Including an Array Camera Module Augmented with a Separate Camera」、Venkataramanら)、米国特許仮出願第62/149,636号(名称「Multi−Baseline Camera Array System Architecture for Depth Augmentation in VR−AR Applications」、Venkatarmanら)に開示されている。撮像した明視野内の各二次元(2D)画像は、アレイカメラ内のカメラのうちの1台の視点からのものである。各カメラの視点が異なるために、視差によって、シーンの画像内の対象物の位置が変化する。様々なカメラアレイアーキテクチャの導入及び使用に関する米国特許第9,077,893号、米国特許出願公開第2015/0122411号及び同第2015/0161798号、並びに米国特許仮出願第62/149,636号の開示は、参照することによりその全体が本明細書に組み込まれるものとする。
多数の実施形態では、カメラアレイを使用してシーンの画像セットを収集し、収集した画像セットを使用して視差探索を実行することにより、奥行を予測する。エピポーラ線に沿った領域が自己相似である場合、奥行予測は、信頼性を欠き得る。探索対象となる、異なるエピポーラ線(すなわち、カメラペア間の異なる基線)の数が増加するたびに、不正確な奥行に対応する、エピポーラ線に沿った各対応位置においてテクスチャが自己相似である傾向が減少する。多数の実施形態では、投影テクスチャをも使用して、シーンの異なる領域の自己相似を低減させる。
アレイカメラは、明視野内の画像のピクセル間の視差を使用して、基準視点から奥行マップを生成できる。奥行マップは、基準視点からシーン対象物の表面までの距離を示し、これを使用して、シーンに依存する幾何補正を決定し、撮像した明視野内の各画像からのピクセルに適用して、融合処理及び/又は超解像処理の実行時に視差を排除できる。米国特許第8,619,082号(名称「Systems and Methods for Parallax Detection and Correction in Images Captured Using Array Cameras that Contain Occlusions using Subsets of Images to Perform Depth Estimation」、Ciureaら)に記載の処理などの処理を使用して、観測した視差に基づいた奥行マップを生成できる。米国特許第8,619,082号の開示は、参照することによりその全体が本明細書に組み込まれるものとする。
上記のように、幾何学的較正データを使用して、修正済み画像セットの対応するピクセルがエピポーラ線上に位置するように画像セットを修正できる。幾何学的較正データは、アレイ内のカメラが特定の幾何学的構成であると仮定する。温度要因及び/又は環境要因がアレイ内のカメラの特性を変化させたり、互いに対する位置をずらしたりする場合、幾何学的較正データの基礎となる仮定はもはや有効ではない。したがって、カメラアレイには再較正が必要である。そうしなければ、米国特許第8,619,082号に記載の処理に類似の処理を使用して生成した奥行予測が大幅に劣化する恐れがある。
多くの場合では、米国特許第8,878,950号(名称「Systems and Methods for Synthesizing High Resolution Images Using Super−Resolution Processes」、Lelescuら)に記載の処理など融合及び超解像処理を使用して、カメラアレイで撮像した明視野のより低解像度の画像からより高解像度の2D画像又はより高解像度のステレオペアの2D画像を合成できる。高解像度、より高解像度、低解像度、より低解像度という用語は、本明細書において相対的に使用されるものであり、アレイカメラで撮った画像の特定の解像度を示すものではない。米国特許第8,878,950号を見直すと容易に認められるように、アレイカメラで収集した画像データを融合し、超解像処理を実行することは、とりわけ正確な幾何学的較正データに依存する。これは、超解像処理が、異なる視点から収集したピクセルをサブピクセル精度で揃えようとするためである。したがって、超解像処理は、幾何学的較正データがもはや有効ではないことを検出し、カメラアレイの動的較正を実行することによって著しく強化され得る。超解像処理及び超解像処理を実行するための幾何学的較正データの使用に関する米国特許第8,878,950号の開示は、参照することによりその全体が本明細書に組み込まれるものとする。
図1に、本発明の様々な実施形態による、拡張現実感用ヘッドセット及びマシンビジョンシステムなど(ただし、これらに限定されない)各種用途で使用できるアレイカメラを示す。アレイカメラ100は、個々のカメラ104のアレイを有するアレイカメラモジュール102を含む。アレイカメラモジュール102という用語は、個々のカメラのアレイを支持する機械的構造及びその機械的構造に搭載されたカメラの総称である。個々のカメラのアレイは、アレイの左側の垂直に揃ったカメラペア、アレイの中心の互い違いのペア、及びアレイの右側のグリッド状の4台のカメラを組み込む、図示の実施形態で使用される配置など(ただし、これらに限定されない)特定の配置に含まれる複数のカメラである。他の実施形態では、任意の各種のグリッド配置又は非グリッド配置のカメラが使用され得る。多数の実施形態では、アレイカメラモジュールはまた、シーン上にテクスチャを投影して、テクスチャを欠いているか、自己相似であるシーンの領域における奥行予測を支援するために使用できるプロジェクタ105を含む。アレイカメラモジュール102はプロセッサ106に接続される。プロセッサはまた、画像処理パイプラインアプリケーション110、アレイカメラモジュール102で収集した画像データ112、収集した画像データから画像処理パイプラインアプリケーションで生成した奥行マップ114、及び/又は超解像処理を使用して生成した、より高解像度の画像116を記憶するために使用できる、1種類又は2種類以上の異なるメモリ108と通信するように構成される。画像処理パイプラインアプリケーション110は、通常、下記の様々な処理など(ただし、これらに限定されない)処理の実行をプロセッサに指示するために使用される、非一時的なのマシン読出し可能命令である。いくつかの実施形態では、この処理は、アレイカメラモジュール102内のカメラ群による画像データの収集及び収集した画像データ112からの奥行情報114の予測を調整することを含む。多数の実施形態では、画像処理パイプラインアプリケーション110は、融合処理及び/又は(and/o)超解像処理を使用して、収集した画像データ112からより高解像度の画像116を合成するように、プロセッサ108に指示する。以下で詳述するように、これらの処理で生成した奥行予測及び/又は画像の質は、画像の修正に使用した幾何学的較正データ120の信頼度に依存する。多数の実施形態では、画像処理パイプラインアプリケーション110は、アレイカメラモジュール102内のカメラ104で収集した画像データを使用して動的較正処理を実行するようにプロセッサ108に指示する。
特にアレイカメラモジュール102内のカメラ104に関しては、アレイカメラモジュール102内の各カメラ104は、シーンの画像を撮ることができる。カメラ104の焦点面で使用されるセンサー素子は、従来のCIS(CMOS画像センサー)ピクセル、CCD(電荷結合素子)ピクセル、高ダイナミックレンジセンサー素子、マルチスペクトルセンサー素子、及び/又は構造体上での光入射を示す電気信号を生成するように構成されている任意の他の構造体などであるが、これらに限定されない、個々の光感知素子であり得る。多数の実施形態では、各焦点面の各センサー素子は類似の物理的特性を有し、同一の光チャネル及び色フィルタ(存在する場合)を介して受光する。いくつかの実施形態では、センサー素子は異なる特性を有し、多くの場合、センサー素子の特性は、各センサー素子に適用される色フィルタに関連する。
様々な実施形態では、個々のカメラの色フィルタを使用して、米国特許出願公開第2013/0293760号(名称「Camera Modules Patterned with pi Filter Groups」、Nisenzonら)に更に記載されるように、πフィルタ群でカメラモジュールにパターンを形成できる。アレイカメラの導入時に使用され得るフィルタパターンに関連するこの開示は、参照することによりその全体が本明細書に組み込まれるものとする。各色チャネル内のカメラが、カメラの中心部の両側に配置される場合、任意の各種色フィルタ較正を使用できる。カメラを使用して、異なる色又はスペクトラムの特定部分に関してデータを収集することができる。多数の実施形態では、カメラは、近IR、IR、及び/又は遠IRスペクトル帯で撮像する。
多数の実施形態では、各カメラの光チャネル内のレンズスタックは、各カメラのピクセルがシーン内の同一対象物の空間又は領域をサンプリングするように集光する視野を有する。いくつかの実施形態では、同一対象物の空間をサンプリングするピクセルは、サブピクセルオフセットを有しつつも同様に行って、超解像処理により増加した解像度を回復させるために使用できる、サンプリングの多様性を提供するように、レンズスタックが構成される。サンプリングの多様性という用語は、異なる視点からの画像は、シーン内の同一対象物をサンプリングするが、若干の副ピクセルオフセットを有するという事実を指す。サブピクセル精度で画像を処理することにより、追加情報が符号化される。これは、単一画像で対象物の空間を単純にサンプリングするのと比較してサブピクセルオフセットは回復し得るためである。より高解像度の情報を回復させる実施形態では、レンズスタックは、コントラストが、より高解像度に対応する空間周波数において解像され得、焦点面を形成するピクセルの空間分解能においては解像され得ないようにする、変調伝達関数(MTF)を有するように設計される。
特に図1に示すプロセッサ108に関しては、本発明の多数の実施形態によるカメラアレイで使用されるプロセッサは、適切なソフトウェアを使用して、アレイカメラモジュール102内のカメラで収集した画像データを取得し、動的較正処理及び/又は画像処理を実行するように指示を受ける、マイクロプロセッサ、コプロセッサ、特定用途向け集積回路、及び/又は適切に構成されたフィールドプログラマブルゲートアレイを使用して導入される。本発明の多数の実施形態では、奥行の予測及び/又は画像セットからのシーンのより高解像度の画像の合成の処理は、基準視点、典型的には、基準カメラの基準視点を選択することを含む。多数の実施形態では、プロセッサ108は、仮想視点からの画像を合成できる。
図1を参照して特定のアレイカメラアーキテクチャを上述したが、本発明の実施形態よる別のアーキテクチャも使用できる。アレイ内のカメラで収集した画像データを使用したアレイの動的較正の実行については、以下で詳述する。
動的較正
動的較正
カメラアレイの幾何学的形状を把握することによって、アレイで撮った画像を修正できる。修正処理中に使用する変換は、通常、幾何学的較正データとして参照され得るデータをもたらすオフライン較正処理中に決定する。適切なオフライン較正処理としては、米国特許第9,124,864号(名称「Systems and Methods for Calibration of an Array Camera」、Mullis)に記載の処理に類似のオフライン較正処理が挙げられる。幾何学的較正データは、奥行予測処理、融合処理、及び/又は超解像処理で使用する。一般に、カメラアレイで撮った画像に関して視差探索を実行することで生成した奥行予測の精度は、アレイ内のカメラの相対位置及び方向がオフライン較正処理実行時のカメラの幾何学的形状に対応しないと低下する。カメラアレイの幾何学的形状は、熱膨張/収縮、及び/又は環境要因によって変化することがある。家庭用電子機器のユーザーは、カメラアレイが搭載されている機械的構造を変形させ得るような方法で機器を日常的に落下させる。したがって、本発明の多数の実施形態によるカメラアレイは、使用可能な幾何学的較正データが、カメラアレイの現在の幾何学的形状に適しているかどうかを検証する処理を実行できる。カメラアレイが「較正外」であることを検出すると、別のオフライン較正処理が実行されて、適切な幾何学的較正データを取得できる。いくつかの実施形態では、カメラアレイは、新しい幾何学的較正データをもたらすか、既存の幾何学的較正データを更新する動的較正処理を実行して、以降の画像処理操作を可能にし、特定用途の要件を満たす出力を提供できる。
図2に、本発明の一実施形態による、幾何学的較正データを検証し、幾何学的較正データを動的に生成する処理を図示する。処理200は、カメラアレイを使用して画像セットを取得する(202)ことを含む。各画像に関する特徴検出処理を実行して(204)、画像セット内の対応点の識別に使用できる、シーン内の顕著な特徴を識別する。Scale−Invariant Feature Transform(SIFT)検出装置、Speeded Up Robust Features(SURF)検出装置、及び/又は画像セット内の画像間で対応する特徴を識別するために適した特徴記述子を生成する任意の他の特徴検出装置など(ただし、これらに限定されない)任意の様々な種類の特徴検出装置を使用できる。以降の説明の大部分は、画像間の対応を識別する特徴検出の使用に依存するが、領域ベース及び/又は相関関係ベースの対応分析を実行して、本発明の多数の実施形態による画像ペア及び/又は画像セット内で対応するピクセル位置を識別することができる。したがって、特徴検出は、本明細書に記載の任意のシステム及び/又は方法において領域ベースの照合と交換可能に使用できる。
次いで、幾何学的較正データを使用して、収集した画像セットを修正できる。幾何学的較正データがカメラアレイの幾何学的形状で有効の場合、基準画像で視認できる特徴は、基準カメラからの特徴の距離によって決定された、エピポーラ線に沿った距離だけずれて出現する。幾何学的較正データがカメラアレイの幾何学的形状でもはや有効ではない場合、対応する特徴は、エピポーラ線上ではない位置にずれて出現する傾向にある。図3A及び3Bにこの差異を示す。画像300は基準カメラで視認できる特徴302を含み、この特徴は、エピポーラ線306に沿ってある距離だけずれて出現する(304)。上記のように、ずれの程度は、基準カメラからの特徴の距離を示す。画像300内で、特徴302がエピポーラ線上、又はその付近に示されるという事実は、画像を撮ったカメラ及び基準カメラの幾何学的形状が、幾何学的較正データ取得時のカメラの相対方向及び配列に対応することを示唆する。幾何学的較正データの信頼性は、基準カメラからの特徴の奥行を確認する他の画像ペアにおけるエピポーラ線のずれを観察することによって確認できる。カメラアレイで撮った他の画像で基準カメラからの特徴の距離を確認できない場合、幾何学的較正データは信頼性を欠くと決定する。較正中の幾何学的形状をもはや有さない、アレイ内のカメラで撮った画像を図3Bに示す。画像310は特徴302を示し、これは、基準視点から撮った画像の位置に対してずれている(306)。観測したずれは、エピポーラ線306に沿った方向ではない。このずれは、エピポーラ線に沿ったベクトル成分(donEPL)及びエピポーラ線と垂直、つまりエピポーラ線の方向に向かうベクトル成分(dtoEPL)に分解できる。容易に理解し得るように、幾何学的較正データが有効である場合、較正を行わないと、観測した大きさ(304)とは異なる大きさdonEPLが生じる傾向にある。
再び図2を参照すると、修正済み画像での対応する特徴の識別を使用して、幾何学的較正データの有効性を決定できる(208)。1つ又は2つ以上の特徴のdtoEPLの大きさがゼロではない場合、幾何学的較正データはもはや有効ではないと決定できる。任意の各種の基準を使用して、対応する特徴点のずれのdtoEPL成分の大きさの正規化した合計が閾値を超えるなど(ただし、これらに限定されない)を決定できる。容易に理解し得るように、幾何学的較正データがもはや有効でないと決定するために使用する特定の基準又は基準セットは、特定用途の要件に基づいて決定され得る。
修正済み画像セット内の対応する特徴点が、幾何学的較正データはもはや有効ではないことを示唆するとき、アラートをユーザーに提示して、カメラアレイの再較正を提案できる。多数の実施形態では、カメラアレイは、識別した特徴点を使用して動的較正処理を実行できる(210)。動的較正処理は、新しい幾何学的較正データセット、オフライン幾何学的較正処理を経て生成した幾何学的較正データの更新セット、及び/又は幾何学的較正データセットのデータベースから選択した別の幾何学的較正データセットを提供できる。いくつかの実施形態ではカメラアレイ内のカメラの異なる動作温度及び/又は異なる予想摂動に対して適切な幾何学的較正データセットを含む、幾何学的較正データセットのデータベースを使用できる。容易に理解し得るように、データベースは、ローカルに配置され得る、及び/又はネットワーク接続を介してリモートに配置され、クエリーされ得る。本発明の様々な実施形態による動的較正を実行するための特定処理については、以下で詳述する。有効な幾何学的較正データセットを識別すると、カメラアレイは、画像の追加セットの取得、及び/又は幾何学的較正データした画像処理の実行を続行できる(212)。
図2を参照して特定カメラアレイの幾何学的形状の幾何学的較正データセットの有効性を決定する、及び/又は動的較正を実行する特定処理を上述したが、修正済み画像セットの対応する特徴の位置を使用して、画像処理で使用する幾何学的較正データセットを動的に決定する任意の各種処理は、本発明の様々な実施形態による特定用途の要件に適するように使用できる。本発明の多数の実施形態による、新しい、及び/又は更新した幾何学的較正データを動的に生成するための特定処理については、以下で詳述する。
幾何学的較正データの動的生成
幾何学的較正データの動的生成
幾何学的較正データを生成するためのオフライン処理は、既知の特性を有するシーンの画像を取得する能力に依存する。幾何学的較正データを動的に生成するための処理は、通常、シーンの特性の先験的知識を全く有さない。特徴検出装置は、画像処理アプリケーションが、アレイ内のカメラで撮ったシーン内の一致する特徴を決定できるようにする。これらの特徴は、まばらに分布する傾向にある。したがって、特徴は、各ピクセル位置における幾何学的較正情報の生成を直接的に可能にするわけではない。しかしながら、特定のピクセル位置における幾何学的較正情報の内挿及び/又は外挿較正を使用して、新しい幾何学的較正データセット、及び/又は既存の幾何学的較正データセットの更新セットを生成できる。多数の実施形態では、特徴のピクセル位置で決定した幾何学的較正データを照合して、幾何学的較正データセットを含むデータベースからの観測した対応に最適な幾何学的較正セットを識別する。
図4に、本発明の一実施形態による、シーン内で観測した特徴セットに基づいて幾何学的較正データセットを取得する動的較正を実行する処理を示す。処理400は、(任意選択的に)異なる色チャネルで撮った画像間での対応を増加させるために画像を前処理する(402)ことを含む。いくつかの実施形態では、前処理は、相関変換を使用して、小型画像パッチを揃えることを含む。いくつかの実施形態では、相関変換は、Drulea,M.;Nedevschi,S.,「Motion Estimation Using the Correlation Transform」,in Image Processing,IEEE Transactions on,vol.22,no.8,pp.3260・3270,Aug.2013に記載の変換と同様に使用され得、関連開示は、参照することによりその全体が本明細書に含まれるものとする。カメラアレイ内の全カメラが同一画像のスペクトル帯で画像データを収集する場合、事前処理は不要なことがある。
特徴検出装置を使用して、画像セット内の特徴、及び/又は対象点を検出できる(404)。上記のように、SIFT及び/又はSURF検出装置など任意の各種特徴検出装置を使用して、特定用途の要件に適した特徴を検出できる。次いで、基準画像と、カメラアレイで撮った画像セット内の他の画像で視認できる特徴点との間で対応照合を実行する(406)。多数の実施形態では、Lucas−Kanade法など(ただし、これらに限定されない)スパースオプティカルフロー法を使用して、特徴の対応を決定できる。スパースオプティカルフロー処理は、検討中のピクセルの局所的近傍内では画像ペア間のオプティカルフローは本質的に一定であると仮定し、最小二乗基準など(ただし、これらに限定されない)の基準によって、その近傍にある全ピクセルの基本的なオプティカルフロー方程式を解く。対応問題は、コンピュータビジョン分野で周知の問題であり、ランダムサンプルコンセンサス(RANSAC)処理など(ただし、これらに限定されない)任意の各種の別の対応照合処理を使用して、特定用途の要件に応じて適切に画像ペア、及び/又は画像セット内の一致する特徴を識別できる。
次いで、最良の使用可能な幾何学的較正データを使用して、対応する特徴の位置に幾何学的ずれを適用する(408)。理論的には、これらのずれによって画像が修正されるべきである。上記のように、カメラアレイの幾何学的形状が幾何学的較正データで仮定したものとは異なる場合、幾何学的ずれによる画像の修正は失敗する。画像修正における幾何学的較正データの有効性は、基準画像と別視点の画像(すなわち、異なる視点/カメラから、基準画像を撮った視点/カメラまでで撮った画像)との間で対応する各特徴のベクトル差(donEPL、dtoEPL)を計算する(410)ことによって決定できる。上記のように、カメラアレイの幾何学的形状が、幾何学的較正データで仮定した幾何学的形状に対応する場合、ベクトルのdtoEPL成分は、ゼロ又はほぼゼロであるべきである。
基準画像及び別視点の画像内の対応するピクセル間で観察したずれは、シーンに依存しないずれと、シーンに依存するずれと、を含む。シーンに依存しないずれは、カメラアレイの幾何学的形状及びカメラの構成に使用された部品の違いに応じる。シーンに依存するずれは、シーン内の対象物の距離に基づいて持ち込まれる。較正データを動的に生成するには、システムの多数の実施形態による処理は、幾何学的較正データ内の残留誤差を決定するために、シーンに依存するずれの修正を試みる。
いくつかの実施形態は、カメラアレイは、シーン全体を無限遠であると仮定できるように、シーン内の全対象物がカメラから十分に遠いシーンの画像セットを撮ることによってカメラアレイを動的に較正するために使用する画像セットを撮るように、ユーザーインターフェースを介してユーザーにプロンプトを提供する。シーンを無限遠であると仮定できる場合、画像内に存在するシーンに依存するずれは、全ピクセル位置においてゼロであるべきである。ずれが存在する限りにおいては、これらは修正によって補正される。
対象物が、未知の奥行でシーン内に位置する場合、画像内に存在するずれは、シーンに依存する幾何学的ずれと、シーンに依存しない幾何学的ずれと、を含む。幾何学的較正データを更新して、シーンに依存しないずれを補正するには、シーンに依存する幾何学的ずれを予測し、除去する。別視点の各画像のエピポーラ線に沿って観測したずれ(donEPL)の加重平均を使用して各特徴に対して別個の奥行予測を決定する(412)。この平均は、基準画像及び別の視点の画像を撮ったカメラ間の仮定基線によって重み付けされる。他の実施形態では、シーンに依存するずれは、観測した特徴の奥行を予測するための任意の各種処理を使用して決定され得る。容易に理解し得るように、画像セット内の画像を撮るために使用したカメラの数及び撮像画像内の特徴の数は、動的較正処理中に、シーンに依存する幾何補正を除去できる精度を著しく増加できる。
シーンに依存する幾何学的ずれを予測する実施形態では、基準画像と別視点の画像との間で対応する各特徴のベクトル差(donEPL、dtoEPL)からシーンに依存する幾何学的ずれを差し引いて、別視点の画像内で視認できる対応する各特徴の残差ベクトル(ronEPL、rtoEPL)を計算する(414)。次いで、残差ベクトルを使用して、幾何学的較正データのベクトル場に対する補正(すなわち、別視点の画像を撮ったカメラの各ピクセル位置に指定された幾何学的較正ベクトルを適用する補正)を計算できる(416)。いくつかの実施形態では、幾何学的較正データのベクトル場に対する補正は、残差ベクトル点を別視点の画像内のピクセル座標に変換することによって決定し、残差ベクトルが指定されないピクセル位置の残差ベクトルは、既知の残差ベクトルの内挿、外挿、及び/又はフィルタリングを使用して決定できる。得られた残差較正ベクトル場を適用して、別のビューカメラの各ピクセル位置における幾何学的較正データを調整し、基準カメラで撮った画像に対して別のビューカメラで撮った画像内で観測した、シーンに依存しない幾何学的ずれを補正することができる。このようにして、処理400は、カメラアレイの現在の幾何学的形状に適する、更新した幾何学的較正データを動的に生成できる。
多数の実施形態では、図4を参照して上述した処理に類似の処理を使用して生成し残差較正ベクトル場にはノイズが多い。多数の実施形態では、基底ベクトルセットは、残差較正ベクトル場のトレーニングデータセットから学習する。残差較正ベクトル場は、カメラアレイの幾何学的形状の様々な変化(上記のように内因性及び外因性の両方)に関連する、可能な観測した残差較正ベクトル場を表す状態空間に広がると考えられ得る。動的較正中に基底ベクトルを使用して、残差較正ベクトル場を基底ベクトルにマップし、残差較正ベクトル場内のランダムノイズの存在を低減するように選択した、より少数の基底ベクトルの線形結合としてノイズを除去した残差較正ベクトル場を生成することによって、残差較正ベクトル場のノイズを除去することができる。いくつかの実施形態では、基底ベクトルは、主成分分析(PCA)を使用して学習する。PCAを使用して、拡張部がより少数の基底ベクトルに切り捨てられるときに再構築誤差を最小化する特性を有する基底を構築することができる。したがって、切り捨ては、ノイズ低減に有効な技法であり得る。残差較正ベクトル場のノイズ除去用に低減された基底を選択するために使用する特定のメカニズムは、大部分を所定用途の要件に依存している。更に、任意の各種処理を使用して、基底ベクトルを選択できる、及び/又は発明の実施形態による残差較正ベクトル場のノイズを除去できる。
図4を参照して更新した幾何学的較正データを生成するための特定処理を上述したが、任意の各種処理を使用して、観測した特徴のずれ及び/又は本発明の実施形態による、特定用途の要件に適したものとしてシーンに依存する幾何学的ずれを説明する相関画像パッチに基づいて更新した較正データを生成できる。加えて、図4を参照して上述した処理に類似の処理を使用して、以前に生成した幾何学的較正データセットがなくても、幾何学的較正データを動的に生成できる。残差ベクトル場を生成するのではなく、図4に示した処理を使用して、撮像画像セットの対応する特徴の、シーンに依存しない、観測したずれの内挿及び/又は外挿に基づいて、完全な幾何学的較正ベクトル場を生成できる。
動的較正データの統合
動的較正データの統合
実世界でのシーンは、通常、アレイ内の多数のカメラで撮った画像全体にわたって追跡するのに十分に強力である、確かな特徴をランダムな位置に含む。加えて、特徴は、基準カメラの視野内の特定領域内に群在することが多く、他の領域は、比較的特徴を有さないことがあり得る。特徴の密度及び分布は、残差較正ベクトル場の生成に使用する内挿処理及び外挿処理によって持ち込まれる誤差に影響し得る。特に、外挿は、奥行予測及び/又は超解像処理に多大なノイズを持ち込み得る。多数の実施形態では、カメラの残差較正ベクトル場の異なる領域は、アレイ内の様々なカメラの基準カメラとしての使用に基づいて決定した残差ベクトル、及び/又は異なるシーンで撮った、多数の画像セットを使用して構築される。特定の実施形態では、異なるシーンの多数の画像セットを取得する処理は、アレイカメラによって誘導される。アレイカメラは、基準カメラの視野内の各領域に関する特徴の閾値密度を取得する画像セットまで、基準カメラの視野内でシーンの領域を識別でき、特徴を多く含むシーンの部分が基準カメラの視野の異なる領域内に出現するようにカメラアレイの方向を設定し直すようにユーザーに指示する。
図5に、本発明の一実施形態による、異なる画像セットを使用して決定した残差ベクトルを合成して、残差較正ベクトル場を取得するための処理を示す。処理500は、画像セットを取得する(502)ことと、上述の技法に類似の技法を使用して画像セット内の特徴を検出する(504)ことと、を含む。次いで、この特徴を使用して、動的較正を実行できる。基準カメラの視野内の特徴密度を使用して、不十分な特徴密度(例えば、徴密度閾値を満たさない)を含む視野内の領域、及び/又は最小特徴密度を超える領域を識別できる。基準カメラの視野全体に多数の特徴が含まれる場合、処理は完了する。それ以外の場合、処理600は、追加画像セットを撮る(502)ことを含む。いくつかの実施形態では、アレイカメラはユーザーインターフェースを含み、シーン内に存在する特徴が、更新した較正データをまだ必要とする視野の部分内を移動するように、カメラアレイの方向を再設定する方法に関する指示をユーザーに提供する。画像セットの取得(502)及び残差ベクトルの決定(506)は、合成ベクトルが各カメラの残差ベクトルの閾値密度を達成するまで続く。この時点で、残差ベクトルを合成し(512)、残差較正ベクトル場の生成に使用できる。
図5を参照して特定処理を上述したが、任意の各種処理を使用して、様々な残差ベクトルの情報源を統合して、本発明の様々な実施形態による特定用途の要件に適したものとして以降の画像処理操作で使用する、残差較正ベクトル場を生成できる。他の実施形態では、各画像セット及び統合した残差較正ベクトル場に関して残差較正ベクトル場を生成できる。上述の処理の多くは、幾何学的較正データの更新で使用できる、幾何学的較正データ及び/又は残差較正ベクトル場の生成において内挿及び外挿を使用するが、これらの上述の技法に類似の技法を使用して生成した残差ベクトル、及び/又は残差較正ベクトル場を使用して、多数の異なる幾何学的較正データセットから適切な幾何学的較正データセットを選択できる。本発明の様々な実施形態による動的較正を使用して、別の幾何学的較正データ間で選択するための処理については、以下で詳述する。
幾何学的較正データセット間での選択
幾何学的較正データセット間での選択
カメラアレイで撮った画像の対応を識別するために使用する特徴が少ないという性質のため、内挿及び外挿を使用して、別のビューカメラの各ピクセル位置における幾何学的較正データを更新するために使用できる残差較正ベクトル場に残差ベクトルを変換することが必要になる。本質的に、内挿処理及び外挿処理は、得られた幾何学的較正データに誤差を持ち込む。残差ベクトルを使用して残差較正ベクトル場を生成する別の方法は、残差ベクトルを使用して、多数の別の幾何学的較正データセットから最適なデータセットを選択することである。いくつかの実施形態では、多数の異なる幾何学的較正データセットをそれぞれ使用して特徴の対応を決定し、最小平均残差ベクトルをもたらす幾何学的較正セットを以降の画像処理に使用する。
図6に、本発明の一実施形態による、多数の幾何学的較正データセットから幾何学的較正データセットを選択する処理を示す。処理600は、カメラアレイを使用して画像セットを取得する(602)ことと、第1幾何学的較正データセットを選択する(604)ことと、を含む。この処理は、上述の動的較正処理に類似の方法で続行する。動的較正を実行して(606)、対応する各特徴点セットの残差ベクトルを取得し、残差ベクトルを使用して、幾何学的較正データに基づいた修正に続いて観測したずれが、予測した、シーンに依存する幾何学的ずれに対応する程度を測定する。平均の残差ベクトルの大きさなど(ただし、これに限定されない)任意の各種メトリクスを使用して、幾何学的較正データが観測したずれに適合する程度を評価できる。幾何学的較正データセットの選択(604)、選択した幾何学的較正データを使用した動的較正の実行(606)、及び幾何学的較正データが対応する特徴点間で観測したずれに適合する程度の測定処理は、各幾何学的較正データセットを検討する(610)まで繰り返す。容易に理解し得るように、所定の温度範囲内の異なる動作温度に適した幾何学的較正データに対応する別セットなど任意の各種の異なる幾何学的較正データセットを検討し得る。検討する特定の幾何学的較正データセットは、通常、特定のカメラアレイ用途の要件に基づいて決定する。幾何学的較正データセットのすべてを検討するとき、以降の画像処理には、対応する特徴点間で観測したずれに最適な幾何学的較正データを使用できる。
図6を参照して特定処理を上述したが、任意の各種処理を使用して、多数の幾何学的較正データセットから、対応する特徴点間で観測したずれに最適な幾何学的較正データセットを選択できる。加えて、図6に示す処理はループを含む。容易に理解し得るように、多数の幾何学的較正データセットを同時に評価する処理を導入できる。多数の実施形態では、カメラアレイは、リモート配置のサーバーシステムに画像セットを提供し、このサーバーシステムは、幾何学的較正データのデータベースに対して画像セットを評価し、カメラアレイへのネットワーク接続を介して更新した幾何学的較正データセットを返す。
上記の説明には、本発明の多くの特定の実施形態が含まれるが、これらは、本発明の範囲を限定するものとしてではなく、その一実施形態の例として解釈されるべきである。したがって、本発明の範囲は、示した実施形態ではなく、添付の特許請求の範囲及びその等価物によって決定されるべきである。
Claims (21)
- カメラアレイの幾何学的較正データを動的に生成する方法であって、
複数台のカメラを使用してシーンの画像セットを取得することであって、前記画像セットが、基準画像と、別視点の画像と、を含む、ことと、
画像処理アプリケーションの指示を受けるプロセッサを使用して、前記画像セットで特徴を検出することと、
画像処理アプリケーションの指示を受けるプロセッサを使用して、前記基準画像内で検出した特徴に対応する特徴を前記別視点の画像内で識別することと、
画像処理アプリケーションの指示を受けるプロセッサを使用して、幾何学的較正データセットに基づいて前記画像セットを修正することと、
画像処理アプリケーションの指示を受けるプロセッサを使用して、前記基準画像及び前記別視点の画像で対応として識別した特徴の位置で観測したずれに基づいて、前記別視点の画像内で特徴を観測した位置において幾何学的較正データの残差ベクトルを決定することと、
画像処理アプリケーションの指示を受けるプロセッサを使用して、前記残差ベクトルに基づいて、前記別視点の画像を撮ったカメラの更新した幾何学的較正データを決定することと、
画像処理アプリケーションの指示を受けるプロセッサを使用して、前記更新した幾何学的較正データに基づいて、前記別視点の画像を撮ったカメラが撮った画像を修正することと、を含む、方法。 - 前記別視点の画像内で特徴を観測した位置において幾何学的較正データの残差ベクトルを決定することが、
エピポーラ線に沿って前記基準画像及び前記別視点の画像で対応として識別した特徴の位置で観測したずれの成分に基づいて、前記基準画像内で検出した特徴への対応として識別した前記別視点の画像内の特徴の奥行を予測することと、
前記対応する特徴の前記予測奥行に基づいて、前記基準画像及び前記別視点の画像内で対応として識別した特徴の位置で観測したずれに適用する、シーンに依存する幾何補正を決定することと、
前記基準画像及び前記別視点の画像内で対応として識別した特徴の位置で観測したずれに前記シーンに依存する幾何補正を適用して、前記別視点の画像内で特徴を観測した位置における幾何学的較正データの残差ベクトルを取得することと、を含む、請求項1に記載の方法。 - 前記残差ベクトルに基づいて、前記別視点の画像を撮ったカメラの更新した幾何学的較正データを決定することが、少なくとも内挿処理を使用して、前記残差ベクトルから残差ベクトル較正場を生成することを含む、請求項1に記載の方法。
- 前記残差ベクトルに基づいて、前記別視点の画像を撮ったカメラの更新した幾何学的較正データを決定することが、前記残差ベクトルから前記残差ベクトル較正場を生成することにおいて外挿処理を使用することを更に含む、請求項3に記載の方法。
- 前記別視点の画像を撮ったカメラに関する前記幾何学的較正データに前記残差ベクトル較正場を適用することを更に含む、請求項3に記載の方法。
- 前記残差ベクトル較正場を基底ベクトルセットにマップすることと、
不完全な前記基底ベクトルセットの線形結合を使用して、ノイズを除去した残差ベクトル較正場を生成することと、を更に含む、請求項3に記載の方法。 - 残差ベクトル較正場のトレーニングデータセットから前記基底ベクトルセットを学習する、請求項6に記載の方法。
- 主成分分析を使用して、残差ベクトル較正場のトレーニングデータセットから前記基底ベクトルセットを学習する、請求項7に記載の方法。
- 前記別視点の画像を撮ったカメラの更新した幾何学的較正データを決定することが、前記別視点の画像内で特徴を観測した位置における幾何学的較正データの少なくとも前記残差ベクトルに基づいて、複数の幾何学的較正データセットから更新した幾何学的較正データセットを選択することを更に含む、請求項1に記載の方法。
- 前記複数台のカメラを使用して、シーンの追加画像セットを取得することと、
前記追加画像セットを使用して、前記幾何学的較正データの残差ベクトルを決定することと、を更に含み、
前記残差ベクトルに基づいて、前記別視点の画像を撮ったカメラの更新した幾何学的較正データを決定することが、前記追加画像セットを使用して決定した前記幾何学的較正データの前記残差ベクトルを使用することも含む、請求項1に記載の方法。 - 特徴密度閾値を満たさない、カメラの視野内の少なくとも1つの領域を検出することを更に含み、
前記特徴密度閾値を満たさないカメラの視野内の、あの少なくとも1つの領域を検出したことに応えてシーンの前記追加画像セットを取得する、請求項10に記載の方法。 - 前記追加画像セットを使用して決定した前記残差ベクトルを使用することが、前記追加画像セットを使用して決定した前記残差ベクトルを使用して、前記密度閾値を満たさなかった前記カメラの前記視野内の前記少なくとも1つの領域に関して更新した幾何学的較正データを決定することを更に含む、請求項11に記載の方法。
- 画像処理アプリケーションの指示を受けるプロセッサを使用して、ユーザーインターフェースを介してプロンプトを提供することを更に含み、前記プロンプトが前記カメラアレイの方向を指示して、前記追加画像セットの取得中に特徴密度閾値を満たさないカメラの前記視野内の前記少なくとも1つの領域へと前記基準画像及び前記別視点の画像で対応と認識した特徴の位置をずらす、請求項12に記載の方法。
- カメラアレイの幾何学的較正データを検証する方法であって、
複数台のカメラを使用してシーンの画像セットを取得することであって、前記画像セットが、基準画像と、別視点の画像と、を含む、ことと、
画像処理アプリケーションの指示を受けるプロセッサを使用して、前記画像セットで特徴を検出することと、
画像処理アプリケーションの指示を受けるプロセッサを使用して、前記基準画像内で検出した特徴に対応する特徴を前記別視点の画像内で識別することと、
画像処理アプリケーションの指示を受けるプロセッサを使用して、幾何学的較正データセットに基づいて前記画像セットを修正することと、
画像処理アプリケーションの指示を受けるプロセッサを使用して、前記基準画像及び前記別視点の画像で対応として識別した特徴の位置で観測したずれに基づいて、前記幾何学的較正データの有効性を決定することと、を含む、方法。 - 前記基準画像及び前記別視点の画像で対応として識別した特徴の位置で観測したずれに基づいて、前記幾何学的較正データの有効性を決定することが、エピポーラ線から離れた位置までの観測したずれの程度を決定することを含む、請求項14に記載の方法。
- 画像処理アプリケーションの指示を受けるプロセッサを使用して、前記基準画像及び前記別視点の画像で対応として識別した特徴の位置で観測したずれに基づいて、前記別視点の画像内で特徴を観測した位置における幾何学的較正データの残差ベクトルを決定すること、並びに
画像処理アプリケーションの指示を受けるプロセッサを使用して、前記残差ベクトルに基づいて前記別視点の画像を撮ったカメラの更新した幾何学的較正データを決定することによって、更新した幾何学的較正データを動的に生成することを更に含む、請求項14に記載の方法。 - 前記別視点の画像内で特徴を観測した位置において幾何学的較正データの残差ベクトルを決定することが、
画像処理アプリケーションの指示を受けるプロセッサを使用して、エピポーラ線に沿って前記基準画像及び前記別視点の画像で対応として識別した特徴の位置で観測したずれの成分に基づいて、前記基準画像内で検出した特徴への対応として識別した前記別視点の画像内の特徴の奥行を予測することと、
前記対応する特徴の前記予測奥行に基づいて、前記基準画像及び前記別視点の画像内で対応として識別した特徴の位置で前記観測したずれに適用する、シーンに依存する幾何補正を決定することと、
前記基準画像及び前記別視点の画像内で対応として識別した特徴の位置で観測したずれに前記シーンに依存する幾何補正を適用して、前記別視点の画像内で観測した特徴の位置における幾何学的較正データの残差ベクトルを取得することと、を含む、請求項16に記載の方法。 - 前記残差ベクトルに基づいて前記別視点の画像を撮ったカメラの更新した幾何学的較正データを決定することが、少なくとも内挿処理を使用して、前記残差ベクトルから残差ベクトル較正場を生成することを含む、請求項16に記載の方法。
- 前記別視点の画像を撮ったカメラの更新した幾何学的較正データを決定することが、前記別視点の画像内で特徴を観測した位置における、幾何学的較正データの少なくとも前記残差ベクトルに基づいて、複数の幾何学的較正データセットから更新した幾何学的較正データセットを選択することを更に含む、請求項16に記載の方法。
- 前記複数台のカメラを使用して、シーンの追加画像セットを取得することと、
前記追加画像セットを使用して残差ベクトルを決定することと、を更に含み、
前記残差ベクトルに基づいて前記別視点の画像を撮ったカメラの更新した幾何学的較正データを決定することが、前記追加画像セットを使用して決定した前記残差ベクトルを使用することも含む、請求項16に記載の方法。 - カメラアレイであって、
複数台のカメラを含む、少なくとも1つのカメラアレイと、
プロセッサと、
画像処理アプリケーションを含むメモリと、を備え、
前記画像処理アプリケーションが、
前記複数台のカメラを使用して、シーンの画像セットを取得することであって、前記画像セットが基準画像と、別視点の画像と、を含むこと、
前記画像セットで特徴を検出すること、
前記基準画像内で検出した特徴に対応する特徴を前記別視点の画像内で識別すること、
幾何学的較正データセットに基づいて前記画像セットを修正すること、
前記基準画像及び前記別視点の画像で対応として識別した特徴の位置で観測したずれに基づいて、前記別視点の画像内で特徴を観測した位置における幾何学的較正データの残差ベクトルを決定すること、
前記残差ベクトルに基づいて前記別視点の画像を撮ったカメラの更新した幾何学的較正データを決定すること、並びに
前記更新した幾何学的較正データに基づいて、前記別視点の画像を撮った前記カメラで撮った画像を修正すること、を前記プロセッサに指示する、カメラアレイ。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201462057196P | 2014-09-29 | 2014-09-29 | |
US62/057,196 | 2014-09-29 | ||
US201562106168P | 2015-01-21 | 2015-01-21 | |
US62/106,168 | 2015-01-21 | ||
PCT/US2015/053013 WO2016054089A1 (en) | 2014-09-29 | 2015-09-29 | Systems and methods for dynamic calibration of array cameras |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2017531976A true JP2017531976A (ja) | 2017-10-26 |
Family
ID=55631383
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017536232A Pending JP2017531976A (ja) | 2014-09-29 | 2015-09-29 | アレイカメラを動的に較正するためのシステム及び方法 |
Country Status (6)
Country | Link |
---|---|
US (4) | US10250871B2 (ja) |
EP (2) | EP3467776A1 (ja) |
JP (1) | JP2017531976A (ja) |
KR (1) | KR20170063827A (ja) |
CN (2) | CN107077743B (ja) |
WO (1) | WO2016054089A1 (ja) |
Cited By (34)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10089740B2 (en) | 2014-03-07 | 2018-10-02 | Fotonation Limited | System and methods for depth regularization and semiautomatic interactive matting using RGB-D images |
US10127682B2 (en) | 2013-03-13 | 2018-11-13 | Fotonation Limited | System and methods for calibration of an array camera |
US10182216B2 (en) | 2013-03-15 | 2019-01-15 | Fotonation Limited | Extended color processing on pelican array cameras |
US10225543B2 (en) | 2013-03-10 | 2019-03-05 | Fotonation Limited | System and methods for calibration of an array camera |
US10250871B2 (en) | 2014-09-29 | 2019-04-02 | Fotonation Limited | Systems and methods for dynamic calibration of array cameras |
US10261219B2 (en) | 2012-06-30 | 2019-04-16 | Fotonation Limited | Systems and methods for manufacturing camera modules using active alignment of lens stack arrays and sensors |
US10306120B2 (en) | 2009-11-20 | 2019-05-28 | Fotonation Limited | Capturing and processing of images captured by camera arrays incorporating cameras with telephoto and conventional lenses to generate depth maps |
US10311649B2 (en) | 2012-02-21 | 2019-06-04 | Fotonation Limited | Systems and method for performing depth based image editing |
US10334241B2 (en) | 2012-06-28 | 2019-06-25 | Fotonation Limited | Systems and methods for detecting defective camera arrays and optic arrays |
US10366472B2 (en) | 2010-12-14 | 2019-07-30 | Fotonation Limited | Systems and methods for synthesizing high resolution images using images captured by an array of independently controllable imagers |
US10380752B2 (en) | 2012-08-21 | 2019-08-13 | Fotonation Limited | Systems and methods for estimating depth and visibility from a reference viewpoint for pixels in a set of images captured from different viewpoints |
US10390005B2 (en) | 2012-09-28 | 2019-08-20 | Fotonation Limited | Generating images from light fields utilizing virtual viewpoints |
US10430682B2 (en) | 2011-09-28 | 2019-10-01 | Fotonation Limited | Systems and methods for decoding image files containing depth maps stored as metadata |
US10455218B2 (en) | 2013-03-15 | 2019-10-22 | Fotonation Limited | Systems and methods for estimating depth using stereo array cameras |
US10462362B2 (en) | 2012-08-23 | 2019-10-29 | Fotonation Limited | Feature based high resolution motion estimation from low resolution images captured using an array source |
US10542208B2 (en) | 2013-03-15 | 2020-01-21 | Fotonation Limited | Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information |
US10540806B2 (en) | 2013-09-27 | 2020-01-21 | Fotonation Limited | Systems and methods for depth-assisted perspective distortion correction |
US10547772B2 (en) | 2013-03-14 | 2020-01-28 | Fotonation Limited | Systems and methods for reducing motion blur in images or video in ultra low light with array cameras |
US10674138B2 (en) | 2013-03-15 | 2020-06-02 | Fotonation Limited | Autofocus system for a conventional camera that uses depth information from an array camera |
US10708492B2 (en) | 2013-11-26 | 2020-07-07 | Fotonation Limited | Array camera configurations incorporating constituent array cameras and constituent cameras |
US10767981B2 (en) | 2013-11-18 | 2020-09-08 | Fotonation Limited | Systems and methods for estimating depth from projected texture using camera arrays |
US11270110B2 (en) | 2019-09-17 | 2022-03-08 | Boston Polarimetrics, Inc. | Systems and methods for surface modeling using polarization cues |
US11290658B1 (en) | 2021-04-15 | 2022-03-29 | Boston Polarimetrics, Inc. | Systems and methods for camera exposure control |
US11302012B2 (en) | 2019-11-30 | 2022-04-12 | Boston Polarimetrics, Inc. | Systems and methods for transparent object segmentation using polarization cues |
US11412158B2 (en) | 2008-05-20 | 2022-08-09 | Fotonation Limited | Capturing and processing of images including occlusions focused on an image sensor by a lens stack array |
US11525906B2 (en) | 2019-10-07 | 2022-12-13 | Intrinsic Innovation Llc | Systems and methods for augmentation of sensor systems and imaging systems with polarization |
US11580667B2 (en) | 2020-01-29 | 2023-02-14 | Intrinsic Innovation Llc | Systems and methods for characterizing object pose detection and measurement systems |
US11689813B2 (en) | 2021-07-01 | 2023-06-27 | Intrinsic Innovation Llc | Systems and methods for high dynamic range imaging using crossed polarizers |
US11792538B2 (en) | 2008-05-20 | 2023-10-17 | Adeia Imaging Llc | Capturing and processing of images including occlusions focused on an image sensor by a lens stack array |
US11797863B2 (en) | 2020-01-30 | 2023-10-24 | Intrinsic Innovation Llc | Systems and methods for synthesizing data for training statistical models on different imaging modalities including polarized images |
US11954886B2 (en) | 2021-04-15 | 2024-04-09 | Intrinsic Innovation Llc | Systems and methods for six-degree of freedom pose estimation of deformable objects |
US11953700B2 (en) | 2020-05-27 | 2024-04-09 | Intrinsic Innovation Llc | Multi-aperture polarization optical systems using beam splitters |
US12020455B2 (en) | 2021-03-10 | 2024-06-25 | Intrinsic Innovation Llc | Systems and methods for high dynamic range image reconstruction |
US12052409B2 (en) | 2023-06-22 | 2024-07-30 | Adela Imaging LLC | Systems and methods for encoding image files containing depth maps stored as metadata |
Families Citing this family (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9100586B2 (en) | 2013-03-14 | 2015-08-04 | Pelican Imaging Corporation | Systems and methods for photometric normalization in array cameras |
WO2016154123A2 (en) * | 2015-03-21 | 2016-09-29 | Mine One Gmbh | Virtual 3d methods, systems and software |
KR101638022B1 (ko) * | 2015-09-21 | 2016-07-12 | 광주과학기술원 | 다수의 렌즈를 이용한 촬상장치 |
JP2017099616A (ja) * | 2015-12-01 | 2017-06-08 | ソニー株式会社 | 手術用制御装置、手術用制御方法、およびプログラム、並びに手術システム |
US9963246B2 (en) * | 2016-03-28 | 2018-05-08 | Amazon Technologies, Inc. | Combining depth and thermal information for object detection and avoidance |
GB2553108B (en) * | 2016-08-22 | 2020-07-15 | Canon Kk | Method, processing device and system for managing copies of media samples in a system comprising a plurality of interconnected network cameras |
JP6930545B2 (ja) * | 2016-11-07 | 2021-09-01 | ソニーグループ株式会社 | 画像処理装置、キャリブレーション用チャート、及びキャリブレーションシステム |
JP6636963B2 (ja) * | 2017-01-13 | 2020-01-29 | 株式会社東芝 | 画像処理装置及び画像処理方法 |
WO2019059632A1 (ko) * | 2017-09-25 | 2019-03-28 | 한국과학기술원 | 프리즘을 이용한 초분광 영상 재구성 방법 및 시스템 |
US10504244B2 (en) * | 2017-09-28 | 2019-12-10 | Baidu Usa Llc | Systems and methods to improve camera intrinsic parameter calibration |
US10380746B2 (en) * | 2017-10-16 | 2019-08-13 | Texas Instruments Incorporated | Sparse optical flow support in an optical flow system |
US10645364B2 (en) * | 2017-11-14 | 2020-05-05 | Intel Corporation | Dynamic calibration of multi-camera systems using multiple multi-view image frames |
US11024046B2 (en) | 2018-02-07 | 2021-06-01 | Fotonation Limited | Systems and methods for depth estimation using generative models |
US11089265B2 (en) | 2018-04-17 | 2021-08-10 | Microsoft Technology Licensing, Llc | Telepresence devices operation methods |
US11182914B2 (en) | 2018-05-21 | 2021-11-23 | Facebook Technologies, Llc | Dynamic structured light for depth sensing systems based on contrast in a local area |
JP7427614B2 (ja) * | 2018-06-29 | 2024-02-05 | ズークス インコーポレイテッド | センサ較正 |
CN109341720A (zh) * | 2018-10-10 | 2019-02-15 | 中国科学院上海技术物理研究所 | 一种基于恒星轨迹的遥感相机几何标定方法 |
EP3644279A1 (en) * | 2018-10-25 | 2020-04-29 | Continental Automotive GmbH | Static camera calibration using motion of vehicle portion |
US11270464B2 (en) | 2019-07-18 | 2022-03-08 | Microsoft Technology Licensing, Llc | Dynamic detection and correction of light field camera array miscalibration |
US11553123B2 (en) * | 2019-07-18 | 2023-01-10 | Microsoft Technology Licensing, Llc | Dynamic detection and correction of light field camera array miscalibration |
US11082659B2 (en) | 2019-07-18 | 2021-08-03 | Microsoft Technology Licensing, Llc | Light field camera modules and light field camera module arrays |
US11064154B2 (en) | 2019-07-18 | 2021-07-13 | Microsoft Technology Licensing, Llc | Device pose detection and pose-related image capture and processing for light field based telepresence communications |
US20210256729A1 (en) * | 2020-02-13 | 2021-08-19 | Proprio, Inc. | Methods and systems for determining calibration quality metrics for a multicamera imaging system |
CN115298515A (zh) * | 2020-03-26 | 2022-11-04 | 形创有限公司 | 用于保持摄影测量***的精度的方法和*** |
US11738464B2 (en) | 2021-03-24 | 2023-08-29 | International Business Machines Corporation | Robotic geometric camera calibration and monitoring alert configuration and testing |
US20220391625A1 (en) * | 2021-06-08 | 2022-12-08 | Kyndryl, Inc. | Contextual policy-based computer vision control |
DE102021119462A1 (de) * | 2021-07-27 | 2023-02-02 | Lavision Gmbh | Verfahren zum Kalibrieren eines optischen Messaufbaus |
Family Cites Families (933)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4124798A (en) | 1965-12-09 | 1978-11-07 | Thompson Kenneth B | Optical viewing apparatus |
US4198646A (en) | 1978-10-13 | 1980-04-15 | Hughes Aircraft Company | Monolithic imager for near-IR |
US4323925A (en) | 1980-07-07 | 1982-04-06 | Avco Everett Research Laboratory, Inc. | Method and apparatus for arraying image sensor modules |
JPS5769476A (en) | 1980-10-16 | 1982-04-28 | Fuji Xerox Co Ltd | Reader control system |
JPS5925483A (ja) | 1982-08-04 | 1984-02-09 | Hitachi Denshi Ltd | 固体撮像装置 |
US4652909A (en) | 1982-09-14 | 1987-03-24 | New York Institute Of Technology | Television camera and recording system for high definition television having imagers of different frame rate |
US4460449A (en) | 1983-01-03 | 1984-07-17 | Amerace Corporation | Apparatus for making a tool |
JPS60228564A (ja) | 1984-04-27 | 1985-11-13 | Tokuyama Soda Co Ltd | 液晶性組成物 |
EP0289885A1 (de) | 1987-05-08 | 1988-11-09 | Siemens Aktiengesellschaft | Blendensystem zur Erzeugung mehrerer Teilchensonden mit veränderbarem Querschnitt |
JPS6437177A (en) | 1987-08-03 | 1989-02-07 | Canon Kk | Image pickup device |
DE58902538D1 (de) | 1988-05-19 | 1992-12-03 | Siemens Ag | Verfahren zur beobachtung einer szene und einrichtung zur durchfuehrung des verfahrens. |
JPH02285772A (ja) | 1989-04-26 | 1990-11-26 | Toshiba Corp | 画像読取装置 |
US5070414A (en) | 1988-09-20 | 1991-12-03 | Kabushiki Kaisha Toshiba | Method and apparatus for reading image information formed on material |
US4962425A (en) | 1988-10-27 | 1990-10-09 | National Research Council Of Canada/Conseil National Deresherches Canada | Photometric device |
US5157499A (en) | 1990-06-29 | 1992-10-20 | Kabushiki Kaisha N A C | High-speed video camera using solid-state image sensor |
US5144448A (en) | 1990-07-31 | 1992-09-01 | Vidar Systems Corporation | Scanning apparatus using multiple CCD arrays and related method |
US5463464A (en) | 1991-10-04 | 1995-10-31 | Kms Fusion, Inc. | Electro-optical system for gauging surface profile deviations using infrared radiation |
US5325449A (en) | 1992-05-15 | 1994-06-28 | David Sarnoff Research Center, Inc. | Method for fusing images and apparatus therefor |
JP3032382B2 (ja) | 1992-07-13 | 2000-04-17 | シャープ株式会社 | デジタル信号のサンプリング周波数変換装置 |
JPH06129851A (ja) | 1992-10-13 | 1994-05-13 | Sumitomo Electric Ind Ltd | ステレオカメラの校正方法 |
EP0687366B1 (en) | 1993-03-03 | 2000-01-26 | STREET, Graham Stewart Brandon | Method and apparatus for image alignment |
US5659424A (en) | 1993-05-25 | 1997-08-19 | Hitachi, Ltd. | Projecting lens and image display device |
JPH0715457A (ja) | 1993-06-18 | 1995-01-17 | Hitachi Ltd | ディジタル通信切替方式 |
US6419638B1 (en) | 1993-07-20 | 2002-07-16 | Sam H. Hay | Optical recognition methods for locating eyes |
US6095989A (en) | 1993-07-20 | 2000-08-01 | Hay; Sam H. | Optical recognition methods for locating eyes |
JP2761837B2 (ja) | 1993-08-19 | 1998-06-04 | 株式会社日鉄エレックス | 立体像表示装置 |
EP0677821A3 (en) | 1994-04-14 | 1996-03-06 | Hewlett Packard Co | Enlargement of a digital image by slaving. |
AU1742895A (en) | 1994-06-09 | 1996-01-04 | Kollmorgen Instrument Corporation | Stereoscopic electro-optical system for automated inspection and/or alignment of imaging devices on a production assembly line |
US20020195548A1 (en) | 2001-06-06 | 2002-12-26 | Dowski Edward Raymond | Wavefront coding interference contrast imaging systems |
US5629524A (en) | 1995-02-21 | 1997-05-13 | Advanced Scientific Concepts, Inc. | High speed crystallography detector |
EP0739039A3 (en) | 1995-04-18 | 1998-03-04 | Interuniversitair Micro-Elektronica Centrum Vzw | Pixel structure, image sensor using such pixel, structure and corresponding peripheric circuitry |
US5963664A (en) | 1995-06-22 | 1999-10-05 | Sarnoff Corporation | Method and system for image combination using a parallax-based technique |
US6005607A (en) | 1995-06-29 | 1999-12-21 | Matsushita Electric Industrial Co., Ltd. | Stereoscopic computer graphics image generating apparatus and stereoscopic TV apparatus |
GB2302978A (en) | 1995-07-04 | 1997-02-05 | Sharp Kk | LIquid crystal device |
AU1074797A (en) | 1995-11-07 | 1997-06-05 | California Institute Of Technology | Capacitively coupled successive approximation ultra low power analog-to-digital converter |
US5757425A (en) | 1995-12-19 | 1998-05-26 | Eastman Kodak Company | Method and apparatus for independently calibrating light source and photosensor arrays |
JP3502713B2 (ja) | 1995-12-21 | 2004-03-02 | 本田技研工業株式会社 | 車両用距離測定装置 |
JPH09181913A (ja) | 1995-12-26 | 1997-07-11 | Olympus Optical Co Ltd | カメラシステム |
US5793900A (en) | 1995-12-29 | 1998-08-11 | Stanford University | Generating categorical depth maps using passive defocus sensing |
US5973844A (en) | 1996-01-26 | 1999-10-26 | Proxemics | Lenslet array systems and methods |
US6124974A (en) | 1996-01-26 | 2000-09-26 | Proxemics | Lenslet array systems and methods |
US6493465B2 (en) | 1996-02-21 | 2002-12-10 | Canon Kabushiki Kaisha | Matching point extracting method and apparatus therefor |
US5832312A (en) | 1996-02-22 | 1998-11-03 | Eastman Kodak Company | Watertight body for accommodating a photographic camera |
MY118360A (en) | 1996-04-30 | 2004-10-30 | Nippon Telegraph & Telephone | Scheme for detecting shot boundaries in compressed video data using inter-frame/inter field prediction coding and intra-frame/intra-field coding |
US6002743A (en) | 1996-07-17 | 1999-12-14 | Telymonde; Timothy D. | Method and apparatus for image acquisition from a plurality of cameras |
GB9616262D0 (en) | 1996-08-02 | 1996-09-11 | Philips Electronics Nv | Post-processing generation of focus/defocus effects for computer graphics images |
US6141048A (en) | 1996-08-19 | 2000-10-31 | Eastman Kodak Company | Compact image capture device |
US6137535A (en) | 1996-11-04 | 2000-10-24 | Eastman Kodak Company | Compact digital camera with segmented fields of view |
US5808350A (en) | 1997-01-03 | 1998-09-15 | Raytheon Company | Integrated IR, visible and NIR sensor and methods of fabricating same |
JPH10232626A (ja) | 1997-02-20 | 1998-09-02 | Canon Inc | 立体画像表示装置 |
JPH10253351A (ja) | 1997-03-14 | 1998-09-25 | Kyocera Corp | 測距装置 |
US5801919A (en) | 1997-04-04 | 1998-09-01 | Gateway 2000, Inc. | Adjustably mounted camera assembly for portable computers |
US6097394A (en) | 1997-04-28 | 2000-08-01 | Board Of Trustees, Leland Stanford, Jr. University | Method and system for light field rendering |
US6515701B2 (en) | 1997-07-24 | 2003-02-04 | Polaroid Corporation | Focal plane exposure control system for CMOS area image sensors |
US6563537B1 (en) | 1997-07-31 | 2003-05-13 | Fuji Photo Film Co., Ltd. | Image signal interpolation |
JP3430935B2 (ja) | 1997-10-20 | 2003-07-28 | 富士ゼロックス株式会社 | 画像読取装置及びレンズ |
JP4243779B2 (ja) | 1997-11-14 | 2009-03-25 | 株式会社ニコン | 拡散板の製造方法および拡散板、並びにマイクロレンズアレイの製造方法およびマイクロレンズアレイ |
NO305728B1 (no) | 1997-11-14 | 1999-07-12 | Reidar E Tangen | Optoelektronisk kamera og fremgangsmÕte ved bildeformatering i samme |
US6069365A (en) | 1997-11-25 | 2000-05-30 | Alan Y. Chow | Optical processor based imaging system |
JPH11242189A (ja) | 1997-12-25 | 1999-09-07 | Olympus Optical Co Ltd | 像形成法、像形成装置 |
US6721008B2 (en) | 1998-01-22 | 2004-04-13 | Eastman Kodak Company | Integrated CMOS active pixel digital camera |
US6833863B1 (en) | 1998-02-06 | 2004-12-21 | Intel Corporation | Method and apparatus for still image capture during video streaming operations of a tethered digital camera |
JPH11223708A (ja) | 1998-02-09 | 1999-08-17 | Nikon Corp | 圧子およびマイクロ光学素子アレイの製造方法 |
US6054703A (en) | 1998-03-20 | 2000-04-25 | Syscan, Inc. | Sensing module for accelerating signal readout from image sensors |
US6160909A (en) | 1998-04-01 | 2000-12-12 | Canon Kabushiki Kaisha | Depth control for stereoscopic images |
KR100307883B1 (ko) | 1998-04-13 | 2001-10-19 | 박호군 | 정합화소수를이용한유사도측정방법및이를구현하기위한장치 |
JP3745117B2 (ja) | 1998-05-08 | 2006-02-15 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
JP3931936B2 (ja) | 1998-05-11 | 2007-06-20 | セイコーエプソン株式会社 | マイクロレンズアレイ基板及びその製造方法並びに表示装置 |
JP3284190B2 (ja) | 1998-05-14 | 2002-05-20 | 富士重工業株式会社 | ステレオカメラの画像補正装置 |
US6205241B1 (en) | 1998-06-01 | 2001-03-20 | Canon Kabushiki Kaisha | Compression of stereoscopic images |
US6137100A (en) | 1998-06-08 | 2000-10-24 | Photobit Corporation | CMOS image sensor with different pixel sizes for different colors |
US6069351A (en) | 1998-07-16 | 2000-05-30 | Intel Corporation | Focal plane processor for scaling information from image sensors |
US6903770B1 (en) | 1998-07-27 | 2005-06-07 | Sanyo Electric Co., Ltd. | Digital camera which produces a single image based on two exposures |
US6340994B1 (en) | 1998-08-12 | 2002-01-22 | Pixonics, Llc | System and method for using temporal gamma and reverse super-resolution to process images for use in digital display systems |
US6269175B1 (en) | 1998-08-28 | 2001-07-31 | Sarnoff Corporation | Method and apparatus for enhancing regions of aligned images using flow estimation |
US6879735B1 (en) | 1998-09-14 | 2005-04-12 | University Of Utah Reasearch Foundation | Method of digital image enhancement and sharpening |
US6310650B1 (en) | 1998-09-23 | 2001-10-30 | Honeywell International Inc. | Method and apparatus for calibrating a tiled display |
GB2343320B (en) | 1998-10-31 | 2003-03-26 | Ibm | Camera system for three dimentional images and video |
JP3596314B2 (ja) | 1998-11-02 | 2004-12-02 | 日産自動車株式会社 | 物体端の位置計測装置および移動体の通行判断装置 |
US6611289B1 (en) | 1999-01-15 | 2003-08-26 | Yanbin Yu | Digital cameras using multiple sensors with multiple lenses |
JP3875423B2 (ja) | 1999-01-19 | 2007-01-31 | 日本放送協会 | 固体撮像素子およびそれ用の映像信号出力装置 |
US6603513B1 (en) | 1999-02-16 | 2003-08-05 | Micron Technology, Inc. | Using a single control line to provide select and reset signals to image sensors in two rows of a digital imaging device |
JP3634677B2 (ja) | 1999-02-19 | 2005-03-30 | キヤノン株式会社 | 画像の補間方法、画像処理方法、画像表示方法、画像処理装置、画像表示装置、及びコンピュータプログラム記憶媒体 |
US6563540B2 (en) | 1999-02-26 | 2003-05-13 | Intel Corporation | Light sensor with increased dynamic range |
US20020063807A1 (en) | 1999-04-19 | 2002-05-30 | Neal Margulis | Method for Performing Image Transforms in a Digital Display System |
US6819358B1 (en) | 1999-04-26 | 2004-11-16 | Microsoft Corporation | Error calibration for digital image sensors and apparatus using the same |
US6292713B1 (en) | 1999-05-20 | 2001-09-18 | Compaq Computer Corporation | Robotic telepresence system |
US6864916B1 (en) | 1999-06-04 | 2005-03-08 | The Trustees Of Columbia University In The City Of New York | Apparatus and method for high dynamic range imaging using spatially varying exposures |
JP2001008235A (ja) | 1999-06-25 | 2001-01-12 | Minolta Co Ltd | 3次元データの再構成のための画像入力方法及び多眼式データ入力装置 |
JP2001042042A (ja) | 1999-07-27 | 2001-02-16 | Canon Inc | 撮像装置 |
US6801653B1 (en) | 1999-08-05 | 2004-10-05 | Sony Corporation | Information processing apparatus and method as well as medium |
US7015954B1 (en) | 1999-08-09 | 2006-03-21 | Fuji Xerox Co., Ltd. | Automatic video system using multiple cameras |
US6647142B1 (en) | 1999-08-19 | 2003-11-11 | Mitsubishi Electric Research Laboratories, Inc. | Badge identification system |
US6771833B1 (en) | 1999-08-20 | 2004-08-03 | Eastman Kodak Company | Method and system for enhancing digital images |
US6628330B1 (en) | 1999-09-01 | 2003-09-30 | Neomagic Corp. | Color interpolator and horizontal/vertical edge enhancer using two line buffer and alternating even/odd filters for digital camera |
US6358862B1 (en) | 1999-09-02 | 2002-03-19 | Micron Technology, Inc | Passivation integrity improvements |
JP3280001B2 (ja) * | 1999-09-16 | 2002-04-30 | 富士重工業株式会社 | ステレオ画像の位置ずれ調整装置 |
US6639596B1 (en) | 1999-09-20 | 2003-10-28 | Microsoft Corporation | Stereo reconstruction from multiperspective panoramas |
US6628845B1 (en) | 1999-10-20 | 2003-09-30 | Nec Laboratories America, Inc. | Method for subpixel registration of images |
US6774941B1 (en) | 1999-10-26 | 2004-08-10 | National Semiconductor Corporation | CCD output processing stage that amplifies signals from colored pixels based on the conversion efficiency of the colored pixels |
US6671399B1 (en) | 1999-10-27 | 2003-12-30 | Canon Kabushiki Kaisha | Fast epipolar line adjustment of stereo pairs |
US6674892B1 (en) | 1999-11-01 | 2004-01-06 | Canon Kabushiki Kaisha | Correcting an epipolar axis for skew and offset |
JP2001195050A (ja) | 1999-11-05 | 2001-07-19 | Mitsubishi Electric Corp | グラフィックアクセラレータ |
WO2001039512A1 (en) | 1999-11-26 | 2001-05-31 | Sanyo Electric Co., Ltd. | Device and method for converting two-dimensional video to three-dimensional video |
JP3950926B2 (ja) | 1999-11-30 | 2007-08-01 | エーユー オプトロニクス コーポレイション | 画像表示方法、ホスト装置、画像表示装置、およびディスプレイ用インターフェイス |
JP3728160B2 (ja) | 1999-12-06 | 2005-12-21 | キヤノン株式会社 | 奥行き画像計測装置及び方法、並びに複合現実感提示システム |
US7068851B1 (en) | 1999-12-10 | 2006-06-27 | Ricoh Co., Ltd. | Multiscale sharpening and smoothing with wavelets |
FI107680B (fi) | 1999-12-22 | 2001-09-14 | Nokia Oyj | Menetelmä videokuvien lähettämiseksi, tiedonsiirtojärjestelmä, lähettävä videopäätelaite ja vastaanottava videopäätelaite |
US6476805B1 (en) | 1999-12-23 | 2002-11-05 | Microsoft Corporation | Techniques for spatial displacement estimation and multi-resolution operations on light fields |
US6502097B1 (en) | 1999-12-23 | 2002-12-31 | Microsoft Corporation | Data structure for efficient access to variable-size data objects |
JP2001194114A (ja) | 2000-01-14 | 2001-07-19 | Sony Corp | 画像処理装置および画像処理方法、並びにプログラム提供媒体 |
AU2001237051A1 (en) | 2000-02-18 | 2001-08-27 | William Beaumont Hospital | Cone-beam computerized tomography with a flat-panel imager |
US6523046B2 (en) | 2000-02-25 | 2003-02-18 | Microsoft Corporation | Infrastructure and method for supporting generic multimedia metadata |
JP2001264033A (ja) | 2000-03-17 | 2001-09-26 | Sony Corp | 三次元形状計測装置とその方法、三次元モデリング装置とその方法、およびプログラム提供媒体 |
US6571466B1 (en) | 2000-03-27 | 2003-06-03 | Amkor Technology, Inc. | Flip chip image sensor package fabrication method |
JP2001277260A (ja) | 2000-03-30 | 2001-10-09 | Seiko Epson Corp | マイクロレンズアレイ、その製造方法及びその製造用原盤並びに表示装置 |
WO2001075949A1 (fr) | 2000-04-04 | 2001-10-11 | Advantest Corporation | Appareil d'exposition multifaisceau comprenant une lentille electronique multiaxe, et procede de fabrication d'un dispositif a semi-conducteur |
WO2001082593A1 (en) | 2000-04-24 | 2001-11-01 | The Government Of The United States Of America, As Represented By The Secretary Of The Navy | Apparatus and method for color image fusion |
JP2001337263A (ja) | 2000-05-25 | 2001-12-07 | Olympus Optical Co Ltd | 測距装置 |
JP4501239B2 (ja) | 2000-07-13 | 2010-07-14 | ソニー株式会社 | カメラ・キャリブレーション装置及び方法、並びに、記憶媒体 |
AU2001277964A1 (en) | 2000-07-21 | 2002-02-05 | The Trustees Of Columbia University In The City Of New York | Method and apparatus for image mosaicing |
AU2001277110A1 (en) | 2000-07-21 | 2002-02-05 | The Trustees Of Columbia University In The City Of New York | Method and apparatus for reducing distortion in images |
US7154546B1 (en) | 2000-08-07 | 2006-12-26 | Micron Technology, Inc. | Pixel optimization for color |
ATE313218T1 (de) | 2000-08-25 | 2005-12-15 | Fuji Photo Film Co Ltd | Vorrichtung zur parallaxbildaufnahme und parallaxbildverarbeitung |
US7085409B2 (en) | 2000-10-18 | 2006-08-01 | Sarnoff Corporation | Method and apparatus for synthesizing new video and/or still imagery from a collection of real video and/or still imagery |
US6734905B2 (en) | 2000-10-20 | 2004-05-11 | Micron Technology, Inc. | Dynamic range extension for CMOS image sensors |
US6774889B1 (en) | 2000-10-24 | 2004-08-10 | Microsoft Corporation | System and method for transforming an ordinary computer monitor screen into a touch screen |
US7262799B2 (en) | 2000-10-25 | 2007-08-28 | Canon Kabushiki Kaisha | Image sensing apparatus and its control method, control program, and storage medium |
US6476971B1 (en) | 2000-10-31 | 2002-11-05 | Eastman Kodak Company | Method of manufacturing a microlens array mold and a microlens array |
JP3918499B2 (ja) | 2000-11-01 | 2007-05-23 | セイコーエプソン株式会社 | 間隙測定方法、間隙測定装置、形状測定方法、形状測定装置並びに液晶装置の製造方法 |
US6573912B1 (en) | 2000-11-07 | 2003-06-03 | Zaxel Systems, Inc. | Internet system for virtual telepresence |
US6788338B1 (en) | 2000-11-20 | 2004-09-07 | Petko Dimitrov Dinev | High resolution video camera apparatus having two image sensors and signal processing |
US7490774B2 (en) | 2003-11-13 | 2009-02-17 | Metrologic Instruments, Inc. | Hand-supportable imaging based bar code symbol reader employing automatic light exposure measurement and illumination control subsystem integrated therein |
JP2002171537A (ja) | 2000-11-30 | 2002-06-14 | Canon Inc | 複眼撮像系、撮像装置および電子機器 |
ATE552572T1 (de) | 2000-12-01 | 2012-04-15 | Imax Corp | Verfahren und vorrichtung zum erzeugen hochauflösender bilder |
CA2436607A1 (en) | 2000-12-05 | 2002-06-13 | Yeda Research And Development Co. Ltd. | Apparatus and method for alignment of spatial or temporal non-overlapping image sequences |
JP2002252338A (ja) | 2000-12-18 | 2002-09-06 | Canon Inc | 撮像装置及び撮像システム |
JP2002195910A (ja) | 2000-12-26 | 2002-07-10 | Omron Corp | 光学部品の検査装置 |
JP2002209226A (ja) | 2000-12-28 | 2002-07-26 | Canon Inc | 撮像装置 |
US7805680B2 (en) | 2001-01-03 | 2010-09-28 | Nokia Corporation | Statistical metering and filtering of content via pixel-based metadata |
JP3957460B2 (ja) | 2001-01-15 | 2007-08-15 | 沖電気工業株式会社 | 伝送ヘッダ圧縮装置、動画像符号化装置及び動画像伝送システム |
JP2002250607A (ja) | 2001-02-27 | 2002-09-06 | Optex Co Ltd | 物体検知センサ |
US6635941B2 (en) | 2001-03-21 | 2003-10-21 | Canon Kabushiki Kaisha | Structure of semiconductor device with improved reliability |
JP2002324743A (ja) | 2001-04-24 | 2002-11-08 | Canon Inc | 露光方法及び装置 |
US6443579B1 (en) | 2001-05-02 | 2002-09-03 | Kenneth Myers | Field-of-view controlling arrangements |
US20020167537A1 (en) | 2001-05-11 | 2002-11-14 | Miroslav Trajkovic | Motion-based tracking with pan-tilt-zoom camera |
US7235785B2 (en) | 2001-05-11 | 2007-06-26 | Irvine Sensors Corp. | Imaging device with multiple fields of view incorporating memory-based temperature compensation of an uncooled focal plane array |
WO2002096096A1 (en) | 2001-05-16 | 2002-11-28 | Zaxel Systems, Inc. | 3d instant replay system and method |
WO2002098112A2 (en) | 2001-05-29 | 2002-12-05 | Transchip, Inc. | Patent application cmos imager for cellular applications and methods of using such |
US7738013B2 (en) | 2001-05-29 | 2010-06-15 | Samsung Electronics Co., Ltd. | Systems and methods for power conservation in a CMOS imager |
US6482669B1 (en) | 2001-05-30 | 2002-11-19 | Taiwan Semiconductor Manufacturing Company | Colors only process to reduce package yield loss |
US6525302B2 (en) | 2001-06-06 | 2003-02-25 | The Regents Of The University Of Colorado | Wavefront coding phase contrast imaging systems |
US20030025227A1 (en) | 2001-08-02 | 2003-02-06 | Zograph, Llc | Reproduction of relief patterns |
WO2003014796A1 (en) | 2001-08-09 | 2003-02-20 | The Trustees Of Columbia University In The City Of New York | Adaptive imaging using digital light processing |
EP1289309B1 (en) | 2001-08-31 | 2010-04-21 | STMicroelectronics Srl | Noise filter for Bayer pattern image data |
JP3978706B2 (ja) | 2001-09-20 | 2007-09-19 | セイコーエプソン株式会社 | 微細構造体の製造方法 |
JP2003139910A (ja) | 2001-10-30 | 2003-05-14 | Sony Corp | 光学素子、その製造方法およびその製造装置、並びにそれを用いた液晶表示装置および画像投影型表示装置 |
DE10153237A1 (de) | 2001-10-31 | 2003-05-15 | Lfk Gmbh | Verfahren und Vorrichtung zur automatisierten Bestimmung der Modulations-Transfer-Funktion (MTF) von Focal-Plane-Array (FPA)- Kameras |
JP3705766B2 (ja) | 2001-11-28 | 2005-10-12 | 独立行政法人科学技術振興機構 | 画像入力装置 |
WO2003052465A2 (en) | 2001-12-18 | 2003-06-26 | University Of Rochester | Multifocal aspheric lens obtaining extended field depth |
US7212228B2 (en) * | 2002-01-16 | 2007-05-01 | Advanced Telecommunications Research Institute International | Automatic camera calibration method |
US7302118B2 (en) | 2002-02-07 | 2007-11-27 | Microsoft Corporation | Transformation of images |
US20030179418A1 (en) | 2002-03-19 | 2003-09-25 | Eastman Kodak Company | Producing a defective pixel map from defective cluster pixels in an area array image sensor |
US8369607B2 (en) | 2002-03-27 | 2013-02-05 | Sanyo Electric Co., Ltd. | Method and apparatus for processing three-dimensional images |
JP2003298920A (ja) | 2002-03-29 | 2003-10-17 | Fuji Photo Film Co Ltd | デジタルカメラ |
US20030188659A1 (en) | 2002-04-05 | 2003-10-09 | Canadian Bank Note Company Limited | Method and apparatus for reproducing a color image based on monochrome images derived therefrom |
US7215364B2 (en) | 2002-04-10 | 2007-05-08 | Panx Imaging, Inc. | Digital imaging system using overlapping images to formulate a seamless composite image and implemented using either a digital imaging sensor array |
US6856314B2 (en) | 2002-04-18 | 2005-02-15 | Stmicroelectronics, Inc. | Method and system for 3D reconstruction of multiple views with altering search path and occlusion modeling |
US6917702B2 (en) | 2002-04-24 | 2005-07-12 | Mitsubishi Electric Research Labs, Inc. | Calibration of multiple cameras for a turntable-based 3D scanner |
JP3567327B2 (ja) | 2002-05-08 | 2004-09-22 | 富士写真光機株式会社 | 撮像レンズ |
US6783900B2 (en) | 2002-05-13 | 2004-08-31 | Micron Technology, Inc. | Color filter imaging array and method of formation |
JP2004048644A (ja) | 2002-05-21 | 2004-02-12 | Sony Corp | 情報処理装置、情報処理システム、及び対話者表示方法 |
JP2003347192A (ja) | 2002-05-24 | 2003-12-05 | Toshiba Corp | エネルギービーム露光方法および露光装置 |
US7129981B2 (en) | 2002-06-27 | 2006-10-31 | International Business Machines Corporation | Rendering system and method for images having differing foveal area and peripheral view area resolutions |
JP2004088713A (ja) | 2002-06-27 | 2004-03-18 | Olympus Corp | 撮像レンズユニットおよび撮像装置 |
JP4147059B2 (ja) | 2002-07-03 | 2008-09-10 | 株式会社トプコン | キャリブレーション用データ測定装置、測定方法及び測定プログラム、並びにコンピュータ読取可能な記録媒体、画像データ処理装置 |
JP2004037924A (ja) | 2002-07-04 | 2004-02-05 | Minolta Co Ltd | 撮像装置 |
WO2004008403A2 (en) | 2002-07-15 | 2004-01-22 | Magna B.S.P. Ltd. | Method and apparatus for implementing multipurpose monitoring system |
US20040012689A1 (en) | 2002-07-16 | 2004-01-22 | Fairchild Imaging | Charge coupled devices in tiled arrays |
JP2004078296A (ja) | 2002-08-09 | 2004-03-11 | Victor Co Of Japan Ltd | 画像生成装置 |
US20070166447A1 (en) | 2002-08-27 | 2007-07-19 | Select Milk Producers, Inc. | Dairy compositions and method of making |
AU2003274951A1 (en) | 2002-08-30 | 2004-03-19 | Orasee Corp. | Multi-dimensional image system for digital image input and output |
US7447380B2 (en) | 2002-09-12 | 2008-11-04 | Inoe Technologies, Llc | Efficient method for creating a viewpoint from plurality of images |
US20040050104A1 (en) | 2002-09-18 | 2004-03-18 | Eastman Kodak Company | Forming information transfer lens array |
US20040207836A1 (en) | 2002-09-27 | 2004-10-21 | Rajeshwar Chhibber | High dynamic range optical inspection system and method |
US7084904B2 (en) | 2002-09-30 | 2006-08-01 | Microsoft Corporation | Foveated wide-angle imaging system and method for capturing and viewing wide-angle images in real time |
US7477781B1 (en) | 2002-10-10 | 2009-01-13 | Dalsa Corporation | Method and apparatus for adaptive pixel correction of multi-color matrix |
US20040075654A1 (en) | 2002-10-16 | 2004-04-22 | Silicon Integrated Systems Corp. | 3-D digital image processor and method for visibility processing for use in the same |
JP4171786B2 (ja) | 2002-10-25 | 2008-10-29 | コニカミノルタホールディングス株式会社 | 画像入力装置 |
US7742088B2 (en) | 2002-11-19 | 2010-06-22 | Fujifilm Corporation | Image sensor and digital camera |
CA2506608C (en) | 2002-11-21 | 2013-01-22 | Vision Iii Imaging, Inc. | Critical alignment of parallax images for autostereoscopic display |
US20040105021A1 (en) | 2002-12-02 | 2004-06-03 | Bolymedia Holdings Co., Ltd. | Color filter patterns for image sensors |
US20040114807A1 (en) | 2002-12-13 | 2004-06-17 | Dan Lelescu | Statistical representation and coding of light field data |
US6878918B2 (en) | 2003-01-09 | 2005-04-12 | Dialdg Semiconductor Gmbh | APS pixel with reset noise suppression and programmable binning capability |
US7340099B2 (en) | 2003-01-17 | 2008-03-04 | University Of New Brunswick | System and method for image fusion |
DE10301941B4 (de) | 2003-01-20 | 2005-11-17 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Kamera und Verfahren zur optischen Aufnahme eines Schirms |
US7379592B2 (en) | 2003-01-21 | 2008-05-27 | United States Of America As Represented By The Secretary Of The Navy | System and method for significant dust detection and enhancement of dust images over land and ocean |
US7005637B2 (en) | 2003-01-31 | 2006-02-28 | Intevac, Inc. | Backside thinning of image array devices |
JP4214409B2 (ja) | 2003-01-31 | 2009-01-28 | 国立大学法人東京工業大学 | 高解像度カラー画像生成方法、高解像度カラー画像生成装置及び高解像度カラー画像生成プログラム |
US7308157B2 (en) | 2003-02-03 | 2007-12-11 | Photon Dynamics, Inc. | Method and apparatus for optical inspection of a display |
US7595817B1 (en) | 2003-02-12 | 2009-09-29 | The Research Foundation Of State University Of New York | Linear system based, qualitative independent motion detection from compressed MPEG surveillance video |
US20040165090A1 (en) | 2003-02-13 | 2004-08-26 | Alex Ning | Auto-focus (AF) lens and process |
JP2004266369A (ja) | 2003-02-21 | 2004-09-24 | Sony Corp | 固体撮像装置およびその駆動方法 |
US7106914B2 (en) | 2003-02-27 | 2006-09-12 | Microsoft Corporation | Bayesian image super resolution |
US7148861B2 (en) | 2003-03-01 | 2006-12-12 | The Boeing Company | Systems and methods for providing enhanced vision imaging with decreased latency |
US8218052B2 (en) | 2003-03-07 | 2012-07-10 | Iconix Video, Inc. | High frame rate high definition imaging system and method |
US7218320B2 (en) | 2003-03-13 | 2007-05-15 | Sony Corporation | System and method for capturing facial and body motion |
US6801719B1 (en) | 2003-03-14 | 2004-10-05 | Eastman Kodak Company | Camera using beam splitter with micro-lens image amplification |
US7206449B2 (en) | 2003-03-19 | 2007-04-17 | Mitsubishi Electric Research Laboratories, Inc. | Detecting silhouette edges in images |
US7425984B2 (en) | 2003-04-04 | 2008-09-16 | Stmicroelectronics, Inc. | Compound camera and methods for implementing auto-focus, depth-of-field and high-resolution functions |
US7373005B2 (en) | 2003-04-10 | 2008-05-13 | Micron Technology, Inc. | Compression system for integrated sensor devices |
US7097311B2 (en) | 2003-04-19 | 2006-08-29 | University Of Kentucky Research Foundation | Super-resolution overlay in multi-projector displays |
US6958862B1 (en) | 2003-04-21 | 2005-10-25 | Foveon, Inc. | Use of a lenslet array with a vertically stacked pixel array |
US7428330B2 (en) | 2003-05-02 | 2008-09-23 | Microsoft Corporation | Cyclopean virtual imaging via generalized probabilistic smoothing |
SE525665C2 (sv) | 2003-05-08 | 2005-03-29 | Forskarpatent I Syd Ab | Matris av pixlar samt elektronisk bildanordning innefattande nämnda matris av pixlar |
KR20060115961A (ko) | 2003-05-13 | 2006-11-13 | 익시이드 이미징 리미티드 | 이미지 해상도를 향상시키기 위한 광학적 방법 및 시스템 |
JP2004348674A (ja) | 2003-05-26 | 2004-12-09 | Noritsu Koki Co Ltd | 領域検出方法及びその装置 |
US20040239782A1 (en) | 2003-05-30 | 2004-12-02 | William Equitz | System and method for efficient improvement of image quality in cameras |
US20040240052A1 (en) | 2003-06-02 | 2004-12-02 | Pentax Corporation | Multiple-focal imaging device, and a mobile device having the multiple-focal-length imaging device |
JP2004363478A (ja) | 2003-06-06 | 2004-12-24 | Sanyo Electric Co Ltd | 半導体装置の製造方法 |
KR100539234B1 (ko) | 2003-06-11 | 2005-12-27 | 삼성전자주식회사 | 투명 고분자 소재를 적용한 씨모스형 이미지 센서 모듈 및그 제조방법 |
US6818934B1 (en) | 2003-06-24 | 2004-11-16 | Omnivision International Holding Ltd | Image sensor having micro-lens array separated with trench structures and method of making |
US7362918B2 (en) | 2003-06-24 | 2008-04-22 | Microsoft Corporation | System and method for de-noising multiple copies of a signal |
US7090135B2 (en) | 2003-07-07 | 2006-08-15 | Symbol Technologies, Inc. | Imaging arrangement and barcode imager for imaging an optical code or target at a plurality of focal planes |
US7388609B2 (en) | 2003-07-07 | 2008-06-17 | Zoran Corporation | Dynamic identification and correction of defective pixels |
US20050007461A1 (en) | 2003-07-11 | 2005-01-13 | Novatek Microelectronic Co. | Correction system and method of analog front end |
JP3731589B2 (ja) | 2003-07-18 | 2006-01-05 | ソニー株式会社 | 撮像装置と同期信号発生装置 |
US7233737B2 (en) | 2003-08-12 | 2007-06-19 | Micron Technology, Inc. | Fixed-focus camera module and associated method of assembly |
US7643703B2 (en) | 2003-09-03 | 2010-01-05 | Battelle Energy Alliance, Llc | Image change detection systems, methods, and articles of manufacture |
US20050084179A1 (en) | 2003-09-04 | 2005-04-21 | Keith Hanna | Method and apparatus for performing iris recognition from an image |
US7161606B2 (en) | 2003-09-08 | 2007-01-09 | Honda Motor Co., Ltd. | Systems and methods for directly generating a view using a layered approach |
JP4015090B2 (ja) | 2003-09-08 | 2007-11-28 | 株式会社東芝 | 立体表示装置および画像表示方法 |
JP4020850B2 (ja) | 2003-10-06 | 2007-12-12 | 株式会社東芝 | 磁気記録媒体の製造方法、製造装置、インプリントスタンパ及びその製造方法 |
US7079251B2 (en) | 2003-10-16 | 2006-07-18 | 4D Technology Corporation | Calibration and error correction in multi-channel imaging |
US7924327B2 (en) | 2003-10-22 | 2011-04-12 | Panasonic Corporation | Imaging apparatus and method for producing the same, portable equipment, and imaging sensor and method for producing the same |
US7840067B2 (en) | 2003-10-24 | 2010-11-23 | Arcsoft, Inc. | Color matching and color correction for images forming a panoramic image |
EP1686810A4 (en) | 2003-11-11 | 2009-06-03 | Olympus Corp | DEVICE FOR ENTERING MULTISPECTRAL IMAGES |
JP4235539B2 (ja) | 2003-12-01 | 2009-03-11 | 独立行政法人科学技術振興機構 | 画像構成装置及び画像構成方法 |
US20050128509A1 (en) | 2003-12-11 | 2005-06-16 | Timo Tokkonen | Image creating method and imaging device |
US7328288B2 (en) | 2003-12-11 | 2008-02-05 | Canon Kabushiki Kaisha | Relay apparatus for relaying communication from CPU to peripheral device |
US7453510B2 (en) | 2003-12-11 | 2008-11-18 | Nokia Corporation | Imaging device |
JP3859158B2 (ja) | 2003-12-16 | 2006-12-20 | セイコーエプソン株式会社 | マイクロレンズ用凹部付き基板、マイクロレンズ基板、透過型スクリーン、およびリア型プロジェクタ |
US7511749B2 (en) | 2003-12-18 | 2009-03-31 | Aptina Imaging Corporation | Color image sensor having imaging element array forming images on respective regions of sensor elements |
US7123298B2 (en) | 2003-12-18 | 2006-10-17 | Avago Technologies Sensor Ip Pte. Ltd. | Color image sensor with imaging elements imaging on respective regions of sensor elements |
US7376250B2 (en) | 2004-01-05 | 2008-05-20 | Honda Motor Co., Ltd. | Apparatus, method and program for moving object detection |
US7496293B2 (en) | 2004-01-14 | 2009-02-24 | Elbit Systems Ltd. | Versatile camera for various visibility conditions |
US7773143B2 (en) | 2004-04-08 | 2010-08-10 | Tessera North America, Inc. | Thin color camera having sub-pixel resolution |
US8134637B2 (en) | 2004-01-28 | 2012-03-13 | Microsoft Corporation | Method and system to increase X-Y resolution in a depth (Z) camera using red, blue, green (RGB) sensing |
US7453688B2 (en) | 2004-01-29 | 2008-11-18 | Inventec Corporation | Multimedia device for portable computers |
GB2411532B (en) * | 2004-02-11 | 2010-04-28 | British Broadcasting Corp | Position determination |
US20050185711A1 (en) | 2004-02-20 | 2005-08-25 | Hanspeter Pfister | 3D television system and method |
SE527889C2 (sv) | 2004-03-17 | 2006-07-04 | Thomas Jeff Adamo | Apparat för avbildning av ett objekt |
JP2006047944A (ja) | 2004-03-24 | 2006-02-16 | Fuji Photo Film Co Ltd | 撮影レンズ |
WO2005096218A1 (en) | 2004-03-31 | 2005-10-13 | Canon Kabushiki Kaisha | Imaging system performance measurement |
US7633511B2 (en) | 2004-04-01 | 2009-12-15 | Microsoft Corporation | Pop-up light field |
JP4665422B2 (ja) | 2004-04-02 | 2011-04-06 | ソニー株式会社 | 撮像装置 |
US8634014B2 (en) | 2004-04-05 | 2014-01-21 | Hewlett-Packard Development Company, L.P. | Imaging device analysis systems and imaging device analysis methods |
US7091531B2 (en) | 2004-04-07 | 2006-08-15 | Micron Technology, Inc. | High dynamic range pixel amplifier |
US8049806B2 (en) | 2004-09-27 | 2011-11-01 | Digitaloptics Corporation East | Thin camera and associated methods |
US7620265B1 (en) | 2004-04-12 | 2009-11-17 | Equinox Corporation | Color invariant image fusion of visible and thermal infrared video |
JP2005303694A (ja) | 2004-04-13 | 2005-10-27 | Konica Minolta Holdings Inc | 複眼撮像装置 |
US7292735B2 (en) | 2004-04-16 | 2007-11-06 | Microsoft Corporation | Virtual image artifact detection |
US7773404B2 (en) | 2005-01-07 | 2010-08-10 | Invisage Technologies, Inc. | Quantum dot optical devices with enhanced gain and sensitivity and methods of making same |
US8218625B2 (en) | 2004-04-23 | 2012-07-10 | Dolby Laboratories Licensing Corporation | Encoding, decoding and representing high dynamic range images |
US20060034531A1 (en) | 2004-05-10 | 2006-02-16 | Seiko Epson Corporation | Block noise level evaluation method for compressed images and control method of imaging device utilizing the evaluation method |
CN1953708B (zh) | 2004-05-14 | 2010-06-16 | 皇家飞利浦电子股份有限公司 | 用于诊断乳腺癌的***和方法 |
JP4610411B2 (ja) | 2004-05-17 | 2011-01-12 | ミツビシ・エレクトリック・リサーチ・ラボラトリーズ・インコーポレイテッド | 物体を含むシーンの様式化された画像を生成する方法 |
US7355793B2 (en) | 2004-05-19 | 2008-04-08 | The Regents Of The University Of California | Optical system applicable to improving the dynamic range of Shack-Hartmann sensors |
US20050265633A1 (en) | 2004-05-25 | 2005-12-01 | Sarnoff Corporation | Low latency pyramid processor for image processing systems |
JP2005354124A (ja) | 2004-06-08 | 2005-12-22 | Seiko Epson Corp | 複数の低画素密度画像からの高画素密度画像の生成 |
US20060013318A1 (en) | 2004-06-22 | 2006-01-19 | Jennifer Webb | Video error detection, recovery, and concealment |
US7330593B2 (en) | 2004-06-25 | 2008-02-12 | Stmicroelectronics, Inc. | Segment based image matching method and system |
JP4408755B2 (ja) | 2004-06-28 | 2010-02-03 | Necエレクトロニクス株式会社 | デインタリーブ装置、移動通信端末及びデインタリーブ方法 |
JP4479373B2 (ja) | 2004-06-28 | 2010-06-09 | ソニー株式会社 | イメージセンサ |
US7447382B2 (en) | 2004-06-30 | 2008-11-04 | Intel Corporation | Computing a higher resolution image from multiple lower resolution images using model-based, robust Bayesian estimation |
JP2006033228A (ja) | 2004-07-14 | 2006-02-02 | Victor Co Of Japan Ltd | 画像撮像装置 |
JP2006033493A (ja) | 2004-07-16 | 2006-02-02 | Matsushita Electric Ind Co Ltd | 撮像装置 |
US7189954B2 (en) | 2004-07-19 | 2007-03-13 | Micron Technology, Inc. | Microelectronic imagers with optical devices and methods of manufacturing such microelectronic imagers |
JP2006033570A (ja) | 2004-07-20 | 2006-02-02 | Olympus Corp | 画像生成装置 |
US8027531B2 (en) | 2004-07-21 | 2011-09-27 | The Board Of Trustees Of The Leland Stanford Junior University | Apparatus and method for capturing a scene using staggered triggering of dense camera arrays |
GB0416496D0 (en) | 2004-07-23 | 2004-08-25 | Council Of The Central Lab Of | Imaging device |
US7068432B2 (en) | 2004-07-27 | 2006-06-27 | Micron Technology, Inc. | Controlling lens shape in a microlens array |
US20060023197A1 (en) | 2004-07-27 | 2006-02-02 | Joel Andrew H | Method and system for automated production of autostereoscopic and animated prints and transparencies from digital and non-digital media |
DE102004036469A1 (de) | 2004-07-28 | 2006-02-16 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Kameramodul, hierauf basierendes Array und Verfahren zu dessen Herstellung |
US7333652B2 (en) | 2004-08-03 | 2008-02-19 | Sony Corporation | System and method for efficiently performing a depth map recovery procedure |
US20060028476A1 (en) | 2004-08-03 | 2006-02-09 | Irwin Sobel | Method and system for providing extensive coverage of an object using virtual cameras |
JP2006050263A (ja) | 2004-08-04 | 2006-02-16 | Olympus Corp | 画像生成方法および装置 |
US8248458B2 (en) | 2004-08-06 | 2012-08-21 | University Of Washington Through Its Center For Commercialization | Variable fixation viewing distance scanned light displays |
US7430339B2 (en) | 2004-08-09 | 2008-09-30 | Microsoft Corporation | Border matting by dynamic programming |
US7609302B2 (en) | 2004-08-11 | 2009-10-27 | Micron Technology, Inc. | Correction of non-uniform sensitivity in an image array |
US7645635B2 (en) | 2004-08-16 | 2010-01-12 | Micron Technology, Inc. | Frame structure and semiconductor attach process for use therewith for fabrication of image sensor packages and the like, and resulting packages |
US7061693B2 (en) | 2004-08-16 | 2006-06-13 | Xceed Imaging Ltd. | Optical method and system for extended depth of focus |
US20070247517A1 (en) | 2004-08-23 | 2007-10-25 | Sarnoff Corporation | Method and apparatus for producing a fused image |
US7564019B2 (en) | 2005-08-25 | 2009-07-21 | Richard Ian Olsen | Large dynamic range cameras |
US8124929B2 (en) | 2004-08-25 | 2012-02-28 | Protarius Filo Ag, L.L.C. | Imager module optical focus and assembly method |
US7795577B2 (en) | 2004-08-25 | 2010-09-14 | Richard Ian Olsen | Lens frame and optical focus assembly for imager module |
US7916180B2 (en) | 2004-08-25 | 2011-03-29 | Protarius Filo Ag, L.L.C. | Simultaneous multiple field of view digital cameras |
WO2006026354A2 (en) | 2004-08-25 | 2006-03-09 | Newport Imaging Corporation | Apparatus for multiple camera devices and method of operating same |
JP4057597B2 (ja) | 2004-08-26 | 2008-03-05 | 独立行政法人科学技術振興機構 | 光学素子 |
CN100489599C (zh) | 2004-08-26 | 2009-05-20 | 财团法人秋田企业活性化中心 | 液晶透镜 |
US20060046204A1 (en) | 2004-08-31 | 2006-03-02 | Sharp Laboratories Of America, Inc. | Directly patternable microlens |
JP2006080852A (ja) | 2004-09-09 | 2006-03-23 | Olympus Corp | 画像処理装置、電子カメラ、スキャナ、画像処理方法、および画像処理プログラム |
US20060055811A1 (en) | 2004-09-14 | 2006-03-16 | Frtiz Bernard S | Imaging system having modules with adaptive optical elements |
US7145124B2 (en) | 2004-09-15 | 2006-12-05 | Raytheon Company | Multispectral imaging chip using photonic crystals |
JP4202991B2 (ja) | 2004-09-29 | 2008-12-24 | 株式会社東芝 | 立体画像用データの記録方法及び表示再生方法 |
JP3977368B2 (ja) | 2004-09-30 | 2007-09-19 | クラリオン株式会社 | 駐車支援システム |
DE102004049676A1 (de) | 2004-10-12 | 2006-04-20 | Infineon Technologies Ag | Verfahren zur rechnergestützten Bewegungsschätzung in einer Vielzahl von zeitlich aufeinander folgenden digitalen Bildern, Anordnung zur rechnergestützten Bewegungsschätzung, Computerprogramm-Element und computerlesbares Speichermedium |
JP2006119368A (ja) | 2004-10-21 | 2006-05-11 | Konica Minolta Opto Inc | 広角光学系、撮像レンズ装置、モニタカメラ及びデジタル機器 |
JP4534715B2 (ja) | 2004-10-22 | 2010-09-01 | 株式会社ニコン | 撮像装置および画像処理プログラム |
DE102004052994C5 (de) | 2004-11-03 | 2010-08-26 | Vistec Electron Beam Gmbh | Multistrahlmodulator für einen Partikelstrahl und Verwendung des Multistrahlmodulators zur maskenlosen Substratsstrukturierung |
KR100603601B1 (ko) | 2004-11-08 | 2006-07-24 | 한국전자통신연구원 | 다시점 콘텐츠 생성 장치 및 그 방법 |
US7598996B2 (en) | 2004-11-16 | 2009-10-06 | Aptina Imaging Corporation | System and method for focusing a digital camera |
US7538326B2 (en) | 2004-12-03 | 2009-05-26 | Fluke Corporation | Visible light and IR combined image camera with a laser pointer |
US7483065B2 (en) | 2004-12-15 | 2009-01-27 | Aptina Imaging Corporation | Multi-lens imaging systems and methods using optical filters having mosaic patterns |
US8854486B2 (en) | 2004-12-17 | 2014-10-07 | Mitsubishi Electric Research Laboratories, Inc. | Method and system for processing multiview videos for view synthesis using skip and direct modes |
US7728878B2 (en) | 2004-12-17 | 2010-06-01 | Mitsubishi Electric Research Labortories, Inc. | Method and system for processing multiview videos for view synthesis using side information |
EP1851527A2 (en) | 2005-01-07 | 2007-11-07 | GestureTek, Inc. | Creating 3d images of objects by illuminating with infrared patterns |
US7073908B1 (en) | 2005-01-11 | 2006-07-11 | Anthony Italo Provitola | Enhancement of depth perception |
US7767949B2 (en) | 2005-01-18 | 2010-08-03 | Rearden, Llc | Apparatus and method for capturing still images and video using coded aperture techniques |
US7671321B2 (en) | 2005-01-18 | 2010-03-02 | Rearden, Llc | Apparatus and method for capturing still images and video using coded lens imaging techniques |
US7602997B2 (en) | 2005-01-19 | 2009-10-13 | The United States Of America As Represented By The Secretary Of The Army | Method of super-resolving images |
US7408627B2 (en) | 2005-02-08 | 2008-08-05 | Canesta, Inc. | Methods and system to quantify depth data accuracy in three-dimensional sensors using single frame capture |
US7965314B1 (en) | 2005-02-09 | 2011-06-21 | Flir Systems, Inc. | Foveal camera systems and methods |
US20060187322A1 (en) | 2005-02-18 | 2006-08-24 | Janson Wilbert F Jr | Digital camera using multiple fixed focal length lenses and multiple image sensors to provide an extended zoom range |
US7561191B2 (en) | 2005-02-18 | 2009-07-14 | Eastman Kodak Company | Camera phone using multiple lenses and image sensors to provide an extended zoom range |
CA2600926C (en) | 2005-03-11 | 2009-06-09 | Creaform Inc. | Auto-referenced system and apparatus for three-dimensional scanning |
JP2006258930A (ja) | 2005-03-15 | 2006-09-28 | Nikon Corp | マイクロレンズの製造方法、及びマイクロレンズ用の型の製造方法 |
US7692147B2 (en) | 2005-03-21 | 2010-04-06 | Massachusetts Institute Of Technology | Real-time, continuous-wave terahertz imaging using a microbolometer focal-plane array |
JPWO2006100903A1 (ja) | 2005-03-23 | 2008-08-28 | 松下電器産業株式会社 | 車載撮像装置 |
JP4545190B2 (ja) | 2005-03-24 | 2010-09-15 | パナソニック株式会社 | 撮像装置 |
US7297917B2 (en) | 2005-03-24 | 2007-11-20 | Micron Technology, Inc. | Readout technique for increasing or maintaining dynamic range in image sensors |
US7683950B2 (en) | 2005-04-26 | 2010-03-23 | Eastman Kodak Company | Method and apparatus for correcting a channel dependent color aberration in a digital image |
US7956871B2 (en) | 2005-04-28 | 2011-06-07 | Samsung Electronics Co., Ltd. | Color disparity correction in image sensors methods and circuits |
US7656428B2 (en) | 2005-05-05 | 2010-02-02 | Avago Technologies General Ip (Singapore) Pte. Ltd. | Imaging device employing optical motion sensor as gyroscope |
US7876874B2 (en) | 2005-05-18 | 2011-01-25 | Hitachi Medical Corporation | Radiographing apparatus and image processing program |
US8411182B2 (en) | 2005-06-02 | 2013-04-02 | Xerox Corporation | System for controlling integration times of photosensors in an imaging device |
US7968888B2 (en) | 2005-06-08 | 2011-06-28 | Panasonic Corporation | Solid-state image sensor and manufacturing method thereof |
JP2006345233A (ja) | 2005-06-09 | 2006-12-21 | Fujifilm Holdings Corp | 撮像装置及びデジタルカメラ |
KR100813961B1 (ko) | 2005-06-14 | 2008-03-14 | 삼성전자주식회사 | 영상 수신장치 |
US7364306B2 (en) | 2005-06-20 | 2008-04-29 | Digital Display Innovations, Llc | Field sequential light source modulation for a digital display system |
JP4826152B2 (ja) | 2005-06-23 | 2011-11-30 | 株式会社ニコン | 画像合成方法及び撮像装置 |
US20070102622A1 (en) | 2005-07-01 | 2007-05-10 | Olsen Richard I | Apparatus for multiple camera devices and method of operating same |
JP4577126B2 (ja) | 2005-07-08 | 2010-11-10 | オムロン株式会社 | ステレオ対応づけのための投光パターンの生成装置及び生成方法 |
US20090268983A1 (en) | 2005-07-25 | 2009-10-29 | The Regents Of The University Of California | Digital imaging system and method using multiple digital image sensors to produce large high-resolution gapless mosaic images |
WO2007013250A1 (ja) | 2005-07-26 | 2007-02-01 | Matsushita Electric Industrial Co., Ltd. | 複眼方式の撮像装置 |
US8384763B2 (en) | 2005-07-26 | 2013-02-26 | Her Majesty the Queen in right of Canada as represented by the Minster of Industry, Through the Communications Research Centre Canada | Generating a depth map from a two-dimensional source image for stereoscopic and multiview imaging |
US7969488B2 (en) | 2005-08-03 | 2011-06-28 | Micron Technologies, Inc. | Correction of cluster defects in imagers |
US7929801B2 (en) | 2005-08-15 | 2011-04-19 | Sony Corporation | Depth information for auto focus using two pictures and two-dimensional Gaussian scale space theory |
US20070041391A1 (en) | 2005-08-18 | 2007-02-22 | Micron Technology, Inc. | Method and apparatus for controlling imager output data rate |
US20070040922A1 (en) | 2005-08-22 | 2007-02-22 | Micron Technology, Inc. | HDR/AB on multi-way shared pixels |
US7964835B2 (en) | 2005-08-25 | 2011-06-21 | Protarius Filo Ag, L.L.C. | Digital cameras with direct luminance and chrominance detection |
US20070258006A1 (en) | 2005-08-25 | 2007-11-08 | Olsen Richard I | Solid state camera optics frame and assembly |
US20070083114A1 (en) | 2005-08-26 | 2007-04-12 | The University Of Connecticut | Systems and methods for image resolution enhancement |
JP4804856B2 (ja) | 2005-09-29 | 2011-11-02 | 富士フイルム株式会社 | 単焦点レンズ |
WO2007036055A1 (en) | 2005-09-30 | 2007-04-05 | Simon Fraser University | Methods and apparatus for detecting defects in imaging arrays by image analysis |
WO2007044725A2 (en) | 2005-10-07 | 2007-04-19 | The Board Of Trustees Of The Leland Stanford Junior University | Microscopy arrangements and approaches |
US8300085B2 (en) | 2005-10-14 | 2012-10-30 | Microsoft Corporation | Occlusion handling in stereo imaging |
JP4773179B2 (ja) | 2005-10-14 | 2011-09-14 | 富士フイルム株式会社 | 撮像装置 |
US7806604B2 (en) | 2005-10-20 | 2010-10-05 | Honeywell International Inc. | Face detection and tracking in a wide field of view |
KR100730406B1 (ko) | 2005-11-16 | 2007-06-19 | 광운대학교 산학협력단 | 중간 요소 영상을 이용한 입체 영상 표시 장치 |
JP4389865B2 (ja) | 2005-11-17 | 2009-12-24 | ソニー株式会社 | 固体撮像素子の信号処理装置および信号処理方法並びに撮像装置 |
US7599547B2 (en) | 2005-11-30 | 2009-10-06 | Microsoft Corporation | Symmetric stereo model for handling occlusion |
EP1958458B1 (en) | 2005-11-30 | 2016-08-17 | Telecom Italia S.p.A. | Method for determining scattered disparity fields in stereo vision |
JP4516516B2 (ja) | 2005-12-07 | 2010-08-04 | 本田技研工業株式会社 | 人物検出装置、人物検出方法及び人物検出プログラム |
TWI296480B (en) | 2005-12-19 | 2008-05-01 | Quanta Comp Inc | Image camera of an electronic device |
JP4501855B2 (ja) | 2005-12-22 | 2010-07-14 | ソニー株式会社 | 画像信号処理装置、撮像装置、および画像信号処理方法、並びにコンピュータ・プログラム |
JP2007180730A (ja) | 2005-12-27 | 2007-07-12 | Eastman Kodak Co | デジタルカメラおよびデータ管理方法 |
EP1966648A4 (en) | 2005-12-30 | 2011-06-15 | Nokia Corp | METHOD AND DEVICE FOR ADJUSTING THE AUTOFOCUS OF A VIDEO CAMERA BY FOLLOWING A REGION OF INTEREST |
US7855786B2 (en) | 2006-01-09 | 2010-12-21 | Bae Systems Spectral Solutions Llc | Single camera multi-spectral imager |
US7675080B2 (en) | 2006-01-10 | 2010-03-09 | Aptina Imaging Corp. | Uniform color filter arrays in a moat |
JP4147273B2 (ja) | 2006-01-20 | 2008-09-10 | 松下電器産業株式会社 | 複眼方式のカメラモジュール及びその製造方法 |
DE102006004802B4 (de) | 2006-01-23 | 2008-09-25 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Bilderfassungssystem und Verfahren zur Herstellung mindestens eines Bilderfassungssystems |
JP4834412B2 (ja) | 2006-02-03 | 2011-12-14 | 富士フイルム株式会社 | 固体撮像装置およびこれを用いた電子内視鏡 |
US20070201859A1 (en) | 2006-02-24 | 2007-08-30 | Logitech Europe S.A. | Method and system for use of 3D sensors in an image capture device |
US7391572B2 (en) | 2006-03-01 | 2008-06-24 | International Business Machines Corporation | Hybrid optical/electronic structures fabricated by a common molding process |
US7924483B2 (en) | 2006-03-06 | 2011-04-12 | Smith Scott T | Fused multi-array color image sensor |
DE102006011707B4 (de) | 2006-03-14 | 2010-11-18 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Verfahren und Vorrichtung zum Erzeugen einer strukturfreien fiberskopischen Aufnahme |
US7616254B2 (en) | 2006-03-16 | 2009-11-10 | Sony Corporation | Simple method for calculating camera defocus from an image scene |
US8360574B2 (en) | 2006-03-20 | 2013-01-29 | High Performance Optics, Inc. | High performance selective light wavelength filtering providing improved contrast sensitivity |
JP4615468B2 (ja) | 2006-03-23 | 2011-01-19 | 富士フイルム株式会社 | 撮影装置 |
US7606484B1 (en) | 2006-03-23 | 2009-10-20 | Flir Systems, Inc. | Infrared and near-infrared camera hyperframing |
US7342212B2 (en) | 2006-03-31 | 2008-03-11 | Micron Technology, Inc. | Analog vertical sub-sampling in an active pixel sensor (APS) image sensor |
US8044994B2 (en) | 2006-04-04 | 2011-10-25 | Mitsubishi Electric Research Laboratories, Inc. | Method and system for decoding and displaying 3D light fields |
US7916934B2 (en) | 2006-04-04 | 2011-03-29 | Mitsubishi Electric Research Laboratories, Inc. | Method and system for acquiring, encoding, decoding and displaying 3D light fields |
TW200740212A (en) | 2006-04-10 | 2007-10-16 | Sony Taiwan Ltd | A stitching accuracy improvement method with lens distortion correction |
US20070242141A1 (en) | 2006-04-14 | 2007-10-18 | Sony Corporation And Sony Electronics Inc. | Adjustable neutral density filter system for dynamic range compression from scene to imaging sensor |
CN101064780B (zh) | 2006-04-30 | 2012-07-04 | 台湾新力国际股份有限公司 | 利用透镜失真校正的影像接合准确度改善方法及装置 |
US20070263114A1 (en) | 2006-05-01 | 2007-11-15 | Microalign Technologies, Inc. | Ultra-thin digital imaging device of high resolution for mobile electronic devices and method of imaging |
US7580620B2 (en) | 2006-05-08 | 2009-08-25 | Mitsubishi Electric Research Laboratories, Inc. | Method for deblurring images using optimized temporal coding patterns |
US9736346B2 (en) | 2006-05-09 | 2017-08-15 | Stereo Display, Inc | Imaging system improving image resolution of the system with low resolution image sensor |
US7889264B2 (en) | 2006-05-12 | 2011-02-15 | Ricoh Co., Ltd. | End-to-end design of superresolution electro-optic imaging systems |
US7916362B2 (en) | 2006-05-22 | 2011-03-29 | Eastman Kodak Company | Image sensor with improved light sensitivity |
US8139142B2 (en) | 2006-06-01 | 2012-03-20 | Microsoft Corporation | Video manipulation of red, green, blue, distance (RGB-Z) data including segmentation, up-sampling, and background substitution techniques |
IES20070229A2 (en) | 2006-06-05 | 2007-10-03 | Fotonation Vision Ltd | Image acquisition method and apparatus |
US20070177004A1 (en) | 2006-06-08 | 2007-08-02 | Timo Kolehmainen | Image creating method and imaging device |
JP4631811B2 (ja) | 2006-06-12 | 2011-02-16 | 株式会社日立製作所 | 撮像装置 |
JP5106870B2 (ja) | 2006-06-14 | 2012-12-26 | 株式会社東芝 | 固体撮像素子 |
FR2902530A1 (fr) | 2006-06-19 | 2007-12-21 | St Microelectronics Rousset | Procede de fabrication de lentilles, notamment pour imageur comprenant un diaphragme |
TWI362550B (en) | 2007-06-21 | 2012-04-21 | Ether Precision Inc | The method for manufacturing the image captures unit |
US7925117B2 (en) | 2006-06-27 | 2011-04-12 | Honeywell International Inc. | Fusion of sensor data and synthetic data to form an integrated image |
KR100793369B1 (ko) | 2006-07-06 | 2008-01-11 | 삼성전자주식회사 | 분해능이 향상되는 이미지 센서 및 이를 이용한 이미지감지 방법 |
US20080024683A1 (en) | 2006-07-31 | 2008-01-31 | Niranjan Damera-Venkata | Overlapped multi-projector system with dithering |
JP2008039852A (ja) | 2006-08-01 | 2008-02-21 | Agc Techno Glass Co Ltd | ガラス光学素子及びその製造方法 |
US20080030592A1 (en) | 2006-08-01 | 2008-02-07 | Eastman Kodak Company | Producing digital image with different resolution portions |
US8406562B2 (en) | 2006-08-11 | 2013-03-26 | Geo Semiconductor Inc. | System and method for automated calibration and correction of display geometry and color |
ATE479980T1 (de) | 2006-08-24 | 2010-09-15 | Valeo Vision | Verfahren zur bestimmung der durchfahrt eines fahrzeugs durch eine engen durchlass |
US8687087B2 (en) | 2006-08-29 | 2014-04-01 | Csr Technology Inc. | Digital camera with selectively increased dynamic range by control of parameters during image acquisition |
US8306063B2 (en) | 2006-08-29 | 2012-11-06 | EXFO Services Assurance, Inc. | Real-time transport protocol stream detection system and method |
KR100746360B1 (ko) | 2006-08-31 | 2007-08-06 | 삼성전기주식회사 | 스템퍼 제조방법 |
NO326372B1 (no) | 2006-09-21 | 2008-11-17 | Polight As | Polymerlinse |
US7918555B2 (en) | 2006-09-25 | 2011-04-05 | Ophthonix, Inc. | Methods and lenses for correction of chromatic aberration |
JP4403162B2 (ja) | 2006-09-29 | 2010-01-20 | 株式会社東芝 | 立体画像表示装置および立体画像の作製方法 |
US20080080028A1 (en) | 2006-10-02 | 2008-04-03 | Micron Technology, Inc. | Imaging method, apparatus and system having extended depth of field |
US8031258B2 (en) | 2006-10-04 | 2011-10-04 | Omnivision Technologies, Inc. | Providing multiple video signals from single sensor |
US8883019B2 (en) | 2006-10-11 | 2014-11-11 | Polight As | Method for manufacturing adjustable lens |
KR101360455B1 (ko) | 2006-10-11 | 2014-02-07 | 포라이트 에이에스 | 소형의 조정 가능한 렌즈의 설계 |
US8073196B2 (en) | 2006-10-16 | 2011-12-06 | University Of Southern California | Detection and tracking of moving objects from a moving platform in presence of strong parallax |
US7702229B2 (en) | 2006-10-18 | 2010-04-20 | Eastman Kodak Company | Lens array assisted focus detection |
JP4349456B2 (ja) | 2006-10-23 | 2009-10-21 | ソニー株式会社 | 固体撮像素子 |
WO2008050904A1 (fr) | 2006-10-25 | 2008-05-02 | Tokyo Institute Of Technology | Procédé de génération d'image dans un plan de focalisation virtuel haute résolution |
US7888159B2 (en) | 2006-10-26 | 2011-02-15 | Omnivision Technologies, Inc. | Image sensor having curved micro-mirrors over the sensing photodiode and method for fabricating |
JP4452951B2 (ja) | 2006-11-02 | 2010-04-21 | 富士フイルム株式会社 | 距離画像生成方法及びその装置 |
KR20080043106A (ko) | 2006-11-13 | 2008-05-16 | 삼성전자주식회사 | 광학렌즈 및 그 제조방법 |
US8059162B2 (en) | 2006-11-15 | 2011-11-15 | Sony Corporation | Imaging apparatus and method, and method for designing imaging apparatus |
US20080118241A1 (en) | 2006-11-16 | 2008-05-22 | Tekolste Robert | Control of stray light in camera systems employing an optics stack and associated methods |
CN201043890Y (zh) | 2006-11-17 | 2008-04-02 | 中国科学院上海光学精密机械研究所 | 单孔径多重成像的光学成像测距装置 |
WO2008062407A2 (en) * | 2006-11-21 | 2008-05-29 | Mantisvision Ltd. | 3d geometric modeling and 3d video content creation |
KR20080047002A (ko) | 2006-11-24 | 2008-05-28 | 엘지이노텍 주식회사 | 카메라모듈의 렌즈 어셈블리 및 그 제작 방법 |
US20100265385A1 (en) | 2009-04-18 | 2010-10-21 | Knight Timothy J | Light Field Camera Image, File and Configuration Data, and Methods of Using, Storing and Communicating Same |
US8559705B2 (en) | 2006-12-01 | 2013-10-15 | Lytro, Inc. | Interactive refocusing of electronic images |
JP4406937B2 (ja) | 2006-12-01 | 2010-02-03 | 富士フイルム株式会社 | 撮影装置 |
JP5040493B2 (ja) | 2006-12-04 | 2012-10-03 | ソニー株式会社 | 撮像装置及び撮像方法 |
US8242426B2 (en) | 2006-12-12 | 2012-08-14 | Dolby Laboratories Licensing Corporation | Electronic camera having multiple sensors for capturing high dynamic range images and related methods |
US7646549B2 (en) | 2006-12-18 | 2010-01-12 | Xceed Imaging Ltd | Imaging system and method for providing extended depth of focus, range extraction and super resolved imaging |
US8213500B2 (en) | 2006-12-21 | 2012-07-03 | Sharp Laboratories Of America, Inc. | Methods and systems for processing film grain noise |
TWI324015B (en) | 2006-12-22 | 2010-04-21 | Ind Tech Res Inst | Autofocus searching method |
US8103111B2 (en) | 2006-12-26 | 2012-01-24 | Olympus Imaging Corp. | Coding method, electronic camera, recording medium storing coded program, and decoding method |
US20080158259A1 (en) | 2006-12-28 | 2008-07-03 | Texas Instruments Incorporated | Image warping and lateral color correction |
US20080158698A1 (en) | 2006-12-29 | 2008-07-03 | Chao-Chi Chang | Lens barrel array and lens array and the method of making the same |
US7973823B2 (en) | 2006-12-29 | 2011-07-05 | Nokia Corporation | Method and system for image pre-processing |
US20080165257A1 (en) | 2007-01-05 | 2008-07-10 | Micron Technology, Inc. | Configurable pixel array system and method |
JP4993578B2 (ja) | 2007-01-15 | 2012-08-08 | オリンパスイメージング株式会社 | 画像ファイル再生装置,画像ファイル加工編集装置 |
US8655052B2 (en) | 2007-01-26 | 2014-02-18 | Intellectual Discovery Co., Ltd. | Methodology for 3D scene reconstruction from 2D image sequences |
JP5024992B2 (ja) | 2007-02-02 | 2012-09-12 | 株式会社ジャパンディスプレイセントラル | 表示装置 |
US7667824B1 (en) | 2007-02-06 | 2010-02-23 | Alpha Technology, LLC | Range gated shearography systems and related methods |
US7792423B2 (en) | 2007-02-06 | 2010-09-07 | Mitsubishi Electric Research Laboratories, Inc. | 4D light field cameras |
CN100585453C (zh) | 2007-02-09 | 2010-01-27 | 奥林巴斯映像株式会社 | 解码方法及解码装置 |
JP2008209761A (ja) | 2007-02-27 | 2008-09-11 | Nikon Corp | 焦点検出装置および撮像装置 |
JP4386083B2 (ja) | 2007-02-27 | 2009-12-16 | トヨタ自動車株式会社 | 駐車支援装置 |
JP4153013B1 (ja) | 2007-03-06 | 2008-09-17 | シャープ株式会社 | 撮像レンズ、撮像ユニットおよびそれを備えた携帯型情報端末 |
US7755679B2 (en) | 2007-03-07 | 2010-07-13 | Altasens, Inc. | Apparatus and method for reducing edge effect in an image sensor |
US7676146B2 (en) | 2007-03-09 | 2010-03-09 | Eastman Kodak Company | Camera using multiple lenses and image sensors to provide improved focusing capability |
US7683962B2 (en) | 2007-03-09 | 2010-03-23 | Eastman Kodak Company | Camera using multiple lenses and image sensors in a rangefinder configuration to provide a range map |
US7729602B2 (en) | 2007-03-09 | 2010-06-01 | Eastman Kodak Company | Camera using multiple lenses and image sensors operable in a default imaging mode |
US7859588B2 (en) | 2007-03-09 | 2010-12-28 | Eastman Kodak Company | Method and apparatus for operating a dual lens camera to augment an image |
US8593506B2 (en) | 2007-03-15 | 2013-11-26 | Yissum Research Development Company Of The Hebrew University Of Jerusalem | Method and system for forming a panoramic image of a scene having minimal aspect distortion |
JP4915859B2 (ja) | 2007-03-26 | 2012-04-11 | 船井電機株式会社 | 物体の距離導出装置 |
JP2008242658A (ja) | 2007-03-26 | 2008-10-09 | Funai Electric Co Ltd | 立体物体の撮像装置 |
US7738017B2 (en) | 2007-03-27 | 2010-06-15 | Aptina Imaging Corporation | Method and apparatus for automatic linear shift parallax correction for multi-array image systems |
US8165418B2 (en) | 2007-03-30 | 2012-04-24 | Brother Kogyo Kabushiki Kaisha | Image processor |
US8055466B2 (en) | 2007-03-30 | 2011-11-08 | Mitutoyo Corporation | Global calibration for stereo vision probe |
TWI433052B (zh) | 2007-04-02 | 2014-04-01 | Primesense Ltd | 使用投影圖案之深度製圖 |
US8213711B2 (en) | 2007-04-03 | 2012-07-03 | Her Majesty The Queen In Right Of Canada As Represented By The Minister Of Industry, Through The Communications Research Centre Canada | Method and graphical user interface for modifying depth maps |
US8098941B2 (en) | 2007-04-03 | 2012-01-17 | Aptina Imaging Corporation | Method and apparatus for parallelization of image compression encoders |
CN101281282A (zh) | 2007-04-04 | 2008-10-08 | 鸿富锦精密工业(深圳)有限公司 | 镜头模组 |
JP2008258885A (ja) | 2007-04-04 | 2008-10-23 | Texas Instr Japan Ltd | 撮像装置および撮像装置の駆動方法 |
EP2667412A1 (en) | 2007-04-18 | 2013-11-27 | Invisage Technologies, INC. | Materials, systems and methods for optoelectronic devices |
US8467628B2 (en) | 2007-04-24 | 2013-06-18 | 21 Ct, Inc. | Method and system for fast dense stereoscopic ranging |
KR100869219B1 (ko) | 2007-05-03 | 2008-11-18 | 동부일렉트로닉스 주식회사 | 이미지 센서 및 그 제조방법 |
US8462220B2 (en) | 2007-05-09 | 2013-06-11 | Aptina Imaging Corporation | Method and apparatus for improving low-light performance for small pixel image sensors |
US7812869B2 (en) | 2007-05-11 | 2010-10-12 | Aptina Imaging Corporation | Configurable pixel array system and method |
JP4341695B2 (ja) | 2007-05-17 | 2009-10-07 | ソニー株式会社 | 画像入力処理装置、撮像信号処理回路、および、撮像信号のノイズ低減方法 |
JP4337911B2 (ja) | 2007-05-24 | 2009-09-30 | ソニー株式会社 | 撮像装置、撮像回路、および撮像方法 |
US20080298674A1 (en) | 2007-05-29 | 2008-12-04 | Image Masters Inc. | Stereoscopic Panoramic imaging system |
WO2008150817A1 (en) | 2007-05-31 | 2008-12-11 | Artificial Muscle, Inc. | Optical systems employing compliant electroactive materials |
US8290358B1 (en) | 2007-06-25 | 2012-10-16 | Adobe Systems Incorporated | Methods and apparatus for light-field imaging |
WO2009001255A1 (en) | 2007-06-26 | 2008-12-31 | Koninklijke Philips Electronics N.V. | Method and system for encoding a 3d video signal, enclosed 3d video signal, method and system for decoder for a 3d video signal |
EP2168096A1 (en) | 2007-07-12 | 2010-03-31 | Thomson Licensing | System and method for three-dimensional object reconstruction from two-dimensional images |
US8125619B2 (en) | 2007-07-25 | 2012-02-28 | Eminent Electronic Technology Corp. | Integrated ambient light sensor and distance sensor |
JP5006727B2 (ja) | 2007-07-26 | 2012-08-22 | 株式会社リコー | 画像処理装置およびデジタルカメラ |
WO2009020977A1 (en) | 2007-08-06 | 2009-02-12 | Adobe Systems Incorporated | Method and apparatus for radiance capture by multiplexing in the frequency domain |
EP2034338A1 (en) | 2007-08-11 | 2009-03-11 | ETH Zurich | Liquid Lens System |
EP2026563A1 (en) | 2007-08-14 | 2009-02-18 | Deutsche Thomson OHG | System and method for detecting defective pixels |
US7782364B2 (en) | 2007-08-21 | 2010-08-24 | Aptina Imaging Corporation | Multi-array sensor with integrated sub-array for parallax detection and photometer functionality |
US20090066693A1 (en) | 2007-09-06 | 2009-03-12 | Roc Carson | Encoding A Depth Map Into An Image Using Analysis Of Two Consecutive Captured Frames |
US7973834B2 (en) | 2007-09-24 | 2011-07-05 | Jianwen Yang | Electro-optical foveated imaging and tracking system |
US20090079862A1 (en) | 2007-09-25 | 2009-03-26 | Micron Technology, Inc. | Method and apparatus providing imaging auto-focus utilizing absolute blur value |
US20090086074A1 (en) | 2007-09-27 | 2009-04-02 | Omnivision Technologies, Inc. | Dual mode camera solution apparatus, system, and method |
US7940311B2 (en) | 2007-10-03 | 2011-05-10 | Nokia Corporation | Multi-exposure pattern for enhancing dynamic range of images |
JP5172267B2 (ja) | 2007-10-09 | 2013-03-27 | 富士フイルム株式会社 | 撮像装置 |
US8049289B2 (en) | 2007-10-11 | 2011-11-01 | Dongbu Hitek Co., Ltd. | Image sensor and method for manufacturing the same |
US8938009B2 (en) | 2007-10-12 | 2015-01-20 | Qualcomm Incorporated | Layered encoded bitstream structure |
US7956924B2 (en) | 2007-10-18 | 2011-06-07 | Adobe Systems Incorporated | Fast computational camera based on two arrays of lenses |
US7787112B2 (en) | 2007-10-22 | 2010-08-31 | Visiongate, Inc. | Depth of field extension for optical tomography |
US7920193B2 (en) | 2007-10-23 | 2011-04-05 | Aptina Imaging Corporation | Methods, systems and apparatuses using barrier self-calibration for high dynamic range imagers |
US7777804B2 (en) | 2007-10-26 | 2010-08-17 | Omnivision Technologies, Inc. | High dynamic range sensor with reduced line memory for color interpolation |
WO2009061814A2 (en) | 2007-11-05 | 2009-05-14 | University Of Florida Research Foundation, Inc. | Lossless data compression and real-time decompression |
US7852461B2 (en) | 2007-11-15 | 2010-12-14 | Microsoft International Holdings B.V. | Dual mode depth imaging |
US20090128644A1 (en) | 2007-11-15 | 2009-05-21 | Camp Jr William O | System and method for generating a photograph |
US8351685B2 (en) | 2007-11-16 | 2013-01-08 | Gwangju Institute Of Science And Technology | Device and method for estimating depth map, and method for generating intermediate image and method for encoding multi-view video using the same |
US8126279B2 (en) | 2007-11-19 | 2012-02-28 | The University Of Arizona | Lifting-based view compensated compression and remote visualization of volume rendered images |
JP5010445B2 (ja) | 2007-11-29 | 2012-08-29 | パナソニック株式会社 | マイクロレンズアレイ用金型の製造方法 |
KR20090055803A (ko) | 2007-11-29 | 2009-06-03 | 광주과학기술원 | 다시점 깊이맵 생성 방법 및 장치, 다시점 영상에서의변이값 생성 방법 |
GB2455316B (en) | 2007-12-04 | 2012-08-15 | Sony Corp | Image processing apparatus and method |
EP2071515A1 (en) * | 2007-12-11 | 2009-06-17 | Honda Research Institute Europe GmbH | Visually tracking an object in real world using 2D appearance and multicue depth estimations |
US8384803B2 (en) | 2007-12-13 | 2013-02-26 | Keigo Iizuka | Camera system and method for amalgamating images to create an omni-focused image |
US7924330B2 (en) * | 2007-12-20 | 2011-04-12 | Aptina Imaging Corporation | Methods and apparatuses for double sided dark reference pixel row-wise dark level non-uniformity compensation in image signals |
TWI353778B (en) | 2007-12-21 | 2011-12-01 | Ind Tech Res Inst | Moving object detection apparatus and method |
US7880807B2 (en) | 2007-12-26 | 2011-02-01 | Sony Ericsson Mobile Communications Ab | Camera system with mirror arrangement for generating self-portrait panoramic pictures |
US8233077B2 (en) | 2007-12-27 | 2012-07-31 | Qualcomm Incorporated | Method and apparatus with depth map generation |
TWI362628B (en) | 2007-12-28 | 2012-04-21 | Ind Tech Res Inst | Methof for producing an image with depth by using 2d image |
US20110031381A1 (en) | 2007-12-28 | 2011-02-10 | Hiok-Nam Tay | Light guide array for an image sensor |
DE112009000100T5 (de) | 2008-01-04 | 2010-11-11 | 3M Innovative Properties Co., St. Paul | Navigieren zwischen Bildern eines Objekts im 3D-Raum |
JP4413261B2 (ja) | 2008-01-10 | 2010-02-10 | シャープ株式会社 | 撮像装置及び光軸制御方法 |
JP5198295B2 (ja) | 2008-01-15 | 2013-05-15 | 富士フイルム株式会社 | 撮像素子の位置調整方法、カメラモジュール製造方法及び装置、カメラモジュール |
US7962033B2 (en) | 2008-01-23 | 2011-06-14 | Adobe Systems Incorporated | Methods and apparatus for full-resolution light-field capture and rendering |
US8189065B2 (en) | 2008-01-23 | 2012-05-29 | Adobe Systems Incorporated | Methods and apparatus for full-resolution light-field capture and rendering |
JP4956452B2 (ja) | 2008-01-25 | 2012-06-20 | 富士重工業株式会社 | 車両用環境認識装置 |
WO2009097552A1 (en) | 2008-02-01 | 2009-08-06 | Omnivision Cdm Optics, Inc. | Image data fusion systems and methods |
GB0802290D0 (en) | 2008-02-08 | 2008-03-12 | Univ Kent Canterbury | Camera adapter based optical imaging apparatus |
US8319301B2 (en) | 2008-02-11 | 2012-11-27 | Omnivision Technologies, Inc. | Self-aligned filter for an image sensor |
JP2009206922A (ja) | 2008-02-28 | 2009-09-10 | Funai Electric Co Ltd | 複眼撮像装置 |
US9094675B2 (en) | 2008-02-29 | 2015-07-28 | Disney Enterprises Inc. | Processing image data from multiple cameras for motion pictures |
CN101520532A (zh) | 2008-02-29 | 2009-09-02 | 鸿富锦精密工业(深圳)有限公司 | 复合镜片 |
KR101607224B1 (ko) | 2008-03-03 | 2016-03-29 | 아비길론 페이턴트 홀딩 2 코포레이션 | 동적 물체 분류 방법 및 장치 |
US20110018973A1 (en) | 2008-03-26 | 2011-01-27 | Konica Minolta Holdings, Inc. | Three-dimensional imaging device and method for calibrating three-dimensional imaging device |
US8497905B2 (en) | 2008-04-11 | 2013-07-30 | nearmap australia pty ltd. | Systems and methods of capturing large area images in detail including cascaded cameras and/or calibration features |
US8259208B2 (en) | 2008-04-15 | 2012-09-04 | Sony Corporation | Method and apparatus for performing touch-based adjustments within imaging devices |
US7843554B2 (en) | 2008-04-25 | 2010-11-30 | Rockwell Collins, Inc. | High dynamic range sensor system and method |
US8280194B2 (en) | 2008-04-29 | 2012-10-02 | Sony Corporation | Reduced hardware implementation for a two-picture depth map algorithm |
US8155456B2 (en) | 2008-04-29 | 2012-04-10 | Adobe Systems Incorporated | Method and apparatus for block-based compression of light-field images |
US8724921B2 (en) | 2008-05-05 | 2014-05-13 | Aptina Imaging Corporation | Method of capturing high dynamic range images with objects in the scene |
JP2009273035A (ja) | 2008-05-09 | 2009-11-19 | Toshiba Corp | 画像圧縮装置、画像伸張装置及び画像処理装置 |
WO2009136989A1 (en) | 2008-05-09 | 2009-11-12 | Ecole Polytechnique Federale De Lausanne | Image sensor having nonlinear response |
US8400505B2 (en) | 2008-05-19 | 2013-03-19 | Panasonic Corporation | Calibration method, calibration device, and calibration system including the device |
US8208543B2 (en) | 2008-05-19 | 2012-06-26 | Microsoft Corporation | Quantization and differential coding of alpha image data |
US8866920B2 (en) | 2008-05-20 | 2014-10-21 | Pelican Imaging Corporation | Capturing and processing of images using monolithic camera array with heterogeneous imagers |
KR101733443B1 (ko) | 2008-05-20 | 2017-05-10 | 펠리칸 이매징 코포레이션 | 이종 이미저를 구비한 모놀리식 카메라 어레이를 이용한 이미지의 캡처링 및 처리 |
US8442355B2 (en) | 2008-05-23 | 2013-05-14 | Samsung Electronics Co., Ltd. | System and method for generating a multi-dimensional image |
US8125559B2 (en) | 2008-05-25 | 2012-02-28 | Avistar Communications Corporation | Image formation for large photosensor array surfaces |
US8131097B2 (en) | 2008-05-28 | 2012-03-06 | Aptina Imaging Corporation | Method and apparatus for extended depth-of-field image restoration |
US8244058B1 (en) | 2008-05-30 | 2012-08-14 | Adobe Systems Incorporated | Method and apparatus for managing artifacts in frequency domain processing of light-field images |
CN101593350B (zh) * | 2008-05-30 | 2013-01-09 | 日电(中国)有限公司 | 深度自适应视频拼接的方法、装置和*** |
JP2009300268A (ja) | 2008-06-13 | 2009-12-24 | Nippon Hoso Kyokai <Nhk> | 3次元情報検出装置 |
KR20100002032A (ko) | 2008-06-24 | 2010-01-06 | 삼성전자주식회사 | 영상 생성 방법, 영상 처리 방법, 및 그 장치 |
US7710667B2 (en) | 2008-06-25 | 2010-05-04 | Aptina Imaging Corp. | Imaging module with symmetrical lens system and method of manufacture |
CN102016654A (zh) | 2008-06-25 | 2011-04-13 | 柯尼卡美能达精密光学株式会社 | 成像光学***及成像用透镜的制造方法 |
KR101000531B1 (ko) | 2008-06-26 | 2010-12-14 | 에스디씨마이크로 주식회사 | 데이터 전송 범위가 증대되는 무선랜을 이용한 씨씨티브이관리시스템 |
US7916396B2 (en) | 2008-06-27 | 2011-03-29 | Micron Technology, Inc. | Lens master devices, lens structures, imaging devices, and methods and apparatuses of making the same |
US8326069B2 (en) | 2008-06-30 | 2012-12-04 | Intel Corporation | Computing higher resolution images from multiple lower resolution images |
US7773317B2 (en) | 2008-07-01 | 2010-08-10 | Aptina Imaging Corp. | Lens system with symmetrical optics |
US7920339B2 (en) | 2008-07-02 | 2011-04-05 | Aptina Imaging Corporation | Method and apparatus providing singlet wafer lens system with field flattener |
US8456517B2 (en) | 2008-07-09 | 2013-06-04 | Primesense Ltd. | Integrated processor for 3D mapping |
KR101445185B1 (ko) | 2008-07-10 | 2014-09-30 | 삼성전자주식회사 | 복수 개의 영상촬영유닛을 구비한 플렉시블 영상촬영장치및 그 제조방법 |
CA2731680C (en) | 2008-08-06 | 2016-12-13 | Creaform Inc. | System for adaptive three-dimensional scanning of surface characteristics |
CN101656259A (zh) | 2008-08-20 | 2010-02-24 | 鸿富锦精密工业(深圳)有限公司 | 影像感测器封装结构、封装方法及相机模组 |
EP2329653B1 (en) | 2008-08-20 | 2014-10-29 | Thomson Licensing | Refined depth map |
US7924312B2 (en) | 2008-08-22 | 2011-04-12 | Fluke Corporation | Infrared and visible-light image registration |
US8736751B2 (en) | 2008-08-26 | 2014-05-27 | Empire Technology Development Llc | Digital presenter for displaying image captured by camera with illumination system |
US8102428B2 (en) | 2008-08-28 | 2012-01-24 | Adobe Systems Incorporated | Content-aware video stabilization |
CN102138102A (zh) | 2008-09-01 | 2011-07-27 | 兰斯维克托公司 | 液晶光电装置的晶片级制造 |
JP5105482B2 (ja) | 2008-09-01 | 2012-12-26 | 船井電機株式会社 | 光学的条件設計方法及び複眼撮像装置 |
US8098297B2 (en) | 2008-09-03 | 2012-01-17 | Sony Corporation | Pre- and post-shutter signal image capture and sort for digital camera |
KR20100028344A (ko) | 2008-09-04 | 2010-03-12 | 삼성전자주식회사 | 휴대단말의 영상 편집 방법 및 장치 |
US9025136B2 (en) | 2008-09-23 | 2015-05-05 | Applied Materials, Inc. | System and method for manufacturing three dimensional integrated circuits |
JP5238429B2 (ja) | 2008-09-25 | 2013-07-17 | 株式会社東芝 | 立体映像撮影装置および立体映像撮影システム |
US8553093B2 (en) | 2008-09-30 | 2013-10-08 | Sony Corporation | Method and apparatus for super-resolution imaging using digital imaging devices |
KR101468267B1 (ko) | 2008-10-02 | 2014-12-15 | 프라운호퍼-게젤샤프트 추르 푀르데룽 데어 안제반텐 포르슝 에 파우 | 중간 뷰 합성 및 멀티-뷰 데이터 신호 추출 |
US9619917B2 (en) | 2008-10-03 | 2017-04-11 | Apple Inc. | Depth of field for a camera in a media-editing application |
US9064476B2 (en) | 2008-10-04 | 2015-06-23 | Microsoft Technology Licensing, Llc | Image super-resolution using gradient profile prior |
US8310525B2 (en) | 2008-10-07 | 2012-11-13 | Seiko Epson Corporation | One-touch projector alignment for 3D stereo display |
KR101498532B1 (ko) | 2008-10-15 | 2015-03-04 | 스피넬라 아이피 홀딩스, 인코포레이티드 | 광학 흐름의 결정을 위한 디지털 처리 방법 및 시스템 |
US8416282B2 (en) | 2008-10-16 | 2013-04-09 | Spatial Cam Llc | Camera for creating a panoramic image |
JP2010096723A (ja) | 2008-10-20 | 2010-04-30 | Funai Electric Co Ltd | 物体の距離導出装置 |
US8436909B2 (en) | 2008-10-21 | 2013-05-07 | Stmicroelectronics S.R.L. | Compound camera sensor and related method of processing digital images |
WO2010050728A2 (ko) | 2008-10-27 | 2010-05-06 | 엘지전자 주식회사 | 가상 뷰 이미지 합성 방법 및 장치 |
US8063975B2 (en) | 2008-10-29 | 2011-11-22 | Jabil Circuit, Inc. | Positioning wafer lenses on electronic imagers |
KR101502597B1 (ko) | 2008-11-13 | 2015-03-13 | 삼성전자주식회사 | 고심도 입체 영상 표시가 가능한 디스플레이 장치 및 방법 |
US8644547B2 (en) | 2008-11-14 | 2014-02-04 | The Scripps Research Institute | Image analysis platform for identifying artifacts in samples and laboratory consumables |
AU2008246243B2 (en) | 2008-11-19 | 2011-12-22 | Canon Kabushiki Kaisha | DVC as generic file format for plenoptic camera |
WO2010065344A1 (en) | 2008-11-25 | 2010-06-10 | Refocus Imaging, Inc. | System of and method for video refocusing |
JP4852591B2 (ja) | 2008-11-27 | 2012-01-11 | 富士フイルム株式会社 | 立体画像処理装置、方法及び記録媒体並びに立体撮像装置 |
JP5282543B2 (ja) * | 2008-11-28 | 2013-09-04 | ソニー株式会社 | 固体撮像装置、固体撮像装置の駆動方法および撮像装置 |
US8289440B2 (en) | 2008-12-08 | 2012-10-16 | Lytro, Inc. | Light field data acquisition devices, and methods of using and manufacturing same |
US8013904B2 (en) | 2008-12-09 | 2011-09-06 | Seiko Epson Corporation | View projection matrix based high performance low latency display pipeline |
JP5311016B2 (ja) | 2008-12-10 | 2013-10-09 | コニカミノルタ株式会社 | ステレオカメラユニット及びステレオマッチング方法 |
KR101200490B1 (ko) | 2008-12-10 | 2012-11-12 | 한국전자통신연구원 | 영상 정합 장치 및 방법 |
US8149323B2 (en) | 2008-12-18 | 2012-04-03 | Qualcomm Incorporated | System and method to autofocus assisted by autoexposure control |
JP4631966B2 (ja) | 2008-12-22 | 2011-02-16 | ソニー株式会社 | 画像処理装置、および画像処理方法、並びにプログラム |
CN101770060B (zh) | 2008-12-27 | 2014-03-26 | 鸿富锦精密工业(深圳)有限公司 | 相机模组及其组装方法 |
US8405742B2 (en) | 2008-12-30 | 2013-03-26 | Massachusetts Institute Of Technology | Processing images having different focus |
US8259212B2 (en) | 2009-01-05 | 2012-09-04 | Applied Quantum Technologies, Inc. | Multiscale optical system |
US20100177411A1 (en) | 2009-01-09 | 2010-07-15 | Shashikant Hegde | Wafer level lens replication on micro-electrical-mechanical systems |
US9177389B2 (en) | 2009-01-09 | 2015-11-03 | Konica Minolta Holdings, Inc. | Motion vector generation apparatus and motion vector generation method |
WO2010081010A2 (en) | 2009-01-09 | 2010-07-15 | New York University | Methods, computer-accessible medium and systems for facilitating dark flash photography |
US8189089B1 (en) | 2009-01-20 | 2012-05-29 | Adobe Systems Incorporated | Methods and apparatus for reducing plenoptic camera artifacts |
US8315476B1 (en) | 2009-01-20 | 2012-11-20 | Adobe Systems Incorporated | Super-resolution with the focused plenoptic camera |
US8300108B2 (en) | 2009-02-02 | 2012-10-30 | L-3 Communications Cincinnati Electronics Corporation | Multi-channel imaging devices comprising unit cells |
US20100194860A1 (en) | 2009-02-03 | 2010-08-05 | Bit Cauldron Corporation | Method of stereoscopic 3d image capture using a mobile device, cradle or dongle |
US8761491B2 (en) | 2009-02-06 | 2014-06-24 | Himax Technologies Limited | Stereo-matching processor using belief propagation |
US8290301B2 (en) | 2009-02-06 | 2012-10-16 | Raytheon Company | Optimized imaging system for collection of high resolution imagery |
KR101776955B1 (ko) | 2009-02-10 | 2017-09-08 | 소니 주식회사 | 고체 촬상 장치와 그 제조 방법, 및 전자 기기 |
JP4915423B2 (ja) | 2009-02-19 | 2012-04-11 | ソニー株式会社 | 画像処理装置、フォーカルプレーン歪み成分算出方法、画像処理プログラム及び記録媒体 |
WO2010095440A1 (ja) | 2009-02-20 | 2010-08-26 | パナソニック株式会社 | 記録媒体、再生装置、及び集積回路 |
US8520970B2 (en) | 2010-04-23 | 2013-08-27 | Flir Systems Ab | Infrared resolution and contrast enhancement with fusion |
KR20100099896A (ko) | 2009-03-04 | 2010-09-15 | 삼성전자주식회사 | 메타데이터 생성 방법 및 장치, 그 메타데이터를 이용하여 영상을 처리하는 방법 및 장치 |
US8207759B2 (en) | 2009-03-12 | 2012-06-26 | Fairchild Semiconductor Corporation | MIPI analog switch for automatic selection of multiple inputs based on clock voltages |
WO2010108119A2 (en) | 2009-03-19 | 2010-09-23 | Flextronics Ap, Llc | Dual sensor camera |
US8450821B2 (en) | 2009-03-26 | 2013-05-28 | Micron Technology, Inc. | Method and apparatus providing combined spacer and optical lens element |
US8106949B2 (en) | 2009-03-26 | 2012-01-31 | Seiko Epson Corporation | Small memory footprint light transport matrix capture |
US7901095B2 (en) | 2009-03-27 | 2011-03-08 | Seiko Epson Corporation | Resolution scalable view projection |
JP4529010B1 (ja) | 2009-03-30 | 2010-08-25 | シャープ株式会社 | 撮像装置 |
JP5222205B2 (ja) | 2009-04-03 | 2013-06-26 | Kddi株式会社 | 画像処理装置、方法及びプログラム |
WO2010116366A1 (en) | 2009-04-07 | 2010-10-14 | Nextvision Stabilized Systems Ltd | Video motion compensation and stabilization gimbaled imaging system |
US20100259610A1 (en) | 2009-04-08 | 2010-10-14 | Celsia, Llc | Two-Dimensional Display Synced with Real World Object Movement |
US8294099B2 (en) | 2009-04-10 | 2012-10-23 | Bae Systems Information And Electronic Systems Integration Inc. | On-wafer butted microbolometer imaging array |
US8717417B2 (en) | 2009-04-16 | 2014-05-06 | Primesense Ltd. | Three-dimensional mapping and imaging |
JP5463718B2 (ja) | 2009-04-16 | 2014-04-09 | ソニー株式会社 | 撮像装置 |
US8908058B2 (en) | 2009-04-18 | 2014-12-09 | Lytro, Inc. | Storage and transmission of pictures including multiple frames |
US20120249550A1 (en) | 2009-04-18 | 2012-10-04 | Lytro, Inc. | Selective Transmission of Image Data Based on Device Attributes |
EP2244484B1 (en) | 2009-04-22 | 2012-03-28 | Raytrix GmbH | Digital imaging method for synthesizing an image using data recorded with a plenoptic camera |
CN101527046B (zh) | 2009-04-28 | 2012-09-05 | 青岛海信数字多媒体技术国家重点实验室有限公司 | 一种运动检测方法、装置和*** |
KR101671021B1 (ko) | 2009-04-30 | 2016-11-10 | 삼성전자주식회사 | 스테레오스코픽 영상 데이터 전송 장치 및 방법 |
US8271544B2 (en) | 2009-05-01 | 2012-09-18 | Creative Technology Ltd | Data file having more than one mode of operation |
US8358365B2 (en) | 2009-05-01 | 2013-01-22 | Samsung Electronics Co., Ltd. | Photo detecting device and image pickup device and method thereon |
DE102009003110A1 (de) | 2009-05-14 | 2010-11-18 | Robert Bosch Gmbh | Bildverarbeitungsverfahren zur Bestimmung von Tiefeninformation aus wenigstens zwei mittels eines Stereokamerasystems aufgenommenen Eingangsbildern |
US8203633B2 (en) | 2009-05-27 | 2012-06-19 | Omnivision Technologies, Inc. | Four-channel color filter array pattern |
KR20100130423A (ko) | 2009-06-03 | 2010-12-13 | 삼성전자주식회사 | 웨이퍼-레벨 렌즈 모듈 및 이를 구비하는 촬상 모듈 |
US8766808B2 (en) | 2010-03-09 | 2014-07-01 | Flir Systems, Inc. | Imager with multiple sensor arrays |
US10091439B2 (en) | 2009-06-03 | 2018-10-02 | Flir Systems, Inc. | Imager with array of multiple infrared imaging modules |
US8745677B2 (en) | 2009-06-12 | 2014-06-03 | Cygnus Broadband, Inc. | Systems and methods for prioritization of data for intelligent discard in a communication network |
CN101931742B (zh) | 2009-06-18 | 2013-04-24 | 鸿富锦精密工业(深圳)有限公司 | 影像感测模组及取像模组 |
US20100321640A1 (en) | 2009-06-22 | 2010-12-23 | Industrial Technology Research Institute | Projection display chip |
JP5254893B2 (ja) | 2009-06-26 | 2013-08-07 | キヤノン株式会社 | 画像変換方法及び装置並びにパターン識別方法及び装置 |
US8208746B2 (en) | 2009-06-29 | 2012-06-26 | DigitalOptics Corporation Europe Limited | Adaptive PSF estimation technique using a sharp preview and a blurred image |
WO2011008443A2 (en) | 2009-06-29 | 2011-01-20 | Lensvector Inc. | Wafer level camera module with active optical element |
JP2011030184A (ja) | 2009-07-01 | 2011-02-10 | Sony Corp | 画像処理装置、及び、画像処理方法 |
US8212197B2 (en) | 2009-07-02 | 2012-07-03 | Xerox Corporation | Image sensor with integration time compensation |
JP2011017764A (ja) | 2009-07-07 | 2011-01-27 | Konica Minolta Opto Inc | 撮像レンズ,撮像装置及び携帯端末 |
US8345144B1 (en) | 2009-07-15 | 2013-01-01 | Adobe Systems Incorporated | Methods and apparatus for rich image capture with focused plenoptic cameras |
US20110019243A1 (en) | 2009-07-21 | 2011-01-27 | Constant Jr Henry J | Stereoscopic form reader |
CN101964866B (zh) | 2009-07-24 | 2013-03-20 | 鸿富锦精密工业(深圳)有限公司 | 计算摄像型数码相机 |
GB0912970D0 (en) | 2009-07-27 | 2009-09-02 | St Microelectronics Res & Dev | Improvements in or relating to a sensor and sensor system for a camera |
US20110025830A1 (en) | 2009-07-31 | 2011-02-03 | 3Dmedia Corporation | Methods, systems, and computer-readable storage media for generating stereoscopic content via depth map creation |
EP2293586A1 (en) | 2009-08-04 | 2011-03-09 | Samsung Electronics Co., Ltd. | Method and system to transform stereo content |
US8577183B2 (en) | 2009-08-05 | 2013-11-05 | Raytheon Company | Resolution on demand |
US8773652B2 (en) | 2009-08-11 | 2014-07-08 | Ether Precision, Inc. | Method and device for aligning a lens with an optical system |
CA2771018C (en) | 2009-08-14 | 2017-06-13 | Genesis Group Inc. | Real-time image and video matting |
JP2011044801A (ja) | 2009-08-19 | 2011-03-03 | Toshiba Corp | 画像処理装置 |
US8154632B2 (en) | 2009-08-24 | 2012-04-10 | Lifesize Communications, Inc. | Detection of defective pixels in an image sensor |
KR101680300B1 (ko) | 2009-08-31 | 2016-11-28 | 삼성전자주식회사 | 액체 렌즈 및 그 제조방법 |
US9274699B2 (en) | 2009-09-03 | 2016-03-01 | Obscura Digital | User interface for a large scale multi-user, multi-touch system |
US8411146B2 (en) | 2009-09-04 | 2013-04-02 | Lockheed Martin Corporation | Single camera color and infrared polarimetric imaging |
CN102577353A (zh) | 2009-09-07 | 2012-07-11 | 诺基亚公司 | 装置 |
FR2950153B1 (fr) | 2009-09-15 | 2011-12-23 | Commissariat Energie Atomique | Dispositif optique a membrane deformable a actionnement piezoelectrique |
US20140076336A1 (en) | 2009-09-17 | 2014-03-20 | Ascentia Health, Inc. | Ear insert for relief of tmj discomfort and headaches |
US9497386B1 (en) | 2009-09-22 | 2016-11-15 | Altia Systems Inc. | Multi-imager video camera with automatic exposure control |
WO2011039679A1 (en) | 2009-10-02 | 2011-04-07 | Koninklijke Philips Electronics N.V. | Selecting viewpoints for generating additional views in 3d video |
DE102009049387B4 (de) | 2009-10-14 | 2016-05-25 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung, Bildverarbeitungsvorrichtung und Verfahren zur optischen Abbildung |
KR101807886B1 (ko) | 2009-10-14 | 2017-12-11 | 돌비 인터네셔널 에이비 | 깊이 맵 처리를 위한 방법 및 디바이스 |
US8199165B2 (en) | 2009-10-14 | 2012-06-12 | Hewlett-Packard Development Company, L.P. | Methods and systems for object segmentation in digital images |
US8502909B2 (en) | 2009-10-19 | 2013-08-06 | Pixar | Super light-field lens |
US20110207074A1 (en) | 2009-10-26 | 2011-08-25 | Olaf Andrew Hall-Holt | Dental imaging system and method |
CN102576154A (zh) | 2009-10-30 | 2012-07-11 | 惠普发展公司,有限责任合伙企业 | 立体显示*** |
JP5456020B2 (ja) * | 2009-10-30 | 2014-03-26 | キヤノン株式会社 | 情報処理装置および方法 |
WO2011053711A1 (en) | 2009-10-30 | 2011-05-05 | Invisage Technologies, Inc. | Systems and methods for color binning |
WO2011055655A1 (ja) | 2009-11-05 | 2011-05-12 | コニカミノルタオプト株式会社 | 撮像装置、光学ユニット、ウエハレンズ積層体及びウエハレンズ積層体の製造方法 |
WO2011058876A1 (ja) | 2009-11-13 | 2011-05-19 | 富士フイルム株式会社 | 測距装置、測距方法、測距プログラムおよび測距システムならびに撮像装置 |
TR200908688A2 (tr) | 2009-11-17 | 2011-06-21 | Vestel Elektron�K San. Ve T�C. A.�. | Çoklu görüntülü videoda derinlik dengelemeli gürültü azaltımı. |
US8643701B2 (en) | 2009-11-18 | 2014-02-04 | University Of Illinois At Urbana-Champaign | System for executing 3D propagation for depth image-based rendering |
JP5399215B2 (ja) | 2009-11-18 | 2014-01-29 | シャープ株式会社 | 多眼カメラ装置および電子情報機器 |
US8514491B2 (en) | 2009-11-20 | 2013-08-20 | Pelican Imaging Corporation | Capturing and processing of images using monolithic camera array with heterogeneous imagers |
US8497934B2 (en) | 2009-11-25 | 2013-07-30 | Massachusetts Institute Of Technology | Actively addressable aperture light field camera |
KR101608970B1 (ko) | 2009-11-27 | 2016-04-05 | 삼성전자주식회사 | 광 필드 데이터를 이용한 영상 처리 장치 및 방법 |
US8400555B1 (en) | 2009-12-01 | 2013-03-19 | Adobe Systems Incorporated | Focused plenoptic camera employing microlenses with different focal lengths |
US8730338B2 (en) | 2009-12-01 | 2014-05-20 | Nokia Corporation | Set of camera modules hinged on a body and functionally connected to a single actuator |
JP5446797B2 (ja) | 2009-12-04 | 2014-03-19 | 株式会社リコー | 撮像装置 |
US8446492B2 (en) | 2009-12-10 | 2013-05-21 | Honda Motor Co., Ltd. | Image capturing device, method of searching for occlusion region, and program |
JP5387377B2 (ja) | 2009-12-14 | 2014-01-15 | ソニー株式会社 | 画像処理装置、および画像処理方法、並びにプログラム |
WO2011081646A1 (en) | 2009-12-15 | 2011-07-07 | Thomson Licensing | Stereo-image quality and disparity/depth indications |
KR101281961B1 (ko) | 2009-12-21 | 2013-07-03 | 한국전자통신연구원 | 깊이 영상 편집 방법 및 장치 |
US20110153248A1 (en) | 2009-12-23 | 2011-06-23 | Yeming Gu | Ophthalmic quality metric system |
EP2518995B1 (en) | 2009-12-24 | 2018-08-22 | Sharp Kabushiki Kaisha | Multocular image pickup apparatus and multocular image pickup method |
JP4983905B2 (ja) | 2009-12-25 | 2012-07-25 | カシオ計算機株式会社 | 撮像装置、3dモデリングデータ生成方法、および、プログラム |
KR101643607B1 (ko) | 2009-12-30 | 2016-08-10 | 삼성전자주식회사 | 영상 데이터 생성 방법 및 장치 |
CN102117576A (zh) | 2009-12-31 | 2011-07-06 | 鸿富锦精密工业(深圳)有限公司 | 电子相框 |
CN102118551A (zh) | 2009-12-31 | 2011-07-06 | 鸿富锦精密工业(深圳)有限公司 | 成像装置 |
CN102131044B (zh) | 2010-01-20 | 2014-03-26 | 鸿富锦精密工业(深圳)有限公司 | 相机模组 |
WO2011097508A2 (en) | 2010-02-04 | 2011-08-11 | University Of Southern California | Combined spectral and polarimetry imaging and diagnostics |
US8593512B2 (en) | 2010-02-05 | 2013-11-26 | Creative Technology Ltd | Device and method for scanning an object on a working surface |
US8326142B2 (en) | 2010-02-12 | 2012-12-04 | Sri International | Optical image systems |
JP5387856B2 (ja) | 2010-02-16 | 2014-01-15 | ソニー株式会社 | 画像処理装置、画像処理方法、画像処理プログラムおよび撮像装置 |
US8648918B2 (en) | 2010-02-18 | 2014-02-11 | Sony Corporation | Method and system for obtaining a point spread function using motion information |
JP5728673B2 (ja) | 2010-02-19 | 2015-06-03 | デュアル・アパーチャー・インターナショナル・カンパニー・リミテッド | 多開口画像データの処理 |
KR101802238B1 (ko) | 2010-02-23 | 2017-11-29 | 삼성전자주식회사 | 휴대용 단말기에서 입체 영상 데이터를 생성하기 위한 장치 및 방법 |
KR20110097690A (ko) | 2010-02-23 | 2011-08-31 | 삼성전자주식회사 | 다시점 정지 영상 서비스 제공 방법 및 그 장치, 다시점 정지 영상 서비스 수신 방법 및 그 장치 |
EP2539759A1 (en) | 2010-02-28 | 2013-01-02 | Osterhout Group, Inc. | Local advertising content on an interactive head-mounted eyepiece |
JP5776173B2 (ja) | 2010-03-01 | 2015-09-09 | 株式会社リコー | 撮像装置及び距離測定装置 |
US8817015B2 (en) | 2010-03-03 | 2014-08-26 | Adobe Systems Incorporated | Methods, apparatus, and computer-readable storage media for depth-based rendering of focused plenoptic camera data |
US20110222757A1 (en) | 2010-03-10 | 2011-09-15 | Gbo 3D Technology Pte. Ltd. | Systems and methods for 2D image and spatial data capture for 3D stereo imaging |
US20110221950A1 (en) | 2010-03-12 | 2011-09-15 | Doeke Jolt Oostra | Camera device, wafer scale package |
KR20130004505A (ko) | 2010-03-17 | 2013-01-10 | 펠리칸 이매징 코포레이션 | 이미징 렌즈 어레이를 마스터링하기 위한 제작 공정 |
US8890934B2 (en) | 2010-03-19 | 2014-11-18 | Panasonic Corporation | Stereoscopic image aligning apparatus, stereoscopic image aligning method, and program of the same |
WO2011114572A1 (ja) | 2010-03-19 | 2011-09-22 | 富士フイルム株式会社 | 撮像装置、方法およびプログラム並びにこれに用いる記録媒体 |
WO2011116345A1 (en) | 2010-03-19 | 2011-09-22 | Invisage Technologies, Inc. | Dark current reduction in image sensors via dynamic electrical biasing |
US8558903B2 (en) | 2010-03-25 | 2013-10-15 | Apple Inc. | Accelerometer / gyro-facilitated video stabilization |
US8285033B2 (en) | 2010-04-01 | 2012-10-09 | Seiko Epson Corporation | Bi-affinity filter: a bilateral type filter for color images |
US20110242342A1 (en) | 2010-04-05 | 2011-10-06 | Qualcomm Incorporated | Combining data from multiple image sensors |
US8896668B2 (en) | 2010-04-05 | 2014-11-25 | Qualcomm Incorporated | Combining data from multiple image sensors |
US8600186B2 (en) | 2010-04-26 | 2013-12-03 | City University Of Hong Kong | Well focused catadioptric image acquisition |
US9053573B2 (en) | 2010-04-29 | 2015-06-09 | Personify, Inc. | Systems and methods for generating a virtual camera viewpoint for an image |
US20110267264A1 (en) | 2010-04-29 | 2011-11-03 | Mccarthy John | Display system with multiple optical sensors |
US20130250150A1 (en) | 2010-05-03 | 2013-09-26 | Michael R. Malone | Devices and methods for high-resolution image and video capture |
US9256974B1 (en) | 2010-05-04 | 2016-02-09 | Stephen P Hines | 3-D motion-parallax portable display software application |
US8885890B2 (en) | 2010-05-07 | 2014-11-11 | Microsoft Corporation | Depth map confidence filtering |
KR101756910B1 (ko) | 2010-05-11 | 2017-07-26 | 삼성전자주식회사 | 감쇠 패턴을 포함하는 마스크를 이용한 광 필드 영상 처리 장치 및 방법 |
KR20110124473A (ko) | 2010-05-11 | 2011-11-17 | 삼성전자주식회사 | 다중시점 영상을 위한 3차원 영상 생성 장치 및 방법 |
US20130147979A1 (en) | 2010-05-12 | 2013-06-13 | Pelican Imaging Corporation | Systems and methods for extending dynamic range of imager arrays by controlling pixel analog gain |
JP5545016B2 (ja) | 2010-05-12 | 2014-07-09 | ソニー株式会社 | 撮像装置 |
CN103004180A (zh) | 2010-05-12 | 2013-03-27 | 派力肯影像公司 | 成像器阵列和阵列照相机的架构 |
WO2011142774A1 (en) | 2010-05-14 | 2011-11-17 | Omnivision Technologies, Inc. | Alternative color image array and associated methods |
US8576293B2 (en) | 2010-05-18 | 2013-11-05 | Aptina Imaging Corporation | Multi-channel imager |
SG176327A1 (en) | 2010-05-20 | 2011-12-29 | Sony Corp | A system and method of image processing |
US8602887B2 (en) | 2010-06-03 | 2013-12-10 | Microsoft Corporation | Synthesis of information from multiple audiovisual sources |
US20120062697A1 (en) | 2010-06-09 | 2012-03-15 | Chemimage Corporation | Hyperspectral imaging sensor for tracking moving targets |
DE102010024666A1 (de) * | 2010-06-18 | 2011-12-22 | Hella Kgaa Hueck & Co. | Verfahren zur optischen Selbstdiagnose eines Kamerasystems und Vorrichtung zur Durchführung eines solchen Verfahrens |
US20110310980A1 (en) | 2010-06-22 | 2011-12-22 | Qualcomm Mems Technologies, Inc. | Apparatus and methods for processing frames of video data across a display interface using a block-based encoding scheme and a tag id |
KR20120000485A (ko) | 2010-06-25 | 2012-01-02 | 삼성전자주식회사 | 예측 모드를 이용한 깊이 영상 부호화 장치 및 방법 |
CN101883291B (zh) | 2010-06-29 | 2012-12-19 | 上海大学 | 感兴趣区域增强的视点绘制方法 |
US8493432B2 (en) | 2010-06-29 | 2013-07-23 | Mitsubishi Electric Research Laboratories, Inc. | Digital refocusing for wide-angle images using axial-cone cameras |
EP2403234A1 (en) | 2010-06-29 | 2012-01-04 | Koninklijke Philips Electronics N.V. | Method and system for constructing a compound image from data obtained by an array of image capturing devices |
CN102959970B (zh) | 2010-06-30 | 2015-04-15 | 富士胶片株式会社 | 在立体显示成像期间确定成像范围内障碍物的装置、方法和程序 |
JP5392199B2 (ja) | 2010-07-09 | 2014-01-22 | ソニー株式会社 | 画像処理装置および方法 |
GB2482022A (en) | 2010-07-16 | 2012-01-18 | St Microelectronics Res & Dev | Method for measuring resolution and aberration of lens and sensor |
US9406132B2 (en) | 2010-07-16 | 2016-08-02 | Qualcomm Incorporated | Vision-based quality metric for three dimensional video |
US8386964B2 (en) | 2010-07-21 | 2013-02-26 | Microsoft Corporation | Interactive image matting |
US20120019700A1 (en) | 2010-07-26 | 2012-01-26 | American Technologies Network Corporation | Optical system with automatic mixing of daylight and thermal vision digital video signals |
US20120026342A1 (en) | 2010-07-27 | 2012-02-02 | Xiaoguang Yu | Electronic system communicating with image sensor |
US20120026451A1 (en) | 2010-07-29 | 2012-02-02 | Lensvector Inc. | Tunable liquid crystal lens with single sided contacts |
US8605136B2 (en) | 2010-08-10 | 2013-12-10 | Sony Corporation | 2D to 3D user interface content data conversion |
CN102375199B (zh) | 2010-08-11 | 2015-06-03 | 鸿富锦精密工业(深圳)有限公司 | 相机模组 |
US8428342B2 (en) | 2010-08-12 | 2013-04-23 | At&T Intellectual Property I, L.P. | Apparatus and method for providing three dimensional media content |
US8836793B1 (en) | 2010-08-13 | 2014-09-16 | Opto-Knowledge Systems, Inc. | True color night vision (TCNV) fusion |
US8493482B2 (en) | 2010-08-18 | 2013-07-23 | Apple Inc. | Dual image sensor image processing system and method |
US8749694B2 (en) | 2010-08-27 | 2014-06-10 | Adobe Systems Incorporated | Methods and apparatus for rendering focused plenoptic camera data using super-resolved demosaicing |
US8724000B2 (en) | 2010-08-27 | 2014-05-13 | Adobe Systems Incorporated | Methods and apparatus for super-resolution in integral photography |
US8665341B2 (en) | 2010-08-27 | 2014-03-04 | Adobe Systems Incorporated | Methods and apparatus for rendering output images with simulated artistic effects from focused plenoptic camera data |
WO2012029298A1 (ja) | 2010-08-31 | 2012-03-08 | パナソニック株式会社 | 撮影装置および画像処理方法 |
GB2483434A (en) | 2010-08-31 | 2012-03-14 | Sony Corp | Detecting stereoscopic disparity by comparison with subset of pixel change points |
US20120056982A1 (en) | 2010-09-08 | 2012-03-08 | Microsoft Corporation | Depth camera based on structured light and stereo vision |
US9013550B2 (en) | 2010-09-09 | 2015-04-21 | Qualcomm Incorporated | Online reference generation and tracking for multi-user augmented reality |
US9013634B2 (en) | 2010-09-14 | 2015-04-21 | Adobe Systems Incorporated | Methods and apparatus for video completion |
WO2012036902A1 (en) | 2010-09-14 | 2012-03-22 | Thomson Licensing | Compression methods and apparatus for occlusion data |
US9565415B2 (en) | 2010-09-14 | 2017-02-07 | Thomson Licensing | Method of presenting three-dimensional content with disparity adjustments |
US8780251B2 (en) | 2010-09-20 | 2014-07-15 | Canon Kabushiki Kaisha | Image capture with focus adjustment |
WO2012039043A1 (ja) | 2010-09-22 | 2012-03-29 | 富士通株式会社 | ステレオ画像生成装置、ステレオ画像生成方法及びステレオ画像生成用コンピュータプログラム |
US20120086803A1 (en) | 2010-10-11 | 2012-04-12 | Malzbender Thomas G | Method and system for distance estimation using projected symbol sequences |
US20140192238A1 (en) | 2010-10-24 | 2014-07-10 | Linx Computational Imaging Ltd. | System and Method for Imaging and Image Processing |
US8531535B2 (en) | 2010-10-28 | 2013-09-10 | Google Inc. | Methods and systems for processing a video for stabilization and retargeting |
JP5657343B2 (ja) | 2010-10-28 | 2015-01-21 | 株式会社ザクティ | 電子機器 |
US9876953B2 (en) | 2010-10-29 | 2018-01-23 | Ecole Polytechnique Federale De Lausanne (Epfl) | Omnidirectional sensor array system |
US9137503B2 (en) | 2010-11-03 | 2015-09-15 | Sony Corporation | Lens and color filter arrangement, super-resolution camera system and method |
US9065991B2 (en) | 2010-11-04 | 2015-06-23 | Lensvector Inc. | Methods of adjustment free manufacture of focus free camera modules |
US20120113232A1 (en) | 2010-11-10 | 2012-05-10 | Sony Pictures Technologies Inc. | Multiple camera system and method for selectable interaxial separation |
WO2012064106A2 (en) | 2010-11-12 | 2012-05-18 | Samsung Electronics Co., Ltd. | Method and apparatus for video stabilization by compensating for view direction of camera |
MY150361A (en) | 2010-12-03 | 2013-12-31 | Mimos Berhad | Method of image segmentation using intensity and depth information |
US20130258067A1 (en) | 2010-12-08 | 2013-10-03 | Thomson Licensing | System and method for trinocular depth acquisition with triangular sensor |
US8878950B2 (en) | 2010-12-14 | 2014-11-04 | Pelican Imaging Corporation | Systems and methods for synthesizing high resolution images using super-resolution processes |
JP5963422B2 (ja) | 2010-12-17 | 2016-08-03 | キヤノン株式会社 | 撮像装置、表示装置、コンピュータプログラムおよび立体像表示システム |
US9177381B2 (en) | 2010-12-22 | 2015-11-03 | Nani Holdings IP, LLC | Depth estimate determination, systems and methods |
US8682107B2 (en) | 2010-12-22 | 2014-03-25 | Electronics And Telecommunications Research Institute | Apparatus and method for creating 3D content for oriental painting |
US8565709B2 (en) | 2010-12-30 | 2013-10-22 | Apple Inc. | Digital signal filter |
TWI535292B (zh) | 2010-12-31 | 2016-05-21 | 派力肯影像公司 | 使用具有異質的成像器的整體式相機陣列的影像捕捉和處理 |
JP5699609B2 (ja) | 2011-01-06 | 2015-04-15 | ソニー株式会社 | 画像処理装置および画像処理方法 |
EP2666048A4 (en) | 2011-01-20 | 2014-06-04 | Fivefocal Llc | PASSIV ATHERMALIZED INFRARED IMAGING SYSTEM AND MANUFACTURING METHOD THEREFOR |
US8581995B2 (en) | 2011-01-25 | 2013-11-12 | Aptina Imaging Corporation | Method and apparatus for parallax correction in fused array imaging systems |
US8717467B2 (en) | 2011-01-25 | 2014-05-06 | Aptina Imaging Corporation | Imaging systems with array cameras for depth sensing |
JP5594477B2 (ja) | 2011-01-26 | 2014-09-24 | Nltテクノロジー株式会社 | 画像表示装置、画像表示方法、及びプログラム |
US9235894B2 (en) | 2011-01-27 | 2016-01-12 | Metaio Gmbh | Method for determining correspondences between a first and a second image, and method for determining the pose of a camera |
US8401242B2 (en) * | 2011-01-31 | 2013-03-19 | Microsoft Corporation | Real-time camera tracking using depth maps |
US20120200726A1 (en) | 2011-02-09 | 2012-08-09 | Research In Motion Limited | Method of Controlling the Depth of Field for a Small Sensor Camera Using an Extension for EDOF |
US8717464B2 (en) | 2011-02-09 | 2014-05-06 | Blackberry Limited | Increased low light sensitivity for image sensors by combining quantum dot sensitivity to visible and infrared light |
US8698885B2 (en) | 2011-02-14 | 2014-04-15 | Intuitive Surgical Operations, Inc. | Methods and apparatus for demosaicing images with highly correlated color channels |
US20140176592A1 (en) | 2011-02-15 | 2014-06-26 | Lytro, Inc. | Configuring two-dimensional image processing based on light-field parameters |
US8406548B2 (en) | 2011-02-28 | 2013-03-26 | Sony Corporation | Method and apparatus for performing a blur rendering process on an image |
BR112012027306A2 (pt) | 2011-02-28 | 2016-08-02 | Fujifilm Corp | aparelho de geração de imagem colorida |
US8537245B2 (en) | 2011-03-04 | 2013-09-17 | Hand Held Products, Inc. | Imaging and decoding device with quantum dot imager |
CA2769358C (en) | 2011-03-08 | 2016-06-07 | Research In Motion Limited | Quantum dot image sensor with dummy pixels used for intensity calculations |
US9565449B2 (en) | 2011-03-10 | 2017-02-07 | Qualcomm Incorporated | Coding multiview video plus depth content |
WO2012125706A2 (en) * | 2011-03-15 | 2012-09-20 | Board Of Trustees Of Michigan State University | Real-time 3d shape measurement system |
KR101792501B1 (ko) | 2011-03-16 | 2017-11-21 | 한국전자통신연구원 | 특징기반의 스테레오 매칭 방법 및 장치 |
US20120249853A1 (en) | 2011-03-28 | 2012-10-04 | Marc Krolczyk | Digital camera for reviewing related images |
US8824821B2 (en) | 2011-03-28 | 2014-09-02 | Sony Corporation | Method and apparatus for performing user inspired visual effects rendering on an image |
US8422770B2 (en) | 2011-03-30 | 2013-04-16 | Mckesson Financial Holdings | Method, apparatus and computer program product for displaying normalized medical images |
US9030528B2 (en) | 2011-04-04 | 2015-05-12 | Apple Inc. | Multi-zone imaging sensor and lens array |
FR2974449A1 (fr) | 2011-04-22 | 2012-10-26 | Commissariat Energie Atomique | Circuit integre imageur et dispositif de capture d'images stereoscopiques |
US20120274626A1 (en) | 2011-04-29 | 2012-11-01 | Himax Media Solutions, Inc. | Stereoscopic Image Generating Apparatus and Method |
WO2012149971A1 (en) | 2011-05-04 | 2012-11-08 | Sony Ericsson Mobile Communications Ab | Method, graphical user interface, and computer program product for processing of a light field image |
KR101973822B1 (ko) | 2011-05-11 | 2019-04-29 | 포토네이션 케이맨 리미티드 | 어레이 카메라 이미지 데이터를 송신 및 수신하기 위한 시스템들 및 방법들 |
US8843346B2 (en) | 2011-05-13 | 2014-09-23 | Amazon Technologies, Inc. | Using spatial information with device interaction |
US9536312B2 (en) * | 2011-05-16 | 2017-01-03 | Microsoft Corporation | Depth reconstruction using plural depth capture units |
US8629901B2 (en) | 2011-05-19 | 2014-01-14 | National Taiwan University | System and method of revising depth of a 3D image pair |
US20120293489A1 (en) | 2011-05-20 | 2012-11-22 | Himax Technologies Limited | Nonlinear depth remapping system and method thereof |
JP5797016B2 (ja) | 2011-05-30 | 2015-10-21 | キヤノン株式会社 | 画像処理装置、画像処理方法、及びプログラム |
JP5762142B2 (ja) | 2011-05-31 | 2015-08-12 | キヤノン株式会社 | 撮像装置、画像処理装置およびその方法 |
US8823813B2 (en) | 2011-06-06 | 2014-09-02 | Apple Inc. | Correcting rolling shutter using image stabilization |
US8648919B2 (en) | 2011-06-06 | 2014-02-11 | Apple Inc. | Methods and systems for image stabilization |
JP5882455B2 (ja) | 2011-06-15 | 2016-03-09 | マイクロソフト テクノロジー ライセンシング,エルエルシー | 高解像度マルチスペクトル画像キャプチャ |
JP2013005259A (ja) | 2011-06-17 | 2013-01-07 | Sony Corp | 画像処理装置、および画像処理方法、並びにプログラム |
US20130265459A1 (en) | 2011-06-28 | 2013-10-10 | Pelican Imaging Corporation | Optical arrangements for use with an array camera |
WO2013003276A1 (en) | 2011-06-28 | 2013-01-03 | Pelican Imaging Corporation | Optical arrangements for use with an array camera |
US8773513B2 (en) | 2011-07-01 | 2014-07-08 | Seiko Epson Corporation | Context and epsilon stereo constrained correspondence matching |
US9300946B2 (en) | 2011-07-08 | 2016-03-29 | Personify, Inc. | System and method for generating a depth map and fusing images from a camera array |
JP2013024886A (ja) | 2011-07-14 | 2013-02-04 | Sanyo Electric Co Ltd | 撮像装置 |
JP5780865B2 (ja) | 2011-07-14 | 2015-09-16 | キヤノン株式会社 | 画像処理装置、撮像システム、画像処理システム |
US9363535B2 (en) | 2011-07-22 | 2016-06-07 | Qualcomm Incorporated | Coding motion depth maps with depth range variation |
US9264689B2 (en) | 2011-08-04 | 2016-02-16 | Semiconductor Components Industries, Llc | Systems and methods for color compensation in multi-view video |
TWI561066B (en) | 2011-08-09 | 2016-12-01 | Samsung Electronics Co Ltd | Method and apparatus for encoding and decoding depth map of multi-view video data |
US8432435B2 (en) | 2011-08-10 | 2013-04-30 | Seiko Epson Corporation | Ray image modeling for fast catadioptric light field rendering |
US8866951B2 (en) | 2011-08-24 | 2014-10-21 | Aptina Imaging Corporation | Super-resolution imaging systems |
US8704895B2 (en) | 2011-08-29 | 2014-04-22 | Qualcomm Incorporated | Fast calibration of displays using spectral-based colorimetrically calibrated multicolor camera |
US9009952B2 (en) | 2011-08-29 | 2015-04-21 | Asm Technology Singapore Pte. Ltd. | Apparatus for assembling a lens module and an image sensor to form a camera module, and a method of assembling the same |
US20130070060A1 (en) | 2011-09-19 | 2013-03-21 | Pelican Imaging Corporation | Systems and methods for determining depth from multiple views of a scene that include aliasing using hypothesized fusion |
US9100639B2 (en) | 2011-09-20 | 2015-08-04 | Panasonic Intellectual Property Management Co., Ltd. | Light field imaging device and image processing device |
CN103828361B (zh) | 2011-09-21 | 2015-04-29 | 富士胶片株式会社 | 图像处理装置、方法,立体图像获取装置,便携式电子设备,打印机和立体图像播放器装置 |
US8724893B2 (en) | 2011-09-27 | 2014-05-13 | Thomson Licensing | Method and system for color look up table generation |
US8908083B2 (en) | 2011-09-28 | 2014-12-09 | Apple Inc. | Dynamic autofocus operations |
JP6140709B2 (ja) | 2011-09-28 | 2017-05-31 | ペリカン イメージング コーポレイション | 明視野画像ファイルを符号化および復号するためのシステムおよび方法 |
JP5831105B2 (ja) | 2011-09-30 | 2015-12-09 | ソニー株式会社 | 撮像装置及び撮像方法 |
EP2766767A4 (en) | 2011-10-11 | 2015-05-13 | Pelican Imaging Corp | LENS STACKAGE ARRAYS WITH ADAPTIVE OPTICAL ELEMENTS |
EP2592823A3 (en) | 2011-10-12 | 2013-06-19 | Canon Kabushiki Kaisha | Image-capturing device |
US20130107061A1 (en) | 2011-10-31 | 2013-05-02 | Ankit Kumar | Multi-resolution ip camera |
US9692991B2 (en) | 2011-11-04 | 2017-06-27 | Qualcomm Incorporated | Multispectral imaging system |
JP5149435B1 (ja) | 2011-11-04 | 2013-02-20 | 株式会社東芝 | 映像処理装置および映像処理方法 |
EP2590138B1 (en) | 2011-11-07 | 2019-09-11 | Flir Systems AB | Gas visualization arrangements, devices, and methods |
GB201119405D0 (en) * | 2011-11-10 | 2011-12-21 | Univ East Anglia | Spectral estimation method,system and reference target design system |
US20140313315A1 (en) | 2011-11-15 | 2014-10-23 | Technion Research & Development Foundation Limited | Method and system for transmitting light |
US20130121559A1 (en) | 2011-11-16 | 2013-05-16 | Sharp Laboratories Of America, Inc. | Mobile device with three dimensional augmented reality |
US20130127988A1 (en) | 2011-11-17 | 2013-05-23 | Sen Wang | Modifying the viewpoint of a digital image |
US9661310B2 (en) | 2011-11-28 | 2017-05-23 | ArcSoft Hanzhou Co., Ltd. | Image depth recovering method and stereo image fetching device thereof |
JP6019568B2 (ja) | 2011-11-28 | 2016-11-02 | ソニー株式会社 | 画像処理装置および方法、記録媒体、並びに、プログラム |
EP2600316A1 (en) | 2011-11-29 | 2013-06-05 | Inria Institut National de Recherche en Informatique et en Automatique | Method, system and software program for shooting and editing a film comprising at least one image of a 3D computer-generated animation |
KR101862404B1 (ko) | 2011-12-09 | 2018-05-29 | 엘지이노텍 주식회사 | 스테레오 영상의 노이즈 제거장치 및 방법 |
US9117295B2 (en) | 2011-12-20 | 2015-08-25 | Adobe Systems Incorporated | Refinement of depth maps by fusion of multiple estimates |
WO2013099169A1 (ja) | 2011-12-27 | 2013-07-04 | パナソニック株式会社 | ステレオ撮影装置 |
US8941722B2 (en) | 2012-01-03 | 2015-01-27 | Sony Corporation | Automatic intelligent focus control of video |
WO2013119706A1 (en) | 2012-02-06 | 2013-08-15 | Pelican Imaging Corporation | Systems and methods for extending dynamic range of imager arrays by controlling pixel analog gain |
US9172889B2 (en) | 2012-02-09 | 2015-10-27 | Semiconductor Components Industries, Llc | Imaging systems and methods for generating auto-exposed high-dynamic-range images |
US9412206B2 (en) | 2012-02-21 | 2016-08-09 | Pelican Imaging Corporation | Systems and methods for the manipulation of captured light field image data |
JP5860304B2 (ja) | 2012-02-23 | 2016-02-16 | キヤノン株式会社 | 撮像装置及びその制御方法、プログラム、並びに記憶媒体 |
JP6112824B2 (ja) | 2012-02-28 | 2017-04-12 | キヤノン株式会社 | 画像処理方法および装置、プログラム。 |
US8831377B2 (en) | 2012-02-28 | 2014-09-09 | Lytro, Inc. | Compensating for variation in microlens position during light-field image processing |
JP5924978B2 (ja) | 2012-02-28 | 2016-05-25 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
EP2637139A1 (en) | 2012-03-05 | 2013-09-11 | Thomson Licensing | Method and apparatus for bi-layer segmentation |
WO2013151883A1 (en) * | 2012-04-02 | 2013-10-10 | Intel Corporation | Systems, methods, and computer program products for runtime adjustment of image warping parameters in a multi-camera system |
US9156168B2 (en) | 2012-04-13 | 2015-10-13 | Automation Engineering, Inc. | Active alignment using continuous motion sweeps and temporal interpolation |
JP2015523102A (ja) | 2012-04-16 | 2015-08-13 | チルドレンズ ナショナル メディカル センターChildren’S National Medical Center | 手術及び介入処置での追跡及び制御の為のデュアルモードステレオイメージングシステム |
US8994845B2 (en) | 2012-04-27 | 2015-03-31 | Blackberry Limited | System and method of adjusting a camera based on image data |
US9210392B2 (en) | 2012-05-01 | 2015-12-08 | Pelican Imaging Coporation | Camera modules patterned with pi filter groups |
WO2013166215A1 (en) | 2012-05-01 | 2013-11-07 | Pelican Imaging Corporation | CAMERA MODULES PATTERNED WITH pi FILTER GROUPS |
US20150085073A1 (en) | 2012-05-02 | 2015-03-26 | Koninklijke Philips N.V. | Quality metric for processing 3d video |
EP2820838B1 (en) | 2012-05-09 | 2020-01-08 | Lytro, Inc. | Optimization of optical systems for improved light field capture and manipulation |
US9846960B2 (en) | 2012-05-31 | 2017-12-19 | Microsoft Technology Licensing, Llc | Automated camera array calibration |
US9179126B2 (en) | 2012-06-01 | 2015-11-03 | Ostendo Technologies, Inc. | Spatio-temporal light field cameras |
JP2015527764A (ja) | 2012-06-08 | 2015-09-17 | ノキア コーポレイション | マルチ・フレーム画像キャリブレータ |
EP2677734A3 (en) | 2012-06-18 | 2016-01-13 | Sony Mobile Communications AB | Array camera imaging system and method |
KR20150023907A (ko) | 2012-06-28 | 2015-03-05 | 펠리칸 이매징 코포레이션 | 결함있는 카메라 어레이들, 광학 어레이들 및 센서들을 검출하기 위한 시스템들 및 방법들 |
JP5929553B2 (ja) | 2012-06-28 | 2016-06-08 | ソニー株式会社 | 画像処理装置、撮像装置、画像処理方法およびプログラム |
US20140002674A1 (en) | 2012-06-30 | 2014-01-02 | Pelican Imaging Corporation | Systems and Methods for Manufacturing Camera Modules Using Active Alignment of Lens Stack Arrays and Sensors |
US8896594B2 (en) | 2012-06-30 | 2014-11-25 | Microsoft Corporation | Depth sensing with depth-adaptive illumination |
KR20140010553A (ko) * | 2012-07-13 | 2014-01-27 | 삼성전자주식회사 | 픽셀 어레이, 이를 포함하는 이미지 센서, 및 상기 이미지 센서의 로컬 다크 전류 보상 방법 |
US9147251B2 (en) | 2012-08-03 | 2015-09-29 | Flyby Media, Inc. | Systems and methods for efficient 3D tracking of weakly textured planar surfaces for augmented reality applications |
US8988566B2 (en) | 2012-08-09 | 2015-03-24 | Omnivision Technologies, Inc. | Lens array for partitioned image sensor having color filters |
EP4296963A3 (en) | 2012-08-21 | 2024-03-27 | Adeia Imaging LLC | Method for depth detection in images captured using array cameras |
CN104685513B (zh) | 2012-08-23 | 2018-04-27 | 派力肯影像公司 | 根据使用阵列源捕捉的低分辨率图像的基于特征的高分辨率运动估计 |
JP6458988B2 (ja) | 2012-08-31 | 2019-01-30 | ソニー株式会社 | 画像処理装置および画像処理方法、並びに情報処理装置 |
US9214013B2 (en) | 2012-09-14 | 2015-12-15 | Pelican Imaging Corporation | Systems and methods for correcting user identified artifacts in light field images |
US9373088B2 (en) | 2012-09-17 | 2016-06-21 | The Board Of Trustees Of The Leland Stanford Junior University | Brain machine interface utilizing a discrete action state decoder in parallel with a continuous decoder for a neural prosthetic device |
US9143673B2 (en) | 2012-09-19 | 2015-09-22 | Google Inc. | Imaging device with a plurality of pixel arrays |
US20140092281A1 (en) | 2012-09-28 | 2014-04-03 | Pelican Imaging Corporation | Generating Images from Light Fields Utilizing Virtual Viewpoints |
TW201415879A (zh) | 2012-10-12 | 2014-04-16 | Wintek Corp | 影像擷取裝置 |
US9609190B2 (en) | 2012-10-31 | 2017-03-28 | Invisage Technologies, Inc. | Devices, methods, and systems for expanded-field-of-view image and video capture |
US9143711B2 (en) | 2012-11-13 | 2015-09-22 | Pelican Imaging Corporation | Systems and methods for array camera focal plane control |
KR101954192B1 (ko) | 2012-11-15 | 2019-03-05 | 엘지전자 주식회사 | 어레이 카메라, 휴대 단말기 및 그 동작 방법 |
US9076205B2 (en) | 2012-11-19 | 2015-07-07 | Adobe Systems Incorporated | Edge direction and curve based image de-blurring |
CN104010183B (zh) | 2012-11-21 | 2017-03-01 | 豪威科技股份有限公司 | 包括至少一个拜耳型摄像机的阵列***及关联的方法 |
WO2014083489A1 (en) | 2012-11-28 | 2014-06-05 | Corephotonics Ltd. | High-resolution thin multi-aperture imaging systems |
US9001226B1 (en) | 2012-12-04 | 2015-04-07 | Lytro, Inc. | Capturing and relighting images using multiple devices |
US9088369B2 (en) | 2012-12-28 | 2015-07-21 | Synergy Microwave Corporation | Self injection locked phase locked looped optoelectronic oscillator |
US20140183334A1 (en) | 2013-01-03 | 2014-07-03 | Visera Technologies Company Limited | Image sensor for light field device and manufacturing method thereof |
WO2014107634A2 (en) | 2013-01-05 | 2014-07-10 | Tinz Optics, Inc. | Methods and apparatus relating to the use of multipe optical chains |
KR20140094395A (ko) | 2013-01-22 | 2014-07-30 | 삼성전자주식회사 | 복수 개의 마이크로렌즈를 사용하여 촬영하는 촬영 장치 및 그 촬영 방법 |
KR20140099098A (ko) * | 2013-02-01 | 2014-08-11 | 한국전자통신연구원 | 능동 스테레오 매칭 방법 및 그 장치 |
US9769365B1 (en) | 2013-02-15 | 2017-09-19 | Red.Com, Inc. | Dense field imaging |
US9462164B2 (en) | 2013-02-21 | 2016-10-04 | Pelican Imaging Corporation | Systems and methods for generating compressed light field representation data using captured light fields, array geometry, and parallax information |
US9253380B2 (en) | 2013-02-24 | 2016-02-02 | Pelican Imaging Corporation | Thin form factor computational array cameras and modular array cameras |
US20150002734A1 (en) | 2013-07-01 | 2015-01-01 | Motorola Mobility Llc | Electronic Device with Modulated Light Flash Operation for Rolling Shutter Image Sensor |
US9638883B1 (en) | 2013-03-04 | 2017-05-02 | Fotonation Cayman Limited | Passive alignment of array camera modules constructed from lens stack arrays and sensors based upon alignment information obtained during manufacture of array camera modules using an active alignment process |
WO2014138697A1 (en) | 2013-03-08 | 2014-09-12 | Pelican Imaging Corporation | Systems and methods for high dynamic range imaging using array cameras |
US8866912B2 (en) | 2013-03-10 | 2014-10-21 | Pelican Imaging Corporation | System and methods for calibration of an array camera using a single captured image |
US9521416B1 (en) | 2013-03-11 | 2016-12-13 | Kip Peli P1 Lp | Systems and methods for image data compression |
US9106784B2 (en) | 2013-03-13 | 2015-08-11 | Pelican Imaging Corporation | Systems and methods for controlling aliasing in images captured by an array camera for use in super-resolution processing |
WO2014160142A1 (en) | 2013-03-13 | 2014-10-02 | Pelican Imaging Corporation | Systems and methods for using alignment to increase sampling diversity of cameras in an array camera module |
US9519972B2 (en) | 2013-03-13 | 2016-12-13 | Kip Peli P1 Lp | Systems and methods for synthesizing images from image data captured by an array camera using restricted depth of field depth maps in which depth estimation precision varies |
US9888194B2 (en) | 2013-03-13 | 2018-02-06 | Fotonation Cayman Limited | Array camera architecture implementing quantum film image sensors |
WO2014164550A2 (en) | 2013-03-13 | 2014-10-09 | Pelican Imaging Corporation | System and methods for calibration of an array camera |
US9578259B2 (en) | 2013-03-14 | 2017-02-21 | Fotonation Cayman Limited | Systems and methods for reducing motion blur in images or video in ultra low light with array cameras |
US9100586B2 (en) | 2013-03-14 | 2015-08-04 | Pelican Imaging Corporation | Systems and methods for photometric normalization in array cameras |
US9497429B2 (en) | 2013-03-15 | 2016-11-15 | Pelican Imaging Corporation | Extended color processing on pelican array cameras |
WO2014144157A1 (en) | 2013-03-15 | 2014-09-18 | Pelican Imaging Corporation | Optical arrangements for use with an array camera |
US9445003B1 (en) | 2013-03-15 | 2016-09-13 | Pelican Imaging Corporation | Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information |
WO2014150856A1 (en) | 2013-03-15 | 2014-09-25 | Pelican Imaging Corporation | Array camera implementing quantum dot color filters |
US20140267286A1 (en) | 2013-03-15 | 2014-09-18 | Pelican Imaging Corporation | Systems and Methods for Providing an Array Projector |
EP2973476A4 (en) | 2013-03-15 | 2017-01-18 | Pelican Imaging Corporation | Systems and methods for stereo imaging with camera arrays |
US9633442B2 (en) | 2013-03-15 | 2017-04-25 | Fotonation Cayman Limited | Array cameras including an array camera module augmented with a separate camera |
US10122993B2 (en) | 2013-03-15 | 2018-11-06 | Fotonation Limited | Autofocus system for a conventional camera that uses depth information from an array camera |
KR102103983B1 (ko) | 2013-07-31 | 2020-04-23 | 삼성전자주식회사 | 시프트된 마이크로 렌즈 어레이를 구비하는 라이트 필드 영상 획득 장치 |
US9898856B2 (en) | 2013-09-27 | 2018-02-20 | Fotonation Cayman Limited | Systems and methods for depth-assisted perspective distortion correction |
US20150098079A1 (en) | 2013-10-09 | 2015-04-09 | Hilti Aktiengesellschaft | System and method for camera based position and orientation measurement |
US20150104101A1 (en) | 2013-10-14 | 2015-04-16 | Apple Inc. | Method and ui for z depth image segmentation |
WO2015070105A1 (en) | 2013-11-07 | 2015-05-14 | Pelican Imaging Corporation | Methods of manufacturing array camera modules incorporating independently aligned lens stacks |
WO2015074078A1 (en) | 2013-11-18 | 2015-05-21 | Pelican Imaging Corporation | Estimating depth from projected texture using camera arrays |
US9456134B2 (en) | 2013-11-26 | 2016-09-27 | Pelican Imaging Corporation | Array camera configurations incorporating constituent array cameras and constituent cameras |
CN103796004B (zh) * | 2014-02-13 | 2015-09-30 | 西安交通大学 | 一种主动结构光的双目深度感知方法 |
US9979878B2 (en) | 2014-02-21 | 2018-05-22 | Light Labs Inc. | Intuitive camera user interface methods and apparatus |
JP6211435B2 (ja) | 2014-02-26 | 2017-10-11 | 株式会社アドバンテスト | 半導体装置の製造方法 |
US10089740B2 (en) | 2014-03-07 | 2018-10-02 | Fotonation Limited | System and methods for depth regularization and semiautomatic interactive matting using RGB-D images |
JP2017518147A (ja) | 2014-03-28 | 2017-07-06 | インテュイティブ サージカル オペレーションズ, インコーポレイテッド | 手術シーンの定量的三次元撮像 |
WO2015183824A1 (en) | 2014-05-26 | 2015-12-03 | Pelican Imaging Corporation | Autofocus system for a conventional camera that uses depth information from an array camera |
US9521319B2 (en) | 2014-06-18 | 2016-12-13 | Pelican Imaging Corporation | Array cameras and array camera modules including spectral filters disposed outside of a constituent image sensor |
US20150381972A1 (en) * | 2014-06-30 | 2015-12-31 | Microsoft Corporation | Depth estimation using multi-view stereo and a calibrated projector |
US9992483B2 (en) | 2014-09-03 | 2018-06-05 | Intel Corporation | Imaging architecture for depth camera mode with mode switching |
US10250871B2 (en) | 2014-09-29 | 2019-04-02 | Fotonation Limited | Systems and methods for dynamic calibration of array cameras |
-
2015
- 2015-09-29 US US15/515,489 patent/US10250871B2/en active Active
- 2015-09-29 EP EP18205326.4A patent/EP3467776A1/en not_active Withdrawn
- 2015-09-29 EP EP15847754.7A patent/EP3201877B1/en active Active
- 2015-09-29 KR KR1020177011284A patent/KR20170063827A/ko unknown
- 2015-09-29 JP JP2017536232A patent/JP2017531976A/ja active Pending
- 2015-09-29 CN CN201580056436.5A patent/CN107077743B/zh active Active
- 2015-09-29 WO PCT/US2015/053013 patent/WO2016054089A1/en active Application Filing
- 2015-09-29 CN CN202110338576.9A patent/CN113256730B/zh active Active
-
2019
- 2019-04-01 US US16/371,347 patent/US10944961B2/en active Active
-
2021
- 2021-03-08 US US17/195,332 patent/US11546576B2/en active Active
-
2022
- 2022-12-28 US US18/147,368 patent/US20230336707A1/en active Pending
Cited By (54)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US12041360B2 (en) | 2008-05-20 | 2024-07-16 | Adeia Imaging Llc | Capturing and processing of images including occlusions focused on an image sensor by a lens stack array |
US12022207B2 (en) | 2008-05-20 | 2024-06-25 | Adeia Imaging Llc | Capturing and processing of images including occlusions focused on an image sensor by a lens stack array |
US11412158B2 (en) | 2008-05-20 | 2022-08-09 | Fotonation Limited | Capturing and processing of images including occlusions focused on an image sensor by a lens stack array |
US11792538B2 (en) | 2008-05-20 | 2023-10-17 | Adeia Imaging Llc | Capturing and processing of images including occlusions focused on an image sensor by a lens stack array |
US10306120B2 (en) | 2009-11-20 | 2019-05-28 | Fotonation Limited | Capturing and processing of images captured by camera arrays incorporating cameras with telephoto and conventional lenses to generate depth maps |
US10366472B2 (en) | 2010-12-14 | 2019-07-30 | Fotonation Limited | Systems and methods for synthesizing high resolution images using images captured by an array of independently controllable imagers |
US11875475B2 (en) | 2010-12-14 | 2024-01-16 | Adeia Imaging Llc | Systems and methods for synthesizing high resolution images using images captured by an array of independently controllable imagers |
US11423513B2 (en) | 2010-12-14 | 2022-08-23 | Fotonation Limited | Systems and methods for synthesizing high resolution images using images captured by an array of independently controllable imagers |
US10430682B2 (en) | 2011-09-28 | 2019-10-01 | Fotonation Limited | Systems and methods for decoding image files containing depth maps stored as metadata |
US10984276B2 (en) | 2011-09-28 | 2021-04-20 | Fotonation Limited | Systems and methods for encoding image files containing depth maps stored as metadata |
US11729365B2 (en) | 2011-09-28 | 2023-08-15 | Adela Imaging LLC | Systems and methods for encoding image files containing depth maps stored as metadata |
US10311649B2 (en) | 2012-02-21 | 2019-06-04 | Fotonation Limited | Systems and method for performing depth based image editing |
US10334241B2 (en) | 2012-06-28 | 2019-06-25 | Fotonation Limited | Systems and methods for detecting defective camera arrays and optic arrays |
US10261219B2 (en) | 2012-06-30 | 2019-04-16 | Fotonation Limited | Systems and methods for manufacturing camera modules using active alignment of lens stack arrays and sensors |
US11022725B2 (en) | 2012-06-30 | 2021-06-01 | Fotonation Limited | Systems and methods for manufacturing camera modules using active alignment of lens stack arrays and sensors |
US10380752B2 (en) | 2012-08-21 | 2019-08-13 | Fotonation Limited | Systems and methods for estimating depth and visibility from a reference viewpoint for pixels in a set of images captured from different viewpoints |
US12002233B2 (en) | 2012-08-21 | 2024-06-04 | Adeia Imaging Llc | Systems and methods for estimating depth and visibility from a reference viewpoint for pixels in a set of images captured from different viewpoints |
US10462362B2 (en) | 2012-08-23 | 2019-10-29 | Fotonation Limited | Feature based high resolution motion estimation from low resolution images captured using an array source |
US10390005B2 (en) | 2012-09-28 | 2019-08-20 | Fotonation Limited | Generating images from light fields utilizing virtual viewpoints |
US11272161B2 (en) | 2013-03-10 | 2022-03-08 | Fotonation Limited | System and methods for calibration of an array camera |
US11985293B2 (en) | 2013-03-10 | 2024-05-14 | Adeia Imaging Llc | System and methods for calibration of an array camera |
US10958892B2 (en) | 2013-03-10 | 2021-03-23 | Fotonation Limited | System and methods for calibration of an array camera |
US10225543B2 (en) | 2013-03-10 | 2019-03-05 | Fotonation Limited | System and methods for calibration of an array camera |
US11570423B2 (en) | 2013-03-10 | 2023-01-31 | Adeia Imaging Llc | System and methods for calibration of an array camera |
US10127682B2 (en) | 2013-03-13 | 2018-11-13 | Fotonation Limited | System and methods for calibration of an array camera |
US10547772B2 (en) | 2013-03-14 | 2020-01-28 | Fotonation Limited | Systems and methods for reducing motion blur in images or video in ultra low light with array cameras |
US10455218B2 (en) | 2013-03-15 | 2019-10-22 | Fotonation Limited | Systems and methods for estimating depth using stereo array cameras |
US10542208B2 (en) | 2013-03-15 | 2020-01-21 | Fotonation Limited | Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information |
US10638099B2 (en) | 2013-03-15 | 2020-04-28 | Fotonation Limited | Extended color processing on pelican array cameras |
US10182216B2 (en) | 2013-03-15 | 2019-01-15 | Fotonation Limited | Extended color processing on pelican array cameras |
US10674138B2 (en) | 2013-03-15 | 2020-06-02 | Fotonation Limited | Autofocus system for a conventional camera that uses depth information from an array camera |
US10540806B2 (en) | 2013-09-27 | 2020-01-21 | Fotonation Limited | Systems and methods for depth-assisted perspective distortion correction |
US11486698B2 (en) | 2013-11-18 | 2022-11-01 | Fotonation Limited | Systems and methods for estimating depth from projected texture using camera arrays |
US10767981B2 (en) | 2013-11-18 | 2020-09-08 | Fotonation Limited | Systems and methods for estimating depth from projected texture using camera arrays |
US10708492B2 (en) | 2013-11-26 | 2020-07-07 | Fotonation Limited | Array camera configurations incorporating constituent array cameras and constituent cameras |
US10089740B2 (en) | 2014-03-07 | 2018-10-02 | Fotonation Limited | System and methods for depth regularization and semiautomatic interactive matting using RGB-D images |
US10574905B2 (en) | 2014-03-07 | 2020-02-25 | Fotonation Limited | System and methods for depth regularization and semiautomatic interactive matting using RGB-D images |
US11546576B2 (en) | 2014-09-29 | 2023-01-03 | Adeia Imaging Llc | Systems and methods for dynamic calibration of array cameras |
US10250871B2 (en) | 2014-09-29 | 2019-04-02 | Fotonation Limited | Systems and methods for dynamic calibration of array cameras |
US11270110B2 (en) | 2019-09-17 | 2022-03-08 | Boston Polarimetrics, Inc. | Systems and methods for surface modeling using polarization cues |
US11699273B2 (en) | 2019-09-17 | 2023-07-11 | Intrinsic Innovation Llc | Systems and methods for surface modeling using polarization cues |
US11525906B2 (en) | 2019-10-07 | 2022-12-13 | Intrinsic Innovation Llc | Systems and methods for augmentation of sensor systems and imaging systems with polarization |
US11982775B2 (en) | 2019-10-07 | 2024-05-14 | Intrinsic Innovation Llc | Systems and methods for augmentation of sensor systems and imaging systems with polarization |
US11302012B2 (en) | 2019-11-30 | 2022-04-12 | Boston Polarimetrics, Inc. | Systems and methods for transparent object segmentation using polarization cues |
US11842495B2 (en) | 2019-11-30 | 2023-12-12 | Intrinsic Innovation Llc | Systems and methods for transparent object segmentation using polarization cues |
US11580667B2 (en) | 2020-01-29 | 2023-02-14 | Intrinsic Innovation Llc | Systems and methods for characterizing object pose detection and measurement systems |
US11797863B2 (en) | 2020-01-30 | 2023-10-24 | Intrinsic Innovation Llc | Systems and methods for synthesizing data for training statistical models on different imaging modalities including polarized images |
US11953700B2 (en) | 2020-05-27 | 2024-04-09 | Intrinsic Innovation Llc | Multi-aperture polarization optical systems using beam splitters |
US12020455B2 (en) | 2021-03-10 | 2024-06-25 | Intrinsic Innovation Llc | Systems and methods for high dynamic range image reconstruction |
US11954886B2 (en) | 2021-04-15 | 2024-04-09 | Intrinsic Innovation Llc | Systems and methods for six-degree of freedom pose estimation of deformable objects |
US11683594B2 (en) | 2021-04-15 | 2023-06-20 | Intrinsic Innovation Llc | Systems and methods for camera exposure control |
US11290658B1 (en) | 2021-04-15 | 2022-03-29 | Boston Polarimetrics, Inc. | Systems and methods for camera exposure control |
US11689813B2 (en) | 2021-07-01 | 2023-06-27 | Intrinsic Innovation Llc | Systems and methods for high dynamic range imaging using crossed polarizers |
US12052409B2 (en) | 2023-06-22 | 2024-07-30 | Adela Imaging LLC | Systems and methods for encoding image files containing depth maps stored as metadata |
Also Published As
Publication number | Publication date |
---|---|
EP3201877A4 (en) | 2018-03-14 |
CN107077743B (zh) | 2021-03-23 |
US20210281828A1 (en) | 2021-09-09 |
WO2016054089A1 (en) | 2016-04-07 |
US20170244960A1 (en) | 2017-08-24 |
EP3201877A1 (en) | 2017-08-09 |
US11546576B2 (en) | 2023-01-03 |
CN113256730B (zh) | 2023-09-05 |
CN113256730A (zh) | 2021-08-13 |
US20230336707A1 (en) | 2023-10-19 |
US10250871B2 (en) | 2019-04-02 |
KR20170063827A (ko) | 2017-06-08 |
EP3201877B1 (en) | 2018-12-19 |
CN107077743A (zh) | 2017-08-18 |
EP3467776A1 (en) | 2019-04-10 |
US20190230348A1 (en) | 2019-07-25 |
US10944961B2 (en) | 2021-03-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11546576B2 (en) | Systems and methods for dynamic calibration of array cameras | |
US11272161B2 (en) | System and methods for calibration of an array camera | |
CN104685513B (zh) | 根据使用阵列源捕捉的低分辨率图像的基于特征的高分辨率运动估计 | |
JP4942221B2 (ja) | 高解像度仮想焦点面画像生成方法 | |
JP6071257B2 (ja) | 画像処理装置及びその制御方法、並びにプログラム | |
US10621694B2 (en) | Image processing apparatus, system, image processing method, calibration method, and computer-readable recording medium | |
JP2013120435A (ja) | 画像処理装置および画像処理方法、プログラム | |
JP5088973B2 (ja) | 立体撮像装置およびその撮像方法 | |
JP6292785B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
CN111080689B (zh) | 确定面部深度图的方法和装置 | |
JP2011182325A (ja) | 撮像装置 | |
CN111557090A (zh) | 信息处理设备、信息处理方法、程序和可互换透镜 |