JP2016042191A - 撮像装置 - Google Patents
撮像装置 Download PDFInfo
- Publication number
- JP2016042191A JP2016042191A JP2015215671A JP2015215671A JP2016042191A JP 2016042191 A JP2016042191 A JP 2016042191A JP 2015215671 A JP2015215671 A JP 2015215671A JP 2015215671 A JP2015215671 A JP 2015215671A JP 2016042191 A JP2016042191 A JP 2016042191A
- Authority
- JP
- Japan
- Prior art keywords
- imaging
- microlenses
- microlens
- image
- distance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Cameras In General (AREA)
- Automatic Focus Adjustment (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Studio Devices (AREA)
Abstract
Description
この撮像装置は、被写体からの光を集光する撮像レンズと、該撮像レンズにより集光された光を撮影する撮像素子との間の、撮像レンズによって形成される実像と撮像素子との間に配される位置に配置されたマイクロレンズアレイを備えている。
本発明の一態様は、被写体からの光を集光する撮像レンズと、該撮像レンズにより集光された光を撮影して画像信号を検出する撮像素子と、前記撮像レンズにより結像される実像を、前記撮像素子の撮像面に結像させる位置に配置されたマイクロレンズアレイと、を備え、該マイクロレンズアレイが、焦点距離が等しく、かつ、有効径が異なる2種以上のマイクロレンズをアレイ状に配列して構成されており、該マイクロレンズがそれぞれ、前記撮像素子の複数の画素に像を結像させる撮像装置を提供する。
また、撮像素子により検出された同一種類の複数の前記マイクロレンズにそれぞれ割り当てられた複数の画素からの画像信号を用いてステレオマッチングを行って、前記マイクロレンズの種類別に複数種類の距離情報を算出する種類別距離情報算出部と、該種類別距離情報算出部により算出された一の種類の距離情報を用いて、他の種類の距離情報を補間する補間部とを備えることで、異なる有効径を有する複数種のマイクロレンズを介して撮像素子により検出された複数種の画像信号を用いて、距離情報算出部により複数種の距離情報が算出され、これにより、広い測定範囲にわたる距離計測および分解能の高い距離計測を両立することができる。特に、撮像素子により画像信号が検出されると、種類別距離情報算出部が、同一種類の複数のマイクロレンズに割り当てられた複数の画素からの画像信号を用いてステレオマッチングを行うことにより、マイクロレンズの種類別に複数種類の距離情報を算出する。そして、補間部が、位置の種類の距離情報を用いて、他の種類の距離情報を補間することにより、広い測定範囲にわたる距離計測および分解能の高い距離計測を両立することができる。
このようにすることで、一方の種類のマイクロレンズの位置における距離情報を、それを挟む他方の種類のマイクロレンズの位置における距離情報によって、精度よく補間することができる。
このようにすることで、一方の種類のマイクロレンズの位置における距離情報を、それを挟む他方の種類のマイクロレンズの位置における距離情報によって、さらに精度よく補間することができる。
このようにすることで、マイクロレンズ自体の大きさではなく、絞りの開度によって有効径を決定することができる。
このようにすることで、隣接するマイクロレンズを通過した光が遮光部材によって遮蔽され、撮像素子上において混じり合うクロストークの発生を未然に防止することができる。
本実施形態に係る撮像装置1は、図1に示されるように、被写体Aを撮影する撮像部2と、該撮像部2により取得された画像信号を処理する画像処理部3と、撮像部2を制御する撮像制御部4と、画像処理部3および撮像制御部4を制御する制御部5と、該制御部5に対して外部信号を入力するI/F部6とを備えている。
撮像素子10は、例えば、RGB原色系の単板CCDである。
具体的には、図4に示される例では、直径が大きい方のマイクロレンズ9aの1つであるマイクロレンズA2に対応する撮像素子10の画素領域で撮影された画像と、直径が大きい方の他のマイクロレンズ9aであるマイクロレンズA3に対応する撮像素子10の画素領域で撮影された画像とを用いてステレオマッチング処理を行い、例えば、2つの画素領域間で対応する画素のx方向の座標値を求める。
距離算出部19は、マイクロレンズアレイ9と実像Bとの距離z、および撮像レンズ7の結像倍率Mを用いて、撮像レンズ7と被写体Aとの距離Zを、下式(1)により求めるようになっている。
ここで、fはマイクロレンズ9a,9bの焦点距離、x2,x3は2つの画素領域間で対応する画素のx方向の座標値である。
図5においてはマイクロレンズ9a,9bの結像倍率がd/4d=1/4である。小さい方のマイクロレンズ9bの直径をΦ、大きい方のマイクロレンズ9aの直径を2Φとすると、領域R1における基線長は6Φ、領域R2,R3における基線長は3Φである。
領域R1,R2,R3の各々における距離の分解能ΔzR1,ΔzR2,ΔzR3は下式(2)により算出される。
ΔzR2=ΔzR3=εμ・Z/3Φ ・・・(2)
ここで、εμは、ステレオマッチング処理における対応点の誤差を示す。
また、図5に示されるように、領域R1,R3は直径2Φのマイクロレンズ9aが視差画像を形成し、領域R2は直径Φのマイクロレンズ9bが視差画像を形成している。このため、距離の測定範囲ΔRR1,ΔRR2,ΔRR3は、下式(3)の通りとなる。
式(3)から領域R2における距離の測定範囲ΔRR2が最も長いことがわかる。
+(Z2・δ・F・S)/(f2・2Φ−Z・δ・F・S)
ΔRR2=(Z2・δ・F・S)/(f2・Φ+Z・δ・F・S)
+(Z2・δ・F・S)/(f2・Φ−Z・δ・F・S) ・・・(3)
式(4)では、領域R34の距離情報ZR34を補間する場合について説明したが、補間部21は、他の領域R3nについても同様な処理を行い、距離情報ZR3nを補間するようになっている。
ZR34=(ZR22+ZR24+ZR25+ZR28)/4 ・・・(5)
ここで、ZR15,ZR25,ZR22,ZR24,ZR25,ZR28は領域R15,R25,R22,R24,R25,R28の距離情報である。
式(5)では、領域R15,R34の距離情報ZR15,ZR34を補間する場合について説明したが、補間部21は、他の領域R1n,R3nについても同様な処理を行い、距離情報ZR1n,ZR3nを補間するようになっている。
本実施形態に係る撮像装置1を用いて、被写体Aと撮像レンズ7との間の距離Zを計測するには、I/F部6を介してISO感度、露出などの撮影条件を設定した後、図示しないシャッタボタンを半押しにすることにより、プリ撮影モードに入る。被写体Aからの光は撮像レンズ7を介して撮像部2内に入り、実像Bを結像した後にマイクロレンズアレイ9によって集光され撮像素子10により撮影される。撮像素子10により取得された画像信号は、A/D変換器13によってディジタル信号に変換された後、バッファ14に転送され格納される。
同種のマイクロレンズ9a,9bに対応する画素領域についてそれぞれ算出された距離情報Zは、バッファ20に転送され、その後、補間部21に転送されて、補間される。
また、マイクロレンズ9a,9b異ならせるために、直径の異なる2種類のマイクロレンズ9a,9bをアレイ状に配列することとしたが、これに代えて、各マイクロレンズ9a,9bに該マイクロレンズの有効径を決定する絞りを設け、該絞りの開度を異ならせることにより、各マイクロレンズ9a,9bの有効径を異ならせることにしてもよい。
また、信号処理部15において、公知のデモザイキング処理およびホワイトバランス処理が行われた各画素RGBの三板状態の画像信号を生成することにしたが、これに代えて、さらに、式(6)を用いてYCbCr信号に変換してもよい。
1 撮像装置
7 撮像レンズ
9 マイクロレンズアレイ
9a,9b マイクロレンズ
10 撮像素子
16 距離情報算出部
19 距離算出部(種類別距離情報算出部)
21 補間部
22 遮光部材
Claims (5)
- 被写体からの光を集光する撮像レンズと、
該撮像レンズにより集光された光を撮影して画像信号を検出する撮像素子と、
前記撮像レンズにより結像される実像を、前記撮像素子の撮像面に結像させる位置に配置されたマイクロレンズアレイと、を備え、
該マイクロレンズアレイが、焦点距離が等しく、かつ、有効径が異なる2種以上のマイクロレンズをアレイ状に配列して構成されており、
該マイクロレンズがそれぞれ、前記撮像素子の複数の画素に像を結像させる撮像装置。 - 前記マイクロレンズアレイが、一方の種類の前記マイクロレンズを他方の種類の前記マイクロレンズで挟むように2種類の前記マイクロレンズを配列してなる請求項1に記載の撮像装置。
- 前記マイクロレンズアレイが、一方の種類の前記マイクロレンズを他方の種類の前記マイクロレンズで異なる2方向から挟むように2種類の前記マイクロレンズを配列してなる請求項2に記載の撮像装置。
- 各前記マイクロレンズに、該マイクロレンズの有効径を決定する絞りが設けられている請求項1から請求項3のいずれかに記載の撮像装置。
- いずれかの前記マイクロレンズを通過した光が、隣接する前記マイクロレンズに対応する画素に入射しないように遮蔽する遮光部材を備える請求項1から請求項4のいずれかに記載の撮像装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015215671A JP6028082B2 (ja) | 2015-11-02 | 2015-11-02 | 撮像装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015215671A JP6028082B2 (ja) | 2015-11-02 | 2015-11-02 | 撮像装置 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012016413A Division JP5836821B2 (ja) | 2012-01-30 | 2012-01-30 | 撮像装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016042191A true JP2016042191A (ja) | 2016-03-31 |
JP6028082B2 JP6028082B2 (ja) | 2016-11-16 |
Family
ID=55591950
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015215671A Expired - Fee Related JP6028082B2 (ja) | 2015-11-02 | 2015-11-02 | 撮像装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6028082B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021107465A1 (ko) * | 2019-11-25 | 2021-06-03 | 엘지이노텍 주식회사 | 거리 측정 카메라 장치 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007004471A (ja) * | 2005-06-23 | 2007-01-11 | Nikon Corp | 画像合成方法及び撮像装置 |
JP2007103590A (ja) * | 2005-10-03 | 2007-04-19 | Nikon Corp | 撮像素子、焦点検出装置、および、撮像システム |
JP2008070629A (ja) * | 2006-09-14 | 2008-03-27 | Nikon Corp | 光検出装置、カメラ、焦点検出装置および光学特性測定装置 |
JP2008515110A (ja) * | 2004-10-01 | 2008-05-08 | ザ ボード オブ トラスティーズ オブ ザ レランド スタンフォード ジュニア ユニバーシティー | 撮像の装置と方法 |
JP2008294741A (ja) * | 2007-05-24 | 2008-12-04 | Olympus Corp | 撮像システム |
JP2009244662A (ja) * | 2008-03-31 | 2009-10-22 | Sharp Corp | 撮像装置 |
JP2011095027A (ja) * | 2009-10-28 | 2011-05-12 | Kyocera Corp | 撮像装置 |
-
2015
- 2015-11-02 JP JP2015215671A patent/JP6028082B2/ja not_active Expired - Fee Related
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008515110A (ja) * | 2004-10-01 | 2008-05-08 | ザ ボード オブ トラスティーズ オブ ザ レランド スタンフォード ジュニア ユニバーシティー | 撮像の装置と方法 |
JP2007004471A (ja) * | 2005-06-23 | 2007-01-11 | Nikon Corp | 画像合成方法及び撮像装置 |
US20090140131A1 (en) * | 2005-06-23 | 2009-06-04 | Nikon Corporation | Image input apparatus, photodetection apparatus, and image synthesis method |
JP2007103590A (ja) * | 2005-10-03 | 2007-04-19 | Nikon Corp | 撮像素子、焦点検出装置、および、撮像システム |
JP2008070629A (ja) * | 2006-09-14 | 2008-03-27 | Nikon Corp | 光検出装置、カメラ、焦点検出装置および光学特性測定装置 |
JP2008294741A (ja) * | 2007-05-24 | 2008-12-04 | Olympus Corp | 撮像システム |
JP2009244662A (ja) * | 2008-03-31 | 2009-10-22 | Sharp Corp | 撮像装置 |
JP2011095027A (ja) * | 2009-10-28 | 2011-05-12 | Kyocera Corp | 撮像装置 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021107465A1 (ko) * | 2019-11-25 | 2021-06-03 | 엘지이노텍 주식회사 | 거리 측정 카메라 장치 |
Also Published As
Publication number | Publication date |
---|---|
JP6028082B2 (ja) | 2016-11-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5836821B2 (ja) | 撮像装置 | |
US9742984B2 (en) | Image capturing apparatus and method of controlling the same | |
EP2160018B1 (en) | Image pickup apparatus | |
JP5929553B2 (ja) | 画像処理装置、撮像装置、画像処理方法およびプログラム | |
JP5361535B2 (ja) | 撮像装置 | |
JP5629832B2 (ja) | 撮像装置及び位相差画素の感度比算出方法 | |
JP5619294B2 (ja) | 撮像装置及び合焦用パラメータ値算出方法 | |
WO2013094121A1 (ja) | 撮像装置および電子情報機器 | |
KR20130038388A (ko) | 이미지를 기록하기 위한 이미지 기록 장치 및 방법 | |
JP7264192B2 (ja) | 撮像素子、および撮像装置 | |
WO2012073727A1 (ja) | 撮像装置及びその合焦位置検出方法 | |
WO2013069445A1 (ja) | 立体撮像装置及び画像処理方法 | |
US9756304B2 (en) | Image-acquisition apparatus for performing distance measurement using parallax | |
JP6028082B2 (ja) | 撮像装置 | |
JP5820831B2 (ja) | 撮像装置 | |
JP2014194502A (ja) | 撮像装置および撮像システム | |
JP6727856B2 (ja) | 撮像装置およびその制御方法 | |
JP5929021B2 (ja) | 焦点検出装置、撮像装置 | |
JP2018006881A (ja) | 画像処理装置及び画像処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160912 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160920 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20161017 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6028082 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |