JP2017163297A - 撮像装置 - Google Patents
撮像装置 Download PDFInfo
- Publication number
- JP2017163297A JP2017163297A JP2016045081A JP2016045081A JP2017163297A JP 2017163297 A JP2017163297 A JP 2017163297A JP 2016045081 A JP2016045081 A JP 2016045081A JP 2016045081 A JP2016045081 A JP 2016045081A JP 2017163297 A JP2017163297 A JP 2017163297A
- Authority
- JP
- Japan
- Prior art keywords
- exposure
- imaging
- exposure time
- visible light
- light
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Cameras In General (AREA)
- Studio Devices (AREA)
- Exposure Control For Cameras (AREA)
Abstract
【課題】ユーザーが撮像素子の露光時間を設定して撮影するモードにおいて、設定可能な範囲でそれぞれの撮像素子に適切かつ簡易に設定できることを可能にした撮像装置を提供すること。【解決手段】レンズと、被写体からの光を複数の波長域に分離する光分離手段と、分離された複数の波長域のうち可視光成分を含む光を撮像する可視光撮像手段と、可視光とは異なる成分を含む光を撮像する非可視光撮像手段と、それぞれの撮像手段の適性露光条件を算出する適正露光条件算出手段と、それぞれの撮像手段の露光時間を設定する露光時間設定手段と、を有する撮像装置について、露光時間を指定できる露光時間指定撮影モードを備え、前記撮影モードは、露光時間と、適正露光条件算出手段により算出された適正露光条件と、それぞれの撮像手段の画素サイズを用いて、露光時間設定手段によりそれぞれの撮像手段の露光時間を設定することを特徴とする。【選択図】図1
Description
本発明は、撮像装置に関し、特に撮像装置の露光時間の設定方法に関する。
一台の撮像装置でより広い波長範囲を撮影するために、可視光用と赤外光用の撮像素子を用いて同時に撮影を行うことのできる撮像装置が知られている。
特許文献1には、レンズを透過した光を色分離プリズムで可視光と赤外光に分光し、それぞれを可視光用撮像素子、赤外光用撮像素子を用いて撮像する構成が開示されている。
このとき、それぞれの撮像素子の出力値を被写体の明るさに応じて適正値にするために、通常はレンズの絞り値、撮像素子の露光時間およびゲインを制御する。被写体の可視光での照度と赤外光での照度は通常異なり、また可視光用撮像素子と赤外光用撮像素子のそれぞれの波長に対する感度も異なるため、それぞれの撮像素子は独立に露出制御されることが望ましい。
しかし、一つのレンズを複数の撮像素子で共有するような撮像装置では、絞りの制御をそれぞれの撮像素子に合わせて独立に制御することは出来ない。
特許文献2は、これに鑑み、レンズ絞り値設定手段と、可視光系露出時間設定手段と、赤外光系露出時間設定手段を用いて、可視光および赤外光の露出を適正に行う制御装置について開示している。
撮像装置には、通常、撮像素子の露光時間をユーザーが指定して撮影するモードが搭載されており、特に被写体が動いてしまう場合に像ぶれを抑えるため露光時間を高速にしたりするために用いられる。以後、このモードをシャッター優先モードとする。
複数の撮像素子に対して同じ露光時間を設定してシャッター優先モードを実現しようとすると、波長域毎の入射する光量の違いや撮像素子の感度違いにより、片方の撮像素子を適正露光に合わせると、もう片方の撮像素子では適正露光よりも明るくなったり、暗くなったりといったことが起こりうる。
このときレンズ絞り値の設定は両撮像素子で共通のため、撮像素子のゲインを変えて適正露光となる条件を設定するしかないが、撮像素子の出力信号にゲインを掛け過ぎると画像のノイズが増大し、被写体の視認性が低下してしまうなど弊害が出る。また被写体の動きに対する敏感度も異なるため、同じ露光時間を設定しても所望の効果を得られるわけではない。
また両撮像素子に対して別々の露光時間を設定してシャッター優先モードを実現する場合は、少なくとも2つのシャッター速度を設定する必要があるため手間がかかり、またそれぞれの撮像素子の感度等についての情報がないと、いちいち画像を見ながらシャッター速度を設定しなければならないなど、ユーザーに対して負荷が発生してしまう。さらに、そもそも設定が出来ないような条件である可能性もある。
上述の特許文献1、特許文献2ではそれぞれの撮像素子で適正露光を行うが、シャッター優先モードに相当する効果を得られるわけではない。
そこで、本発明の目的は、ユーザーが撮像素子の露光時間を設定して撮影するモードにおいて、設定可能な範囲でそれぞれの撮像素子に適切かつ簡易に設定できることを可能にした撮像装置を提供することにある。
上記の目的を達成するために、本発明に係る撮像装置は、
レンズと、
前記レンズを透過した被写体からの光を複数の波長域に分離する光分離手段と、
前記光分離手段で分離された複数の波長域のうち可視光成分を含む被写体からの光を撮像する可視光撮像手段と、
前記光分離手段で分離された複数の波長域のうち可視光とは異なる成分を含む被写体からの光を撮像する非可視光撮像手段と、
前記それぞれの撮像手段の適性露光条件を算出する適正露光条件算出手段と、
前記それぞれの撮像手段の露光時間を設定する露光時間設定手段と、
を有する撮像装置について、
前記撮像装置の露光時間を指定できる露光時間指定撮影モードを備え、
前記撮影モードは、前記指定された露光時間と、
前記適正露光条件算出手段により算出された適正露光条件と、
前記それぞれの撮像手段の画素サイズを用いて、前記露光時間設定手段により前記それぞれの撮像手段の露光時間を設定することを特徴とする。
レンズと、
前記レンズを透過した被写体からの光を複数の波長域に分離する光分離手段と、
前記光分離手段で分離された複数の波長域のうち可視光成分を含む被写体からの光を撮像する可視光撮像手段と、
前記光分離手段で分離された複数の波長域のうち可視光とは異なる成分を含む被写体からの光を撮像する非可視光撮像手段と、
前記それぞれの撮像手段の適性露光条件を算出する適正露光条件算出手段と、
前記それぞれの撮像手段の露光時間を設定する露光時間設定手段と、
を有する撮像装置について、
前記撮像装置の露光時間を指定できる露光時間指定撮影モードを備え、
前記撮影モードは、前記指定された露光時間と、
前記適正露光条件算出手段により算出された適正露光条件と、
前記それぞれの撮像手段の画素サイズを用いて、前記露光時間設定手段により前記それぞれの撮像手段の露光時間を設定することを特徴とする。
本発明によれば、ユーザーが撮像素子の露光時間を設定して撮影するモードにおいて、設定可能な範囲でそれぞれの撮像素子に適切かつ簡易に設定できることを可能にした撮像装置を提供することができる。
以下に、本発明の好ましい実施の形態を、添付の図面に基づいて詳細に説明する。図1は本発明の実施形態に係る撮像装置の模式図である。
[実施例1]
本撮像装置は一台で広い波長領域の撮像を可能にするため、可視光用撮像素子200と赤外光用撮像素子201を備えている。レンズ100からの光は分光光学系101によって、ある波長域を境に直進して可視光用撮像素子200に入射する成分と、反射して赤外光用撮像素子201に入射する成分とに分光される。レンズ100は絞り構造を備えていても良く、信号処理部300から制御される。分光光学系101としては、ダイクロイックミラーや色分離プリズムなどがあり、本実施形態では波長700ナノメートルを境界としている。
本撮像装置は一台で広い波長領域の撮像を可能にするため、可視光用撮像素子200と赤外光用撮像素子201を備えている。レンズ100からの光は分光光学系101によって、ある波長域を境に直進して可視光用撮像素子200に入射する成分と、反射して赤外光用撮像素子201に入射する成分とに分光される。レンズ100は絞り構造を備えていても良く、信号処理部300から制御される。分光光学系101としては、ダイクロイックミラーや色分離プリズムなどがあり、本実施形態では波長700ナノメートルを境界としている。
可視光用撮像素子200はCMOSセンサやCCDセンサなどのシリコン(Si)製半導体撮像素子であり、主に可視光(波長380〜780ナノメートル)に高い感度を有する。これに対し、赤外光用撮像素子201は可視光用撮像素子と同じ種類の素子も用いられるが、より好ましくはインジウムガリウムヒ素(InGaAs)など、近赤外光(波長900〜1700ナノメートル)に高い感度を有するものが望ましい。どちらの撮像素子も外部からシャッター速度、ゲインを設定して撮像を行うことができる。
図2は図1の信号処理部300のブロック構造を示した模式図である。
それぞれの撮像素子200、201によって、被写体からの光は電気信号に変換され、それぞれ可視光画像処理部311、赤外光画像処理部312によって画像処理される。またそれぞれの画像処理結果による画像輝度と、適正露光時の画像輝度との差分をもとに、露光条件算出部314が適正露光となる露光条件を算出し、画像が明るすぎる場合は撮像素子制御部313を通して撮像素子200、201の露光時間を短くする、ゲインを下げるなどの制御を行う。
逆に画像が暗すぎる場合は撮像素子制御部313を通して露光時間を長くする、ゲインを上げるなどの制御を行う。ここでレンズ100が絞り機能を有する場合は、レンズ制御部315を通してレンズ100の絞りを制御する。また、ユーザーにより外部から露光時間、ゲイン、絞り量などが指定された場合、露光条件算出部が指定された値以外を制御することで、画像が適正露光になるようにする。このとき指定された条件で適正露光が実現できない場合、実現可能な範囲で適正露光でない画像が得られるように制御してもよい。また、不図示のユーザーインターフェースを用いてユーザーに設定不可であることを知らせてもよい。
ここで、図3は可視光用撮像素子200と赤外光用撮像素子201による、動いている被写体像3000の被写体ぶれを模式的に示した図である。
可視光用撮像素子200に利用されるSi製半導体撮像素子と、赤外光用撮像素子201に利用されるInGaAs製半導体撮像素子では、画素のサイズが異なる場合が多く、一般的にはSi製半導体撮像素子の画素サイズS1(一辺がおよそ数マイクロメートル)よりもInGaAs製半導体撮像素子の画素サイズS2(一辺が10数〜30マイクロメートル程度)のほうが、画素サイズが大きいことが多い。
被写体が動くことによるぶれ量Lは、撮像素子の受光面上で結像された被写体像が何画素移動したかで決まるため、可視光画像で数画素移動するような被写体の動きでも、赤外光画像ではほとんど移動しているように見えないことになる。そのため、まず可視光用撮像素子200に対して露光条件算出部314にて求めた露光時間を設定後、赤外光用撮像素子201の露光時間を画素のサイズの比率分まで延ばしても、被写体のうごきによるぶれの影響はほとんど見られない。さらに、露光時間を長くすることにより赤外画像のノイズを抑えることも可能となる。
実際の被写体撮影時においては、撮影時の環境により蛍光灯や白色LED照明下など、可視光が赤外光よりも多いシーンや、逆に夕方などの赤外光が可視光よりも多いシーンが存在する。その場合には片側の撮像素子が白とびや黒つぶれの露出条件になる場合がある。そのため、撮像素子200、201の現在の露光条件と合わせて赤外光用撮像素子201の露光時間を調整する、としても良い。
図4は本発明の第1の実施例による、撮像装置の動作フローチャートである。ここでは可視光用撮像素子200の画素サイズS1を3マイクロメートル、赤外光用撮像素子201の画素サイズS2を15マイクロメートルとする。またレンズ100は絞り構造を有し、適正露光となるように絞り値を制御することができる。
(S401)ユーザーにより、指定された露光時間を読み取りシャッター優先モードに入る。(S402)に移動する。
(S402)可視光用撮像素子200に(S401)で読み取った露光時間を設定した場合に適正露光となるように、露光条件算出部314を用いて可視光用撮像素子200のゲイン、レンズ100の絞り値を可視光用撮像素子の新たな適正露光条件として算出する。
(S403)(S402)で求めたレンズ100の絞り値を設定した場合に、露光時間が(S401)で読み取った露光時間の15/3=5倍以下となる範囲で適正露光となるように、露光条件算出部314を用いて赤外光用撮像素子201のゲインと露光時間を赤外光用撮像素子の新たな適正露光条件として算出する。(S404)に移動する。
(S404)(S402)および(S403)で算出したレンズおよび撮像素子の露光条件が設定可能である場合、(S405)に移動する。設定不可能である場合、(S406)に移動する。
(S405)算出した露光条件をそれぞれの撮像素子に設定する。
(S406)算出した露光条件をそれぞれの撮像素子に設定せず、現在の設定のまま撮影を行う。
以上の動作を行うことで、設定可能な範囲において、露光時間を指定された場合に被写体ぶれを抑える効果を得ることができる。
[実施例2]
図5は本発明の第2の実施例による、撮像装置の動作フローチャートである。ここでは可視光用撮像素子200の画素サイズS1を3マイクロメートル、赤外光用撮像素子201の画素サイズS2を15マイクロメートルとする。またレンズ100は絞り構造を有し、適正露光となるように絞り値を制御することができる。
図5は本発明の第2の実施例による、撮像装置の動作フローチャートである。ここでは可視光用撮像素子200の画素サイズS1を3マイクロメートル、赤外光用撮像素子201の画素サイズS2を15マイクロメートルとする。またレンズ100は絞り構造を有し、適正露光となるように絞り値を制御することができる。
(S501)〜(S502)(S401)〜(S402)と同様の動作を行う。(S503)に移動する。
(S503)可視光用撮像素子に対して、現在の露光条件と(S502)によって算出された露光条件による可視光画像輝度差分V1を求める。(S504)に進む。
(S504)(S501)で読み取った露光時間と、(S502)で求めたレンズ100の絞り値を設定した場合に、適正露光となるように、露光条件算出部314を用いて赤外光用撮像素子201のゲインを算出する。(S505)に移動する。
(S505)赤外光用撮像素子に対して、現在の露光条件と(S503)によって算出された露光条件による赤外光画像輝度差分V2を求める。(S506)に進む。
(S506)可視光画像輝度差分V1と赤外光画像輝度差分V2を比較し、V1<V2である場合、(S507)に進む。それ以外は(S508)に進む。
(S507)赤外光画像のほうが可視光画像よりも明るく撮影可能であり、赤外光用撮像素子の露光時間を長くする必要がないので、算出した露光条件をそのままそれぞれの撮像素子に設定する。
(S508)可視光画像輝度差分V1と赤外光画像輝度差分V2の比が、可視光用撮像素子の画素サイズS1と赤外光用撮像素子の画素サイズS2の比S1/S2と比較してV1/V2≧S1/S2=3/15である場合、(S509)に進む。それ以外は(S511)に進む。
(S509)露光時間が(S501)で読み取った露光時間の15/3=5倍以下となる範囲で適正露光となるように、露光条件算出部314を用いて赤外光用撮像素子201のゲインと露光時間を赤外光用撮像素子の新たな適正露光条件として算出する。(S510)に進む。
(S510)(S502)にて算出した可視光用撮像素子の露光条件と、(S509)にて算出した赤外光用撮像素子の露光条件をそれぞれの撮像素子に設定する。
(S511)算出した露光条件をそれぞれの撮像素子に設定せず、現在の設定のまま撮影を行う。
以上の動作を行うことで、設定可能な範囲において、露光時間を指定された場合に被写体ぶれを抑える効果を得ることができる。
以上、本発明の好ましい実施形態について説明した。これらの実施形態では可視光用撮像素子と赤外光用撮像素子を用いているが、本発明はこれらの実施形態に限定されず、画素サイズの異なる撮像素子などについても同様に適用可能である。また、撮像素子以外についてもその要旨の範囲内で種々の変形及び変更が可能である。
100 レンズ、101 分光光学系、200 可視光用撮像素子、
201 赤外光用撮像素子、300 信号処理部、311 可視光画像処理部、
312 赤外光画像処理部、313 撮像素子制御部、314 露光条件算出部、
315 レンズ制御部
201 赤外光用撮像素子、300 信号処理部、311 可視光画像処理部、
312 赤外光画像処理部、313 撮像素子制御部、314 露光条件算出部、
315 レンズ制御部
Claims (6)
- レンズと、
前記レンズを透過した被写体からの光を複数の波長域に分離する光分離手段と、
前記光分離手段で分離された複数の波長域のうち可視光成分を含む被写体からの光を撮像する可視光撮像手段と、
前記光分離手段で分離された複数の波長域のうち可視光とは異なる成分を含む被写体からの光を撮像する非可視光撮像手段と、
前記それぞれの撮像手段の適性露光条件を算出する適正露光条件算出手段と、
前記それぞれの撮像手段の露光時間を設定する露光時間設定手段と、
を有する撮像装置について、
前記撮像装置の露光時間を指定できる露光時間指定撮影モードを備え、
前記撮影モードは、前記指定された露光時間と、
前記適正露光条件算出手段により算出された適正露光条件と、
前記それぞれの撮像手段の画素サイズを用いて、前記露光時間設定手段により前記それぞれの撮像手段の露光時間を設定することを特徴とする撮像装置。 - 前記露光時間指定撮影モードは、前記可視光撮像手段の画素の一辺サイズをS1、前記非可視光撮像手段の画素の一辺サイズをS2とするとき、前記非可視光撮像手段の露光時間を前記可視光撮像手段の露光時間のS2/S1倍以下とすることを特徴とする請求項1に記載の撮像装置。
- 前記撮像装置は、前記適正露光条件算出手段によって算出される撮像手段の適正露光条件と、現在の撮像手段の露光条件の露光差を算出する露光差算出手段をさらに備え、前記露光時間指定撮影モードは、前記露光差算出手段によって算出された前記可視光撮像手段の露光差V1と、前記非可視光撮像手段の露光差V2をさらに用いて、前記露光時間設定手段により前記それぞれの撮像手段の露光時間を設定することを特徴とする請求項1又は請求項2に記載の撮像装置。
- 前記露光時間指定撮影モードは、前記可視光撮像手段の露出差V1と前記非可視光撮像手段の露出差V2が、V1<V2であるとき、前記非可視光撮像手段の露光時間を前記可視光撮像手段の露光時間のS2/S1倍以下とすることを特徴とする、請求項3に記載の撮像装置。
- 前記露光時間指定撮影モードは、前記可視光撮像手段の露出差V1と前記非可視光撮像手段の露出差V2の関係が、V1/V2≧S1/S2であるとき、前記非可視光撮像手段の露光時間を前記可視光撮像手段の露光時間のS2/S1倍以下とすることを特徴とする請求項3に記載の撮像装置。
- 前記非可視光撮像手段が赤外光撮像手段であることを特徴とする請求項1乃至請求項5の何れか一項に記載の撮像装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016045081A JP2017163297A (ja) | 2016-03-09 | 2016-03-09 | 撮像装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016045081A JP2017163297A (ja) | 2016-03-09 | 2016-03-09 | 撮像装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2017163297A true JP2017163297A (ja) | 2017-09-14 |
Family
ID=59853131
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016045081A Pending JP2017163297A (ja) | 2016-03-09 | 2016-03-09 | 撮像装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2017163297A (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114143421A (zh) * | 2020-09-04 | 2022-03-04 | 聚晶半导体股份有限公司 | 双传感器摄像***及其校准方法 |
-
2016
- 2016-03-09 JP JP2016045081A patent/JP2017163297A/ja active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114143421A (zh) * | 2020-09-04 | 2022-03-04 | 聚晶半导体股份有限公司 | 双传感器摄像***及其校准方法 |
CN114143421B (zh) * | 2020-09-04 | 2024-04-05 | 聚晶半导体股份有限公司 | 双传感器摄像***及其校准方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101428635B1 (ko) | 듀얼 이미지 캡쳐 프로세싱 | |
US8643768B2 (en) | Multiple lens imaging apparatuses, and methods and programs for setting exposure of multiple lens imaging apparatuses | |
JP6564421B2 (ja) | 画像処理装置、撮像装置、画像処理方法、及びプログラム | |
CN108028894B (zh) | 控制***、成像装置和计算机可读介质 | |
US20170171446A1 (en) | Image capturing apparatus, control method therefor, program, and recording medium | |
US20100225783A1 (en) | Temporally Aligned Exposure Bracketing for High Dynamic Range Imaging | |
CN111133378B (zh) | 摄像装置、信息获取方法及记录介质 | |
JP6230265B2 (ja) | 撮像装置 | |
US9113095B2 (en) | Imaging device with the autofocus | |
JP6330474B2 (ja) | 画像処理装置、画像処理装置の制御方法、撮像装置 | |
JP2017163297A (ja) | 撮像装置 | |
JP2012095223A (ja) | 撮像装置、撮像方法及びプログラム | |
JP5153441B2 (ja) | 撮像装置、その制御方法及びプログラム | |
JP6294607B2 (ja) | 撮像装置およびその制御方法、プログラム並びに記憶媒体 | |
JP2006157342A (ja) | カメラモジュール | |
JP2011135379A (ja) | 撮像装置、撮像方法及びプログラム | |
JP6725105B2 (ja) | 撮像装置及び画像処理方法 | |
JP2015126455A5 (ja) | ||
JP6900577B2 (ja) | 画像処理装置及びプログラム | |
JP2010028219A (ja) | 撮影装置 | |
JP4326997B2 (ja) | 撮像装置および合焦方法、制御プログラム、記録媒体 | |
JP2013149043A (ja) | 画像処理装置 | |
JP2017135521A (ja) | 撮影装置及びその制御方法 | |
JP2017032754A (ja) | 撮像装置、その制御方法、及びプログラム | |
JP2015192179A (ja) | ホワイトバランス調整装置、撮影装置およびホワイトバランス調整方法 |