JP2011244027A5

JP2011244027A5 -

Info

Publication number: JP2011244027A5
Application number: JP2010111580A
Authority: JP
Filing date: 2010-05-14
Publication date: 2013-05-02
Anticipated expiration: 2030-05-14

Description

前記課題を解決するため、請求項１記載の発明に係る撮像装置にあっては、被写体を撮像する撮像手段と、前記撮像手段に、撮影時の同一露光時間内に、第１の色成分からなる第１の色成分画像を分割露光により複数回撮像させ、かつ前記第１の色成分以外の他の色成分からなる第２の色成分画像を一括露光により撮像させる撮像制御手段と、前記撮像手段により分割露光で撮像された複数の第１の色成分画像の各々に存在する撮像時の手ブレによる被写体ブレを、点拡がり関数を推定して用いる画像復元演算によりそれぞれ補正する第１の補正手段と、前記第１の補正手段による補正後の複数の第１の色成分画像を対象として、分割露光により相前後して撮像された第１の色成分画像間における被写体の変位を示す変位情報を取得する変位情報取得手段と、前記変位情報取得手段により取得された変位情報に基づいて、前記第１の補正手段により補正された複数の第１の色成分画像を位置合わせして加算することにより加算画像を生成する画像加算手段と、前記変位情報取得手段により取得された変位情報と、前記第１の補正手段の画像復元演算による補正に際し複数の第１の色成分画像毎に推定された点拡がり関数とに基づき、前記撮影時の第２の色成分画像の露光時間内における撮像時の手ブレによる被写体ブレの軌跡を表す新たな点拡がり関数を演算する演算手段と、前記演算手段により演算された新たな点拡がり関数を用いた画像復元演算によって、前記撮像手段により一括露光で撮像された第２の色成分画像に存在する撮像時の手ブレによる被写体ブレを補正する第２の補正手段と、前記画像加算手段により生成された加算画像と、前記第２の補正手段による補正後の第２の色成分画像とを合成する合成手段とを備えたことを特徴とする。

また、請求項２記載の発明に係る撮像装置にあっては、被写体の色情報を取得する色情報取得手段と、前記色情報取得手段により取得された色情報に基づき前記第１の色成分に特定の色成分を選択的に設定する設定手段とをさらに備え、前記撮像制御手段は、前記撮像手段に、撮影時の同一露光時間内に、前記設定手段により設定された第１の色成分画像のみを分割露光により複数回撮像させることを特徴とする。

また、請求項６記載の発明に係る手ブレ補正方法にあっては、被写体を撮像する撮像手段に、撮影時の同一露光時間内に、第１の色成分からなる第１の色成分画像を分割露光により複数回撮像させ、かつ前記第１の色成分以外の他の色成分からなる第２の色成分画像を一括露光により撮像させる工程と、前記撮像手段に分割露光で撮像させた複数の第１の色成分画像の各々に存在する撮像時の手ブレによる被写体ブレを、点拡がり関数を推定して用いる画像復元演算によりそれぞれ補正する工程と、補正後の複数の第１の色成分画像を対象として、分割露光により相前後して撮像された第１の色成分画像間における被写体の変位を示す変位情報を取得する工程と、取得した分割露光時間毎の変位情報に基づいて、前記画像復元演算による補正後の複数の第１の色成分画像を位置合わせして加算することにより加算画像を生成する工程と、前記分割露光時間毎の変位情報と、前記画像復元演算による補正に際し複数の第１の色成分画像毎に推定した点拡がり関数とに基づき、第２の色成分画像の前記露光時間内における撮像時の手ブレによる被写体ブレの軌跡を表す新たな点拡がり関数を演算する工程と、演算した新たな点拡がり関数を用いた画像復元演算によって、前記撮像手段により一括露光で撮像された第２の色成分画像に存在する撮像時の手ブレによる被写体ブレを補正する工程と、前記加算画像と前記画像復元演算による補正後の第２の色成分画像とを結合する工程とを含むことを特徴とする。

また、請求項７記載の発明に係るプログラムにあっては、撮像装置が有するコンピュータに、被写体を撮像する撮像手段に、撮影時の同一露光時間内に、第１の色成分からなる第１の色成分画像を分割露光により複数回撮像させ、かつ前記第１の色成分以外の他の色成分からなる第２の色成分画像を一括露光により撮像させる処理と、前記撮像手段に分割露光で撮像させた複数の第１の色成分画像の各々に存在する撮像時の手ブレによる被写体ブレを、点拡がり関数を推定して用いる画像復元演算によりそれぞれ補正する処理と、補正後の複数の第１の色成分画像を対象として、分割露光により相前後して撮像された第１の色成分画像間における被写体の変位を示す変位情報を取得する処理と、取得した分割露光時間毎の変位情報に基づいて、前記画像復元演算による補正後の複数の第１の色成分画像を位置合わせして加算することにより加算画像を生成する処理と、前記分割露光時間毎の変位情報と、前記画像復元演算による補正に際し複数の第１の色成分画像毎に推定した点拡がり関数とに基づき、第２の色成分画像の前記露光時間内における撮像時の手ブレによる被写体ブレの軌跡を表す新たな点拡がり関数を演算する処理と、演算した新たな点拡がり関数を用いた画像復元演算によって、前記撮像手段により一括露光で撮像された第２の色成分画像に存在する撮像時の手ブレによる被写体ブレを補正する処理と、前記加算画像と前記画像復元演算による補正後の第２の色成分画像とを結合する処理とを実行させることを特徴とする。

Claims

被写体を撮像する撮像手段と、
前記撮像手段に、撮影時の同一露光時間内に、第１の色成分からなる第１の色成分画像を分割露光により複数回撮像させ、かつ前記第１の色成分以外の他の色成分からなる第２の色成分画像を一括露光により撮像させる撮像制御手段と、
前記撮像手段により分割露光で撮像された複数の第１の色成分画像の各々に存在する撮像時の手ブレによる被写体ブレを、点拡がり関数を推定して用いる画像復元演算によりそれぞれ補正する第１の補正手段と、
前記第１の補正手段による補正後の複数の第１の色成分画像を対象として、分割露光により相前後して撮像された第１の色成分画像間における被写体の変位を示す変位情報を取得する変位情報取得手段と、
前記変位情報取得手段により取得された変位情報に基づいて、前記第１の補正手段により補正された複数の第１の色成分画像を位置合わせして加算することにより加算画像を生成する画像加算手段と、
前記変位情報取得手段により取得された変位情報と、前記第１の補正手段の画像復元演算による補正に際し複数の第１の色成分画像毎に推定された点拡がり関数とに基づき、前記撮影時の第２の色成分画像の露光時間内における撮像時の手ブレによる被写体ブレの軌跡を表す新たな点拡がり関数を演算する演算手段と、
前記演算手段により演算された新たな点拡がり関数を用いた画像復元演算によって、前記撮像手段により一括露光で撮像された第２の色成分画像に存在する撮像時の手ブレによる被写体ブレを補正する第２の補正手段と、
前記画像加算手段により生成された加算画像と、前記第２の補正手段による補正後の第２の色成分画像とを合成する合成手段と
を備えたことを特徴とする撮像装置。
被写体の色情報を取得する色情報取得手段と、
前記色情報取得手段により取得された色情報に基づき前記第１の色成分に特定の色成分を選択的に設定する設定手段と
をさらに備え、
前記撮像制御手段は、前記撮像手段に、撮影時の同一露光時間内に、前記設定手段により設定された第１の色成分画像のみを分割露光により複数回撮像させる
ことを特徴とする請求項１記載の撮像装置。
前記色情報取得手段により取得された色情報に基づき撮影環境下における光源の種類を判断する判断手段をさらに備え、
前記設定手段は、前記判断手段により判断された光源の種類に対応して予め決められている特定の色成分を前記第１の色成分に設定する
ことを特徴とする請求項２記載の撮像装置。
前記設定手段は、前記色情報取得手段により取得された色情報に基づき、被写体の色分布において支配的であることを設定条件として、前記第１の色成分に特定の色成分を選択的に設定する
ことを特徴とする請求項２記載の撮像装置。
前記撮像手段は単板式の固体撮像素子であり、
前記撮像制御手段は、撮影時の同一露光時間内に、前記固体撮像素子において前記第１の色成分が割り当てられている一群の光電変換素子に分割露光によって前記第１の色成分画像を複数回撮像させ、かつ前記撮像手段において第１の色成分以外の他の色成分が割り当てられている一群の光電変換素子に一括露光によって前記第２の色成分画像を撮像させる
ことを特徴とする請求項１乃至４いずれか記載の撮像装置。
被写体を撮像する撮像手段に、撮影時の同一露光時間内に、第１の色成分からなる第１の色成分画像を分割露光により複数回撮像させ、かつ前記第１の色成分以外の他の色成分からなる第２の色成分画像を一括露光により撮像させる工程と、
前記撮像手段に分割露光で撮像させた複数の第１の色成分画像の各々に存在する撮像時の手ブレによる被写体ブレを、点拡がり関数を推定して用いる画像復元演算によりそれぞれ補正する工程と、
補正後の複数の第１の色成分画像を対象として、分割露光により相前後して撮像された第１の色成分画像間における被写体の変位を示す変位情報を取得する工程と、
取得した分割露光時間毎の変位情報に基づいて、前記画像復元演算による補正後の複数の第１の色成分画像を位置合わせして加算することにより加算画像を生成する工程と、
前記分割露光時間毎の変位情報と、前記画像復元演算による補正に際し複数の第１の色成分画像毎に推定した点拡がり関数とに基づき、第２の色成分画像の前記露光時間内における撮像時の手ブレによる被写体ブレの軌跡を表す新たな点拡がり関数を演算する工程と、
演算した新たな点拡がり関数を用いた画像復元演算によって、前記撮像手段により一括露光で撮像された第２の色成分画像に存在する撮像時の手ブレによる被写体ブレを補正する工程と、
前記加算画像と前記画像復元演算による補正後の第２の色成分画像とを結合する工程と
を含むことを特徴とする手ブレ補正方法。
撮像装置が有するコンピュータに、
被写体を撮像する撮像手段に、撮影時の同一露光時間内に、第１の色成分からなる第１の色成分画像を分割露光により複数回撮像させ、かつ前記第１の色成分以外の他の色成分からなる第２の色成分画像を一括露光により撮像させる処理と、
前記撮像手段に分割露光で撮像させた複数の第１の色成分画像の各々に存在する撮像時の手ブレによる被写体ブレを、点拡がり関数を推定して用いる画像復元演算によりそれぞれ補正する処理と、
補正後の複数の第１の色成分画像を対象として、分割露光により相前後して撮像された第１の色成分画像間における被写体の変位を示す変位情報を取得する処理と、
取得した分割露光時間毎の変位情報に基づいて、前記画像復元演算による補正後の複数の第１の色成分画像を位置合わせして加算することにより加算画像を生成する処理と、
前記分割露光時間毎の変位情報と、前記画像復元演算による補正に際し複数の第１の色成分画像毎に推定した点拡がり関数とに基づき、第２の色成分画像の前記露光時間内における撮像時の手ブレによる被写体ブレの軌跡を表す新たな点拡がり関数を演算する処理と、
演算した新たな点拡がり関数を用いた画像復元演算によって、前記撮像手段により一括露光で撮像された第２の色成分画像に存在する撮像時の手ブレによる被写体ブレを補正する処理と、
前記加算画像と前記画像復元演算による補正後の第２の色成分画像とを結合する処理と
を実行させることを特徴とするプログラム。