JP5249378B2 - 撮像装置、及びその制御方法、プログラム - Google Patents
撮像装置、及びその制御方法、プログラム Download PDFInfo
- Publication number
- JP5249378B2 JP5249378B2 JP2011062926A JP2011062926A JP5249378B2 JP 5249378 B2 JP5249378 B2 JP 5249378B2 JP 2011062926 A JP2011062926 A JP 2011062926A JP 2011062926 A JP2011062926 A JP 2011062926A JP 5249378 B2 JP5249378 B2 JP 5249378B2
- Authority
- JP
- Japan
- Prior art keywords
- vibration
- image
- band
- frequency
- imaging
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Transforming Light Signals Into Electric Signals (AREA)
- Studio Devices (AREA)
Description
ローリングシャッタ方式で駆動する撮像素子を備える撮像装置であって、撮像素子を用いて画像を撮像する場合に、当該撮像素子の露光期間における撮像装置の振動を検出する検出手段と、検出手段により検出された振動を複数の帯域成分に分離することで帯域ごとに振動の周波数分布を解析する解析手段と、撮像時の撮像装置の撮影状況に基づいて、振動の周波数分布の各帯域に対して重み付け処理を行う処理手段と、重み付けされた振動の周波数分布に基づいて、振動に起因して画像に生じる被写体像の歪み量の中心周波数を決定する決定手段と、少なくとも中心周波数が含まれる帯域の1つの周波数について、振動を像振れ補正のために演算処理する過程で生じる位相ズレを補償する補償手段と、補償手段により位相ズレが補償された像振れ補正の補正量を用いて、撮像素子のラインごとに振動に起因して生じた被写体像の歪みを補正する補正手段とを備えることを特徴とする。
図1は、本発明の実施形態に係るデジタルビデオカメラ100の機能構成を示すブロック図である。
ここで、歪み補正量算出部106の内部構成、及び歪み補正量算出部106内で行われる処理について、図を用いて以下に詳細に説明する。
fL・tanθ/p
ここで、fLは焦点距離、pは撮像素子上の画素ピッチである。
FIRローパスフィルタ401 :6Hz以下
第1FIRバンドパスフィルタ402:3〜9Hz
第2FIRバンドパスフィルタ403:6〜12Hz
A(f)・sin(ωt) (ω=2πf)
と表すことができる。即ち、周波数ごとの振動の速度は、手ぶれの時間特性を微分して
A(f)ω・cos(ωt)
と表すことができる。
A(f)ω・cos(ωt0)・Δt
と表すことができる。上述したようにフィルタ処理部203より得られた各帯域のフィルタ応答(図10(b))は、手ぶれの時間特性についてのブレ量の周波数応答を帯域ごとに積分した結果に相当している。このため、当該式からブレ量の項A(f)を分離し、ωt0が一定として近似すると、残りの項は
ω・cos(ωt0)・Δt
⇒2π・cos(ωt0)・Δt×f=c×f (c=const.)
と変形でき、図10(c)のような周波数に対する一次関数で表すことができる。
以上説明したように、本実施形態の撮像装置は、ローリングシャッタ問題による歪みを補正する場合の補正残り、あるいは過補正を低減することができる。具体的には撮像装置は、ローリングシャッタ方式で駆動する撮像素子を用いて画像を撮像する場合に、当該撮像素子の露光期間における撮像装置の振動を検出し、検出された振動の時間特性を取得する。振動の時間特性を、振動の周波数について複数の帯域に分離し、振動に起因して画像に生じる被写体像の歪み量の周波数特性を、各帯域について算出し、当該歪み量の周波数特性が極大となる帯域を、歪み量の中心周波数が含まれる帯域として決定する。そして、少なくとも中心周波数が含まれる帯域の1つの周波数について、振動の時間特性を取得する際に生じた位相ズレがなくなるように振動の時間特性を補償する。さらに補償後の振動の時間特性から算出された補正量を用いて、撮像素子のラインごとに振動に起因して生じた被写体像の歪みを補正する。
上述した実施形態では、重み決定部210は補助情報のパラメータそれぞれについて選択された各帯域の重み付け係数の平均をとって、各帯域のフィルタ応答に乗じる最終的な重み付け係数を決定するものとして説明した。本変形例では、補助情報のパラメータそれぞれについて推定した撮影状況について信頼度を設け、各撮影状況の信頼度に基づいて各帯域の重み付け係数を決定する方法について説明する。
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(またはCPUやMPU等)がプログラムを読み出して実行する処理である。
Claims (10)
- ローリングシャッタ方式で駆動する撮像素子を備える撮像装置であって、
前記撮像素子を用いて画像を撮像する場合に、当該撮像素子の露光期間における前記撮像装置の振動を検出する検出手段と、
前記検出手段により検出された前記振動を複数の帯域成分に分離することで前記帯域ごとに前記振動の周波数分布を解析する解析手段と、
撮像時の前記撮像装置の撮影状況に基づいて、前記振動の周波数分布の帯域に対して重み付け処理を行う処理手段と、
前記重み付された前記振動の周波数分布に基づいて、前記振動に起因して前記画像に生じる被写体像の歪み量の中心周波数が含まれる帯域を決定する決定手段と、
少なくとも前記中心周波数が含まれる帯域の1つの周波数について、前記振動を像振れ補正のために演算処理する過程で生じる位相ズレを補償する補償手段と、
前記補償手段により位相ズレが補償された前記像振れ補正の補正量を用いて、前記撮像素子のラインごとに前記振動に起因して生じた被写体像の歪みを補正する補正手段とを備えることを特徴とする撮像装置。 - 前記解析手段は、前記帯域成分ごとに前記振動の振動成分を前記露光期間について積算することにより、前記振動の周波数分布を解析することを特徴とする請求項1に記載の撮像装置。
- 前記補償手段は、少なくとも前記中心周波数が含まれる帯域の中央の周波数について、前記振動を像振れ補正のために演算処理する過程で生じる位相ズレがなくなるように補償することを特徴とする請求項1または2に記載の撮像装置。
- 前記処理手段は、前記重み付け処理として、前記画像を撮像時の前記撮像装置のパラメータに基づいて決定された前記複数の帯域それぞれについての重み付け係数を、前記振動の周波数分布の各帯域に乗じることを特徴とする請求項1乃至3のいずれか1項に記載の撮像装置。
- 撮像時の振動、焦点距離、主被写体情報、シャッタスピード、及びシーンモードの少なくともいずれかである前記撮像装置のパラメータに基づいて、前記画像を撮像時の前記撮像装置の撮影状況を推定し、当該推定された撮影状況ごとに予め定められた重み付け係数を用いて、前記複数の帯域それぞれについての前記重み付け処理における重み付け係数を決定する重み付け決定手段をさらに有することを特徴とする請求項4に記載の撮像装置。
- 前記重み付け決定手段は、前記推定された撮影状況ごとに予め定められた重み付け係数と当該撮影状況の推定の信頼度とに基づいて、前記複数の帯域それぞれについての重み付け係数を決定することを特徴とする請求項5に記載の撮像装置。
- 前記決定手段は、前記撮像素子の連続するライン間で前のラインが露光開始してから次のラインが露光開始するまでの期間の前記振動に起因して前記画像に生じる被写体像の歪み量の周波数特性を各帯域について算出し、前記振動に起因して前記画像に生じる被写体像の歪み量の中心周波数が含まれる帯域を決定することを特徴とする請求項1乃至6のいずれか1項に記載の撮像装置。
- 前記解析手段は、前記振動の時間特性のサンプリング周波数をダウンサンプルするダウンサンプリング手段を含むことを特徴とする請求項1乃至7のいずれか1項に記載の撮像装置。
- ローリングシャッタ方式で駆動する撮像素子を備える撮像装置の制御方法であって、
前記撮像素子を用いて画像を撮像する場合に、当該撮像素子の露光期間における前記撮像装置の振動を検出する検出工程と、
前記検出工程において検出された前記振動を複数の帯域成分に分離することで前記帯域ごとに前記振動の周波数分布を解析する解析工程と、
撮像時の前記撮像装置の撮影状況に基づいて、前記振動の周波数分布の各帯域に対して重み付け処理を行う処理工程と、
前記重み付された前記振動の周波数分布に基づいて、前記振動に起因して前記画像に生じる被写体像の歪み量の中心周波数が含まれる帯域を決定する決定工程と、
少なくとも前記中心周波数が含まれる帯域の1つの周波数について、前記振動を像振れ補正のために演算処理する過程で生じる位相ズレを補償する補償工程と、
前記補償工程において位相ズレが補償された前記像振れ補正の補正量を用いて、前記撮像素子のラインごとに前記振動に起因して生じた被写体像の歪みを補正する補正工程とを備えることを特徴とする撮像装置の制御方法。 - コンピュータを、請求項1乃至8のいずれか1項に記載の撮像装置の各手段として機能させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011062926A JP5249378B2 (ja) | 2011-03-22 | 2011-03-22 | 撮像装置、及びその制御方法、プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011062926A JP5249378B2 (ja) | 2011-03-22 | 2011-03-22 | 撮像装置、及びその制御方法、プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012199803A JP2012199803A (ja) | 2012-10-18 |
JP5249378B2 true JP5249378B2 (ja) | 2013-07-31 |
Family
ID=47181579
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011062926A Active JP5249378B2 (ja) | 2011-03-22 | 2011-03-22 | 撮像装置、及びその制御方法、プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5249378B2 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6374228B2 (ja) * | 2014-06-11 | 2018-08-15 | ソニーセミコンダクタソリューションズ株式会社 | 画像処理装置、画像処理方法、およびプログラム |
JP7152137B2 (ja) * | 2017-08-28 | 2022-10-12 | 株式会社トプコン | 写真測量システム及び写真測量方法 |
KR102573302B1 (ko) * | 2018-10-10 | 2023-08-31 | 삼성전자 주식회사 | 영상의 안정화를 위한 카메라 모듈, 그것을 포함하는 전자 장치 및 전자 장치의 영상 안정화 방법 |
CN117526935B (zh) * | 2023-10-27 | 2024-06-14 | 成都玖锦科技有限公司 | 基于整数丢点的宽带交织采样***交叠带相位补偿方法 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4834406B2 (ja) * | 2006-01-16 | 2011-12-14 | Hoya株式会社 | 撮像装置 |
JP5253020B2 (ja) * | 2008-07-04 | 2013-07-31 | キヤノン株式会社 | 像振れ補正装置およびその制御方法 |
-
2011
- 2011-03-22 JP JP2011062926A patent/JP5249378B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2012199803A (ja) | 2012-10-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5249377B2 (ja) | 撮像装置、及びその制御方法、プログラム | |
JP5181001B2 (ja) | 像振れ補正装置及びその制御方法、及び、像振れ補正装置を搭載した撮像装置及び光学機器 | |
EP2444843B1 (en) | Image stabilization control apparatus, imaging apparatus, and image stabilization control method | |
CN107615159B (zh) | 抖动校正装置、摄像设备和抖动校正方法 | |
JP6600232B2 (ja) | 像ブレ補正装置及び方法 | |
JP6592335B2 (ja) | 像ブレ補正装置及び方法 | |
US7668447B2 (en) | Image stabilization apparatus and optical apparatus | |
KR101847392B1 (ko) | 화상처리장치 및 그 제어 방법 | |
JP5409342B2 (ja) | 撮像装置及びその制御方法 | |
JP6478504B2 (ja) | 撮像装置およびその制御方法 | |
JP6108940B2 (ja) | 像振れ補正装置及びその制御方法、プログラム、記憶媒体 | |
JP2007114466A (ja) | 手ぶれ補正機能を有する撮影装置 | |
JP5249378B2 (ja) | 撮像装置、及びその制御方法、プログラム | |
WO2017187691A1 (ja) | 画像処理装置、撮像装置、画像処理方法、および、プログラム | |
JP3740398B2 (ja) | 振れ補正装置、振れ補正装置に適用される制御装置、振れ補正装置に適用される制御方法、振れ補正装置に適用される制御プログラム、撮像装置 | |
US10771700B2 (en) | Image blur correction apparatus, interchangeable lens, camera body, image blur correction method, and storage medium | |
JP3865126B2 (ja) | 画像処理装置および方法、記録媒体、並びにプログラム | |
JP2019124928A (ja) | 像ブレ補正装置、交換レンズ、カメラ本体、像ブレ補正方法、及びプログラム | |
JP4387028B2 (ja) | 撮像装置、撮像方法およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体 | |
US7545408B2 (en) | Image pickup apparatus and image pickup method | |
JP2019125890A (ja) | 像ブレ補正装置、カメラ本体、像ブレ補正方法、及びプログラム | |
JP3865125B2 (ja) | 画像処理装置および方法、記録媒体、並びにプログラム | |
US10748255B2 (en) | Image blur correction device, optical apparatus, and control method | |
JP4486482B2 (ja) | 手振れ補正装置及び撮像装置 | |
JP7204855B2 (ja) | 像振れ補正装置およびその制御方法、撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20121221 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130218 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130315 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130411 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160419 Year of fee payment: 3 |