JP4375662B2 - 画像処理装置、画像処理方法、プログラム、情報記録媒体及び撮像装置 - Google Patents
画像処理装置、画像処理方法、プログラム、情報記録媒体及び撮像装置 Download PDFInfo
- Publication number
- JP4375662B2 JP4375662B2 JP2003387047A JP2003387047A JP4375662B2 JP 4375662 B2 JP4375662 B2 JP 4375662B2 JP 2003387047 A JP2003387047 A JP 2003387047A JP 2003387047 A JP2003387047 A JP 2003387047A JP 4375662 B2 JP4375662 B2 JP 4375662B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- frequency component
- small area
- composite image
- distance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Studio Devices (AREA)
- Image Processing (AREA)
- Editing Of Facsimile Originals (AREA)
Description
合成画像の小領域毎に付与された距離情報を参照し、(a)再生画像の合焦距離に一致する距離情報が付与された、合成画像の小領域の周波数変換係数の高周波成分をそのまま用いて当該再生画像の対応小領域の周波数変換係数の高周波成分を生成し、(b)再生画像の合焦距離に不一致の距離情報が付与された、合成画像の小領域の周波数変換係数の高周波成分を、当該距離情報により示される合焦距離と当該再生画像の合焦距離との距離差に応じた量子化パラメータにより量子化したものを用いて、当該再生画像の対応小領域の周波数変換係数の高周波成分を生成する手段と、
合成画像の小領域の周波数変換係数の低周波成分を用いて、再生画像の対応小領域の周波数変換係数の低周波成分を生成する手段と、
を有することを特徴とする画像処理装置である。
合成画像の小領域毎に付与された距離情報を参照し、(a)再生画像の合焦距離に一致する距離情報が付与された、合成画像の小領域の周波数変換係数の高周波成分をそのまま用いて当該再生画像の対応小領域の周波数変換係数の高周波成分を生成し、(b)再生画像の合焦距離に不一致の距離情報が付与された、合成画像の小領域の周波数変換係数の高周波成分を、当該距離情報により示される合焦距離と当該再生画像の合焦距離との距離差に応じた量子化パラメータにより量子化したものを用いて、当該再生画像の対応小領域の周波数変換係数の高周波成分を生成する処理と、
合成画像の小領域の周波数変換係数の低周波成分を用いて、再生画像の対応小領域の周波数変換係数の低周波成分を生成する処理と、
を含むことを特徴とする画像処理方法である。
図2は合成処理の例1を示すフローフローチャートであり、図3は合成処理の説明のための模式図である。
Yh=a・Σ|1HL|+b・Σ|2HL|+c・Σ|3HL| (1)式
(ただし、a,b,cは0以上の定数)
により計算される。HLサブバンド係数は水平方向の高周波成分であるため、この計算方法で求められるのは水平方向の高周波成分量である。
Yv=d・Σ|1LH|+e・Σ|2LH|+f・Σ|3LH| (2)式
(ただし、d,e,fは0以上の定数)
により計算される。LHサブバンド係数は垂直方向の高周波成分であるため、この計算方法で求められるのは垂直方向の高周波成分量である。
Yhv=a・Σ|1HL|+b・Σ|2HL|+c・Σ|3HL|+d・Σ|1LH|+e・Σ|2LH|+f・Σ|3LH| (3)式
(ただし、a,b,c,c,d,e,fは0以上の定数)
により計算される。つまり、水平方向及び水平方向の高周波成分量が求められる。
Y=a・Σ|1HL|+b・Σ|2HL|+c・Σ|1LH|+d・Σ|2LH|+e・Σ|1HH|+f・Σ|2HH| (4)式
(ただし、a,b,c,c,d,e,fは0以上の定数)
により計算される。つまり、水平方向、水平方向及び斜め方向の高周波成分量が求められる。
図4は合成処理の例2を示すフローチャートである。この合成処理例2では、同一画角で異なった合焦距離により撮影された複数の画像が、JPEG2000のコードストリームとして補助記憶部203に蓄積されているものとする。また、説明の簡略化のため、図3(A)に示したような合焦距離1,2,3(距離1<距離2<距離3)で撮影された3枚の画像P1,P2,P3を合成するものとする。
以上のようにして生成された合成画像から、その距離情報を利用し、合焦距離の異なる複数の画像を生成することができる。ここでは、合成前の画像P1,P2,P3に近い画像Q1,Q2,Q3を再生するものとして、分離再生処理の具体例を説明する。
図5は分離再生処理の例1を示すフローチャートであり、図6は分離再生処理の説明のための模式図である。ここでは、同一画角で異なった合焦距離により撮影された画像P1,P2,P3から合成された合成画像が、JPEG2000コードストリームとして補助記憶部203に蓄積されているものとする。
(1)合成画像の小領域のウェーブレット変換係数の低周波成分をそのまま、全ての再生画像Q1,Q2,Q3の対応小領域のウェーブレット変換係数の低周波成分とする最も簡易な方法。
(2)合成画像の合成時に、特定の合焦距離の画像Pjのウェーブレット変換係数の低周波成分が合成画像のウェーブレット変換係数の低周波成分として用いられた場合に適用される方法であり、合成画像のウェーブレット変換係数の低周波成分を、画像Pjの合焦距離と再生画像Qiの合焦距離の距離差に応じた量子化パラメータにより量子化したものを、再生画像Qiのウェーブレット変換係数の低周波成分とする方法。この方法の場合、各再生画像のウェーブレット変換係数の低周波成分を生成する処理は、図5のステップS46〜S54と類似した処理となる。
(3)合成画像の合成時に、小領域毎に、高周波成分量が最大の画像のウェーブレット変換係数の低周波成分が合成画像のウェーブレット変換係数の低周波成分として用いられた場合に適用される方法であり、小領域毎に、合成画像の合焦距離と同じ合焦距離の再生画像のウェーブレット変換係数の低周波成分として、合成画像のウェーブレット変換係数の低周波成分をそのまま(量子化せずに)用い、合成画像の合焦距離と異なる合焦距離の再生画像のウェーブレット変換係数の低周波成分として、その合成距離の距離差に応じた量子化パラメータにより合成画像のウェーブレット変換係数の低周波成分を量子化したものを用いる方法。この方法の場合、各再生画像のウェーブレット変換係数の低周波成分を生成する処理は、図5のステップS25〜S34と同じ処理となる。したがって、ステップS46〜S54において、ウェーブレット変換係数の高周波成分と低周波成分をまとめて処理することにより、再生画像のウェーブレット変換係数の高周波成分と低周波成分をまとめて生成することができるため、ステップS55を省くことも可能である。
図7は分離再生処理の例2を示すフローチャートである。ここでは、同一画角で異なった合焦距離により撮影された画像P1,P2,P3から合成された合成画像がイメージデータとして補助記憶部203に蓄積されているものとする。
さて、前述の画像合成処理を適用するためには、同じ画角で、異なった合焦距離で画像を複数枚撮影する必要があるが、このような撮影を自動的に行う機能は従来のデジタルカメラなどの撮像装置には装備されていない。このような機能と、前述の本発明の画像処理装置の画像合成処理の機能を有する、本発明の撮像装置について図8及び図9を参照し説明する。
201 記憶部
202 圧縮/伸長部
203 補助記憶部
204 データ入出力部
P1,P2,P3 合成前の画像
Q1,Q2,Q3 再生画像
300 撮像光学系
301 イメージャ
302 CDS・A/D変換部
303 信号処理部
306 制御部
307 圧縮/伸長部
308 記録媒体
310 操作部
Claims (2)
- 同一の画角で、異なった合焦距離で撮影された複数の画像(以下、元画像と記す)を合成して1つの合成画像を生成する画像合成処理方法であって、複数の元画像間で小領域毎に高周波成分量を比較し、小領域毎に高周波成分量が最大の元画像の周波数変換係数の高周波成分を集めて合成画像の高周波成分を生成する処理と、選択した元画像の周波数変換係数の低周波成分を集めて合成画像の周波数変換係数の低周波成分を生成する処理と、を含むことを特徴とする画像合成処理方法によって、同一の画角で異なった合焦距離で撮影された複数の画像から合成された、小領域毎に距離情報を付与された合成画像より、異なった合焦距離の複数の再生画像を生成する画像処理装置であって、
合成画像の小領域毎に付与された距離情報を参照し、(a)再生画像の合焦距離に一致する距離情報が付与された、合成画像の小領域の周波数変換係数の高周波成分をそのまま用いて当該再生画像の対応小領域の周波数変換係数の高周波成分を生成し、(b)再生画像の合焦距離に不一致の距離情報が付与された、合成画像の小領域の周波数変換係数の高周波成分を、当該距離情報により示される合焦距離と当該再生画像の合焦距離との距離差に応じた量子化パラメータにより量子化したものを用いて、当該再生画像の対応小領域の周波数変換係数の高周波成分を生成する手段と、
合成画像の小領域の周波数変換係数の低周波成分を用いて、再生画像の対応小領域の周波数変換係数の低周波成分を生成する手段と、
を有することを特徴とする画像処理装置。 - 同一の画角で、異なった合焦距離で撮影された複数の画像(以下、元画像と記す)を合成して1つの合成画像を生成する画像合成処理方法であって、複数の元画像間で小領域毎に高周波成分量を比較し、小領域毎に高周波成分量が最大の元画像の周波数変換係数の高周波成分を集めて合成画像の高周波成分を生成する処理と、選択した元画像の周波数変換係数の低周波成分を集めて合成画像の周波数変換係数の低周波成分を生成する処理と、を含むことを特徴とする画像合成処理方法によって、同一の画角で異なった合焦距離で撮影された複数の画像から合成された、小領域毎に距離情報を付与された合成画像より、異なった合焦距離の複数の再生画像を生成する画像処理方法であって、
合成画像の小領域毎に付与された距離情報を参照し、(a)再生画像の合焦距離に一致する距離情報が付与された、合成画像の小領域の周波数変換係数の高周波成分をそのまま用いて当該再生画像の対応小領域の周波数変換係数の高周波成分を生成し、(b)再生画像の合焦距離に不一致の距離情報が付与された、合成画像の小領域の周波数変換係数の高周波成分を、当該距離情報により示される合焦距離と当該再生画像の合焦距離との距離差に応じた量子化パラメータにより量子化したものを用いて、当該再生画像の対応小領域の周波数変換係数の高周波成分を生成する処理と、
合成画像の小領域の周波数変換係数の低周波成分を用いて、再生画像の対応小領域の周波数変換係数の低周波成分を生成する処理と、
を含むことを特徴とする画像処理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003387047A JP4375662B2 (ja) | 2003-11-17 | 2003-11-17 | 画像処理装置、画像処理方法、プログラム、情報記録媒体及び撮像装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003387047A JP4375662B2 (ja) | 2003-11-17 | 2003-11-17 | 画像処理装置、画像処理方法、プログラム、情報記録媒体及び撮像装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005149227A JP2005149227A (ja) | 2005-06-09 |
JP4375662B2 true JP4375662B2 (ja) | 2009-12-02 |
Family
ID=34694556
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003387047A Expired - Fee Related JP4375662B2 (ja) | 2003-11-17 | 2003-11-17 | 画像処理装置、画像処理方法、プログラム、情報記録媒体及び撮像装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4375662B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107615749A (zh) * | 2016-04-13 | 2018-01-19 | 索尼公司 | 信号处理装置和成像装置 |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4969474B2 (ja) * | 2007-02-09 | 2012-07-04 | オリンパスイメージング株式会社 | 復号方法、復号装置、及び復号プログラム |
US20090066693A1 (en) * | 2007-09-06 | 2009-03-12 | Roc Carson | Encoding A Depth Map Into An Image Using Analysis Of Two Consecutive Captured Frames |
KR101226913B1 (ko) * | 2011-04-12 | 2013-01-28 | 주식회사 휴비츠 | 영상 합성을 위한 3차원 프로파일 지도 작성 방법 |
JP4988057B1 (ja) * | 2011-10-11 | 2012-08-01 | アキュートロジック株式会社 | 全焦点画像生成方法、全焦点画像生成装置、全焦点画像生成プログラム、被写体高さ情報取得方法、被写体高さ情報取得装置及び被写体高さ情報取得プログラム |
-
2003
- 2003-11-17 JP JP2003387047A patent/JP4375662B2/ja not_active Expired - Fee Related
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107615749A (zh) * | 2016-04-13 | 2018-01-19 | 索尼公司 | 信号处理装置和成像装置 |
CN107615749B (zh) * | 2016-04-13 | 2020-09-18 | 索尼公司 | 信号处理装置和成像装置 |
Also Published As
Publication number | Publication date |
---|---|
JP2005149227A (ja) | 2005-06-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3956360B2 (ja) | 撮像装置及び画像処理方法 | |
JP4148462B2 (ja) | 画像処理装置、電子カメラ装置及び画像処理方法 | |
TWI436287B (zh) | 畫像編碼方法及裝置 | |
JP2006014121A (ja) | 画像符号化方法、画像符号化装置および撮像装置 | |
JP2004112760A (ja) | 画像記録装置及び画像データ選択方法 | |
JP2006295299A (ja) | デジタル絞りシステム | |
JP4822396B2 (ja) | 画像強調装置 | |
JP4958831B2 (ja) | 画像符号化装置及びその制御方法 | |
JP2002084540A (ja) | 画像処理装置、画像処理方法、電子カメラ、及び、プログラム | |
JP3789836B2 (ja) | 画像符号化装置および方法 | |
JP4375662B2 (ja) | 画像処理装置、画像処理方法、プログラム、情報記録媒体及び撮像装置 | |
JP4850111B2 (ja) | 画像表示装置およびそれを搭載した撮像装置 | |
JP2006074114A (ja) | 画像処理装置及び撮像装置 | |
US20230133895A1 (en) | Image encoding apparatus and method for controlling the same and non-transitory computer-readable storage medium | |
TWI390959B (zh) | 視頻訊號處理裝置,視頻訊號處理方法及視頻訊號處理程式 | |
JP2020120322A (ja) | 距離画像符号化装置およびそのプログラム、ならびに、距離画像復号装置およびそのプログラム | |
JP5869839B2 (ja) | 画像処理装置およびその制御方法 | |
JP2001359117A (ja) | 画像処理装置及び該装置における画像処理方法 | |
JP4458408B2 (ja) | 画像処理装置、画像処理方法、プログラム及び情報記録媒体 | |
JP6907004B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP4749508B2 (ja) | 画像復号方法 | |
JP6775339B2 (ja) | 画像符号化装置及びその制御方法 | |
JP4154178B2 (ja) | ビデオカメラ | |
JP4667424B2 (ja) | 画像復号装置 | |
JP2023070055A (ja) | 画像符号化装置及びその制御方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060726 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090624 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090701 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090806 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090902 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090903 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120918 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130918 Year of fee payment: 4 |
|
LAPS | Cancellation because of no payment of annual fees |