JP2011205531A - 立体撮像装置、ゴースト像処理装置およびゴースト像処理方法 - Google Patents
立体撮像装置、ゴースト像処理装置およびゴースト像処理方法 Download PDFInfo
- Publication number
- JP2011205531A JP2011205531A JP2010072513A JP2010072513A JP2011205531A JP 2011205531 A JP2011205531 A JP 2011205531A JP 2010072513 A JP2010072513 A JP 2010072513A JP 2010072513 A JP2010072513 A JP 2010072513A JP 2011205531 A JP2011205531 A JP 2011205531A
- Authority
- JP
- Japan
- Prior art keywords
- image
- ghost
- viewpoint
- viewpoint images
- image shift
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Image Processing (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
【解決手段】単一の撮影光学系の異なる領域を通過した光束をそれぞれ光電変換する撮像素子により生成された複数の視点画像を取得する工程(S102、S104)と、取得された複数の視点画像間の被写体像の視差による像ずれ量を算出する工程(S106)と、算出された像ずれ量に基づいて、複数の視点画像間の像ずれを補正する工程(S108)と、像ずれ補正後の複数の視点画像を比較することで、複数の視点画像内のゴースト像を検出する工程(S110)を備えた。
【選択図】図5
Description
図1は本発明に係る立体撮像装置10の実施の形態を示すブロック図である。
図2は位相差CCD16(単眼立体撮像素子)の構成例を示す図である。
図5は、第1実施形態におけるゴースト像処理の一例の流れを示すフローチャートである。本処理は、立体画像を構成する複数の視点画像からゴースト像を抽出するゴースト像抽出処理であり、図1のCPU40により行われる。CPU40により、本発明における像ずれ量算出手段、像ずれ補正手段およびゴースト像検出手段が構成されている。
図10は、第2実施形態におけるゴースト像処理の一例の流れを示すフローチャートである。本処理は、立体画像を構成する複数の視点画像からゴースト像を除去するゴースト像除去処理であり、図1のCPU40により行われる。CPU40により、本発明における像ずれ量算出手段、像ずれ補正手段、ゴースト像検出手段、ゴースト像除去手段および像ずれ量戻し手段が構成されている。
図11は、第3実施形態におけるゴースト像処理の一例の流れを示すフローチャートである。本処理は、立体画像を構成する複数の視点画像からゴースト像を除去するゴースト像除去処理であり、図1のCPU40により行われる。CPU40により、本発明における像ずれ量算出手段、像ずれ補正手段、ゴースト像検出手段、ゴースト像除去手段および像ずれ量戻し手段が構成されている。
図12は、第4実施形態におけるゴースト像処理の一例の流れを示すフローチャートである。本処理は、立体画像を構成する複数の視点画像からゴースト像を除去するゴースト像除去処理であり、図1のCPU40により行われる。CPU40により、本発明における像ずれ量算出手段、像ずれ補正手段、画像合成手段および複数視点化手段が構成されている。尚、本処理では、図5に示したゴースト像抽出処理は不要である。
次に、第5実施形態(瞳分割方向が複数ある場合)について説明する。
Claims (14)
- 単一の撮影光学系の異なる領域を通過した光束をそれぞれ光電変換する撮像素子により生成された複数の視点画像を取得する画像取得手段と、
取得された前記複数の視点画像間の被写体像の視差による像ずれ量を算出する像ずれ量算出手段と、
前記像ずれ量に基づいて、前記複数の視点画像間の像ずれを補正する像ずれ補正手段と、
像ずれ補正後の前記複数の視点画像を比較することで、前記複数の視点画像内のゴースト像を検出するゴースト像検出手段と、
を備えたことを特徴とするゴースト像処理装置。 - 前記ゴースト像検出手段は、像ずれ補正後の前記複数の視点画像の対応画素間で画素値の差分を算出することにより、前記対応画素ごとの前記差分の配列からなるゴースト抽出データを生成することを特徴とする請求項1に記載のゴースト像処理装置。
- 前記ゴースト抽出データ内の前記差分の極性に基づいて前記複数の視点画像の各々にて前記ゴースト像が存在する部分を認識し、像ずれ補正後の前記複数の視点画像の各々から前記ゴースト像を除去するゴースト像除去手段と、
前記ゴースト像が除去された前記複数の視点画像間の像ずれ量を像ずれ補正前の量に戻す像ずれ量戻し手段と、
を備えたことを特徴とする請求項2に記載のゴースト像処理装置。 - 前記ゴースト像除去手段は、像ずれ補正後の前記複数の視点画像のうち前記ゴースト像が存在する部分の画素値から前記ゴースト抽出データの値を差し引くことを特徴とする請求項3に記載のゴースト像処理装置。
- 前記ゴースト像除去手段は、像ずれ補正後の前記複数の視点画像のうち一方の前記視点画像の前記ゴースト像が存在する部分の画素値を他方の前記視点画像のゴースト像が存在しない部分の画素値に置き換えることを特徴とする請求項3に記載のゴースト像処理装置。
- 前記撮像素子は、第1の瞳分割方向に分離された第1の画素群および第2の画素群と、第2の瞳分割方向に分離された第3および第4の画素群とを有し、
前記画像取得手段は、前記第1の画素群、前記第2の画素群、前記第3の画素群および前記第4の画素群によりそれぞれ生成された第1の視点画像、第2の視点画像、第3の視点画像および第4の視点画像を取得し、
前記像ずれ量算出手段は、前記第1の視点画像と前記第2の視点画像との視差による第1の像ずれ量を算出するとともに、前記第3の視点画像と前記第4の視点画像との視差による第2の像ずれ量を算出し、
前記像ずれ補正手段は、前記第1の像ずれ量に基づいて前記第1の視点画像と前記第2の視点画像との像ずれを補正するとともに、前記第2の像ずれ量に基づいて前記第3の視点画像と前記第4の視点画像との像ずれを補正し、
前記ゴースト像検出手段は、像ずれ補正後の前記第1の視点画像と前記第2の視点画像とを比較するとともに、像ずれ補正後の前記第3の視点画像と前記第4の視点画像とを比較することで、前記複数の視点画像内のゴースト像を検出することを特徴とする請求項1ないし5のうちいずれか1項に記載のゴースト像処理装置。 - 単一の撮影光学系の異なる領域を通過した光束をそれぞれ光電変換する撮像素子により生成された複数の視点画像を取得する画像取得手段と、
取得された前記複数の視点画像間の被写体像の視差による像ずれ量を算出する像ずれ量算出手段と、
前記像ずれ量に基づいて、前記複数の視点画像間の像ずれを補正する像ずれ補正手段と、
像ずれ補正後の前記複数の視点画像の対応画素間で明るさを比較して、暗い方の部分のみを抽出することで、ゴースト像を含まない合成画像を生成する画像合成手段と、
を備えたことを特徴とするゴースト像処理装置。 - 前記単一の撮影光学系と、前記撮像素子と、請求項1ないし7のうちいずれか1項に記載のゴースト像処理装置と、を備えたことを特徴とする立体撮像装置。
- 単一の撮影光学系の異なる領域を通過した光束をそれぞれ光電変換する撮像素子により生成された複数の視点画像を取得する画像取得工程と、
取得された前記複数の視点画像間の被写体像の視差による像ずれ量を算出する像ずれ量算出工程と、
前記像ずれ量に基づいて、前記複数の視点画像間の像ずれを補正する像ずれ補正工程と、
像ずれ補正後の前記複数の視点画像を比較することで、前記複数の視点画像内のゴースト像を検出するゴースト像検出工程と、
を備えたことを特徴とするゴースト像処理方法。 - 前記ゴースト像検出工程は、像ずれ補正後の前記複数の視点画像の対応画素間で画素値の差分を算出することにより、前記対応画素ごとの前記差分の配列からなるゴースト抽出データを生成することを特徴とする請求項9に記載のゴースト像処理方法。
- 前記ゴースト抽出データ内の前記差分の極性に基づいて前記複数の視点画像の各々にて前記ゴースト像が存在する領域を認識し、像ずれ補正後の前記複数の視点画像の各々から前記ゴースト像を除去するゴースト像除去工程と、
前記ゴースト像が除去された前記複数の視点画像間の像ずれ量を像ずれ補正前の量に戻す像ずれ量戻し工程と、
を備えたことを特徴とする請求項10に記載のゴースト像処理方法。 - 前記ゴースト像除去工程は、像ずれ補正後の前記複数の視点画像のうち前記ゴースト像が存在する部分の画素値から前記ゴースト抽出データの値を差し引くことを特徴とする請求項11に記載のゴースト像処理方法。
- 前記ゴースト像除去工程は、像ずれ補正後の前記複数の視点画像のうち一方の前記視点画像の前記ゴースト像が存在する部分の画素値を他方の前記視点画像のゴースト像が存在しない部分の画素値に置き換えることを特徴とする請求項11に記載のゴースト像処理方法。
- 単一の撮影光学系の異なる領域を通過した光束をそれぞれ光電変換する撮像素子により生成された複数の視点画像を取得する画像取得工程と、
取得された前記複数の視点画像間の被写体像の視差による像ずれ量を算出する像ずれ量算出工程と、
前記像ずれ量に基づいて、前記複数の視点画像間の像ずれを補正する像ずれ補正工程と、
像ずれ補正後の前記複数の視点画像の対応画素間で明るさを比較して、暗い方の部分のみを抽出することで、ゴースト像を含まない合成画像を生成する画像合成工程と、
を備えたことを特徴とするゴースト像処理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010072513A JP5284306B2 (ja) | 2010-03-26 | 2010-03-26 | 立体撮像装置、ゴースト像処理装置およびゴースト像処理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010072513A JP5284306B2 (ja) | 2010-03-26 | 2010-03-26 | 立体撮像装置、ゴースト像処理装置およびゴースト像処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011205531A true JP2011205531A (ja) | 2011-10-13 |
JP5284306B2 JP5284306B2 (ja) | 2013-09-11 |
Family
ID=44881661
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010072513A Expired - Fee Related JP5284306B2 (ja) | 2010-03-26 | 2010-03-26 | 立体撮像装置、ゴースト像処理装置およびゴースト像処理方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5284306B2 (ja) |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2013031349A1 (ja) * | 2011-08-30 | 2013-03-07 | 富士フイルム株式会社 | 撮影装置及び撮影方法 |
JP2013157726A (ja) * | 2012-01-27 | 2013-08-15 | Canon Inc | 撮像装置および撮像装置の制御方法 |
JP2013179564A (ja) * | 2012-02-01 | 2013-09-09 | Canon Inc | 画像処理方法、画像処理装置および撮像装置 |
CN104717476A (zh) * | 2013-12-11 | 2015-06-17 | 佳能株式会社 | 图像处理方法、图像处理装置和图像捕获装置 |
EP2934005A1 (en) | 2014-04-18 | 2015-10-21 | Canon Kabushiki Kaisha | Image processing method, image processing apparatus, image pickup apparatus, image processing program, and storage medium |
JP2016163171A (ja) * | 2015-03-02 | 2016-09-05 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体 |
JP2016163169A (ja) * | 2015-03-02 | 2016-09-05 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体 |
US20170154408A1 (en) * | 2015-11-30 | 2017-06-01 | Canon Kabushiki Kaisha | Image processing device, image processing method, imaging device, and recording medium |
JP2017108377A (ja) * | 2015-11-30 | 2017-06-15 | キヤノン株式会社 | 画像処理装置および画像処理方法、撮像装置、プログラム、記憶媒体 |
US10063829B2 (en) | 2014-04-18 | 2018-08-28 | Canon Kabushiki Kaisha | Image processing method, image processing apparatus, image pickup apparatus, and non-transitory computer-readable storage medium |
CN113052781A (zh) * | 2019-12-26 | 2021-06-29 | 华为技术有限公司 | 图像检测方法、装置、设备、***和存储介质 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6856999B2 (ja) | 2016-09-23 | 2021-04-14 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000193883A (ja) * | 1998-12-25 | 2000-07-14 | Sanyu Seni:Kk | 立体映像撮影用光学部品及びそれを用いた立体映像撮影装置 |
JP2005091865A (ja) * | 2003-09-18 | 2005-04-07 | Olympus Corp | 被写界深度拡大システム |
-
2010
- 2010-03-26 JP JP2010072513A patent/JP5284306B2/ja not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000193883A (ja) * | 1998-12-25 | 2000-07-14 | Sanyu Seni:Kk | 立体映像撮影用光学部品及びそれを用いた立体映像撮影装置 |
JP2005091865A (ja) * | 2003-09-18 | 2005-04-07 | Olympus Corp | 被写界深度拡大システム |
Cited By (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9185389B2 (en) | 2011-08-30 | 2015-11-10 | Fujifilm Corporation | Imaging device and imaging method |
JP5536959B2 (ja) * | 2011-08-30 | 2014-07-02 | 富士フイルム株式会社 | 撮影装置、撮影方法及びプログラム |
EP2753062A1 (en) * | 2011-08-30 | 2014-07-09 | Fujifilm Corporation | Imaging device and imaging method |
EP2753062A4 (en) * | 2011-08-30 | 2015-02-11 | Fujifilm Corp | IMAGING DEVICE AND IMAGING METHOD |
JPWO2013031349A1 (ja) * | 2011-08-30 | 2015-03-23 | 富士フイルム株式会社 | 撮影装置、撮影方法及びプログラム |
WO2013031349A1 (ja) * | 2011-08-30 | 2013-03-07 | 富士フイルム株式会社 | 撮影装置及び撮影方法 |
JP2013157726A (ja) * | 2012-01-27 | 2013-08-15 | Canon Inc | 撮像装置および撮像装置の制御方法 |
JP2013179564A (ja) * | 2012-02-01 | 2013-09-09 | Canon Inc | 画像処理方法、画像処理装置および撮像装置 |
US10049439B2 (en) | 2013-12-11 | 2018-08-14 | Canon Kabushiki Kaisha | Image processing method, image processing apparatus, image capturing apparatus and non-transitory computer-readable storage medium |
CN104717476A (zh) * | 2013-12-11 | 2015-06-17 | 佳能株式会社 | 图像处理方法、图像处理装置和图像捕获装置 |
CN104717476B (zh) * | 2013-12-11 | 2017-11-17 | 佳能株式会社 | 图像处理方法、图像处理装置和图像捕获装置 |
JP2015115730A (ja) * | 2013-12-11 | 2015-06-22 | キヤノン株式会社 | 画像処理方法、画像処理装置および撮像装置 |
US9684954B2 (en) | 2013-12-11 | 2017-06-20 | Canon Kabushiki Kaisha | Image processing method, image processing apparatus, image capturing apparatus and non-transitory computer-readable storage medium |
US10063829B2 (en) | 2014-04-18 | 2018-08-28 | Canon Kabushiki Kaisha | Image processing method, image processing apparatus, image pickup apparatus, and non-transitory computer-readable storage medium |
EP2934005A1 (en) | 2014-04-18 | 2015-10-21 | Canon Kabushiki Kaisha | Image processing method, image processing apparatus, image pickup apparatus, image processing program, and storage medium |
US9894343B2 (en) | 2014-04-18 | 2018-02-13 | Canon Kabushiki Kaisha | Image processing method, image processing apparatus, image pickup apparatus, and non-transitory computer-readable storage medium |
CN105007405B (zh) * | 2014-04-18 | 2018-07-06 | 佳能株式会社 | 图像处理方法、图像处理设备和摄像设备 |
JP2015207851A (ja) * | 2014-04-18 | 2015-11-19 | キヤノン株式会社 | 画像処理方法、画像処理装置、撮像装置、画像処理プログラム、および、記憶媒体 |
CN105007405A (zh) * | 2014-04-18 | 2015-10-28 | 佳能株式会社 | 图像处理方法、图像处理设备和摄像设备 |
JP2016163169A (ja) * | 2015-03-02 | 2016-09-05 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体 |
JP2016163171A (ja) * | 2015-03-02 | 2016-09-05 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体 |
US10097806B2 (en) | 2015-03-02 | 2018-10-09 | Canon Kabushiki Kaisha | Image processing apparatus, image pickup apparatus, image processing method, non-transitory computer-readable storage medium for improving quality of image |
US10116923B2 (en) | 2015-03-02 | 2018-10-30 | Canon Kabushiki Kaisha | Image processing apparatus, image pickup apparatus, image processing method, and non-transitory computer-readable storage medium for improving quality of image |
JP2017108377A (ja) * | 2015-11-30 | 2017-06-15 | キヤノン株式会社 | 画像処理装置および画像処理方法、撮像装置、プログラム、記憶媒体 |
US20170154408A1 (en) * | 2015-11-30 | 2017-06-01 | Canon Kabushiki Kaisha | Image processing device, image processing method, imaging device, and recording medium |
US10325356B2 (en) | 2015-11-30 | 2019-06-18 | Canon Kabushiki Kaisha | Image processing device, image processing method, imaging device, and recording medium for exclusively performing adjustment processing or viewpoint change processing |
CN113052781A (zh) * | 2019-12-26 | 2021-06-29 | 华为技术有限公司 | 图像检测方法、装置、设备、***和存储介质 |
CN113052781B (zh) * | 2019-12-26 | 2024-04-12 | 华为技术有限公司 | 图像检测方法、装置、设备、***和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
JP5284306B2 (ja) | 2013-09-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5284306B2 (ja) | 立体撮像装置、ゴースト像処理装置およびゴースト像処理方法 | |
JP5192096B2 (ja) | 立体撮像装置 | |
JP5640143B2 (ja) | 撮像装置及び撮像方法 | |
JP5180407B2 (ja) | 立体撮像装置および視差画像復元方法 | |
JP5421829B2 (ja) | 撮像装置 | |
JP5871989B2 (ja) | 撮影装置、撮影方法及びプログラム | |
JP5368350B2 (ja) | 立体撮像装置 | |
JP5451894B2 (ja) | 立体撮像装置およびシェーディング補正方法 | |
US20110234767A1 (en) | Stereoscopic imaging apparatus | |
JP5469258B2 (ja) | 撮像装置および撮像方法 | |
CN103733606B (zh) | 成像设备 | |
CN102860015A (zh) | 立体成像装置、图像再现装置和编辑软件 | |
US9124875B2 (en) | Stereoscopic imaging apparatus | |
WO2013069445A1 (ja) | 立体撮像装置及び画像処理方法 | |
JP5628914B2 (ja) | 撮像装置および撮像方法 | |
WO2012043003A1 (ja) | 立体画像表示装置および立体画像表示方法 | |
JP2012124650A (ja) | 撮像装置および撮像方法 | |
JP2010200024A (ja) | 立体画像表示装置および立体画像表示方法 | |
WO2013031392A1 (ja) | 立体撮像装置 | |
JP2014063190A (ja) | 撮像装置 | |
JP5649837B2 (ja) | 立体撮像装置 | |
JP2011077680A (ja) | 立体撮影装置および撮影制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120730 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130515 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130521 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130529 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |