TWI456983B - 相機模組、圖像處理裝置及圖像記錄方法 - Google Patents

相機模組、圖像處理裝置及圖像記錄方法 Download PDF

Info

Publication number
TWI456983B
TWI456983B TW099140801A TW99140801A TWI456983B TW I456983 B TWI456983 B TW I456983B TW 099140801 A TW099140801 A TW 099140801A TW 99140801 A TW99140801 A TW 99140801A TW I456983 B TWI456983 B TW I456983B
Authority
TW
Taiwan
Prior art keywords
auxiliary camera
image
distance
camera module
imaged
Prior art date
Application number
TW099140801A
Other languages
English (en)
Other versions
TW201143384A (en
Inventor
Takayuki Ogasahara
Original Assignee
Toshiba Kk
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Kk filed Critical Toshiba Kk
Publication of TW201143384A publication Critical patent/TW201143384A/zh
Application granted granted Critical
Publication of TWI456983B publication Critical patent/TWI456983B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H04N23/958—Computational photography systems, e.g. light-field imaging systems for extended depth of field imaging

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)
  • Color Television Image Signal Generators (AREA)

Claims (19)

  1. 一種相機模組，其特徵為：具有：複數個輔助相機模組，其分別具備：攝像元件，用於進行被攝像物之攝像；及攝像透鏡，用於使取自於被攝像物之光射入上述攝像元件；解像度復原手段，用於進行上述被攝像物圖像之解像度復原處理；被攝像物距離推斷手段，用於推斷上述被攝像物圖像之上述被攝像物距離；及矩陣選擇手段，依據上述被攝像物距離推斷手段所推斷之上述被攝像物距離，來選擇反迴旋積矩陣(deconvolution matrix)；上述複數個輔助相機模組之其中至少2個，係具備上述攝像透鏡，用於將成為最佳焦點時之上述輔助相機模組與上述被攝像物之間之被攝像物距離設為互異；上述解像度復原手段，係依據上述矩陣選擇手段所選擇之上述反迴旋積矩陣，針對上述輔助相機模組所獲得之各個圖像資料，進行上述解像度復原處理。
  2. 如申請專利範圍第1項之相機模組，其中上述複數個輔助相機模組，係分擔上述被攝像物圖像之各色成份而進行攝像，上述複數個輔助相機模組之中用於進行上述被攝像物圖像之同色成份之攝像的至少2個，係具備上述攝像透 鏡，用於使成為上述最佳焦點時之上述被攝像物距離呈現互異。
  3. 如申請專利範圍第2項之相機模組，其中上述同色成份為綠色成份。
  4. 如申請專利範圍第1項之相機模組，其中上述複數個輔助相機模組之上述攝像透鏡，係構成小透鏡(lenslet)。
  5. 如申請專利範圍第1項之相機模組，其中以上述複數個輔助相機模組之其中1個為基準輔助相機模組，上述基準輔助相機模組以外之輔助相機模組之對上述被攝像物之成像位置，相對於上述基準輔助相機模組之對上述被攝像物圖像之成像位置，係被移位而構成。
  6. 如申請專利範圍第1項之相機模組，其中上述被攝像物距離推斷手段，係依據上述至少2個輔助相機模組所獲得之上述圖像資料，來推斷上述被攝像物距離，上述至少2個輔助相機模組，係將成為上述最佳焦點時之上述被攝像物距離設為互異者。
  7. 如申請專利範圍第6項之相機模組，其中上述被攝像物距離推斷手段，係針對由上述至少2個輔助相機模組所獲得之上述圖像資料，被施予數值化而得之空間頻率特性進行比較，來推斷上述被攝像物距離。
  8. 一種圖像處理裝置，其特徵為：具有： 解像度復原手段，用於進行複數個輔助相機模組所攝像之被攝像物圖像之解像度復原處理；被攝像物距離推斷手段，用於推斷上述輔助相機模組與被攝像物之間的被攝像物距離；及矩陣選擇手段，依據上述被攝像物距離推斷手段所推斷之上述被攝像物距離，來選擇反迴旋積矩陣；上述解像度復原手段，係依據上述矩陣選擇手段所選擇之上述反迴旋積矩陣，針對上述輔助相機模組所獲得之各個圖像資料，進行上述解像度復原處理。
  9. 如申請專利範圍第8項之圖像處理裝置，其中上述複數個輔助相機模組係包含至少2個輔助相機模組，該至少2個輔助相機模組，係將成為最佳焦點時之上述被攝像物距離設為互異者；上述被攝像物距離推斷手段，係依據上述至少2個輔助相機模組所獲得之上述圖像資料，來推斷上述被攝像物距離。
  10. 如申請專利範圍第9項之圖像處理裝置，其中上述被攝像物距離推斷手段，係針對由上述至少2個輔助相機模組所獲得之上述圖像資料，被施予數值化而得之空間頻率特性進行比較，來推斷上述被攝像物距離。
  11. 如申請專利範圍第9項之圖像處理裝置，其中於上述被攝像物距離推斷手段，在推斷上述被攝像物距離為近接距離時，上述矩陣選擇手段，係針對上述輔助相機模組所獲得之上述圖像資料，選擇實施近接距離之上 述解像度復原處理的上述反迴旋積矩陣，上述輔助相機模組係具備以無限遠為最佳焦點之攝像透鏡者；於上述被攝像物距離推斷手段，在推斷上述被攝像物距離為無限遠時，上述矩陣選擇手段，係針對上述輔助相機模組所獲得之上述圖像資料，選擇實施無限遠之上述解像度復原處理的上述反迴旋積矩陣，上述輔助相機模組係具備以近接距離為最佳焦點之攝像透鏡者。
  12. 如申請專利範圍第11項之圖像處理裝置，其中上述解像度復原處理手段，針對依據上述矩陣選擇手段所選擇之上述反迴旋積矩陣而被實施上述解像度復原處理以外的上述圖像資料，係省略上述解像度復原處理之實施而予以輸出。
  13. 一種圖像記錄方法，其特徵為：藉由複數個輔助相機模組進行被攝像物圖像之攝像，該複數個輔助相機模組，係包含至少2個輔助相機模組，用於將成為最佳焦點時之上述輔助相機模組與被攝像物之間之被攝像物距離設為互異；進行上述被攝像物圖像之解像度復原處理；推斷上述被攝像物圖像之上述被攝像物距離；及依據推斷之上述被攝像物距離，來選擇反迴旋積矩陣；依據所選擇之上述反迴旋積矩陣，針對上述輔助相機模組所獲得之各個圖像資料，進行上述解像度復原處理。
  14. 如申請專利範圍第13項之圖像記錄方法，其中 藉由上述複數個輔助相機模組，來分擔上述被攝像物圖像之各色成份而進行攝像，藉由將成為上述最佳焦點時之上述被攝像物距離設為互異的上述至少2個輔助相機模組，來進行上述被攝像物圖像之同色成份之攝像。
  15. 如申請專利範圍第13項之圖像記錄方法，其中依據上述至少2個輔助相機模組來推斷上述被攝像物距離，該至少2個輔助相機模組係將成為上述最佳焦點時之上述被攝像物距離設為互異者。
  16. 如申請專利範圍第15項之圖像記錄方法，其中針對由上述至少2個輔助相機模組所獲得之上述圖像資料被施予數值化而得之空間頻率特性進行比較，來推斷上述被攝像物距離。
  17. 如申請專利範圍第15項之圖像記錄方法，其中在推斷上述被攝像物距離為近接距離時，係針對上述輔助相機模組所獲得之上述圖像資料，選擇實施近接距離之上述解像度復原處理的上述反迴旋積矩陣，上述輔助相機模組係以無限遠為最佳焦點者；在推斷上述被攝像物距離為無限遠時，係針對上述輔助相機模組所獲得之上述圖像資料，選擇實施無限遠之上述解像度復原處理的上述反迴旋積矩陣，上述輔助相機模組係以近接距離為最佳焦點者。
  18. 如申請專利範圍第17項之圖像記錄方法，其中針對依據所選擇之上述反迴旋積矩陣而被實施上述解 像度復原處理以外的上述圖像資料，係省略上述解像度復原處理之實施。
  19. 如申請專利範圍第13項之圖像記錄方法，其中以上述複數個輔助相機模組之其中1個為基準輔助相機模組，上述基準輔助相機模組以外之輔助相機模組之對上述被攝像物之成像位置，相對於上述基準輔助相機模組之對上述被攝像物圖像之成像位置，係被移位。
TW099140801A 2009-12-24 2010-11-25 相機模組、圖像處理裝置及圖像記錄方法 TWI456983B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009293283A JP5404376B2 (ja) 2009-12-24 2009-12-24 カメラモジュール及び画像処理装置

Publications (2)

Publication Number Publication Date
TW201143384A TW201143384A (en) 2011-12-01
TWI456983B true TWI456983B (zh) 2014-10-11

Family

ID=44175555

Family Applications (1)

Application Number Title Priority Date Filing Date
TW099140801A TWI456983B (zh) 2009-12-24 2010-11-25 相機模組、圖像處理裝置及圖像記錄方法

Country Status (4)

Country Link
US (1) US8542290B2 (zh)
JP (1) JP5404376B2 (zh)
CN (1) CN102111544B (zh)
TW (1) TWI456983B (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102257822B (zh) * 2009-10-27 2014-01-08 松下电器产业株式会社 摄像装置和使用它的测距装置
JP5634795B2 (ja) * 2010-08-19 2014-12-03 富士フイルム株式会社 撮像モジュールおよび撮像装置
CN103108195B (zh) * 2011-11-10 2016-08-24 鸿富锦精密工业（深圳）有限公司 立体摄像装置
US8810712B2 (en) 2012-01-20 2014-08-19 Htc Corporation Camera system and auto focus method
JP5837463B2 (ja) * 2012-07-06 2015-12-24 株式会社東芝 画像処理装置および画像処理システム
US9065993B1 (en) * 2012-07-31 2015-06-23 Google Inc. Fixed focus camera with lateral sharpness transfer
TWI451344B (zh) * 2012-08-27 2014-09-01 Pixart Imaging Inc 手勢辨識系統及手勢辨識方法
CN102871638B (zh) * 2012-10-16 2014-11-05 广州市盛光微电子有限公司 一种医用近距离成像方法、***以及探头
JP6478511B2 (ja) * 2014-08-01 2019-03-06 キヤノン株式会社 画像処理方法、画像処理装置、複眼撮像装置、画像処理プログラム、および、記憶媒体
CN107124547B (zh) * 2017-04-19 2020-10-16 宇龙计算机通信科技(深圳)有限公司 双摄像头拍照方法及装置
EP3780576A4 (en) * 2018-03-29 2021-04-21 Sony Corporation INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING METHOD, PROGRAM AND INFORMATION PROCESSING SYSTEM
CN112470071B (zh) * 2020-02-28 2021-12-21 深圳市大疆创新科技有限公司 三光相机、云台结构及移动平台

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100097491A1 (en) * 2008-10-21 2010-04-22 Stmicroelectronics S.R.L. Compound camera sensor and related method of processing digital images

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3938256B2 (ja) 1999-01-12 2007-06-27 株式会社日立国際電気 テレビジョンカメラ装置
JP2005303694A (ja) * 2004-04-13 2005-10-27 Konica Minolta Holdings Inc 複眼撮像装置
JP2005354610A (ja) 2004-06-14 2005-12-22 Canon Inc 画像処理装置、画像処理方法および画像処理プログラム
JP4418317B2 (ja) 2004-07-21 2010-02-17 オリンパス株式会社 撮像装置
US7471453B2 (en) * 2005-11-17 2008-12-30 Panasonic Corporation Zoom lens system, imaging device and camera
JP4940740B2 (ja) * 2006-04-13 2012-05-30 コニカミノルタオプト株式会社 撮像レンズ、撮像レンズを備えた撮像装置及び撮像装置を備えた携帯端末
KR100827242B1 (ko) * 2006-06-26 2008-05-07 삼성전기주식회사 이미지 복원 방법 및 장치
KR100772910B1 (ko) * 2006-06-26 2007-11-05 삼성전기주식회사 디지털 카메라 모듈
EP1874034A3 (en) 2006-06-26 2011-12-21 Samsung Electro-Mechanics Co., Ltd. Apparatus and method of recovering high pixel image
US7912307B2 (en) * 2007-02-08 2011-03-22 Yu Wang Deconvolution method using neighboring-pixel-optical-transfer-function in fourier domain
CN101548154B (zh) * 2007-07-23 2012-05-02 松下电器产业株式会社 具有测距功能的复眼式摄像装置
JP2009111774A (ja) * 2007-10-30 2009-05-21 Kyocera Corp 撮像装置および画像処理方法
JP2009216600A (ja) * 2008-03-11 2009-09-24 Funai Electric Co Ltd 距離測定装置
JP2011044801A (ja) * 2009-08-19 2011-03-03 Toshiba Corp 画像処理装置

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100097491A1 (en) * 2008-10-21 2010-04-22 Stmicroelectronics S.R.L. Compound camera sensor and related method of processing digital images

Also Published As

Publication number Publication date
CN102111544A (zh) 2011-06-29
US20110157399A1 (en) 2011-06-30
US8542290B2 (en) 2013-09-24
TW201143384A (en) 2011-12-01
CN102111544B (zh) 2014-09-17
JP2011135359A (ja) 2011-07-07
JP5404376B2 (ja) 2014-01-29

Similar Documents

Publication Publication Date Title
TWI456983B (zh) 相機模組、圖像處理裝置及圖像記錄方法
Abdelhamed et al. A high-quality denoising dataset for smartphone cameras
TWI408956B (zh) 畫像處理裝置、固態攝像裝置及照相機模組
JP5909540B2 (ja) 画像処理表示装置
JP5429358B2 (ja) ゴースト検出装置およびそれを用いる撮像装置、ゴースト検出方法、および、ゴースト除去方法
JP2017011329A5 (zh)
JP2017055328A5 (zh)
JP2013084247A5 (zh)
JP2005252625A5 (zh)
JP2012069099A (ja) 画像処理方法、画像処理装置および画像処理プログラム
JP2006339903A5 (zh)
JP6137316B2 (ja) 深さ位置検出装置、撮像素子、及び深さ位置検出方法
JP2010193058A5 (zh)
JP2015035717A5 (zh)
JP2013128217A5 (zh)
JP2014130131A (ja) 撮像装置、半導体集積回路および撮像方法
JP2008278515A5 (zh)
JP2015018084A5 (ja) 撮像装置、カメラシステム及び画像処理方法
JP5330439B2 (ja) カメラモジュール、画像処理装置及び画像処理方法
JP2009047734A (ja) 撮像装置及び画像処理プログラム
JP6039381B2 (ja) 焦点検出装置、撮像装置、撮像システム、および、焦点検出方法
JP4972902B2 (ja) 撮像装置および撮像方法
JP5900049B2 (ja) 被写界深度拡張システム及び被写界深度拡張方法
JP2009094577A5 (zh)
Peng et al. Endoscopic video deblurring via synthesis

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees