JP2016514936A5 - - Google Patents

Download PDF

Info

Publication number
JP2016514936A5
JP2016514936A5 JP2016507589A JP2016507589A JP2016514936A5 JP 2016514936 A5 JP2016514936 A5 JP 2016514936A5 JP 2016507589 A JP2016507589 A JP 2016507589A JP 2016507589 A JP2016507589 A JP 2016507589A JP 2016514936 A5 JP2016514936 A5 JP 2016514936A5
Authority
JP
Japan
Prior art keywords
image
scale map
tone
nir
tone scale
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016507589A
Other languages
English (en)
Other versions
JP6416208B2 (ja
JP2016514936A (ja
Filing date
Publication date
Priority claimed from US14/151,589 external-priority patent/US9171355B2/en
Application filed filed Critical
Publication of JP2016514936A publication Critical patent/JP2016514936A/ja
Publication of JP2016514936A5 publication Critical patent/JP2016514936A5/ja
Application granted granted Critical
Publication of JP6416208B2 publication Critical patent/JP6416208B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (15)

  1. イメージノイズ除去のための電子的な方法において、
    前記方法は、
    NIRイメージと可視光イメージとを含むイメージデータを受け取ることと、
    前記NIRイメージ中のピクセルを、前記可視光イメージ中の対応するピクセルと位置調整することと、
    前記NIRイメージ中の階調ベクトルと、前記可視光イメージ中の階調ベクトルとを決定することと、
    前記NIRイメージ中の前記階調ベクトルと、前記可視光イメージ中の前記階調ベクトルとを比較して、ピクセル毎の第1の階調スケールマップ値を発生させることと、
    前記ピクセル毎の第1の階調スケールマップ値に基づいて、第1の階調スケールマップを発生させることと、
    前記第1の階調スケールマップを使用して、前記可視光イメージをノイズ除去して、第1のノイズ除去されたイメージを発生させることと、
    前記第1のノイズ除去されたイメージ中の階調ベクトルを決定することと、
    前記NIRイメージ中の前記階調ベクトルと、前記第1のノイズ除去されたイメージ中の前記階調ベクトルとを比較して、ピクセル毎の第2の階調スケールマップ値を発生させることと、
    前記ピクセル毎の第2の階調スケールマップ値に基づいて、第2の階調スケールマップを発生させることと、
    前記第2の階調スケールマップを使用して、前記第1のノイズ除去されたイメージをノイズ除去して、第2のノイズ除去されたイメージを発生させることとを含む方法。
  2. 前記第1の階調スケールマップを使用して、前記可視光イメージをノイズ除去することは、ピクセル毎の第1の階調スケールマップ値を使用して、前記NIRイメージからノイズ除去ガイダンスのレベルを決定することをさらに含む請求項1記載の方法。
  3. 前記第1の階調スケールマップを使用して、前記可視光イメージをノイズ除去することは、加重最小二乗平滑化技術を用いて、前記可視光イメージからノイズを取り除くことを含む請求項1記載の方法。
  4. 前記ピクセル毎の第1の階調スケールマップ値は、前記NIRイメージ中の前記階調ベクトルと、前記可視光イメージ中の前記階調ベクトルとの間の差のレベルを表す請求項2記載の方法。
  5. 前記第2のノイズ除去されたイメージ中の階調ベクトルを決定することと、
    前記NIRイメージ中の前記階調ベクトルと、前記第2のノイズ除去されたイメージ中の前記階調ベクトルとから、追加の階調スケールマップを発生させることと、
    前記第1の階調スケールマップと、前記追加の階調スケールマップとの間の差を計算することをさらに含む請求項1記載の方法。
  6. 前記差しきい値と比較することと、
    前記差が前記しきい値よりも大きい場合、前記追加の階調スケールマップを使用して、前記第2のノイズ除去されたイメージをノイズ除去することか、または、前記差が前記しきい値よりも小さい場合、前記第2のノイズ除去されたイメージを最終イメージとして出力することとをさらに含む請求項5記載の方法。
  7. イメージングシステムにおいて、
    NIRイメージを捕捉する手段と、
    可視光イメージを捕捉する手段と、
    前記NIRイメージ中の階調ベクトルと、前記可視光イメージ中の階調ベクトルとを決定する手段と、
    前記NIRイメージ中の前記階調ベクトルと、前記可視光イメージ中の前記階調ベクトルとを比較して、ピクセル毎の第1の階調スケールマップ値を発生させる手段と、
    前記ピクセル毎の第1の階調スケールマップ値に基づいて、第1の階調スケールマップを発生させる手段と、
    前記第1の階調スケールマップを使用して、前記可視光イメージをノイズ除去して、第1のノイズ除去されたイメージを発生させる手段と、
    前記第1のノイズ除去されたイメージ中の階調ベクトルを決定する手段と、
    前記NIRイメージ中の前記階調ベクトルと、前記第1のノイズ除去されたイメージ中の前記階調ベクトルとを比較して、ピクセル毎の第2の階調スケールマップ値を発生させる手段と、
    前記ピクセル毎の第2の階調スケールマップ値に基づいて、第2の階調スケールマップを発生させる手段と、
    前記第2の階調スケールマップを使用して、前記第1のノイズ除去されたイメージをノイズ除去して、第2のノイズ除去されたイメージを発生させる手段とを具備するイメージングシステム。
  8. 前記階調ベクトルを決定する手段と、前記第1の階調スケールマップを発生させる手段は、階調スケールマップモジュールを含む請求項記載のイメージングシステム。
  9. 前記NIRイメージを捕捉する手段は、NIRイメージセンサとNIRフラッシュを含み、前記NIRフラッシュは、赤外線波長のスペクトル中の光で、前記NIRイメージを照光するように好ましくは構成されている請求項記載のイメージングシステム。
  10. 前記NIRイメージと前記可視光イメージとを位置調整する手段をさらに具備し、前記NIRイメージと前記NIRフラッシュとを位置調整する手段は、好ましくはイメージ位置調整モジュールを備える請求項記載のイメージングシステム。
  11. 前記NIRイメージと前記可視光イメージを位置調整する手段は、イメージ位置調整モジュールを備える請求項10記載のイメージングシステム。
  12. 前記可視光イメージをノイズ除去する手段は、ノイズ除去モジュールを備える請求項記載のイメージングシステム。
  13. 前記ノイズ除去モジュールは、加重最小二乗平滑化技術を用いることにより、前記第1の階調スケールマップを使用して、前記可視光イメージをノイズ除去することと、前記第2の階調スケールマップを使用して、前記第1のノイズ除去されたイメージをノイズ除去することと、のうちの1つまたは両方をするようにさらにプログラムされている請求項12記載のイメージングシステム。
  14. 前記ノイズ除去モジュールは、前記ピクセル毎の第1の階調スケールマップ値を使用して、前記可視光イメージ中の各ピクセルに対して、前記NIRイメージからのノイズ除去ガイダンスの量を決定するようにさらにプログラムされ、および/または、
    前記ノイズ除去モジュールは、現在の階調スケールマップと以前の階調スケールマップとの間の差が、しきい値を下回るまで、追加の階調スケールマップを発生させ続けるようにプログラムされ、および/または、
    前記ノイズ除去モジュールは、現在の反復ノイズ除去されたイメージと以前の反復ノイズ除去されたイメージとの間の差が、しきい値を下回るまで、追加の階調スケールマップと、追加の反復ノイズ除去されたイメージとにより、ノイズ除去反復を継続するようにさらにプログラムされている請求項12記載のイメージングシステム。
  15. その上に記憶されている命令を有する、一時的でないコンピュータ読取可能記憶媒体において、
    前記命令は、実行されたときに、請求項1〜6のうちのいずれか1項に記載の方法を実行する一時的でないコンピュータ読取可能記憶媒体。
JP2016507589A 2013-04-12 2014-04-07 近赤外ガイドイメージノイズ除去 Active JP6416208B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201361811610P 2013-04-12 2013-04-12
US61/811,610 2013-04-12
US14/151,589 2014-01-09
US14/151,589 US9171355B2 (en) 2013-04-12 2014-01-09 Near infrared guided image denoising
PCT/US2014/033197 WO2014168880A1 (en) 2013-04-12 2014-04-07 Near infrared guided image denoising

Publications (3)

Publication Number Publication Date
JP2016514936A JP2016514936A (ja) 2016-05-23
JP2016514936A5 true JP2016514936A5 (ja) 2017-04-20
JP6416208B2 JP6416208B2 (ja) 2018-10-31

Family

ID=50640037

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016507589A Active JP6416208B2 (ja) 2013-04-12 2014-04-07 近赤外ガイドイメージノイズ除去

Country Status (6)

Country Link
US (1) US9171355B2 (ja)
EP (1) EP2984621B1 (ja)
JP (1) JP6416208B2 (ja)
KR (1) KR102190717B1 (ja)
CN (1) CN105103189B (ja)
WO (1) WO2014168880A1 (ja)

Families Citing this family (46)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9485495B2 (en) 2010-08-09 2016-11-01 Qualcomm Incorporated Autofocus for stereo images
US9438889B2 (en) 2011-09-21 2016-09-06 Qualcomm Incorporated System and method for improving methods of manufacturing stereoscopic image sensors
US9398264B2 (en) 2012-10-19 2016-07-19 Qualcomm Incorporated Multi-camera system using folded optics
US10178373B2 (en) 2013-08-16 2019-01-08 Qualcomm Incorporated Stereo yaw correction using autofocus feedback
US9374516B2 (en) 2014-04-04 2016-06-21 Qualcomm Incorporated Auto-focus in low-profile folded optics multi-camera system
US9383550B2 (en) 2014-04-04 2016-07-05 Qualcomm Incorporated Auto-focus in low-profile folded optics multi-camera system
US10013764B2 (en) * 2014-06-19 2018-07-03 Qualcomm Incorporated Local adaptive histogram equalization
US9294672B2 (en) 2014-06-20 2016-03-22 Qualcomm Incorporated Multi-camera system using folded optics free from parallax and tilt artifacts
US9541740B2 (en) 2014-06-20 2017-01-10 Qualcomm Incorporated Folded optic array camera using refractive prisms
US9819863B2 (en) 2014-06-20 2017-11-14 Qualcomm Incorporated Wide field of view array camera for hemispheric and spherical imaging
US9386222B2 (en) 2014-06-20 2016-07-05 Qualcomm Incorporated Multi-camera system using folded optics free from parallax artifacts
TWI511088B (zh) * 2014-07-25 2015-12-01 Altek Autotronics Corp 產生方位影像的方法
US10102613B2 (en) * 2014-09-25 2018-10-16 Google Llc Frequency-domain denoising
US9832381B2 (en) 2014-10-31 2017-11-28 Qualcomm Incorporated Optical image stabilization for thin cameras
US10523855B2 (en) * 2015-09-24 2019-12-31 Intel Corporation Infrared and visible light dual sensor imaging system
US9934557B2 (en) * 2016-03-22 2018-04-03 Samsung Electronics Co., Ltd Method and apparatus of image representation and processing for dynamic vision sensor
US10200632B2 (en) 2016-08-01 2019-02-05 Microsoft Technology Licensing, Llc Low-illumination photo capture with reduced noise and blur
US10546195B2 (en) * 2016-12-02 2020-01-28 Geostat Aerospace & Technology Inc. Methods and systems for automatic object detection from aerial imagery
US10140689B2 (en) 2017-01-20 2018-11-27 Sony Corporation Efficient path-based method for video denoising
CN107483817B (zh) * 2017-08-11 2019-12-13 成都西纬科技有限公司 一种图像处理方法及装置
US10945657B2 (en) * 2017-08-18 2021-03-16 Massachusetts Institute Of Technology Automated surface area assessment for dermatologic lesions
CN107730480A (zh) * 2017-08-31 2018-02-23 中国航空工业集团公司洛阳电光设备研究所 红外图像数据处理中高低频信号的自适应分区域重组方法
US11045083B2 (en) * 2017-10-17 2021-06-29 Verily Life Sciences Llc Flash optimization during retinal burst imaging
DE102018001076A1 (de) * 2018-02-10 2019-08-14 Diehl Defence Gmbh & Co. Kg Verfahren zur Bestimmung von Kennlinienkorrekturfaktoren eines im infraroten Spektralbereich abbildenden Matrixdetektors
US10467730B2 (en) * 2018-03-15 2019-11-05 Sony Corporation Image-processing apparatus to reduce staircase artifacts from an image signal
CN108391067B (zh) * 2018-05-10 2023-09-29 浙江芯劢微电子股份有限公司 一种基于rgb-ir传感器的去噪增强装置及方法
CN108694715A (zh) * 2018-05-15 2018-10-23 清华大学 基于卷积稀疏编码的单相机rgb-nir成像***
KR102627146B1 (ko) 2018-07-20 2024-01-18 삼성전자주식회사 스펙트럼 처리 장치 및 방법
KR20200049546A (ko) 2018-10-29 2020-05-08 삼성전자주식회사 영상 처리 장치, 촬상 장치, 영상 처리 방법 및 영상 처리 프로그램
CN109859119B (zh) * 2019-01-07 2022-08-02 南京邮电大学 一种基于自适应低秩张量恢复的视频图像去雨方法
KR20200087399A (ko) * 2019-01-11 2020-07-21 엘지전자 주식회사 카메라 장치 및 이를 구비하는 전자 장치
CN109584174B (zh) * 2019-01-29 2023-03-24 电子科技大学 一种梯度最小法红外图像边缘保持去噪方法
KR102223316B1 (ko) * 2019-08-13 2021-03-05 숭실대학교산학협력단 그라디언트 벡터들의 비교 결과에 기초한 차량 led 조명 상태 판단 방법 및 장치
CN110781859B (zh) * 2019-11-05 2022-08-19 深圳奇迹智慧网络有限公司 图像标注方法、装置、计算机设备和存储介质
KR102160682B1 (ko) * 2019-11-05 2020-09-29 인천대학교 산학협력단 다중 스펙트럼 영상을 이용한 원격 이미지 처리 방법 및 장치
CN112887513B (zh) * 2019-11-13 2022-08-30 杭州海康威视数字技术股份有限公司 图像降噪方法及摄像机
CN111369456B (zh) * 2020-02-28 2021-08-31 深圳市商汤科技有限公司 图像去噪方法及装置、电子设备和存储介质
KR102431986B1 (ko) * 2020-07-22 2022-08-12 엘지전자 주식회사 로봇 청소기 및 이의 제어방법
US11620759B2 (en) * 2020-07-24 2023-04-04 Apple Inc. Systems and methods for machine learning enhanced image registration
CN112235046B (zh) * 2020-10-20 2023-10-31 深圳万知达科技有限公司 无线紫外光通信的降噪处理方法
CN112132753B (zh) * 2020-11-06 2022-04-05 湖南大学 多尺度结构引导图像的红外图像超分辨率方法及***
WO2022103423A1 (en) * 2020-11-12 2022-05-19 Innopeak Technology, Inc. Depth-based see-through prevention in image fusion
US11741577B2 (en) 2020-12-11 2023-08-29 Samsung Electronics Co., Ltd Method and apparatus for multi-frame based detail grade map estimation and adaptive multi-frame denoising
CN112446828B (zh) * 2021-01-29 2021-04-13 成都东方天呈智能科技有限公司 一种融合可见光图像梯度信息的热成像超分辨率重建方法
US11788972B2 (en) 2021-04-29 2023-10-17 Industrial Technology Research Institute Method of automatically setting optical parameters and automated optical inspection system using the same
US11783453B2 (en) 2021-06-10 2023-10-10 Bank Of America Corporation Adapting image noise removal model based on device capabilities

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7443443B2 (en) 2005-07-28 2008-10-28 Mitsubishi Electric Research Laboratories, Inc. Method and apparatus for enhancing flash and ambient images
KR101563348B1 (ko) * 2008-10-07 2015-10-27 삼성전자 주식회사 영상의 노이즈를 저감하는 영상 처리 장치 및 방법
US8374457B1 (en) * 2008-12-08 2013-02-12 Adobe Systems Incorporated System and method for interactive image-noise separation
WO2010081010A2 (en) 2009-01-09 2010-07-15 New York University Methods, computer-accessible medium and systems for facilitating dark flash photography
US8503778B2 (en) 2009-05-14 2013-08-06 National University Of Singapore Enhancing photograph visual quality using texture and contrast data from near infra-red images
GB0914982D0 (en) 2009-08-27 2009-09-30 Univ East Anglia Methods and apparatus for generating accented image data
EP2309449B1 (en) 2009-10-09 2016-04-20 EPFL Ecole Polytechnique Fédérale de Lausanne Method to produce a full-color smoothed image
JP2012018621A (ja) * 2010-07-09 2012-01-26 Panasonic Corp 画像処理装置、画像処理方法及びプログラム
JP2012138043A (ja) * 2010-12-28 2012-07-19 Jvc Kenwood Corp 画像ノイズ除去方法及び画像ノイズ除去装置
KR101901602B1 (ko) 2011-01-14 2018-09-27 삼성전자주식회사 디지털 사진에서 노이즈를 제거하는 장치 및 방법
CN102404581A (zh) * 2011-11-02 2012-04-04 清华大学 基于插值与近红外的彩色图像处理的方法和装置
US9692991B2 (en) 2011-11-04 2017-06-27 Qualcomm Incorporated Multispectral imaging system

Similar Documents

Publication Publication Date Title
JP2016514936A5 (ja)
US10026156B2 (en) Information processing apparatus, information processing method, and medium
JP2018028899A5 (ja)
JP6282095B2 (ja) 画像処理装置、画像処理方法およびプログラム。
JP2016533686A5 (ja)
JP2016522485A5 (ja)
WO2016106383A3 (en) First-person camera based visual context aware system
JP2017520050A5 (ja)
ES2563098B1 (es) Procedimiento de mejora de imagen IR basado en información de escena para videoanálisis
EP2860694A3 (en) Image processing apparatus, image pickup apparatus, image processing method, image processing program, and non-transitory computer-readable storage medium
JP2016045240A5 (ja)
JP2016129289A5 (ja)
JP2016151955A5 (ja)
JP2013254480A5 (ja)
JP2017118296A5 (ja)
JP2019530059A5 (ja)
EP2692140A2 (en) Real-time depth extraction using stereo correspondence
JP2012243216A5 (ja)
US20150187051A1 (en) Method and apparatus for estimating image noise
JP2015106290A5 (ja)
JP2016514535A5 (ja)
JP2014217059A5 (ja)
JP2015097380A5 (ja)
JP6436158B2 (ja) 画像処理装置、撮像装置、画像処理方法及びプログラム
JP2014048131A (ja) 画像処理装置、方法及びプログラム