JP2016514936A5 - - Google Patents
Download PDFInfo
- Publication number
- JP2016514936A5 JP2016514936A5 JP2016507589A JP2016507589A JP2016514936A5 JP 2016514936 A5 JP2016514936 A5 JP 2016514936A5 JP 2016507589 A JP2016507589 A JP 2016507589A JP 2016507589 A JP2016507589 A JP 2016507589A JP 2016514936 A5 JP2016514936 A5 JP 2016514936A5
- Authority
- JP
- Japan
- Prior art keywords
- image
- scale map
- tone
- nir
- tone scale
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 claims 8
- 238000009499 grossing Methods 0.000 claims 2
- 238000000034 method Methods 0.000 claims 2
- 230000000875 corresponding Effects 0.000 claims 1
- 238000001228 spectrum Methods 0.000 claims 1
Claims (15)
- イメージノイズ除去のための電子的な方法において、
前記方法は、
NIRイメージと可視光イメージとを含むイメージデータを受け取ることと、
前記NIRイメージ中のピクセルを、前記可視光イメージ中の対応するピクセルと位置調整することと、
前記NIRイメージ中の階調ベクトルと、前記可視光イメージ中の階調ベクトルとを決定することと、
前記NIRイメージ中の前記階調ベクトルと、前記可視光イメージ中の前記階調ベクトルとを比較して、ピクセル毎の第1の階調スケールマップ値を発生させることと、
前記ピクセル毎の第1の階調スケールマップ値に基づいて、第1の階調スケールマップを発生させることと、
前記第1の階調スケールマップを使用して、前記可視光イメージをノイズ除去して、第1のノイズ除去されたイメージを発生させることと、
前記第1のノイズ除去されたイメージ中の階調ベクトルを決定することと、
前記NIRイメージ中の前記階調ベクトルと、前記第1のノイズ除去されたイメージ中の前記階調ベクトルとを比較して、ピクセル毎の第2の階調スケールマップ値を発生させることと、
前記ピクセル毎の第2の階調スケールマップ値に基づいて、第2の階調スケールマップを発生させることと、
前記第2の階調スケールマップを使用して、前記第1のノイズ除去されたイメージをノイズ除去して、第2のノイズ除去されたイメージを発生させることとを含む方法。 - 前記第1の階調スケールマップを使用して、前記可視光イメージをノイズ除去することは、ピクセル毎の第1の階調スケールマップ値を使用して、前記NIRイメージからノイズ除去ガイダンスのレベルを決定することをさらに含む請求項1記載の方法。
- 前記第1の階調スケールマップを使用して、前記可視光イメージをノイズ除去することは、加重最小二乗平滑化技術を用いて、前記可視光イメージからノイズを取り除くことを含む請求項1記載の方法。
- 前記ピクセル毎の第1の階調スケールマップ値は、前記NIRイメージ中の前記階調ベクトルと、前記可視光イメージ中の前記階調ベクトルとの間の差のレベルを表す請求項2記載の方法。
- 前記第2のノイズ除去されたイメージ中の階調ベクトルを決定することと、
前記NIRイメージ中の前記階調ベクトルと、前記第2のノイズ除去されたイメージ中の前記階調ベクトルとから、追加の階調スケールマップを発生させることと、
前記第1の階調スケールマップと、前記追加の階調スケールマップとの間の差を計算することをさらに含む請求項1記載の方法。 - 前記差としきい値とを比較することと、
前記差が前記しきい値よりも大きい場合、前記追加の階調スケールマップを使用して、前記第2のノイズ除去されたイメージをノイズ除去することか、または、前記差が前記しきい値よりも小さい場合、前記第2のノイズ除去されたイメージを最終イメージとして出力することとをさらに含む請求項5記載の方法。 - イメージングシステムにおいて、
NIRイメージを捕捉する手段と、
可視光イメージを捕捉する手段と、
前記NIRイメージ中の階調ベクトルと、前記可視光イメージ中の階調ベクトルとを決定する手段と、
前記NIRイメージ中の前記階調ベクトルと、前記可視光イメージ中の前記階調ベクトルとを比較して、ピクセル毎の第1の階調スケールマップ値を発生させる手段と、
前記ピクセル毎の第1の階調スケールマップ値に基づいて、第1の階調スケールマップを発生させる手段と、
前記第1の階調スケールマップを使用して、前記可視光イメージをノイズ除去して、第1のノイズ除去されたイメージを発生させる手段と、
前記第1のノイズ除去されたイメージ中の階調ベクトルを決定する手段と、
前記NIRイメージ中の前記階調ベクトルと、前記第1のノイズ除去されたイメージ中の前記階調ベクトルとを比較して、ピクセル毎の第2の階調スケールマップ値を発生させる手段と、
前記ピクセル毎の第2の階調スケールマップ値に基づいて、第2の階調スケールマップを発生させる手段と、
前記第2の階調スケールマップを使用して、前記第1のノイズ除去されたイメージをノイズ除去して、第2のノイズ除去されたイメージを発生させる手段とを具備するイメージングシステム。 - 前記階調ベクトルを決定する手段と、前記第1の階調スケールマップを発生させる手段は、階調スケールマップモジュールを含む請求項7記載のイメージングシステム。
- 前記NIRイメージを捕捉する手段は、NIRイメージセンサとNIRフラッシュとを含み、前記NIRフラッシュは、赤外線波長のスペクトル中の光で、前記NIRイメージを照光するように好ましくは構成されている請求項7記載のイメージングシステム。
- 前記NIRイメージと前記可視光イメージとを位置調整する手段をさらに具備し、前記NIRイメージと前記NIRフラッシュとを位置調整する手段は、好ましくはイメージ位置調整モジュールを備える請求項7記載のイメージングシステム。
- 前記NIRイメージと前記可視光イメージとを位置調整する手段は、イメージ位置調整モジュールを備える請求項10記載のイメージングシステム。
- 前記可視光イメージをノイズ除去する手段は、ノイズ除去モジュールを備える請求項7記載のイメージングシステム。
- 前記ノイズ除去モジュールは、加重最小二乗平滑化技術を用いることにより、前記第1の階調スケールマップを使用して、前記可視光イメージをノイズ除去することと、前記第2の階調スケールマップを使用して、前記第1のノイズ除去されたイメージをノイズ除去することと、のうちの1つまたは両方をするようにさらにプログラムされている請求項12記載のイメージングシステム。
- 前記ノイズ除去モジュールは、前記ピクセル毎の第1の階調スケールマップ値を使用して、前記可視光イメージ中の各ピクセルに対して、前記NIRイメージからのノイズ除去ガイダンスの量を決定するようにさらにプログラムされ、および/または、
前記ノイズ除去モジュールは、現在の階調スケールマップと以前の階調スケールマップとの間の差が、しきい値を下回るまで、追加の階調スケールマップを発生させ続けるようにプログラムされ、および/または、
前記ノイズ除去モジュールは、現在の反復ノイズ除去されたイメージと以前の反復ノイズ除去されたイメージとの間の差が、しきい値を下回るまで、追加の階調スケールマップと、追加の反復ノイズ除去されたイメージとにより、ノイズ除去反復を継続するようにさらにプログラムされている請求項12記載のイメージングシステム。 - その上に記憶されている命令を有する、一時的でないコンピュータ読取可能記憶媒体において、
前記命令は、実行されたときに、請求項1〜6のうちのいずれか1項に記載の方法を実行する一時的でないコンピュータ読取可能記憶媒体。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201361811610P | 2013-04-12 | 2013-04-12 | |
US61/811,610 | 2013-04-12 | ||
US14/151,589 | 2014-01-09 | ||
US14/151,589 US9171355B2 (en) | 2013-04-12 | 2014-01-09 | Near infrared guided image denoising |
PCT/US2014/033197 WO2014168880A1 (en) | 2013-04-12 | 2014-04-07 | Near infrared guided image denoising |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2016514936A JP2016514936A (ja) | 2016-05-23 |
JP2016514936A5 true JP2016514936A5 (ja) | 2017-04-20 |
JP6416208B2 JP6416208B2 (ja) | 2018-10-31 |
Family
ID=50640037
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016507589A Active JP6416208B2 (ja) | 2013-04-12 | 2014-04-07 | 近赤外ガイドイメージノイズ除去 |
Country Status (6)
Country | Link |
---|---|
US (1) | US9171355B2 (ja) |
EP (1) | EP2984621B1 (ja) |
JP (1) | JP6416208B2 (ja) |
KR (1) | KR102190717B1 (ja) |
CN (1) | CN105103189B (ja) |
WO (1) | WO2014168880A1 (ja) |
Families Citing this family (46)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9485495B2 (en) | 2010-08-09 | 2016-11-01 | Qualcomm Incorporated | Autofocus for stereo images |
US9438889B2 (en) | 2011-09-21 | 2016-09-06 | Qualcomm Incorporated | System and method for improving methods of manufacturing stereoscopic image sensors |
US9398264B2 (en) | 2012-10-19 | 2016-07-19 | Qualcomm Incorporated | Multi-camera system using folded optics |
US10178373B2 (en) | 2013-08-16 | 2019-01-08 | Qualcomm Incorporated | Stereo yaw correction using autofocus feedback |
US9374516B2 (en) | 2014-04-04 | 2016-06-21 | Qualcomm Incorporated | Auto-focus in low-profile folded optics multi-camera system |
US9383550B2 (en) | 2014-04-04 | 2016-07-05 | Qualcomm Incorporated | Auto-focus in low-profile folded optics multi-camera system |
US10013764B2 (en) * | 2014-06-19 | 2018-07-03 | Qualcomm Incorporated | Local adaptive histogram equalization |
US9294672B2 (en) | 2014-06-20 | 2016-03-22 | Qualcomm Incorporated | Multi-camera system using folded optics free from parallax and tilt artifacts |
US9541740B2 (en) | 2014-06-20 | 2017-01-10 | Qualcomm Incorporated | Folded optic array camera using refractive prisms |
US9819863B2 (en) | 2014-06-20 | 2017-11-14 | Qualcomm Incorporated | Wide field of view array camera for hemispheric and spherical imaging |
US9386222B2 (en) | 2014-06-20 | 2016-07-05 | Qualcomm Incorporated | Multi-camera system using folded optics free from parallax artifacts |
TWI511088B (zh) * | 2014-07-25 | 2015-12-01 | Altek Autotronics Corp | 產生方位影像的方法 |
US10102613B2 (en) * | 2014-09-25 | 2018-10-16 | Google Llc | Frequency-domain denoising |
US9832381B2 (en) | 2014-10-31 | 2017-11-28 | Qualcomm Incorporated | Optical image stabilization for thin cameras |
US10523855B2 (en) * | 2015-09-24 | 2019-12-31 | Intel Corporation | Infrared and visible light dual sensor imaging system |
US9934557B2 (en) * | 2016-03-22 | 2018-04-03 | Samsung Electronics Co., Ltd | Method and apparatus of image representation and processing for dynamic vision sensor |
US10200632B2 (en) | 2016-08-01 | 2019-02-05 | Microsoft Technology Licensing, Llc | Low-illumination photo capture with reduced noise and blur |
US10546195B2 (en) * | 2016-12-02 | 2020-01-28 | Geostat Aerospace & Technology Inc. | Methods and systems for automatic object detection from aerial imagery |
US10140689B2 (en) | 2017-01-20 | 2018-11-27 | Sony Corporation | Efficient path-based method for video denoising |
CN107483817B (zh) * | 2017-08-11 | 2019-12-13 | 成都西纬科技有限公司 | 一种图像处理方法及装置 |
US10945657B2 (en) * | 2017-08-18 | 2021-03-16 | Massachusetts Institute Of Technology | Automated surface area assessment for dermatologic lesions |
CN107730480A (zh) * | 2017-08-31 | 2018-02-23 | 中国航空工业集团公司洛阳电光设备研究所 | 红外图像数据处理中高低频信号的自适应分区域重组方法 |
US11045083B2 (en) * | 2017-10-17 | 2021-06-29 | Verily Life Sciences Llc | Flash optimization during retinal burst imaging |
DE102018001076A1 (de) * | 2018-02-10 | 2019-08-14 | Diehl Defence Gmbh & Co. Kg | Verfahren zur Bestimmung von Kennlinienkorrekturfaktoren eines im infraroten Spektralbereich abbildenden Matrixdetektors |
US10467730B2 (en) * | 2018-03-15 | 2019-11-05 | Sony Corporation | Image-processing apparatus to reduce staircase artifacts from an image signal |
CN108391067B (zh) * | 2018-05-10 | 2023-09-29 | 浙江芯劢微电子股份有限公司 | 一种基于rgb-ir传感器的去噪增强装置及方法 |
CN108694715A (zh) * | 2018-05-15 | 2018-10-23 | 清华大学 | 基于卷积稀疏编码的单相机rgb-nir成像*** |
KR102627146B1 (ko) | 2018-07-20 | 2024-01-18 | 삼성전자주식회사 | 스펙트럼 처리 장치 및 방법 |
KR20200049546A (ko) | 2018-10-29 | 2020-05-08 | 삼성전자주식회사 | 영상 처리 장치, 촬상 장치, 영상 처리 방법 및 영상 처리 프로그램 |
CN109859119B (zh) * | 2019-01-07 | 2022-08-02 | 南京邮电大学 | 一种基于自适应低秩张量恢复的视频图像去雨方法 |
KR20200087399A (ko) * | 2019-01-11 | 2020-07-21 | 엘지전자 주식회사 | 카메라 장치 및 이를 구비하는 전자 장치 |
CN109584174B (zh) * | 2019-01-29 | 2023-03-24 | 电子科技大学 | 一种梯度最小法红外图像边缘保持去噪方法 |
KR102223316B1 (ko) * | 2019-08-13 | 2021-03-05 | 숭실대학교산학협력단 | 그라디언트 벡터들의 비교 결과에 기초한 차량 led 조명 상태 판단 방법 및 장치 |
CN110781859B (zh) * | 2019-11-05 | 2022-08-19 | 深圳奇迹智慧网络有限公司 | 图像标注方法、装置、计算机设备和存储介质 |
KR102160682B1 (ko) * | 2019-11-05 | 2020-09-29 | 인천대학교 산학협력단 | 다중 스펙트럼 영상을 이용한 원격 이미지 처리 방법 및 장치 |
CN112887513B (zh) * | 2019-11-13 | 2022-08-30 | 杭州海康威视数字技术股份有限公司 | 图像降噪方法及摄像机 |
CN111369456B (zh) * | 2020-02-28 | 2021-08-31 | 深圳市商汤科技有限公司 | 图像去噪方法及装置、电子设备和存储介质 |
KR102431986B1 (ko) * | 2020-07-22 | 2022-08-12 | 엘지전자 주식회사 | 로봇 청소기 및 이의 제어방법 |
US11620759B2 (en) * | 2020-07-24 | 2023-04-04 | Apple Inc. | Systems and methods for machine learning enhanced image registration |
CN112235046B (zh) * | 2020-10-20 | 2023-10-31 | 深圳万知达科技有限公司 | 无线紫外光通信的降噪处理方法 |
CN112132753B (zh) * | 2020-11-06 | 2022-04-05 | 湖南大学 | 多尺度结构引导图像的红外图像超分辨率方法及*** |
WO2022103423A1 (en) * | 2020-11-12 | 2022-05-19 | Innopeak Technology, Inc. | Depth-based see-through prevention in image fusion |
US11741577B2 (en) | 2020-12-11 | 2023-08-29 | Samsung Electronics Co., Ltd | Method and apparatus for multi-frame based detail grade map estimation and adaptive multi-frame denoising |
CN112446828B (zh) * | 2021-01-29 | 2021-04-13 | 成都东方天呈智能科技有限公司 | 一种融合可见光图像梯度信息的热成像超分辨率重建方法 |
US11788972B2 (en) | 2021-04-29 | 2023-10-17 | Industrial Technology Research Institute | Method of automatically setting optical parameters and automated optical inspection system using the same |
US11783453B2 (en) | 2021-06-10 | 2023-10-10 | Bank Of America Corporation | Adapting image noise removal model based on device capabilities |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7443443B2 (en) | 2005-07-28 | 2008-10-28 | Mitsubishi Electric Research Laboratories, Inc. | Method and apparatus for enhancing flash and ambient images |
KR101563348B1 (ko) * | 2008-10-07 | 2015-10-27 | 삼성전자 주식회사 | 영상의 노이즈를 저감하는 영상 처리 장치 및 방법 |
US8374457B1 (en) * | 2008-12-08 | 2013-02-12 | Adobe Systems Incorporated | System and method for interactive image-noise separation |
WO2010081010A2 (en) | 2009-01-09 | 2010-07-15 | New York University | Methods, computer-accessible medium and systems for facilitating dark flash photography |
US8503778B2 (en) | 2009-05-14 | 2013-08-06 | National University Of Singapore | Enhancing photograph visual quality using texture and contrast data from near infra-red images |
GB0914982D0 (en) | 2009-08-27 | 2009-09-30 | Univ East Anglia | Methods and apparatus for generating accented image data |
EP2309449B1 (en) | 2009-10-09 | 2016-04-20 | EPFL Ecole Polytechnique Fédérale de Lausanne | Method to produce a full-color smoothed image |
JP2012018621A (ja) * | 2010-07-09 | 2012-01-26 | Panasonic Corp | 画像処理装置、画像処理方法及びプログラム |
JP2012138043A (ja) * | 2010-12-28 | 2012-07-19 | Jvc Kenwood Corp | 画像ノイズ除去方法及び画像ノイズ除去装置 |
KR101901602B1 (ko) | 2011-01-14 | 2018-09-27 | 삼성전자주식회사 | 디지털 사진에서 노이즈를 제거하는 장치 및 방법 |
CN102404581A (zh) * | 2011-11-02 | 2012-04-04 | 清华大学 | 基于插值与近红外的彩色图像处理的方法和装置 |
US9692991B2 (en) | 2011-11-04 | 2017-06-27 | Qualcomm Incorporated | Multispectral imaging system |
-
2014
- 2014-01-09 US US14/151,589 patent/US9171355B2/en active Active
- 2014-04-07 JP JP2016507589A patent/JP6416208B2/ja active Active
- 2014-04-07 EP EP14721712.9A patent/EP2984621B1/en active Active
- 2014-04-07 CN CN201480020052.3A patent/CN105103189B/zh active Active
- 2014-04-07 WO PCT/US2014/033197 patent/WO2014168880A1/en active Application Filing
- 2014-04-07 KR KR1020157032226A patent/KR102190717B1/ko active IP Right Grant
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2016514936A5 (ja) | ||
US10026156B2 (en) | Information processing apparatus, information processing method, and medium | |
JP2018028899A5 (ja) | ||
JP6282095B2 (ja) | 画像処理装置、画像処理方法およびプログラム。 | |
JP2016533686A5 (ja) | ||
JP2016522485A5 (ja) | ||
WO2016106383A3 (en) | First-person camera based visual context aware system | |
JP2017520050A5 (ja) | ||
ES2563098B1 (es) | Procedimiento de mejora de imagen IR basado en información de escena para videoanálisis | |
EP2860694A3 (en) | Image processing apparatus, image pickup apparatus, image processing method, image processing program, and non-transitory computer-readable storage medium | |
JP2016045240A5 (ja) | ||
JP2016129289A5 (ja) | ||
JP2016151955A5 (ja) | ||
JP2013254480A5 (ja) | ||
JP2017118296A5 (ja) | ||
JP2019530059A5 (ja) | ||
EP2692140A2 (en) | Real-time depth extraction using stereo correspondence | |
JP2012243216A5 (ja) | ||
US20150187051A1 (en) | Method and apparatus for estimating image noise | |
JP2015106290A5 (ja) | ||
JP2016514535A5 (ja) | ||
JP2014217059A5 (ja) | ||
JP2015097380A5 (ja) | ||
JP6436158B2 (ja) | 画像処理装置、撮像装置、画像処理方法及びプログラム | |
JP2014048131A (ja) | 画像処理装置、方法及びプログラム |