JP6985450B2 - 信号対雑音比調整回路、信号対雑音比調整方法および信号対雑音比調整プログラム - Google Patents
信号対雑音比調整回路、信号対雑音比調整方法および信号対雑音比調整プログラム Download PDFInfo
- Publication number
- JP6985450B2 JP6985450B2 JP2020073648A JP2020073648A JP6985450B2 JP 6985450 B2 JP6985450 B2 JP 6985450B2 JP 2020073648 A JP2020073648 A JP 2020073648A JP 2020073648 A JP2020073648 A JP 2020073648A JP 6985450 B2 JP6985450 B2 JP 6985450B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- signal
- noise ratio
- images
- threshold
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 36
- 230000008859 change Effects 0.000 claims description 21
- 238000004590 computer program Methods 0.000 claims description 15
- 238000002073 fluorescence micrograph Methods 0.000 claims description 10
- 238000003384 imaging method Methods 0.000 claims description 5
- 230000000694 effects Effects 0.000 description 9
- 238000000386 microscopy Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 108010076504 Protein Sorting Signals Proteins 0.000 description 2
- 238000003917 TEM image Methods 0.000 description 2
- 238000000089 atomic force micrograph Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 238000000799 fluorescence microscopy Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000001052 transient effect Effects 0.000 description 2
- 241000207961 Sesamum Species 0.000 description 1
- 235000003434 Sesamum indicum Nutrition 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 239000000969 carrier Substances 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 150000003839 salts Chemical class 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000001356 surgical procedure Methods 0.000 description 1
- 238000001931 thermography Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/361—Optical details, e.g. image relay to the camera or image sensor
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/365—Control or image processing arrangements for digital or video microscopes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10056—Microscopic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10064—Fluorescence image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20182—Noise reduction or smoothing in the temporal domain; Spatio-temporal filtering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- Analytical Chemistry (AREA)
- Chemical & Material Sciences (AREA)
- Optics & Photonics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Microscoopes, Condenser (AREA)
- Studio Devices (AREA)
- Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)
- Image Processing (AREA)
Description
110 入力インタフェース
120 出力インタフェース
200 顕微鏡システム
210 SNR調整回路
220 ディスプレイ
230 蛍光カメラ
240 白色光反射カメラ
310 第1画像のSNRが第1閾値を下回っているか否かを特定するステップ
320 ビデオシーケンスの第1画像と先行する第2画像との間の画像化コンテンツの変化が、第2閾値を下回っているか否かを特定するステップ
320a 第3画像とは異なる画像特性を有する第1画像と第2画像とを使用して、画像化コンテンツの変化を特定するステップ
330 SNRが第1閾値を下回っている場合かつ変化が第2閾値を下回っている場合に、第1画像または第2画像と比べて増大されたSNRを有する第3画像を生成するステップ
Claims (11)
- 信号対雑音比調整回路(100)であって、前記信号対雑音比調整回路(100)は、
第1画像の信号対雑音比が第1閾値を下回っているか否か特定し、
ビデオシーケンスの前記第1画像と先行する第2画像との間の画像化コンテンツの変化が、第2閾値を下回っているか否かを特定し、
前記信号対雑音比が前記第1閾値を下回っている場合かつ前記変化が前記第2閾値を下回っている場合に、前記第1画像または前記第2画像と比べて増大された信号対雑音比を有する第3画像を生成する、
ように構成されており、
前記第3画像の生成には、前記第3画像を形成するために少なくとも2つの画像を結合することが含まれており、
前記少なくとも2つの画像の結合には、
前記少なくとも2つの画像についてのピクセル値の統計分布を計算することと、
前記統計分布に基づいて前記少なくとも2つの画像を結合することと、
が含まれている、
信号対雑音比調整回路(100)。 - 前記信号対雑音比調整回路(100)は、さらに、前記第1画像および前記第2画像を使用して動き補償情報を計算するように構成され、
前記少なくとも2つの画像の結合には、前記動き補償情報を使用して、前記少なくとも2つの画像のうちの少なくとも1つに動き補償を行うことが含まれている、
請求項1記載の信号対雑音比調整回路(100)。 - 前記信号対雑音比調整回路(100)は、さらに、画像化コンテンツの前記変化を特定するために、前記第3画像とは異なる画像特性を有する第1画像および第2画像を使用するように構成されている、
請求項1または2記載の信号対雑音比調整回路(100)。 - 前記第1画像および前記第2画像は、白色光画像である、
請求項1から3までのいずれか1項記載の信号対雑音比調整回路(100)。 - 前記信号対雑音比調整回路(100)は、さらに、複数の画像を含むビデオシーケンスを受信するように構成された入力インタフェースを有する、
請求項1から4までのいずれか1項記載の信号対雑音比調整回路(100)。 - 前記信号対雑音比調整回路(100)は、前記第3画像として蛍光画像を生成するように構成されている、
請求項1から5までのいずれか1項記載の信号対雑音比調整回路(100)。 - 前記信号対雑音比調整回路(100)は、さらに、前記信号対雑音比が前記第1閾値を下回っている場合かつ前記変化が第2閾値を上回っている場合に、増大された前記信号対雑音比を有する第3画像を生成しないように構成されている、
請求項1から6までのいずれか1項記載の信号対雑音比調整回路(100)。 - 蛍光カメラ(230)と、ディスプレイ(220)と、請求項1から7までのいずれか1項記載の信号対雑音比調整回路(210)と、を有する、
顕微鏡システム。 - 信号対雑音比調整方法であって、
第1画像の信号対雑音比が第1閾値を下回っているか否かを特定するステップ(310)と、
ビデオシーケンスの前記第1画像と先行する第2画像との間の画像化コンテンツの変化が、第2閾値を下回っているか否かを特定するステップ(320)と、
前記信号対雑音比が前記第1閾値を下回っている場合かつ前記変化が前記第2閾値を下回っている場合に、前記第1画像または前記第2画像と比べて増大された信号対雑音比を有する第3画像を生成するステップ(330)と、
を有し、
前記第3画像を生成するステップは、前記第3画像を形成するために少なくとも2つの画像を結合するステップを含み、
前記少なくとも2つの画像を結合するステップは、
前記少なくとも2つの画像についてのピクセル値の統計分布を計算することと、
前記統計分布に基づいて前記少なくとも2つの画像を結合することと、
を含む、
信号対雑音比調整方法。 - 前記信号対雑音比調整方法は、さらに、前記第3画像とは異なる画像特性を有する第1画像および第2画像を使用して、画像化コンテンツの前記変化を特定するステップ(320a)を有する、
請求項9記載の信号対雑音比調整方法。 - プロセッサ上で実行されるときに、請求項9または10に記載された方法を実施させるプログラムコードを有するコンピュータプログラム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP19169859 | 2019-04-17 | ||
EP19169859.6A EP3726459B1 (en) | 2019-04-17 | 2019-04-17 | Signal to noise ratio adjustment circuit, signal to noise ratio adjustment method and signal to noise ratio adjustment program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020177669A JP2020177669A (ja) | 2020-10-29 |
JP6985450B2 true JP6985450B2 (ja) | 2021-12-22 |
Family
ID=66448302
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020073648A Active JP6985450B2 (ja) | 2019-04-17 | 2020-04-16 | 信号対雑音比調整回路、信号対雑音比調整方法および信号対雑音比調整プログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US11379954B2 (ja) |
EP (1) | EP3726459B1 (ja) |
JP (1) | JP6985450B2 (ja) |
CN (1) | CN111866308B (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11709156B2 (en) | 2017-09-18 | 2023-07-25 | Waters Technologies Corporation | Use of vapor deposition coated flow paths for improved analytical analysis |
US11709155B2 (en) | 2017-09-18 | 2023-07-25 | Waters Technologies Corporation | Use of vapor deposition coated flow paths for improved chromatography of metal interacting analytes |
US11918936B2 (en) | 2020-01-17 | 2024-03-05 | Waters Technologies Corporation | Performance and dynamic range for oligonucleotide bioanalysis through reduction of non specific binding |
Family Cites Families (36)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5561611A (en) * | 1994-10-04 | 1996-10-01 | Noran Instruments, Inc. | Method and apparatus for signal restoration without knowledge of the impulse response function of the signal acquisition system |
JP3731814B2 (ja) | 2001-05-07 | 2006-01-05 | 富士写真フイルム株式会社 | 蛍光画像表示装置 |
US7199823B2 (en) * | 2001-06-18 | 2007-04-03 | Olympus Optical Co., Ltd. | Method and apparatus for improving live view performance of an image pickup apparatus for a microscope |
US7599536B2 (en) * | 2004-07-30 | 2009-10-06 | Brainlab Ag | Optimizing image signal interpretation for analog image signals from medical image recording devices |
FR2884341B1 (fr) * | 2005-04-11 | 2008-05-02 | Gen Electric | Procede et systeme d'amelioration d'une image digitale generee a partir d'un detecteur de rayons x |
US20070165961A1 (en) * | 2006-01-13 | 2007-07-19 | Juwei Lu | Method And Apparatus For Reducing Motion Blur In An Image |
JP2007288595A (ja) * | 2006-04-18 | 2007-11-01 | Pioneer Electronic Corp | フレーム巡回型ノイズ低減装置 |
US20080002907A1 (en) * | 2006-06-29 | 2008-01-03 | Microvision, Inc. | Auto-exposure using image characterstics |
CN101720479A (zh) * | 2007-05-02 | 2010-06-02 | 新加坡科技研究局 | 运动补偿的图像平均 |
US20090059039A1 (en) * | 2007-08-31 | 2009-03-05 | Micron Technology, Inc. | Method and apparatus for combining multi-exposure image data |
US8570386B2 (en) * | 2008-12-31 | 2013-10-29 | Stmicroelectronics S.R.L. | Method of merging images and relative method of generating an output image of enhanced quality |
US8963949B2 (en) | 2009-04-22 | 2015-02-24 | Qualcomm Incorporated | Image selection and combination method and device |
US8526754B2 (en) * | 2009-05-28 | 2013-09-03 | Aptina Imaging Corporation | System for enhancing depth of field with digital image processing |
EP2640056A4 (en) * | 2010-11-08 | 2015-07-15 | Panasonic Ip Man Co Ltd | IMAGE FORMING DEVICE, IMAGE FORMING METHOD, PROGRAM, AND INTEGRATED CIRCUIT |
WO2012114934A1 (ja) | 2011-02-21 | 2012-08-30 | オリンパス株式会社 | 蛍光観察装置 |
DE102011013614A1 (de) * | 2011-03-08 | 2012-09-13 | Carl Zeiss Microimaging Gmbh | Laser-Scanning-Mikroskop und Verfahren zu seinem Betrieb |
EP2518687B1 (en) * | 2011-04-26 | 2013-04-24 | FEI Company | Method for determining a reconstructed image using a particle-optical apparatus |
US9270875B2 (en) * | 2011-07-20 | 2016-02-23 | Broadcom Corporation | Dual image capture processing |
JP5742541B2 (ja) | 2011-07-25 | 2015-07-01 | 富士通株式会社 | 画像処理装置および画像処理プログラム |
US8929017B2 (en) * | 2011-12-12 | 2015-01-06 | Lsi Corporation | Systems and methods for SNR measurement using equalized data |
US8964089B2 (en) * | 2012-05-09 | 2015-02-24 | Canon Kabushiki Kaisha | Systems and methods for simulated preview for preferred image exposure |
FR3009394B1 (fr) * | 2013-07-31 | 2016-12-23 | Dxo Labs | Dispositif pour la prise de vue en basse lumiere apte a se connecter a un dispositif de type telephone mobile |
US9432589B2 (en) * | 2013-08-15 | 2016-08-30 | Omnivision Technologies, Inc. | Systems and methods for generating high dynamic range images |
FR3013876B1 (fr) * | 2013-11-28 | 2016-01-01 | Sagem Defense Securite | Analyse d'une image multispectrale |
CN103888689B (zh) * | 2014-03-13 | 2017-10-31 | 北京智谷睿拓技术服务有限公司 | 图像采集方法及图像采集装置 |
US10027986B2 (en) * | 2014-09-24 | 2018-07-17 | Integrated Device Technology, Inc. | Apparatuses and methods for filtering noise from a video signal |
US9754360B2 (en) * | 2014-12-22 | 2017-09-05 | The Research Foundation For The State University Of New York | Determination of spatial distribution of charged particle beams |
US10440355B2 (en) * | 2015-11-06 | 2019-10-08 | Facebook Technologies, Llc | Depth mapping with a head mounted display using stereo cameras and structured light |
US10341565B2 (en) * | 2016-05-10 | 2019-07-02 | Raytheon Company | Self correcting adaptive low light optical payload |
US10891719B2 (en) * | 2016-05-11 | 2021-01-12 | Cornell University | Systems, methods and programs for denoising signals using wavelets |
WO2017214730A1 (en) * | 2016-06-14 | 2017-12-21 | Novadaq Technologies Inc. | Methods and systems for adaptive imaging for low light signal enhancement in medical visualization |
JP2018006993A (ja) | 2016-06-30 | 2018-01-11 | 株式会社ニコン | 画像処理装置、撮像システムおよび撮像装置 |
WO2019026189A1 (ja) * | 2017-08-01 | 2019-02-07 | オリンパス株式会社 | 撮像装置および制御方法 |
TWI646842B (zh) * | 2017-09-11 | 2019-01-01 | 晨星半導體股份有限公司 | 應用於顯示裝置的電路及相關的訊號處理方法 |
EP3588430A1 (en) * | 2018-06-27 | 2020-01-01 | Leica Microsystems CMS GmbH | Image processing apparatus and method for enhancing a phase distribution |
EP3624047B1 (en) * | 2018-09-14 | 2022-08-10 | Leica Microsystems CMS GmbH | Deconvolution apparatus and method using a local signal-to-noise ratio |
-
2019
- 2019-04-17 EP EP19169859.6A patent/EP3726459B1/en active Active
-
2020
- 2020-04-01 US US16/837,006 patent/US11379954B2/en active Active
- 2020-04-16 CN CN202010299039.3A patent/CN111866308B/zh active Active
- 2020-04-16 JP JP2020073648A patent/JP6985450B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
US11379954B2 (en) | 2022-07-05 |
US20200334792A1 (en) | 2020-10-22 |
EP3726459A1 (en) | 2020-10-21 |
CN111866308B (zh) | 2023-06-16 |
JP2020177669A (ja) | 2020-10-29 |
EP3726459B1 (en) | 2022-02-16 |
CN111866308A (zh) | 2020-10-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6985450B2 (ja) | 信号対雑音比調整回路、信号対雑音比調整方法および信号対雑音比調整プログラム | |
US9413951B2 (en) | Dynamic motion estimation and compensation for temporal filtering | |
US9514525B2 (en) | Temporal filtering for image data using spatial filtering and noise history | |
US8508605B2 (en) | Method and apparatus for image stabilization | |
KR102512889B1 (ko) | 이미지 융합 프로세싱 모듈 | |
US20160037060A1 (en) | Generating a high dynamic range image using a temporal filter | |
CN101155265B (zh) | 补偿图像亮度的***、介质和方法 | |
JP2013031174A (ja) | 多重露出フュージョン基盤でゴーストブラーを除去したhdr映像生成装置及び方法 | |
JP2010286488A (ja) | 映像処理装置および方法 | |
JP5417746B2 (ja) | 動き適応型ノイズ低減装置、画像信号処理装置、画像入力処理装置、および、動き適応ノイズ低減方法 | |
JPWO2017169039A1 (ja) | 画像処理装置、撮像装置、および画像処理方法、並びにプログラム | |
CN111385484B (zh) | 信息处理方法和装置 | |
US20200021736A1 (en) | Signal processing circuit and imaging apparatus | |
EP3953896A1 (en) | High-dynamic-range image generation with pre-combination denoising | |
CN111507924B (zh) | 视频帧的处理方法和装置 | |
US8558793B2 (en) | Locus smoothing method and navigation device using the same | |
US20180352154A1 (en) | Image processing method, electronic device, and non-transitory computer readable storage medium | |
JP2014171133A (ja) | 撮像装置、撮像システムおよび撮像方法 | |
JP2012068733A (ja) | 画像処理装置および画像処理プログラム | |
JP2015179426A (ja) | 情報処理装置、パラメータの決定方法、及びプログラム | |
US9374526B2 (en) | Providing frame delay using a temporal filter | |
US8629925B2 (en) | Image processing apparatus, image processing method, and computer program | |
KR20220151713A (ko) | 콘텐츠 기반 이미지 프로세싱 | |
KR102007601B1 (ko) | 비디오 잡음 제거를 위한 효율적인 패치 기반 방법 | |
US20150271381A1 (en) | Methods and systems for determining frames and photo composition within multiple frames |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200416 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210422 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210524 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210823 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20211027 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211125 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6985450 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |