JPWO2017022096A1 - Microscope and image acquisition method - Google Patents
Microscope and image acquisition method Download PDFInfo
- Publication number
- JPWO2017022096A1 JPWO2017022096A1 JP2017532315A JP2017532315A JPWO2017022096A1 JP WO2017022096 A1 JPWO2017022096 A1 JP WO2017022096A1 JP 2017532315 A JP2017532315 A JP 2017532315A JP 2017532315 A JP2017532315 A JP 2017532315A JP WO2017022096 A1 JPWO2017022096 A1 JP WO2017022096A1
- Authority
- JP
- Japan
- Prior art keywords
- irradiation
- light
- fluorescence
- intensity
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 62
- 230000003287 optical effect Effects 0.000 claims abstract description 56
- 230000005284 excitation Effects 0.000 claims abstract description 46
- 229920006395 saturated elastomer Polymers 0.000 claims abstract description 36
- 238000001514 detection method Methods 0.000 claims abstract description 21
- 230000008569 process Effects 0.000 claims abstract description 21
- 230000001678 irradiating effect Effects 0.000 claims abstract description 13
- 238000004364 calculation method Methods 0.000 claims description 30
- 230000007423 decrease Effects 0.000 claims description 13
- 230000003247 decreasing effect Effects 0.000 claims description 2
- 238000012545 processing Methods 0.000 abstract description 39
- 238000002073 fluorescence micrograph Methods 0.000 abstract description 14
- 238000005286 illumination Methods 0.000 abstract description 5
- 238000010606 normalization Methods 0.000 abstract description 4
- 230000000052 comparative effect Effects 0.000 description 15
- 229920013655 poly(bisphenol-A sulfone) Polymers 0.000 description 15
- 239000011324 bead Substances 0.000 description 14
- 230000014509 gene expression Effects 0.000 description 14
- 230000008859 change Effects 0.000 description 6
- 238000003384 imaging method Methods 0.000 description 6
- 210000001747 pupil Anatomy 0.000 description 6
- 230000004044 response Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 238000001069 Raman spectroscopy Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 238000001917 fluorescence detection Methods 0.000 description 4
- 230000006872 improvement Effects 0.000 description 3
- 230000007613 environmental effect Effects 0.000 description 2
- 238000005562 fading Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000009022 nonlinear effect Effects 0.000 description 2
- RTAQQCXQSZGOHL-UHFFFAOYSA-N Titanium Chemical compound [Ti] RTAQQCXQSZGOHL-UHFFFAOYSA-N 0.000 description 1
- 239000006096 absorbing agent Substances 0.000 description 1
- 238000010521 absorption reaction Methods 0.000 description 1
- 230000002238 attenuated effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000001427 coherent effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000001747 exhibiting effect Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 102000034287 fluorescent proteins Human genes 0.000 description 1
- 108091006047 fluorescent proteins Proteins 0.000 description 1
- 238000001491 hyper Rayleigh scattering spectroscopy Methods 0.000 description 1
- 238000006317 isomerization reaction Methods 0.000 description 1
- 230000031700 light absorption Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 239000000979 synthetic dye Substances 0.000 description 1
- 229910052719 titanium Inorganic materials 0.000 description 1
- 239000010936 titanium Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/62—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
- G01N21/63—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
- G01N21/64—Fluorescence; Phosphorescence
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Analytical Chemistry (AREA)
- Health & Medical Sciences (AREA)
- Chemical & Material Sciences (AREA)
- Immunology (AREA)
- Biochemistry (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Pathology (AREA)
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Optics & Photonics (AREA)
- Microscoopes, Condenser (AREA)
- Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)
Abstract
簡単な処理で、S/N比を向上してより高い空間分解能を実現することを目的として、本発明の蛍光顕微鏡(1)は、照射によって蛍光を発生し、少なくとも1つが蛍光を飽和させる照射強度を有し、相互に照射強度が異なる2以上の励起光を試料(S)の同一箇所に別々に照射する光源装置(3)および照明光学系(5)と、各励起光を試料(S)に照射することにより発生した蛍光をそれぞれ検出する検出光学系(7)と、検出光学系(7)により取得された複数の蛍光信号を、対応する各励起光の照射強度と照射時間とに基づき、飽和が生じていない非飽和成分が一致するよう正規化して得られる複数の正規化蛍光信号の差分を演算し、得られた差分信号を用いて蛍光画像を生成する処理装置(9)とを備える。 For the purpose of improving the S / N ratio and realizing higher spatial resolution with a simple process, the fluorescence microscope (1) of the present invention generates fluorescence by irradiation, and at least one of them saturates the fluorescence. A light source device (3) and an illumination optical system (5) for separately irradiating two or more excitation lights having different intensities and different irradiation intensities on the same portion of the sample (S), and each excitation light for the sample (S ), The detection optical system (7) for detecting the fluorescence generated by irradiating each of the plurality of fluorescence signals acquired by the detection optical system (7) with the irradiation intensity and the irradiation time of each corresponding excitation light. And a processing device (9) for calculating a difference between a plurality of normalized fluorescence signals obtained by normalization so that non-saturated components in which saturation does not occur coincide with each other and generating a fluorescence image using the obtained difference signals; Is provided.
Description
本発明は、顕微鏡および画像取得方法に関するものである。 The present invention relates to a microscope and an image acquisition method.
回折限界を超える高い空間分解能を有する顕微鏡技術が知られている(例えば、特許文献1参照。)。
この特許文献1においては、蛍光が飽和するような強度のレーザ光を試料に照射し、変復調技術を利用して蛍光の飽和成分に該当する信号のみを検出して画像を生成している。蛍光の飽和が生じている領域においては、励起光に対する蛍光の発生効率の非線形性が高く、これを検出することでスポット径を小さくできることを利用して、高い空間分解能を実現することができる。A microscopic technique having a high spatial resolution exceeding the diffraction limit is known (for example, see Patent Document 1).
In
さらに具体的には、特許文献1は、励起光の強度を変調し、それよりも高次の周波数で復調している。蛍光が飽和していない状態においては、蛍光の時間変化は励起光の時間変化と等しくなるが、蛍光が飽和している箇所では、蛍光と励起光の時間変化は異なる様相を示すようになる。その変化分が、結果として変調した周波数の高次周波数成分として現れるので、この高次周波数成分のみをロックインアンプで復調することにより検出している。
More specifically,
また、特許文献1には、蛍光が飽和する強度を含む2以上の強度の励起光を照射して、それぞれ画像を取得し、励起光強度に対する蛍光強度の関係をフィッティングすることで非線形成分のみを抽出する手法も開示されている。
In
特許文献1に記載された変復調を利用した飽和成分の検出技術では、飽和成分の信号を部分的に検出しているに過ぎない。例えば、レーザ光が周波数fで変調されるものとすると、レーザ光の強度IEx(t)と蛍光の強度IFl(t)は下記の(1)式、(2)式により表すことができる。
また、特許文献1に記載されたフィッティングを利用する検出技術では、各ピクセルにおいてフィッティング処理を行う必要があり、膨大な計算量が必要となるとともに、フィッティングによる誤差が画像に影響する。
In addition, in the detection technique using the fitting described in
本発明は、上述した事情に鑑みてなされたものであって、簡単な処理で、S/N比を向上してより高い空間分解能を実現することができる顕微鏡および画像取得方法を提供することを目的としている。 The present invention has been made in view of the above-described circumstances, and provides a microscope and an image acquisition method capable of improving the S / N ratio and realizing higher spatial resolution by simple processing. It is aimed.
本発明の第1態様は、照射によって信号光を発生し、少なくとも1つが前記信号光を飽和または非線形増減させる照射強度を有し、相互に照射強度が異なる2以上の照射光を試料の同一箇所に別々に照射する照射部と、各前記照射光を前記試料に照射することにより発生した前記信号光をそれぞれ検出する信号光検出部と、該信号光検出部により取得された複数の光信号を、対応する各前記照射光の照射強度と照射時間とに基づき、飽和また非線形増減が生じていない光強度成分が一致するよう正規化して得られる複数の正規化光信号の差分を演算し、得られた差分信号を用いて信号光画像を生成する画像生成部とを備える顕微鏡である。 In the first aspect of the present invention, signal light is generated by irradiation, and at least one of the irradiation lights has an irradiation intensity that saturates or nonlinearly increases or decreases the signal light, and two or more irradiation lights having different irradiation intensities are applied to the same portion of the sample An irradiating unit that irradiates the sample separately, a signal light detecting unit that detects the signal light generated by irradiating the sample with the irradiation light, and a plurality of optical signals acquired by the signal light detecting unit. Based on the irradiation intensity and irradiation time of each corresponding irradiation light, the difference between a plurality of normalized optical signals obtained by normalization so that the light intensity components without saturation or non-linear increase / decrease coincide is calculated and obtained. It is a microscope provided with the image generation part which produces | generates a signal light image using the obtained difference signal.
本態様によれば、照射部により試料の同一箇所に対して別々に照射された各照射光の照射強度に対応する強度の光信号が信号光検出部によりそれぞれ取得される。この場合において、少なくとも1つの照射光が信号光を飽和または非線形増減させる照射強度を有しているので、画像生成部により、これらの光信号の光強度成分が一致するよう正規化された複数の正規化光信号の差分を演算することで、信号光の飽和または非線形増減成分のみを効率よく抽出して信号光画像を生成することができる。したがって、複数の正規化光信号の差分を演算するだけの簡単な処理で、S/N比を向上してより高い空間分解能を実現することができる。本態様においては、前記信号光が蛍光であってもよい。 According to this aspect, the signal light detection unit acquires optical signals having intensities corresponding to the irradiation intensities of the respective irradiation lights separately irradiated to the same portion of the sample by the irradiation unit. In this case, since at least one irradiation light has an irradiation intensity that saturates or nonlinearly increases / decreases the signal light, a plurality of normalized light intensity components of these optical signals are matched by the image generation unit. By calculating the difference between the normalized optical signals, it is possible to efficiently extract only the saturation or nonlinear increase / decrease component of the signal light and generate a signal light image. Therefore, the S / N ratio can be improved and higher spatial resolution can be realized by a simple process that simply calculates the difference between a plurality of normalized optical signals. In this aspect, the signal light may be fluorescence.
上記態様においては、前記照射部が、対応する各前記照射光の照射強度の照射時間内の積分値が等しくなるように、各前記照射光の照射強度および照射時間を設定することにより、前記光信号を正規化させることとしてもよい。
このように構成することで、信号光検出部により取得された光信号をそのまま正規化光信号として差分の演算処理を行うことができ、差分の演算処理を簡易にすることができる。また、光信号のダイナミックレンジが狭くなるのを回避することができる。In the above aspect, the irradiation unit sets the irradiation intensity and the irradiation time of each irradiation light so that the integrated values within the irradiation time of the irradiation intensity of each corresponding irradiation light are equal, so that the light It is good also as normalizing a signal.
With this configuration, the difference calculation process can be performed using the optical signal acquired by the signal light detection unit as it is as the normalized optical signal, and the difference calculation process can be simplified. Further, it is possible to avoid the narrowing of the dynamic range of the optical signal.
上記態様においては、前記画像生成部が、対応する各前記照射光の照射強度の照射時間内の積分値の比率により、前記光信号を正規化することとしてもよい。
このように構成することで、照射光の照射強度や照射時間の設定条件を調整することなく、信号光の飽和成分を正確に抽出することができる。In the above aspect, the image generation unit may normalize the optical signal based on a ratio of integrated values within the irradiation time of the irradiation intensity of each corresponding irradiation light.
By comprising in this way, the saturation component of signal light can be extracted correctly, without adjusting the setting conditions of irradiation intensity and irradiation time of irradiation light.
上記態様においては、前記照射部が、2光子励起法によって前記信号光を発生させる前記照射光を照射するとともに、対応する各前記照射光の照射強度の2乗の前記照射時間内の積分値が等しくなるように、各前記照射光の照射強度および照射時間を設定することにより、前記光信号を正規化させることとしてもよい。
このように構成することで、簡易な差分の演算処理で、2光子励起観察により、S/N比を向上してより高い空間分解能を実現することができる。In the above aspect, the irradiation unit irradiates the irradiation light that generates the signal light by a two-photon excitation method, and an integral value within the irradiation time of the square of the irradiation intensity of each corresponding irradiation light is The optical signal may be normalized by setting the irradiation intensity and irradiation time of each irradiation light so as to be equal.
With this configuration, the S / N ratio can be improved and higher spatial resolution can be realized by two-photon excitation observation with simple difference calculation processing.
上記態様においては、前記照射部が、2光子励起法によって前記信号光を発生させる前記照射光を照射し、前記画像生成部が、対応する各前記照射光の照射強度の2乗の前記照射時間内の積分値の比率により、前記光信号を正規化することとしてもよい。
このように構成することで、照射光の照射強度や照射時間の設定条件の調整に手間を掛けずに、2光子励起観察により、S/N比を向上してより高い空間分解能を実現することができる。In the said aspect, the said irradiation part irradiates the said irradiation light which generates the said signal light by a two-photon excitation method, and the said image generation part is the said irradiation time of the square of the irradiation intensity | strength of each corresponding said irradiation light. The optical signal may be normalized by the ratio of the integral values.
By configuring in this way, the S / N ratio is improved and higher spatial resolution is realized by two-photon excitation observation without taking time to adjust the setting conditions of irradiation intensity and irradiation time of irradiation light. Can do.
上記態様においては、前記画像生成部が、前記照射光が照射されるライン毎、前記信号光画像毎、前記信号光画像のピクセル毎、または、複数の前記信号光画像のスタック毎に前記差分を演算することとしてもよい。
このように構成することで、信号光画像毎またはスタック毎に差分を演算する場合は、照射光ごとに画像をある程度形成してから演算処理を行うことができ、差分処理を簡易にすることができる。また、ライン毎またはピクセル毎に差分を演算する場合は、環境温度の変化の影響などによって照射光の照射時間の揺らぎや試料の位置ずれなどが生じたとしても、誤差を生じ難くすることができる。In the above aspect, the image generation unit calculates the difference for each line irradiated with the irradiation light, for each signal light image, for each pixel of the signal light image, or for each stack of the plurality of signal light images. It is good also as calculating.
By configuring in this way, when the difference is calculated for each signal light image or for each stack, the calculation process can be performed after forming an image for each irradiation light to some extent, and the difference process can be simplified. it can. In addition, when calculating the difference for each line or pixel, even if fluctuations in the irradiation time of the irradiation light, sample displacement, etc. occur due to the influence of changes in the environmental temperature, it is possible to make errors less likely to occur. .
上記態様においては、前記画像生成部が、前記差分の演算処理を行うロックインアンプを備え、該ロックインアンプにより前記信号光画像のピクセル毎に前記差分を演算することとしてもよい。
このように構成することで、市販されているロックインアンプを利用して差分の演算処理を簡易かつ正確に行うことができる。In the above aspect, the image generation unit may include a lock-in amplifier that performs the difference calculation process, and the lock-in amplifier may calculate the difference for each pixel of the signal light image.
With this configuration, the difference calculation process can be performed easily and accurately using a commercially available lock-in amplifier.
上記態様においては、前記照射部が、相互に照射強度が異なる3以上の前記照射光を前記試料に別々に照射し、前記画像生成部が、前記複数の正規化光信号に対する差分を複数回行うこととしてもよい。
このように構成することで、光信号におけるより高次の飽和成分に基づいて信号光画像を生成して、より高度の空間分解能を実現することができる。In the above aspect, the irradiation unit separately irradiates the sample with three or more irradiation lights having different irradiation intensities, and the image generation unit performs a difference with respect to the plurality of normalized optical signals a plurality of times. It is good as well.
With this configuration, it is possible to generate a signal light image based on higher-order saturated components in the optical signal and realize higher spatial resolution.
上記態様においては、前記画像生成部が、デコンボリューション機能を有することとしてもよい。
このように構成することで、差分の演算処理時に負の強度成分が発生したとしても、負の強度成分を含まない信号光画像を生成することができる。また、空間周波数の高周波成分を強調してより高い分解能を実現することができる。In the above aspect, the image generation unit may have a deconvolution function.
With this configuration, even if a negative intensity component occurs during the difference calculation process, a signal light image that does not include the negative intensity component can be generated. Also, higher resolution can be realized by emphasizing the high-frequency component of the spatial frequency.
本発明の第2態様は、照射によって信号光を発生し、少なくとも1つが前記信号光を飽和または非線形増減させる照射強度を有し、相互に照射強度が異なる2以上の照射光を試料の同一箇所に別々に照射する照射ステップと、各前記照射光を前記試料に照射することにより発生した前記信号光をそれぞれ検出する信号光検出ステップと、該信号光検出ステップにより取得された複数の光信号を、対応する各前記照射光の照射強度と照射時間とに基づき、飽和または非線形増減が生じていない光強度成分が一致するよう正規化して得られる複数の正規化光信号の差分を演算する演算ステップと、該演算ステップにより得られた差分信号を用いて信号光画像を生成する画像生成ステップとを含む画像取得方法である。 In the second aspect of the present invention, signal light is generated by irradiation, and at least one of the irradiation lights has an irradiation intensity that saturates or nonlinearly increases / decreases the signal light, and two or more irradiation lights having mutually different irradiation intensities are applied to the same part Irradiating separately, a signal light detecting step for detecting the signal light generated by irradiating the sample with each irradiation light, and a plurality of optical signals obtained by the signal light detecting step. A calculation step of calculating a difference between a plurality of normalized optical signals obtained by normalization so that the light intensity components that are not saturated or non-linearly increased or decreased are matched based on the corresponding irradiation intensity and irradiation time of each irradiation light And an image generation step of generating a signal light image using the difference signal obtained by the calculation step.
本態様によれば、照射ステップにより試料の同一箇所に対して別々に照射された各照射光の照射強度に対応する強度の光信号が信号光検出ステップによりそれぞれ取得される。この場合において、少なくとも1つの照射光が信号光を飽和または非線形増減させる照射強度を有しているので、演算ステップによるこれらの光信号の光強度成分が一致するよう正規化された複数の正規化光信号の差分の演算処理により、信号光の飽和または非線形増減成分のみを効率よく抽出することができる。したがって、画像生成ステップにより、S/N比が向上されたより高い空間分解能を有する信号光画像を生成することができる。本態様においては、前記信号光が蛍光であってもよい。 According to this aspect, an optical signal having an intensity corresponding to the irradiation intensity of each irradiation light separately irradiated to the same portion of the sample by the irradiation step is acquired by the signal light detection step. In this case, since at least one irradiation light has an irradiation intensity that saturates or nonlinearly increases / decreases the signal light, a plurality of normalizations normalized so that the light intensity components of these optical signals coincide with each other in the calculation step Only the saturation or nonlinear increase / decrease component of the signal light can be efficiently extracted by the arithmetic processing of the difference of the optical signal. Therefore, a signal light image having a higher spatial resolution with an improved S / N ratio can be generated by the image generation step. In this aspect, the signal light may be fluorescence.
上記態様においては、前記照射ステップが、対応する各前記照射光の照射強度の照射時間内の積分値が等しくなるように、各前記照射光の照射強度および照射時間を設定することにより、前記光信号を正規化させることとしてもよい。
このように構成することで、信号光検出ステップにより取得された光信号をそのまま正規化光信号として差分の演算処理を行い、差分の演算処理を簡易にすることができる。また、光信号のダイナミックレンジが狭くなるのを回避することができる。In the above aspect, the irradiation step sets the irradiation intensity and irradiation time of each irradiation light so that the integrated values within the irradiation time of the corresponding irradiation intensity of each irradiation light are equal. It is good also as normalizing a signal.
With this configuration, the difference calculation process can be performed by using the optical signal acquired in the signal light detection step as it is as the normalized optical signal, and the difference calculation process can be simplified. Further, it is possible to avoid the narrowing of the dynamic range of the optical signal.
上記態様においては、前記画像生成ステップが、対応する各前記照射光の照射強度の照射時間内の積分値の比率により、前記光信号を正規化することとしてもよい。
このように構成することで、照射光の照射強度や照射時間の設定条件を調整することなく、信号光の飽和成分を正確に抽出することができる。In the above aspect, the image generation step may normalize the optical signal based on a ratio of integral values within the irradiation time of the corresponding irradiation intensity of the irradiation light.
By comprising in this way, the saturation component of signal light can be extracted correctly, without adjusting the setting conditions of irradiation intensity and irradiation time of irradiation light.
上記態様においては、前記照射ステップが、2光子励起法によって前記信号光を発生させる前記照射光を照射するとともに、対応する各前記照射光の照射強度の2乗の前記照射時間内の積分値が等しくなるように、各前記照射光の照射強度および照射時間を設定することにより、前記光信号を正規化させることとしてもよい。
このように構成することで、簡易な差分の演算処理で、2光子励起観察によりS/N比が向上されたより高い空間分解能を有する信号光画像を生成することができる。In the above aspect, the irradiation step irradiates the irradiation light that generates the signal light by a two-photon excitation method, and an integral value within the irradiation time of the square of the irradiation intensity of each corresponding irradiation light is The optical signal may be normalized by setting the irradiation intensity and irradiation time of each irradiation light so as to be equal.
With this configuration, it is possible to generate a signal light image having a higher spatial resolution with an improved S / N ratio by two-photon excitation observation by simple difference calculation processing.
上記態様においては、前記照射ステップが、2光子励起法によって前記信号光を発生させる前記照射光を照射し、前記画像生成ステップが、対応する各前記照射光の照射強度の2乗の前記照射時間内の積分値の比率により、前記光信号を正規化することとしてもよい。
このように構成することで、照射光の照射強度や照射時間の設定条件の調整に手間を掛けずに、2光子励起観察により、S/N比を向上してより高い空間分解能を実現することができる。In the above aspect, the irradiation step irradiates the irradiation light that generates the signal light by a two-photon excitation method, and the image generation step includes the irradiation time of the square of the irradiation intensity of each corresponding irradiation light. The optical signal may be normalized by the ratio of the integral values.
By configuring in this way, the S / N ratio is improved and higher spatial resolution is realized by two-photon excitation observation without taking time to adjust the setting conditions of irradiation intensity and irradiation time of irradiation light. Can do.
本発明によれば、簡単な処理で、S/N比を向上してより高い空間分解能を実現することができるという効果を奏する。 According to the present invention, it is possible to improve the S / N ratio and realize higher spatial resolution with a simple process.
〔第1実施形態〕
本発明の第1実施形態に係る蛍光顕微鏡(顕微鏡)および画像取得方法について、図面を参照して以下に説明する。
本実施形態に係る蛍光顕微鏡1は、図1に示すように、1光子励起により試料Sを観察可能な構成を有している。すなわち、蛍光顕微鏡1は、レーザ光(照射光)を射出する光源装置(照射部)3と、光源装置3から射出されたレーザ光を試料Sに照射する照明光学系(照射部)5と、レーザ光が試料Sに照射されることにより発生する蛍光(信号光)を検出する検出光学系(信号光検出部)7と、検出光学系7により取得された蛍光信号(光信号)に基づいて蛍光画像(信号光画像)を生成するPC(Personal Computer)のような処理装置(画像生成部)9とを備えている。[First Embodiment]
A fluorescence microscope (microscope) and an image acquisition method according to a first embodiment of the present invention will be described below with reference to the drawings.
As shown in FIG. 1, the
光源装置3は、レーザ光を発生するレーザ光源11と、レーザ光源11から発せられたレーザ光を変調する光変調部13とを備えている。
光変調部13は、例えば、音響光学素子であり、レーザ光源11からのレーザ光を所定の強度および所定のパルス幅の矩形形状からなるパルスに変調することができるようになっている。The
The
本実施形態においては、光変調部13は、レーザ光源11からのレーザ光を相互に照射強度およびパルス幅が異なる2つのレーザ光に切り替えて択一的に射出させるようになっている。また、光変調部13は、1ピクセル分の露光における各レーザ光の照射強度の照射時間内の積分値が等しくなるように、これらレーザ光の照射強度およびパルス幅(照射時間)を設定するようになっている。
In the present embodiment, the
照明光学系5は、光源装置3から射出されたレーザ光を2次元的に走査させる2軸ガルバノスキャナ(以下、単にスキャナという。)15と、スキャナ15により走査されたレーザ光を集光する瞳投影レンズ17と、瞳投影レンズ17により集光されたレーザ光を略平行光にする結像レンズ19と、結像レンズ19により略平行光にされたレーザ光を試料Sに照射する一方、試料Sの蛍光物質が励起されることにより発生する蛍光を集光する対物レンズ21とを備えている。
The illumination
スキャナ15は、互いに交差する揺動軸回りに揺動可能な一対のガルバノミラー16A,16Bを備えている。このスキャナ15は、これら一対のガルバノミラー16A,16Bの中間位置が対物レンズ21の瞳位置と共役な位置関係となるように配置されている。また、スキャナ15は、各ガルバノミラー16A,16Bの揺動角度に応じて、直交するX方向とY方向にレーザ光を走査させることができるようになっている。
The
検出光学系7は、対物レンズ21により集光されてレーザ光の光路を戻る蛍光をレーザ光の光路から分岐させるダイクロイックミラー23と、ダイクロイックミラー23により分岐された蛍光を集光する集光レンズ25と、集光レンズ25により集光された蛍光の通過を制限するピンホール27と、ピンホール27を通過した蛍光を検出する検出器29とを備えている。
The detection
ダイクロイックミラー23は、光変調部13を通過したレーザ光源11からのレーザ光をスキャナ15に向けて透過させる一方、試料Sから対物レンズ21、結像レンズ19および瞳投影レンズ17を介してレーザ光の光路を戻る蛍光を集光レンズ25に向けて反射するようになっている。
The
ピンホール27は、試料Sと光学的に共役な位置に配置されており、共焦点光学系を構築している。このピンホール27は、試料Sにおける対物レンズ21の焦点位置において発生した蛍光のみを通過させることができるようになっている。
検出器29は、例えば、光電子増倍管(PMT)であり、検出した蛍光の輝度に相当する蛍光信号を処理装置9に送るようになっている。The
The
処理装置9は、スキャナ15から送られてくるレーザ光の走査位置と、その走査位置にレーザ光が照射されることにより発生する蛍光が検出されたときに検出器29から送られてくる蛍光信号とを対応づけて記憶することにより、2次元的な蛍光画像を生成するようになっている。処理装置9により生成された蛍光画像は、図示しないディスプレイに表示したり、図示しないメモリに保存したりすることができるようになっている。
The
本実施形態においては、処理装置9は、相互に照射強度およびパルス幅が異なる2つのレーザ光に対応して検出器29から送られてくる2つの蛍光信号の差分を演算し、得られた差分信号を用いて蛍光画像を生成するようになっている。光変調部13により、各レーザ光の照射強度の照射時間内の積分値が等しくなるように2つのレーザ光の照射強度およびパルス幅が設定されることで、検出器29から送られてくる2つの蛍光信号は、飽和が生じていない非飽和成分(光強度成分)が互いに一致するよう正規化されている。したがって、検出器29から出力される2つの蛍光信号がそれぞれ正規化蛍光信号(正規化光信号)となる。
In the present embodiment, the
次に、本実施形態に係る画像取得方法について説明する。
本実施形態に係る画像取得方法は、図2のフローチャートに示されるように、一方が蛍光を飽和させる照射強度を有し、相互に照射強度およびパルス幅が異なる2つのレーザ光を試料Sの同一箇所に別々に照射する照射ステップS1と、各レーザ光が試料Sに照射されることにより発生する蛍光をそれぞれ検出する蛍光検出ステップ(信号光検出ステップ)S2と、蛍光検出ステップS2により取得された複数の蛍光信号を、対応する各レーザ光の照射強度とパルス幅とに基づき、飽和が生じていない非飽和成分が一致するよう正規化して得られる複数の正規化蛍光信号の差分を演算する演算ステップS3と、演算ステップS3により得られた差分信号を用いて蛍光画像を生成する画像生成ステップS4とを含んでいる。Next, an image acquisition method according to the present embodiment will be described.
In the image acquisition method according to the present embodiment, as shown in the flowchart of FIG. 2, two laser beams, one of which has an irradiation intensity that saturates fluorescence and has mutually different irradiation intensity and pulse width, are the same on the sample S. It was acquired by the irradiation step S1 for irradiating the spot separately, the fluorescence detection step (signal light detection step) S2 for detecting the fluorescence generated by each laser beam being irradiated to the sample S, and the fluorescence detection step S2. An operation that calculates the difference between multiple normalized fluorescence signals obtained by normalizing multiple fluorescence signals based on the irradiation intensity and pulse width of each corresponding laser beam so that non-saturated non-saturated components match. Step S3 and image generation step S4 for generating a fluorescent image using the difference signal obtained in calculation step S3 are included.
このように構成された蛍光顕微鏡1および画像取得方法の作用について説明する。
本実施形態に係る蛍光顕微鏡1および画像取得方法により試料Sを観察するには、光変調部13によりレーザ光を変調して、相互に照射強度とパルス幅が異なる2つのレーザ光によりそれぞれ蛍光画像を取得する。The operation of the thus configured
In order to observe the sample S with the
具体的には、まず、図3Aに示すように、光変調部13により、レーザ光源11から発生させたレーザ光を1ピクセル毎に蛍光が飽和しない強度(IEX1)でΔt1のパルス幅となるように変調する。以下、このように変調されたレーザ光を第1レーザ光という。図3Aにおいて、縦軸はレーザ光の強度を示し、横軸は照射時間を示している。図3B、図7、図9Aにおいて同様である。Specifically, first, as shown in FIG. 3A, the
光変調部13から射出された第1レーザ光は、ダイクロイックミラー23を透過してスキャナ15により走査され、瞳投影レンズ17により集光される。そして、第1レーザ光は、結像レンズ19により平行光にされて対物レンズ21により試料Sに照射される(照射ステップS1)。これにより、スキャナ15の各ガルバノミラー16A,16Bの揺動角度に応じて、第1レーザ光が試料S上で2次元的に走査される。
The first laser light emitted from the
第1レーザ光が走査されて試料Sの蛍光物質が励起されることにより発生した蛍光は、対物レンズ21により集光されて結像レンズ19、瞳投影レンズ17、スキャナ15を介してレーザ光の光路を戻り、ダイクロイックミラー23によりレーザ光の光路から分岐される。
Fluorescence generated when the fluorescent material of the sample S is excited by scanning the first laser light is condensed by the
そして、蛍光は集光レンズ25により集光され、試料Sにおける対物レンズ21の焦点位置において発生した蛍光のみがピンホール27を通過して、検出器29により検出される(蛍光検出ステップS2)。これにより、処理装置9において、検出器29により取得された蛍光の蛍光信号と対応するレーザ光の走査位置とに基づいて試料Sの蛍光画像が生成される。処理装置9により生成された蛍光画像はディスプレイに表示させてもよい。
Then, the fluorescence is condensed by the
次に、図3Bに示すように、光変調部13により、レーザ光源11から発生させたレーザ光を1ピクセル毎に蛍光が飽和する強度(IEX2)でΔt1よりも短いΔt2のパルス幅となるように変調する。IEX2>IEX1である。以下、このように変調されたレーザ光を第2レーザ光という。これら第1レーザ光と第2レーザ光は、互いに1ピクセル分の露光における照射強度の照射時間内の積分値が等しくなるように、照射強度(IEX1,IEX2)および照射時間(Δt1,Δt2)が設定されている。Next, as shown in FIG. 3B, the
第2レーザ光は、第1レーザ光の場合と同様に、試料S上で2次元的に走査される。これにより、試料Sの蛍光物質が励起されて発生した蛍光が検出器29により検出され、処理装置9により試料Sの蛍光画像が生成される。
The second laser beam is scanned two-dimensionally on the sample S as in the case of the first laser beam. Thereby, the fluorescence generated when the fluorescent substance of the sample S is excited is detected by the
続いて、処理装置9により、第1レーザ光により発生した蛍光が検出されることによって検出器29により取得された蛍光信号と、第2レーザ光により発生した蛍光が検出されることによって検出器29により取得された蛍光信号との差分が演算され(演算ステップS3)、得られた差分信号を用いて蛍光画像が生成される(画像生成ステップS4)。
Subsequently, the
ここで、1ピクセル間に第1レーザ光で発生する蛍光(以下、第1蛍光とする。)の強度は下記の(3)式で示され、1ピクセル間に第2レーザ光で発生する蛍光(以下、第2蛍光とする。)の強度は下記の(4)式で示される。
第1レーザ光(IEX1)は蛍光が飽和しない条件であるため、(3)式においてはβの項は存在しない。また、レーザの時間波形が矩形波であるため、Δt1およびΔt2内での時間積分は、それぞれΔt1およびΔt2との積と置き換えられる。一方、第2レーザ光(IEX2)は蛍光が飽和する強度であるため、(4)式においてはβの項が残る。Since the first laser beam (I EX1 ) is a condition that does not saturate the fluorescence, there is no β term in the equation (3). Further, since the time waveform of the laser is a rectangular wave, the time integral of the inside Delta] t 1 and Delta] t 2 is replaced with the product of the Delta] t 1 and Delta] t 2, respectively. On the other hand, since the second laser light (I EX2 ) has an intensity at which the fluorescence is saturated, the term β remains in the equation (4).
この場合において、光変調部13により、1ピクセル分の露光における第1レーザ光と第2レーザ光の照射強度の照射時間内の積分値が等しくなるように、2つのレーザ光の照射強度およびパルス幅が設定されることで、下記の(5)式が成り立つ。
これにより、処理装置9において、第1蛍光の蛍光信号と第2蛍光の蛍光信号との差分が演算されることで、下記の(6)式に示されるように、αがある線形項を消去して、βの非線形成分項のみ、すなわち、蛍光の飽和成分のみを抽出することができる。
(6)式では、(4)式のβの成分が減衰することなく残っており、これは本手法が蛍光の飽和成分をロスなく高効率に検出できることを意味している。したがって、処理装置9により、(6)式の差分演算処理によって得られた差分信号に基づいて蛍光画像が生成されることで、蛍光の飽和成分のみを利用した高い分解能をS/N比が高い状態で実現することができる。
In the equation (6), the β component of the equation (4) remains without being attenuated, which means that the present technique can detect the saturated component of fluorescence with high efficiency without any loss. Therefore, the
次に、ここまで数式を用いて説明した内容について、図を用いて概念的に説明する。
図4A,4B,4Cは蛍光の点像強度分布(PSF)を示したものである。図4A,4B,4Cにおいて、縦軸は蛍光の強度を示し、横軸は位置を示している。図6C、図9Bにおいて同様である。図4Aは、本実施形態の比較例として、相互に同じ照射時間で照射強度のみを変えた第1比較用レーザ光と第2比較用レーザ光を試料Sに照射した場合の第1比較用蛍光と第2比較用蛍光のPSFを示している。第1比較用レーザ光は蛍光が飽和しない強度に変調されたものであり、第2比較用レーザ光は蛍光が飽和する強度に変調されたものである。Next, the contents described above using mathematical expressions will be conceptually described with reference to the drawings.
4A, 4B, and 4C show the fluorescence point image intensity distribution (PSF). 4A, 4B, and 4C, the vertical axis indicates the intensity of fluorescence, and the horizontal axis indicates the position. The same applies to FIGS. 6C and 9B. FIG. 4A shows, as a comparative example of the present embodiment, the first comparative fluorescence when the sample S is irradiated with the first comparative laser light and the second comparative laser light that are changed only in the irradiation intensity at the same irradiation time. And PSF of the second comparative fluorescence. The first comparison laser beam is modulated to an intensity at which the fluorescence is not saturated, and the second comparison laser beam is modulated to an intensity at which the fluorescence is saturated.
第1比較用蛍光と第2比較用蛍光は飽和の有無により形状が異なるが、レーザ光の照射強度が異なるために蛍光強度も大きく異なることになる。差分によって飽和成分のみを抜き出して空間分解能を向上させるということは、図4Aに示すPSFの裾部分(すなわち、飽和が生じていない蛍光強度部分)を差分によって効率的にゼロに近づけるということであるが、図4Aの状態では第1比較用蛍光と第2比較用蛍光の強度の差が大きいため、差分演算を行っても裾部がゼロにはならない、すなわち、線形成分が残ってしまう。 The first comparison fluorescence and the second comparison fluorescence have different shapes depending on the presence or absence of saturation. However, since the irradiation intensity of the laser light is different, the fluorescence intensity is also greatly different. Extracting only the saturation component by the difference and improving the spatial resolution means that the tail portion of the PSF shown in FIG. 4A (that is, the fluorescence intensity portion where saturation is not generated) is efficiently brought close to zero by the difference. However, in the state of FIG. 4A, since the difference in intensity between the first comparative fluorescence and the second comparative fluorescence is large, the skirt does not become zero even if the difference calculation is performed, that is, a linear component remains.
これに対し、本実施形態においては、光変調部13により、図4Bに示すように、飽和が生じていない非飽和成分(線形成分)が一致するよう第1蛍光と第2蛍光の強度が正規化されているので、第1蛍光と第2蛍光とで同図に示すPSFの裾部が一致し、中心部が飽和によって強度に差が出る状態となる。
On the other hand, in this embodiment, as shown in FIG. 4B, the intensity of the first fluorescence and the second fluorescence is normalized by the
したがって、処理装置9により、第1蛍光の蛍光信号と第2蛍光の蛍光信号との差分を演算することで、図4Bの裾部(線形成分)がゼロとなり、図4Cに示すように、PSFの中心部である非線形成分(飽和成分)のみを効率的に抽出することができる。これにより、PSFの幅を狭くして空間分解能を高めることができる。
Therefore, by calculating the difference between the fluorescence signal of the first fluorescence and the fluorescence signal of the second fluorescence by the
以上説明したように、本実施形態に係る蛍光顕微鏡1および画像取得方法によれば、片方が蛍光を飽和させる照射強度を有する2つのレーザ光を試料Sに照射し、処理装置9により、レーザ光に対応する蛍光信号の非飽和成分が一致するよう正規化された2つの蛍光信号の差分を演算することで、蛍光の飽和成分のみを効率よく抽出して蛍光画像を生成することができる。したがって、2つの蛍光信号の差分を演算するだけの簡単な処理で、S/N比を向上してより高い空間分解能を実現することができる。
As described above, according to the
本実施形態においては、光変調部13により、(5)式が成り立つように第1レーザ光と第2レーザ光の照射強度とパルス幅を予め設定することとした。これに代えて、処理装置9により、差分演算の際に、(5)式が実質的に成り立つように第1蛍光と第2蛍光の蛍光信号を係数倍して正規化することとしてもよい。あるいは、第1レーザ光および第2レーザ光の照射強度とパルス幅の設定と、第1蛍光と第2蛍光の蛍光信号の係数倍の双方を行うこととしてもよい。このように正規化された蛍光信号が正規化蛍光信号となる。
In the present embodiment, the irradiation intensity and pulse width of the first laser beam and the second laser beam are set in advance by the
この場合、例えば、各レーザ光の照射強度の照射時間内の積分値の比率kを(7)式とする。
そして、処理装置9により、(7)式に示すように、レーザ光の照射強度の照射時間内の積分値に対する比率kを設定し、第1蛍光の(3)式に比率kを乗算してから第2蛍光の(4)式との差分を演算することとすればよい。
Then, as shown in equation (7), the
このようにすることで、下記の(8)式に示すように、αのある線形項を消去してβの非線形成分項(飽和成分)のみを抽出することができる。
また、通常、βは負の値であるので、差分演算の方向は(6)式や(8)式に示すように、非飽和状態で取得した蛍光信号から飽和状態で取得した蛍光信号を減算する方が望ましいが、特に限定するものではない。
また、各レーザ光のパルス波形についても矩形である必要は無く、差分時に(5)式が成り立てばよい。In general, since β is a negative value, the direction of the difference calculation is subtracted from the fluorescence signal acquired in the saturated state from the fluorescence signal acquired in the non-saturated state, as shown in Equations (6) and (8). Although it is preferable to do so, it is not particularly limited.
Further, the pulse waveform of each laser beam does not have to be rectangular, and the equation (5) may be established at the time of difference.
また、本実施形態においては、第1レーザ光は蛍光が飽和しない強度に設定することとしたが、第1レーザ光も蛍光が飽和する強度に設定することとしてもよく、αの項(線形項)が差分によって消去できればよい。この場合は、βの項も差分されたものが出力されることになる。 In the present embodiment, the first laser beam is set to an intensity at which the fluorescence is not saturated, but the first laser beam may also be set to an intensity at which the fluorescence is saturated. ) Can be deleted by the difference. In this case, the difference in terms of β is output.
また、本実施形態においては、非線形項として2次の項までを示したが、3次以降の成分が発生していてもよい。この場合においても、差分によって線形項が消去されるので、2次以降の高次項が全て検出されることになる。 Further, in the present embodiment, up to the second-order term is shown as the nonlinear term, but the third-order and subsequent components may be generated. Even in this case, since the linear term is eliminated by the difference, all the second and higher order terms are detected.
また、実際に蛍光画像を取得する際には、蛍光が飽和しない強度の第1レーザ光で先に蛍光画像を取得し、その後に、蛍光が飽和する強度の第2レーザ光で蛍光画像を取得することが望ましい。第2レーザ光の方が第1レーザ光よりも照射強度が強いため、第1レーザ光による画像取得を先に行うことで、観察の途中で蛍光の退色が起きる可能性を低減することができる。なお、第2レーザ光の照射時間は短いため、第2レーザ光を用いた画像取得であっても蛍光の退色は生じ難い。 In addition, when actually acquiring a fluorescent image, the fluorescent image is first acquired with the first laser light having an intensity that does not saturate the fluorescence, and then the fluorescent image is acquired with the second laser light having an intensity that saturates the fluorescence. It is desirable to do. Since the irradiation intensity of the second laser light is stronger than that of the first laser light, the possibility of fluorescence fading during observation can be reduced by performing image acquisition with the first laser light first. . Note that since the irradiation time of the second laser light is short, the fading of fluorescence hardly occurs even in image acquisition using the second laser light.
また、本実施形態においては、処理装置9がデコンボリューション機能を有し、差分演算後の蛍光画像をデコンボリューションすることとしてもよい。
例えば、測定条件の誤差で(5)式を満たせない場合や、(5)式ではなく下記の(9)式となるような係数Mを設けて、この式を満たすように差分演算時に第1蛍光の蛍光信号や第2蛍光の蛍光信号に係数Mを乗算したり、もしくは光変調部13でレーザ光の照射強度とパルス幅を設定したりする場合は、差分演算時にPSFに負の強度成分が発生する。
For example, if the measurement condition error does not satisfy the equation (5), or if the coefficient M is set to be the following equation (9) instead of the equation (5), the first difference is calculated to satisfy this equation. When multiplying the fluorescence signal of the fluorescence or the fluorescence signal of the second fluorescence by the coefficient M or setting the irradiation intensity and pulse width of the laser beam by the
この負の強度成分を含んだPSFの形状を予めシミュレーションや実測定で把握しておき、把握したPSFの形状を用いて差分演算後の蛍光画像をデコンボリューションすれば、負の強度成分を含まない蛍光画像を復元することが可能になる。この場合、負の成分を含んだPSFは空間周波数の高周波が強調されたものになっており、デコンボリューションにより、空間分解能をより向上させることが可能にある。 If the PSF shape including the negative intensity component is grasped in advance by simulation or actual measurement, and the fluorescence image after the difference calculation is deconvoluted using the grasped PSF shape, the negative intensity component is not included. It becomes possible to restore the fluorescence image. In this case, the PSF including a negative component has a high spatial frequency, and the spatial resolution can be further improved by deconvolution.
また、本実施形態においては、蛍光画像毎に差分を演算することとしたが、これに代えて、例えば、処理装置9により、複数の蛍光画像のスタック毎、レーザ光が照射されるライン毎、または、蛍光画像のピクセル毎のいずれかのタイミングで差分を演算することとしてもよい。
In the present embodiment, the difference is calculated for each fluorescent image, but instead, for example, the
蛍光画像毎や複数の蛍光画像のスタック毎に差分を演算する場合は、励起光ごとに画像をある程度形成してから演算処理を行うことができ、差分処理を簡易にすることができるという利点がある。一方、レーザ光のライン毎や蛍光画像のピクセル毎に差分を演算する場合は、環境温度の変化の影響などによって、レーザ光の照射時間に揺らぎが生じたり、試料Sが載置されるステージがドリフトして試料Sに位置ずれが生じたりしたとしても、誤差を生じ難くすることができるという利点がある。 When calculating the difference for each fluorescence image or for each stack of a plurality of fluorescence images, the calculation process can be performed after an image is formed to some extent for each excitation light, and the difference process can be simplified. is there. On the other hand, when the difference is calculated for each line of laser light or for each pixel of the fluorescent image, the irradiation time of the laser light may fluctuate due to the influence of changes in the environmental temperature or the stage on which the sample S is placed. Even if the sample S drifts and the position shift occurs, there is an advantage that an error can be hardly generated.
また、本実施形態においては、光変調部13として音響光学素子を例示して説明したが、レーザ光の照射強度とパルス幅を調整できればどのような構成でもよい。例えば、光変調部13として電気光学素子など他の素子を利用することとしてもよいし、あるいは、光変調部13を用いずにレーザ光源11を直接変調することとしてよい。
また、本実施形態においては、スキャナ15として、2軸ガルバノスキャナを例示して説明したが、例えば、ステージにより試料Sを保持してステージスキャンすることとしてもよく、2軸ガルバノスキャナに限定されるものではない。In the present embodiment, an acousto-optic element has been described as an example of the
In the present embodiment, the biaxial galvano scanner is exemplified as the
〔第2実施形態〕
次に、本発明の第2実施形態に係る蛍光顕微鏡(顕微鏡)および画像取得方法について、図を参照して以下に説明する。
本実施形態に係る蛍光顕微鏡1および画像取得方法は、第1実施形態の1光子励起観察に代えて、2光子励起観察を行う点で第1実施形態と異なる。
本実施形態の説明において、上述した第1実施形態に係る蛍光顕微鏡1および画像取得方法と構成を共通とする箇所には同一符号を付して説明を省略する。[Second Embodiment]
Next, a fluorescence microscope (microscope) and an image acquisition method according to the second embodiment of the present invention will be described below with reference to the drawings.
The
In the description of the present embodiment, the same reference numerals are given to portions that share the same configuration as the
本実施形態に係る蛍光顕微鏡1は、図5に示すように、レーザ光源11として、チタンサファイアレーザなどの超短パルスレーザを備えている。また、ピンホール27を備えず、試料Sから発せられて対物レンズ21により集光された蛍光を結像レンズ19に入射させる前にダイクロイックミラー23によりレーザ光の光路から分岐させて集光レンズ25に入射させるようになっている。
As shown in FIG. 5, the
本実施形態においても、光変調部13は、レーザ光を矩形パルスで照射強度とパルス幅が異なる2つのレーザ光に切り替えるとともに、1ピクセル分の露光における各レーザ光の照射強度の照射時間内の積分値が等しくなるように、これら2つのレーザ光の照射強度およびパルス幅を設定するようになっている。
Also in the present embodiment, the
この場合の1ピクセル間に第1レーザ光で発生する第1蛍光の強度は下記の(10)式で示され、1ピクセル間に第2レーザ光で発生する第2蛍光の強度は下記の(11)式で示される。
1光子励起の場合の(3)式、(4)式と比較して、(10)式、(11)式に示されるように、2光子励起の場合は、非飽和成分がレーザ光の照射強度の2乗に比例し、飽和成分がレーザ光の照射強度の4乗に比例する点で異なる。光変調部13により、1ピクセル分の露光における各レーザ光の照射強度の照射時間内の積分値が等しくなるように、2つのレーザ光の照射強度およびパルス幅が設定されることで、上記の(5)式に相当する式として下記の(12)式が成り立つ。
そして、処理装置9により、第1蛍光の蛍光信号と第2蛍光の蛍光信号の差分が演算されることで、上記の(6)式と同様に、下記の(13)式に示されるように、αのある線形項を消して、βの非線形成分項のみ、すなわち、飽和成分のみを抽出することができる。
このように、(12)式の条件のように、1ピクセル間のレーザ光の照射強度の2乗の時間積分が第1レーザ光と第2レーザ光で等しいようにするところが第1実施形態の1光子励起の場合と大きく異なる点である。 As described above, in the first embodiment, the time integration of the square of the irradiation intensity of the laser light between the pixels is made equal between the first laser light and the second laser light as in the condition of the expression (12). This is significantly different from the case of one-photon excitation.
本実施形態により取得される蛍光画像の一例とその比較例等を図6A,6B,6Cに示す。図6Aは、本実施形態の比較例として、従来のように、直径100nmの蛍光ビーズを波長800nmのレーザ光で2光子励起観察した結果である。蛍光画像内に複数個のビーズが表示されている。 An example of the fluorescence image acquired by this embodiment, its comparative example, etc. are shown to FIG. 6A, 6B, 6C. FIG. 6A shows a result of two-photon excitation observation of a fluorescent bead having a diameter of 100 nm with a laser beam having a wavelength of 800 nm as in the past as a comparative example of the present embodiment. A plurality of beads are displayed in the fluorescence image.
一方、図6Bは、本実施形態により、図6Aと同じビーズを同じ集光位置で2光子励起観察した結果である。図6Bは、図6Aと比べて蛍光ビーズのサイズが小さく見えており、空間分解能が向上していることが分かる。 On the other hand, FIG. 6B shows the result of two-photon excitation observation of the same bead as in FIG. 6A at the same condensing position according to this embodiment. FIG. 6B shows that the size of the fluorescent bead is smaller than that of FIG. 6A, and the spatial resolution is improved.
図6Aにおいて1から5の数字で示したビーズのラインプロファイルを示したのが図6Cである。図6Cは、各ビーズの重心位置を横切る位置でラインプロファイルを取得し、重心位置を中心にラインプロファイルを取る位置を回転させて、各ラインプロファイルを足し合わせて平均化し、この工程を各ビーズについて行って1から5のビーズのラインプロファイルの平均を取ったものである。図6Cにおいて、破線は図6Aの従来の2光子観察手法で観察したビーズのラインプロファイルであり、実線は図6Bに示す本実施形態の2光子励起観察で観察したビーズのラインプロファイルである。
FIG. 6C shows a line profile of beads indicated by
図6Cのラインプロファイルから明らかなように、本実施形態によれば、従来の2光子励起観察と比較して空間分解能を向上することができる。なお、図6Cのラインプロファイルは蛍光ビーズのサイズも含んでいるため、顕微鏡の分解能そのもの(PSF)ではない。すなわち、本実施形態に係る蛍光顕微鏡1および画像取得方法によれば、PSFの分解能の向上度は図6Cの結果よりも大きくなる。
As apparent from the line profile of FIG. 6C, according to the present embodiment, the spatial resolution can be improved as compared with the conventional two-photon excitation observation. Note that the line profile of FIG. 6C includes the size of the fluorescent beads, and is not the resolution of the microscope itself (PSF). That is, according to the
本実施形態においては、光変調部13によるレーザ光の変調により蛍光信号を正規化することとしたが、これに代えて、処理装置9が、対応する各レーザ光の照射強度の2乗の照射時間内の積分値の比率により、蛍光信号を正規化することとしてもよい。
In the present embodiment, the fluorescence signal is normalized by the modulation of the laser beam by the
この場合、例えば、各レーザ光の照射強度の2乗の照射時間内の積分値の比率kを(14)式とする。
そして、処理装置9により、(14)式に示すように、レーザ光の照射強度の2乗の照射時間内の積分値の比率kを設定し、第1蛍光の(10)式に比率kを乗算してから第2蛍光の(11)式との差分を演算することとすればよい。
Then, as shown in the equation (14), the
このようにすることで、下記の(15)式に示すように、βの非線形成分項(飽和成分)のみを抽出することができる。
〔第3実施形態〕
次に、本発明の第3実施形態に係る蛍光顕微鏡(顕微鏡)および画像取得方法について、図を参照して以下に説明する。
本実施形態に係る蛍光顕微鏡1および画像取得方法は、照明光学系5が、相互に照射強度が異なる3以上のレーザ光を試料Sに別々に照射し、処理装置9が、複数の正規化蛍光信号に対する差分を複数回行う点で第1実施形態と異なる。蛍光顕微鏡1の構成は図1と同様である。
本実施形態の説明において、上述した第1実施形態に係る蛍光顕微鏡1および画像取得方法と構成を共通とする箇所には同一符号を付して説明を省略する。[Third Embodiment]
Next, a fluorescence microscope (microscope) and an image acquisition method according to a third embodiment of the invention will be described below with reference to the drawings.
In the
In the description of the present embodiment, the same reference numerals are given to portions that share the same configuration as the
本実施形態では、1光子励起観察と2光子励起観察のどちらでも利用可能であるが、1光子励起観察について説明する。
光変調部13は、相互に照射強度とパルス幅が異なる3つのレーザ光を択一的に射出するようになっている。例えば、3つのレーザ光を図3Aに示す第1レーザ光と、図3Bに示す第2レーザ光と、図7に示す第3レーザ光とし、これらを試料Sに照射することにより発生する蛍光をそれぞれ第1蛍光、第2蛍光、第3蛍光とする。第3レーザ光は、例えば、1ピクセル毎に第2レーザ光よりも強い照射強度で、Δt2よりも短いΔt3のパルス幅を有するものとする。In this embodiment, either one-photon excitation observation or two-photon excitation observation can be used, but one-photon excitation observation will be described.
The
光変調部13は、第1蛍光が飽和成分を含まず、第2蛍光が励起レーザに対して2次の非線形応答を示す飽和成分までを含み、第3蛍光が3次の飽和成分までを含み、1ピクセル分の露光における各レーザ光の照射強度の照射時間内の積分値が等しくなるように、各々のレーザ光の照射強度およびパルス幅を調整するようになっている。
The
この場合の第1蛍光の強度は下記の(16)式で示され、第2蛍光の強度は(17)式で示され、第3蛍光の強度は(18)式で示される。
これら3つのレーザ光のパルス形状は矩形であり、照射時間の積分はパルス幅による乗算に等しくなっている。
光変調部13による各レーザ光の照射強度とパルス幅の設定により、上記の(5)式が成り立ち、第1実施形態と同様に、第1蛍光の蛍光信号と第2蛍光の蛍光信号と差分によって上記の(6)式が成り立つ。The pulse shapes of these three laser beams are rectangular, and the integration of the irradiation time is equal to multiplication by the pulse width.
The above equation (5) is established by setting the irradiation intensity and pulse width of each laser beam by the
同様に、第1蛍光と第3レーザ光に対しても下記(19)式が成り立ち、第1蛍光の蛍光信号と第3蛍光の蛍光信号との差分により(20)式が成り立つ。
(6)式および(20)式は双方ともαがある線形項が消去された形となっている。
処理装置9において、(20)式をI2 EX2Δt2/I2 EX3Δt3倍してから(6)式と(20)式の成分で差分演算することで、下記の(21)式のようになる。
In the
(21)式においては、蛍光強度がレーザ光の照射強度の2乗に比例するβの項も消去され、3乗に比例するγの項のみが残っている。これは、第1実施形態では2次以降の非線形項が検出されるのに対して、第3実施形態では3次以降の非線形項が検出されるということを意味する。したがって、本実施形態によれば、更なる空間分解能の向上を実現することができる。 In the equation (21), the β term whose fluorescence intensity is proportional to the square of the irradiation intensity of the laser beam is also deleted, and only the γ term proportional to the third power remains. This means that the second and subsequent nonlinear terms are detected in the first embodiment, whereas the third and subsequent nonlinear terms are detected in the third embodiment. Therefore, according to the present embodiment, further improvement in spatial resolution can be realized.
本実施形態は3次までに限定されるわけではなく、S/N比が許す限り、画像取得と差分回数を増やすことで検出される非線形項の次数を上げて空間分解能を向上させることが可能である。なお、第1蛍光は線形成分のみ、第2蛍光は2次の非線形成分までを含み、第3レーザ光は3次の非線形成分まで含むと仮定したが、いずれもそれよりも高次の非線形成分を含んでいてもよい。また、本実施形態は1光子励起に限定されるものではなく、第2実施形態と同様に、2光子励起観察においても利用できる。 This embodiment is not limited to the third order, and as long as the S / N ratio allows, the spatial resolution can be improved by increasing the order of nonlinear terms detected by increasing the number of times of image acquisition and difference. It is. Although it is assumed that the first fluorescence includes only a linear component, the second fluorescence includes up to a second-order nonlinear component, and the third laser light includes up to a third-order nonlinear component, both are higher-order nonlinear components. May be included. Further, the present embodiment is not limited to one-photon excitation, and can be used in two-photon excitation observation as in the second embodiment.
本実施形態においては、処理装置9が、対応する各レーザ光の照射強度の照射時間内の積分値の比率により、蛍光信号を正規化することとしてもよい。
この場合、例えば、第1レーザ光と第2レーザ光の照射強度の照射時間内の積分値の比率を上記の(7)式とし、第1レーザ光と第3レーザ光の照射強度の照射時間内の積分値の比率を下記の(22)式とする。
In this case, for example, the ratio of the integrated values within the irradiation time of the irradiation intensity of the first laser beam and the second laser beam is set to the above equation (7), and the irradiation time of the irradiation intensity of the first laser beam and the third laser beam is used. The ratio of the integral values is the following equation (22).
そして、処理装置9により、(7)式に示すレーザ光の照射強度の照射時間内の積分値に対する比率kを第1蛍光の(16)式に乗算してから第2蛍光の(17)式との差分を演算することとすればよい。このようにすることで、上記の(8)式に示すように、αのある線形項を消去してβの非線形成分項(飽和成分)のみを抽出することができる。
Then, the
また、処理装置9により、(22)式に示すように、レーザ光の照射強度の照射時間内の積分値に対する比率lを設定し、第1蛍光の(16)式に比率lを乗算してから第3蛍光の(18)式との差分を演算することとすればよい。
Further, as shown in the equation (22), the
このようにすることで、下記の(23)式に示すように、αのある線形項を消去してβとγを含む非線形成分項(飽和成分)のみを抽出することができる。
そして、処理装置9により、(8)式と(23)式に基づき、下記の(24)式に示すように、レーザ光の照射強度の時間積分値に対する比率kおよび比率lを利用することで、高次の非線形成分(飽和成分)のみを抽出することができる。
〔第4実施形態〕
次に、本発明の第4実施形態に係る蛍光顕微鏡(顕微鏡)および画像取得方法について、図を参照して以下に説明する。
本発明の第4実施形態に係る蛍光顕微鏡1および画像取得方法は、図8に示すように、処理装置9が、差分の演算処理を行うロックインアンプ31を備え、ロックインアンプ31により蛍光画像のピクセル毎に差分を演算する点で第1実施形態と異なる。
本実施形態の説明において、上述した第1実施形態に係る蛍光顕微鏡1および画像取得方法と構成を共通とする箇所には同一符号を付して説明を省略する。[Fourth Embodiment]
Next, a fluorescence microscope (microscope) and an image acquisition method according to a fourth embodiment of the invention will be described below with reference to the drawings.
As shown in FIG. 8, in the
In the description of the present embodiment, the same reference numerals are given to portions that share the same configuration as the
光変調部13は、図9Aに示すように、1ピクセルを検出する時間内に第1レーザ光と第2レーザ光を複数回切り替えて、交互に特定周波数で試料Sに照射するようになっている。図9Aでは1ピクセル間に各レーザ光の切り替えを2回繰り返しているが、回数はこれに限られるものではない。また、光変調部13は、1ピクセル分の露光における各レーザ光の照射強度の照射時間内の積分値が等しくなるように、各々のレーザ光の照射強度およびパルス幅を調整するようになっている。
As shown in FIG. 9A, the
各レーザ光の照射により発生する蛍光の蛍光信号の変化を図9Bに示す。各々のピクセルの信号値は第1レーザ光および第2レーザ光で発生した第1蛍光および第2蛍光の蛍光信号の各ピクセル時間内での積分値となるが、図9Bにおいては第1蛍光および第2蛍光の信号値をドットで示している。 FIG. 9B shows changes in fluorescence signal of fluorescence generated by irradiation with each laser beam. The signal value of each pixel is an integrated value within each pixel time of the fluorescence signals of the first fluorescence and the second fluorescence generated by the first laser light and the second laser light. In FIG. The signal value of the second fluorescence is indicated by dots.
光変調部13による各レーザ光の照射強度とパルス幅の設定により、(5)式(2光子励起では(12)式)が満たされているので、第1蛍光と第2蛍光の信号強度の差は非線形成分のみとなる。また、光変調部13が、図9Aのように、第1レーザ光と第2レーザ光を交互に特定周波数で試料Sに照射することで、図9Bのように、その特定周波数で交互に発生する第1蛍光と第2蛍光が検出器29により検出される。
Since the irradiation intensity of each laser beam and the pulse width are set by the
ロックインアンプ31は、検出器29と処理装置9との間に配置されており、検出器29から送られてくる図9Bに示す第1蛍光と第2蛍光の蛍光信号を検出して、光変調部13の特定周波数で復調するようになっている。これにより、第1蛍光の蛍光信号と第2蛍光の蛍光信号との差を取り出すことができる。
The lock-in
本実施形態によれば、検出器29から出力される蛍光信号を演算処理して処理装置9で差分演算を行わなくても、市販のロックインアンプ31を通してから処理装置9で処理するだけで、飽和成分のみを利用した蛍光画像を作成することができる。この場合、処理装置9は蛍光画像の作成と表示を行うだけとなる。
According to the present embodiment, even if the fluorescence signal output from the
また、これまでは蛍光の飽和について述べてきたが、励起光強度の増加による蛍光信号の非線形応答であれば他の現象についても本案は利用可能である。例えば、蛍光のスイッチングが生じる蛍光タンパクや合成色素では励起光強度の増加によって異性化が生じる。これも励起光強度の増加に対する非線形応答(蛍光の非線形増減)であるため、飽和と同様に本案を適用することで、空間分解能を向上することができる。この場合、飽和が生じていない非飽和成分が互いに一致するよう各蛍光信号を正規化する上記各実施形態と同じようにして、非線形増減が生じていない光強度成分が互いに一致するよう各蛍光信号を正規化することとすればよい。 Further, the saturation of the fluorescence has been described so far, but the present proposal can be used for other phenomena as long as the nonlinear response of the fluorescence signal due to the increase of the excitation light intensity. For example, in fluorescent proteins and synthetic dyes that cause fluorescence switching, isomerization occurs due to an increase in excitation light intensity. Since this is also a non-linear response (non-linear increase / decrease in fluorescence) to an increase in excitation light intensity, the spatial resolution can be improved by applying the present plan in the same manner as saturation. In this case, in the same manner as in each of the above embodiments in which each of the fluorescence signals is normalized so that the non-saturated components that do not saturate match each other, each of the fluorescence signals so that the light intensity components that do not cause nonlinear increase and decrease match each other. Should be normalized.
また、これまでは信号光が蛍光の場合について述べてきたが、本案は照射レーザ光強度の増加によって信号光が非線形応答する他の光検出の場合にも有用であり、例えば、特許文献2にあるような、反射、吸収、散乱、多光子効果にも利用できる。以下、これら現象に対する効果について述べる。 Although the case where the signal light is fluorescence has been described so far, the present proposal is also useful in the case of other light detection in which the signal light nonlinearly responds by increasing the irradiation laser light intensity. It can also be used for reflection, absorption, scattering, and multiphoton effects. The effects on these phenomena are described below.
〔第5実施形態〕
本実施形態では信号光が試料から発せられた蛍光ではなく、レーザ光が試料に照射された際に生じる反射光や散乱光、透過光、または多光子効果で生じる光成分などの場合である。まず、信号光が反射光乃至後方散乱光である場合について述べる。なお、ここで述べる散乱はミー散乱、レイリー散乱のことを差す。装置構成図を図10に示す。
本実施形態の説明において、上述した各実施形態に係る蛍光顕微鏡1および画像取得方法と構成を共通とする箇所には同一符号を付して説明を省略する。[Fifth Embodiment]
In this embodiment, the signal light is not the fluorescence emitted from the sample, but the reflected light, scattered light, transmitted light, or the light component generated by the multiphoton effect when the sample is irradiated with the laser light. First, the case where the signal light is reflected light or backscattered light will be described. The scattering described here refers to Mie scattering and Rayleigh scattering. An apparatus configuration diagram is shown in FIG.
In the description of the present embodiment, portions that share the same configuration as those of the
図10は図1とほぼ同じであるが、ダイクロイックミラー23がビームスプリッタ33に置き換わり、ビームスプリッタ33と集光レンズ25との間にダイクロイックフィルタ35が挿入されている点が異なる。図10において、レーザ光源11から出射された光は試料Sの蛍光を誘起するものである必要は無く、レーザ光が試料Sで反射乃至後方散乱された成分が信号光として検出される。即ち、試料Sに入射したレーザ光は試料Sによって反射乃至後方散乱を受けて、反射光乃至後方散乱光が対物レンズ21で集光される。その後反射光乃至後方散乱光はビームスプリッタ33によって偏向され、ダイクロイックフィルタ35を経て、ピンホール27を通過し、検出器29で検出される。
FIG. 10 is substantially the same as FIG. 1 except that the
ここで、レーザ光の強度を上げると、試料S内でレーザ光の非線形成分が発生する。即ち、レーザ光の波長をλとすると、波長がλ/n(n:2以上の自然数)の高調波が発生する。ダイクロイックフィルタ35はレーザ光の波長と同じ波長を透過させ、試料S内で生じた非線形成分を含む他の波長をカットするように設計されている。よって、ダイクロイックフィルタ35を透過して検出器29で検出される信号は非線形成分を含まない反射光乃至後方散乱光のみとなる。ここで、試料Sに入射したレーザ光の強度に着目すると、レーザ強度が高く非線形成分が発生している場合は、非線形成分が発生した分だけ、レーザ光と同波長の成分の強度が減少することになる。よって、非線形成分が発生していない状態においては、レーザ光の試料Sによる反射光乃至後方散乱光の強度は試料Sに入射するレーザ光の強度に比例するが、非線形成分が発生する状態においては、非線形成分が発生した分だけ非線形な減少が生じることになる。これは上記の蛍光の飽和と同様の効果であり、上記の式の蛍光強度Iflをそれぞれ反射強度IRe、散乱強度IScと置き換えても式が成り立つ。即ち、反射や散乱においても、照射条件の異なる複数のレーザ光を入射して差分処理を行うことで、非線形成分のみを抽出し、それに基づいて画像を取得することができる。この場合、蛍光の飽和と同様に、空間分解能が向上した画像を取得できることになる。Here, when the intensity of the laser beam is increased, a nonlinear component of the laser beam is generated in the sample S. That is, when the wavelength of the laser beam is λ, a harmonic having a wavelength of λ / n (n: a natural number of 2 or more) is generated. The
また、上記の説明では反射光乃至後方散乱光を検出するようにしたが、試料Sを透過した透過光乃至前方散乱光を検出するようにしてもよい。この場合においても、ダイクロイックフィルタ35でレーザ光と同じ波長成分のみを抜き出して、検出器29で検出する。照射条件の異なるレーザ光を照射して信号光を取得し、その信号を差分処理することで非線形成分のみを抽出して空間分解能を向上させる点については同じである。
In the above description, reflected light or backscattered light is detected, but transmitted light or forward scattered light transmitted through the sample S may be detected. Even in this case, only the same wavelength component as the laser light is extracted by the
また、上記ダイクロイックフィルタ35は、レーザ光と同じ波長をカットし、他の波長を透過するようにしてもよい。その場合はレーザ光と異なる波長の成分が検出器29によって検出されることになる。例えば、ハイパーレイリー散乱、高調波発生、ラマン散乱、コヒーレントアンチストークスラマン散乱(CARS)、四光波混合、誘導放出、差周波発生、和週波発生、パラメトリック蛍光、または誘導ラマン散乱(SRS)などの各種光を検出してもよい。この場合、ラマン散乱のように信号光強度に対するレーザ光強度の関係が線形である場合、実施形態1の(5)式と同様にレーザ光の照射強度の照射時間内の積分値が等しくなるように照射条件を設定する。また、高調波発生のように信号光強度とレーザ光強度の関係が非線形である場合は実施形態2の(12)式のようにレーザ光の照射強度を非線形次数分だけ累乗したものの照射時間内の積分値が等しくなるように照射条件を設定する。なお、この際に差分によって取り出される非線形成分は、少なくとも信号光が発生するための非線形効果の次数よりも高次の非線形成分となる。即ち、2次の高調波発生であるSHGで考えると、少なくとも信号光が発生するための非線形効果の次数は2次であるが、本案の差分によって取り出される高次成分は3次以降の非線形成分となる。また、(7)式や(14)式のような比率kを用いて差分処理を行ってもよく、第3実施形態のように複数回の差分を行ってより高次の非線形成分のみを取り出すことや、第4実施形態のようにロックインアンプを利用して非線形成分のみを取り出すことも可能である。
The
加えて、非線形光学効果により発生する信号光の非線形な増加成分を検出してもよい。例えば、試料が過飽和吸収体等の場合、レーザ光強度を増加することで非線形な信号光の増加が生じる。この非線形な増加成分のみを本案の差分で取得することも可能である。また、非特許文献1のような光音響信号の検出にも利用することができる。この場合は、本案と同様に試料に照射するレーザ光の照射強度と照射時間を複数条件で設定し、各々の条件化においてトランスデューサで検出された音響信号の差分を取ることで、レーザ光吸収の高次非線形成分を抽出して空間分解能を向上させることができる。このように、本案は光照射に対する信号の非線形応答成分を検出するものであり、その現象は何でもよく、上記に限られるものではない。また、これまでは試料に照射する光をレーザ光として述べてきたが、これは非線形応答が生じるためにはレーザのような強い光源が適しているからであり、非線形応答を生じさせる強度を有するものであればどのような光源でもよい。
In addition, a nonlinear increase component of the signal light generated by the nonlinear optical effect may be detected. For example, when the sample is a saturable absorber or the like, nonlinear signal light increases by increasing the laser light intensity. It is also possible to acquire only this non-linear increase component by the difference of the present plan. Moreover, it can utilize also for the detection of a photoacoustic signal like a
以上、本発明の各実施形態およびその変形例について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計変更等も含まれる。 As mentioned above, although each embodiment of this invention and its modification were explained in full detail with reference to drawings, the concrete structure is not restricted to this embodiment, The design change of the range which does not deviate from the summary of this invention Etc. are also included.
1 蛍光顕微鏡(顕微鏡)
3 光源装置(照射部)
5 照明光学系(照射部)
7 検出光学系(信号光検出部)
9 処理装置(画像生成部)
S1 照射ステップ
S2 蛍光検出ステップ(信号光検出ステップ)
S3 演算ステップ
S4 画像生成ステップ
1 Fluorescence microscope (microscope)
3 Light source device (irradiation part)
5 Illumination optical system (irradiation part)
7 Detection optical system (signal light detector)
9 Processing device (image generator)
S1 irradiation step S2 fluorescence detection step (signal light detection step)
S3 calculation step S4 image generation step
Claims (16)
各前記照射光を前記試料に照射することにより発生した前記信号光をそれぞれ検出する信号光検出部と、
該信号光検出部により取得された複数の光信号を、対応する各前記照射光の照射強度と照射時間とに基づき、飽和または非線形増減が生じていない光強度成分が一致するよう正規化して得られる複数の正規化光信号の差分を演算し、得られた差分信号を用いて信号光画像を生成する画像生成部とを備える顕微鏡。An irradiation unit that generates signal light by irradiation, and at least one of the irradiation units has irradiation intensity that saturates or nonlinearly increases or decreases the signal light, and separately irradiates two or more irradiation lights having different irradiation intensities on the same portion of the sample; ,
A signal light detection unit for detecting the signal light generated by irradiating the sample with each of the irradiation lights, and
A plurality of optical signals acquired by the signal light detection unit are obtained by normalizing based on the irradiation intensity and irradiation time of each corresponding irradiation light so that the light intensity components that are not saturated or non-linearly increased or decreased coincide with each other. A microscope comprising: an image generation unit that calculates a difference between a plurality of normalized optical signals and generates a signal light image using the obtained difference signal.
前記画像生成部が、対応する各前記照射光の照射強度の2乗の前記照射時間内の積分値の比率により、前記光信号を正規化する請求項2に記載の顕微鏡。The irradiation unit irradiates the irradiation light to generate the signal light by a two-photon excitation method,
The microscope according to claim 2, wherein the image generation unit normalizes the optical signal based on a ratio of integral values within the irradiation time of a square of the irradiation intensity of the corresponding irradiation light.
前記画像生成部が、前記複数の正規化光信号に対する差分を複数回行う請求項1から請求項8のいずれかに記載の顕微鏡。The irradiation unit separately irradiates the sample with three or more irradiation lights having different irradiation intensities,
The microscope according to any one of claims 1 to 8, wherein the image generation unit performs a difference with respect to the plurality of normalized optical signals a plurality of times.
各前記照射光を前記試料に照射することにより発生した前記信号光をそれぞれ検出する信号光検出ステップと、
該信号光検出ステップにより取得された複数の信号光信号を、対応する各前記照射光の照射強度と照射時間とに基づき、飽和または非線形増減が生じていない光強度成分が一致するよう正規化して得られる複数の正規化光信号の差分を演算する演算ステップと、
該演算ステップにより得られた差分信号を用いて信号光画像を生成する画像生成ステップとを含む画像取得方法。An irradiation step in which signal light is generated by irradiation, at least one of which has irradiation intensity that saturates or nonlinearly increases or decreases the signal light, and irradiates two or more irradiation lights having different irradiation intensities on the same part of the sample separately; ,
A signal light detection step for detecting the signal light generated by irradiating the sample with the irradiation light,
A plurality of signal light signals acquired by the signal light detection step are normalized based on the irradiation intensity and irradiation time of each corresponding irradiation light so that the light intensity components without saturation or non-linear increase / decrease coincide with each other. A calculation step for calculating a difference between a plurality of obtained normalized optical signals;
An image generation method including an image generation step of generating a signal light image using the difference signal obtained by the calculation step.
前記画像生成ステップが、対応する各前記照射光の照射強度の2乗の前記照射時間内の積分値の比率により、前記光信号を正規化する請求項12に記載の画像取得方法。The irradiation step irradiates the irradiation light that generates the signal light by a two-photon excitation method,
The image acquisition method according to claim 12, wherein the image generation step normalizes the optical signal by a ratio of an integral value within the irradiation time of a square of the irradiation intensity of each corresponding irradiation light.
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2015/072224 WO2017022096A1 (en) | 2015-08-05 | 2015-08-05 | Microscope and image acquisition method |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2017022096A1 true JPWO2017022096A1 (en) | 2018-06-07 |
JP6420910B2 JP6420910B2 (en) | 2018-11-07 |
Family
ID=57942641
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017532315A Active JP6420910B2 (en) | 2015-08-05 | 2015-08-05 | Microscope and image acquisition method |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6420910B2 (en) |
WO (1) | WO2017022096A1 (en) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6599539B2 (en) | 2016-03-10 | 2019-10-30 | オリンパス株式会社 | Image acquisition apparatus and image acquisition method |
JP2020134655A (en) * | 2019-02-18 | 2020-08-31 | 株式会社ニコン | Observation device, method for observation, microscope device, and endoscope device |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2006061947A1 (en) * | 2004-12-08 | 2006-06-15 | Osaka University | Fluorescence microscope and observation method |
JP2010039323A (en) * | 2008-08-07 | 2010-02-18 | Nikon Corp | Confocal microscope |
JP2012198276A (en) * | 2011-03-18 | 2012-10-18 | Yokogawa Electric Corp | Microscope device, observation method and sample loading mechanism |
-
2015
- 2015-08-05 WO PCT/JP2015/072224 patent/WO2017022096A1/en active Application Filing
- 2015-08-05 JP JP2017532315A patent/JP6420910B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2006061947A1 (en) * | 2004-12-08 | 2006-06-15 | Osaka University | Fluorescence microscope and observation method |
JP2010039323A (en) * | 2008-08-07 | 2010-02-18 | Nikon Corp | Confocal microscope |
JP2012198276A (en) * | 2011-03-18 | 2012-10-18 | Yokogawa Electric Corp | Microscope device, observation method and sample loading mechanism |
Non-Patent Citations (3)
Title |
---|
KATSUMASA FUJITA, ET AL.: "Saturated excitation microscopy with image subtraction", PROCEEDINGS OF FOCUS ON MICROSCOPY 2015, PARALLEL SESSIONS OPTICAL THEORY 3: COMPUTER RECONSTRUCTED, vol. parallel session 3/31 forums, JPN6015044363, 31 March 2015 (2015-03-31), pages 10 - 17, ISSN: 0003883274 * |
RAINER HEINTZMANN, ET AL.: "Saturated patterned excitation microscopy.aconcept for optical resolution improvement", J. OPT. SOC. AM. A, vol. 19, no. 8, JPN6015044368, August 2002 (2002-08-01), US, pages 1599 - 1609, ISSN: 0003883276 * |
YASUO YONEMARU, ET AL.: "Saturated Excitation Microscopy with Optimized ExcitationModulation", CHEMPHYSCHEM, vol. 15, JPN6015044365, 2 February 2014 (2014-02-02), DE, pages 743 - 749, XP072149080, ISSN: 0003883275, DOI: 10.1002/cphc.201300879 * |
Also Published As
Publication number | Publication date |
---|---|
JP6420910B2 (en) | 2018-11-07 |
WO2017022096A1 (en) | 2017-02-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9001321B2 (en) | Microscope and observation method | |
US8933418B2 (en) | Sample observation apparatus | |
EP1835323B1 (en) | Fluorescence microscope and observation method | |
JP5930220B2 (en) | Nonlinear optical microscopy and nonlinear optical microscopy | |
JP6446432B2 (en) | Microspectroscope | |
WO2014136784A1 (en) | Fluorescence detection device and fluorescence detection method | |
JP2016515703A (en) | Apparatus and method for guided Raman detection | |
JP6075963B2 (en) | Fluorescence observation method and fluorescence observation apparatus | |
JP6420910B2 (en) | Microscope and image acquisition method | |
JP7085989B2 (en) | Dynamic lock-in detection bandwidth for SRS imaging | |
US10816474B2 (en) | Optical information detection apparatus and microscope system | |
JP2018531424A6 (en) | Dynamic lock-in detection bandwidth for SRS imaging | |
WO2017094184A1 (en) | Scanning microscope and microscope image acquisition method | |
JP2006313273A (en) | Microscope | |
US10962752B2 (en) | Method and arrangement for identifying optical aberrations | |
JP5953753B2 (en) | Nonlinear microscope and nonlinear observation method | |
JP5137026B2 (en) | Two-photon excitation fluorescence observation method and apparatus | |
JP2010039323A (en) | Confocal microscope | |
JP2010160264A (en) | Laser microscope | |
WO2017158697A1 (en) | Image acquisition method and image acquisition device | |
JP7465512B2 (en) | Optical microscope and imaging method | |
JP6355961B2 (en) | Sample observation equipment | |
WO2022224489A1 (en) | Sample observation device and sample observation method | |
JP6266851B1 (en) | Imaging apparatus and imaging method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180131 |
|
A80 | Written request to apply exceptions to lack of novelty of invention |
Free format text: JAPANESE INTERMEDIATE CODE: A801 Effective date: 20180131 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20180131 |
|
A80 | Written request to apply exceptions to lack of novelty of invention |
Free format text: JAPANESE INTERMEDIATE CODE: A80 Effective date: 20180131 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180925 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181012 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6420910 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313115 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |