CN115308184A - 一种主动结构光照明的超分辨显微成像方法及*** - Google Patents

一种主动结构光照明的超分辨显微成像方法及*** Download PDF

Info

Publication number
CN115308184A
CN115308184A CN202211076269.9A CN202211076269A CN115308184A CN 115308184 A CN115308184 A CN 115308184A CN 202211076269 A CN202211076269 A CN 202211076269A CN 115308184 A CN115308184 A CN 115308184A
Authority
CN
China
Prior art keywords
light
illumination
structured light
spatial
active structured
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211076269.9A
Other languages
English (en)
Inventor
梁永
文刚
陈晓虎
金鑫
王林波
李辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Institute of Biomedical Engineering and Technology of CAS
Original Assignee
Suzhou Institute of Biomedical Engineering and Technology of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Institute of Biomedical Engineering and Technology of CAS filed Critical Suzhou Institute of Biomedical Engineering and Technology of CAS
Priority to CN202211076269.9A priority Critical patent/CN115308184A/zh
Publication of CN115308184A publication Critical patent/CN115308184A/zh
Priority to PCT/CN2023/075140 priority patent/WO2024051079A1/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/62Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
    • G01N21/63Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
    • G01N21/64Fluorescence; Phosphorescence
    • G01N21/6486Measuring fluorescence of biological material, e.g. DNA, RNA, cells

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Molecular Biology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Microscoopes, Condenser (AREA)

Abstract

本发明公开了一种主动结构光照明的超分辨显微成像方法及***。提出时空联合强度调制方法,可对照明样本的激发光进行空间任意强度的调控,且在不改变入射光相干性的前提下,实现高调制度的主动结构光照明超分辨成像。基于上述调制方法可实现将输入的非均匀高斯分布照明调制成均匀的平顶照明,满足基于荧光强度定量分析的应用需求;根据样本空间强度分布特征主动调整照明光强,满足高动态、低光照剂量成像需求;用户自定义照明区域,满足光刺激、荧光漂白恢复应用需求。本发明在不损失SIM时空分辨率的前提下,可有效提高SIM的成像动态范围,减少光照剂量,满足细胞亚结构及其相互作用对百纳米以下超分辨、极低光照剂量、高动态范围的成像需求。

Description

一种主动结构光照明的超分辨显微成像方法及***
技术领域
本发明属于荧光显微成像技术领域,特别是一种主动照明与结构光照明复合的超分辨显微成像***。
背景技术
细胞是一个高度复杂的动态***,其内部通过膜结构的区隔化形成多种功能迥异的数十种细胞器。这些细胞器的相互作用是维持细胞功能、决定细胞命运的关键。对这些细胞器及其相互作用的研究需要进行百纳米以下高分辨率、极低光照剂量、高动态范围、大视场均匀照明的活细胞成像。
在获取大视场均匀照明的研究中,光束整形器直接将高斯传播的光束转换为平顶光束,利用一对非球面透镜组,第一个透镜均匀的重新分配高斯光束,第二个透镜重新准直,从而产生平场照明。但基于折射光束整形器的工作距离有限,对表面加工质量和光学排列有严格的要求。光波导可在非常大的视场下提供均匀的照明,但由于它们工作在全内反射模式下,照明限制在盖玻片附近,无法实现切换照明角度实现不同深度照明。且固定的照明尺寸,不能和相机的成像视场进行匹配照明,全玻片照明对细胞样本造成不必要的光损伤。此外,经典方法包括使用一对微透镜阵列或者多模光纤,为了减少激光散斑,在***中加入了散斑减速器或者振动光纤,但降低了光束的空间相干性,不适用于全内反射照明。ASTER本质上是一种混合扫描宽场照明装置,其按照特定的模式扫描高斯光束,以时间平均的方式提供平顶照明,从而可以在比较宽的视场范围内扫描出均匀照明场。然而,上述平场照明方法只能应用在基于单分子定位的超分辨显微镜中,比如PALM、STORM,其向基于多束光干涉产生余弦分布条纹的结构光照明显微镜(SIM)转化中仍受到限制,原因在于在对入射的非均匀高斯光斑进行调制时,要保障多光束之间频率相同、相位差恒定、偏振方向一直,以致在样品面干涉形成高调制度的照明条纹。
在拓展显微成像***动态范围及减少光照剂量的研究中,Vinergoni等将摄影学中广泛应用的多曝光融合技术和基于点扫描的双光子成像技术相结合,并将其应用于内场景大动态范围的神经细胞成像中。但是连续多次曝光采集不仅增加了光照剂量,且降低了成像速度。为了克服多曝光的缺陷,发展出多探测同时成像技术,通过对同一场景进行多级分光成像,同时采集不同曝光量的图像。然而由于采用多个成像光路同时探测,需要对不同的探测器进行校准,光学***复杂且成本高。由此发展出主动照明技术,在成像***中加入声光调制器,空间上单像素地对照明光场进行调控,这不仅提高了动态范围,而且减少了光照剂量。Hoebe等为了解决共聚焦显微镜有限的动态范围、光漂白及光毒性问题,研制出照明光剂量空间上可调控的显微成像技术,且在Nikon C1共聚焦显微镜上得到应用。实验验证,此成像技术不仅可以将动态范围提高2倍,而且可将光照剂量降低5倍,有效延长活细胞的存活时间。然而,基于共聚焦、双光子的低光照剂量、高动态成像方法,其分辨率受到光学衍射极限的限制。在使用大数值孔径物镜的情况下,横向极限分辨率约为200nm,轴向分辨率为500nm。此外,基于点扫描成像模式,光漂白和光毒性严重且成像速度慢,无法满足活细胞动态成像需求。
相比之下,SIM具有成像速度快、光损伤小、对荧光探针无特殊要求等特点,且百纳米的分辨率正好满足活细胞内重要细胞器的观测要求,已成为活细胞动态成像的首要选择。然而从照明方式上看,SIM本质上是一种宽场荧光显微成像技术,其整体照明强度在样品上呈现高斯形状分布。这种非均匀的照明方式,首先降低了可利用的视场尺寸,为了获得相对均匀的荧光图像,通常截取高斯光斑中心区域进行成像,从而损失了边缘视场。其次,中心亮边缘暗的高斯照明造成成像视场内光漂白特性不一致,中心比边缘更容易被漂白,限制了其在基于荧光强度定量分析中的应用。此外,对于高动态范围样本,这种不考虑样本标记密度的无差别照明方式,会造成弱信号欠曝光、强信号过曝光、背景及离焦信号无效曝光,限制了SIM成像***的动态范围及造成不必要的光损伤。因此,发明一种基于空间光调制器时空联合调制的主动结构光照明超分辨成像方法(Active-SIM),比如将高斯光斑调制成平场照明、根据样本标记密度自适应的调整照明强度、对任意感兴趣区域的照明等,这对于拓展SIM成像技术在活细胞动态长时程成像的应用中至关重要。
发明内容
本发明的目的在于对活细胞中亚细胞器及其相互作用的研究中需要进行百纳米以下高分辨率、极低光照剂量、高动态范围、大视场均匀照明的荧光成像需求,提出一种基于空间光调制器的时空联合强度调制方法,建立基于主动结构光照明的超分辨显微成像***。
实现本发明目的的技术解决方案为:一种主动结构光照明的超分辨显微成像方法,所述方法包括以下步骤:
步骤1,通过相机采集样品经激光激发的荧光图像;
步骤2,基于步骤1的图像构建所需的主动结构光照明光场;
步骤3,对步骤2的主动结构光照明光场进行转换并加载到空间光调制器中,形成时空联合强度调制的主动结构光照明光场;
步骤4,从步骤3中加载在空间光调制器的全息条纹位面图取出相应的位面图,并开始显示,激光器同步出光照明样本,相机同步曝光采集原始图像数据;
步骤5,判断全部全息条纹位面图是否显示完成,若是,空间光调制器停止位面显示,且相机停止图像采集,否则按预设的顺序切换到不同空间方向角和位相的位面图,返回步骤4,继续执行同步显示及曝光。
进一步地,步骤2中所述主动结构光照明光场包括:
第一照明光场:将输入的非均匀高斯分布光场调制成均匀的平顶照明光场,满足基于荧光强度定量分析及大视场拼接成像的需求;
或,第二照明光场:根据样本强度分布特征主动调整照明光强,包括强信号区域降低光照剂量、弱信号区域提高光照剂量、无信号或背景区域无光照,满足所需高动态范围、低光照剂量的成像需求;
或,第三照明光场:自定义指定位置和强度的照明,满足用户自定义感兴趣照明区域的成像需求。
进一步地,步骤3中调制后的主动结构照明光场的光强空间分布表示为Ia(x,y):
Figure BDA0003831496340000031
Figure BDA0003831496340000032
式中,Ig(x,y,t)表示在一个相机曝光周期T内,激发光在样品面上照明光强的时空体积,在只允许一个级次光束通过时的SIM成像过程中,其照明强度在空间上呈现非均匀的高斯分布;Mi(x,y,t)表示加载在空间光调制器中的第i个强度调制函数或二值位面,N表示加载二值位面的个数,空间光调制器上每个像素的光强调制精度可表示为1/2N;ti表示每个二值位面对应的时间权重函数,所有时间权重求和为相机的一个曝光周期
Figure BDA0003831496340000033
点(x,y)代表空间光调制器中任意空间坐标;m表示结构光的调制度,kx、ky、φ表示空间频率和初始相位。
实现上述方法的主动结构光照明的超分辨显微成像***,所述***包括光源模块、主动结构光照明光场加载模块、主动结构光照明光场生成模块以及荧光探测模块;
所述光源模块,用于实现至少四个激光波长的控制,且可实现单波长独立照明,多个波长多色分时及同时照明;
所述荧光探测模块,用于采集样本经激光激发的荧光图像;
所述主动结构光照明光场生成模块,用于基于所述荧光图像生成主动结构光照明光场;
所述主动结构光照明光场加载模块,用于将生成的主动结构光照明光场加载到SIM成像***中,完成主动结构光照明超分辨成像。
进一步地,所述光源模块包括激光器、单模保偏光纤;
所述激光器,用于提供多个波长的激光,且可实现单波长及多波长同步出光控制;
所述单模保偏光纤,用于传输激光器耦合好的多路激光至主动结构光照明光场加载模块。
进一步地,所述主动结构光照明光场加载模块包括消色差准直扩束物镜、偏振分光棱镜、空间光调制器、傅里叶透镜、二分之一玻片、空间滤波器、组合二分之一玻片、准直透镜、照明筒镜;傅里叶透镜和准直透镜组成4f***,空间光调制器位于4f***的前焦面,空间滤波器位于4f***的后焦面处,用于空间滤波,仅允许经过空间光调制器衍射出来的特定角度的光束通过,挡住其他衍射级次;二分之一玻片和组合二分之一玻片构成偏振调控组件,用于对不同方向角的入射偏振光进行调控;
所述光源模块出射的激光传输给消色差准直扩束物镜,经准直扩束后入射至偏振分光棱镜,透射的垂直偏振光入射至空间光调制器,经空间光调制器调制后主要衍射出0级、±1级三个出射光束,三个出射光束经偏振分光棱镜反射后依次经傅里叶透镜、二分之一玻片聚焦在空间滤波器上,滤波之后选通±1级出射光束依次经组合二分之一玻片、准直透镜、照明筒镜后进入荧光探测模块。
进一步地,所述荧光探测模块包括三维位移台、显微物镜、二向色镜、成像透镜和相机;
所述主动结构光照明光场加载模块输出的激发光,经二向色镜反射后通过显微物镜照射放置于三维位移台上的样本,激发样本荧光信号后由显微物镜收集,之后经二向色镜透射后再经成像透镜聚焦在相机的探测面上。
进一步地,所述主动结构光照明光场生成模块包括图像获取单元、图像处理单元和光场生成单元;
所述图像获取单元,用于获取相机探测到的样品面的照明光场分布特征;
所述图像处理单元,用于将图像获取单元得到的照明光场转换为用户所需的主动结构光照明光场;
所述光场生成单元,用于将主动结构光照明光场转换为空间光调制器可加载的基于时空联合强度调制的一组携带不同时间权重的二值位面图,并加载至主动结构光照明光场加载模块中的空间光调制器中。
本发明与现有技术相比,其显著优点为:
1)在不破坏SIM成像***中干涉光束的波前、偏振态及相干性,保障样品面上高调制度干涉条纹的前提下,实现主动结构光照明超分辨成像。
2)在不降低传统SIM成像***时空分辨率的前提下,有如下优势:包括可将输入的非均匀高斯分布照明光场调制成均匀分布的平顶照明光场,满足基于荧光强度定量分析成像的应用需求;根据样本强度空间分布特征主动调整照明光强,满足高动态范围、低光照剂量成像的应用需求;自定义指定位置和强度的照明,满足用户自定义感兴趣照明区域的成像需求。通过提供这三种主动结构光照明光场,为活细胞高分辨率、极低光照剂量、高动态范围、大视场均匀照明成像提供先进的新型成像技术手段。
3)本发明在原有的SIM成像***中,无需添加额外光学硬件,只需要基于本发明所提出的基于时空联合强度调制方法构建所需光场,在获得丰富成像功能的同时无经济成本增加,简化***的复杂程度。
4)本发明在不损失SIM时空分辨率的前提下,可将传统SIM的成像动态范围提高40dB、光照剂量减少10倍。
下面结合附图对本发明作进一步详细描述。
附图说明
图1为主动结构光照明光场调制方法流程图。
图2为主动结构光照明超分辨显微成像***示意图。
图3为主动结构光照明光场调制方法原理图,其中图3(a)为基于铁电液晶空间光调制器像素级任意光强调制示意图,图3(b)为时空联合强度调制原理示意图。
图中附图标记如下:1四路合束激光器;2单模保偏光纤;3消色差准直扩束物镜;4偏振分光棱镜;5空间光调制器;6傅里叶透镜;7二分之一玻片;8空间滤波器;9组合二分之一玻片;10准直透镜;11照明筒镜;12三维位移台;13物镜;14二向色镜;15成像筒镜;16相机;17图像获取单元;18图像处理单元;19光场生成单元。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
需要说明,若本发明实施例中有涉及“第一”、“第二”等的描述,则该“第一”、“第二”等的描述仅用于描述目的,而不能理解为指示或暗示其相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。另外,各个实施例之间的技术方案可以相互结合,但是必须是以本领域普通技术人员能够实现为基础,当技术方案的结合出现相互矛盾或无法实现时应当认为这种技术方案的结合不存在,也不在本发明要求的保护范围之内。
在一个实施例中,结合图1,提供了一种主动结构光照明的超分辨显微成像方法,所述方法包括以下步骤:
步骤1,通过相机采集样品经激光激发的荧光图像;
步骤2,基于步骤1的图像构建所需的主动结构光照明光场;
步骤3,对步骤2的主动结构光照明光场进行转换并加载到空间光调制器中,形成时空联合强度调制的主动结构光照明光场;
步骤4,从步骤3中加载在空间光调制器的全息条纹位面图取出相应的位面图,并开始显示,激光器同步出光照明样本,相机同步曝光采集原始图像数据;
步骤5,判断全部全息条纹位面图是否显示完成,若是,空间光调制器停止位面显示,且相机停止图像采集,否则按预设的顺序切换到不同空间方向角和位相的位面图,返回步骤4,继续执行同步显示及曝光。
进一步地,在其中一个实施例中,步骤2中所述主动结构光照明光场包括:
第一照明光场:将输入的非均匀高斯分布光场调制成均匀的平顶照明光场,满足基于荧光强度定量分析及大视场拼接成像的需求;
或,第二照明光场:根据样本强度分布特征主动调整照明光强,包括强信号区域降低光照剂量、弱信号区域提高光照剂量、无信号或背景区域无光照,满足所需高动态范围、低光照剂量的成像需求;
或,第三照明光场:自定义指定位置和强度的照明,满足用户自定义感兴趣照明区域的成像需求。
进一步地,在其中一个实施例中,为了实现时空联合强度调制的主动照明结构光场,本发明利用基于铁电液晶的空间光调制中每个独立的像素在“开”和“关”可进行快速的切换特性,实现照明光强在一个相机积分周期内的单像素级别的调控,如图3a所示。在SIM成像***中,样品面上的照明光强整体上呈现高斯分布,可表示为:
Figure BDA0003831496340000071
由于在铁电液晶空间光调制器中每个像素上入射光的偏振态可单独调控,结合偏振分光棱镜可实现光强的“开关”操作,这样在相机的曝光周期内调整每个时间点上的照明开关,可实现任意光强的调控。因此,主动照明光场可以表示为:
Figure BDA0003831496340000072
为了转换为数字调制,引入数字脉宽调制方法。假设在空间光调制器中加载N个二进制位面Mi(x,y,t),每个位面分配不同的照明时间权重ti=(1/2i)·T,如图3b所示。通过在一个相机的曝光周期T内,连续加载N张不同时间权重的二进制位面图,可实现对入射光场单像素任意光强的调控,表示如下:
Figure BDA0003831496340000073
因此,步骤3中调制后的主动结构光场的照明光强分布表示为Ia(x,y):
Figure BDA0003831496340000074
Figure BDA0003831496340000075
式中,I0表示峰值强度,σ是高斯光束的束腰半径,Ig(x,y,t)表示在一个相机曝光周期T内,激发光在样品面上照明光强的时空体积,在只允许一个级次光束通过时的SIM成像过程中,其照明强度在空间上呈现非均匀的高斯分布;Mi(x,y,t)表示加载在空间光调制器中的第i个强度调制函数或二值位面,N表示加载二值位面的个数,空间光调制器上每个像素的光强调制精度可表示为1/2N;ti表示每个二值位面对应的时间权重函数,所有时间权重求和为相机的一个曝光周期
Figure BDA0003831496340000076
点(x,y)代表空间光调制器中任意空间坐标;m表示结构光的调制度,kx、ky、φ表示空间频率和初始相位。
在一个实施例中,实现上述方法的主动结构光照明的超分辨显微成像***如图2所示,所述***包括光源模块、主动结构光照明光场加载模块、主动结构光照明光场生成模块以及荧光探测模块;
所述光源模块,用于实现至少四个激光波长的控制,且可实现单波长独立照明,多个波长多色分时及同时照明;
所述荧光探测模块,用于采集样本经激光激发的荧光图像;
所述主动结构光照明光场生成模块,用于基于所述荧光图像生成主动结构光照明光场;
所述主动结构光照明光场加载模块,用于将生成的主动结构光照明光场加载到SIM成像***中,完成主动结构光照明超分辨成像。
进一步地,在其中一个实施例中,所述光源模块包括激光器1、单模保偏光纤2;
所述激光器1,用于提供多个波长的激光,且可实现单波长及多波长同步出光控制;
所述单模保偏光纤2,用于传输激光器1耦合好的多路激光至主动结构光照明光场加载模块。
这里优选地,所述激光器1提供四个波长的激光,四个波长分别405nm、488nm、561nm、637nm。
进一步地,在其中一个实施例中,所述主动结构光照明光场加载模块包括消色差准直扩束物镜3、偏振分光棱镜4、空间光调制器5、傅里叶透镜6、二分之一玻片7、空间滤波器8、组合二分之一玻片9、准直透镜10、照明筒镜11;傅里叶透镜6和准直透镜10组成4f***,空间光调制器5位于4f***的前焦面,空间滤波器8位于4f***的后焦面处,用于进行空间滤波,仅允许经过空间光调制器5衍射出来的特定角度的光束通过,挡住其他衍射级次;二分之一玻片7和组合二分之一玻片9构成偏振调控组件,用于对不同方向角的入射偏振光进行调控;
所述光源模块出射的激光传输给消色差准直扩束物镜3,经准直扩束后入射至偏振分光棱镜4,透射的垂直偏振光入射至空间光调制器5,经空间光调制器调制后衍射出0级、±1级三个出射光束,三个出射光束经偏振分光棱镜4反射后依次经傅里叶透镜6、二分之一玻片7聚焦在空间滤波器8上,滤波之后选通±1级出射光束依次经组合二分之一玻片9、准直透镜10、照明筒镜11后进入荧光探测模块。
进一步地,在其中一个实施例中,所述荧光探测模块包括三维位移台12、显微物镜13、二向色镜14、成像透镜15和相机16;
所述主动结构光照明光场加载模块输出的主动照明结构光场,经二向色镜14反射后通过显微物镜13照射放置于三维位移台12上的样本照明筒镜11和显微物镜13构成另外一对4f***,用于将结构光照明光场共轭到样品面处,激发样本荧光信号后由显微物镜13收集,之后经二向色镜14透射后再经成像透镜15聚焦至相机16的探测面上。
进一步地,在其中一个实施例中,所述主动结构光照明光场生成模块包括图像获取单元17、图像处理单元18和光场生成单元19;
所述图像获取单元17,用于获取相机16探测到的样品面的照明光场分布特征;
所述图像处理单元18,用于将图像获取单元17得到的照明光场转换为用户所需的主动结构光照明光场;
所述光场生成单元19,用于将主动结构光照明光场转换为空间光调制器可加载的基于时空联合强度调制的一组携带不同时间权重的二值位面图,并加载至主动结构光照明光场加载模块中的空间光调制器中。
上述***在工作前,需要对空间光调制器和相机进行空间坐标标定,用于对输入、输出光场和调制光场进行空间坐标匹配,生成像素级匹配精度的主动照明光场。具体过程如下:1)在空间光调制器中加载等间隔的分布组成的“十字”交叉点;2)荧光探测模块采集均匀分布的荧光染料信号图像;3)基于空间光调制器加载的图像和相机采集的图像,计算出标定矩阵(包括缩放比、旋转、平移)。
***的工作流程如下:
通过激光器模块1选通405nm或488nm或561nm或673nm四路激光器的其中一路激光,进入到保偏单模光纤2中。
进一步地,激发光经过单模光束将光束传输给光场加载模块的消色差准直物镜3中。光束准直扩束后的光束照射偏振分光棱镜4,透射的垂直偏振光(s偏振)照射到空间光调制器5上,光束经过空间光调制器调制后,主要衍射出0级、±1三个出射光束,反射的出射光束再次经过偏振分光棱镜4,只有经过调制后的水平偏振光(p偏振)可以进入成像***中;如光强调制原理图3a所示,在空间光调制器中加载时间权重的位面,通过调制入射偏振光的“像素开”、“像素关”,可实现单像素的光强控制,比如将非均匀的高斯分布激发光调制为均匀分布的平顶光束(图3b)。经过单像素强度调制的0级、±1三个衍射光束入射到傅里叶透镜6上,经过用于偏振补偿的二分之一玻片7,调制后的偏振光束最后聚焦在空间滤波器8的位置,经过空间滤波后,0级光束被阻挡,且只有±1级光束通过;±1级光束通过组合二分只玻片9,其用于旋转不同方向角的入射光的偏振方向,从而在样品面获得最大调制度的干涉条纹;±1级光束经过准直透镜10后,在其后焦面干涉;进一步地,光束经过照明筒镜后进入荧光探测模块。
进一步地,照明光束经过二向色镜14反射后进入显微物镜13,最后激发夹持在位移台12处的荧光样本。经过主动照明的结构光照明的荧光样本发射出波长比激发光波长更长的荧光,经过高数值孔径物镜13收集,进入到荧光探测模块,收集的荧光信号经过二向色镜14透射后进入成像透镜15,最后被相机16探测。
进一步地,主动结构光照明光场生成模块的图像获取单元收集到相机16采集的图像,送入图像处理单元18,图像处理单元对收集荧光图像和用户预设的光场进行计算,进而生成用户预设光场所需要的调制光场,进一步送到光场生成单元19,生成空间光调制器5可加载的携带不同时间权重的二值位面全息条纹图。
进一步地,光场生成模块将生成的二值位面图重建加载到光场加载模块中的空间光调制5中,经过器件6至11、14、13、12照射样本,发射的荧光被荧光探测模块(13、14-15、16)接收。相机收集到的图像被光场生成模块接收,生成主动结构光照明光场,再次送入到光场加载模块的空间光调制器内,直到生成用户预设的照明光场。
综上,本发明通过发明一种时空联合强度调制方法,可对照明样本面的激发光进行指定空间任意强度的调控,且在不改变入射光相干性的前提下,实现高调制度的主动结构光照明的超分辨成像。基于本发明提出的时空联合调制方法,可将输入非均匀的高斯分布光场调制成均匀照明的平顶光场,满足基于荧光强度定量分析的应用需求;根据样本强度空间分布特征,主动调整照明光强,即强信号区域降低光照剂量、弱信号区域提高光照剂量、无信号或背景区域无光照,满足高动态范围、低光照剂量的应用需求;用户自定义照明区域,满足光刺激、荧光漂白恢复等应用需求。本发明在不损失SIM空间分辨率(90nm)和时间分辨率(100fps@512*512)的前提下,预期可将传统结构光照明显微镜的动态范围提高40dB,光照剂量减少10倍,为活细胞动态长时间观察提供先进的新型成像技术手段。
以上显示和描述了本发明的基本原理、主要特征及优点。本行业的技术人员应该了解,本发明不受上述实施例的限制,上述实施例和说明书中描述的只是说明本发明的原理,在不脱离本发明精神和范围的前提下,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (9)

1.一种主动结构光照明的超分辨显微成像方法,其特征在于,所述方法包括以下步骤:
步骤1,通过相机采集样品经激光激发的荧光图像;
步骤2,基于步骤1的图像构建所需的主动结构光照明光场;
步骤3,对步骤2的主动结构光照明光场进行转换并加载到空间光调制器中,形成时空联合强度调制的主动结构光照明光场;
步骤4,从步骤3中加载在空间光调制器的全息条纹位面图取出相应的位面图,并开始显示,激光器同步出光照明样本,相机同步曝光采集原始图像数据;
步骤5,判断全部全息条纹位面图是否显示完成,若是,空间光调制器停止位面显示,且相机停止图像采集,否则按预设的顺序切换到不同空间方向角和位相的位面图,返回步骤4,继续执行同步显示及曝光。
2.根据权利要求1所述的主动结构光照明的超分辨显微成像方法,其特征在于,步骤2中所述主动结构光照明光场包括:
第一照明光场:将输入的非均匀高斯分布光场调制成均匀的平顶照明光场,满足基于荧光强度定量分析及大视场拼接成像的需求;
或,第二照明光场:根据样本强度分布特征主动调整照明光强,包括强信号区域降低光照剂量、弱信号区域提高光照剂量、无信号或背景区域无光照,满足所需高动态范围、低光照剂量的成像需求;
或,第三照明光场:自定义指定位置和强度的照明,满足用户自定义感兴趣照明区域的成像需求。
3.根据权利要求1所述的主动结构光照明的超分辨显微成像方法,其特征在于,步骤3中调制后的主动结构照明光场的光强空间分布表示为Ia(x,y):
Figure FDA0003831496330000011
Figure FDA0003831496330000012
式中,Ig(x,y,t)表示在一个相机曝光周期T内,激发光在样品面上照明光强的时空体积,在只允许一个级次光束通过时的SIM成像过程中,其照明强度在空间上呈现非均匀的高斯分布;Mi(x,y,t)表示加载在空间光调制器中的第i个强度调制函数或二值位面,N表示加载二值位面的个数,空间光调制器上每个像素的光强调制精度表示为1/2N;ti表示每个二值位面对应的时间权重函数,所有时间权重求和为相机的一个曝光周期
Figure FDA0003831496330000021
点(x,y)代表空间光调制器中任意空间坐标;m表示结构光的调制度,kx、ky、φ表示空间频率和初始相位。
4.实现权利要求1至3任意一项所述方法的主动结构光照明的超分辨显微成像***,其特征在于,所述***包括光源模块、主动结构光照明光场加载模块、主动结构光照明光场生成模块以及荧光探测模块;
所述光源模块,用于实现至少四个激光波长的控制,且可实现单波长独立照明,多个波长多色分时及同时照明;
所述荧光探测模块,用于采集样本经激光激发的荧光图像;
所述主动结构光照明光场生成模块,用于基于所述荧光图像生成主动结构光照明光场;
所述主动结构光照明光场加载模块,用于将生成的主动结构光照明光场加载到SIM成像***中,完成主动结构光照明超分辨成像。
5.根据权利要求4所述的主动结构光照明的超分辨显微成像***,其特征在于,所述光源模块包括激光器(1)、单模保偏光纤(2);
所述激光器(1),用于提供多个波长的激光,且可实现单波长及多波长同步出光控制;
所述单模保偏光纤(2),用于传输激光器(1)耦合好的多路激光至主动结构光照明光场加载模块。
6.根据权利要求5所述的主动结构光照明的超分辨显微成像***,其特征在于,所述激光器(1)提供四个波长的激光,四个波长分别405nm、488nm、561nm、637nm。
7.根据权利要求5所述的主动结构光照明的超分辨显微成像***,其特征在于,所述主动结构光照明光场加载模块包括消色差准直扩束物镜(3)、偏振分光棱镜(4)、空间光调制器(5)、傅里叶透镜(6)、二分之一玻片(7)、空间滤波器(8)、组合二分之一玻片(9)、准直透镜(10)、照明筒镜(11);傅里叶透镜(6)和准直透镜(10)组成4f***,空间光调制器(5)位于4f***的前焦面,空间滤波器(8)位于4f***的后焦面处,用于空间滤波,仅允许经过空间光调制器(5)衍射出来的特定角度的光束通过,挡住其他衍射级次;二分之一玻片(7)和组合二分之一玻片(9)构成偏振调控组件,用于对不同方向角的入射偏振光进行调控;
所述光源模块出射的激光传输给消色差准直扩束物镜(3),经准直扩束后入射至偏振分光棱镜(4),透射的垂直偏振光入射至空间光调制器(5),经空间光调制器调制后衍射出0级、±1级三个出射光束,三个出射光束经偏振分光棱镜(4)反射后依次经傅里叶透镜(6)、二分之一玻片(7)聚焦在空间滤波器(8)上,滤波之后选通±1级出射光束依次经组合二分之一玻片(9)、准直透镜(10)、照明筒镜(11)后进入荧光探测模块。
8.根据权利要求7所述的主动结构光照明的超分辨显微成像***,其特征在于,所述荧光探测模块包括三维位移台(12)、显微物镜(13)、二向色镜(14)、成像透镜(15)和相机(16);
所述主动结构光照明光场加载模块输出的激发光,经二向色镜(14)反射后通过显微物镜(13)照射放置于三维位移台(12)上的样本,激发样本荧光信号后由显微物镜(13)收集,之后经二向色镜(14)透射后再经成像透镜(15)聚焦在相机(16)的探测面上。
9.根据权利要求8所述的主动结构光照明的超分辨显微成像***,其特征在于,所述主动结构光照明光场生成模块包括图像获取单元(17)、图像处理单元(18)和光场生成单元(19);
所述图像获取单元(17),用于获取相机(16)探测到的样品面的照明光场分布特征;
所述图像处理单元(18),用于将图像获取单元(17)得到的照明光场转换为用户所需的主动结构光照明光场;
所述光场生成单元(19),用于将主动结构光照明光场转换为空间光调制器可加载的基于时空联合强度调制的一组携带不同时间权重的二值位面图,并加载至主动结构光照明光场加载模块中的空间光调制器中。
CN202211076269.9A 2022-09-05 2022-09-05 一种主动结构光照明的超分辨显微成像方法及*** Pending CN115308184A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202211076269.9A CN115308184A (zh) 2022-09-05 2022-09-05 一种主动结构光照明的超分辨显微成像方法及***
PCT/CN2023/075140 WO2024051079A1 (zh) 2022-09-05 2023-02-09 一种主动结构光照明的超分辨显微成像方法及***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211076269.9A CN115308184A (zh) 2022-09-05 2022-09-05 一种主动结构光照明的超分辨显微成像方法及***

Publications (1)

Publication Number Publication Date
CN115308184A true CN115308184A (zh) 2022-11-08

Family

ID=83867000

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211076269.9A Pending CN115308184A (zh) 2022-09-05 2022-09-05 一种主动结构光照明的超分辨显微成像方法及***

Country Status (2)

Country Link
CN (1) CN115308184A (zh)
WO (1) WO2024051079A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116068745A (zh) * 2023-02-24 2023-05-05 广东粤港澳大湾区协同创新研究院 一种角度连续可调超分辨显微镜照明装置及相应成像方法
CN116740705A (zh) * 2023-04-06 2023-09-12 深圳大学 一种基于随机森林分类算法的超亮光斑定位识别方法
CN117631249A (zh) * 2024-01-18 2024-03-01 清华大学 线扫共聚焦扫描光场显微成像装置及方法
WO2024051079A1 (zh) * 2022-09-05 2024-03-14 中国科学院苏州生物医学工程技术研究所 一种主动结构光照明的超分辨显微成像方法及***

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102735617B (zh) * 2012-06-29 2014-06-04 浙江大学 一种超分辨显微方法和装置
CN104515759B (zh) * 2014-12-16 2017-05-31 中国科学院苏州生物医学工程技术研究所 非线性结构光照明显微成像方法及***
CN107389631B (zh) * 2017-04-28 2020-07-07 中国科学院生物物理研究所 高速多色多模态结构光照明超分辨显微成像***及其方法
CN110954521B (zh) * 2019-12-18 2022-07-05 深圳大学 一种宽场超分辨显微成像方法及其***
CN111610621B (zh) * 2020-01-19 2022-04-08 北京大学 一种双模态显微成像***和方法
CN111458317B (zh) * 2020-05-12 2021-04-30 北京大学 一种直接结构光照明超分辨显微重建方法
CN111897118B (zh) * 2020-06-28 2021-06-11 北京英朗超显医疗科技有限公司 基于偏振结构光调制的多维层析荧光显微成像***及方法
CN116490812A (zh) * 2020-12-11 2023-07-25 深圳华大智造科技股份有限公司 超分辨检测***及超分辨检测方法
CN112798564B (zh) * 2020-12-22 2022-10-11 中国科学院苏州生物医学工程技术研究所 随机光学重建与结构光照明复合超分辨成像***
CN113670878B (zh) * 2021-08-25 2022-09-27 西安交通大学 基于空频域混合式重建的超分辨结构光照明显微成像方法
CN115308184A (zh) * 2022-09-05 2022-11-08 中国科学院苏州生物医学工程技术研究所 一种主动结构光照明的超分辨显微成像方法及***

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024051079A1 (zh) * 2022-09-05 2024-03-14 中国科学院苏州生物医学工程技术研究所 一种主动结构光照明的超分辨显微成像方法及***
CN116068745A (zh) * 2023-02-24 2023-05-05 广东粤港澳大湾区协同创新研究院 一种角度连续可调超分辨显微镜照明装置及相应成像方法
CN116740705A (zh) * 2023-04-06 2023-09-12 深圳大学 一种基于随机森林分类算法的超亮光斑定位识别方法
CN117631249A (zh) * 2024-01-18 2024-03-01 清华大学 线扫共聚焦扫描光场显微成像装置及方法
CN117631249B (zh) * 2024-01-18 2024-05-24 清华大学 线扫共聚焦扫描光场显微成像装置及方法

Also Published As

Publication number Publication date
WO2024051079A1 (zh) 2024-03-14

Similar Documents

Publication Publication Date Title
US20210278649A1 (en) Single plane illumination microscope
CN115308184A (zh) 一种主动结构光照明的超分辨显微成像方法及***
US7274446B2 (en) Method and arrangement for the deep resolved optical recording of a sample
CN107941763B (zh) 一种共轴三维受激辐射损耗超分辨显微成像方法和装置
CN107490562B (zh) 利用波面整形器的超高速三维折射率影像拍摄和荧光结构光照明显微镜***及其使用方法
US8705172B2 (en) Microscopy method and microscope with enhanced resolution
US10310246B2 (en) Converter, illuminator, and light sheet fluorescence microscope
EP3102982B1 (en) Digital holographic device
CN112798564B (zh) 随机光学重建与结构光照明复合超分辨成像***
CN106980174A (zh) 一种综合性荧光超分辨显微成像装置
CN110954523B (zh) 一种双光子扫描结构光显微成像方法及装置
CN111024659B (zh) 一种基于并行探测的多图像重建显微成像方法和装置
Pozzi et al. High-throughput spatial light modulation two-photon microscopy for fast functional imaging
US11947098B2 (en) Multi-focal light-sheet structured illumination fluorescence microscopy system
WO2023221400A1 (zh) 超分辨单物镜光片显微成像光学***及其成像***
US20050006597A1 (en) Arrangement for the optical detection of light radiation which is excited and/or backscattered in a specimen with a double-objective arrangement
US8780443B2 (en) Method and arrangement for controlled actuation of a microscope, in particular of a laser scanning microscope
CN109870441B (zh) 基于移频的三维超分辨光切片荧光显微成像方法和装置
RU2579640C1 (ru) Конфокальный спектроанализатор изображений
CN108593620B (zh) 一种应用于4pi显微架构的多色超分辨成像***
CN214374304U (zh) 一种复合超分辨成像装置
CN112326609B (zh) 基于偏振复用的实时三维荧光差分超分辨成像方法和装置
CN107941777A (zh) 一种抗漂白单分子定位三维超分辨显微***
RU2723890C1 (ru) Многоканальный конфокальный спектроанализатор изображений
Ďuriš et al. Single-shot super-resolution quantitative phase imaging allowed by coherence gate shaping

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination