首页> 中国专利> 一种基于散斑照明的超分辨显微方法和装置

一种基于散斑照明的超分辨显微方法和装置

摘要

本发明公开一种基于散斑照明的超分辨显微方法,包括:对激光光束进行调制,聚焦到待测样品上形成散斑照明图样,并收集所述待测样品发出的荧光,得到荧光强度图像;改变所述的散斑照明图样,得到不同散斑照明图样下的多幅荧光强度图像;将所有的荧光强度图像相加得到的图像作为宽场图,并对所述的宽场图进行反卷积得到样品的初始估计;根据得到的初始估计,使用梯度下降算法计算初始的照明图像;利用FP算法,在获得的物体图像和初始的照明图像的基础上算出更高分辨率的样品图像;以算出的样品图像作为样品的估计值,重复上述的迭代,直至迭代完成,即可得到超分辨图像。本发明还公开一种基于散斑照明的超分辨显微装置。

著录项

  • 公开/公告号CN107202780A

    专利类型发明专利

  • 公开/公告日2017-09-26

    原文格式PDF

  • 申请/专利权人 浙江大学;

    申请/专利号CN201710300108.6

  • 申请日2017-04-28

  • 分类号G01N21/64(20060101);

  • 代理机构33224 杭州天勤知识产权代理有限公司;

  • 代理人胡红娟

  • 地址 310013 浙江省杭州市西湖区余杭塘路866号

  • 入库时间 2023-06-19 03:24:39

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2020-01-14

    授权

    授权

  • 2017-10-27

    实质审查的生效 IPC(主分类):G01N21/64 申请日:20170428

    实质审查的生效

  • 2017-09-26

    公开

    公开

说明书

技术领域

本发明属于光学超分辨显微领域,特别涉及一种基于散斑照明的超分辨显微方法和装置。

背景技术

随着科技的发展,人们对微观世界的需求日益增加,尤其是生命科学和材料科学。为了满足对纳米尺度物质信息的探索,许多学者都在致力于提高分辨率的研究。目前已经实现的超分辨技术有:结构光照明显微技术(structured illumination microscopy,SIM),受激发射减损显微技术(stimulated emission depletion,STED),随机光学重构显微技术(stochastic optical reconstruction microscopy,STORM),光激活定位显微技术(photoactivated localization microscopy,PALM)等。

上述超分辨成像技术中,STORM和PALM的成像速度有限,极大地限制了分子动力学、细胞内环境等基础生物学研究工作的开展;STED需要很强的光源,容易漂白荧光分子;而SIM适用于各种荧光标记的样品,且有较好的时间分辨率,无需很强的光源。这些特点使SIM在实时观测样品的生命活动上具有非常大的优势。

根据照明图样的不同,SIM可以分为线性-SIM、非线性-SIM、盲-SIM。其中,盲-SIM由于其对像差引起的照明变形的不敏感性,所以对实验器材的像差校正要求低,而且不需要对照明图案的形状进行精准的控制,大大简化了实验设置。

而原始的盲-SIM的算法在实验过程中往往不能够使得分辨率提高到我们满意的程度,所以之后又有基于盲-SIM的优化算法。目前,基于盲-SIM的优化算法有PE-SIMS-PR,但是这种基于协方差的盲-SIM算法在复原一个灰度图像时,最终结果会使得强度较弱的荧光信号被丢失,从而损伤最终的图像的信息。

同样的,散班照明的FP(pattern-illuminated Fourier ptychography,piFP)算法也不需要对于照明图案进行精确的控制,但是这种方法需要知道照明图案移动的精确位置,也给这个算法的实现带来了一定的困难。

发明内容

本发明提供了一种基于散斑照明的超分辨显微方法和装置。该种方法结合了散斑照明、图样估计和FP算法,来复原一个超分辨图像。在随机散斑照明图样下,获取物体图像,并且通过一个新算法估计照明图样。基于获得的物体图像和估计出的照明图样,使用FP算法复原出高分辨率图像。此方法不需要提前知道照明图样的具体信息,只要照明图样满足所有图样求和均匀即可,对样品或像差引起的照明变形的不敏感,对装置的要求大大降低,特别适合生命科学研究中的超分辨成像。

一种基于散斑照明的超分辨显微方法,包括步骤:

1)对激光光束进行调制,聚焦到待测样品上形成散斑照明图样,并收集所述待测样品发出的荧光,得到荧光强度图像;

2)改变所述的散斑照明图样,得到不同散斑照明图样下的多幅荧光强度图像;

3)将所有的荧光强度图像相加得到的图像作为宽场图,并对所述的宽场图进行反卷积得到样品的初始估计;

4)根据得到的初始估计,使用梯度下降算法算初始的照明图像;

5)利用FP算法,在获得的物体图像和初始的照明图像的基础上算出更高分辨率的样品图像;

6)以步骤5)中算出的样品图像作为样品的估计值,重复上述的步骤4)和步骤5),直至迭代完成,即可得到超分辨图像。

在步骤1)和步骤2)中,利用数字微镜器件调制激光光束。

在步骤6)中,当最近两次迭代产生的照明图像之间的均方差达到预设值时,则结束迭代。或者当最近两次迭代产生的样品图像之间的均方差达到预设值时,则结束迭代。

作为优选的,步骤2)不同的散斑照明图样相加得到的图像的强度分布是均匀的。

本发明还提供一种基于散斑照明的超分辨显微装置,包括沿激光光束光路依次布置的激光器、数字微镜器件、照明光路上的场镜和显微物镜组成的4f系统和放置待测样品的样品台,以及用于采集所述待测样品发出荧光的荧光强度图像的探测器;

由计算机控制所述数字微镜器件调制激光光束,聚焦到待测样品上形成不同的散斑照明图样;

并在所述的计算机内,对不同散斑照明图样对应的多幅荧光强度图像进行处理得到超分辨图像。

优选的,聚焦到待测样品的不同散斑照明图样相加得到的图像的强度分布是均匀的。

其中,所述计算机内的处理过程如下:

将所有的荧光强度图像相加得到的图像作为宽场图,并对所述的宽场图进行反卷积得到样品的初始估计;

根据得到的初始估计,使用梯度下降算法算初始的照明图像;

利用FP算法,在获得的物体图像和初始的照明图像的基础上算出更高分辨率的样品图像;

以高分辨率的样品图像作为样品的估计值,重复梯度下降算法和FP算法的迭代过程,直至迭代完成,即可得到超分辨图像。

优选的,当最近两次迭代产生的照明图像之间的均方差达到预设值时,则结束迭代。或者当最近两次迭代产生的样品图像之间的均方差达到预设值时,则结束迭代。

本发明中的照明图样满足求和后强度均匀分布,所有样品图像信息反映为每变换一次照明图样,得到的样品图像信息。

本发明的工作原理如下:

对在随机照明图样下拍到的图像进行处理:由于成像过程中照明图样不是均匀分布的,所以拍到的图像其实是照明图样强度分布乘以样品荧光分布,再卷积系统的点扩散函数得到的。由于所有照明图样求和后强度分布是均匀的,所以可以将图像求和得到的图作为样品的初始估计图。对样品的初始估计图进行反卷积,可以提高图像的对比度。

使用梯度下降算法得到照明图样,通过该照明图样得到分辨率更高的样品图像,重复该过程,直至迭代完成,即可获得高分辨率的样品图像。在本发明中,迭代完成的判断依据是最近两次迭代产生的照明图像的均方差达到预设值,对样品图像也是同理。

与现有技术相比,本发明具有以下创新点:

(1)首次提出了结合了piFP和盲-SIM的复原算法;

(2)可以不需要控制照明散斑的形状;

(3)相比原始的piFP,本发明所述的算法不需要知道散斑扫描的具体位置;

(4)装置简单,操作方便。

附图说明

图1为本发明的图像重构程序的流程图;

图2为本发明图像处理的原理示意图;

图3为本发明中成像装置的结构示意图。

具体实施方式

下面结合实例和附图来详细说明本发明,但本发明并不仅限于此。

如图3所示,一种基于散斑照明的超分辨显微装置,包括:激光器1,单模光纤2,准直透镜3,第一反射镜4,数字微镜器件(DMD)5,第一场镜6,二色镜7,第二反射镜8,显微物镜9,样品台10,滤光片11,第二场镜12,CCD探测器13,主控计算机14。

其中,从激光器1发出的激光光束,单模光纤2、准直透镜3、第一反射镜4、数字微镜器件(DMD)5、第一场镜6、二色镜7、第二反射镜8、显微物镜9和样品台10依次设置在激光光束光路的光轴上。准直透镜3对激光光束进行准直,数字微镜器件(DMD)5用于改变照明图样,二色镜7用于反射激发光和透射样品的荧光,显微物镜9用于聚焦激发光和收集样品发射的荧光,样品台10用于放置固定样品和调焦。其中,第一场镜6和显微物镜9组成了一个4f系统,使数字微镜器件(DMD)5与显微物镜9的后焦面共轭。

滤光片11,第二场镜12,CCD探测器13依次设置在二色镜7的透射光路上。其中,显微物镜9和第二场镜12组成另一个4f系统,使显微物镜9的后焦面和第二场镜12的后焦面共轭。

主控计算机14同时数字微镜器件(DMD)5和CCD探测器13。

采用图3所示的装置实现基于散斑照明的超分辨显微方法,流程图和图像处理的原理示意图分别如图1和图2所示,其工作过程如下:

1.利用图3系统记录在不同照明图样下的样品信息的过程:

从激光器1发出的激光光束(本实施例采用波长为647nm的红光作为激发光),经过单模光纤2耦合和准直透镜3准直,得到准直光束;准直光束经过第一反射镜4反射到数字微镜器件(DMD)5,使光源照明图样得到调制;调制后的照明图样依次经过第一场镜6、二色镜7、第二反射镜8,最后经过显微物镜9聚焦到荧光标记的待测样品10上;

待测样品经过激光激发发射荧光,经显微物镜9收集,经过第二反射镜8,再经二色镜7透射,最后通过滤光片11和第二场镜12,聚焦到CCD探测器13上,CCD探测器13将获取的图片传至主控计算机14;主控计算机14通过依次数字微镜器件(DMD)5和CCD探测器13,获得在不同照明图样下的样品图像。

2.对记录的样品图像进行处理:

将所有样品图像相加得到的图像作为宽场图,将得到的宽场图进行反卷积得到样品的初始估计;使用梯度下降算法算出照明图样;使用FP算法,通过照明图样算出更高分辨率的样品图像;将获得的样品图像作为样品的估计值,重复上述步骤,直至迭代完成,即可得到超分辨图像。

以上所述仅为本发明的较佳实施举例,并不用于限制本发明,凡在本发明精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

去获取专利,查看全文>

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号