一种超分辨阵列扫描结构光照明成像装置及其成像方法

xiaoxiao2021-3-4  146

一种超分辨阵列扫描结构光照明成像装置及其成像方法
【技术领域】
[0001] 本发明设及一种成像装置及其成像方法,具体设一种超分辨阵列扫描结构光照明 成像装置及其成像方法,属于光学紧密测量技术领域。
【背景技术】
[0002] 光学显微术是一种历史悠久且十分重要的无破坏性技术,被广泛应用于生物和材 料科学等领域。结构光照明技术(St;ruc1:ured Illumination Microscopy ,SIM)由美国科学 家Gustafsson于2000年提出,其原理类似于莫尔条纹原理,通过调制宽场显微镜的照明函 数,使得整个光学系统的光强传递函数(0TF)得到平移与叠加,从而使得系统频域带宽增 加,截止频率提高。通常采用一个正弦光栅改变宽场显微镜的照明强度分布,照明光场在光 栅方向上被调制,经过旋转光栅实现整个横向的调制。相比于光瞳滤波技术,结构光技术注 重考虑光学系统频域的变化与影响,只要满足光栅周期等于宽场显微镜空间截止频率,结 构光照明技术即可使系统0TF带宽变为原来的2倍,即分辨率提高为原来的2倍。
[0003] 通常宽场结构光照明显微镜只能测量比较薄的生物样品,当测量较厚的样品时, 随入射距离的增加,平行光入射的衍射光受散射效应影响明显。

【发明内容】

[0004] 本发明的目的是为了解决现有技术中的显微成像技术只能测量较薄的生物样品, 当测量较厚的样品时,随入射距离的增加,平行光入射的衍射光受散射效应影响明显,测量 效率低的问题。
[0005] 本发明的技术方案是:一种超分辨阵列扫描结构光照明成像装置,包括LED光源, 沿Lm)光源光线传播方向依次放置光强调制器、准直扩束器、扫描系统、微透镜阵列、准直透 镜、分光棱镜、1/4波片、照明物镜,样品、收集透镜、CCD光强探测器W及数据采集卡;所述光 强调制器是声光调制器,光束经过调制后光强与时间成正弦关系,经过扫描系统,在样品表 面可W得到空间上光强按正弦分布的照明光场;所述数据采集卡可W同步控制光强调制与 扫描。
[0006] 采用CCD探测,成像过程需要逐点扫描,那么整个图像采集过程效率大大降低。因 此,在光路中加入微透镜阵列,同时对多点进行扫描可W极大提高测量效率。
[0007] 所述的Lm)光源为非相干光源,对样品的照明为非相干照明,整个成像过程均为非 相干成像。
[000引所述扫描系统包括扫描振镜,扫描振镜改变光束偏转角。
[0009] 基于所述一种超分辨阵列扫描结构光照明成像装置的成像方法,包括W下步骤:
[0010] 步骤一、通过A0M声光调制器对照明光束的光强在时域内进行调制成正弦函数,调 制探测面探测灵敏度系数,得到等效扫描照明光场;
[0011] 步骤二、对照明光透过样品并经过物镜再次成像得到探测面上的光强分布,对所 述探测面上的光强分布在扫描时间上进行积分,得到样品表面照明光的强度分布;
[0012] 步骤Ξ、对样品表面照明光光强分布进行超分辨图像重构处理,得到清晰图像。
[0013] 所述步骤一具体包括:
[0014] 通过对探测面灵敏度系数进行调试,得到照明光场的不同扫描位置的光强最大 值,进而得到扫描后的照明光场光强分布;
[0015] 对扫描后的照明光场光强分布进行时间积分得到等效照明光场。
[0016] 所述步骤二包括:
[0017] 得到照明光透过样品后光强分布,进而得到经过物镜再次成像到探测面上的光强 分布;
[0018] 对探测面上的光强分布在扫描时间上进行积分,得到积分图像的光强分布;
[0019] 对积分图像的光强分布进行傅里叶变换得到积分图像的图像频谱。
[0020] 步骤Ξ所述超分辨图像重构处理包括对样品表面照明光的光强分布引入不同的 调制相位并进行解调。
[0021] 所述对样品表面照明光的光强分布引入不同的调制相位并进行解调的过程包括:
[0022] 根据引入不同的调制相位得到照明光场的不同扫描位置的光强最大值,进而得到 引入相位后的积分图像的光强分布;
[0023] 对引入相位后的积分图像的光强分布进行傅里变换,得到带有相位的积分图像频 谱;
[0024] 通过构造相位矩阵、像频谱矩阵和物频谱矩阵,得到物频谱的Ξ部分的频率信息。
[0025] 所述的声光调制器Α0Μ的调制周期Τ与扫描点在样品表面的扫描速度V的乘积 νΤ=-- 1ΝΑ.
[0026] 通过微透镜阵列在物面产生的照明光斑中,相邻照明光斑中屯、距离为照明光场空 间周期的整数倍。
[0027] 为了增加光学成像的穿透深度,结构光照明原理被引入到扫描显微镜中,由于扫 描显微镜采用聚焦照明,能量集中,受厚样品散射影响小。2009年,美国哈佛大学谢晓亮课 题组提出一种应用于巧光激光扫描显微镜的结构光照明超分辨,利用同步完成激光扫描显 微镜中的空间扫描与照明光强调制,在非相干系统中,获得了一个在时间域上不同位置光 强调制分布的结构光照明,从而改善系统分辨力,原理仿真表明,激光扫描显微镜的分辨力 提高为原来的2倍。此外,该系统亦可用于双光子巧光显微镜。
[0028] 本发明与现有技术相比具有W下效果:本发明的装置设置有声光调制器和与其同 步的振镜扫描系统,能在扫描的同时改变扫描光斑的光强。本发明的方法利用调制经过样 品之前的光束,完成同步扫描,得到不同扫描点的瞬时光强信号,最后时间不同的每次扫描 得到的像叠加。运种不同扫描点照明光强不同,且照明光强与样品被扫描点位置成正弦关 系的设计,可W把样品结构中的高频分量向低频方向平移并且与低频成分叠加,系统探测 到普通显微成像系统中无法探测到的高频信息,从而显著改善系统横向分辨力。
[0029] 本发明在物面通过时域累计得到光强按正弦分布的照明光场。照明光场对样品物 函数进行调制,使其高频信息移向低频段,进而能被探测光路探测并参与成像。改变照明光 场方向可W对物函数进行不同方向的调制。每个照明方向通过改变照明光场相位,对探测 频谱中的高低频成分加 W区分,最后进行图像重构得到超分辨图像。为了提高测量效率,在 光路中加入微透镜阵列,可w同时实现多路照明与多路探测,成像速率随微透镜阵列中微 透镜数量成倍提高。该装置与方法可W提高扫描显微系统的空间截止频率,拓宽空间频域 带宽,从而显著改善系统横向分辨力,并且同时具有高测量效率,可适用于工业形貌及厚生 物样品成像的测量领域。
【附图说明】
[0030] 图1是本发明超分辨阵列扫描结构光照明成像装置结构示意图;
[0031] 图2是ΝΑ = 0.1,λ = 660ηπι时普通扫描显微成像系统的0TF归一化仿真图;
[0032] 图3是ΝΑ = 0.1,λ = 660ηπι时阵列扫描结构光照明显微成像系统的0TF归一化仿真 图;
[0033] 图4是X方向上间隔为3.3皿的条纹样品仿真图;
[0034] 图5是样品的频谱分布仿真图;
[0035] 图6是条纹样品在ΝΑ = 0.1,λ = 660ηπι的普通扫描显微系统中所探测到的频谱仿真 图;
[0036] 图7是条纹样品在ΝΑ = 0.1,λ = 660皿的普通扫描显微系统中所成像光强归一化仿 真图;
[0037] 图8是条纹样品在ΝΑ = 0.1,λ = 660皿,照明光场光强分布为卢^ Λ') +1.的阵 乂 列扫描结构光照明系统中所探测到的频谱仿真图;
[0038] 图9是图7中数据经过图像重构后的到的超分辨图像的频谱;
[0039 ]图10是条纹样品在ΝΑ = 0.1,λ = 660皿,照明光场光强分布为/=做蛛^^ .V) +1的阵 ,Λ 列扫描结构光照明系统中经过图像重构后所得超分辨图像的光强归一化仿真图;
[0040]图11是条纹样品与其在普通扫描显微系统和阵列扫描结构光照明系统中所成像 在X方向光强归一化仿真图。
[0041 ] 图1中:1、L邸光源,2、Α0Μ声光调制器,3、准直扩束器,4、扫描系统,5、微透镜阵列, 6、准直透镜,7、收集透镜,8、分光棱镜,9、CCD探测器,10、1 /4波片,11、照明物镜,12、样品。
【具体实施方式】
[0042] 结合【附图说明】本发明的【具体实施方式】,本发明的一种超分辨阵列扫描结构光照明 成像装置包括L邸光源1,其特征在于:沿Lm)光源1光线传播方向依次放置Α0Μ声光调制器2、 准直扩束器3、扫描系统4、微透镜阵列5、准直透镜6、分光棱镜8、1/4波片10、照明物镜11、样 品12、收集透镜7、CCD探测器9W及数据采集卡;所述的声光调制器A0M的调制周期T与扫描 点在样品表面的扫描速度V的乘积W' 且相邻照明光斑中屯、距离为照明光场空间周 2规 期的整数倍。
[0043] 所述的Lm)光源为非相干光源,对样品的照明为非相干照明,整个成像过程均为非 相干成像D
[0044] 所述扫描系统3包括扫描振镜,扫描振镜改变光束偏转角D
[0045] 本实施例的超分辨扫描结构光照明成像方法,利用AOM声光调制器对系统中经过 样品前的照明光进行时间调制,同步完成扫描,得到样 品表面扫描点瞬时光强信号I(xs,ys; t),再对时间积分,可W得到样品表面的照明光场光强分布I(xs,ys)。
[0046] 基于所述一种超分辨阵列扫描结构光照明成像装置的成像方法,具体包括W下步 骤:
[0047] 步骤一、非相干照明扫描显微系统中,省略放大倍数W及常数系数,照明光强点扩 展函数hii(r)与探测光强点扩展函数hde(r)相同,表示如式(1):
[004引
(1);
[0049] 式中,Ji(x)表示第一类一阶贝塞尔函数;NA为数值孔径;r为径向坐标;λ为光源波 长。
[0050] 假设t既表示扫描时间又表示扫描位置,那么在普通扫描显微系统中照明光场的 不同扫描位置的光强最大值,如式(2)所示:
[0051]
(2);
[0052] 进而得到扫描后的照明光场光强分布,如式(3)所示:
[005;3]
口 );
[0054] 对扫描后的照明光场光强分布进行时间积分得到等效扫描照明光场,如式(4):
[0 化 5]
(4)。
[0056] 步骤二、计算照明光透过样品后光强分布,如式(5):
[0化7]
巧);
[0058]进而得到经过物镜再次成像到探测面上的光强分布,如式(6):
[0化9]
(6);
[0060] 对探测面上的光强分布在扫描时间上进行积分,得到积分图像的光强分布,如式 (7);
[0061]
巧);
[0062] 对积分图像的光强分布进行傅里叶变换得到积分图像的图像频谱,如式(8):
[006引
(8);
[0064] 图2是在物镜数值孔径NA = 0.1照明光波长λ = 6 6 0 ηm时扫描显微系统0TF即 ,材?,/ (0)/?,4,("的归一化仿真图。
[0065] 图4和图5分别是X方向上间隔为3.3皿的被测样品及其频谱分布<3如仿真图。
[0066] 图6是在普通扫描显微系统中,系统探测到样品的频谱信息玄快),对应所成像p(x) 如图7所示。
[0067] 步骤Ξ、对样品表面照明光光强分布进行超分辨图像重构处理,得到清晰图像。
[0068] 在本实施例中,改变探测面灵敏度系数,等效于改变照明光场的不同扫描位置的 光强最大值,如式(9):
[0069]
(9);
[0070] 经过扫描后的照明光场光强分布是一个由艾里斑形成的阵列,可表示为如式 (10):
[0071]
(10);
[0072] 最终得到积分图像,其光强分布如式(11):
[0073]
C11);
[0074] 对其进行傅里叶变换,得到积分图像频谱,如式(12):
[0075]
(12):
[0076] 可W看出,扫描结构光照明超分辨方法成功地把样品在普通显微系统中无法探测 到的高频信息移到了显微系统的0TF通带内,使其能被探测。
[0077] 由于结构照明方法所得的探测结果均含有基频与高频信息的相位混叠,本实施例 中通过引入不同的调制相位进行解调,即超分辨图像重构。
[0078] 在照明光强调制函数中引入相位,照明光场的不同扫描位置的光强最大值变如式 (13):
[0079]
(13):;
[0080] 那么,积分图像光强分布变如式(14):
[0081 ]
(14);
[0082] 对其进行傅里叶变换,得到带有相位的积分图像频谱如式(15):
[0083]
(巧);
[0084] 构造一个相位矩阵Ψ,像频谱矩阵P,假设物频谱矩阵为0;
[0085] 令
[0086]
[0087] 那么可W得到 [008引
[0089] 由此可W得到物频谱的Ξ部分频率信息。
[0090] 图3是在物镜数值孔径NA = 0.1照明光波长λ = 660ηπι时扫描结构光照明显微系统 等效0W即的归一化仿真图。
[0091] 对比图2和图3可W看出,扫描结构光照明显微成像系统的0TF空间频域带宽明显 大于普通扫描显微系统0TF。
[0092] 图8是扫描结构光照明系统探测结果的频谱信息,图9是解调后积分图像的频谱信 息,图10是经过图像恢复后的积分图像。
[0093] 图11是样品W及其在普通扫描显微系统中所成像和扫描结构光照明系统中经过 图像重构得到的积分图像,在X方向光强分布的归一化仿真图。
[0094] 通过对比图6和图9可看出本实施例能探测到的最高样品频率明显高于普通扫描 显微系统。
[00Μ] 通过对比图7和图10,并结合图11,可看出扫描结构光照明超分辨方法得到的积分 图像分辨力明显高于普通扫描显微系统,本实施例实现了扫描显微系统的二维超分辨,扫 描显微系统的等效0TF带宽得到拓展。
【主权项】
1. 一种超分辨阵列扫描结构光照明成像装置,包括LED光源(I),其特征在于:沿LED光 源(1)光线传播方向依次放置AOM声光调制器(2)、准直扩束器(3)、扫描系统(4)、微透镜阵 列(5)、准直透镜(6)、分光棱镜(8)、1/4波片(10)、照明物镜(11)、样品(12)、收集透镜(7)、 C⑶探测器(9)和数据采集卡。2. 根据权利要求1所述一种超分辨阵列扫描结构光照明成像装置,其特征在于:所述的 LED光源(1)为非相干光源,对样品的照明为非相干照明,整个成像过程均为非相干成像。3. 根据权利要求1所述一种超分辨阵列扫描结构光照明成像装置,其特征在于:所述扫 描系统(3)包括扫描振镜,扫描振镜改变光束偏转角。4. 基于权利要求1所述一种超分辨阵列扫描结构光照明成像装置的成像方法,其特征 在于:包括以下步骤: 步骤一、通过AOM声光调制器2对照明光束的光强在时域内进行调制成正弦函数,调制 探测面探测灵敏度系数,得到等效扫描照明光场; 步骤二、对照明光透过样品并经过物镜再次成像得到探测面上的光强分布,对所述探 测面上的光强分布在扫描时间上进行积分,得到样品表面照明光的强度分布; 步骤三、对样品表面照明光光强分布进行超分辨图像重构处理,得到清晰图像。5. 根据权利要求4所述一种超分辨阵列扫描结构光照明成像装置的成像方法,其特征 在于:所述步骤一具体包括: 通过对探测面灵敏度系数进行调试,得到照明光场的不同扫描位置的光强最大值,进 而得到扫描后的照明光场光强分布; 对扫描后的照明光场光强分布进行时间积分得到等效照明光场。6. 根据权利要求4所述一种超分辨阵列扫描结构光照明成像装置的成像方法,其特征 在于:所述步骤二包括: 得到照明光透过样品后光强分布,进而得到经过物镜再次成像到探测面上的光强分 布; 对探测面上的光强分布在扫描时间上进行积分,得到积分图像的光强分布; 对积分图像的光强分布进行傅里叶变换得到积分图像的图像频谱。7. 根据权利要求4所述一种超分辨阵列扫描结构光照明成像装置的成像方法,其特征 在于:步骤三所述超分辨图像重构处理包括对样品表面照明光的光强分布引入不同的调制 相位并进行解调。8. 根据权利要求7所述一种超分辨阵列扫描结构光照明成像装置的成像方法,其特征 在于:所述对样品表面照明光的光强分布引入不同的调制相位并进行解调的过程包括: 根据引入不同的调制相位得到照明光场的不同扫描位置的光强最大值,进而得到引入 相位后的积分图像的光强分布; 对引入相位后的积分图像的光强分布进行傅里变换,得到带有相位的积分图像频谱; 通过构造相位矩阵、像频谱矩阵和物频谱矩阵,得到物频谱的三部分的频率信息。9. 根据权利要求4所述一种超分辨阵列扫描结构光照明成像装置的成像方法,其特征 在于:所述的声光调制器AOM的调制周期T与扫描点在样品表面的扫描速度V的乘积10.根据权利要求4所述一种超分辨阵列扫描结构光照明成像装置的成像方法,其特征 在于:通过微透镜阵列5在物面产生的照明光斑中,相邻照明光斑中心距离为照明光场空间 周期的整数倍。
【专利摘要】一种超分辨阵列扫描结构光照明成像装置及其成像方法,它涉及一种成像装置及其成像方法。本发明为了解决现有技术中的显微成像技术只能测量较薄的生物样品,平行光入射的衍射光受散射效应影响明显,测量效率低的问题。本发明包括LED光源,沿LED光源光线传播方向依次放置光强调制器,准直扩束器,扫描系统,微透镜阵列,准直透镜,分光棱镜,1/4波片,照明物镜,样品,收集透镜,CCD光强探测器以及数据采集卡;每次扫描得到的探测光斑直接在像面进行叠加得到最初的探测数据,每个方向进行三次不同相位照明的扫描,经过图像重构得到超分辨图像。本发明拓宽空间频域带宽,适用于工业形貌及厚生物样品成像的测量领域。
【IPC分类】G01N21/01
【公开号】CN105486638
【申请号】CN201510867976
【发明人】邹丽敏, 张甦, 王宝凯, 谭久彬
【申请人】哈尔滨工业大学
【公开日】2016年4月13日
【申请日】2015年11月30日

最新回复(0)