开源平台 | 三维结构光照明显微成像重建算法

发布:cyqdesign 2023-08-12 23:20 阅读:681
由于快速、低光毒性、高染料兼容性的优势,结构光照明显微成像(SIM)成为细胞器动态观测最有力的超分辨显微技术。随着SIM的发展,国内外专家学者们一系列关于SIM的算法工作,如Open-SIM、fairSIM、Hessian-SIM、HiFi-SIM等,这些开源软件也促进了一系列的硬件进展,如SLM-SIM、DMD-SIM,以及商业化的系统如Airy-SIM等,算法与硬件的结合使得SIM领域变得开放而充满活力。2008年,Gustafsson课题组首次提出了3DSIM的概念,3DSIM相对于2DSIM有着纵向平面分辨率的两倍提升,极大地消除了2DSIM中常见的离焦背景并获得了全细胞成像的能力。但由于3DSIM的复杂性,3DSIM的发展总体而言落后于2DSIM,其算法要么存在于闭源的商用系统中,要么基于传统的Weiner-3DSIM,用户友好度较低且伪影较为严重。因此,一个开源且强大的3DSIM软件急需被开发,以适应3DSIM日益增长的发展需求。 KdT1Nb=  
cqzd9L6=  
因此,未来技术学院席鹏教授课题组继在提出开源2DSIM重建平台Open-SIM后(IEEE JSTQE2018),开发了全新的开源3DSIM重建平台——Open-3DSIM,这一工作近期发表在Nature Methods期刊。 D-8N Da(`  
C9-IJj  
与Open-SIM相比,Open-3DSIM建立在MATLAB,Fiji以及Exe软件平台上,以供不同需求的用户使用。它具有高保真、低伪影的优势,在低信噪比条件下也有着很好的重建效果。此外,偏振偶极子成像的引入使得Open-3DSIM具有偏振成像的能力。  (f DA  
bT|N Z!V  
1Ih.?7}  
图1. a,低信噪比、低调制度条件下通过±1级与±2级频谱尖峰点进行协同参数估计。b,根据系统光学转换函数与估计的参数设计的各类频谱优化滤波器。c,Open-3DSIM与宽场图像(WF),单层3DSIM算法(HiFi-SIM)的对比以及基于Open-3DSIM的偶极子取向解析(pOpen)
u<x2"0f  
为了提高3DSIM的重建效果,席鹏课题组首次提出了自适应参数估计方法,通过正负一级与正负二级频率尖峰点进行协同参数估计,极大地提高了低信噪比、低调制度条件下3DSIM参数估计的准确性。同时设计了一系列频域滤波操作进行伪影的抑制与弱细节的保留,包括设计陷波函数抑制六角伪影,设计一级滤波函数抑制旁瓣与振铃伪影,设计二级滤波函数保留细节信息并提高重建分辨率等。这些优化在确保重建保真性的同时,极大地抑制了3DSIM重建的离焦背景与各类伪影,使得Open-3DSIM的重建效果全面优于现有的各类重建算法(AO-3DSIM、4BSIM、SIMnoise等)与商用重建软件(GE | OMX等)。尤其在极低信噪比条件下,Open-3DSIM和其他算法在低信噪比条件下的均方误差(MAE)和信噪比(SNR)相近,这展示了Open-3DSIM在低信噪比情况下优越的重建性能。 HZBU?{  
Cx$M  
此外,席鹏课题组根据荧光对不同角度偏振光发射强度不同的原理,将荧光偏振取向信息引入3DSIM重建的后处理当中,使得在无需任何硬件改动的前提下即可获取各类生物样本的偶极子取向信息。如图2所示,由于Open-3DSIM低伪影、高分辨率的优势,他们成功对Cos-7细胞进行了三色成像,并解析了线粒体嵴的三维结构与其动态分离融合过程,获得了5um小鼠肾切片微丝细胞器的三维偶极子取向信息。Open-3DSIM提供了横向/纵向超分辨,多色,长时程以及偶极子取向的六维(XYZlθT)重建技术,为亚细胞器的多维动态成像提供了有利工具。 q=bW!.#?  
VeixwGZ.  
*={` %  
图2. Open-3DSIM建立横向/纵向超分辨、多色、动态、偏振的六维成像模态。a,重建多色Cos-7细胞样本,b,解析Cos-7细胞三维线粒体的分裂、融合、凋亡,以及c, 获得小鼠肾切片微丝结构的荧光偶极子信息
ze!S4&B  
Open-3DSIM并不局限于单一显微镜平台,它广泛适用于GE | OMX,Nikon | N-SIM等商用或各类自制的3DSIM系统。它与各种现有的基于正则/反卷积/机器学习的图像优化方法完全兼容,其优越的性能、模块化的设计、极高的用户友好性为下一代3DSIM技术提供了坚实的软件基础。席鹏希望Open-3DSIM能够成为国际3DSIM重建的标准,以促进多维活细胞超分辨成像技术的进一步发展。 (fmcWHs  
T+z]ztO  
这一工作于2023年7月20日发表在Nature Methods,其中北京大学未来技术学院博士生曹睿杰为第一作者。北京大学生命仪器平台为论文提供了硬件平台,艾克斯马赛大学(Aix Marseille University)的Christophe Leterrier博士提供了N-SIM数据。李辉教授(中国科学院苏州医工所)、Marcel Mueller教授(鲁汶大学)、邵林教授(耶鲁大学)对本文进行了细致审稿并提出了建设性的宝贵意见。本工作受到国家自然科学基金、科技部重点研发计划等项目的资助。 ?{s!.U[T@  
X {,OP/  
论文链接:https://doi.org/10.1038/s41592-023-01958-0,文中的相关代码与重建平台公布于Github:https://github.com/Cao-ruijie/Open3DSIM,作者们还开源了3DSIM的示例数据于Figshare:https://figshare.com/articles/dataset/Open_3DSIM_DATA/21731315,供用户测试使用。
分享到:

最新评论

jeremiahchou 2023-08-13 00:23
Open-3DSIM并不局限于单一显微镜平台,它广泛适用于GE | OMX,Nikon | N-SIM等商用或各类自制的3DSIM系统。它与各种现有的基于正则/反卷积/机器学习的图像优化方法完全兼容,其优越的性能、模块化的设计、极高的用户友好性为下一代3DSIM技术提供了坚实的软件基础。席鹏希望Open-3DSIM能够成为国际3DSIM重建的标准,以促进多维活细胞超分辨成像技术的进一步发展。
jabil 2023-08-13 01:16
Thanks for this information
谭健 2023-08-13 08:29
Thanks for this information
谭健 2023-08-13 08:30
本工作受到国家自然科学基金、科技部重点研发计划等项目的资助
phisfor 2023-08-13 08:45
三维结构光照明显微成像重建算法
wangjin001x 2023-08-13 09:25
开源平台 | 三维结构光照明显微成像重建算法
redplum 2023-08-13 10:23
超级技术
likaihit 2023-08-13 10:24
很不错
sac 2023-08-13 11:09
三维结构光
qyzyq37jason618 2023-08-13 11:15
为了提高3DSIM的重建效果,席鹏课题组首次提出了自适应参数估计方法,通过正负一级与正负二级频率尖峰点进行协同参数估计,极大地提高了低信噪比、低调制度条件下3DSIM参数估计的准确性。同时设计了一系列频域滤波操作进行伪影的抑制与弱细节的保留,包括设计陷波函数抑制六角伪影,设计一级滤波函数抑制旁瓣与振铃伪影,设计二级滤波函数保留细节信息并提高重建分辨率等。这些优化在确保重建保真性的同时,极大地抑制了3DSIM重建的离焦背景与各类伪影,使得Open-3DSIM的重建效果全面优于现有的各类重建算法(AO-3DSIM、4BSIM、SIMnoise等)与商用重建软件(GE | OMX等)。尤其在极低信噪比条件下,Open-3DSIM和其他算法在低信噪比条件下的均方误差(MAE)和信噪比(SNR)相近,这展示了Open-3DSIM在低信噪比情况下优越的重建性能。
12
我要发表 我要评论
限 50000 字节
关于我们
网站介绍
免责声明
加入我们
赞助我们
服务项目
稿件投递
广告投放
人才招聘
团购天下
帮助中心
新手入门
发帖回帖
充值VIP
其它功能
站内工具
清除Cookies
无图版
手机浏览
网站统计
交流方式
联系邮箱:商务合作 站务处理
微信公众号:opticsky 微信号:cyqdesign
新浪微博:光行天下OPTICSKY
QQ号:9652202
主办方:成都光行天下科技有限公司
Copyright © 2005-2024 光行天下 蜀ICP备06003254号-1