编辑 | 萝卜皮
使用光学显微镜对生物进程进行成像的目标是以最小的侵入性获取最多的时空信息。深度神经收集显著改善了光学显微镜,包括图象超分辨率和恢复,但仍有很大的伪影潜力。
在这项钻研中,中国科学院、清华大学以及霍华德·休斯医学钻研所的钻研职员,通过结合照明形式的先验知识,为结构化照明显微镜和晶格光片显微镜(LLSM)开发了合理化的深度学习(rDL),从而合理地引导收集对原始图象进行去噪。
在这里,钻研职员证明了 rDL 结构照明显微镜消除了光谱偏颇引起的分辨率下降,并将模型不确定性降低了五倍,将超分辨率信息提高了十倍以上。
该钻研以「Rationalized deep learning super-resolution microscopy for sustained live imaging of rapid subcellular processes」为题,于 2022 年 10 月 6 日发布在《Nature Biotechnology》。
所有活的有机体都执行复杂的生物进程。荧光显微镜对于阐明活细胞中各种生物进程的动力学和功能至关重要。最近开发的超分辨率(SR)技术增强了它的功能。然而,任何 SR 步骤的空间分辨率的提高都伴随着与其他成像指标的权衡,这些指标对于理解生物进程同样重要。
结构照明显微镜(SIM)通常被认为是活细胞成像的最佳 SR 步骤,因为与其他 SR 技术相比,它需要更少的原始图象和更低的照明强度。尽管如此,SIM 相关技术通常要求每个原始图象具有适当的信噪比(SNR),以防止重修伪影。因此,光漂白和光毒性局限了现有 SR-SIM 技术的成像性能。
除了显微镜硬件的进步,计算步骤对于光学显微镜中的图象恢复和增强也变得越来越重要。传统算法采用具有某些假设的分析模型来迭代地恢复/去噪 SR 图象。然而,显微镜成像是一个统计复杂的进程;因此,手工分析模型受到其假设准确性的局限,通常会导致空间和时间分辨率的损失。
深度神经收集(DNN)不仅能够学习图象变换进程的伪逆函数,而且能够通过利用成对的端到端变换图象来学习良好解决方案的随机特征。深度学习算法在包括去噪和图象 SR 在内的各种图象转换任务中都表现出出色的性能。然而,这些任务本质上是不适定问题,这表明对于所有可能推理的高维流形中的给定输入存在几种解决方案。
此外,DNN 比高频形式更快、更稳健地学习低频形式,这种现象称为光谱偏颇,这表明从衍射局限对应物重修高频丰富的 SR 图象比去噪衍射局限图象更具挑战性。随着输入图象变得嘈杂、包含更复杂的结构或从二维 (2D) 扩展到三维 (3D),不适定问题和光谱偏颇的影响会加剧。最后,在大多数生物成像应用中,获得用于训练 DNN 的高质量基本事实 (GT) 并非易事。
图示:rDL SIM 步骤。(来源:论文)
在最新的钻研中,钻研职员为 SIM 和 LLSM 开发了 rDL 步骤。rDL 收集架构与现有的用于图象转换的 DNN 不同,它将每种显微镜技术的预表征物理模型(例如,SIM 中使用的照明形式的先验知识)合并到收集中,以指导收集训练并将收集输出调节到比其他步骤更接近 GT 的低维流形。
图示:rDL SIM 与最先进的 SIM 步骤的比较。(来源:论文)
另外,这里不是减轻嵌入在重修的 SR 图象中的伪影,而是应用 rDL SIM 模型对衍射受限的原始 SIM 图象进行去噪,通过传统算法确保高质量的重修,同时消除最终 SR 图象中光谱偏颇引起的分辨率下降。
图示:含 SiT 的运输中间体的体积、高速 TiS-rDL LLSM 成像。(来源:论文)
此外,钻研职员使用时间或空间域中的生物成像采样连续性来开发一种时间/空间交错的自我监督机制,用于在不需要 GT 图象的情况下实现 rDL LLSM 去噪。该团队证明,rDL SIM 和 rDL LLSM 能够实现对超过十种类型的生物进程的高时空分辨率和长期观察,这些生物进程对光太敏感、太快或太长,无法通过最先进的 SR 显微镜进行实时记录。
图示:运动纤毛和细胞器相互作用的 rDL SIM 成像。(来源:论文)
rDL SRM 步骤显着突破了 2D/3D SR 实时成像的界限,以比最先进的 SRM 高 10 倍的帧速率实现了 30 倍以上的成像持续时间。因此,rDL SRM 步骤可以钻研各种生物进程的精细空间细节、快速动力学和长期动力学,而 SR 实时成像尚未这样做。
在 2D SR 成像场景中,rDL TIRF-SIM 在将细胞放置在盖玻片上后实现了长达一小时的延时超分辨率(97 nm)记录细胞扩散,这清楚地解决了 F-肌动蛋白和肌球蛋白-IIA 之间的协调动力学,产生片状伪足的突出和收缩振荡。
钻研职员利用 rDL-GI-SIM 表征了 60,000 帧 SR 成像速度高达684 Hz(受 sCMOS 相机读取率局限)的运动纤毛搏动形式和频率,首次没有明显的光漂白现象,纤毛和 IFT 序列的双色活细胞可视化揭示了IFT序列在纤毛中段碰撞、重塑和翻转的多种新行为,以前只在纤毛尖端发生。
图示:通过 SiS-rDL LLSM 进行有丝分裂中膜细胞器的遗传和相互作用。(来源:论文)
在 3D 成像场景中,rDL-LLS-SIM 使钻研职员能够在内源性水平分析核仁过有丝分裂的多相转变进程。他们一致观察到 RPA49 的大液滴在内部纤维中心相可以分裂成几个独立的焦点,这表明活性裂变机制可能在核仁的组装中起作用。
另外,TiS rDL LLSM 以每秒 10 个全细胞体积的高体积成像速度生成了 10000 个体积的传输SiT囊泡集体行为的高质量图象。SiS rDL LLSM 能够以秒为间隔进行长达数小时的三色 SR 成像,首先检查细胞在有丝分裂期间正确分离不同细胞器的不同策略。
总之,rDL SRM 以超高的空间和时间分辨率、高保真度和长时间可量化性满足了细胞内动力学微创 2D/3D 成像的未满足需求。rDL 步骤的实施和改进为揭示各种生物现象显示了巨大的希望。
论文链接:https://www.nature.com/articles/s41587-022-01471-3
相关报道:https://phys.org/news/2022-10-rationalized-deep-super-resolution-microscopy-sustained.html
原创文章,作者:ScienceAI,如若转载,请注明出处:https://www.iaiol.com/news/23218