网站地图 关于 合作 招聘 帮助

    热线:400-152-6858

    测试狗科研服务

    预存 定制
    Document
    当前位置:文库百科文章详情
    科研人员研发深度学习超分辨显微成像方法取得重大进步
    来源:测试GO 时间:2022-10-19 10:00:58 浏览:1125次

      李栋/戴琼海合作团队通过人工智能算法与光学显微镜成像技术的交叉创新,提出了合理化深度学习超分辨显微成像框架,解决了现有深度学习成像方法分辨率损失、预测不确定性、训练集不易采集等难题,可为多种活体显微成像模态提供30倍以上的成像速度与时程的提升,为细胞生物学、发育生物学、神经科学等领域的发展提供了重要的研究工具。同时,该研究团队所坚持和倡导的人工智能算法与光学成像原理交叉创新、软硬结合的研究思路,为现代光学显微成像的发展开辟了新的技术路径。

    合理化深度学习超分辨显微成像神经网络架构

    以深度学习为代表的计算超分辨方法可在不损失其他成像性能的前提下,提升显微图像分辨率或信噪比,表现出广阔的应用前景。然而,针对生物医学研究必需高保真度、可定量分析的图像要求,深度学习显微成像方法存在三大共性问题:受限于深度学习内秉的频谱频移(spectral-bias)问题,输出图像分辨率无法达到真值(ground truth)水平;受限于超分辨重建、去噪问题的病态性(ill-posed problem)和神经网络模型的不确定性(model-uncertainty),重建或预测结果的真实性无法得到保障;深度神经网络的训练需要大量数据,但高质量训练数据的采集在许多应用场景下极其困难、甚至无法实现。当前,深度学习显微成像方法的研究和发展如火如荼,并表现出超越传统成像性能极限的潜力,但上述问题阻碍了现有深度学习超分辨或去噪方法在生物显微成像实验中的使用。
     
      10月6日,中国科学院生物物理研究所李栋课题组联合清华大学自动化系、清华大学脑与认知科学研究院、清华-IDG/麦戈文脑科学研究院戴琼海课题组,美国霍华德休斯医学研究所博士Jennifer Lippincott-Schwartz,在Nature Biotechnology上,以长文(Article)的形式,发表了题为Rationalized deep learning super-resolution microscopy for sustained live imaging of rapid subcellular processes的论文。该研究提出了一套合理化深度学习(rationalized deep learning,rDL)显微成像技术框架,将光学成像模型及物理先验与神经网络结构设计相融合,合理化网络训练、预测过程,从而实现了高性能、高保真的显微图像去噪与超分辨重建,并结合实验室自主研发、搭建的多模态结构光照明显微镜(Multi-SIM)与高速晶格光片显微镜(LLSM),将传统TIRF/GI-SIM、3D-SIM、LLS-SIM和LLSM的成像速度/时程提升30倍以上,实现了当前国际最快(684Hz)、成像时程最长(最长可达3小时、60,000时间点以上)的活体细胞成像性能,首次对高速摆动纤毛(>30Hz)中转运蛋白(IFT)的多种运输行为以及完整细胞分裂过程中核仁液液相分离(liquid-liquid phase separation)过程进行快速、多色、长时程、超分辨观测。Nature Biotechnology针对这一工作同时发表了评述文章(Research Briefing)。
     
      具体而言,李栋/戴琼海研究团队提出的合理化深度学习结构光超分辨重建架构(rDL SIM)不同于现有超分辨神经网络模型的端到端(end-to-end)训练模式,而是采用分步重建策略,首先利用所提出的融合成像物理模型和结构光照明先验的神经网络对原始SIM图像进行去噪和高频信息增强,然后通过经典解析算法进行SIM重建以获得最终的超分辨图像。相比于该团队去年在Nature Methods上提出的超分辨重建神经网络模型DFCAN/DFGAN,rDL SIM可将超分辨重建结果的不确定性降低3~5倍,并实现更高的保真度和重建质量;相比于其他去噪算法(如CARE),rDL SIM可恢复出调制在原始图像中的莫尔条纹,并将高频信息增强10倍以上。
     
      此外,针对晶格光片显微镜、共聚焦显微镜等宽场照明或点扫描成像模态,该团队提出了一种可学习的傅立叶域噪声抑制模块(FNSM)。该模块可以利用OTF信息对显微图像中的噪声进行自适应滤除。科研团队以此构建了嵌入FNSM的通道注意力去噪神经网络架构,并基于显微成像数据本身的时空连续性,提出了时空交织采样自监督训练策略(TiS/SiS-rDL)。该策略无需额外采集训练数据、亦无需保证时序数据具有时间连续性,即可实现媲美监督学习效果的去噪神经网络的训练,解决了实际生物成像实验中高质量训练数据难以获取的难题。
     
      合理化深度学习超分辨显微成像方法可适用于包括2D-SIM、3D-SIM、LLSM等在内的多种显微成像模态,提供高分辨率、高保真的显微图像重建性能,相较于传统方法最多可以提升30倍的成像时程和10倍的成像速度。借助rDL成像技术,研究团队开展了诸多过去的成像手段无法开展的超分辨活体成像实验,并与Lippincott-Schwartz、中科院分子细胞科学卓越创新中心研究员朱学良、中科院遗传与发育生物学研究所研究员何康敏探讨了其潜在的生物学意义,包括:对滴落在玻片上的U2OS细胞贴壁生长过程进行双色、长时程(1小时以上)、超分辨(97nm分辨率)观测,清晰、真实地记录了细胞粘附和迁移的动力学现象,且不干扰这一漫长、脆弱的生命过程;对高速摆动纤毛以当前最快的684Hz成像速率进行长达60,000个时间点的连续超分辨观测,且过程中无明显光漂白或细胞活性损伤,并对纤毛摆动模式和频率进行统计分析;对摆动纤毛及纤毛内转运蛋白(IFT)进行超快、超分辨双色成像,揭示了IFT在行进途中碰撞、重组、掉头等多种新行为;通过对cCAS-DNA与ER进行双色、长时程、超分辨成像,观测到cGAS-DNA在保持与ER持续接触过程中的定向运动、转向或扩散等行为,拓展了对膜性细胞器与无膜细胞器相互作用机制的认知;对HeLa细胞分裂过程中的核仁磷酸蛋白(NPM1)、RNA聚合酶I亚基RPA49及染色质(H2B)进行超长时程(12秒采集间隔,2.5小时以上)的三维超分辨活体成像,实现了对完整有丝分裂过程中NPM1与RPA49两种结构形态变化的三维超分辨活体连续观测,揭示了细胞有丝分裂过程中核仁形成以及NPM1、RPA49两种无膜亚细胞结构的相变、互作规律;以10Hz的全细胞体成像帧率对高尔基体进行长达10,000时间点的连续拍摄,并实现了对完整细胞分裂过程内质网、溶酶体、线粒体等亚细胞结构的三色、高速(秒量级)、超长时程(小时量级,>1000个时间点)三维观测,探究了细胞有丝分裂过程中细胞器在子代细胞中的均匀分配机制。
     
      研究工作得到国家自然科学基金、科技部、中科院、中国博士后科学基金、腾讯“科学探索奖”、清华大学“水木学者”计划的支持。


    测试狗文库百科
    评论 / 文明上网理性发言
    12条评论
    全部评论 / 我的评论
    最热 /  最新
    全部 3小时前 四川
    文字是人类用符号记录表达信息以传之久远的方式和工具。现代文字大多是记录语言的工具。人类往往先有口头的语言后产生书面文字,很多小语种,有语言但没有文字。文字的不同体现了国家和民族的书面表达的方式和思维不同。文字使人类进入有历史记录的文明社会。
    点赞12
    回复
    全部
    查看更多评论
    相关文章

    恒电流间歇滴定法GITT的基本原理以及测试教程

    2022-08-12

    折射率测试的主要方法和制样要求介绍

    2022-11-10

    ESR/EPR测试制样要求以及常见问题

    2022-08-25

    低电压透射电镜TEM的主要用途以及常见问题

    2022-09-23

    电子探针显微镜与扫描电镜区别的三大要点

    2022-08-15

    Plos One:水刊?神刊?很多人嘴上说不要,私下却偷偷投稿!

    2022-08-09

    热门文章/popular

    晶体结构可视化软件 VESTA使用教程(下篇)

    电化学实验基础之电化学工作站篇 (二)三电极和两电极体系的搭建 和测试

    【科研干货】电化学表征:循环伏安法详解(下)

    【科研干货】电化学表征:循环伏安法详解(上)

    手把手教你用ChemDraw 画化学结构式:基础篇

    晶体结构可视化软件 VESTA使用教程(上篇)

    微信扫码分享文章

    意见反馈

    有奖举报

    商务合作

    公众号

    关注我们 了解更多

    小程序

    随时预约 掌握进度

    举报有奖

    TEL: 191-3608-6524

    如:在网络上恶意使用“测试狗”等相关关键词误导用户点击、恶意盗用测试狗商标、冒称官方工作人员等情形,请您向我们举报,经查实后,我们将给予您奖励。

    举报内容:

    200

    上传附件:
    文件格式不正确,请重新上传文件格式不正确,请重新上传文件格式不正确,请重新上传
    文件格式:jpg、jpeg、png、gif、tif、doc、docx、ppt、pptx、xls、xlsx、pdf、zip、rar
    联系方式
    姓名
    电话
    提交意见

    意见反馈

    Suggestions

    您可以在此留下您宝贵的意见,您的意见或问题反馈将会成为我们不断改进的动力。

    意见类型
    测试服务
    网站功能
    财务报账
    其他类型
    意见内容

    200

    联系方式
    姓名
    电话
    提交意见

    收起

    Document
    关于我们 新手帮助 测试干货 商务合作 基金查询 相关资质 模拟计算 现场测试 服务项目 科研绘图 同步辐射 全进口设备

    联系方式/contact

    400-152-6858

    工作时间/work time

    09:00-18:00

    测试狗公众号

    关注我们 了解更多

    测试狗小程序

    随时预约 掌握进度

    蜀公网安备51010602000648号

    蜀ICP备17005822号-1

    成都世纪美扬科技有限公司

    Copyright@测试狗·科研服务