[论文解读] 3D Snapshot Microscopy of Extended Objects

Xiang Huang, Alan Selewa+12 more|arXiv (Cornell University)|Feb 5, 2018

Integrated Circuits and Semiconductor Failure Analysis参考文献 24被引用 3

一句话总结

本文提出一种基于多焦点显微镜（MFM）与基于稀疏性的重建方法的3D快照显微技术，可在25 Hz下以接近共聚焦显微镜的体部分辨率捕获动态、扩展的荧光物体（如细菌）。通过在单帧相机图像中对25个焦平面进行深度编码，并利用压缩感知框架，该方法实现了无需逐点扫描的高速、高保真3D成像，从而实现了对3D生物动态过程的实时研究。

ABSTRACT

Volumetric biological imaging often involves compromising high temporal resolution at the expense of high spatial resolution when popular scanning methods are used to capture 3D information. We introduce an integrated experimental and image reconstruction method for capturing dynamic 3D fluorescent extended objects as a series of synchronously measured 3D snapshots taken at the frame rate of the imaging camera. We employ multifocal microscopy (MFM) to simultaneously image at 25 focal planes and process this depth-encoded image to recover the 3D structure of extended objects, such as bacteria, using a sparsity-based reconstruction approach. The combined experimental and computational method produces image quality similar to confocal microscopy in a fraction of the acquisition time. In addition, our computational image reconstruction approach allows a simplified MFM optical design by correcting aberrations using the measured response to point sources. This "compressive" MFM acquisition and reconstruction method, where an image volume with roughly 8 million voxels is recovered from a single 1-megapixel captured image, enables straightforward study of dynamic processes in 3D, and as a simultaneous snapshot advances the state of the art in dynamic 3D microscopy.

研究动机与目标

• 为克服传统3D显微技术中因逐点扫描导致的时间-空间权衡问题，提升时间分辨率。
• 在不假设点源的前提下，实现对扩展荧光生物对象（如细菌）的高速、高保真3D成像。
• 开发一种计算重建框架，利用稀疏性先验从单张2D MFM快照中恢复3D结构。
• 通过测量的点扩散函数（PSF）校正像差，简化MFM光学设计，减少对复杂光学元件的依赖。
• 通过单相机快照采集实现对活体生物样品中3D动态过程的实时追踪。

提出的方法

• 该方法利用衍射光学元件（DOE）将物镜的光束分割为25个在单个EMCCD探测器上空间分离、深度编码的子图像，每个子图像对应一个不同的焦平面。
• 采用基于稀疏性的优化框架进行3D体积分辨率重建，最小化测量的MFM图像与系统正向模型之间的差异。
• 正向模型将3D物体体积与深度分辨的点扩散函数（PSF）进行卷积，其中每个z平面均与对应的2D PSF拼贴卷积，结果相加形成预测的MFM图像。
• 重建将物体体积离散化为108 nm × 108 nm × 50 nm的体素，与PSF采样及z步长匹配，并在强度和梯度幅值上施加稀疏性以稳定反问题求解。
• 在PSF模型中考虑了DOE引入的色差，使系统能够在重建过程中计算校正这些畸变，而无需额外的光学校正元件。
• 通过在50 nm z间隔处测量点源的实验PSF来校准系统响应，从而实现对扩展物体的精确重建。

实验结果

研究问题

• RQ1 单相机快照采集方法是否能够实现在视频速率下对扩展荧光物体的3D体积分辨率成像？
• RQ2 基于稀疏性的重建方法能否从单张MFM快照中恢复出细菌等扩展物体的详细3D荧光分布？
• RQ3 在无需复杂光学元件的情况下，能否通过计算方法有效校正简单DOE引入的像差？
• RQ4 与共聚焦显微镜相比，该快照MFM方法在分辨率和信噪比方面的重建质量如何？
• RQ5 该快照方法是否能够可靠地实现实时追踪动态3D过程（如细菌的扩散与旋转）？

主要发现

• 该方法仅通过一张100万像素的MFM图像即可实现对扩展物体的3D体积分辨率重建，成功恢复约800万个体素，图像质量与共聚焦显微镜相当。
• 与共聚焦参考体积相比，从单张MFM快照重建的细菌3D体积的峰值信噪比（PSNR）达到47.33 dB。
• 该方法实现了25 Hz的动态3D成像，其速度仅受限于相机帧率，可实现实时观察3D过程，如细菌的扩散与旋转。
• 在50帧（1.2秒）内，细菌质心的重建轨迹在x、y和z方向上均表现出精确追踪，同时观察到细胞在三维空间中运动时俯仰角与方位角的动态变化。
• 该方法成功分辨出细菌的精细结构特征，包括其两极处的两个荧光浓度叶瓣，横向分辨率优于100 nm，轴向分辨率达50 nm。
• 基于共聚焦成像中细菌的强度与梯度幅值的累积分布函数（CDF）支持使用稀疏性先验，其分布呈现重尾特征，与稀疏信号一致。