[论文解读] The 4D Camera: an 87 kHz direct electron detector for scanning/transmission electron microscopy

Peter Ercius, I. J. M. Johnson+20 more|arXiv (Cornell University)|May 19, 2023

Advanced Electron Microscopy Techniques and Applications被引用 4

一句话总结

4D Camera 是一款 87 kHz 直接电子探测器，配备 576×576 像素的活性像素传感器，专为扫描透射电子显微镜设计，可实现 480 Gbit/s 的实时 4D-STEM 数据采集。通过利用电子计数和基于稀疏性的处理方法，原始数据量减少 10–300 倍，从而实现对海量数据集的快速分析，并支持对固态电池界面等材料的高速、高灵敏度结构表征。

ABSTRACT

We describe the development, operation, and application of the 4D Camera -- a 576 by 576 pixel active pixel sensor for scanning/transmission electron microscopy which operates at 87,000 Hz. The detector generates data at approximately 480 Gbit/s which is captured by dedicated receiver computers with a parallelized software infrastructure that has been implemented to process the resulting 10 - 700 Gigabyte-sized raw datasets. The back illuminated detector provides the ability to detect single electron events at accelerating voltages from 30 - 300 keV. Through electron counting, the resulting sparse data sets are reduced in size by 10 - 300x compared to the raw data, and open-source sparsity-based processing algorithms offer rapid data analysis. The high frame rate allows for large and complex 4D-STEM experiments to be accomplished with typical STEM scanning parameters.

研究动机与目标

• 开发一种高速、高灵敏度的直接电子探测器，适用于扫描和透射电子显微镜，能够以前所未有的帧率捕获 4D-STEM 数据。
• 实现实时、高保真度的电子衍射数据采集，死时间极短，量子效率更高。
• 通过电子计数和基于稀疏性的处理方法，将海量原始数据集（10–700 GB）大幅压缩，以实现快速分析。
• 将探测器与高性能计算资源集成，使反馈时间从数天缩短至数分钟。
• 通过将 STEM 视为可捕获完整衍射信息的多功能光束线，支持复杂、多模式的电子显微镜实验。

提出的方法

• 4D Camera 采用背照式 576×576 像素活性像素传感器，运行频率达 87,000 Hz，可实现实时 4D-STEM 数据采集，数据速率达 480 Gbit/s。
• 采用直接电子探测技术，在 30–300 keV 加速电压范围内具备单电子事件灵敏度，无需使用闪烁体。
• 原始数据通过并行化软件堆栈实现实时处理，包含四个 FPGA 和四个接收服务器，在扫描完成前进行数据缓冲。
• 基于事件的处理方法可识别并计数单个电子事件，通过基于稀疏性的算法将数据量减少 10–300 倍。
• 数据通过专用的 'Mothership 6' 计算机高速传输至高性能计算系统（NERSC），实现实时本地或远程分析。
• 采用先进重建技术（如衍射图样的旋转求和）可从完整的 4D 数据集中生成 vADF-STEM 图像。

Figure 1: A schematic of the 4D Camera detector, data acquisition, and data processing system. Each 1/4 sector of the detector is separately processed by four FPGAs and forwarded to four receiver servers. The receiver servers buffer the data in main memory at the full data rate until a scan is compl

实验结果

研究问题

• RQ1 直接电子探测器是否能在 30–300 keV 广泛能量范围内实现 87 kHz 帧率的同时保持单电子灵敏度？
• RQ2 电子计数与基于稀疏性的处理方法在不损失结构信息的前提下，能将 4D-STEM 数据集压缩多大程度？
• RQ3 高速数据采集与高性能计算的集成如何实现实时反馈，从而提升电子显微镜实验效率？
• RQ4 4D Camera 是否能实现 vADF-STEM 和全息重建等新成像模式的大规模应用？
• RQ5 从复杂材料（如固态电池界面）的大规模 4D-STEM 数据中可提取哪些结构信息？

主要发现

• 4D Camera 实现 87,000 Hz 的帧率，数据速率高达 480 Gbit/s，支持高速 4D-STEM 采集。
• 在 30–300 keV 加速电压范围内实现单电子灵敏度，显著提升信噪比与动态范围。
• 电子计数使原始 4D-STEM 数据集压缩 10 至 300 倍，实现高效存储与处理。
• 基于稀疏性的处理算法可实现高达 700 GB 数据集的快速分析，将反馈时间从数天缩短至数分钟。
• 从完整 4D-STEM 数据重建的 vADF-STEM 图像揭示了 LiCoO₂ 中的晶体取向与结构差异，包括晶粒生长方向与界面粗糙度。
• 数据表明 LiCoO₂ 中晶体沿垂直方向优先生长，其衍射环的各向异性强度分布与扫描方向一致。

Figure 2: Schematics of (a)-(b) 80 kV and (c)-(d) 300 kV electron scattering (red lines) in 10 $\mu$ m wide APS pixels (vertical gray lines). (a) and (c) show how a thinner inactive layer reduces electron scattering leading to reduced lateral energy deposition compared to a sensor with a thicker ina