[论文解读] ICE: a scalable, low-cost FPGA-based telescope signal processing and networking system

Kevin Bandura, A. N. Bender+15 more|arXiv (Cornell University)|Aug 22, 2016

Radio Astronomy Observations and Technology参考文献 23被引用 5

一句话总结

ICE 是一种可扩展、低成本的基于 FPGA 的系统，专为射电、毫米波和亚毫米波望远镜中的高速信号处理与网络通信而设计。该系统基于配备 ARM 协处理器和 FMC 兼容模块板的定制 FPGA 主板构建，实现了精确的定时、低电磁干扰（EMI）和高数据吞吐量——已在 SPT-3G、CHIME 和 HIRAX 中得到验证，数据速率高达每秒千兆字节，并成功检测到甚长基线干涉测量（VLBI）fringe。

ABSTRACT

We present an overview of the 'ICE' hardware and software framework that implements large arrays of interconnected FPGA-based data acquisition, signal processing and networking nodes economically. The system was conceived for application to radio, millimeter and sub-millimeter telescope readout systems that have requirements beyond typical off-the-shelf processing systems, such as careful control of interference signals produced by the digital electronics, and clocking of all elements in the system from a single precise observatory-derived oscillator. A new generation of telescopes operating at these frequency bands and designed with a vastly increased emphasis on digital signal processing to support their detector multiplexing technology or high-bandwidth correlators---data rates exceeding a terabyte per second---are becoming common. The ICE system is built around a custom FPGA motherboard that makes use of an Xilinx Kintex-7 FPGA and ARM-based co-processor. The system is specialized for specific applications through software, firmware, and custom mezzanine daughter boards that interface to the FPGA through the industry-standard FMC specifications. For high density applications, the motherboards are packaged in 16-slot crates with ICE backplanes that implement a low-cost passive full-mesh network between the motherboards in a crate, allow high bandwidth interconnection between crates, and enable data offload to a computer cluster. A Python-based control software library automatically detects and operates the hardware in the array. Examples of specific telescope applications of the ICE framework are presented, namely the frequency-multiplexed bolometer readout systems used for the SPT and Simons Array and the digitizer, F-engine, and networking engine for the CHIME and HIRAX radio interferometers.

研究动机与目标

• 解决大规模射电与亚毫米波望远镜对可扩展、低成本、低电磁干扰（EMI）信号处理系统的需求。
• 通过单一望远镜衍生的振荡器实现集中式、精确的时钟同步，分发至分布式 FPGA 节点，以最小化定时抖动与串扰。
• 支持下一代望远镜中超过每秒 1 TB 的高速数据率，满足先进数字后端的严苛要求。
• 提供灵活可重构的框架，适用于多种应用场景，包括热释电探测器读出与干涉相关处理。
• 支持在物理访问受限的偏远高海拔观测站中实现远程操作与维护。

提出的方法

• 基于 Xilinx Kintex-7 FPGA 设计定制 FPGA 主板，并集成 ARM 处理器用于控制与配置。
• 利用工业标准的 FPGA Mezzanine Card（FMC）接口，支持特定应用的模块化子板，用于信号采集与处理。
• 通过 16 插槽机箱中的 ICE 背板实现无源全网状网络，以实现板卡间及跨机箱的高带宽、低延迟互连。
• 部署基于 Python 的控制库，可自动检测并管理阵列中的硬件，支持远程配置与操作。
• 集成高速 8 位 ADC（EV8AQ160），模拟带宽达 5 GHz，支持超宽带数字化与灵活的折叠混叠策略。
• 采用可重构固件，支持多种功能角色：数字化仪、F-Engine、转接网络引擎与 FX 相关器，可从单板系统扩展至多机箱系统。

实验结果

研究问题

• RQ1 如何设计一种可扩展、低成本的基于 FPGA 的系统，以满足亚毫米波与毫米波望远镜对 EMI 和定时的严苛要求？
• RQ2 哪些架构选择使 ICE 系统能够在远程环境中实现低功耗与高可靠性的同时，处理超过每秒 1 TB 的数据率？
• RQ3 单一硬件平台在多大程度上能够支持多种望远镜应用，如频率复用的热释电探测器读出与高带宽干涉相关处理？
• RQ4 该系统的固件与软件框架在多点分布、高海拔观测站中如何实现无缝的远程部署与运行？
• RQ5 ICE 系统能否支持高级应用，如具有高动态范围与低射频干扰（RFI）污染的非常长基线干涉测量（VLBI）？

主要发现

• ICE 系统在大规模望远镜系统（包括 CHIME 与 SPT-3G）中成功支持超过每秒 1 TB 的数据速率。
• 系统在 CHIME Pathfinder 中实现完整功能，数字化、通道化与转接处理均无错误且符合规格要求。
• 基于 ICE 的数字化与 F-Engine 处理在 400–800 MHz 频段成功检测到蟹状星云脉冲星的 VLBI fringes。
• 该系统已部署于多个大型仪器中：CHIME、HIRAX、SPT-3G 与 POLARBEAR2，数百块主板分布于五大洲的 18 所机构。
• ICE 固件支持灵活配置，从单板 8 通道相关器到双机箱 512 输入系统均可实现，且可通过 8 位量化适配 VLBI 应用以减少 RFI 混叠。
• 系统低 EMI 设计与来自单一望远镜振荡器的精确定时同步，有效抑制了在 10−17 W/√Hz 敏感度下运行的高灵敏度热释电探测器中的干扰。