[论文解读] Gaia Data Release 1: The archive visualisation service

A. Moitinho, A. Krone-Martins+32 more|Dipòsit Digital de la Universitat de Barcelona (Universitat de Barcelona)|Aug 1, 2017

Stellar, planetary, and galactic studies参考文献 28被引用 5

一句话总结

本文介绍了盖亚数据释放1（Gaia DR1）的盖亚档案可视化服务（GAVS），支持通过2D和3D可视化实现对超过10亿个天体源的交互式、基于网络的探索。GAVS基于IVELA项目构建，支持实时导航、元数据链接，并通过REST API实现未来可扩展性，支持与数据分析工具及科普平台（如Gaia-Sky和World Wide Telescope）的集成。

ABSTRACT

Context: The first Gaia data release (DR1) delivered a catalogue of astrometry and photometry for over a billion astronomical sources. Within the panoply of methods used for data exploration, visualisation is often the starting point and even the guiding reference for scientific thought. However, this is a volume of data that cannot be efficiently explored using traditional tools, techniques, and habits. Aims: We aim to provide a global visual exploration service for the Gaia archive, something that is not possible out of the box for most people. The service has two main goals. The first is to provide a software platform for interactive visual exploration of the archive contents, using common personal computers and mobile devices available to most users. The second aim is to produce intelligible and appealing visual representations of the enormous information content of the archive. Methods: The interactive exploration service follows a client-server design. The server runs close to the data, at the archive, and is responsible for hiding as far as possible the complexity and volume of the Gaia data from the client. This is achieved by serving visual detail on demand. Levels of detail are pre-computed using data aggregation and subsampling techniques. For DR1, the client is a web application that provides an interactive multi-panel visualisation workspace as well as a graphical user interface. Results: The Gaia archive Visualisation Service offers a web-based multi-panel interactive visualisation desktop in a browser tab. It currently provides highly configurable 1D histograms and 2D scatter plots of Gaia DR1 and the Tycho-Gaia Astrometric Solution (TGAS) with linked views. An innovative feature is the creation of ADQL queries from visually defined regions in plots. [abridged]

研究动机与目标

• 为包含超过10亿个天体源的盖亚数据释放1（Gaia DR1）提供可扩展的、交互式的基于网络的可视化服务。
• 使天文学家和公众能够通过直观的实时可视化方式探索大规模天体物理数据，而无需本地计算开销。
• 设计一个模块化、可扩展的系统，支持未来增强功能，如3D点云渲染、注释工具和新型图表类型。
• 将可视化服务与外部工具和平台集成，包括数据分析框架和教育科普应用。
• 通过支持在GAVIP等平台中靠近盖亚档案执行代码，实现将数据处理靠近数据存储的愿景。

提出的方法

• 利用IVELA（大型档案交互式可视化环境）项目中的概念和原型，构建了GAVS框架。
• 使用现代网络技术实现基于网络的客户端，以支持对盖亚DR1数据的实时、交互式2D和3D可视化。
• 设计了RESTful API，用于公开可视化元数据、索引、细节层级和关联视图，以便与外部应用程序集成。
• 与现有天文学工具（如Aladin Lite和JS9）集成，以增强数据渲染能力和兼容性。
• 启用了可视化数据的预计算，以支持大规模性能表现，同时正在研究用户触发的预计算机制。
• 计划支持Python及其他语言的封装器，以实现与Glue等数据分析生态系统的无缝集成。

Figure 1: Static architecture diagram for the GAVS Server. It presents the components of the Server (Services, Plots Backend, Spatial Indexing, and Database Manager), how they are connected, and the context within the GAVS.

实验结果

研究问题

• RQ1 如何构建一个可扩展的、交互式的基于网络的可视化系统，以处理盖亚数据释放1的10亿个天体源？
• RQ2 哪些架构模式能够实现在浏览器环境中对大规模天体物理数据集的高效、实时导航与探索？
• RQ3 如何将可视化服务与数据分析工具解耦，同时仍能与Glue等框架实现互操作？
• RQ4 可视化服务在通过Gaia-Sky和World Wide Telescope等平台增强公众参与和教育方面可发挥何种作用？
• RQ5 未来系统应如何设计，以将计算代码更靠近数据，从而最小化数据传输并最大化性能？

主要发现

• 盖亚档案可视化服务（GAVS）成功实现了通过可扩展的浏览器界面，对盖亚DR1中11亿个天体源的交互式、基于网络的探索。
• 该系统支持实时2D和3D可视化，未来计划支持3D点云渲染和高级图表类型（如直方图和密度图）。
• 已建立REST API作为可视化元数据公开的基础，计划通过语言封装器（如Python）与数据分析工具集成。
• 该服务设计为可与外部平台（包括Gaia-Sky和World Wide Telescope）互操作，增强了公众科普和教育效果。
• 通过与盖亚增值平台（GAVIP）及其GAVIDAV组件的集成，实现了近数据计算，使代码可在靠近数据的位置执行，从而提升性能。
• DR1的成功证明了公众和科学界对该方法的强烈兴趣，验证了使大规模天体物理数据实现可视化和交互化的可行性。

Figure 2: Client architecture diagram providing the structure and context in GAVS. The Client is structured in a Model-View-Controller design expressed in the Directives, Controllers, and Services modules.