[논문 리뷰] A New Forced Photometry Service for the Zwicky Transient Facility

Frank J. Masci, Russ R. Laher외 7명|arXiv (Cornell University)|2023. 05. 25.

Spectroscopy and Laser Applications인용 수 11

한 줄 요약

이 논문은 ZTF Forced Photometry Service (ZFPS), 배치 가능 워크플로우, 아키텍처, 차이 영상으로부터의 출판 품질 광변곡선을 생성하는 광측정 방법에 대해 설명한다.

ABSTRACT

We describe the Zwicky Transient Facility (ZTF) Forced Photometry Service (ZFPS) as developed and maintained by the ZTF Science Data System Team at IPAC/Caltech. The service is open for public use following a subscription. The ZFPS has been operational since early 2020 and has been used to generate publication quality lightcurves for a myriad of science programs. The ZFPS has been recently upgraded to allow users to request forced-photometry lightcurves for up to 1500 sky positions per request in a single web-application submission. The underlying software has been recoded to take advantage of a parallel processing architecture with the most compute-intensive component rewritten in C and optimized for the available hardware. The ZTF processing cluster consists of 66 compute nodes, each hosting at least 16 physical cores. The compute nodes are generally idle following nightly real-time processing of the ZTF survey data and when other ad hoc processing tasks have been completed. The ZFPS and associated infrastructure at IPAC/Caltech therefore enable thousands of forced-photometry lightcurves to be generated along with a wealth of quality metrics to facilitate analyses and filtering of bad quality data prior to scientific use.

연구 동기 및 목표

• ZTF 데이터에서 단일 에포크 탐지 임계값 아래의 측정을 회복하기 위한 강제 광측정의 필요성을 제시한다.
• ZFPS를 배치 처리 서비스로서의 설계, 배치 배포 및 운영을 설명한다.
• 광측정 방법론, 성능 고려사항 및 광변곡선을 생성하는 데 사용된 데이터 품질 지표를 상세히 기술한다.
• 요청 제출, 결과 조회 및 출판 품질의 광변곡선을 구성하는 사용자 지침을 제공한다.

제안 방법

• 배치 제출 워크플로우로 최대 1500개 하늘 위치 per 요청.
• C 기반의 다중 스레드 PSF-피트 광측정 및 차이 영상 스탬프에 대한 평면광 측정.
• 정확한 중심 위치 추정 및 플럭스 추출을 위한 PSF 및 스탬프의 다섯 배 업샘플링.
• 신뢰할 수 있는 광변곡선을 보장하기 위한 품질 플래그, 기준선 보정, 그리고 불확실성 검증.
• 기준선 처리 및 상한 한도 계산과 함께 차등 플럭스를 보정된 등급으로 변환할 때의 규칙과 절차.

Figure 1: (a) Number of forced photometry requests submitted versus calendar date since January 1, 2021. (b) Number of forced photometry lightcurves generated as a function of lightcurve time-span, also from requests submitted since January 1, 2021.

실험 결과

연구 질문

• RQ1 ZTF 데이터에서 제출당 대규모 하늘 위치 수를 다루기 위해 강제 광측정을 어떻게 확장할 수 있는가?
• RQ2 ZTF 클러스터에서 대규모로 강제 광측정 광변곡을 처리하기 위한 성능, 메모리 및 계산 요구사항은 무엇인가?
• RQ3 차이 영상으로부터의 차등 플럭스 측정값을 과학적 사용을 위해 어떻게 처리, 검증, 보정된 등급으로 변환해야 하는가?
• RQ4 ZFPS로부터 신뢰할 수 있는 광변곡선을 만들기 위해 필요한 품질 지표 및 기준선 보정은 무엇인가?
• RQ5 ZFPS 결과를 제출하고 모니터링하며 검색하는 사용자에게 실용적인 운영 지침은 무엇인가?

주요 결과

• ZFPS는 이제 제출당 최대 1500개의 하늘 위치의 배치 처리 지원을 제공하며, 초기 버전에 비해 상당한 처리량 향상이 있다.
• 서비스는 노드당 최소 16개 코어를 가진 66-노드 클러스터에서 실행되며, PSF-피트 광측정과 C 코어를 활용한 병렬 처리를 통해 가동된다.
• 광측정은 25x25 픽셀 차이 영상 스탬프에서 수행되며, 125x125로 업샘플링되고, PSF-피트 플럭스, 플럭스 불확실성, 그리고 구경 광측정을 출력물에 포함한다.
• 품질 필터링, 기준선 보정 및 불확실성 검증이 강조되어 비검출의 상한값 처리를 포함한 신뢰할 수 있는 광변곡선을 생성한다.
• 광변곡선에는 에포크별 상태 코드 및 메타데이터가 포함되어 출판 품질의 사용에 필요한 강력한 필터링 및 분석이 가능하다.

Figure 2: ZFPS data flow and system architecture. Major components consist of a compute cluster managed by SLURM; an operations database for retrieving image inputs and metadata; a SQLite database for storage of ZFPS products and a web-server for serving them to users.