[논문 리뷰] Parallelizing the XSTAR Photoionization Code

Michael S. Noble, Li Ji외 2명|ArXiv.org|2009. 01. 12.

Solar and Space Plasma Dynamics참고 문헌 1인용 수 4

한 줄 요약

이 논문은 XSTAR 광이온화 코드의 병렬 처리 솔루션인 pvm_xstar와 PModel를 제시한다. 이는 다중 CPU 시스템에서 효율적인 실행을 가능하게 한다. pvm_xstar는 클러스터를 통해 독립적인 XSTAR 실행을 배치 처리 방식으로 분산한다. PModel는 ISIS 내에서 수학적으로 독립적인 모델 구성 요소와 에너지 구간을 동시에 평가할 수 있게 하여, 피팅 시간을 주에서 수시간으로 단축시킨다. 사용자가 병렬 프로그래밍을 배울 필요 없이도 된다.

ABSTRACT

We describe two means by which XSTAR, a code which computes physical conditions and emission spectra of photoionized gases, has been parallelized. The first is pvm_xstar, a wrapper which can be used in place of the serial xstar2xspec script to foster concurrent execution of the XSTAR command line application on independent sets of parameters. The second is PModel, a plugin for the Interactive Spectral Interpretation System (ISIS) which allows arbitrary components of a broad range of astrophysical models to be distributed across processors during fitting and confidence limits calculations, by scientists with little training in parallel programming. Plugging the XSTAR family of analytic models into PModel enables multiple ionization states (e.g., of a complex absorber/emitter) to be computed simultaneously, alleviating the often prohibitive expense of the traditional serial approach. Initial performance results indicate that these methods substantially enlarge the problem space to which XSTAR may be applied within practical timeframes.

연구 동기 및 목표

• 대규모 천체물리학 모델링에서 순차적 XSTAR 실행의 금방이 되는 장시간 계산 문제를 해결한다.
• 수천 개의 독립적인 XSTAR 파라미터 세트를 배치 처리 방식으로 효율적으로 실행할 수 있도록 한다.
• ISIS와 같은 스펙트럼 피팅 도구에서 복잡한 다성분 XSTAR 모델의 피팅 시간을 줄인다.
• 병렬 프로그래밍에 능숙하지 않은 사용자도 XSTAR 기반 모델링을 위해 다중 CPU 시스템을 활용할 수 있도록 한다.
• 고성능 및 물리적으로 현실적인 시뮬레이션을 가능하게 하여 XSTAR의 실용적 문제 공간을 확장한다.

제안 방법

• pvm_xstar는 병렬 가상 머신(PVM) 툴킷을 사용하여 클러스터 내에서 독립적인 XSTAR 작업을 분산한다. 이는 순차적 xstar2xspec 스크립트를 대체한다.
• pvm_xstar는 Bourne 쉘 래퍼와 S-Lang 스크립트를 사용하여 작업 분배를 관리하고, 고유한 작업 디렉터리를 통해 파일 I/O 충돌을 방지한다.
• PModel는 ISIS 스펙트럼 피팅 소프트웨어용 플러그인으로, 스텁 함수(pm_add, pm_mult, pm_func)와 pm_subgrid(N)을 통한 격자 분할을 도입한다.
• PModel는 잠재적 병렬성의 두 가지 형태를 활용한다: 구성 요소 독립성(독립적인 모델 구성 요소의 동시에 평가)과 구간 독립성(에너지/파장 격자의 부분 격자에 대한 병렬 평가).
• 플러그인은 결과 조합을 덧셈, 곱셈 또는 임의의 기능적 감소를 통해 자동으로 처리하며, 사용자에게 병렬성의 복잡성을 숨긴다.
• 두 도구 모두 ISIS나 XSTAR를 수정하지 않으며, 기존 워크플로우와 사용자 인터페이스를 그대로 유지한다.

실험 결과

연구 질문

• RQ1 클러스터 기반 병렬 처리 접근 방식을 통해 수천 개의 XSTAR 파라미터 세트의 배치 처리를 가속화할 수 있는가?
• RQ2 ISIS에서 복잡한 XSTAR 기반 모델의 피팅 성능 저하 문제를 구성 요소 수준 및 구간 수준의 병렬성으로 줄일 수 있는가?
• RQ3 병렬 프로그래밍에 능숙하지 않은 사용자가 XSTAR 모델의 자동 병렬 실행에서 얼마나 많은 이점을 얻을 수 있는가?
• RQ4 여러 CPU에 구성 요소와 구간 평가를 분산시켜 XSTAR 모델링에서 얼마나 많은 속도 향상을 달성할 수 있는가?
• RQ5 기존 스펙트럼 피팅 워크플로우에 병렬 실행을 통합할 수 있는가? 이는 핵심 소프트웨어 스택의 변경 없이도 가능한가?

주요 결과

• 단일 CPU에서 600개 작업의 XSTAR 시뮬레이션은 26.4시간이 걸렸지만, 52-CPU Beowulf 클러스터에서 pvm_xstar를 사용하면 110분으로 단축되어 거의 선형 속도 향상을 달성했다.
• 수백 개의 파라미터를 가진 20개 이상의 구성 요소를 가진 복잡한 XSTAR 모델은 기존 순차 계산으로 4주 이상이 걸렸지만, 동일한 클러스터에서 약 22시간으로 단축되었다.
• PModel 플러그인은 독립적인 모델 구성 요소를 프로세서에 분산시켜 선형 속도 향상을 달성했으며, 3-CPU 시스템에서 반복 계산 시간을 45초에서 15초로 줄였다.
• 사용자가 병렬 프로그래밍을 배울 필요 없이도 성능 향상가 가능했으며, PModel는 단순한 순차적 인터페이스 뒤에 병렬 실행을 추상화했다.
• pvm_xstar와 PModel는 모두 오픈소스이며 이식 가능하며, 멀티코어 데스크톱, 워크스테이션 클러스터, 고성능 컴퓨팅 시스템에서 성공적으로 배포되었다.
• 이 도구들은 이전에 몇 개의 시나리오만 가능했던 시간에 수천 개의 물리적 시나리오를 탐색할 수 있게 하여, XSTAR 모델링의 타당한 파라미터 공간을 크게 확장시켰다.