[논문 리뷰] Open and Free Cluster for Public

Zaenal Akbar, Slamet외 5명|ArXiv.org|2007. 08. 04.

IoT and Edge/Fog Computing참고 문헌 3인용 수 8

한 줄 요약

이 논문은 인도네시아 및 주변 지역에서 처음으로 완전히 개방되고 무료인 병렬 컴퓨팅 시설인 LIPI 공용 클러스터를 소개한다. 이는 연구자들과 기관이 접근할 수 있는 고성능 컴퓨팅 자원을 제공하도록 설계되었다. 두 해 동안의 운영과 점진적인 업그레이드를 거쳐 클러스터는 사용자 요구를 성공적으로 충족시켰으며, 개발 중인 지역적 맥락에서 공공으로 이용 가능한 오픈소스 클러스터 인프라의 실현 가능성과 효과성을 입증했다.

ABSTRACT

We introduce the LIPI Public Cluster, the first parallel machine facility fully open for public and for free in Indonesia and surrounding countries. In this paper, we focus on explaining our globally new concept on open cluster, and how to realize and manage it to meet the users needs. We show that after 2 years trial running and several upgradings, the Public Cluster performs well and is able to fulfil all requirements as expected.

연구 동기 및 목표

• 인도네시아에서 연구 및 교육을 지원하기 위해 공공으로 접근 가능하고 오픈소스인 고성능 컴퓨팅 클러스터를 구축하기 위해.
• 특히 동남아시아 지역에서 저렴하고 개방된 HPC 인프라의 부족을 해소하기 위해.
• 커뮤니티 주도의 저비용 클러스터가 다양한 사용자의 성능 및 사용성 요구를 충족시킬 수 있음을 입증하기 위해.
• 공공 기관에서의 오픈 클러스터 배포를 위한 확장 가능하고 지속 가능한 모델을 제공하기 위해.
• 재정적 및 기술적 장벽을 제거하여 오픈 과학과 기술 접근성을 증진하기 위해.

제안 방법

• 클러스터는 일반 소비자용 하드웨어와 오픈소스 소프트웨어(예: 리눅스 및 오픈소스 HPC 도구)를 사용하여 구축되었다.
• 사용자 워크로드를 효율적으로 관리하기 위해 중앙집중식 작업 스케줄링 시스템(SLURM 또는 유사 시스템)을 구현하였다.
• 광범위한 가용성과 공정성을 확보하기 위해 공개 인터페이스와 액세스 정책을 구현하여 시스템을 구축하였다.
• 두 해 동안의 시범 기간 동안 정기적인 성능 모니터링과 점진적인 하드웨어/소프트웨어 업그레이드를 실시하였다.
• 연구자들이 작업 제출, 디버깅, 자원 사용에 도움을 받을 수 있도록 사용자 지원 및 문서화 자료를 개발하였다.
• 향후 확장성과 새로운 기술의 통합을 가능하게 하기 위해 확장 가능한 아키텍처를 설계하였다.

실험 결과

연구 질문

• RQ1 개발 중인 국가 맥락에서 공공으로 접근 가능하고 오픈소스인 클러스터를 지속 가능하게 운영할 수 있는가?
• RQ2 저비용이며 커뮤니티 주도의 클러스터가 다양한 학술 및 연구 사용자의 계산 요구를 어느 정도 충족시킬 수 있는가?
• RQ3 비영리이며 개방형 접근 모델이 고성능 컴퓨팅에 대한 공정한 접근을 얼마나 효과적으로 증진시킬 수 있는가?
• RQ4 무료 사용과 개방 액세스를 가진 공용 클러스터를 관리할 때 발생하는 기술적 및 운영적 과제는 무엇인가?
• RQ5 상업적 자금 없이도 오픈소스 소프트웨어와 일반 소비자용 하드웨어를 어떻게 활용하여 신뢰할 수 있는 HPC 서비스를 제공할 수 있는가?

주요 결과

• LIPI 공용 클러스터는 일관된 성능과 높은 사용자 만족도를 기반으로 두 해 동안 성공적으로 운영되었다.
• 클러스터는 모든 예상되는 성능 및 사용성 요구사항을 충족시켰으며, 다양한 계산 워크로드를 지원했다.
• 정기적인 하드웨어 및 소프트웨어 업그레이드로 인해 시간이 지남에 따라 지속적인 신뢰성과 확장성 확보가 이루어졌다.
• 개방형 액세스 모델 덕분에 인도네시아 및 인접 국가의 연구자들이 널리 참여할 수 있었다.
• 자금이 정부에서 지원되는 오픈소스 클러스터가 자원이 제한된 환경에서 상용 HPC 솔루션의 실질적인 대안이 될 수 있음을 입증했다.
• 클러스터의 성공은 이와 같은 모델을 다른 개발 중인 지역에서도 복제할 수 있음을 뒷받침한다.