[논문 리뷰] Use of Docker for deployment and testing of astronomy software

D. Morris, S. Voutsinas외 2명|Edinburgh Research Explorer|2017. 07. 11.

Distributed and Parallel Computing Systems참고 문헌 1인용 수 4

한 줄 요약

이 논문은 천문학 소프트웨어 배포 및 테스트를 위한 컨테이너화 솔루션으로 Docker를 평가하며, 두 가지 프로젝트를 통해 재현 가능성, 이식성, 간편한 종속성 관리에서의 이점을 입증한다. 핵심 기여는 일관되고 고립된 환경을 구축함으로써 천문학 분야의 협업을 향상시키고 과학 소프트웨어 배포를 간소화하는 데서 Docker의 효과성을 보여주는 데 있다.

ABSTRACT

We describe preliminary investigations of using Docker for the deployment and testing of astronomy software. Docker is a relatively new containerisation technology that is developing rapidly and being adopted across a range of domains. It is based upon virtualization at operating system level, which presents many advantages in comparison to the more traditional hardware virtualization that underpins most cloud computing infrastructure today. A particular strength of Docker is its simple format for describing and managing software containers, which has benefits for software developers, system administrators and end users. We report on our experiences from two projects -- a simple activity to demonstrate how Docker works, and a more elaborate set of services that demonstrates more of its capabilities and what they can achieve within an astronomical context -- and include an account of how we solved problems through interaction with Docker's very active open source development community, which is currently the key to the most effective use of this rapidly-changing technology.

연구 동기 및 목표

• 복잡한 다중 컴ponent 시스템에서 천문학 소프트웨어를 배포하고 테스트하는 데 Docker의 타당성을 평가하기 위해.
• 천문학적 데이터 센터에서 다양한 컴퓨팅 환경 간 소프트웨어 이식성과 환경 일관성 문제를 해결하기 위해.
• Docker가 재현 가능한 과학과 개발자 및 시스템 관리자 간의 원활한 협업을 어떻게 지원하는지 평가하기 위해.
• 천문학 프로젝트에서의 실제 배포 경험과 해결책을 기록하기 위해.
• 커뮤니티 주도 개발이 과학 계산을 위한 컨테이너 기술 발전에 미치는 중요성을 부각하기 위해.

제안 방법

• 다양한 환경에서 일관된 배포를 위해 웹 서비스 및 애플리케이션 스택을 포함한 소프트웨어 컴포넌트를 Docker 컨테이너로 封장하기 위해.
• 공식 및 커스터마이징된 Docker 이미지를 활용하며, 특히 표준 운영체제 배포판과 Tomcat과 같은 애플리케이션 전용 이미지를 중심으로 사용하기 위해.
• Docker Compose를 통해 데이터베이스, 웹 서버, API 등 여러 서비스를 하나의 환경에서 연결하는 컨테이너 오케스트레이션을 구현하기 위해.
• Dockerfile을 사용하여 커스텀 컨테이너의 빌드 프로세스를 정의하고 자동화하여 재현 가능성을 확보하기 위해.
• 지속적 통합 및 테스트 워크플로우에 Docker를 통합하여 개발 및 생산 환경을 표준화하기 위해.
• 발전 중인 기술에서 발생하는 문제를 해결하고 컨테이너 기술의 진화에 기여하기 위해 Docker 오픈소스 커뮤니티와 협업하기 위해.

실험 결과

연구 질문

• RQ1 Docker는 천문학 소프트웨어 배포의 재현 가능성과 이식성을 어떻게 향상시킬 수 있는가?
• RQ2 천문학 분야의 과학 소프트웨어에 Docker를 사용할 때 발생하는 실질적 과제는 무엇이며, 이를 어떻게 완화할 수 있는가?
• RQ3 Docker는 개발자와 시스템 관리자 간 협업과 환경 일관성에 어느 정도 향상시키는가?
• RQ4 천문학 워크로드에 대해 Docker는 기존 가상 머신 기반 솔루션과 비교해 성능 및 유지보수 측면에서 어떤가?
• RQ5 커뮤니티 참여는 과학 계산 분야에서 Docker와 같은 컨테이너 기술의 효과적 도입과 진화에 어떤 역할을 하는가?

주요 결과

• Docker는 환경 일관성을 크게 향상시켜 설정 복잡성을 감소시키고, 개발, 테스트, 생산 환경 간 소프트웨어 동작이 동일하게 유지됨을 보장했다.
• Dockerfile과 컨테이너 이미지의 사용은 천문학 소프트웨어 스택의 신뢰할 수 있고 반복 가능한 빌드를 가능하게 하였으며, 종속성 관리를 단순화하였다.
• Docker를 통한 컨테이너화는 개발자가 Docker 이미지나 Dockerfile만 공유함으로써 런타임 환경이 동일한 것을 보장함으로써 협업을 향상시켰다.
• 네트워크 설정 및 볼류먼 매핑과 같은 문제들은 Docker 커뮤니티와의 적극적 참여를 통해 해결되었으며, 이는 빠르게 변화하는 기술에서 커뮤니티 지원의 중요성을 강조한다.
• 이 프로젝트들은 Docker가 VO 준수 데이터 액세스 서비스와 같은 복잡한 다중 서비스 천문학 애플리케이션을 더 나은 유지보수성과 확장성으로 배포하는 데 적합하다는 것을 입증하였다.
• 저자는 재현 가능한 과학과 효율적인 시스템 배포를 위한 강력한 지원 덕분에 Docker와 유사한 컨테이너 기술이 천문학 분야에서 광범위하게 도입될 것으로 기대한다.