[논문 리뷰] Survey and Analysis of Production Distributed Computing Infrastructures

Daniel S. Katz, Jon Weissman외 3명|arXiv (Cornell University)|2012. 01. 01.

Distributed and Parallel Computing Systems참고 문헌 65인용 수 8

한 줄 요약

이 논문은 주요 생산 환경의 분산 컴퓨팅 인프라를 종합적으로 조사하며, 그 설계, 진화 과정 및 실제 사용 사례를 분석한다. 사용 방식 모드(앱과 인프라를 연결하는 추상화)를 규명함으로써 시스템 개발과 애플리케이션 설계에 영향을 미치며, 제공자와 사용자 간 협업이 혁신과 적응을 이끄는 방식을 밝혀낸다.

ABSTRACT

This report has two objectives. First, we describe a set of the production distributed infrastructures currently available, so that the reader has a basic understanding of them. This includes explaining why each infrastructure was created and made available and how it has succeeded and failed. The set is not complete, but we believe it is representative. Second, we describe the infrastructures in terms of their use, which is a combination of how they were designed to be used and how users have found ways to use them. Applications are often designed and created with specific infrastructures in mind, with both an appreciation of the existing capabilities provided by those infrastructures and an anticipation of their future capabilities. Here, the infrastructures we discuss were often designed and created with specific applications in mind, or at least specific types of applications. The reader should understand how the interplay between the infrastructure providers and the users leads to such usages, which we call usage modalities. These usage modalities are really abstractions that exist between the infrastructures and the applications; they influence the infrastructures by representing the applications, and they influence the ap- plications by representing the infrastructures.

연구 동기 및 목표

• 기존의 생산 환경 분산 컴퓨팅 인프라의 기원, 성공 요소, 한계를 종합적으로 개괄하는 것.
• 원래 설계 의도를 초월해 실제 애플리케이션 패턴을 통해 이러한 인프라가 실제로 어떻게 사용되는지 분석하는 것.
• 인프라의 기능과 애플리케이션 요구사항 간을 매개하는 추상화인 '사용 방식 모드'를 식별하고 특성화하는 것.
• 분산 시스템의 진화 과정에서 인프라 제공자와 사용자 간의 상호작용이 어떻게 상호 영향을 주고받는지 탐구하는 것.
• 인프라의 예상 기능과 실제 기능이 애플리케이션 개발 및 시스템 설계에 어떻게 영향을 미치는지 이해하는 것.

제안 방법

• 설계 목표, 구현 환경, 장기적 진화를 중점으로 대표적인 생산 환경 분산 컴퓨팅 인프라에 대한 체계적 조사.
• 애플리케이션의 아키텍처 및 인프라 내 배포 방식을 분석함으로써 사용 패턴 분석.
• 인프라-애플리케이션 상호작용 사례 연구를 통해 반복적으로 나타나는 사용 방식 모드 식별.
• 사용자 요구가 인프라 개선에 어떻게 영향을 주는지 포함한 제공자-사용자 간 피드백 루프 분석.
• 관찰된 배포 및 사용 추세를 바탕으로 인프라의 원래 범위를 초월해 어떻게 적응되는지 통합 분석.
• 인프라와 애플리케이션 설계의 공진화를 이해하기 위해 정성적이고 맥락 기반 분석 활용.

실험 결과

연구 질문

• RQ1 주요 생산 환경 분산 컴퓨팅 인프라의 핵심 설계 동기와 구현 환경는 무엇인가?
• RQ2 이러한 인프라의 실제 사용 패턴은 원래 설계 목표와 의도된 사용 케이스와 어떻게 다를까?
• RQ3 인프라와 애플리케이션 간에 반복적으로 나타나는 사용 방식 모드는 무엇이며, 이는 시스템 진화에 어떻게 영향을 미치는가?
• RQ4 사용자 중심의 사용 패턴은 어떤 방식으로 원래 예상하지 못했던 인프라 개선 또는 새로운 기능을 이끌어내는가?
• RQ5 인프라 제공자와 애플리케이션 개발자 간의 상호작용은 분산 시스템의 장기적 방향성에 어떻게 영향을 미치는가?

주요 결과

• 많은 분산 컴퓨팅 인프라는 고처리량 또는 저지연 시간 워크로드와 같은 특정 애플리케이션 유형을 고려해 개발되었으며, 사용자 수요에 따라 진화했다.
• 사용 방식 모드—애플리케이션과 인프라 간 상호작용의 추상화된 패턴—는 자연스럽게 발생하며, 인프라의 진화와 애플리케이션 아키텍처에 중대한 영향을 미친다.
• 애플리케이션은 원래 설계된 목적을 초월해 인프라를 활용함으로써 예상치 못한 새로운 기능과 사용 패턴을 창출한다.
• 인프라 제공자와 사용자 간의 피드백 루프가 혁신을 이끌며, 사용자 요구가 종종 향후 인프라 개선을 이끄는 경우가 많다.
• 성공적인 인프라는 후행 호환성과 확장성 모두에서의 적응력을 보이며, 다양한 도메인의 다양한 워크로드를 지원할 수 있다.
• 의도된 사용과 실제 사용 간의 차이는 인프라 설계에서 유연성과 확장성의 중요성을 부각시킨다.