[논문 리뷰] Scientific Workflow Systems for 21st Century e-Science, New Bottle or New Wine?

Yong Zhao, Ioan Raicu외 1명|ArXiv.org|2008. 08. 26.

Scientific Computing and Data Management참고 문헌 16인용 수 7

한 줄 요약

이 논문은 21세기 과학적 워크플로 시스템이 기존 워크플로 기술에서 진화할 것인지, 아니면 근본적으로 새로운 접근이 필요한지 조사한다. 현재 워크플로 시스템의 과제를 분석하고, 새로운 플랫폼과 언어를 평가하며, 향후 과학적 워크플로 워크로드를 위한 핵심 요구사항을 규명한다. 결론적으로 기존 기술은 기초를 제공하지만, 다음 세대 과학적 워크플로를 위해 증명 가능성, 확장성, 동적 조합과 같은 새로운 능력이 필수적임을 밝힌다.

ABSTRACT

With the advances in e-Sciences and the growing complexity of scientific analyses, more and more scientists and researchers are relying on workflow systems for process coordination, derivation automation, provenance tracking, and bookkeeping. While workflow systems have been in use for decades, it is unclear whether scientific workflows can or even should build on existing workflow technologies, or they require fundamentally new approaches. In this paper, we analyze the status and challenges of scientific workflows, investigate both existing technologies and emerging languages, platforms and systems, and identify the key challenges that must be addressed by workflow systems for e-science in the 21st century.

연구 동기 및 목표

• 기존 워크플로 기술이 21세기 과학적 워크플로 워크로드를 충분히 충족시키는지 평가하기.
• 증명 가능성, 자동화, 조율과 관련된 과학적 워크플로 시스템의 핵심 과제 규명하기.
• e-Science 요구사항의 맥락에서 새로운 워크플로 플랫폼, 언어, 시스템 평가하기.
• 과학적 워크플로 시스템이 근본적으로 새로운 아키텍처적 및 의미론적 기초가 필요한지 판단하기.

제안 방법

• e-Science 맥락에서 기존 워크플로 시스템과 새로운 플랫폼 간의 비교 분석 수행하기.
• 과학적 워크로드를 위한 목적의 새로운 워크플로 언어와 실행 환경에 대한 설문 조사 및 평가 수행하기.
• 과학적 워크플로에서 증명 가능성 추적, 동적 조합, 장애 내성과 같은 핵심 기능 검토하기.
• 현재 워크플로 기술과 복잡하고 데이터 집약적인 과학 응용 프로그램의 요구사항 사이의 격차 규명하기.
• e-Science 특화 요구사항을 기반으로 워크플로 시스템 평가 프레임워크 제안하기.
• 사례 연구 및 시스템 평가를 통해 현재 및 새로운 기술의 적합성 평가하기.

실험 결과

연구 질문

• RQ1 기존 워크플로 기술이 현대 e-Science 응용 프로그램의 요구를 얼마나 충족시킬 수 있는가?
• RQ2 대규모, 데이터 집약적인 과학적 워크로드에 적용했을 때 현재 워크플로 시스템의 주요 한계는 무엇인가?
• RQ3 e-Science에서 증명 가능성 추적, 자동화, 동적 실행을 지원하기 위해 워크플로 시스템이 어떤 새로운 능력이 필요한가?
• RQ4 새로운 워크플로 플랫폼과 언어는 전통적 시스템의 단점을 어떻게 보완하는가?
• RQ5 과학적 워크플로 시스템은 기존 기반 위에 구축되어야 할 것인가, 아니면 패러다임 전환을 필요로 하는가?

주요 결과

• 기존 워크플로 기술은 유용한 기초를 제공하지만, e-Science 요구사항의 전반에 걸쳐 충분하지 않다.
• 증명 가능성 추적과 동적 워크플로 조합은 현재 시스템에서 여전히 주요 과제이다.
• 새로운 플랫폼은 복잡하고 데이터 집약적인 과학적 워크로드를 지원하는 데 잠재력이 있다.
• 과학적 워크로드에 맞는 표준화되고 표현력이 풍부한 워크플로 언어의 필요성이 점점 커지고 있다.
• 분산 환경에서의 확장성과 장애 내성 문제는 여전히 해결되지 않은 핵심 과제이다.
• 워크플로 시스템과 데이터 집약적 과학 플랫폼 간의 통합은 아직 미숙하며, 향후 연구가 더 필요하다.