[논문 리뷰] Science needs to rethink how it interacts with big data: Five principles for effective scientific big data systems.

N. Robinson, Joseph Hamman외 1명|arXiv (Cornell University)|2019. 08. 09.

Scientific Computing and Data Management참고 문헌 18인용 수 6

한 줄 요약

이 논문은 과학적 대용량 데이터 시스템을 위한 다섯 가지 아키텍처 원칙을 제안하여 데이터 양과 과학적 통찰 간의 간극을 줄이고자 한다. 확장성, 상호운용성, 재현 가능성, 확장성, 사용자 중심 설계를 강조함으로써, 이 프레임워크는 새로운 기술의 효과적 활용을 가능하게 하여 데이터 집약적 과학에서 발견의 속도를 복원한다.

ABSTRACT

We should be in a golden age of scientific discovery, given that we have more data and more compute power available than ever before. But paradoxically, in many data-driven fields, the eureka moments are becoming more and more rare. Scientists, and the software tools they use, are struggling to keep pace with the explosion in the volume and complexity of scientific data. We describe here, five architectural principles we believe are essential in order to create effective, robust, and flexible platforms that make us of the best of emerging technology.

연구 동기 및 목표

• 다수의 데이터와 컴퓨팅 파워가 존재하는 데도 과학적 돌파구가 점점 줄어드는 역설을 해결하기 위해.
• 현재 과학적 데이터 플랫폼의 체계적 결함이 효과적인 데이터 활용을 저해하는 이유를 규명하기 위해.
• 강력하고 유연하며 확장 가능한 과학적 대용량 데이터 시스템을 가능하게 하는 아키텍처 원칙의 세트를 제안하기 위해.
• 과학자들과 새로운 기술에 부합하는 미래의 플랫폼 개발을 이끌기 위해.

제안 방법

• 확장성, 상호운용성, 재현 가능성, 확장성, 사용자 중심 설계라는 다섯 가지 핵심 아키텍처 원칙을 제안하기.
• 각 원칙을 과학적 대용량 데이터 플랫폼을 구축하기 위한 설계 의무로 프레임화하기.
• 신규 기술(예: 클라우드 컴퓨팅, 분산 시스템)의 통합을 이러한 원칙 내에서 강조하기.
• 데이터 기반 과학 분야의 사례 분 析를 통해 각 원칙의 관련성과 필수성을 검증하기.
• 자동화와 인간이 개입하는 탐색을 모두 지원하는 플랫폼 설계를 지지하기.
• 이 원칙들을 특정 기술적 구현이 아닌 미래의 시스템 개발을 위한 기초로 위치시키기.

실험 결과

연구 질문

• RQ1 현대 과학 데이터의 양과 복잡성에 발맞추어 과학적 대용량 데이터 플랫폼을 어떻게 아키텍처화할 수 있는가?
• RQ2 데이터 집약적 분야에서 재현 가능하고 확장 가능한 과학적 발견을 가능하게 하기 위해 필수적인 설계 원칙은 무엇인가?
• RQ3 왜 데이터 가용성과 계산 능력이 증가하는 데도 과학적 통찰의 순간(eureka moments)이 점점 줄어들고 있는가?
• RQ4 소프트웨어 플랫폼은 어떻게 복잡한 데이터 세트에서 통찰을 도출하는 데 과학자들을 더 잘 지원할 수 있는가?
• RQ5 과학적 데이터 시스템의 장기적 지속 가능성과 적응 가능성을 보장하기 위해 필요한 아키텍처 기능은 무엇인가?

주요 결과

• 현재 데이터 가용성과 과학적 통찰 간의 괴리 원인은 데이터나 계산 능력 부족이 아니라 부적절한 플랫폼 아키텍처에 기인한다.
• 효과적인 과학적 대용량 데이터 시스템을 위해 필수적인 다섯 가지 아키텍처 원칙—확장성, 상호운용성, 재현 가능성, 확장성, 사용자 중심 설계—이 존재한다.
• 이 원칙들에 기반한 플랫폼은 과학자들이 자동화된 분석과 상호작용 탐색을 동시에 더 잘 지원할 수 있다.
• 이 원칙들을 채택함으로써 과학적 변화와 기술 발전에 따라 진화하는 더 내구성 있고 미래에 대비한 시스템을 만들 수 있다.
• 이 원칙들은 데이터가 풍부한 과학 분야에서 발견을 저해하는 체계적 장벽을 종합적으로 해결한다.
• 이 원칙들을 채택하지 않을 경우 과학적 진전을 늦추는 고착화된 비효율성이 발생할 위험이 있다.