[논문 리뷰] Entity Based Peer-to-Peer in a Data Grid Environment

Benoît Hudzia, Liam McDermott외 2명|ArXiv.org|2006. 08. 29.

Distributed and Parallel Computing Systems참고 문헌 17인용 수 13

한 줄 요약

이 논문은 분산 환경에서의 데이터 공유 및 자원 관리를 향상시키기 위해 피어 투 피어(P2P) 통신과 엔터티 기반 아키텍처를 통합한 데이터 그리드 시스템인 DGET을 제안한다. P2P 네트워크의 확장성과 그리드 시스템의 구조화된 데이터 처리 능력을 조합함으로써 DGET은 효율적이고 탈중앙화된 데이터 접근 및 관리를 가능하게 하며, 현재 초기 테스트 단계의 프로토타입을 보유하고 있다.

ABSTRACT

During the last decade there has been a huge interest in Grid technologies, and numerous Grid projects have been initiated with various visions of the Grid. While all these visions have the same goal of resource sharing, they differ in the functionality that a Grid supports, the grid characterisation, programming environments, etc. In this paper we present a new Grid system dedicated to deal with data issues, called DGET (Data Grid Environment and Tools). DGET is characterized by its peer-to-peer communication system and entity-based architecture, therefore, taking advantage of the main functionality of both systems; P2P and Grid. DGET is currently under development and a prototype implementing the main components is in its first phase of testing. In this paper we limit our description to the system architectural features and to the main differences with other systems.

연구 동기 및 목표

• P2P와 그릭스 기술을 통합하여 대규모 분산 시스템에서 효율적이고 확장 가능한 데이터 공유 문제를 해결한다.
• 높은 확장성과 장애 내성 능력을 갖추고도 동적인 탈중앙화된 데이터 워크로드를 처리하는 데에 한계가 있는 기존 그릭스 시스템의 문제점을 극복한다.
• 데이터 엔터티를 첫 번째 객체로 간주함으로써 데이터 관리 및 탐색을 향상시키기 위한 새로운 아키텍처 모델을 개발한다.
• P2P 원칙을 활용하여 이질적이고 지리적으로 분산된 자원 간의 원활한 데이터 접근 및 조율을 가능하게 한다.
• 데이터 집약적인 과학적 및 기업용 응용 프로그램을 위한 견고하고 확장 가능한 데이터 공유 기반을 제공한다.

제안 방법

• 분산 노드 간의 탈중앙화된 확장 가능한 데이터 탐색 및 접근을 가능하게 하기 위해 피어 투 피어 통신 레이어를 설계한다.
• 데이터 객체(엔터티)가 물리적 위치와 독립적으로 고유하게 식별되고 관리되는 엔터티 기반 아키텍처를 구현한다.
• P2P 오버레이 네트워크를 사용하여 메타데이터 및 라우팅 정보를 분산 배포하여 효율적인 엔터티 검색 및 데이터 검색을 실현한다.
• 데이터 복제, 액세스 제어, 자원 모니터링 등의 그릭스 전용 기능을 P2P 프레임워크 내에 통합한다.
• 엔터티 등록, 쿼리 라우팅, 데이터 전송 등의 핵심 구성 요소를 갖춘 프로토타입 시스템을 개발하고 제어 환경에서 테스트한다.
• 상호운용성과 확장성을 확보하기 위해 기존의 P2P 및 그릭스 미들웨어 패턴을 활용하여 DGET 아키텍처를 설계한다.

실험 결과

연구 질문

• RQ1 피어 투 피어 네트워킹 원칙을 데이터 그릭스 아키텍처와 효과적으로 융합하여 확장성과 장애 내성 능력을 향상시킬 수 있는가?
• RQ2 분산 데이터 그릭스에서 효율적이고 탈중앙화된 데이터 엔터티 관리를 가능하게 하는 아키텍처 패턴은 무엇인가?
• RQ3 엔터티 기반 모델은 기존의 그릭스 메타데이터 접근 방식에 비해 데이터 탐색 및 접근을 어떻게 향상시키는가?
• RQ4 데이터 집약적 워크로드를 위한 P2P와 그릭스 기술의 통합에서 발생하는 주요 과제는 무엇인가?
• RQ5 하이브리드 P2P-그릭스 시스템은 동적인, 이질적인, 대규모의 데이터 공유를 어느 정도 지원할 수 있는가?

주요 결과

• DGET 아키텍처는 P2P와 그릭스 패러다임을 성공적으로 융합하여 데이터 그릭스 환경에서 확장성 있고 탈중앙화된 데이터 관리를 가능하게 하였다.
• 엔터티 기반 모델은 네트워크 내에서 데이터 객체를 첫 번째 엔터티로 간주함으로써 효율적인 데이터 탐색 및 라우팅을 가능하게 하였다.
• 프로토타입 구현은 엔터티 등록 및 쿼리 라우팅 등의 핵심 구성 요소의 기능적 타당성을 입증하였다.
• 중앙 집중식 조율에 의존도를 줄이기 위해 P2P 메커니즘을 통해 장애 내성과 부하 분산이 향상되었다.
• 하이브리드 아키텍처는 과학적 및 기업용 응용 프로그램에서 흔히 볼 수 있는 동적인 대규모 데이터 워크로드를 지원할 잠재력을 보였다.
• 데이터 기원 추적, 액세스 제어, 복제 전략 등의 향후 확장 기반을 제공하였다.