[논문 리뷰] Impliance: A Next Generation Information Management Appliance

Bishwaranjan Bhattacharjee, Vuk Ercegovac외 10명|ArXiv.org|2006. 12. 22.

Advanced Database Systems and Queries참고 문헌 25인용 수 6

한 줄 요약

Impliance는 구조화된, 반구조화된, 비구조화된 데이터 관리를 위한 하드웨are-소프트웨어 통합을 통해 차세대 정보 관리 장치를 제안한다. 대규모 병렬 처리, 자동 데이터 정리, 자원 가상화를 통해 수평 확장성을 달성하여 현대 워크로드를 위한 간단하고 견고하며 확장 가능한 기업용 데이터 관리를 실현한다.

ABSTRACT

ably successful in building a large market and adapting to the changes of the last three decades, its impact on the broader market of information management is surprisingly limited. If we were to design an information management system from scratch, based upon today's requirements and hardware capabilities, would it look anything like today's database systems?" In this paper, we introduce Impliance, a next-generation information management system consisting of hardware and software components integrated to form an easy-to-administer appliance that can store, retrieve, and analyze all types of structured, semi-structured, and unstructured information. We first summarize the trends that will shape information management for the foreseeable future. Those trends imply three major requirements for Impliance: (1) to be able to store, manage, and uniformly query all data, not just structured records; (2) to be able to scale out as the volume of this data grows; and (3) to be simple and robust in operation. We then describe four key ideas that are uniquely combined in Impliance to address these requirements, namely the ideas of: (a) integrating software and off-the-shelf hardware into a generic information appliance; (b) automatically discovering, organizing, and managing all data - unstructured as well as structured - in a uniform way; (c) achieving scale-out by exploiting simple, massive parallel processing, and (d) virtualizing compute and storage resources to unify, simplify, and streamline the management of Impliance. Impliance is an ambitious, long-term effort to define simpler, more robust, and more scalable information systems for tomorrow's enterprises.

연구 동기 및 목표

• 현재 데이터베이스 시스템이 다양한 데이터 유형을 처리하고 효율적으로 확장하는 데에 한계가 있음을 해결하기 위해.
• 기업 환경에서의 관리 및 운영을 단순화하는 정보 관리 장치를 설계하기 위해.
• 구조화된, 반구조화된, 비구조화된 데이터를 통일된 방식으로 쿼리하고 관리할 수 있도록 하기 위해.
• 일반 장비에서의 대규모 병렬 처리를 통해 수평 확장성을 달성하기 위해.
• 컴퓨팅 및 스토리지 가상화를 통해 시스템 관리를 단순화하기 위해.

제안 방법

• 일반 장비와 맞춤형 소프트웨어를 통합하여 통합된 정보 장치를 구성하기 위해.
• 모든 데이터 유형을 통일된 메타데이터 모델에서 자동으로 탐지하고 정리하며 관리하기 위해.
• 일반 장비 노드 간의 단순한 대규모 병렬 처리를 통해 수평 확장성을 실현하기 위해.
• 컴퓨팅 및 스토리지 자원을 가상화하여 하드웨어와 논리적 데이터 관리 간의 분리를 달성하기 위해.
• 스키마 사전 정의 없이 다양한 데이터 유형을 지원하는 단일 통합 쿼리 엔진을 구현하기 위해.
• 관리 오버헤드를 줄이기 위해 자가 관리 기능을 통합하기 위해.

실험 결과

연구 질문

• RQ1 현대 정보 관리 시스템은 어떻게 구조화된, 반구조화된, 비구조화된 데이터를 통합적으로 처리할 수 있는가?
• RQ2 미래의 기업을 위한 견고하고 확장 가능하며 관리가 쉬운 데이터 시스템을 가능하게 하는 아키텍처 원칙은 무엇인가?
• RQ3 일반 장비와 단순한 병렬 처리를 사용하여 수평 확장이 효율적으로 달성될 수 있는가?
• RQ4 자원 가상화는 복잡한 데이터 장치의 관리를 어떻게 단순화하는가?
• RQ5 자동 데이터 탐지 및 정리 기능은 관리 부담을 줄이는 데 어떤 역할을 하는가?

주요 결과

• Impliance는 스키마 사전 정의 없이도 모든 데이터 유형—구조화된, 반구조화된, 비구조화된 데이터—에 대해 통일된 쿼리 기능을 제공한다.
• 장치 아키텍처는 일반 장비에서의 대규모 병렬 처리를 활용하여 수평 확장성을 달성한다.
• 자동 데이터 탐지 및 정리는 수동 데이터 관리 작업을 줄이고 시스템의 사용성 향상에 기여한다.
• 자원 가상화는 하드웨어 복잡성을 추상화함으로써 시스템 관리의 단순화를 가능하게 한다.
• 소프트웨어와 하드웨어를 하나의 장치로 통합함으로써 신뢰성과 운영의 견고성이 향상된다.
• 시스템은 미래의 기업 워크로드를 위한 더 단순하고 확장 가능하며 유지보수가 쉬운 정보 관리 플랫폼을 구축할 수 있음을 입증한다.