[논문 리뷰] Knowledge and Metadata Integration for Warehousing Complex Data

Jean-Christian Ralaivao, Jérôme Darmont|ArXiv.org|2008. 09. 11.

Advanced Database Systems and Queries참고 문헌 19인용 수 3

한 줄 요약

이 논문은 복잡한 데이터를 관리하기 위해 XML 기반 데이터 웨어하우스에서 도메인 지식과 메타데이터를 통합하기 위한 CWM 호환 프레임워크를 제안한다. 지식을 메타데이터로 표현함으로써 이질적인 데이터 소스의 통합 모델링 및 쿼리 처리를 가능하게 하여, 복잡한 데이터 환경에서의 의사결정 지원 능력을 향상시킨다.

ABSTRACT

With the ever-growing availability of so-called complex data, especially on the Web, decision-support systems such as data warehouses must store and process data that are not only numerical or symbolic. Warehousing and analyzing such data requires the joint exploitation of metadata and domain-related knowledge, which must thereby be integrated. In this paper, we survey the types of knowledge and metadata that are needed for managing complex data, discuss the issue of knowledge and metadata integration, and propose a CWM-compliant integration solution that we incorporate into an XML complex data warehousing framework we previously designed.

연구 동기 및 목표

• 데이터 웨어하우징 환경에서 수치적 및 기호적 데이터를 초월한 복잡한 데이터를 관리하는 데 도전 과제를 해결한다.
• 복잡한 데이터 웨어하우징을 위한 핵심 지식 유형(명시적, 통계적, 기술적, 배경, 행정)과 메타데이터를 식별하고 분류한다.
• 도메인 지식을 메타데이터로 표현하여 데이터 웨어하우스 라이프사이클 관리의 단순화를 위한 통합 통합 접근법을 제안한다.
• 기존 연구를 확장하고 CWM 호환성을 지원함으로써 상호운용성과 확장성을 확보하는 XML 기반 아키텍처 프레임워크를 개발한다.
• 공급자, 사용자, 관리자 수준에서 효과적인 메타데이터 및 지식 관리를 통해 데이터 통합, 성능 향상 및 분석 능력 향상을 도모한다.

제안 방법

• 복잡한 데이터 웨어하우징에 관련된 지식 유형을 조사하고 분류한다: 명시적, 통계적, 기술적, 배경, 행정 지식.
• 세 가지 수준에서 메타데이터 요구사항을 정의한다: 공급자(데이터 소스 및 드라이버), 사용자(분석 소스 및 드라이버), 관리자(성능 및 최적화).
• 공통 웨어하우스 모델(CWM)을 활용해 표준화를 도모하고, 의미 일관성과 재사용을 달성하기 위해 도메인 지식을 메타데이터로 표현하는 것을 제안한다.
• CWM 호환 스키마를 사용하여 복잡한 데이터 모델링, 메타데이터 관리, 지식 표현을 지원하는 XML 기반 데이터 웨어하우스 프레임워크를 설계한다.
• 데이터 추출, 변환, 적재(ETL) 과정에 의미 인식 기능을 통합한 계층적 아키텍처를 통해 메타데이터와 지식을 통합한다.
• CWM 및 분석 처리를 위한 XQuery 확장 기능과의 일치를 통해 확장성과 상호운용성을 확보한다.

실험 결과

연구 질문

• RQ1 데이터 웨어하우징 시스템에서 복잡한 데이터를 관리하기 위해 필수적인 지식 및 메타데이터 유형은 무엇인가?
• RQ2 도메인 관련 지식과 메타데이터는 어떻게 효과적으로 통합되어 복잡한 데이터 처리 및 분석을 지원할 수 있는가?
• RQ3 CWM 호환 데이터 웨어하우스 프레임워크에서 지식을 메타데이터로 표현하는 데서 나타나는 장점과 한계는 무엇인가?
• RQ4 제안된 프레임워크는 복잡한 데이터 웨어하우징 라이프사이클에서 세 가지 핵심 역할인 공급자, 사용자, 관리자가 어떻게 지원되는가?
• RQ5 지식을 메타데이터로 통합함으로써 XML 기반 데이터 웨어하우스의 표현력, 유지보수성, 성능이 얼마나 향상되는가?

주요 결과

• CWM 호환 프레임워크 내에서 도메인 지식을 메타데이터로 표현하면 복잡한 데이터의 일관성 있고 표준화된, 확장 가능한 관리가 가능해진다.
• 기술적, 통계적, 배경, 행정 지식을 메타데이터와 통합함으로써 데이터 웨어하우스의 표현력과 분석 능력이 향상된다.
• 제안된 XML 기반 아키텍처는 이질적인 데이터 소스를 지원하며, 표준화된 메타데이터 모델링을 통해 의미적 상호운용성을 확보한다.
• 데이터 소스, 타겟, 변환 규칙에 대한 지식을 메타데이터로 통합함으로써 ETL 프로세스가 향상된다.
• 지식과 메타데이터를 통합함으로써 더 나은 의사결정 지원이 가능해지며, enriched한 맥락, 기원 정보, 쿼리 최적화 기능이 제공된다.
• 통합된 메타데이터와 지식 구성 요소를 통해 사용자 수준의 분석이 가능해지며, 명확한 소스 라인리지와 의미적 맥락이 제공된다.