[논문 리뷰] Praaline: Integrating Tools for Speech Corpus Research

George Christodoulides|arXiv (Cornell University)|2018. 02. 08.

Data Analysis with R참고 문헌 10인용 수 8

한 줄 요약

Praaline는 Praat, Sonic Visualiser, R 등의 기존 도구를 통합한 오픈소스이자 모듈식 소프트웨어 시스템으로, 음성 코퍼스 관리, 주석 처리, 분석 및 시각화를 지원합니다. 연구자들이 워크플로우를 자동화하고, 메타데이터 및 주석을 중앙 집중식 데이터베이스에 저장하며, 파이썬/C++ 플러그인 또는 스크립트를 통해 功能을 확장할 수 있어, 데이터 집약적이고 협업이 필요한 음성 코퍼스 연구를 크게 간소화합니다.

ABSTRACT

This paper presents Praaline, an open-source software system for managing, annotating, analysing and visualising speech corpora. Researchers working with speech corpora are often faced with multiple tools and formats, and they need to work with ever-increasing amounts of data in a collaborative way. Praaline integrates and extends existing time-proven tools for spoken corpora analysis (Praat, Sonic Visualiser and a bridge to the R statistical package) in a modular system, facilitating automation and reuse. Users are exposed to an integrated, user-friendly interface from which to access multiple tools. Corpus metadata and annotations may be stored in a database, locally or remotely, and users can define the metadata and annotation structure. Users may run a customisable cascade of analysis steps, based on plug-ins and scripts, and update the database with the results. The corpus database may be queried, to produce aggregated data-sets. Praaline is extensible using Python or C++ plug-ins, while Praat and R scripts may be executed against the corpus data. A series of visualisations, editors and plug-ins are provided. Praaline is free software, released under the GPL license.

연구 동기 및 목표

• 다양한 도구와 형식을 사용하는 음성 코퍼스 관리의 분산성과 복잡성을 해결하기 위해.
• 다양한 음성 분석 도구를 하나의 시스템 내에서 접근하기 쉽게 하는 통합적이고 사용자 友好的 인터페이스를 제공하기 위해.
• 코퍼스 메타데이터와 주석을 중앙 집중식으로 쿼리 가능한 데이터베이스에 저장하여 협업이 가능하고 확장 가능한 연구를 가능하게 하기 위해.
• 사용자 정의 가능한 스크립트 기반 워크플로우와 플러그인 확장성을 통해 분석 파이프라인을 자동화할 수 있도록 하기 위해.
• 다양한 음성 코퍼스 프로젝트 간에 분석 단계의 재현성과 재사용성을 촉진하기 위해.

제안 방법

• Praat, Sonic Visualiser, R 등의 기존에 검증된 도구들을 표준화된 인터페이스를 통해 단일 모듈식 프레임워크에 통합하기 위해.
• 코퍼스 메타데이터, 주석 및 분석 결과를 저장하기 위해 로컬 또는 원격 데이터베이스 백엔드를 사용하기 위해.
• 특정 연구 요구에 맞게 맞춤형 메타데이터 및 주석 구조를 정의할 수 있도록 지원하기 위해.
• 코퍼스 데이터에 대해 Praat 및 R 스크립트를 실행할 수 있도록 하며, 결과를 자동으로 데이터베이스에 업데이트하기 위해.
• 파이썬 또는 C++를 사용한 플러그인을 통해 功能을 확장할 수 있는 플러그인 아키텍처를 제공하기 위해.
• 시각화 기능, 편집기 및 워크플로우 엔진을 통해 연속적인 분석 단계를 관리할 수 있도록 하기 위해.

실험 결과

연구 질문

• RQ1 연구자들은 여러 도구를 사용하는 상황에서 대규모이고 협업이 필요한 음성 코퍼스의 관리 및 분석을 어떻게 간소화할 수 있는가?
• RQ2 Praat, Sonic Visualiser, R 등의 기존 도구를 통합함으로써 워크플로우의 복잡성이 얼마나 감소하고 재현성이 향상되는가?
• RQ3 통합된 데이터베이스 기반 시스템은 음성 코퍼스에 대한 확장 가능하고 유연하며 자동화된 분석 파이프라인을 지원할 수 있는가?
• RQ4 모듈식 플러그인 아키텍처는 분석 컴포넌트의 커스터마이제이션과 재사용을 얼마나 효과적으로 가능하게 하는가?
• RQ5 단일 인터페이스에 음성 코퍼스 워크플로우를 통합함으로써 사용성과 협업에 어떤 향상이 이루어지는가?

주요 결과

• Praaline은 Praat, Sonic Visualiser, R을 단일이고 확장 가능한 플랫폼으로 성공적으로 통합하여 도구 전환과 워크플로우 분산 문제를 줄였다.
• 스크립트 기반 및 플러그인 기반 워크플로우를 통해 사용자 정의 가능한 자동화된 분석 파이프라인을 제공한다.
• 코퍼스 메타데이터와 주석이 구조화된 데이터베이스에 지속적으로 저장되어 있어 효율적인 쿼리 및 데이터 집계를 지원한다.
• 사용자가 맞춤형 주석 및 메타데이터 스키마를 정의할 수 있어 다양한 연구 요구에 유연하게 대응할 수 있다.
• 로컬 및 원격 데이터베이스 배포를 모두 지원하여 분산된 팀 간 협업 연구를 가능하게 한다.
• 단일 인터페이스 내에서 시각화 도구와 편집기 기능을 통합함으로써 음성 코퍼스 연구자들에게 사용성과 접근성을 향상시켰다.