[논문 리뷰] Dataset of Spatial Room Impulse Responses in a Variable Acoustics Room for Six Degrees-of-Freedom Rendering and Analysis

Thomas L. McKenzie, Leo McCormack외 1명|arXiv (Cornell University)|2021. 11. 23.

Speech and Audio Processing인용 수 12

한 줄 요약

이 논문은 가변 음향 환경실에서 두 개의 구형 마이크로폰 어레이—mh Acoustics Eigenmike em32와 Zylia ZM-1—를 사용하여 측정한 공간적 방음 반응(SRIR)의 공개 데이터셋을 제시한다. 다섯 가지 리버버버레이션 설정에서 측정된 데이터셋은 6DoF 오디오 렌더링, SRIR 보간, 공간적 역리버버레이션을 가능하게 하며, 사전 처리된 SH 인코딩 데이터와 회전 보정을 적용하여 방향 도착각 추정의 정확성을 확보한다.

ABSTRACT

Room acoustics measurements are used in many areas of audio research, from physical acoustics modelling and speech enhancement to virtual reality applications. This paper documents the technical specifications and choices made in the measurement of a dataset of spatial room impulse responses (SRIRs) in a variable acoustics room. Two spherical microphone arrays are used: the mh Acoustics Eigenmike em32 and the Zylia ZM-1, capable of up to fourth- and third-order Ambisonic capture, respectively. The dataset consists of three source and seven receiver positions, repeated with five configurations of the room's acoustics with varying levels of reverberation. Possible applications of the dataset include six degrees-of-freedom (6DoF) analysis and rendering, SRIR interpolation methods, and spatial dereverberation techniques.

연구 동기 및 목표

• 공간 오디오 및 오디오 신호 처리 분야의 연구를 위해 공간적 방음 반응(SRIR)에 대한 포괄적이고 공개 가능한 데이터셋을 제공하는 것.
• 통제된 가변 음향 환경에서 다수의 소스 및 수신자 위치에서 SRIR를 측정하여 6DoF 오디오 렌더링 및 분석을 가능하게 하는 것.
• SRIR 보간 방법, 공간적 역리버버레이션 기법, 고차원 앰비소닉스 인코딩의 개발 및 평가를 지원하는 것.
• 알려진 소스 방향을 기반으로 한 회전 보정 행렬을 통해 Eigenmike 어레이의 방향 오차를 보정하는 것.
• 원본 캡슐 녹음 및 구면 조화(SH) 인코딩 표현을 SOFA 형식으로 제공하여 광범위한 사용성을 확보하는 것.

제안 방법

• Genelec 8331A 스피커를 통해 약 80 dB A가중치 음압으로 5초 간격의 지수적 사인 스위프를 재생하여 SRIR를 측정하였다.
• 32채널 Eigenmike em32(최대 4차원 앰비소닉스)와 19채널 Zylia ZM-1(최대 3차원 앰비소닉스)의 두 개의 구형 마이크로폰 어레이를 사용하여 데이터를 캡처하였다.
• 스위프 신호의 역함수와의 역상관을 통해 인파르스 응답을 생성한 후, 시작점 탐지와 기하학적 지연 보정을 통해 시간 정렬을 수행하였다.
• SH 인코딩 중 티콘وف 정규화를 적용하여 이득을 +15 dB 이내로 제한하고, 공간 앨리어싱 주파수 이상에서는 확산장 보정을 적용하였다.
• 수신기 R1에서 소스 S1의 알려진 방향을 기반으로 활성 강도 벡터 추정을 통해 Eigenmike SRIR에 대한 회전 보정 행렬을 계산하고 적용하였다.
• ACN 및 SN3D 규격을 사용하여 원본 캡슐 녹음 및 SH 인코딩 신호를 모두 SOFA 형식으로 제공하였다.

실험 결과

연구 질문

• RQ1 가변 음향 환경실에서 다양한 리버버버레이션 시간 동안 SRIR의 공간 정확도는 어떻게 변하는가?
• RQ2 Eigenmike의 방향 오차가 도착 방향(DoA) 추정에 어느 정도 영향을 미치며, 이를 어떻게 보정할 수 있는가?
• RQ3 두 마이크로폰 어레이의 공간 앨리어싱 및 정규화 제약 조건을 고려할 때, SH 인코딩된 SRIR의 사용 가능한 주파수 대역은 무엇인가?
• RQ4 Eigenmike em32와 Zylia ZM-1의 공간 응답 정확도 및 다이내믹 레인지 측면에서 성능 특성은 어떻게 비교되는가?
• RQ5 이 데이터셋은 다양한 음향 조건에서 6DoF 오디오 렌더링 및 SRIR 보간 기법의 견고한 평가를 가능하게 하는가?

주요 결과

• Eigenmike em32와 Zylia ZM-1 어레이는 각각 4차원 및 3차원 앰비소닉스 인코딩을 신뢰성 있게 구현하였으며, 저주파수에서 공간 상관도가 약 1.0에 가까워졌다.
• 이론적 공간 앨리어싱 주파수는 Eigenmike의 경우 약 5.1 kHz, Zylia의 경우 약 3.3 kHz였으며, 이 주파수에서 공간 상관도에 측정 가능한 편차가 나타났다.
• Eigenmike를 사용한 4차원 SH 인코딩의 사용 가능한 주파수 대역은 약 1800–5100 Hz였으며, 주문수 증가에 따라 범위가 좁아졌다.
• 회전 보정 행렬은 Eigenmike의 방향을 성공적으로 재정렬하여 충격 마운트에 의한 낮은 적합도 문제를 보정하였으며, 모든 수신자 위치에 걸쳐 균일하게 적용되었다.
• 이 데이터셋은 다섯 가지 리버버버레이션 시간 설정을 포함하며, 500 Hz에서 T20 값은 0.30 s(100% 흡음재)에서 1.28 s(0% 흡음재) 사이로 변동하였다.
• Zylia ZM-1는 앞면 방향이 명확히 표시되어 있어 일관되게 정렬되어 있어 회전 보정이 필요하지 않았다.