[논문 리뷰] A Perceptually Motivated Filter Bank with Perfect Reconstruction for Audio Signal Processing

Thibaud Necciari, Nicki Holighaus외 2명|arXiv (Cornell University)|2016. 01. 25.

Speech and Audio Processing참고 문헌 27인용 수 4

한 줄 요약

이 논문은 청각 척도(예: ERB, Bark, Mel) 상에서 주로 주파수 도메인에 직접 필터를 설계함으로써 완전 복원을 달성하는 청각에 기반한 필터 베드(AUDlet)를 제안한다. 이는 균일하거나 비균일한 필터 베드를 유연하게 구성하고 재정의 가능성을 제공한다. 재건 정확도와 하위채널 처리에 대한 내성 면에서 기존의 감마톤 필터 베드보다 뛰어나다. 재건은 중복도 ≥3일 경우 해석적으로 달성되며, 낮은 중복도일 경우 반복적 방법으로 수행된다.

ABSTRACT

Many audio applications rely on filter banks (FBs) to analyze, process, and re-synthesize sounds. To approximate the auditory frequency resolution in the signal chain, some applications rely on perceptually motivated FBs, the gammatone FB being a popular example. However, most perceptually motivated FBs only allow partial signal reconstruction at high redundancies and/or do not have good resistance to sub-channel processing. This paper introduces an oversampled perceptually motivated FB enabling perfect reconstruction, efficient FB design, and adaptable redundancy. The filters are directly constructed in the frequency domain and linearly distributed on a perceptual frequency scale (e.g. ERB, Bark, or Mel scale). The proposed design allows for various filter shapes, uniform or non-uniform FB setting, and large down-sampling factors. For redundancies $\geq$ 3 perfect reconstruction is achieved by computing the canonical dual FB analytically. For lower redundancies perfect reconstruction is achieved using an iterative method. Experiments show performance improvements of the proposed approach when compared to the gammatone FB in terms of reconstruction error and resistance to sub-channel processing, especially at low redundancies.

연구 동기 및 목표

• 기존의 청각에 기반한 필터 베드(예: 감마톤 필터 베드)에서 완전 복원의 부족과 낮은 에지얼리어스 억제 성능 문제를 해결하기 위해.
• 인간 청각 주파수 해상도를 유지하면서도 안정적이고 역행 가능한 신호 처리를 가능하게 하는 필터 베드를 설계하기 위해.
• 큰 다운샘플링 인자와 함께 균일하거나 비균일한 필터 베드 구성이 가능한 탄력적인 프레임워크를 제공하기 위해.
• 낮은 중복도(약 1.1까지) 포함하여 광범위한 중복도 범위에서 완전 복원을 달성하기 위해.
• 하위채널 처리 왜곡에 대한 저항성을 향상시키고, 표준 감마톤 필터 베드보다 재건 오차를 줄이기 위해.

제안 방법

• 필터는 ERB, Bark, Mel 등의 청각 주파수 척도에 따라 선형적으로 분포된 주파수 도메인에서 직접 구성된다.
• 필터 베드는 프레임 이론적 접근을 사용하며, 프레임 연산자를 통해 이중 프레임을 활용하여 완전 복원을 보장한다.
• 중복도 ≥3일 경우, 주파수 도메인 프레임 연산자를 사용하여 캐논리컬 이중 필터 베드를 해석적으로 계산한다.
• 중복도 <3일 경우, 대각 행렬 조절을 적용한 반복적 공액 기울기 방법을 사용하여 재건 문제를 해결한다.
• 적절한 필터 설계와 프레임 경계를 통해 BIBO 안정성과 효과적인 에지얼리어스 억제를 확보한다.
• 변동 가능한 다운샘플링 인자와 비균일한 필터 분포를 지원하여 탄력적인 시간-주파수 해상도를 가능하게 한다.

실험 결과

연구 질문

• RQ1 청각 주파수 해상도를 유지하면서도 완전 복원을 달성할 수 있는 청각에 기반한 필터 베드는 가능한가?
• RQ2 낮은 중복도를 포함하여 광범위한 중복도 범위에서 효율적으로 완전 복원을 달성할 수 있는 방법은 무엇인가?
• RQ3 제안된 필터 베드는 재건 오차와 하위채널 처리에 대한 내성 면에서 감마톤 필터 베드와 비교해 어떻게 다른가?
• RQ4 청각 주파수 척도(ERB, Bark, Mel)를 사용할 경우 필터 베드 성능과 설계 효율성에 어떤 영향을 미치는가?
• RQ5 프레임 이론적 접근을 통해 균일한 다운샘플링이나 높은 중복도 없이도 안정적이고 효율적인 재건을 가능하게 할 수 있는가?

주요 결과

• 제안된 AUDlet 필터 베드는 중복도 ≥3일 경우 캐논리컬 이중 필터 베드의 해석적 계산을 통해 완전 복원을 달성한다.
• 중복도가 약 1.1까지 낮아도, 대각 조절을 적용한 반복적 공액 기울기 방법을 통해 완전 복원을 달성한다.
• 특히 낮은 중복도에서 감마톤 필터 베드보다 AUDlet 필터 베드의 재건 오차가 현저히 낮다.
• 더 나은 에지얼리어스 억제와 안정적인 프레임 경계 덕분에 AUDlet은 하위채널 처리 왜곡에 더 뛰어난 저항성을 보인다.
• 큰 다운샘플링 인자를 가진 비균일 필터 베드의 효율적 설계를 가능하게 하여 탄력적인 시간-주파수 해상도를 지원한다.
• 성능 향상은 주로 낮은 중복도 상황에서 두드러지며, 이 경우 감마톤 필터 베드는 높은 재건 오차와 불안정성을 보인다.