[논문 리뷰] Reflection-Aware Sound Source Localization

Inkyu An, Myungbae Son외 2명|arXiv (Cornell University)|2017. 11. 21.

Indoor and Outdoor Localization Technologies참고 문헌 24인용 수 3

한 줄 요약

이 논문은 직접 및 반사 음파 레이를 역음향 레이 트레이싱과 몬테카를로 국지화를 사용하여 모델링하는 반사 고려 3차원 음원 국소화 방법을 제안한다. 7m×7m×3m 공간에서 이동하거나 비선형 시야 조건에 있는 음원이 있더라도 평균 국소화 오차가 0.8m 이내를 기록한다. 직접 레이만을 사용하는 방법보다 고차 반사 반사를 포함시켜 정확도를 40% 향상시킨다.

ABSTRACT

We present a novel, reflection-aware method for 3D sound localization in indoor environments. Unlike prior approaches, which are mainly based on continuous sound signals from a stationary source, our formulation is designed to localize the position instantaneously from signals within a single frame. We consider direct sound and indirect sound signals that reach the microphones after reflecting off surfaces such as ceilings or walls. We then generate and trace direct and reflected acoustic paths using inverse acoustic ray tracing and utilize these paths with Monte Carlo localization to estimate a 3D sound source position. We have implemented our method on a robot with a cube-shaped microphone array and tested it against different settings with continuous and intermittent sound signals with a stationary or a mobile source. Across different settings, our approach can localize the sound with an average distance error of 0.8m tested in a room of 7m by 7m area with 3m height, including a mobile and non-line-of-sight sound source. We also reveal that the modeling of indirect rays increases the localization accuracy by 40% compared to only using direct acoustic rays.

연구 동기 및 목표

• 장애물이 있고 비선형 시야 조건이 있는 복잡한 실내 환경에서 정확한 3차원 음원 국소화 문제를 해결하기 위해.
• 지속적인 신호와 선형 시야 전파에 의존하는 전통적인 TDOA 기반 방법의 한계를 극복하기 위해.
• 음향 레이 트레이싱을 사용해 직접 및 반사 음파 경로를 모두 모델링하여 국소화 정확도를 향상시키기 위해.
• 시간 또는 위치에 걸쳐 신호를 누적하지 않고도 단일 신호 프레임에서 실시간 국소화를 가능하게 하기 위해.
• 동적인 실내 환경에서 간헐적, 이동 중, 가림된 음원을 지원하기 위해.

제안 방법

• 방의 기하 구조를 표현하기 위해 복셀 기반 옥트리 구조를 사용해 실내 환경을 재구성한다.
• TDOA 기반 방향 추정을 통해 마이크 어레이 신호로부터 직접 및 반사 음파 경로를 생성하기 위해 역음향 레이 트레이싱을 수행한다.
• 벽과 천장에서 최대 4차까지의 반사를 모의하는 바람직한 반사 효과을 고려해 반사 레이를 다중 반사(최대 4차)로 추적한다.
• 추적된 음향 경로를 따라 가능한 음원 위치를 샘플링하여 몬테카를로 국지화를 적용해 3차원 음원 위치를 추정한다.
• 입자 필터를 사용해 음원을 추적하며, 예측된 레이 경로와의 신호 일致성에 기반한 가능성 값을 계산한다.
• 단일 프레임의 오디오 입력에서 작동하여 신호 누적 없이 실시간 성능을 구현한다.

실험 결과

연구 질문

• RQ1 장애물이 있는 복잡한 실내 환경에서 단일 프레임 기반 반사 고려 음원 국소화 방법이 높은 정확도를 달성할 수 있는가?
• RQ2 직접 레이만을 사용하는 것과 비교해 고차 반사 반사를 모델링할 경우 국소화 정확도에 어떤 영향을 미치는가?
• RQ3 직접 경로가 차단되었을 때 이동하거나 간헐적인 음원을 얼마나 잘 국소화할 수 있는가?
• RQ4 가림이 있는 비선형 시야 조건에서 이 방법의 성능은 어떠한가?
• RQ5 정확도와 계산 비용의 균형을 고려할 때 최적의 반사 최대 차수는 얼마인가?

주요 결과

• 7m×7m×3m 공간에서 이동 음원과 가림이 있더라도 평균 국소화 오차가 0.8m 이내를 기록한다.
• 반사 레이를 포함시킴으로써 직접 레이만 사용하는 경우보다 국소화 정확도가 40% 향상된다.
• 장애물이 있는 왼쪽 측면에서는 평균 오차가 0.7m, 오른쪽 측면에서는 0.3m로 나타나 도전적인 조건에서도 뛰어난 강건성을 보였다.
• 5초 간격으로 켜고 꺼지는 간헐적 신호의 경우 평균 오차는 0.66m, 표준편차는 0.29m로 비연속적 소스에서도 뛰어난 성능을 보였다.
• 최대 4차 반사까지 고려할 경우 정확도 향상이 뚜렷하게 나타나, 특히 장애물 영향을 받는 측면에서 4차까지의 반사 모델링이 타당함을 입증하였다.
• 입자 필터의 결정 요소는 항상 작게 유지되며(0.1 이하), 국소화 추정의 안정적 수렴을 나타낸다.