Skip to main content
QUICK REVIEW

[논문 리뷰] Building Extraction from Remote Sensing Images via an Uncertainty-Aware Network

Wei He, Jiepan Li|arXiv (Cornell University)|2023. 07. 23.
Automated Road and Building ExtractionEngineering인용 수 10
한 줄 요약

본 논문은 고해상도 원격탐사 이미지에서 건물 추출을 위한 불확실성 인지 인코더-디코더 프레임워크인 UANet을 제안하며, Prior Information Guide Module (PIGM)과 Uncertainty-Aware Fusion Module (UAFM)을 포함하고, Uncertainty Rank Algorithm (URA)에 의해 가이드되어 예측의 불확실성을 낮추는 방식으로 정제한다.

ABSTRACT

Building extraction aims to segment building pixels from remote sensing images and plays an essential role in many applications, such as city planning and urban dynamic monitoring. Over the past few years, deep learning methods with encoder-decoder architectures have achieved remarkable performance due to their powerful feature representation capability. Nevertheless, due to the varying scales and styles of buildings, conventional deep learning models always suffer from uncertain predictions and cannot accurately distinguish the complete footprints of the building from the complex distribution of ground objects, leading to a large degree of omission and commission. In this paper, we realize the importance of uncertain prediction and propose a novel and straightforward Uncertainty-Aware Network (UANet) to alleviate this problem. To verify the performance of our proposed UANet, we conduct extensive experiments on three public building datasets, including the WHU building dataset, the Massachusetts building dataset, and the Inria aerial image dataset. Results demonstrate that the proposed UANet outperforms other state-of-the-art algorithms by a large margin.

연구 동기 및 목표

  • 고해상도 RS 이미지에서의 건물 추출에서의 불확실한 예측을 동기 부여하고 해결한다.
  • 픽셀 단위의 불확실성을 순위화하고 감소시키는 종단 간 Uncertainty-Aware Network(UANet)을 제안한다.
  • 사전 정보 가이드 모듈(PIGM)을 개발하여 prior 추출 맵을 활용해 고수준 특징을 향상시킨다.
  • 특징을 수준별로 정제하고 낮은 불확실성 최종 맵을 생성하기 위해 Uncertainty-Aware Fusion Module(UAFM)과 Uncertainty Rank Algorithm(URA)을 도입한다.
  • 세 가지 공개 데이터셋에서 성능을 검증하고 최신 방법과 비교한다.

제안 방법

  • 일반적인 인코더–디코더 백본을 사용하여 초기 불확실한 추출 맵을 얻는다.
  • 초기 맵을 활용하여 고수준 특징의 공간 및 채널 지도를 안내하기 위해 교차 주의(cross-attention)와 함께 Prior Information Guide Module(PIGM)을 설계한다.
  • 전경과 배경의 불확실성을 정량화하고 순위 기반 가중치를 생성하기 위해 Uncertainty Rank Algorithm(URA)을 도입한다.
  • 불확실성 가이드 가중치를 활용하여 고수준과 하위 수준 특징을 거칠게-to-정밀하게 융합하는 Uncertainty-Aware Fusion Module(UAFM)을 개발한다.
  • 단일 BCE 손실로 다수의 중간 불확실성 맵(M1–M5)을 감독하여 최종 저불확실성 추출 맵을 최적화한다.
Figure 2: The structure of the Uncertainty-Aware Network, which is composed of a general encoder-decoder, a prior information guide module (PIGM), and an uncertainty-aware fusion module (UAFM).
Figure 2: The structure of the Uncertainty-Aware Network, which is composed of a general encoder-decoder, a prior information guide module (PIGM), and an uncertainty-aware fusion module (UAFM).

실험 결과

연구 질문

  • RQ1다양한 스케일과 배경을 가진 원격 탐사 이미지에서 불확실성 인지 모델링이 건물 윤곽 추출을 향상시킬 수 있는가?
  • RQ2사전 추출 맵을 교차 주의 방식으로 고수준 특징 정제에 효과적으로 어떻게 사용할 수 있는가?
  • RQ3URA를 통해 전경/배경 불확실성 순위를 도입하는 것이 디코딩 및 최종 맵의 확실성을 향상시키는가?
  • RQ4WHU, Massachusetts, Inria 건물 데이터셋에서 UANet의 성능은 최신 방법과 어떻게 비교되는가?

주요 결과

  • UANet은 세 가지 공개 데이터셋에서 최첨단 성능을 달성하여 WHU, Massachusetts, Inria 데이터셋에서 IoU, F1, Precision, Recall 측면에서 기존 방법을 능가한다.
  • PIGM과 교차 주의 기반의 공간/채널 지도가 고수준 특징 학습 및 최종 세분화 정확도를 향상시킨다.
  • URA는 레벨별 불확실성 인식 정제를 가능하게 하여 최종 추출 맵의 불확실성을 낮추고 경계가 더 뚜렷해지도록 한다.
  • BuildFormer 및 다른 베이스라인에 비해 IoU에서 눈에 띄는 이점을 보이며(Inria에서 IoU가 최대 1.84pp 향상 등) 건물 윤곽의 정성적 구분도 더 우수하다.
Figure 3: The structure of the Prior Information Guide Module (PIGM).
Figure 3: The structure of the Prior Information Guide Module (PIGM).

이 논문 읽기

누빈트 뷰어에서 원문을 열고, 읽으면서 궁금한 곳을 바로 물어보세요.

누빈트에서 이 논문 읽기

이 리뷰는 AI가 논문 원문을 바탕으로 만들었습니다. 인용하기 전에 원문을 확인해 주세요.