Skip to main content
QUICK REVIEW

[논문 리뷰] SSIG: A Visually-Guided Graph Edit Distance for Floor Plan Similarity

Casper van Engelenburg, Seyran Khademi|arXiv (Cornell University)|2023. 09. 08.
3D Surveying and Cultural HeritageEarth and Planetary Sciences인용 수 3
한 줄 요약

이 논문은 실내 구조 유사성을 측정하기 위해 IoU(Intersection-over-Union)와 GED(Graph Edit Distance)를 융합한 시각적 지도 기반 그래프 편집 거리인 SSIG를 제안한다. 이미지 수준 및 그래프 수준의 메트릭을 융합함으로써, 학습이 필요 없이도 대규모 플로어 플랜 데이터베이스에서 효율적이고 정확한 순위 매기기가 가능하며, 개별적으로 IoU나 GED를 사용할 때보다 우수하고, 학습 기반 방법과 동등한 검색 품질을 달성한다.

ABSTRACT

We propose a simple yet effective metric that measures structural similarity between visual instances of architectural floor plans, without the need for learning. Qualitatively, our experiments show that the retrieval results are similar to deeply learned methods. Effectively comparing instances of floor plan data is paramount to the success of machine understanding of floor plan data, including the assessment of floor plan generative models and floor plan recommendation systems. Comparing visual floor plan images goes beyond a sole pixel-wise visual examination and is crucially about similarities and differences in the shapes and relations between subdivisions that compose the layout. Currently, deep metric learning approaches are used to learn a pair-wise vector representation space that closely mimics the structural similarity, in which the models are trained on similarity labels that are obtained by Intersection-over-Union (IoU). To compensate for the lack of structural awareness in IoU, graph-based approaches such as Graph Matching Networks (GMNs) are used, which require pairwise inference for comparing data instances, making GMNs less practical for retrieval applications. In this paper, an effective evaluation metric for judging the structural similarity of floor plans, coined SSIG (Structural Similarity by IoU and GED), is proposed based on both image and graph distances. In addition, an efficient algorithm is developed that uses SSIG to rank a large-scale floor plan database. Code will be openly available.

연구 동기 및 목표

  • 플로어 플랜에서 전체적인 구조적 유사성을 캐치하지 못하는 기존 메트릭(예: IoU, GED)의 한계를 해결하기 위해.
  • 이미지 표현과 그래프 표현을 융합함으로써 간단하고 학습이 없는 메트릭을 개발하여 구조적 유사성을 견고하게 측정하기 위해.
  • IoU와 GED의 장점을 융합한 계산 효율적인 프레임워크를 통해 대규모 플로어 플랜 검색을 효율적으로 가능하게 하기 위해.
  • 딥 러닝 기반 메트릭 학습에 의존하지 않고도 플로어 플랜 생성 및 검색 시스템 평가를 위한 강력한 베이스라인을 제공하기 위해.
  • 개별 메트릭의 실패를 상쇄할 수 있는 작업에 종속되지 않은 통합된 플로어 플랜 유사성 측정 기준을 수립하기 위해.

제안 방법

  • IoU와 GED를 융합한 하이브리드 메트릭인 SSIG(Structural Similarity by IoU and GED)를 제안하며, 이는 시각적 형태와 겹침 유사성에 대한 IoU와 위상적, 연결성 유사성에 대한 GED를 결합한다.
  • 초기 거 now 필터로 IoU를 사용하여 후보 플로어 플랜을 선별하고, 이후 세밀한 구조적 비교를 위해 GED를 적용한다.
  • 이중 단계 순위 매기기 전략을 사용: 먼저 IoU로 순위를 매겨 후보 집합 크기를 제한하고, 이후 상위-n개 후보에 대해 최종 순위 매기기 위해 SSIG를 계산한다.
  • 단일 CPU에서 쿼리당 1~5초 내로 SSIG를 계산할 수 있는 효율적인 알고리즘을 개발하여, GMN 기반 방법(쿼리당 약 1500초)보다 약 300배 빠르게 작동한다.
  • RPLAN 데이터셋에 기반한 SSIG 기반 순위 매기기 전략을 적용하여 확장성과 검색 효율성을 입증한다.
  • IoU와 GED의 가중 조합을 통해 SSIG를 계산하며, 최종 점수는 공간적 겹침과 위상적 구조 양쪽을 반영한다.
Figure 1: Floor plan representations . Left: Pictorial image. Center: Semantic image. Right: Access graph.
Figure 1: Floor plan representations . Left: Pictorial image. Center: Semantic image. Right: Access graph.

실험 결과

연구 질문

  • RQ1간단하고 학습이 없는 메트릭이 IoU나 GED를 개별적으로 사용할 때보다 플로어 플랜의 구조적 유사성을 측정하는 데 뛰어나게 성능을 낼 수 있는가?
  • RQ2실세계 플로어 플랜 데이터에서 IoU와 GED는 어떤 상관관계를 가지며, 유사성 캐치에 어떤 방식으로 실패하는가?
  • RQ3이미지 수준(IoU)과 그래프 수준(GED) 메트릭을 융합하면 플로어 플랜에 대해 더 견고하고 통합적인 유사성 측정이 가능한가?
  • RQ4제안된 SSIG 메트릭은 딥 러닝 없이도 대규모 플로어 플랜 검색에 대해 충분히 효율적이고 확장 가능한가?
  • RQ5SSIG는 IoU 전용, GED 전용, 학습 기반 메트릭 베이스라인 대비 검색 품질을 어느 정도 향상시키는가?

주요 결과

  • IoU와 GED는 약한 상관관계를 보이며, 서로 다른 측면의 구조적 유사성을 캐치하고 있음을 시사하며, 상호 교체 가능하지 않다.
  • IoU는 기하학적 변형에 매우 민감하며, 문이나 벽 제거와 같은 위상적 변화를 감지하지 못하지만, GED는 형태나 척도 변화를 간과한다.
  • SSIG는 그래프 매칭 네트워크(GMN)를 사용하는 최신 딥 러닝 기반 메트릭 학습 방법과 정성적으로 동등한 검색 성능을 달성한다.
  • 제안된 알고리즘은 단일 CPU에서 쿼리당 1~5초 내로 SSIG를 계산하여, GMN 기반 추론(쿼리당 약 1500초)보다 약 300배 빠르게 작동한다.
  • RPLAN 데이터셋에서 상위-50개의 IoU 후보를 사용해 SSIG를 계산할 경우 안정적이고 높은 품질의 검색 결과를 얻을 수 있으며, n ≥ 50를 초과해도 성능 향상이 미미하다.
  • SSIG는 개별 메트릭의 실패를 효과적으로 보완한다: 낮은 IoU이지만 높은 GED를 보이는 경우, 또는 그 반대의 경우도 두 메트릭의 융합 덕분에 정확히 순위 매겨진다.
Figure 2: Visual- and graph-based similarity metrics for floor plans . A) IoU can be directly used as a measure for similarity between semantic image representations. mIoU between the semantic images is computed through Eq. 3 (floor plans have 3 semantic labels); in this case being 0.90 which is a r
Figure 2: Visual- and graph-based similarity metrics for floor plans . A) IoU can be directly used as a measure for similarity between semantic image representations. mIoU between the semantic images is computed through Eq. 3 (floor plans have 3 semantic labels); in this case being 0.90 which is a r

더 나은 연구,지금 바로 시작하세요

논문 읽기부터 검토까지, 연구 시간을 획기적으로 줄여보세요.

카드 등록 없음 · 무료 플랜 제공

이 리뷰는 AI가 만들고, 인간 에디터가 검토했습니다.