[논문 리뷰] Design and Implementation of a 3D Undersea Camera System

Xida Chen, Steve Sutphen외 2명|arXiv (Cornell University)|2015. 04. 07.

Infrared Target Detection Methodologies참고 문헌 1인용 수 6

한 줄 요약

이 논문은 구조화된 빛(grayscale 코드) 기반 방법을 사용하여 수중 서식지의 밀리미터 정확도로 연속적인 3D 재구성을 실현하는 영구 설치형 3D 수중 카메라 시스템을 제시한다. 이 시스템은 다수의 카메라와 프로젝터를 활용하며, 저비용 하드웨어와 실시간 제어를 통해 장기 모니터링을 가능하게 하며, ROV/AUV 조사에 비해 시간 해상도와 데이터 연속성에서 뛰어나다.

ABSTRACT

In this paper, we present the design and development of an undersea camera system. The goal of our system is to provide a 3D model of the undersea habitat in a long-term continuous manner. The most important feature of our system is the use of multiple cameras and multiple projectors, which is able to provide accurate 3D models with an accuracy of a millimeter. By introducing projectors in our system, we can use many different structured light methods for different tasks. There are two main advantages comparing our system with using ROVs or AUVs. First, our system can provide continuous monitoring of the undersea habitat. Second, our system has a low hardware cost. Comparing to existing deployed camera systems, the advantage of our system is that it can provide accurate 3D models and provides opportunities for future development of innovative algorithms for undersea research.

연구 동기 및 목표

• 간헐적인 ROV/AUV 조사의 한계를 해결하기 위해 고비용, 희박한 데이터 수집 주기, GPS 정확도 부족 문제를 해결한다.
• 고시간 해상도로 장기적인 수중 서식지 모니터링을 가능하게 한다.
• 정확한 3D 모델을 제공하는 저비용 영구 설치형 시스템을 개발한다.
• 수중 3D 재구성에서 수면 굴절과 거대한 데이터 볼륨으로 인한 과제를 해결한다.
• 미래의 수중 모니터링 및 서식지 분석 알고리즘 개발을 위한 확장 가능한 플랫폼을 제공한다.

제안 방법

• 심해 수중 배치를 고려한 방수 및 압력저항성 케이스에 8대의 카메라와 3대의 프로젝터를 설치한다.
• 원격 소프트웨어 제어 기반의 전원 케이블 스위치 기능을 갖춘 Web-I 파wr 리lay 보드를 사용한 이중 PC 아키텍처를 도입한다.
• 그레이 코드 패턴을 활용한 구조화된 빛 스캐닝을 적용하여 수중 환경의 고정밀 3D 재구성을 수행한다.
• 내재 카메라 파rameter와 상대적 카메라 자세를 결정하기 위한 시스템 캘리브레이션을 수행하며, 물에 의한 왜곡을 보정하기 위해 굴절면 보정을 포함한다.
• 현장 저장소 요구량을 최소화하기 위해 캡처한 이미지와 3D 모델을 직접 원격 서버로 업로드하는 데이터 파이프라인을 구현한다.
• 이더넷 스위치를 활용한 케이블 기반 네트워크 아키텍처를 도입하여 실시간 데이터 스트리밍과 육상에서의 원격 시스템 제어를 가능하게 한다.

실험 결과

연구 질문

• RQ1 영구 설치형 저비용 카메라 시스템이 수중 서식지의 3D 재구성에서 밀리미터 정확도를 달성할 수 있는가?
• RQ2 탁도가 짙고 굴절이 심한 수중 환경에서, 다수의 프로젝터를 활용한 구조화된 빛 스캐닝은 전통적인 스테레오 비전 대비 3D 재구성 정확도를 어떻게 향상시키는가?
• RQ3 원격 전원 제어 및 실시간 데이터 스트리밍을 갖춘 시스템이 수중 생태계의 지속적이고 장기적인 모니터링을 얼마나 잘 실현할 수 있는가?
• RQ4 캘리브레이션을 통해 시스템은 수중 굴절이 3D 재구성 정확도에 미치는 영향을 어떻게 완화하는가?
• RQ5 이 시스템은 더 높은 시간 해상도를 제공함으로써 ROV/AUV 조사에 비해 생태 모니터링에 실현 가능하고 확장 가능한 대안이 될 수 있는가?

주요 결과

• 실내 실험 조건에서 그레이 코드 기반의 구조화된 빛을 사용하여 산호초 모델의 3D 재구성에서 밀리미터 정확도를 달성하였다.
• 3D 재구성 결과는 PMVS2 방법([15]에서 사용됨)에 비해 표면 질감과 미세 구조를 더 잘 유지하는 것으로 나타났다.
• 설치 직후부터 연속적인 이미지 캡처와 3D 재구성을 성공적으로 수행하여 장기 운영 가능성의 타당성을 확인하였다.
• 소프트웨어 프로그래밍 가능한 Web-I 리lay 보드의 사용으로 모든 장치의 원격 제어가 가능했으며, 빛의 간섭을 최소화하기 위해 프로젝터의 선택적 작동도 가능했다.
• 소규모 프로젝터의 정렬 오류로 인해 부분적인 3D 재구성이 관측되었으며, 이는 캘리브레이션 오류로 확인되었고 향후 버전에서 수정 가능했다.
• ROV/AUV 기반 모니터링에 비해 데이터 연속성과 시간 해상도에서 뛰어나, 연 2회 조사에서 벗어나 필요 시 또는 매시간 데이터 수집이 가능했다.