[논문 리뷰] Industrial Smoke Detection and Visualization

Yen-Chia Hsu, Paul Dille외 2명|arXiv (Cornell University)|2018. 09. 17.

Video Surveillance and Tracking Methods참고 문헌 16인용 수 11

한 줄 요약

이 논문은 컴퓨터 시각 기술과 상호작용 가능한 타임라인을 활용하여, 시간 경과에 따라 촬영된 영상에서 변화 탐지 및 질감 분할 기법을 사용해 연기의 존재를 자동으로 식별하고 시각화하는 소프트웨어 도구를 제시한다. 이는 시민 과학자들이 코크 밀크리프이닝 공장의 유출 배출을 효율적으로 탐지하고 기록하는 데 기여한다. 시스템은 상호작용 가능한 타임라인, 빠른 재생 기능, 자동 애니메이션 생성 기능을 통합하여 스토리텔링과 지역 사회 참여를 지원한다.

ABSTRACT

As sensing technology proliferates and becomes affordable to the general public, there is a growing trend in citizen science where scientists and volunteers form a strong partnership in conducting scientific research including problem finding, data collection, analysis, visualization, and storytelling. Providing easy-to-use computational tools to support citizen science has become an important issue. To raise the public awareness of environmental science and improve the air quality in local areas, we are currently collaborating with a local community in monitoring and documenting fugitive emissions from a coke refinery. We have helped the community members build a live camera system which captures and visualizes high resolution timelapse imagery starting from November 2014. However, searching and documenting smoke emissions manually from all video frames requires manpower and takes an impractical investment of time. This paper describes a software tool which integrates four features: (1) an algorithm based on change detection and texture segmentation for identifying smoke emissions; (2) an interactive timeline visualization providing indicators for seeking to interesting events; (3) an autonomous fast-forwarding mode for skipping uninteresting timelapse frames; and (4) a collection of animated smoke images generated automatically according to the algorithm for documentation, presentation, storytelling, and sharing. With the help of this tool, citizen scientists can now focus on the content of the story instead of time-consuming and laborious works.

연구 동기 및 목표

• 고해상도 타임랩스 영상에서 산업 연기 배출을 수동으로 모니터링하는 데 드는 시간과 노력을 줄이고자 한다.
• 비전문가도 접근 가능한 계산 도구를 제공하여 지역 기반 환경 모니터링을 지원하고자 한다.
• 코크 리파이너리와 같은 산업 시설의 유출 배출에 대한 대중의 인식 향상과 기록을 향상시키고자 한다.
• 자동 탐지 및 시각화를 통해 대기 오염의 증거를 식별하고 공유하는 과정을 간소화하고자 한다.
• 검출된 사건에서 자동으로 애니메이션을 생성하여 스토리텔링과 옹호 활동을 지원하고자 한다.

제안 방법

• 픽셀 수준의 밝기 및 질감 변화를 분석하여 영상 프레임에서 연기를 식별하기 위해 변화 탐지 및 질감 분할 알고리즘을 적용한다.
• 잠재적인 연기 사건을 강조표시하는 상호작용 가능한 타임라인 시각화를 개발하여 신속한 탐색과 검토를 가능하게 한다.
• 저운동 및 저질감 콘텐츠 기반으로 관심 없는 프레임을 건너뛰는 자율적 빠른 재생 모드를 구현한다.
• 검출된 사건에서 자동으로 애니메이션 형식의 연기 이미지 시퀀스를 생성하여 기록, 발표 및 공유에 활용한다.
• 시민 과학자들이 지속적으로 환경 모니터링을 수행할 수 있도록 도구를 공동체 중심 시스템에 통합한다.
• 2014년 11월 이래로 촬영된 고해상도 타임랩스 영상을 입력으로 사용하여 탐지 및 시각화 파이프라인을 구축한다.

실험 결과

연구 질문

• RQ1 장기간의 산업 현장 타임랩스 영상에서 자동화된 컴퓨터 시각 기법을 통해 연기를 어떻게 탐지할 수 있는가?
• RQ2 어떤 상호작용 가능한 시각화 방법이 시민 과학자가 연기 배출 사건을 효율적으로 위치하고 검토하는 데 도움이 되는가?
• RQ3 자동으로 프레임을 건너뛰는 기술이 중요한 사건을 놓치지 않고 대규모 영상 데이터 세트를 검토하는 데 얼마나 효율성을 높이는가?
• RQ4 자동 애니메이션 생성 기술이 지역 기반 환경 모니터링에서 스토리텔링과 옹호 활동에 얼마나 기여하는가?
• RQ5 이러한 시스템은 실제 공기 질 모니터링에 있어 시민 과학 워크플로우에 어떻게 효과적으로 통합될 수 있는가?

주요 결과

• 이 소프트웨어 도구는 연기 탐지 및 프레임 탐색 자동화를 통해 타임랩스 영상 검토에 소요되는 수동 작업을 성공적으로 줄였다.
• 변화 탐지 및 질감 분할 알고리즘이 복잡한 배경 환경에서도 연기 플룸을 효과적으로 식별했다.
• 상호작용 가능한 타임라인 시각화 기능을 통해 사용자는 잠재적인 연기 사건을 신속하게 위치하고 집중할 수 있었다.
• 자율적 빠른 재생 모드가 저조도나 낮은 질감의 영역을 건너뛰어 영상 검토 속도를 크게 향상시켰다.
• 자동으로 생성된 애니메이션 형식의 연기 시퀀스는 기록 및 대중 홍보에 활용 가능한 재사용 가능하고 공유 가능한 시각적 증거를 제공했다.
• 기술적 장벽을 낮춤으로써 시스템은 지속적인 지역 사회 참여를 지원하여 환경 모니터링에 기여했다.