[논문 리뷰] Lensless Compressive Imaging

Xin Yuan, Hong Jiang외 2명|arXiv (Cornell University)|2015. 08. 14.

Sparse and Compressive Sensing Techniques참고 문헌 45인용 수 11

한 줄 요약

이 논문은 광학 렌즈 없이 단일 센서와 프로그래머블 어플레처 어레이를 사용하여 압축 측정을 캡처하는 렌즈리스 압축 영상 시스템을 제안한다. 이는 겹치는 영상 패치의 희박한 표현을 활용한 anytime 알고리즘을 도입하여, 원본 픽셀 수의 약 ~10%만으로도 고압축 비율에서 JPEG 수준의 재구성 품질을 달성한다.

ABSTRACT

We develop a lensless compressive imaging architecture, which consists of an aperture assembly and a single sensor, without using any lens. An anytime algorithm is proposed to reconstruct images from the compressive measurements; the algorithm produces a sequence of solutions that monotonically converge to the true signal (thus, anytime). The algorithm is developed based on the sparsity of local overlapping patches (in the transformation domain) and state-of-the-art results have been obtained. Experiments on real data demonstrate that encouraging results are obtained by measuring about 10% (of the image pixels) compressive measurements. The reconstruction results of the proposed algorithm are compared with the JPEG compression (based on file sizes) and the reconstructed image quality is close to the JPEG compression, in particular at a high compression rate.

연구 동기 및 목표

• 광학 렌즈를 제거함으로써 크기, 무게, 복잡성을 줄이면서도 영상 품질을 유지하는 렌즈리스 영상 아키텍처를 개발한다.
• 반복 횟수가 증가할수록 진짜 영상 신호로 단조롭게 수렴하는 anytime 재구성 알고리즘을 설계한다.
• 낮은 측정 비율에서도 고품질 영상 재구성을 달성하여, JPEG 압축 수준과 비교할 수 있도록 한다.
• 실세계 가시광선 스펙트럼 데이터를 대상으로 시스템의 실현 가능성과 성능을 입증한다.

제안 방법

• 시스템은 독립적으로 제어 가능한 어플레처 요소의 2차원 어레이와 단일 광검출기를 사용하여 각 어플레처를 통과하는 광선의 통합을 통해 압축 측정을 캡처한다.
• 영상 모델은 선형 투영으로 기술되며, y = A H α로 표현되며, 여기서 y는 압축 측정 벡터, A는 감지 행렬, H는 변환 행렬, α는 겹치는 영상 패치의 희박 계수를 나타낸다.
• 반복적 임계처리와 희박 코딩을 기반으로 한 anytime 알고리즘이 개발되어, 해의 수열이 진짜 신호로 단조롭게 수렴함을 보장한다.
• 이 알고리즘은 겹치는 국소 영상 패치의 변환 도메인에서 희박성을 강제함으로써 최신의 희박 표현 기법을 활용한다.
• 제한된 임의성 성질(Restricted Isometry Property, RIP) 조건 하에서 수렴이 증명되며, 각 반복 단계에서 재구성 오차가 단조롭게 감소함을 이론적으로 보장한다.
• 모의 실험과 실물 하드웨어 실험을 통해 검증되었으며, LCD 기반 어플레처 어레이와 광전도성 센서를 사용하였다.

실험 결과

연구 질문

• RQ1 렌즈리스 영상 시스템이 단일 센서와 압축 측정만으로도 고품질 영상 재구성을 달성할 수 있는가?
• RQ2 제한된 측정 수치가 주어진 상황에서 각 반복 단계에서 점차 향상되는 영상 재구성 품질을 보장하는 anytime 알고리즘을 설계할 수 있는가?
• RQ3 압축 측정 수를 원본 픽셀 수의 약 10%로 줄였을 때 영상 품질이 어느 정도 유지될 수 있는가?
• RQ4 동일한 파일 크기에서 제안된 방법의 재구성 품질은 표준 JPEG 압축과 비교해 어떻게 되는가?
• RQ5 렌즈가 없음으로써 초점 관련 흐림이 제거되어 모든 시나리오 깊이에서 일관된 날카운 이미지를 제공할 수 있는가?

주요 결과

• 제안된 렌즈리스 압축 영상 시스템은 원본 영상의 픽셀 수의 약 10%에 해당하는 압축 측정을 사용할 때, 특히 고압축 비율에서 JPEG 압축 수준과 비교할 만한 재구성 품질을 달성한다.
• Anytime 알고리즘은 점차 향상되는 재구성 결과를 생성하며, 진짜 신호로 단조롭게 수렴하며, RIP 조건 하에서 수렴성에 대한 이론적 증명이 있다.
• 실제 데이터에 대한 실험 결과, 렌즈로 인한 뿌연 영향이 없어 모든 시나리오 깊이에서 일관된 이미지 선명도를 유지함을 입증하였다.
• 시스템은 본질적으로 다중 스펙트럼이며, 적절한 하드웨어 구성 요소를 통합함으로써 고스펙트럼 및 편광 영상으로 확장 가능하다.
• 낮은 측정 비율에서도 알고리즘 성능이 강인하며, 파일 크기 기반 비교를 통해 고압축 비율에서 JPEG 수준의 재구성 품질을 유지함을 검증하였다.
• 이론적 분석을 통해 각 반복 단계에서 재구성 오차가 단조롭게 감소하고, 표준 RIP 조건 하에서 알고리즘이 진짜 희박한 해로 수렴함을 확인하였다.