[논문 리뷰] Realistic Defocus Blur for Multiplane Computer-Generated Holography

Koray Kavaklı, Yuta Itoh외 2명|arXiv (Cornell University)|2022. 05. 14.

Advanced Optical Imaging Technologies인용 수 6

한 줄 요약

이 논문은 다중 평면 컴퓨터 생성 홀로그래피(CGH) 파이프라인을 제안하며, 비균일한 빛의 영향을 받는 것처럼 가까운 정확도의 불투명한 흐림과 간섭 무늬를 제거한다. 이중 목표 설정 방식과 초점이 맞춰진 영역 및 흐린 영역에 대해 별도의 손실 함수를 도입함으로써, 단일 단위의 위상 뿐인 SLM과 반복 최적화를 사용하여 여러 깊이 평면에서 대비와 현실감을 향상시킨다. 이는 6개의 깊이 평면을 가진 개념 증명용 레이저 기반 디스플레이에서 검증되었다.

ABSTRACT

This paper introduces a new multiplane CGH computation method to reconstruct artefact-free high-quality holograms with natural-looking defocus blur. Our method introduces a new targeting scheme and a new loss function. While the targeting scheme accounts for defocused parts of the scene at each depth plane, the new loss function analyzes focused and defocused parts separately in reconstructed images. Our method support phase-only CGH calculations using various iterative (e.g., Gerchberg-Saxton, Gradient Descent) and non-iterative (e.g., Double Phase) CGH techniques. We achieve our best image quality using a modified gradient descent-based optimization recipe where we introduce a constraint inspired by the double phase method. We validate our method experimentally using our proof-of-concept holographic display, comparing various algorithms, including multi-depth scenes with sparse and dense contents.

연구 동기 및 목표

• 다중 평면 CGH에서 간섭성 조명이 인위적인 무늬와 잘못된 흐림을 유도함으로써 간섭성과 비간섭성 흐림 간의 시각적 불일치 문제를 해결한다.
• 간섭성 빛 원천을 사용할 때 재구성된 3차원 장면에서 대비 손실과 아티팩트 생성을 완화하여 영상 품질을 향상시킨다.
• 다양한 CGH 방법(예: 반복적(예: Gerchberg-Saxton, Gradient Descent) 및 비반복적(예: 더블 포지션) 기법 포함)과 호환 가능한 일반화 가능한 홀로그램 생성 파이프라인을 개발한다.
• 다양한 깊이 평면에서 시각적으로 현실적인 깊이 정보와 초점 변화를 갖춘 고품질, 아티팩트 없는 3차원 재구성을 가능하게 한다.
• 3색 레이저와 위상 뿐인 SLM을 사용한 개념 증명용 홀로그래픽 디스플레이에서 실험적으로 방법을 구현한다.

제안 방법

• 각 깊이 평면에서 장면의 흐린 영역을 포함하는 새로운 타겟팅 기법을 도입하여 재구성 과정에서 여러 평면에 걸친 흐림을 고려하도록 보장한다.
• 재구성된 영상의 초점이 맞춰진 영역와 흐린 영역를 별도로 평가하는 새로운 손실 함수를 설계하여 현실적인 흐림 행동을 위한 타겟팅 최적화를 가능하게 한다.
• 더블 포지션 방법의 제약 조건과 확률적 경량 최하강(SGD)을 조합한 하이브리드 최적화 레시피를 구현하여 수렴성과 영상 품질을 향상시킨다.
• Gerchberg-Saxton, SGD, 더블 포지션 등 다양한 알고리즘을 포함한 위상 뿐인 CGH를 지원하여 광범위한 호환성과 확장성을 확보한다.
• 3개의 레이저(473–515–639 nm), 위상 뿐인 SLM, 그리고 실험적 검증을 위한 맞춤형 광학 및 광기계 부품을 사용하여 개념 증명용 홀로그래픽 디스플레이를 제작한다.
• 일관된 레이저 출력을 유지하면서 20 ms 동안 단색 노출을 통해 전체 색상 영상을 촬영한 후, 후처리 단계에서 조합하여 시각적 정확도를 보존한다.

실험 결과

연구 질문

• RQ1 초점이 맞춰진 영역와 흐린 영역를 별도로 처리하는 손실 함수가 다중 평면 CGH에서 흐림의 현실감을 향상시키는 데 효과적인가?
• RQ2 흐린 영상 성분을 포함하는 수정된 타겟팅 기법이 다중 평면 홀로그래픽 재구성의 정서적 품질을 향상시키는 데 어떻게 기여하는가?
• RQ3 더블 포지션 제약 조건과 SGD를 조합한 하이브리드 최적화 접근법이 간섭성 아티팩트(예: 무늬)를 줄이면서도 대비를 유지하는 데 얼마나 효과적인가?
• RQ4 단지 간섭성 빛 원천과 위상 뿐인 SLM만을 사용하여도 근사적으로 비간섭성 흐림을 달성할 수 있는가?
• RQ5 실제 홀로그래픽 디스플레이에서 다양한 장면 밀도(희박한 내용 대 비희박한 내용)와 깊이 구성에서 이 방법은 어떻게 성능을 발휘하는가?

주요 결과

• 제안된 방법은 고화질을 자랑하지만 대비 손실이 발생하는 최첨단 텐서 홀로그래피에 비해 대비가 훨씬 향상되고 시각적 아티팩트가 감소한 결과를 얻었다.
• 간섭성 홀로그래피에서 흔히 발생하는 눈에 띄는 무늬가 재구성된 영상에서 효과적으로 억제되어 더 자연스럽고 비간섭성 흐림과 유사한 흐림을 구현했다.
• 개념 증명용 디스플레이를 사용하여 6개의 깊이 평면을 가진 다중 평면 3차원 장면을 성공적으로 재구성하였으며, 정서적 현실감과 아티팩트 없는 초점 신호를 보였다.
• 더블 포지션 제약 조건과 SGD를 조합한 하이브리드 최적화 레시피가 가장 높은 영상 품질을 제공하여 표준 반복적 및 비반복적 방법을 능가했다.
• 실험 결과, 동일 하드웨어에서 평가했을 때 텐서 홀로그래피에 비해 눈에 띄게 뛰어난 재구성 영상을 제공함을 입증하였으며, 특히 흐림의 현실감과 대비 측면에서 뛰어났다.
• 이 방법은 Gerchberg-Saxton, SGD, 더블 포지션 등 다양한 CGH 기법과 호환되어 광범위한 적용 가능성과 확장성을 입증했다.