[논문 리뷰] Repairing and Inpainting Damaged Images using Diffusion Tensor

Faouzi Benzarti, Hamid Amiri|arXiv (Cornell University)|2013. 05. 09.

Image and Signal Denoising Methods참고 문헌 11인용 수 4

한 줄 요약

이 논문은 이sophote 곡선을 따라 확산을 제한함으로써 국소적 이미지 기하학을 유지하는 비선형 확산 텐서 방법을 제안한다. 이는 색상 이미지의 손상된 영역을 효과적으로 복구한다. 경계 구조를 추적하고 잡음 요소를 최소화함으로써, 합성 이미지와 실제 사진 이미지 모두에서 고품질의 결과를 달성한다.

ABSTRACT

Removing or repairing the imperfections of a digital images or videos is a very active and attractive field of research belonging to the image inpainting technique. This later has a wide range of applications, such as removing scratches in old photographic image, removing text and logos or creating cartoon and artistic effects. In this paper, we propose an efficient method to repair a damaged image based on a non linear diffusion tensor. The idea is to track perfectly the local geometry of the damaged image and allowing diffusion only in the isophotes curves direction. To illustrate the effective performance of our method, we present some experimental results on test and real photographic color images

연구 동기 및 목표

• 스크래치나 불필요한 물체와 같은 손상되거나 불완전한 디지털 이미지를 복구하는 데 도전하는 것.
• 모서리 및 윤곽선과 같은 국소 기하학적 구조를 유지함으로써 이미지 인painting을 향상시키는 것.
• 확산을 이소포트 방향으로 제한함으로써 수리된 영역의 구조적 일관성을 향상시키는 방법을 개발하는 것.
• 시험 이미지와 실제 사진 색상 이미지 모두에서 효과를 입증하는 것.

제안 방법

• 이 방법은 이미지 구조를 모델링하고 확산 과정을 안내하기 위해 비선형 확산 텐서를 사용한다.
• 확산은 이미지 내 강도 등고선을 나타내는 이소포트 곡선의 탄젠트 방향으로 제한된다.
• 이미지 기울기 정보를 바탕으로 확산 텐서를 계산하여 국소 기하학을 적응적으로 추적한다.
• 텐서는 확산이 오직 매끄러운 강도 윤곽선을 따라만 일어나도록 보장하여 모서리 너머로의 흐림을 방지한다.
• 손상된 영역으로 완전한 영역에서 정보를 전파하기 위해 반복적으로 적용된다.
• 이 방법은 확산 텐서에서 유도된 편미분방정식(PDE)을 사용하여 공간 도메인에서 작동한다.

실험 결과

연구 질문

• RQ1 경계 및 윤곽선과 같은 국소 기하학적 구조를 유지함으로써 이미지 인painting을 어떻게 향상시킬 수 있는가?
• RQ2 확산을 이소포트 방향으로 제한하면 수리된 이미지의 잡음 요소를 줄이고 시각적 품질을 향상시킬 수 있는가?
• RQ3 비선형 확산 텐서 접근법은 다양한 유형의 이미지 손상에 얼마나 효과적인가?
• RQ4 이 방법은 실제 사진 색상 이미지에서 색상 일관성과 구조적 무결성을 유지할 수 있는가?

주요 결과

• 제안된 방법은 미세한 이미지 구조와 경계를 유지하면서 손상된 영역을 효과적으로 복구한다.
• 시험 이미지와 실제 사진 색상 이미지에서 결과적으로 뛰어난 시각적 품질을 보이며, 흐림이 최소한이 된다.
• 복잡한 무늬와 매끄러운 강도 전이를 처리하는 데 성공하며, 잘못된 구조를 유도하지 않는다.
• 이소포트 방향으로 확산을 제한함으로써 왜곡을 최소화하고 구조적 일관성을 유지한다.