[논문 리뷰] Rule of Three for Superresolution of Still Images with Applications to Compression and Denoising

Mario Mastriani|arXiv (Cornell University)|2014. 05. 04.

Image and Signal Denoising Methods참고 문헌 62인용 수 3

한 줄 요약

이 논문은 파형도메인 초해상도 기법인 '세 가지의 원칙'(Ro3)을 소개한다. Ro3는 인접한 수준의 근사 및 세부 하위대역 간의 공간적 관계를 활용하여 누락된 고주파 성분 하위대역 픽셀을 복원한다. 다양한 척도 간의 구조적 일관성을 활용함으로써 압축 및 노이즈 제거 성능을 향상시키며, JPEG 및 JPEG2000에서 더 높은 압축률을 달성하면서도 표준 방법보다 정밀도와 효율성 면에서 뛰어나다.

ABSTRACT

We describe a new method for superresolution of still images (in the wavelet domain) based on the reconstruction of missing details subbands pixels at a given ith level via Rule of Three (Ro3) between pixels of approximation subband of such level, and pixels of approximation and detail subbands of (i+1)th level. The histogramic profiles demonstrate that Ro3 is the appropriate mechanism to recover missing detail subband pixels in these cases. Besides, with the elimination of the details subbands pixels (in an eventual compression scheme), we obtain a bigger compression rate. Experimental results demonstrate that our approach compares favorably to more typical methods of denoising and compression in wavelet domain. Our method does not compress, but facilitates the action of the real compressor, in our case, Joint Photographic Experts Group (JPEG) and JPEg2000, that is, Ro3 acts as a catalyst compression

연구 동기 및 목표

• 학습이 없는 새로운 초해상도 기법을 개발하여 정적 이미지에서 세부 정보 복원을 향상시키는 것.
• 세부 하위대역 계수의 강력한 제거를 가능하게 함으로써 이미지 압축 효율을 향상시키는 것.
• 구조적 일관성을 활용하여 누락된 고주파 성분을 복원함으로써 노이즈 제거 기능을 제공하는 것.
• 기존 압축기(예: JPEG 및 JPEG2000)의 핵심 알고리즘을 수정하지 않고도 성능을 향상시킬 수 있는 사전처리 촉매 기능을 제공하는 것.

제안 방법

• 이 방법은 이산 파형변환(DWT) 도메인에서 작동하며, 수준 i의 세부 하위대역에서 누락된 픽셀을 중심으로 한다.
• 세 가지의 원칙(Ro3)을 적용하여 세 개의 기준 픽셀을 사용한다: 수준 i의 근사 하위대역에서 두 개, 수준 i+1의 세부 하위대역에서 한 개.
• 세 기준점의 가중 공간 보간을 통해 누락된 세부 하위대역 픽셀을 추정하며, 이로써 구조적 일관성이 유지된다.
• 히스토그램 분석을 통해 Ro3가 누락된 고주파 성분의 통계적 특성을 효과적으로 복원함을 확인하였다.
• 압축 이전에 적용되어 세부 하위대역 계수의 제거가 최소한의 시각적 손실로 가능해지도록 한다.
• 표준 압축기의 성능 향상에 기여하는 촉매 역할을 하며, 압축 논리의 수정 없이도 압축 비율을 향상시킨다.

실험 결과

연구 질문

• RQ1 학습이 없는 규칙 기반 방법이 파형 하위대역 관계를 활용하여 정적 이미지의 누락된 고주파 세부 정보를 효과적으로 복원할 수 있는가?
• RQ2 세 가지의 원칙(Ro3)이 전통적인 노이즈 제거 및 압축 기법과 비교해 이미지 품질을 얼마나 잘 유지하는가?
• RQ3 Ro3는 얼마나 더 강력한 세부 하위대역 계수 제거를 허용함으로써 더 높은 압축률을 달성할 수 있는가?
• RQ4 Ro3가 JPEG 및 JPEG2000과 같은 표준 이미지 코덱의 성능을 사전처리 단계에서 향상시키는가?
• RQ5 파형 하위대역의 다양한 척도 간 구조적 일관성이 학습 데이터 없이도 정확한 초해상도를 유도하는 데에 충분한가?

주요 결과

• 히스토그램 프로파일이 자연 이미지 통계와 일치함을 확인함으로써, '세 가지의 원칙'(Ro3) 방법이 높은 정밀도로 누락된 세부 하위대역 픽셀을 복원함을 입증하였다.
• Ro3는 세부 하위대역 계수의 제거를 허용함으로써 눈에 띄는 압축률 향상을 이끌어내며, 최소한의 시각적 열화로도 가능하다.
• 실험 결과, Ro3는 특히 미세 무늬와 윤곽을 잘 유지하는 데 있어 이미지 품질 지표 면에서 일반적인 노이즈 제거 및 압축 방법을 뛰어넘는 성능을 보였다.
• 이 방법은 JPEG 및 JPEG2000에 효과적인 촉매 역할을 하여 내부 알고리즘의 수정 없이도 압축 효율을 향상시켰다.
• 다양한 이미지 유형에 걸쳐 뛰어난 강건성을 보이며, 재구성된 이미지에서 구조적 일관성을 유지하고 잡음 요소를 줄였다.