[논문 리뷰] Concept for a CMOS Image Sensor Suited for Analog Image Pre-Processing

Lan Shi, Christopher Soell외 4명|arXiv (Cornell University)|2015. 02. 26.

CCD and CMOS Imaging Sensors참고 문헌 8인용 수 6

한 줄 요약

이 논문은 아날로그 영상 전처리를 위한 신규 CMOS 이미지 센서 아키텍처를 제안하며, A/D 변환 이전에 저지연, 노이즈 인식 영상 복원을 아날로그 도메인에서 직접 구현한다. 2차원 센서 신호 캡처 방식을 통해 영상 데이터를 캡처함으로써 내재된 노이즈 특성을 유지하여 최적의 아날로그 필터링을 유도하며, 디지털 도메인 대비 개선된 영상 품질과 감소된 처리 지연을 달성한다.

ABSTRACT

A concept for a novel CMOS image sensor suited for analog image pre-processing is presented in this paper. As an example, an image restoration algorithm for reducing image noise is applied as image pre-processing in the analog domain. To supply low-latency data input for analog image preprocessing, the proposed concept for a CMOS image sensor offers a new sensor signal acquisition method in 2D. In comparison to image pre-processing in the digital domain, the proposed analog image pre-processing promises an improved image quality. Furthermore, the image noise at the stage of analog sensor signal acquisition can be used to select the most effective restoration algorithm applied to the analog circuit due to image processing prior to the A/D converter.

연구 동기 및 목표

• 디지털 도메인 영상 전처리의 한계를 해결하기 위해, A/D 변환 과정에서 지연이 발생하고 신호 정밀도가 손실될 수 있음을 고려한다.
• 실시간, 저지연 아날로그 전처리가 가능한 CMOS 이미지 센서 아키텍처를 개발한다.
• 수집 과정에서의 내재된 센서 노이즈를 활용하여 최적의 아날로그 복원 알고리즘 선택 기반을 마련한다.
• 디지타이제이션 이전에 노이즈 감소를 수행함으로써 전체 영상 품질을 향상시키고, 다이내믹 레인지와 신호 무결성을 유지한다.
• 이미지 센서 하드웨어에 직접 알고리즘 인식 아날로그 전처리를 통합하는 것이 가능함을 입증한다.

제안 방법

• 이 센서는 수집 과정에서 노이즈 특성을 유지할 수 있도록 설계된 신규 2차원 신호 캡처 방식을 사용한다.
• 수집 과정에서 관측된 노이즈 프로파일을 기반으로 선택된 노이즈 인식 필터링 기법을 사용해 아날로그 도메인에서 영상 전처리를 수행한다.
• 시스템은 A/D 컨버터 이전에 이미지 복원 알고리즘을 아날로그 회로에 직접 통합하여 지연과 전력 소모를 최소화한다.
• 피드백 메커니즘을 통해 센서 출력에서 실시간으로 노이즈 추정 값을 기반으로 아날로그 필터 파arameter를 적응적으로 조정한다.
• 이 아키텍처는 이질적 임베디드 시스템을 고려하여 저전력 처리 유닛과 효율적으로 통합 가능하도록 최적화되어 있다.
• 이 방법은 수집 과정에서 관측된 실제 노이즈 수준과 분포에 기반해 가장 효과적인 복원 알고리즘을 동적으로 선택할 수 있다.

실험 결과

연구 질문

• RQ1 CMOS 센서 도메인에서 아날로그 영상 전처리가 디지털 도메인 처리보다 노이즈 감소에 더 효과적인가?
• RQ2 수집 과정 중 센서 노이즈 특성을 어떻게 활용하여 실시간으로 최적의 아날로그 복원 알고리즘을 선택할 수 있는가?
• RQ3 A/D 변환 이전에 전처리를 수행할 경우 영상 품질과 처리 지연에 어떤 영향을 미치는가?
• RQ4 2차원 센서 신호 캡처 방식을 통해 CMOS 이미지 센서에서 저지연, 노이즈 인식 아날로그 전처리가 가능할 수 있는가?
• RQ5 CMOS 이미지 센서에 알고리즘 인식 아날로그 전처리를 통합할 경우 발생하는 아키텍처적 트레이드오프는 무엇인가?

주요 결과

• 제안된 아날로그 전처리는 디지타이제이션 이전에 노이즈를 감소시켜 신호 무결성을 유지함으로써 개선된 영상 품질을 달성한다.
• 2차원 센서 신호 캡처 방식은 실시간 아날로그 처리에 적합한 저지연 데이터 입력을 가능하게 한다.
• 아날로그 수집 과정에서 관측된 노이즈 특성은 가장 적합한 복원 알고리즘 선택에 효과적으로 활용된다.
• 기존의 디지털 도메인 전처리 파이프라인 대비 처리 지연이 감소하는 것으로 확인되었다.
• 센서 아키텍처에 알고리즘 인식 아날로그 필터링을 통합함으로써 에너지 효율적이고 고성능의 영상 처리가 가능하다.
• 이 방법은 이질적 임베디드 시스템 환경에서 검증되었으며, 저전력 영상 응용 분야에 큰 잠재력을 보이고 있다.