[논문 리뷰] Characterisation of CMOS Image Sensor Performance in Low Light Automotive Applications

Shane Gilroy, John O’Dwyer외 1명|arXiv (Cornell University)|2020. 11. 24.

CCD and CMOS Imaging Sensors참고 문헌 5인용 수 6

한 줄 요약

이 논문은 자동차 응용 분야에서 저조도 조건에서 CMOS 이미지 센서 성능을 체계적으로 특성화하는 방법을 제시하며, 전원 공급선을 통한 전기적 노이즈 커플링에 초점을 맞춘다. 영상 품질에 미치는 노이즈 영향을 정량화함으로써, 야간 주행 시 ADAS 시스템의 신뢰성을 향상시키기 위한 향상된 센서 설계 및 노이즈 완화 전략을 가능하게 한다.

ABSTRACT

The applications of automotive cameras in Advanced Driver-Assistance Systems (ADAS) are growing rapidly as automotive manufacturers strive to provide 360 degree protection for their customers. Vision systems must capture high quality images in both daytime and night-time scenarios in order to produce the large informational content required for software analysis in applications such as lane departure, pedestrian detection and collision detection. The challenge in producing high quality images in low light scenarios is that the signal to noise ratio is greatly reduced. This can result in noise becoming the dominant factor in a captured image thereby making these safety systems less effective at night. This paper outlines a systematic method for characterisation of state of the art image sensor performance in response to noise, so as to improve the design and performance of automotive cameras in low light scenarios. The experiment outlined in this paper demonstrates how this method can be used to characterise the performance of CMOS image sensors in response to electrical noise on the power supply lines.

연구 동기 및 목표

• 저조도 자동차 환경에서 신호 대 노이즈 비율 감소로 인한 영상 품질 악화 문제를 해결한다.
• 야간 주행 시나리오에서 전원 공급선에 존재하는 전기적 노이즈가 CMOS 이미지 센서 성능에 미치는 영향을 조사한다.
• 다양한 CMOS 이미지 센서 모델 간 성능 평가를 위한 반복 가능한 체계적 방법을 개발하여 전원 공급선 노이즈에 대한 센서 반응을 특성화한다.
• 노이즈 유도 영상 품질 열화를 정량화하여 ADAS의 견고한 시각 시스템 개발을 지원한다.
• 실제 저조도 조건에서의 정밀한 센서 성능 특성화를 통해 표적적 노이즈 완화 전략을 가능하게 한다.

제안 방법

• CMOS 이미지 센서의 전원 공급선에 전기적 노이즈를 주입하기 위한 통제된 실험을 수행한다.
• 실제 야간 주행 시나리오를 시뮬레이션하기 위해 표준화된 저조도 테스트 조건을 사용한다.
• 다양한 노이즈 수준에서 영상 데이터를 캡처하고 결과적인 영상 품질 지표를 분석한다.
• 영상 품질 평가 기법을 적용하여 노이즈 증폭 및 신호 열화를 정량화한다.
• 전원 공급선 노이즈 수준과 관측 가능한 영상 아티팩트 및 SNR 열화 간의 상관관계를 분석한다.
• 다양한 CMOS 이미지 센서 모델 간 성능 평가를 위한 반복 가능한 프레임워크를 수립한다.

실험 결과

연구 질문

• RQ1 전원 공급선 노이즈는 저조도 자동차 조건에서 CMOS 이미지 센서의 영상 품질에 어떻게 영향을 미치는가?
• RQ2 주입된 전원 공급선 노이즈와 그로 인한 신호 대 노이즈 비율 열화 사이의 관계는 무엇인가?
• RQ3 전기적 노이즈가 저조도 시나리오에서 영상 품질을 얼마나 심각하게 악화시켜 ADAS 기능을 저해하는가?
• RQ4 노이즈 민감도를 예측하고 정량화할 수 있는 체계적 특성화 방법을 개발할 수 있는가?
• RQ5 표준화된 저조도 테스트 조건에서 다양한 CMOS 이미지 센서 설계는 전원 공급선 노이즈에 어떻게 반응하는가?

주요 결과

• 전원 공급선에 존재하는 전기적 노이즈는 저조도 조건에서 영상 품질을 심각하게 악화시키며, 눈에 띄는 노이즈를 증가시키고 효과적인 신호 대 노이즈 비율을 감소시킨다.
• 연구에서는 전원 공급선 노이즈 진폭과 관측 가능한 영상 노이즈 사이에 직접적인 상관관계를 규명하였으며, 특히 영상의 어두운 영역에서 두드러진다.
• CMOS 이미지 센서는 전원 공급선 리플에 대해 측정 가능한 민감도를 보이며, 노이즈 커플링으로 인해 공간적으로 균일하지 않은 영상 품질 열화가 발생한다.
• 제안된 특성화 방법은 센서 노이즈 반응을 반복 가능한 방식으로 정량화할 수 있게 하여, 하드웨어 및 펌웨어 개선을 위한 표적적 조치를 지원한다.
• SNR 및 노이즈 파wer 스펙트럼과 같은 영상 품질 지표는 통제된 전원 공급선 노이즈 주입 조건에서 일관되게 열화됨을 보였다.
• 결과적으로 전원 공급선 노이즈는 저조도 영상 성능에서 결정적인 요소이며, 종종 야간 주행에서 ADAS 시스템의 효과성을 제한한다.