[논문 리뷰] Rolling Colors: Adversarial Laser Exploits against Traffic Light Recognition

Yan Chen, Zhijian Xu외 3명|arXiv (Cornell University)|2022. 04. 06.

Ocular and Laser Science Research인용 수 15

한 줄 요약

이 논문은 자율주행 차량의 교통신호등 인식을 레이저 유도 적대적 공격을 통해 CMOS 카메라의 롤링 셔터 취약점을 악용하여 조작할 수 있음을 입증한다. 레이저를 통해 제어 가능한 색상 스트라이프를 투사함으로써, 40미터 이상 떨어진 이동 중인 차량에서도 빨간 신호를 초록색으로 잘못 인식시키는 데 86.25%의 성공률을 기록하거나, 초록색을 빨간색으로 잘못 인식시키는 데 30%의 성공률을 기록할 수 있다.

ABSTRACT

Traffic light recognition is essential for fully autonomous driving in urban areas. In this paper, we investigate the feasibility of fooling traffic light recognition mechanisms by shedding laser interference on the camera. By exploiting the rolling shutter of CMOS sensors, we manage to inject a color stripe overlapped on the traffic light in the image, which can cause a red light to be recognized as a green light or vice versa. To increase the success rate, we design an optimization method to search for effective laser parameters based on empirical models of laser interference. Our evaluation in emulated and real-world setups on 2 state-of-the-art recognition systems and 5 cameras reports a maximum success rate of 30% and 86.25% for Red-to-Green and Green-to-Red attacks. We observe that the attack is effective in continuous frames from more than 40 meters away against a moving vehicle, which may cause end-to-end impacts on self-driving such as running a red light or emergency stop. To mitigate the threat, we propose redesigning the rolling shutter mechanism.

연구 동기 및 목표

• 레이저 간섭을 활용해 자율주행 차량의 교통신호등 인식을 조작할 수 있는지의 가능성을 조사하기 위해.
• CMOS 롤링 셔터의 내재된 취약점을 특정하여 이미지에 제어 가능한 색상 스트라이프를 주입하는 방법을 규명하고 악용하기 위해.
• 공격 성공률을 극대화하면서도 교통신호등의 가시성을 유지하기 위해 효과적인 레이저 파arameter를 최적화하는 방법을 개발하기 위해.
• 다양한 카메라와 인식 시스템을 대상으로 실제 환경과 시뮬레이션 환경에서 공격의 효과를 평가하기 위해.
• 롤링 셔터 메커니즘의 재설계를 통해 하드웨어 수준에서 공격를 완화할 수 있는 대응 조치를 제안하기 위해.

제안 방법

• CMOS 센서의 롤링 셔터 메커니즘을 활용하여 센서의 행 노출 시간과 레이저 펄스의 타이밍을 조절함으로써 교통신호등 영역에 국소적으로 색상 스트라이프를 생성하기 위해.
• 레이저 간섭이 CMOS 센서에 미치는 영향을 실험적으로 모델링하여 공격 효과를 시뮬레이션하고 파arameter 검색을 안내하기 위해.
• 실험적 모델 기반으로 시뮬레이션된 이미지를 사용하여 공격 성공률을 극대화하기 위해 레이저 파arameter(예: 강도, 지속 시간, 타이밍)를 최적화하기 위해.
• 레이저 다이오드, 실제 교통신호등, 그리고 테슬라 차량에서 사용되는 카메라 포함 총 다섯 대의 카메라를 사용하여 실제 환경 실험을 수행하기 위해.
• 두 가지 대응 조치를 제안: 행 노출 순서를 무작위화하고, 각 프레임마다 다른 시작 행을 도입하여 주입된 스트라이프를 이미지 전역에 산산이 흩트리기 위해.
• 실시간 주행 조건을 시뮬레이션하기 위해 이동 중인 차량에서 연속 프레임에 대한 공격 효과를 평가하기 위해.

실험 결과

연구 질문

• RQ1 CMOS 롤링 셔터 효과를 통해 레이저 간섭을 이용해 카메라 이미지의 교통신호등 영역에 제어 가능한 색상 패턴을 주입할 수 있는가?
• RQ2 공격 성공률을 극대화하면서도 감지 가능성은 최소화하기 위해 어떤 레이저 파aram터(강도, 지속 시간, 타이밍)가 최적인가?
• RQ3 공격가 40미터 이상의 거리에서 그리고 이동 중인 차량의 연속 프레임에서도 성공할 수 있는가?
• RQ4 실제 동적인 환경에서 공격는 교통신호등 검출 및 인식 시스템에 어떤 영향을 미치는가?
• RQ5 하드웨어 수준에서 롤링 셔터 기반 레이저 공격를 효과적으로 완화할 수 있는 방식은 무엇인가?

주요 결과

• 실제 환경 테스트에서 공격는 빨간 신호를 초록색으로 잘못 인식시키는 데 최대 평균 성공률 86.25%를 기록하였다.
• 초록색에서 빨간색으로의 공격는 최대 평균 성공률 30%를 기록하였으며, 이는 색상과 강도의 동적 특성으로 인해 더 높은 난이도를 지닌다는 것을 시사한다.
• 이동 중인 차량에서 40미터 이상 떨어진 거리에서도 연속 프레임에서 공격가 효과를 유지하여 실제 적용 가능성은 입증되었다.
• 공격는 두 가지 최신 오픈소스 교통신호등 인식 시스템과 다섯 대의 다른 카메라에서 검증되었으며, 테슬라 차량에서 사용되는 카메라를 포함하였다.
• 실험적 모델은 실제 레이저 정렬 및 타이밍의 불확실성에 대해 강건함을 입증하며 효과적인 파arameter 검색을 가능하게 하였다.
• 롤링 셔터를 무작위 행 노출 순서 또는 각 프레임마다 다른 시작 행을 사용하도록 재설계함으로써 스트라이프가 이미지 전역에 산산이 흩트려져 공격가 효과적으로 무력화됨을 확인하였다.