[논문 리뷰] A Robust Lane Detection and Departure Warning System

Mrinal Haloi, Dinesh Babu Jayagopi|arXiv (Cornell University)|2015. 04. 28.

Autonomous Vehicle Technology and Safety참고 문헌 15인용 수 5

한 줄 요약

이 논문은 도로 조건이 열악한 인도의 도로 환경에 특화된 강건한 단일 카메라 차선 감지 및 이탈 경고 시스템을 제시한다. 조명에 민감하지 않은 Lab 색상 공간, 2차 및 4차 스틸러 필터, 수정된 역透视 매핑(IPM)을 활용하여 차선 표시가 없더라도 차선 표시와 도로 경계를 감지하고, RANSAC 기반 다항식 피팅 및 광학 흐름을 통해 이탈 각도를 추정한다. 이로 인해 40m 범위에서 최신 기술을 초월하며, 인도 도로 데이터에서 90.58%의 정확도를 달성한다.

ABSTRACT

In this work, we have developed a robust lane detection and departure warning technique. Our system is based on single camera sensor. For lane detection a modified Inverse Perspective Mapping using only a few extrinsic camera parameters and illuminant Invariant techniques is used. Lane markings are represented using a combination of 2nd and 4th order steerable filters, robust to shadowing. Effect of shadowing and extra sun light are removed using Lab color space, and illuminant invariant representation. Lanes are assumed to be cubic curves and fitted using robust RANSAC. This method can reliably detect lanes of the road and its boundary. This method has been experimented in Indian road conditions under different challenging situations and the result obtained were very good. For lane departure angle an optical flow based method were used.

연구 동기 및 목표

• 빈번한 그림자, 흐린 차선 표시, 변동성이 큰 조명 조건을 포함한 실제 인도 도로 환경에서 강건한 차선 감지 및 이탈 경고 시스템을 개발하기 위해.
• 개발 국가의 도로 환경에서 주요한 한계로 작용하는 가시 차선 표시가 없는 상황에서도 도로 경계를 감지할 수 있도록 하기 위해.
• 카메라 내재 매개변수에 대한 의존도를 줄이기 위해 외재 매개변수만을 사용하는 수정된 IPM 수식을 적용하기 위해.
• Lab 공간에서의 조명에 민감하지 않은 색상 표현을 통해 조명 변화에 대한 강건성을 향상시키기 위해.
• 향상된 운전자 보조를 위해 광학 흐름을 활용한 정확한 차선 이탈 각도 추정을 제공하기 위해.

제안 방법

• 외재 카메라 매개변수만을 사용하는 수정된 역透视 매핑(IPM)을 적용하여 영상을 조망도로 변환함으로써 불필요한 영역을 줄이고 차선 특징의 국소화를 향상시킴.
• Lab 색상 공간에서 밝기 및 색채 성분을 분리하여 조명에 민감하지 않은 표현을 구현함으로써 그림자 및 직사광선에 대한 민감도를 감소시킴.
• 2차 및 4차 스틸러 필터를 사용하여 수평 및 수직 에지 특징을 감지함으로써 노이즈 및 이방성에 대한 강건성을 향상시킴.
• 차선 표시를 세차수 곡선으로 모델링하고 RANSAC를 사용하여 피팅함으로써 잘못된 검출 및 가림 현상에 대한 강건성을 확보함.
• IPM 공간에서 광학 흐름을 계산하여 차량의 운동을 추정하고 주변 특징의 상대 운동을 기반으로 잠재적 차선 이탈을 감지함.
• 차선 표시와 독립적으로 에지 구조와 연속성을 분석함으로써 차선 표시가 없는 도로에서도 도로 경계 감지를 수행함.

실험 결과

연구 질문

• RQ1 그림자, 흐린 차선 표시, 변동성이 큰 조명 조건을 포함한 도전적인 인도 도로 환경에서 차선 감지 시스템이 높은 정확도를 달성할 수 있는가?
• RQ2 조명에 민감하지 않은 색상 공간(Lab)의 사용이 동적 조명 조건에서 차선 감지의 강건성을 향상시키는 데 얼마나 효과적인가?
• RQ3 차선 표시가 전혀 없는 상황에서도 도로 경계를 신뢰성 있게 감지할 수 있으며, 이는 개발 국가 환경에서의 안전성 향상에 어떻게 기여하는가?
• RQ4 스틸러 필터와 RANSAC의 조합이 차선 특징 추출 시 이방성과 노이즈에 대한 강건성을 얼마나 향상시키는가?
• RQ5 실시간 주행 시나리오에서 제안된 광학 흐름 기반 이탈 경고 시스템은 전통적 방법에 비해 성능 면에서 얼마나 뛰어나며, 어떤가?

주요 결과

• 시스템은 인도 도로 데이터셋에서 자동차의 차선 감지에 대해 90.58%의 정확도를 달성하였으며, 12.37%의 거짓 양성률을 기록하여 실제 환경 조건에서 뛰어난 성능을 입증함.
• 인도 도로 데이터셋에서 도로 경계 감지 정확도는 94.25%에 도달하여, 차선 표시가 없는 경우에도 경계 감지를 수행할 수 있음을 확인함.
• KITTI 데이터셋에서 20m 범위에서 95.17%의 정밀도, 30m 범위에서 95.17%, 40m 범위에서 93.76%의 정밀도를 기록하여 40m 범위에서 몇몇 최신 기술을 초월함.
• Lab 색상 공간과 조명에 민감하지 않은 처리 기법의 사용이, 그림자 및 직사광선을 포함한 다양한 조명 조건에서 감지 정확도를 크게 향상시킴.
• 알고리즘이 곡선 차선 표시를 성공적으로 감지하고 평면적이거나 직선적인 도로 기하학을 가정하지 않더라도 비직선 도로 환경에서도 강건성을 유지함.
• 4코어 2.3GHz CPU에서 프레임당 0.029초 내외로 실행되어 ADAS에의 실시간 구현 가능성을 입증함.