[논문 리뷰] An Efficient Real Time Method of Fingertip Detection

Jagdish Lal Raheja, Karen Das외 1명|arXiv (Cornell University)|2011. 08. 02.

Hand Gesture Recognition Systems참고 문헌 15인용 수 31

한 줄 요약

이 논문은 HSV 기반 피부 분할과 히스토그램 분석을 통해 먼저 손 영역을 자르고, 그 다음 윤곽 기반 기하 분석을 통해 손끝을 검출하는 효율적인 실시간 손끝 검출 방법을 제안한다. 이 방법은 최소한의 계산 오버헤드로 실시간 성능을 달성하여 인터랙티브한 인간-컴퓨터 시스템에 적합하다.

ABSTRACT

Fingertips detection has been used in many applications, and it is very popular and commonly used in the area of Human Computer Interaction these days. This paper presents a novel time efficient method that will lead to fingertip detection after cropping the irrelevant parts of input image. Binary silhouette of the input image is generated using HSV color space based skin filter and hand cropping done based on histogram of the hand image. The cropped image will be used to figure out the fingertips.

연구 동기 및 목표

• 인간-컴퓨터 상호작용 시스템에서 실시간 손끝 검출을 위한 계산적으로 효율적인 방법을 개발하기 위해.
• 손끝 분석 전에 관련 없는 이미지 영역을 제거하여 정확도를 향상시키기 위해.
• 색상 기반 분할과 강도 히스토그램 분석을 활용하여 강인한 손 영역 자르기를 수행하기 위해.
• 자른 손 이미지에 기하학적 윤곽 분석을 적용하여 손끝을 정확히 위치 파악하기 위해.
• 실시간 응용 분야(예: 제스처 인식 및 터치리스 인터페이스)에 적합한 저지연 처리를 보장하기 위해.

제안 방법

• 메서드는 피부 색조 영역을 분리하기 위해 색상 공간 HSV를 사용한 입력 이미지 전처리로 시작된다.
• HSV 기반 피부 필터링을 통해 손의 이진 실루엣을 생성하여 잠재적인 손 영역을 추출한다.
• 손의 이미지 내 위치를 국소화하기 위해 강도 히스토그램 분 析을 사용하여 손 자르기를 수행한다.
• 자른 손 이미지를 윤곽을 검출하고, 이를 기하 특성에 대해 분석한다.
• 거리 기반 기준을 사용하여 손 윤곽의 곡률에서 국소 최대값을 기반으로 손끝을 식별한다.
• 손 자르기 이후 처리 단계를 최소화하여 실시간 성능을 최적화한다.

실험 결과

연구 질문

• RQ1 인간-컴퓨터 상호작용에서 실시간 응용에 적합한 손끝 검출을 어떻게 효율적으로 구현할 수 있는가?
• RQ2 손 영역 자르기 과정이 손끝 검출 정확도 향상과 계산 부하 감소에 어떤 역할을 하는가?
• RQ3 복잡한 배경에서 HSV 기반 피부 분할과 히스토그램 분석이 손 영역을 신뢰성 있게 분리할 수 있는가?
• RQ4 복잡한 모델에 의존하지 않고 윤곽 기반 곡률 분석이 손끝 위치 식별에 얼마나 효과적인가?
• RQ5 실시간 손끝 검출 파이프라인에서 정확도와 처리 속도 사이의 상충 관계는 어떠한가?

주요 결과

• 제안된 방법은 자른 손 영역에만 계산을 집중시킴으로써 실시간 성능를 달성한다.
• HSV 기반 피부 필터링은 다양한 조명 조건에서도 높은 정밀도로 손 영역을 효과적으로 분리한다.
• 히스토그램 기반 자르기는 배경 노이즈를 감소시키고 검출 안정성을 향상시킨다.
• 윤곽 기반 곡률 분석은 최소한의 오진 검출을 기반으로 손끝을 성공적으로 식별한다.
• 이 방법은 낮은 계산 오버헤드를 보이며 자원 제약이 있는 시스템에의 배포가 가능하다.
• 실시간 환경에서의 검증 결과, 제스처 기반 인터페이스와 같은 인터랙티브 응용 분야에 적합함을 시사한다.