[논문 리뷰] Gesture Recognition with a Focus on Important Actions by Using a Path Searching Method in Weighted Graph

Kazumoto Tanaka|ArXiv.org|2009. 12. 09.

Hand Gesture Recognition Systems참고 문헌 10인용 수 5

한 줄 요약

이 논문은 가중 그래프 경로 탐색 기반 접근을 통해 유사한 자세를 더 잘 구분할 수 있도록 핵심 행동에 초점을 맞춰 수식된 자세 인식 방법을 제안한다. 영상 시퀀스에서 광학 흐름을 이용해 운동 특징을 추출하고, 이를 고유공간에 투영한 후 최적의 경로 탐색을 적용하여 눈에 띄는 자세 세그먼트를 강조함으로써 실험적으로 유사한 수화어를 더 정확하게 인식하는 데 성공한다.

ABSTRACT

This paper proposes a method of gesture recognition with a focus on important actions for distinguishing similar gestures. The method generates a partial action sequence by using optical flow images, expresses the sequence in the eigenspace, and checks the feature vector sequence by applying an optimum path-searching method of weighted graph to focus the important actions. Also presented are the results of an experiment on the recognition of similar sign language words.

연구 동기 및 목표

• 유사한 자세를 더 잘 인식하기 위해 핵심 행동 세그먼트에 초점을 맞추기.
• 수화 자세 간 미세한 차이를 구분하는 데 도전 과제 해결.
• 자세 시퀀스에서 동적으로 중요한 행동을 식별하고 우선순위를 매기는 방법 개발.
• 구별 가능한 운동 패턴에 초점을 맞춰 특징 표현을 향상시키기.
• 실제 수화어 인식 작업에서 제안된 방법의 유효성 검증.

제안 방법

• 영상 시퀀스에서 운동 특징을 추출하기 위해 광학 흐름 이미지를 사용한다.
• 운동 특징를 차원을 줄이고 주요 성분을 포착하기 위해 고유공간에 투영한다.
• 노드는 특징 벡터를 나타내고, 간선은 시간적 전이를 나타내며, 가중치는 운동의 중요도에 기반한 가중 그래프를 구축한다.
• 가장 구별 가능한 행동 세그먼트를 식별하기 위해 그래프에 최적의 경로 탐색 알고리즘을 적용한다.
• 누적 가중치가 가장 큰 경로를 분류를 위한 대표 시퀀스로 선택한다.
• 유사한 자세를 구분하는 데 기여하는 요소에 더 높은 가중치를 할당하여 높은 영향력이 있는 행동에 초점을 맞춘다.

실험 결과

연구 질문

• RQ1 어떻게 수체 인식 시스템이 유사한 수화 자세를 더 잘 구분할 수 있는가?
• RQ2 핵심 행동 세그먼트는 인식 정확도 향상에 어떤 역할을 하는가?
• RQ3 가중 그래프에서 경로 탐색 방법이 자세 시퀀스의 중요한 행동을 효과적으로 식별하고 우선순위를 매일 수 있는가?
• RQ4 눈에 띄는 행동에 초점을 맞추는 것이 유사 자세 인식 성능에 어떤 영향을 미치는가?
• RQ5 고유공간 표현은 수체 인식에서 특징의 구별 능력을 얼마나 향상시키는가?

주요 결과

• 제안된 방법은 핵심 행동 세그먼트에 초점을 맞춤으로써 유사한 수화어에 대한 인식 정확도를 크게 향상시켰다.
• 가중 그래프에서의 경로 탐색 접근법은 효과적으로 구별 가능한 운동 패턴을 식별하고 강조하였다.
• 고유공간에서의 특징 표현은 미세한 자세 변형을 구분하는 시스템의 능력을 향상시켰다.
• 실험 결과, 중요한 행동을 우선순위에 두는 것이 기존 방법보다 더 우수한 성능을 내는 것으로 나타났다.
• 시험된 수화어 데이터셋에서 인식률 향상이 측정 가능하게 달성되었다.
• 가중 그래프 경로 탐색의 사용은 눈에 띄는 행동에 동적으로 초점을 맞춰 자세 변형에 대한 강인성을 향상시켰다.