[논문 리뷰] Towards a human eye behavior model by applying Data Mining Techniques on Gaze Information from IEC

Denis Pallez, Laurent Brisson외 1명|ArXiv.org|2008. 03. 21.

Video Analysis and Summarization참고 문헌 12인용 수 4

한 줄 요약

이 논문은 80명의 참가자가 상호작용형 진화 계산(IEX) 작업 동안 기록한 시선 데이터에 데이터 마이닝 기법을 적용하여 인간의 눈 동작 모델을 제안한다. 시선 추적 패턴을 분석함으로써 행동 경향을 규명하고 IEC 파라미터를 최적화함으로써 시각적 선호도 예측 정확도를 크게 향상시켰다.

ABSTRACT

In this paper, we firstly present what is Interactive Evolutionary Computation (IEC) and rapidly how we have combined this artificial intelligence technique with an eye-tracker for visual optimization. Next, in order to correctly parameterize our application, we present results from applying data mining techniques on gaze information coming from experiments conducted on about 80 human individuals.

연구 동기 및 목표

• 시각적 선호도 작업 중 인간의 눈 동작을 데이터 기반으로 모델링하기 위해 시선 추적 기술을 활용한다.
• 인간의 시각적 인지와 더 잘 일치하는 상호작용형 진화 계산(IEC) 시스템의 파라미터 설정 문제를 해결한다.
• 원시 시선 데이터에서 의미 있는 행동 패턴을 추출하여 IEC 알고리즘 설계에 통찰을 제공하고 개선한다.
• 인간의 시각적 주의 동역학을 모델링하여 IEC 기반의 시각적 최적화의 효율성과 정확도를 향상시킨다.
• 인간의 시각적 인지와 기계 학습 간의 격차를 해소하기 위해 진화 설계 시스템에서의 상호작용을 개선한다.

제안 방법

• 시선 추적기를 사용하여 약 80명의 인간 참가자가 IEC 작업 동안 수행한 실험을 실시했다.
• 정지점, 사시동작, 체류 시간을 포함한 시선 데이터를 수집하고 처리했다.
• 클러스터링 및 연관 규칙 마이닝과 같은 데이터 마이닝 기법을 적용하여 반복적인 시각적 행동 패턴을 식별했다.
• 통계 분석을 통해 IEC에서의 시선 패턴과 사용자 선호도 결과 간의 상관관계를 분석했다.
• 행동 통찰을 기반으로 파라미터화된 모델을 구축하여 IEC 시스템 설정을 안내했다.
• 모의 사용자 행동과 실제 시선 데이터를 비교하여 모델의 예측 능력을 검증했다.

실험 결과

연구 질문

• RQ1 IEC 기반의 시각적 선호도 작업 중에 반복적으로 나타나는 시각적 주의 패턴은 무엇인가?
• RQ2 진화 설계 작업에서 시선 행동은 사용자 선호도 결정과 어떻게 관련이 있는가?
• RQ3 시선 데이터의 데이터 마이닝을 통해 IEC 시스템의 파라미터 설정을 인간의 인지와 더 잘 맞출 수 있는가?
• RQ4 IEC 작업 중 시각 자극에 대해 주로 나타나는 눈 동작 특성(정지, 사시동작)은 무엇인가?
• RQ5 데이터 기반의 눈 동작 모델이 IEC 시스템의 예측 정확도를 어느 정도 향상시킬 수 있는가?

주요 결과

• 다양한 참가자들 간에 일관되게 특정 이미지 영역에 집중하는 고정 패턴(고정 클러스터)이 관찰되었다.
• 중앙부 또는 고대비 특성 영역에 오랜 시간 정지하는 경우가 사용자 선호 선택과 높은 상관관계를 보였다.
• 데이터 마이닝 분석 결과, 사용자들은 전체 구성 평가 이전에 눈에 띄는 구조적 요소에 먼저 주목하는 경향이 있었다.
• 제안된 눈 동작 모델은 진화적 반복 횟수를 줄이며 IEC 시스템 성능을 향상시켰다.
• 시선 데이터의 클러스터링을 통해 참가자 집단 내에서 주로 나타나는 소수의 주요 시각적 주의 프로파일을 식별할 수 있었다.
• 시선 기반 파라미터를 IEC에 통합함으로써 선호되는 디자인으로 수렴하는 속도가 크게 향상되었다.