[논문 리뷰] Predicting Webpage Aesthetics with Heatmap Entropy

Zhenyu Gu, Chenhao Jin외 2명|arXiv (Cornell University)|2018. 03. 05.

Visual Attention and Saliency Detection참고 문헌 23인용 수 3

한 줄 요약

이 연구는 웹페이지 미학을 예측하기 위해 눈동자 추적 히트맵에서 유도된 정량적 지표로 시각적 주의 엔트로피(VAE)와 그 개선된 변형인 상대적 VAE(rVAE)를 제안한다. 3초 동안 30명의 관찰자가 40개의 웹페이지를 시각화한 데이터를 바탕으로, rVAE는 주관적인 미학 평가와 강한 음의 상관관계(r = -0.65)를 보였으며, 좋은 디자인과 나쁜 디자인을 구분하는 데 약 85%의 정확도를 기록했고, 추적 후 1초가 지나면 안정된 성능을 보였다.

ABSTRACT

Today, eye trackers are extensively used in user interface evaluations. However, it's still hard to analyze and interpret eye tracking data from the aesthetic point of view. To find quantitative links between eye movements and aesthetic experience, we tracked 30 observers' initial landings for 40 web pages (each displayed for 3 seconds). The web pages were also rated based on the observers' subjective aesthetic judgments. Shannon entropy was introduced to analyze the eye-tracking data. The result shows that the heatmap entropy (visual attention entropy, VAE) is highly correlated with the observers' aesthetic judgements of the web pages. Its improved version, relative VAE (rVAE), has a more significant correlation with the perceived aesthetics. (r=-0.65, F= 26.84, P$

연구 동기 및 목표

• 웹페이지의 인간적 미학 판단과 상관관계가 있는 눈동자 추적 데이터에서 객관적이고 정량적인 지표를 식별하는 것.
• 눈동자 집중 패턴을 엔트로피로 측정함으로써 주관적 레이블에 의존하지 않고도 인식된 미학을 예측할 수 있는지 조사하는 것.
• 시간에 따라 그리고 다양한 실험적 조건에서 엔트로피 기반 지표의 안정성과 예측 능력을 평가하는 것.
• 눈동자 추적 데이터를 활용해 인지 유연성과 미학 선호 간의 이론적 연관성을 탐색하는 것.

제안 방법

• 통제된 조건에서 30명의 관찰자가 각각 3초 동안 40개의 웹페이지를 시각화한 눈동자 추적 데이터를 수집하였다.
• 고정밀도를 모델링하기 위해 다양한 표준편차(σ) 값을 가진 가우시안 스무딩을 사용하여 시선 히트맵을 생성하였다.
• 정규화된 히트맵의 샤논 엔트로피로 시각적 주의 엔트로피(VAE)를 계산하여 공간적 주의 분포의 혼란도를 정량화하였다.
• VAE의 정규화된 버전인 상대적 VAE(rVAE)를 도입하여 미학 판단과의 상관관계를 향상시켰다.
• 다양한 추적 지속 시간(1초, 2초, 3초), 참가자 수, σ 값에서 지표 성능을 평가하였다.
• 피어슨 상관계수와 F-검정을 사용하여 엔트로피 지표와 미학 평가 간의 통계적 유의성을 평가하였다.

실험 결과

연구 질문

• RQ1 눈동자 히트맵에서 유도된 시각적 주의 엔트로피(VAE)가 웹페이지의 주관적 미학 판단을 예측할 수 있는가?
• RQ2 개선된 지표인 상대적 VAE(rVAE)가 VAE보다 인식된 미학과 더 강한 상관관계를 보이는가?
• RQ3 VAE와 rVAE의 예측 성능는 3초 동안의 시각화 기간 동안 어떻게 변화하는가?
• RQ4 가우시안 스무딩(σ)과 참가자 수의 변동에 대해 엔트로피 지표는 얼마나 민감한가?
• RQ5 고정순서와 같은 눈동자 시퀀스의 시간적 구조가 공간 분포에 비해 미학 예측에 얼마나 기여하는가?

주요 결과

• 상대적 VAE(rVAE)는 주관적인 미학 평가와 통계적으로 유의미한 음의 상관관계(r = -0.65, F = 26.84, p < 0.0001)를 보였다.
• rVAE 지표만으로도 미학적으로 매력적인 웹페이지와 그렇지 않은 웹페이지를 약 85%의 정확도로 구분할 수 있었다.
• VAE와 rVAE 모두 눈동자 추적 데이터가 1초가 지난 후 안정된 성능를 보였으며, 이는 조기 예측 가능성을 시사한다.
• 두 지표의 성능는 더 긴 추적 지속 시간에 따라 향상되었으며, 이는 더 긴 관찰 시간에서 더 높은 정확도를 얻을 수 있음을 시사한다.
• 가우시안 스무딩 파rameter(σ)의 넓은 범위에서 지표가 강건했으며, rVAE는 σ ≈ 40px에서 최고 성능를 보였고, 10–120px 범위에서 높은 상관관계를 유지하였다.
• 히트맵 엔트로피를 기반으로 한 VAE는 마르코프 체인을 통한 시선 순서 엔트로피보다 성능이 뛰어나, 공간적 분포가 시간적 순서보다 더 예측력이 높음을 시사한다.