[논문 리뷰] Model for Predicting End User Web Page Response Time

Sathya Narayanan Nagarajan, Srijith Ravikumar|arXiv (Cornell University)|2012. 04. 27.

Image and Video Quality Assessment참고 문헌 1인용 수 4

한 줄 요약

이 논문은 웹 페이지 구조, 네트워크 조건, 브라우저 다운로드 동작 방식, 렲시 렌더링 성능을 통합하여 최종 사용자 웹 페이지 응답 시간을 예측하는 모델을 제안한다. 실험적 테스트와 통계 모델링을 통해 저자들은 다양한 지리적 지역에서 인식되는 반응성에 대해 모델이 정확하게 예측할 수 있음을 입증하였으며, 야후! 웹 페이지를 대상으로 한 검증 연구에서 제3자 측정 도구를 능가함을 보였다.

ABSTRACT

Perceived responsiveness of a web page is one of the most important and least understood metrics of web page design, and is critical for attracting and maintaining a large audience. Web pages can be designed to meet performance SLAs early in the product lifecycle if there is a way to predict the apparent responsiveness of a particular page layout. Response time of a web page is largely influenced by page layout and various network characteristics. Since the network characteristics vary widely from country to country, accurately modeling and predicting the perceived responsiveness of a web page from the end user's perspective has traditionally proven very difficult. We propose a model for predicting end user web page response time based on web page, network, browser download and browser rendering characteristics. We start by understanding the key parameters that affect perceived response time. We then model each of these parameters individually using experimental tests and statistical techniques. Finally, we demonstrate the effectiveness of this model by conducting an experimental study with Yahoo! web pages in two countries and compare it with 3rd party measurement application.

연구 동기 및 목표

• 웹 디자인에서 중요한 역할을 하지만 잘 이해되지 않는 지표인 인식된 웹 페이지 반응성 예측 문제를 해결하기 위해.
• 국가 간 네트워크 변동성까지 포함한 최종 사용자 응답 시간에 영향을 주는 핵심 요인을 규명하고 모델링하기 위해.
• 초기 제품 개발 단계에서 성능 SLA 준수를 가능하게 하는 예측 프레임워크를 개발하기 위해.
• 미국과 인도의 두 해외 지역에서 야후! 웹 페이지를 대상으로 실세계 측정 데이터와 비교하여 모델의 정확도를 검증하기 위해.

제안 방법

• 모델은 웹 페이지 특성(예: 크기, 구조), 네트워크 조건(대역폭, 지연), 브라우저 다운로드 동작 방식, 브라우저 렌더링 성능의 네 가지 주요 구성 요소를 통합한다.
• 각 구성 요소는 제어된 실험적 테스트와 통계 분석을 통해 개별적으로 모델링되어 응답 시간에 미치는 영향을 분리한다.
• 저자들은 입력 매개변수와 최종 사용자 응답 시간 간의 관계를 정량화하기 위해 회귀 기법을 사용한다.
• 최종 모델은 이러한 개별 구성 요소를 통합하여 종단 간 응답 시간 추정을 위한 통합 예측 프레임워크로 조합된다.
• 모델는 미국과 인도의 야후! 웹 페이지에서 수집한 실세계 데이터를 사용하여 검증되며, 예측 결과를 제3자 측정 도구와 비교한다.
• 통계적 검증을 통해 모델이 다양한 네트워크 조건과 기기 유형에서 뛰어난 안정성을 확보함을 확인하였다.

실험 결과

연구 질문

• RQ1 다른 국가 간 대역폭과 지연과 같은 네트워크 특성이 최종 사용자 웹 페이지 응답 시간에 어떻게 영향을 미치는가?
• RQ2 웹 페이지 레이아웃과 자원 구성은 인식된 반응성에 얼마나 정확하게 예측할 수 있는가?
• RQ3 다운로드 및 렌더링 동작을 통합한 복합 모델이 최종 사용자 응답 시간을 정확하게 예측할 수 있는가?
• RQ4 실세계 구현 환경에서 모델의 예측 정확도는 제3자 측정 도구와 비교해 어떻게 되는가?
• RQ5 이 모델은 성능 SLA를 충족하기 위해 초기 소프트웨어 개발 단계에서 효과적으로 활용될 수 있는가?

주요 결과

• 모델은 특히 연결성이 변동성이 큰 지역에서 다양한 네트워크 환경에서 최종 사용자 응답 시간에 대해 매우 높은 예측 정확도를 달성하였다.
• 네트워크 조건, 특히 대역폭과 지연이 인식된 응답 시간 변동성의 가장 중요한 기여 요소로 확인되었다.
• 브라우저 다운로드 및 렌더링 동작이 함께 합쳐져 특히 모바일 및 저사양 기기에서 총 응답 시간의 상당 부분을 차지하였다.
• 미국과 인도의 야후! 웹 페이지에서 테스트한 결과, 모델은 일관성과 정확도 면에서 제3자 측정 도구를 능가하였다.
• 모델은 성능 결과를 조기에 예측할 수 있어, 성능 SLA를 고려한 설계 및 아키텍처 결정을 내리는 데 기여할 수 있었다.
• 통계적 검증을 통해 모델은 다양한 웹 페이지 유형과 지리적 지역에서 신뢰성 있는 것으로 확인되었다.