[논문 리뷰] What slows you down? Your network or your device?

Moritz Steiner, Ruomei Gao|arXiv (Cornell University)|2016. 03. 07.

Green IT and Sustainability참고 문헌 5인용 수 4

한 줄 요약

이 연구는 Akamai의 CDN에서 수집한 실제 사용자 성능 데이터를 활용하여 모바일 기기의 세대와 네트워크 유형이 웹 페이지 로드 시간(PLT)에 미치는 영향을 비교한다. W3C 네비게이션 타이밍 API를 활용해 클라이언트 측 로드 이벤트를 수집함으로써, 최신 스마트폰으로의 업그레이드가 중앙값 PLT를 최대 56%까지 감소시키며, 이는 심지어 피어-투-홈 피어(Fiber-to-the-home)에서 이동 통신 네트워크로의 전환조차도 18–28%의 성능 향상에 그치는 네트워크 개선 효과를 크게 능가한다.

ABSTRACT

This study takes a close look at mobile web performance. The two main parameters determining web page load time are the network speed and the computing power of the end-user device. Based on data from real users, this paper quantifies the relative importance of network and device. The findings suggest that increased processing power of latest generation smart phones and optimized browsers have a significant impact on web performance; up to 56% reduction in median page load time from one generation to the following. The cellular networks, on the other hand, have become so mature that the median page load time on one fiber-to-the-home network (using wifi for the last meter) is only 18-28% faster than cellular and the median page load time on one DSL network is 19% slower compared to a well-deployed cellular network.

연구 동기 및 목표

• 기기 성능과 네트워크 속도가 모바일 웹 페이지 로드 시간(PLT)에 미치는 상대적 영향을 정량화하는 것.
• 스마트폰 하드웨어의 발전과 브라우저 최적화가 실제 사용자 웹 성능에 미치는 영향을 이해하는 것.
• 4G/LTE에서 피어-투-홈(Fiber-to-the-home)으로의 네트워크 전환과 같은 네트워크 개선이 기기 업그레이드보다 PLT 감소에 뚜렷이 뛰어나지 않는지 평가하는 것.
• 합성 프로브나 서버 로그가 아닌 실사용자 모니터링(RUM)을 활용해 웹 성능 병목 현상을 데이터 기반으로 이해하는 것.

제안 방법

• W3C 네비게이션 타이밍 API를 사용해 네비게이션 시작 시점에서 로드 이벤트까지의 시간을 기록함으로써 실사용자 페이지 로드 타이밍 데이터를 수집한다.
• JavaScript를 통합해 소규모 웹사이트 샘플을 기기 성능 메트릭을 캡처하고 중앙 데이터 저장소로 전송하도록 한다.
• 기기 고유의 메타데이터(예: 모델, OS 버전)와 네트워크 정보(예: 이동 통신사, 연결 유형)를 수집된 데이터에 통합한다.
• 누적 분포 함수(CDFs)를 사용해 다양한 기기와 네트워크 유형 간 중앙값 PLT를 비교한다.
• 연속된 스마트폰 모델 간(예: Nexus 4에서 Nexus 5로의 전환) PLT를 비교함으로써 기기 세대의 영향을 고립한다.
• Wi-Fi를 최종 홉으로 사용해, 이동 통신(4G/LTE), DSL, 피어-투-홈(FTTH) 네트워크 유형 간 PLT를 비교한다.

실험 결과

연구 질문

• RQ1 한 스마트폰 세대에서 다음 세대로의 업그레이드가 중앙값 페이지 로드 시간에 어떤 영향을 미치는가?
• RQ2 잘 구축된 이동 통신 네트워크의 성능은 피어-투-홈 또는 DSL과 비교해 중앙값 페이지 로드 시간 측면에서 어떻게 다른가?
• RQ3 네트워크 속도에 비해 기기 처리 성능이 웹 성능에 미치는 영향은 어느 정도인가?
• RQ4 예를 들어 4G와 FTTH 간의 네트워크 유형 간 성능 격차가 기기 세대 간 격차를 초월하는가?

주요 결과

• Nexus 4에서 Nexus 5로의 업그레이드로 중앙값 페이지 로드 시간이 24% 감소한다.
• Galaxy S3에서 Galaxy S4로의 교체로 중앙값 페이지 로드 시간이 30% 감소한다.
• iOS 버전 간 업그레이드로 중앙값 페이지 로드 시간이 최대 56% 향상된다.
• 피어-투-홈 네트워크(최종 1미터는 Wi-Fi 사용)에서의 중앙값 페이지 로드 시간은 잘 구축된 이동 통신 네트워크보다 뿐만 아니라 18–28% 빠르다.
• 일반적으로 DSL 네트워크에서의 중앙값 페이지 로드 시간은 잘 구축된 이동 통신 네트워크보다 약 19% 느리다.
• 기기 성능은 네트워크 성능보다 중앙값 페이지 로드 시간에 훨씬 더 큰 영향을 미치며, 기기 업그레이드가 네트워크 개선보다 성능 향상에서 앞서는 것으로 나타났다.