[論文レビュー] Model for Predicting End User Web Page Response Time

Sathya Narayanan Nagarajan, Srijith Ravikumar|arXiv (Cornell University)|Apr 27, 2012

Image and Video Quality Assessment参考文献 1被引用数 4

ひとこと要約

本論文では、ウェブページ構造、ネットワーク状態、ブラウザのダウンロード動作、レンダリングパフォーマンスを統合することで、エンドユーザーのウェブページ応答時間を予測するモデルを提案する。実験的評価と統計的モデリングを用いて、著者らは、多様な地理的地域において、ユーザーが感じ取る応答性を正確に予測できることを示した。Yahoo!ウェブページを用いた検証研究において、第三者の測定ツールを上回る性能を発揮した。

ABSTRACT

Perceived responsiveness of a web page is one of the most important and least understood metrics of web page design, and is critical for attracting and maintaining a large audience. Web pages can be designed to meet performance SLAs early in the product lifecycle if there is a way to predict the apparent responsiveness of a particular page layout. Response time of a web page is largely influenced by page layout and various network characteristics. Since the network characteristics vary widely from country to country, accurately modeling and predicting the perceived responsiveness of a web page from the end user's perspective has traditionally proven very difficult. We propose a model for predicting end user web page response time based on web page, network, browser download and browser rendering characteristics. We start by understanding the key parameters that affect perceived response time. We then model each of these parameters individually using experimental tests and statistical techniques. Finally, we demonstrate the effectiveness of this model by conducting an experimental study with Yahoo! web pages in two countries and compare it with 3rd party measurement application.

研究の動機と目的

• ウェブデザインにおける重要なが、十分に理解されていない指標である、ユーザーが感じ取るウェブページの応答性を予測する課題に対処すること。
• ネットワークの変動（国ごとの差異を含む）を含む、エンドユーザーの応答時間に影響を与える要因を特定し、モデル化すること。
• 早期製品開発段階でパフォーマンスSLAを満たすために、予測フレームワークを構築すること。
• 米国およびインドの2か国で実施した実世界データを用いた検証において、Yahoo!ウェブページの測定結果と比較して、モデルの正確性を検証すること。

提案手法

• モデルは、ウェブページの特徴（例：サイズ、構造）、ネットワーク状態（帯域幅、待ち時間）、ブラウザのダウンロード動作、ブラウザのレンダリングパフォーマンスの4つの主要な要素を統合する。
• 各要素は、個別に制御された実験的評価と統計的分析を用いてモデル化され、応答時間に与える影響を分離して評価した。
• 著者らは回帰手法を用いて、入力パrameterとエンドユーザーの応答時間との関係を定量化した。
• 最終的なモデルは、これらの個別要因を統合した包括的な予測フレームワークとして、エンドツーエンドの応答時間推定を可能にした。
• 米国およびインドのYahoo!ウェブページから得た実世界データを用いて、モデルの妥当性を検証した。予測結果と第三者の測定ツールの結果を比較した。
• 統計的検証により、モデルがさまざまなネットワーク状態やデバイスタイプにおいても頑健であることが確認された。

実験結果

リサーチクエスチョン

• RQ1 異なる国における帯域幅や待ち時間といったネットワーク特性が、エンドユーザーのウェブページ応答時間にどのように影響を与えるか？
• RQ2 ウェブページのレイアウトやリソース構成は、ユーザーが感じ取る応答性をどの程度正確に予測できるか？
• RQ3 ダウンロードとレンダリング動作を統合した複合モデルは、エンドユーザーの応答時間を正確に予測できるか？
• RQ4 実世界の展開において、モデルの予測精度は第三者の測定ツールと比べてどの程度優れているか？
• RQ5 このモデルは、早期ソフトウェア開発段階でパフォーマンスSLAを満たすために効果的に利用できるか？

主な発見

• 本モデルは、特に接続状態が不安定な地域を含む多様なネットワーク環境において、エンドユーザーの応答時間の予測精度が非常に高いことが確認された。
• ネットワーク状態、特に帯域幅と待ち時間は、ユーザーが感じ取る応答時間の変動を最も強く左右する要因であった。
• ブラウザのダウンロードおよびレンダリング動作は、特にモバイル端末や低性能デバイスでは、合計応答時間の大幅な割合を占めていた。
• 米国およびインドのYahoo!ウェブページを対象としたテストにおいて、本モデルは一貫性と正確性の面で第三者の測定ツールを上回った。
• 本モデルにより、パフォーマンスSLAを念頭に置いた設計やアーキテクチャ意思決定を、早期段階で行えるようになった。
• 統計的検証により、本モデルはさまざまなウェブページタイプおよび地理的地域において信頼性が高いことが確認された。