[論文レビュー] Experimenting under Stochastic Congestion

Shuangning Li, Ramesh Johari+2 more|arXiv (Cornell University)|Feb 22, 2023

Advanced Queuing Theory Analysis被引用数 7

ひとこと要約

概要:論文は動的混雑を伴うサービス系におけるランダム化実験を分析し、待ち行列モデルに基づく推定量と局所摂動設計を導入して、標準のスイッチバックより効率を改善します。

ABSTRACT

We study randomized experiments in a service system when stochastic congestion can arise from temporarily limited supply or excess demand. Such congestion gives rise to cross-unit interference between the waiting customers, and analytic strategies that do not account for this interference may be biased. In current practice, one of the most widely used ways to address stochastic congestion is to use switchback experiments that alternatively turn a target intervention on and off for the whole system. We find, however, that under a queueing model for stochastic congestion, the standard way of analyzing switchbacks is inefficient, and that estimators that leverage the queueing model can be materially more accurate. Additionally, we show how the queueing model enables estimation of total policy gradients from unit-level randomized experiments, thus giving practitioners an alternative experimental approach they can use without needing to pre-commit to a fixed switchback length before data collection.

研究の動機と目的

• 確率的混雑とユニット間干渉を伴うサービス系でのランダム化実験の研究動機づけ。
• 動的干渉効果を捉えるために単一サーバ待ち行列で混雑をモデル化。
• 待ち行列構造を活用したポリシー勾配 V'(p) の推定量を開発。
• 漸近分散の観点から推定量を比較し、利得が生じる条件を特定。
• モデルと整合する新しい局所摂動実験デザインのクラスを提案。

提案手法

• 価格依存到着を伴う連続時間マルコフ待ち行列システムで混雑をモデル化。
• 直接効果と間接効果を分離するためにポリシー勾配 V'(p) の複数表現を導出。
• 表現に対応する3つのプラグイン推定量を開発：モデルフリー、アイドル時刻基準、再加重直接効果（WDE）。
• 2つのスイッチバック変種を分析：区間スイッチバックと再生性スイッチバック。
• 定常状態と価格摂動の縮小の下で推定量の漸近正規性結果を提供。
• 一般条件の下で WDE 分散が idle-time 分散の半分であり、モデルフリー分散以上にはならないという分散関係を確立。

実験結果

リサーチクエスチョン

• RQ1 確率的混雑は待ち行列系における長期入場率の価格影響推定にどのような影響を与えるか。
• RQ2 待ち行列構造を活用して標準のスイッチバック分析より効率的な V'(p) 推定を設計できるか。
• RQ3 異なるスイッチバック設計（区間 vs 再生性）は推定量の分散とロバスト性にどのように影響するか。
• RQ4 新しい再加重直接効果推定量がモデルフリーおよび idle-time 推定量を上回る条件は何か。
• RQ5 顧客の好みと待ち行列ダイナミクスが推定量の分散と精度に与える影響は何か。

主な発見

• V'(p) の3つの表現により、待ち行列ダイナミクスを活用する代替推定量が可能になる。
• 再加重直接効果（WDE）推定量は、漸近分散が idle-time およびモデルフリーの推定量より小さく、分散削減が正確に定量化される。
• M/M/1待ち行列の場合、WDE分散はモデルフリー分散と一致し、idle-time分散はWDE分散の2倍となる。
• 区間スイッチバックと再生性スイッチバックはこれらの推定量と併用可能で、提案された仮定の下で漸近正規性が成り立つ。
• 定常確率に基づく信頼区間の明示的な分散公式とプラグイン推定量を提供。
• 顧客の加入行動と待ち行列長の分布が推定量の精度に及ぼす影響と、分散削減が最も顕著になる条件を明らかにする。