[논문 리뷰] Experimenting under Stochastic Congestion

Shuangning Li, Ramesh Johari외 2명|arXiv (Cornell University)|2023. 02. 22.

Advanced Queuing Theory Analysis인용 수 7

한 줄 요약

이 논문은 동적 혼잡과 서비스 시스템에서 무작위 실험을 분석하고, 표준 스위치백보다 효율성을 개선하는 큐잉 모델 기반 추정기와 국소 교란 설계를 제시한다.

ABSTRACT

We study randomized experiments in a service system when stochastic congestion can arise from temporarily limited supply or excess demand. Such congestion gives rise to cross-unit interference between the waiting customers, and analytic strategies that do not account for this interference may be biased. In current practice, one of the most widely used ways to address stochastic congestion is to use switchback experiments that alternatively turn a target intervention on and off for the whole system. We find, however, that under a queueing model for stochastic congestion, the standard way of analyzing switchbacks is inefficient, and that estimators that leverage the queueing model can be materially more accurate. Additionally, we show how the queueing model enables estimation of total policy gradients from unit-level randomized experiments, thus giving practitioners an alternative experimental approach they can use without needing to pre-commit to a fixed switchback length before data collection.

연구 동기 및 목표

• 확률적 혼잡과 단위 간 간섭이 있는 서비스 시스템에서 무작위 실험 연구의 필요성과 동기를 제시한다.
• 동적 간섭 효과를 포착하기 위해 단일 서버 큐를 통해 혼잡을 모델링한다.
• 큐잉 구조를 활용하는 정책 기울기 V'(p)에 대한 추정기를 개발한다.
• 점근 분산 측면에서 추정기를 비교하고 이득이 발생하는 조건을 식별한다.
• 모델에 부합하는 새로운 국소 교란 실험 설계의 클래스를 제안한다.

제안 방법

• 가격 의존 도착을 갖는 연속 시간 마르코프 큐 시스템으로 혼잡을 모델링한다.
• 직접 효과와 간접 효과를 분리하기 위해 정책 기울기 V'(p)의 여러 표현을 도출한다.
• 표현에 대응하는 세 가지 플러그인 추정기를 개발한다: 모델-프리(model-free), 아이들 타임 기반(idle-time-based), 재가중 직접 효과(WDE).
• 두 가지 스위치백 변형을 분석한다: 간격 스위치백(interval switchback)과 재생 스위치백(regenerative switchback).
• 정상성 및 축소되는 가격 교란 하에서 추정기의 점근 정상성 결과를 제공한다.
• 일반 조건에서 WDE 분산이 idle-time 분산의 절반이고 모델-프리 분산보다 크지 않다는 분산 관계를 확립한다.

실험 결과

연구 질문

• RQ1 확률적 혼잡이 큐 시스템에서 가격이 장기 입실률에 미치는 영향 추정에 어떤 영향을 미치는가?
• RQ2 큐잉 구조를 활용하여 표준 스위치백 분석보다 더 효율적인 V'(p) 추정기를 설계할 수 있는가?
• RQ3 다른 스위치백 설계(간격 vs 재생)가 추정기의 분산 및 강건성 측면에서 어떻게 비교되는가?
• RQ4 새로운 재가중 직접 효과 추정기가 모델-프리 및 아이들 타임 추정기보다 성능을 발휘하는 조건은 어떤가?
• RQ5 고객 선호도와 큐잉 동역학이 추정기 분산과 정확도에 미치는 영향은 무엇인가?

주요 결과

• V'(p)의 세 표현은 큐잉 동역학을 활용하는 대안 추정기를 가능하게 한다.
• 재가중 직접 효과(WDE) 추정기는 점근 분산이 idle-time 및 모델-프리 추정기보다 작아지며, 정확한 분산 감소가 정량화된다.
• M/M/1 큐의 경우 WDE 분산은 모델-프리 분산과 같고, idle-time 분산은 WDE 분산의 두 배이다.
• 이 추정기들과 함께 간격 스위치백(interval switchback)과 재생 스위치백(regenerative switchback)을 사용할 수 있으며, 제안된 가정 하에서 점근 정상성이 성립한다.
• 논문은 정상상태 확률에 기초한 신뢰구간을 위한 명시적 분산 공식과 플러그인 추정기를 제공한다.
• 분석은 고객 접속 행동과 대기열 길이 분포가 추정기의 정확도에 미치는 영향과 분산 감소가 가장 뚜렷한 시점을 드러낸다.