[논문 리뷰] Bidding under uncertainty: theory and experiments

Amy Greenwald, Justin A. Boyan|arXiv (Cornell University)|2004. 07. 07.

Auction Theory and Applications참고 문헌 13인용 수 48

한 줄 요약

이 논문은 순차적, 동시적, 하이브리드(TAC 클래식) 입찰 형식에서 보완적 및 대체적 상품을 포함한 복합 경매에서 최적의 입찰 전략을 조사한다. 순차적 입찰을 MDP로 공식화하여 기대 마진 수익 입찰가가 최적임을 증명하고, 동시에 입찰에서는 마진 수익 입찰가가 최적 아님을 보여준다. 두 가지 근사 방법—기대값 기반 및 샘플링 기반—을 제안하며, 실험을 통해 TAC 클래식 환경에서의 성능을 확인한다.

ABSTRACT

This paper describes a study of agent bidding strategies, assuming combinatorial valuations for complementary and substitutable goods, in three auction environments: sequential auctions, simultaneous auctions, and the Trading Agent Competition (TAC) Classic hotel auction design, a hybrid of sequential and simultaneous auctions. The problem of bidding in sequential auctions is formulated as an MDP, and it is argued that expected marginal utility bidding is the optimal bidding policy. The problem of bidding in simultaneous auctions is formulated as a stochastic program, and it is shown by example that marginal utility bidding is not an optimal bidding policy, even in deterministic settings. Two alternative methods of approximating a solution to this stochastic program are presented: the first method, which relies on expected values, is optimal in deterministic environments; the second method, which samples the nondeterministic environment, is asymptotically optimal as the number of samples tends to infinity. Finally, experiments with these various bidding policies are described in the TAC Classic setting.

연구 동기 및 목표

• 보완적 또는 대체적 상품이 있는 복합 경매에서의 입찰 전략 분석.
• 순차적 경매 입찰을 마코프 결정 과정(MDP)으로 모델링하고 최적 정책 식별.
• 동시 경매에서 마진 수익 입찰가의 한계를 조사하고 더 나은 근사 방법을 제안.
• 제안된 입찰 전략의 성능을 TAC 클래식 호텔 경매 환경에서 평가.
• 복잡한 경매 입찰 문제를 해결하기 위한 결정론적 및 확률적 근사 기법 비교.

제안 방법

• 불확실성 하에서의 동적 의사결정을 모델링하기 위해 순차적 경매 입찰을 마코프 결정 과정(MDP)으로 공식화.
• MDP 프레임워크를 사용하여 순차적 경매에서 기대 마진 수익 입찰가가 최적 정책임을 도출.
• 상대방의 행동과 평가의 불확실성을 반영하기 위해 동시 경매 입찰을 확률적 프로그램으로 모델링.
• 두 가지 근사 방법 제안: 기대값을 사용하는 방법(결정론적 설정에서 최적)과 몬테카를로 샘플링을 사용하는 방법(점점 증가하는 샘플 수에서 점차 최적).
• 다양한 입찰 정책의 성능을 비교하기 위해 TAC 클래식 경매 환경에서 실험적 평가 수행.
• 순차적 및 동시적 요소를 혼합한 TAC 클래식 하이브리드 경매 형식을 실제 전략 평가용 테스트베드로 활용.

실험 결과

연구 질문

• RQ1 보완적 및 대체적 상품이 있는 순차적 복합 경매에서 기대 마진 수익 입찰가가 최적 전략인가?
• RQ2 결정론적 조건에서도 동시에 입찰에서 마진 수익 입찰가가 여전히 최적인가?
• RQ3 동시 경매에서 확률적 프로그래밍 근사 방법이 마진 수익 입찰가보다 입찰 성능을 향상시킬 수 있는가?
• RQ4 동시 경매의 확률적 프로그램을 해결하는 데 있어 기대값 기반 및 샘플링 기반 근사 방법은 어떻게 비교되는가?
• RQ5 실제 하이브리드 경매 환경인 TAC 클래식에서 제안된 입찰 전략은 어떻게 성능을 발휘하는가?

주요 결과

• MDP 모델에 따라 순차적 경매에서 기대 마진 수익 입찰가가 최적 정책임이 증명됨.
• 반례를 통해 결정론적 조건에서도 동시에 입찰에서 마진 수익 입찰가가 최적 아님.
• 기대값 근사 방법은 결정론적 환경에서 최적이며, 알려진 분포에 대한 견고한 기준이 됨.
• 샘플링 기반 방법은 샘플 수가 증가함에 따라 점차 최적이며, 확률적 설정에서 강력한 접근 방식임.
• TAC 클래식 환경에서의 실험 결과, 샘플링 기반 방법이 기대 수익 및 최종 수익 측면에서 마진 수익 입찰가를 능가함.
• 하이브리드 TAC 클래식 환경에서 전략 성능은 순차적 및 동시적 요소의 혼합 비율에 따라 크게 달라짐.