[논문 리뷰] Reputation systems: an axiomatic approach

Moshe Tennenholtz|arXiv (Cornell University)|2004. 07. 07.

Auction Theory and Applications참고 문헌 15인용 수 25

한 줄 요약

이 논문은 피어 평가 시스템에서 상호 평가를 하는 에이전트들이 존재하는 환경에서의 사회적 순위를 위한 최초의 공리적 프레임워크를 제시한다. 세 가지 핵심 공리(postulates)를 정의하며, 이들 공리 모두를 동시에 만족하는 순위가 존재하지 않는다는 불가능성 정리(impossibility theorem)를 증명한다. 그러나 어느 하나의 공리를 약화시킬 경우, 일관된 사회적 순위를 구성할 수 있음을 보이며, 이는 양성 피드백, 음성 피드백, 혼합 피드백 시스템에 대해 각각 다른 해법을 제공한다.

ABSTRACT

Reasoning about agent preferences on a set of alternatives, and the aggregation of such preferences into some social ranking is a fundamental issue in reasoning about uncertainty and multi-agent systems. When the set of agents and the set of alternatives coincide, we get the so-called reputation systems setting. Famous types of reputation systems include page ranking in the context of search engines and traders ranking in the context of e-commerce. In this paper we present the first axiomatic study of reputation systems. We present three basic postulates that the desired/aggregated social ranking should satisfy and prove an impossibility theorem showing that no appropriate social ranking, satisfying all requirements, exists. Then we show that by relaxing any of these requirements an appropriate social ranking can be found. We first study reputation systems with (only) positive feedbacks. This setting refers to systems where agents' votes are interpreted as indications for the importance of other agents, as is the case in page ranking. Following this, we discuss the case of negative feedbacks, a most common situation in e-commerce settings, where traders may complain about the behavior of others. Finally, we discuss the case where both positive and negative feedbacks are available.

연구 동기 및 목표

• 다중 에이전트 환경에서 평판 시스템의 기본 원리를 공리적으로 형식화하기 위해.
• 합리적이고 공정한 에이전트의 사회적 순위가 만족해야 할 핵심 공리들을 규명하기 위해.
• 이러한 공리들 하에서 일관된 사회적 순위가 달성 가능한지 조사하기 위해.
• 양성 피드백, 음성 피드백, 혼합 피드백의 세 가지 피드백 유형에서 평판 시스템을 분석하기 위해.
• 공리적 일관성과 실용적 타당성 사이의 상충 관계를 탐색하기 위해.

제안 방법

• 에이전트와 대안이 동일한 집합인 선호도 집합 문제로 평판 시스템을 형식화하기 위해.
• 공정한 사회적 순위를 위한 최소한의 요구 조건으로서 익명성, 중립성, 단조성의 세 가지 핵심 공리 정의하기 위해.
• 불가능성 결과 증명: 어떤 사회적 순위도 세 공리 모두를 동시에 만족시킬 수 없다.
• 각 공리를 하나씩 차례로 약화시켜 일관된 순위를 구성할 수 있음을 보이며, 각 약화가 일관된 순위를 가능하게 함을 보여주기 위해.
• 세 가지 환경에서 피드백의 구조 분석: 양성 피드백(예: 페이지랭킹), 음성 피드백(예: 전자상거래 불만), 혼합 피드백.
• 공리적 추론을 통해 사회적 순위가 합리적이면서도 계산적으로 실현 가능한 조건을 도출하기 위해.

실험 결과

연구 질문

• RQ1 평판 시스템에서 사회적 순위가 익명성, 중립성, 단조성의 세 핵심 공리를 동시에 만족시킬 수 있는가?
• RQ2 이러한 공리들 중 하나를 약화시킬 경우, 평판 집계의 일관성은 어떻게 변화하는가?
• RQ3 웹 페이지 랭킹에서와 같이 오직 양성 피드백만 존재할 경우 평판 시스템은 어떻게 행동하는가?
• RQ4 전자상거래 분쟁 시스템에서와 같이 오직 음성 피드백만 존재할 경우 평판 시스템은 어떻게 행동하는가?
• RQ5 양성 피드백과 음성 피드백이 모두 존재할 경우, 일관된 사회적 순위를 달성할 수 있는 조건은 무엇인가?

주요 결과

• 불가능성 결과가 입증됨: 평판 시스템에서 익명성, 중립성, 단조성의 세 공리를 동시에 만족하는 사회적 순위는 존재하지 않는다.
• 세 공리 중 어느 하나라도 약화시킬 경우, 일관되고 합리적인 사회적 순위를 구성할 수 있다.
• 양성 피드백 시스템의 경우, 인-degree(지지 수) 기반 순위가 약화된 공리를 만족한다.
• 음성 피드백 시스템의 경우, 아웃-degree(불만 수) 기반 순위가 일관된 해법을 제공한다.
• 혼합 피드백 시스템의 경우, 한 공리를 약화시킬 경우, 양성 및 음성 피드백을 균형 있게 융합한 순위가 일관된 결과를 낳을 수 있다.
• 본 연구는 평판 시스템 설계에서의 상충 관계를 이해하기 위한 공리적 기반을 구축하였으며, 시스템 공학에서 원칙적인 결정을 가능하게 한다.