[논문 리뷰] Badge System Analysis and Design

Jiawei Zhang, Xiangnan Kong외 1명|arXiv (Cornell University)|2016. 07. 02.

Mobile Crowdsensing and Crowdsourcing참고 문헌 13인용 수 7

한 줄 요약

이 논문은 온라인 소셜 네트워크 내 배지 시스템을 분석하고 설계하기 위해 게임 이론 모델을 제안하며, 사용자 동기와 사회적 영향을 중심으로 다룬다. 사용자 유틸리티를 배지 가치와 노력의 함수로 모델링하고, 사용자와 시스템 설계자 간의 이중 플레이어 게임으로서의 배지 시스템 설계 문제를 수립하며, 최적의 배지 임계값이 약 0.3~0.4일 때 사용자 기여가 최대화되고 노력과 보상이 균형을 이루는 것으로 밝혀졌다.

ABSTRACT

To incentivize users' participations and steer their online activities, online social networks start to provide users with various kinds of rewards for their contributions to the sites. The most frequently distributed rewards include account levels, reputation scores, different kinds of badges, and even material awards like small gifts and cash back, etc. Attracted by these rewards, users will spend more time using the network services. In this paper, we will mainly focus on "badges reward systems" but the proposed models can be applied to other reward systems as well. Badges are small icons attached to users' homepages and profiles denoting their achievements. People like to accumulate badge for various reasons and different badges can have specific values for them. Meanwhile, to get badges, they also need to exert efforts to finish the required tasks, which can lead to certain costs. To understand and model users' motivations in badge achievement activities, we will study an existing badge system launched inside a real-world online social network, Foursquare, in this paper. At the same time, to maximize users' contributions to online social networks, social network system designers need to determine the optimal badge system mechanism carefully. Badge system mechanism describes various detailed aspects of the system and can involve many parameters, e.g., categories of existing badges, number of badges available as well as the minimum contributions required to obtain the badges, which all need to be designed with meticulous investigations. Based on the model of users' badges accumulating activities, in this paper, we will also study how to design the badge system that can incentivize the maximum users' contributions to the social networks.

연구 동기 및 목표

• 온라인 소셜 네트워크 내에서 사용자가 배지를 축적하는 동기를 이해하고, 특히 사회적 영향력과 인식된 배지 가치에 중점을 둔다.
• 사용자 간의 전략적 상호작용을 고려해 배지 시스템을 전략적 게임으로 모델링하며, 사용자는 배지 획득으로부터 개인적 이득을 극대화하기 위해 이타적으로 행동한다.
• 시스템 설계자와 사용자 간의 스택엘베르크 게임으로서의 배지 시스템 설계 문제를 수립하여 전체 네트워크 기여를 극대화하고자 한다.
• 실제 Foursquare 데이터셋(4,240명의 사용자, 1,431개의 배지, 176,301건의 배지 획득 기록 포함)을 활용해 모델을 실증적으로 검증한다.
• 사용자 기여를 극대화하면서도 노력과 보상의 인cent티브를 균형 잡는 최적의 배지 임계값 파rameter를 규명한다.

제안 방법

• 배지 가치, 노력 비용, 사회적 영향(예: 친구 기반 경쟁)을 고려한 유틸리티 함수를 제안한다.
• 사용자 동기의 다양성을 반영하기 위해 배지 가치 함수를 내재적, 사회적, 성취 기반의 세 가지 유형으로 분류한다.
• 스택엘베르크 게임으로서의 배지 시스템 설계를 모델링: 시스템 설계자가 배지 임계값(인centive 파rameter)을 설정하고, 사용자는 이에 대해 합리적으로 반응하여 유틸리티를 극대화한다.
• 모든 배지에 동일한 임계값 파rameter를 적용하여 다양한 배지 임계값 설정에서의 기여도를 평가하기 위한 시뮬레이션 프레임워크를 구현한다.
• 실제 Foursquare 데이터를 활용해 사용자 능력 분포를 校정하고, 다양한 임계값 설정 하에서의 배지 획득 동역학을 시뮬레이션한다.
• 공동 배지 패턴 및 친구 기반 경쟁의 시간적 패턴을 검증하기 위해 힘의 법칙 및 통계 분석을 적용한다.

실험 결과

연구 질문

• RQ1 온라인 소셜 네트워크 내에서 친구 관계는 사용자 간의 배지 공유 및 획득 패턴에 어떻게 영향을 미치는가?
• RQ2 사용자 배지 축적의 주요 동기는 무엇이며, 유틸리티 함수를 통해 어떻게 모델링할 수 있는가?
• RQ3 온라인 소셜 네트워크 내에서 전체 사용자 기여를 극대화하기 위해 배지 시스템은 어떻게 설계할 수 있는가?
• RQ4 사용자 노력과 네트워크 기여를 균형 잡는 데 최적의 배지 달성 임계값은 무엇인가?
• RQ5 동료 압박과 사회적 비교는 배지 획득의 시기와 가능성에 얼마나 큰 영향을 미치는가?

주요 결과

• 친구인 사용자들은 상당히 더 높은 확률로 공통된 배지를 획득하며, 이는 배지 획득 행동에 강한 사회적 상관관계가 있음을 시사한다.
• 대부분의 배지들이 친구 중 한 명도 획득하지 않은 상태에서 획득되는 경향이 있어, 사용자들이 종종 독창적인 성취를 통해 자신을 구분하려는 경향이 있음을 나타낸다.
• 배지 임계값이 0.3에서 0.4 사이일 때 사용자 기여가 최고조에 이르며, 이는 노력과 인센티브 사이의 최적의 균형을 이룬다.
• 배지 임계값이 너무 낮을 경우(예: 0.0), 노력이 필요 없기 때문에 사용자 기여가 최소가 되고, 0.5 이상일 경우 과도한 노력 요구로 기여가 감소한다.
• 내재적, 사회적, 성취 기반 배지 가치를 통합한 유틸리티 프레임워크에 통합함으로써 모델은 사용자 동기를 효과적으로 포착한다.
• 시뮬레이션 결과는 제안된 게임 이론 기반 설계 메커니즘이 네트워크 전체 기여를 극대화하는 데 있어 단순 임계값 설정보다 뛰어난 성능을 보임을 확인한다.