[논문 리뷰] Serf and Turf: Crowdturfing for Fun and Profit

Gang Wang, Christo Wilson외 5명|arXiv (Cornell University)|2011. 11. 24.

Spam and Phishing Detection참고 문헌 21인용 수 25

한 줄 요약

이 논문은 수익을 얻기 위해 인간 노동자를 동원해 온라인 콘텐츠를 조작하는 플랫폼인 커뮤니티 터프링 시스템을 대규모 데이터 수집과 실제 캠페인 테스트를 통해 조사한다. 저자들은 이러한 시스템이 급속도로 성장하고 있으며 온라인 커뮤니티에 영향을 미치는 데 매우 효과적이며, 사회적 네트워크 및 기타 온라인 플랫폼의 신뢰성에 심각한 위협이 된다고 밝힌다.

ABSTRACT

Popular Internet services in recent years have shown that remarkable things can be achieved by harnessing the power of the masses using crowd-sourcing systems. However, crowd-sourcing systems can also pose a real challenge to existing security mechanisms deployed to protect Internet services. Many of these techniques make the assumption that malicious activity is generated automatically by machines, and perform poorly or fail if users can be organized to perform malicious tasks using crowd-sourcing systems. Through measurements, we have found surprising evidence showing that not only do malicious crowd-sourcing systems exist, but they are rapidly growing in both user base and total revenue. In this paper, we describe a significant effort to study and understand these "crowdturfing" systems in today's Internet. We use detailed crawls to extract data about the size and operational structure of these crowdturfing systems. We analyze details of campaigns offered and performed in these sites, and evaluate their end-to-end effectiveness by running active, non-malicious campaigns of our own. Finally, we study and compare the source of workers on crowdturfing sites in different countries. Our results suggest that campaigns on these systems are highly effective at reaching users, and their continuing growth poses a concrete threat to online communities such as social networks, both in the US and elsewhere.

연구 동기 및 목표

• 인터넷 상의 커뮤니티 터프링 플랫폼의 존재, 규모, 운영 구조를 조사하기 위해.
• 커뮤니티 터프링 캠페인의 효과성을 평가하여 온라인 콘텐츠 및 사용자 참여에 영향을 미치는 정도를 분석하기 위해.
• 다양한 국가에서 이러한 플랫폼의 노동자들에 대한 지리적 분포와 노동력 확보 방식을 분석하기 위해.
• 커뮤니티 터프링이 사회적 네트워크를 포함한 온라인 커뮤니티에 미치는 위협을 실제 영향을 입증함으로써 평가하기 위해.

제안 방법

• 커뮤니티 터프링 플랫폼의 캠페인 유형, 가격, 노동자 참여도 등을 추출하기 위해 대규모 웹 크롤링을 수행하였다.
• 목표 온라인 활동을 생성하는 데 있어 전반적인 효과성을 측정하기 위해 이러한 플랫폼에 제어된 비악성 캠페인을 구현하였다.
• 지역별로 작업 기간, 지급 금액, 노동자 인구통계학적 특성 등의 캠페인 메타데이터를 수집하고 분석하였다.
• 국가 간 노동력 공급원을 비교하여 지역 간 노동력 공급 및 플랫폼 운영 방식의 차이를 이해하기 위해 분석하였다.
• 관찰된 참여 지표를 기반으로 캠페인 성공률과 플랫폼 신뢰성을 평가하기 위해 통계 분석을 수행하였다.
• 관찰 기반 데이터 수집과 활동적 실험을 융합한 혼합 방법론을 사용하여 연구 결과의 타당성을 검증하였다.

실험 결과

연구 질문

• RQ1 인터넷 상에서 운영 중인 커뮤니티 터프링 플랫폼의 규모와 운영 체제는 어느 정도인가?
• RQ2 커뮤니티 터프링 캠페인은 목표 온라인 참여를 유도하는 데 얼마나 효과적인가?
• RQ3 이러한 플랫폼의 노동자 확보에 대한 지리적 패턴은 어떠한가?
• RQ4 커뮤니티 터프링 시스템은 기존의 자동화된 공격 탐지 기법을 어떻게 회피하는가?
• RQ5 커뮤니티 터프링은 온라인 커뮤니티와 플랫폼에 경제적·사회적 영향을 미치는가?

주요 결과

• 커뮤니티 터프링 플랫폼은 사용자 기반과 수익 모두 급속도로 증가하고 있어 조작된 온라인 콘텐츠에 대한 시장이 크게 확장되고 있음을 시사한다.
• 이러한 플랫폼의 캠페인은 목표 청중에 도달하는 데 매우 효과적이며, 실제 실험을 통해 측정 가능한 참여 결과를 보였다.
• 커뮤니티 터프링 사이트의 노동자들은 전 세계적으로 확보되며, 국가 간 노동력 공급과 가격에 상당한 차이가 있어 지역 전문화가 이루어지고 있음을 시사한다.
• 이 시스템은 구조화된 작업 관리 및 지급 메커니즘을 통해 합법적인 커뮤니티 소싱 플랫폼과 유사한 운영 체계를 갖추고 있어 매우 정교하다.
• 이러한 플랫폼은 인간 노동을 기반으로 하므로 자동화된 봇 활동을 탐지하기 위한 기존 보안 메커니즘을 성공적으로 우회한다.
• 본 연구는 인간 기반 조작이 실현 가능할 뿐 아니라 확장 가능하고 수익성 있는 것으로 입증되었으며, 온라인 커뮤니티의 신뢰성에 실질적인 위협이 된다.