[논문 리뷰] Collaborative Development in Wikipedia

Gerald C. Kane, Sam Ransbotham|arXiv (Cornell University)|2012. 04. 16.

Wikis in Education and Collaboration참고 문헌 14인용 수 7

한 줄 요약

이 연구는 위키백과의 의학 위키프로젝트에서 협업 패턴이 기사 품질에 미치는 영향을 분석하여 기여자 수와 품질 간에 비선형적 관계(역U자형)가 있음을 밝혀냈다. 즉, 일정 수 이하에서는 기여자가 많을수록 품질이 향상되지만, 그 이상이 되면 품질이 떨어진다. 연구는 기여자들이 다른 기사에 기여하는 방식으로 공유 지식이 품질에 영향을 주며, 시계열에 따라 약화되는 시청자 수와 기여자 참여 간의 순환적 피드백 루프를 규명했다.

ABSTRACT

Using 16,068 articles in Wikipedia's Medicine Wikiproject, we study the relationship between collaboration and quality. We assess whether certain collaborative patterns are associated with information quality in terms of self-evaluated quality and article viewership. We find that the number of contributors has a curvilinear relationship to information quality, more contributors improving quality but only up to a certain point. Other articles that its collaborators work on also influences the quality of an information artifact, creating an interdependent network of artifacts and contributors. Finally, we see evidence of a recursive relationship between information quality and contributor activity, but that this recursive relationship attenuates over time.

연구 동기 및 목표

• 협업이 한 위키백과 기사에 영향을 주는 방식이 다른 기사의 품질에 어떻게 영향을 미치는지 조사하기 위해 공유 기여자들을 통해 분석한다.
• 기여자의 네트워크 중심성 측정치(도수 중심성 및 고유벡터 중심성)가 정보 품질을 예측할 수 있는지 검토한다.
• 기사 시청자 수와 기여자 수 간의 상호작용적 관계를 평가하고, 이 관계가 시간이 지남에 따라 어떻게 변화하는지 분석한다.
• 위키백과와 같은 피어 생성 지식 플랫폼에서 협업 기여물 간의 상호의존성 이해하기.
• 콘텐츠, 프로세스, 명성 지식의 자원 다양성과 깊이가 기사 품질에 어떻게 영향을 미치는지 평가한다.

제안 방법

• 2007년 12월부터 2009년 6월까지 위키백과의 의학 위키프로젝트에서 수집한 16,068개 기사와 40,479명의 기여자 데이터를 사용하였다.
• 기사 시청자 수, 기여자 수, 품질 지표 간의 동시적 관계를 모델링하기 위해 삼단계 최소제곱법을 적용하였다.
• 기사 품질을 자기 평가 품질 점수와 기사 시청자 수를 대체 지표로 사용하였다.
• 네트워크 중심성 측정치를 통합: 도수 중심성(기여자 연결의 다양성)과 고유벡터 중심성(유명한 연결의 깊이).
• 기여자 수의 비선형 효과를 검증하기 위해 회귀 모델에 선형항과 제곱항을 모두 포함시켰다.
• 동시방정식 모델에서 인과관계를 규명하기 위해 '보호' 변수를 통제변수로 사용하였다.

실험 결과

연구 질문

• RQ1 위키백과 기사의 기여자 수가 정보 품질에 어떤 영향을 미치는가?
• RQ2 기여자가 다른 기사에 얼마나 많은 참여를 했는가에 따라 주된 기사의 품질이 얼마나 영향을 받는가?
• RQ3 기사 시청자 수와 기여자 수 사이에 순환적 관계가 존재하는가? 그리고 이 관계는 시간이 지남에 따라 어떻게 변화하는가?
• RQ4 기여자의 네트워크 중심성 측정치(도수 중심성 및 고유벡터 중심성)가 기사 품질과 어떤 관련이 있는가?
• RQ5 사용자 생성 콘텐츠의 품질이 기여자의 지역적 또는 전역적 네트워크 위치에 따라 달라지는가?

주요 결과

• 기여자 수는 기사 품질과 비선형(역U자형) 관계를 보이며, 일정 수 이하에서는 기여자가 많을수록 품질이 향상되지만, 그 이상이 되면 품질이 떨어진다.
• 기여자 수의 선형 계수는 β = 12.28 (p < 0.001)이며, 제곱항 계수는 β = -6.78 (p < 0.001)로 비선형 패턴이 확인되었다.
• 기여자당 도수 중심성으로 측정한 기여자 다양성은 품질에 긍정적이고 유의미한 영향을 미쳤다 (β = 0.168, p < 0.001).
• 전역 네트워크 중심성(고유벡터 중심성) 역시 품질을 긍정적으로 예측했다 (β = 0.105, p < 0.001), 이는 고품질 기여자에 대한 깊은 액세스가 품질 향상에 기여함을 시사한다.
• 기사 시청자 수는 기여자 수와 순환적 관계를 보였다: 높은 시청자 수가 더 많은 기여자를 유치하고, 더 많은 기여자가 시청자 수를 증가시켰지만, 이 효과는 시간이 지남에 따라 약화되었다.
• 순환 피드백 루프가 확인되었으며, 시청자 수가 기여자 수를 유의미하게 증가시켰다 (β = 0.10, p < 0.001), 하지만 기사의 연령이 증가함에 따라 이 효과는 점점 약화되었다.