[논문 리뷰] A Process Model for Crowdsourcing: Insights from the Literature on Implementation

Alireza Amrollahi|arXiv (Cornell University)|2016. 05. 16.

Open Source Software Innovations참고 문헌 25인용 수 7

한 줄 요약

이 논문은 구현 사례에 대한 체계적 문헌 고찰을 바탕으로 한 11단계 과정 모델을 제안한다. 컨소시엄 문헌과 사례 연구에서 유래한 활동들을 통합함으로써, 연구자와 실무자 모두가 컨소시엄 프로젝트의 핵심 단계를 체계적으로 이행할 수 있도록 보조하는 종합적인 프레임워크를 제공한다. 이는 방법론적 명확성과 구현 성공률을 향상시킨다.

ABSTRACT

The purpose of the current study is to systematically review the crowdsourcing literature, extract the activities which have been cited, and synthesise these activities into a general process model. For this to happen, we reviewed the related literature on crowdsourcing methods as well as relevant case studies and extracted the activities which they referred to as part of crowdsourcing projects. The systematic review of the related literature and an in-depth analysis of the steps in those papers were followed by a synthesis of the extracted activities resulting in an eleven-phase process model. This process model covers all of the activities suggested by the literature. This paper then briefly discusses activities in each phase and concludes with a number of implications for both academics and practitioners.

연구 동기 및 목표

• 기존 문헌에서 반복적으로 나타나는 컨소시엄 프로젝트 활동을 식별하고 통합하기 위해.
• 컨소시엄 구현을 위한 표준화되고 종합적인 과정 모델의 부족을 보완하기 위해.
• 다양한 사례 연구와 방법론 논문에서 기록된 모든 단계를 포괄하는 통합 프레임워크를 제공하기 위해.
• 학술 연구와 실무 적용을 지원하기 위해 체계적이고 근거 기반의 모델을 제공하기 위해.
• 컨소시엄 프로젝트의 전 과정에 걸친 구현 과정 이해를 향상시키기 위해.

제안 방법

• 컨소시엄 방법 및 관련 사례 연구에 대한 체계적 문헌 고찰을 수행하였다.
• 문헌에서 명시적으로 컨소시엄 프로젝트의 일부로 언급된 모든 활동을 추출하고 분류하였다.
• 선택된 논문에서 서술된 단계를 깊이 있게 분석하여 반복적으로 나타나는 단계를 식별하였다.
• 추출된 활동들을 통합하여 일관되고 순차적인 11단계 과정 모델로 정리하였다.
• 모델의 종합성을 검증하기 위해 인용된 모든 활동이 단계 내에서 반영되었는지 확인하였다.
• 실무 적용을 지원하기 위해 각 단계의 활동에 대한 간략한 설명을 제시하였다.

실험 결과

연구 질문

• RQ1 문헌에서 컨소시엄 프로젝트의 일부로 일관되게 보고된 핵심 활동은 무엇인가?
• RQ2 산산이 흩어져 있는 이러한 활동들은 어떻게 일관되고 순차적인 과정 모델로 정리될 수 있는가?
• RQ3 다양한 컨소시엄 구현 사례에서 일관되게 식별되는 단계는 무엇인가?
• RQ4 기존 프레임워크와 비교할 때 제안된 모델은 완전성과 적용 가능성 측면에서 어떻게 다른가?
• RQ5 이 모델은 학술 연구와 실무적 컨소시엄 구현에 어떤 의미를 지닌다?

주요 결과

• 연구는 컨소시엄 문헌에서 기록된 모든 활동을 포함하는 11개의 구분된 단계를 식별하였다.
• 제안된 11단계 모델은 종합적이고 근거 기반의 컨소시엄 구현 프레임워크를 제공한다.
• 모델은 다양한 사례 연구와 방법론 논문의 활동을 통합하여 광범위한 적용 가능성을 확보한다.
• 각 단계에는 문제 정의, 작업 설계, 인centive 구조화, 품질 제어 등의 구체적 활동이 포함된다.
• 실무자에게 실질적인 지침을 제공하기 위해 실제 구현 단계를 체계적인 단계로 매핑한다.
• 통합 분석을 통해 기존 문헌은 다양하지만, 공통된 기반 과정 구조를 공유하고 있으며, 이를 체계화할 수 있음을 입증한다.