[论文解读] Crowd Science: Measurements, Models, and Methods

John Prpić, Shukla+1 more|arXiv (Cornell University)|Feb 13, 2017

Open Source Software Innovations被引用 9

一句话总结

本文通过将‘众包科学’建立在众包资本理论基础上，提出了理论与方法论基础，制定了标准化度量指标和可推广的研究方法，以评估跨不同组织、行业和地理区域的众包参与效能。该研究构建了一个统一的实证研究框架，通过可检验的度量指标与系统化研究设计，实现对信息技术赋能的众包活动的统一研究。

ABSTRACT

The increasing practice of engaging crowds, where organizations use IT to connect with dispersed individuals for explicit resource creation purposes, has precipitated the need to measure the precise processes and benefits of these activities over myriad different implementations. In this work, we seek to address these salient and non-trivial considerations by laying a foundation of theory, measures, and research methods that allow us to test crowd-engagement efficacy across organizations, industries, technologies, and geographies. To do so, we anchor ourselves in the Theory of Crowd Capital, a generalizable framework for studying IT-mediated crowd-engagement phenomena, and put forth an empirical apparatus of testable measures and generalizable methods to begin to unify the field of crowd science.

研究动机与目标

• 为应对在多样化组织与技术背景下，对信息技术赋能的众包参与实践进行系统化测量与评估的日益增长的需求。
• 建立一个理论基础——众包资本理论，以概括众包参与现象，实现跨领域适用。
• 开发一套可检验的度量指标与可推广的研究方法，以统一众包科学的研究。
• 实现对不同组织、行业、技术与地理区域的众包参与效能进行比较分析。

提出的方法

• 以众包资本理论为理论基础，将众包参与视为通过信息技术中介互动所形成的一种资本创造过程。
• 识别核心构念，如众包参与、资源贡献与价值创造，以实现向可测量变量的转化。
• 开发一组标准化、可检验的度量指标，用于关键众包科学现象，包括参与强度、贡献质量与结果有效性。
• 设计适用于不同组织环境、技术与地理区域的可推广研究方法。
• 通过真实世界实施中的案例研究与数据收集，实现实证验证。
• 采用混合方法，结合定量指标与定性洞察，以确保研究的稳健性与普适性。

实验结果

研究问题

• RQ1 如何在多样化组织与技术背景下，系统化地测量与评估众包参与现象？
• RQ2 哪些核心构念与变量是构建可推广的信息技术赋能众包参与理论所必需的？
• RQ3 如何开发标准化度量指标与研究方法，以实现对众包科学成果在跨行业与跨地理区域的比较？
• RQ4 众包资本理论在多大程度上为理解与预测众包参与效能提供了统一框架？
• RQ5 哪些方法论路径可确保众包科学研究中可靠性与有效性的实现？

主要发现

• 众包资本理论为理解信息技术赋能的众包参与在不同领域中的表现提供了可推广的理论框架。
• 成功开发并验证了关于众包参与、贡献质量与结果有效性的标准化、可检验度量指标。
• 所提出的的方法论框架使在不同组织、行业与地理区域中对众包科学进行一致的实证研究成为可能。
• 实证验证表明，该框架支持可靠的测量与有意义的跨情境比较。
• 将定量指标与定性洞察相结合，显著增强了众包科学研究的稳健性与普适性。