[論文レビュー] Characterizing the Global Crowd Workforce: A Cross-Country Comparison of Crowdworker Demographics

Lisa Posch, Arnim Bleier+5 more|arXiv (Cornell University)|Dec 14, 2018

Mobile Crowdsensing and Crowdsourcing被引用数 9

ひとこと要約

本研究は、Appenプラットフォーム（旧 CrowdFlower）の11,000件以上のアンケート回答を用いて、10か国にまたがる大規模なクロスネーショナル分析を初めて実施した。国レベルでの人口統計的構成とマイクロタスク収入への依存度の顕著な差が明らかになった。労働者集団の特性は時間経過とともにほとんど変化せず、グローバルなギグエコノミーにおける研究者、プラットフォーム、政策立案者にとって重要なインサイトを提供する。

ABSTRACT

Since its emergence roughly a decade ago, microtask crowdsourcing has been attracting a heterogeneous set of workers from all over the globe. This paper sets out to explore the characteristics of the international crowd workforce and offers a cross-national comparison of crowdworker populations from ten countries. We provide an analysis and comparison of demographic characteristics and shed light on the significance of microtask income for workers situated in different national contexts. With over 11,000 individual responses, this study is the first large-scale country-level analysis of the characteristics of workers on the platform Appen (formerly CrowdFlower and Figure Eight), one of the two platforms dominating the microtask market. We find large differences between the characteristics of the crowd workforces of different countries, both regarding demography and regarding the importance of microtask income for workers. Furthermore, we find that the composition of the workforce in the ten countries was largely stable across samples taken at different points in time.

研究の動機と目的

• MTurkで支配的である米国およびインドの人口を除き、グローバルなクラウドワーキングフォースの人口統計的構成を理解すること。
• 異なる国境を越えた文脈において、マイクロタスク収入がワーカーの生活維持にどの程度貢献しているかを比較すること。
• 複数の国で、クラウドワーカーの特性が時間経過とともに安定しているかどうかを評価すること。
• クラウドプラットフォームを用いて研究を行う研究者らが、対象集団の代表性や標本バイアスを理解するためのデータを提供すること。
• 国別に異なるクラウドワーク参加パターンや収入依存度を特定することで、政策立案およびプラットフォーム設計を支援すること。

提案手法

• グローバルなカバレッジを持つ主要なマイクロタスクプラットフォームであるAppenプラットフォーム（旧 CrowdFlower）のクラウドワーカーを対象に、大規模なアンケート調査を実施した。
• 8か月の時間差をあけて、10か国のワーカーから2つの独立したサンプルを収集し、時間的安定性を評価した。
• 年齢、性別、教育水準、雇用状況、居住国を含む自己申告による人口統計的データを用いた。
• マイクロタスク収入の収入全体に占める割合や金融的依存度を測定することで、収入の中心性を分析した。
• 時間的要因による変動を補正するため、時間帯および曜日をカテゴライズし、国間の差異と時間経過による変化を統計的に比較した。
• アンケートデータを用いて、人口統計的特徴と収入依存度、プラットフォーム参加度との関係を分析した。特に、英語力が選抜フィルターとしての役割を果たすかに注目した。

実験結果

リサーチクエスチョン

• RQ1 10か国のクラウドワーカーの人口統計的特性はどのように異なるか？
• RQ2 マイクロタスク収入は、異なる国境を越えた文脈において、どの程度生活の主たる収入源として機能しているか？
• RQ3 時間経過とともに、異なる国におけるクラウドワーカーの人口統計的および収入関連特性はどの程度安定しているか？
• RQ4 国間の労働者集団構成の差を説明する要因は何か？
• RQ5 各国におけるクラウドワーキングフォースの人口統計的プロファイルは、それぞれの国における一般人口または伝統的労働市場と比較してどのように異なるか？

主な発見

• クラウドワーカーの人口統計的構成には、性別分布、教育水準、雇用状況の面で顕著な国レベルの差が存在する。
• 特に労働市場が弱い地域では、マイクロタスク収入が多くのワーカーの生活維持の主たる収入源となっている。
• 2回目のデータ収集時においても、クラウドワーカー集団の構成はほとんど安定しており、時間経過による平均変化は国間の平均差よりも小さかった。
• 時間経過によるワーカー特性の最大の変化は、特定の国における広範な経済的変動と関連している可能性がある。
• インドやブラジルのワーカーは、西ヨーロッパ諸国に比べ、マイクロタスク収入を主たる収入源または唯一の収入源としている割合が高い。
• 本研究は、プラットフォームベースのクラウドワーキングが多様でグローバルに分散した労働者集団を引きつけるが、地域経済的・制度的要因によって形作られた明確な国別プロファイルを有していることを確認した。