[論文レビュー] Analyzing Organizational Routines in Online Knowledge Collaborations: A Case for Sequence Analysis in CSCW

Brian Keegan, Shakked Lev+1 more|arXiv (Cornell University)|Aug 19, 2015

Wikis in Education and Collaboration参考文献 56被引用数 5

ひとこと要約

本稿では、Wikipedia などのオンライン知識共同作業における組織的ルーチンを研究するための基本的手法として、イベントログデータを用いた編集行動の繰り返しパターンを解明するための系列解析を提案する。生物学情報学および社会学の手法を応用することで、共通の修正順序など、統計的に有意な行動モチーフを同定し、分散型の貢献者がどのように作業を調整しているかを明らかにした。これにより、社会技術的システムにおける共同生産ルーチンを理解するための新しいミックスメソッド的手法が提示された。

ABSTRACT

Research into socio-technical systems like Wikipedia has overlooked important structural patterns in the coordination of distributed work. This paper argues for a conceptual reorientation towards sequences as a fundamental unit of analysis for understanding work routines in online knowledge collaboration. We outline a research agenda for researchers in computer-supported cooperative work (CSCW) to understand the relationships, patterns, antecedents, and consequences of sequential behavior using methods already developed in fields like bio-informatics. Using a data set of 37,515 revisions from 16,616 unique editors to 96 Wikipedia articles as a case study, we analyze the prevalence and significance of different sequences of editing patterns. We illustrate the mixed method potential of sequence approaches by interpreting the frequent patterns as general classes of behavioral motifs. We conclude by discussing the methodological opportunities for using sequence analysis for expanding existing approaches to analyzing and theorizing about co-production routines in online knowledge collaboration.

研究の動機と目的

• オンライン知識共同作業における時間的調整パターンを理解するというギャップを埋めるため、特に静的または集約的ネットワーク分析の限界を解消すること。
• 社会技術的システムにおける組織的ルーチンを研究する際、個々の相互作用やネットワーク構造よりも、行動の系列が分析の基本単位であるべきだと主張すること。
• 生物学情報学および社会学から得た系列解析手法を、ピア生産プラットフォームからの縦断的、イベントベースのデータに適応して応用すること。
• 貢献者行動に繰り返し現れる統計的に有意な行動モチーフを同定することで、組織的ルーチンの文法的モデルに実証的根拠を提供すること。
• CSCW に系列解析を統合する研究アジェンダを確立し、共同作業のダイナミクスをより豊かに、ミックスメソッドで探求できるようにすること。

提案手法

• 生物学情報学および社会学で開発された元来の系列解析手法を用い、オンライン知識共同作業における編集行動の系列をモデル化・比較する。
• 96件のWikipedia記事にわたる16,616人のユニークな編集者による37,515件の改訂のイベントログを用い、個々の貢献者行動系列を再構築する。
• 統計的手法を適用し、ランダムな期待値よりも著しく高いか低いかの系列を同定することで、潜在的な行動モチーフまたはルーチンを特定する。
• 定量的系列パターンと定性的解釈を統合し、頻度の高い系列を一般的な共同生産ルーチンのクラスとして文脈づける。
• アラインメントおよびクラスタリング手法を用いて、貢献者間で系列を比較し、対話および調整の主なパターンを同定する。
• 編集頻度などの一次的行動指標に加え、系列構造から導出される二次的属性を統合することで、単なるカウントやネットワーク接続を超えた分析を豊かにする。

実験結果

リサーチクエスチョン

• RQ1 オンライン知識共同作業において、どのような繰り返しパターンの編集行動が出現し、それらが組織的ルーチンをどのように反映しているか？
• RQ2 編集者や記事ごとに、貢献者行動の系列は頻度や構造でどのように異なり、その差異が調整パターンをどのように明らかにしているか？
• RQ3 観察された系列がランダム期待値からどれほど逸脱しているか。これは意図的または制度化された調整慣行を示唆するか？
• RQ4 系列解析は、ピア生産システムにおける共同生産の構成要素となる行動モチーフをどのように特定・解釈できるか？
• RQ5 系列解析は、社会的ネットワーク分析やコンテンツ分析といった既存のCSCW手法をどのように補完または拡張できるか？

主な発見

• ランダムな確率を上回る統計的に有意な編集行動の系列が同定され、Wikipediaにおける構造的で繰り返し可能な共同生産ルーチンの存在が示された。
• 頻度の高い系列は行動モチーフとして解釈され、たとえば「編集→レビュー→元に戻す→再編集」といった、知識生産における一般的な調整パターンを反映している。
• 特定の系列の普及は、Feldmanの組織的ルーチンにおけるパフォーマティビティ理論を支持しており、個々の人物が他者の行動に基づいて行動を採用または放棄するという点を示している。
• 系列解析により、イベントログを静的ネットワークスナップショットに集約・要約するのでは捉えきれない貢献者行動パターンのばらつきが明らかになった。
• 本手法は、一般的なルーチンと例外的な行動を両方効果的に同定でき、非定型的または新興の実践をさらに定性的に検証可能にした。
• 編集回数などの一次的指標と、編集者ステータスや記事品質などの共変数を組み合わせた系列解析の統合は、社会技術的システムにおけるミックスメソッド研究の可能性を示した。