[論文レビュー] Proxyeconomics, An agent based model of Campbell's law in competitive societal systems

Oliver Braganza|arXiv (Cornell University)|Mar 1, 2018

Auction Theory and Applications被引用数 3

ひとこと要約

本稿は、出版回数や利益など、代理指標が競争的な社会的システム内で目標として橹るようになる仕組みを模擬する、新しいエージェントベースモデルを提案する。経済的マルチタスク理論とコンテスト理論、文化的進化を統合することで、代理指標への過剰な依存が、特に高い競争と測定ノイズの下で、システムの効率性と目的達成を損なうことが示された。

ABSTRACT

In many areas of society we rely on competition to better achieve societal goals. Ideally, competition motivates effort and efficiently allocates resources. However, due to imperfect information, competition generally depends on quantitative proxy measures in order to assess performance. This leads to an increasing use of such quantitative proxies in modern societies. Examples include: in science, the publication count of an author, in healthcare, the number of patients treated or in business, the profit achieved. Importantly, some practices may optimize proxy performance but not the actual societal goal. In such cases, individual decisions and cultural practices may shift away from the societal goal and toward the proxy. Such processes have been described by a law attributed to Charles Goodhart or Donald T. Campbell, most pithily phrased as: 'When a measure becomes a target it ceases to be a good measure.' While the original mentions of this law address policy determination or education respectively, we propose it applies to any competitive societal system: Any proxy measure in a competitive societal system becomes a target for the competing individuals (or groups). Here, we construct an agent based model to explore the basic components and dynamics of such a process. The model combines an effort incentivization mechanism from economic multitasking theory and contest theory with a slower process of cultural evolution.

研究の動機と目的

• 競争的なシステムにおける定量的代理指標への依存が、不適切なインcentive構造と目的の逸脱を引き起こす仕組みを調査すること。
• 個人の努力、競争、パフォーマンス指標の文化的進化の間のダイナミックな相互作用をモデル化すること。
• 代理指標が真のパフォーマンスを反映しなくなり、むしろ最適でない行動を促すようになる条件を検討すること。
• 代理指標が指標ではなく目標として扱われるようになる際の「システムをあざむく行動」の出現をシミュレートすること。
• 代理指標評価が科学、医療、ビジネスなどのシステムにおける社会的目標達成に及ぼす長期的影響を評価すること。

提案手法

• エージェントベースのシミュレーションフレームワークを用いて、測定可能な代理指標を用いて競争する個人（エージェント）を表現する。
• エージェントは、経済的マルチタスク理論に基づき、複数のパフォーマンス次元に努力を配分するようにインcentivizedされる。
• コンテスト理論を適用して、代理指標のパフォーマンスに基づく報酬獲得の競争をモデル化し、勝者全員が獲得するダイナミクスを再現する。
• 文化的進化のメカニズムにより、観察された成功に基づきエージェントの行動と規範が段階的に変化し、実践が定着する様子をモデル化する。
• 測定ノイズを組み込むことで、現実のデータの不正確さを反映し、代理指標の不完全性を模擬する。
• 主な変数には、競争の激しさ、代理指標の信頼性、代理指標と真のパフォーマンス目標との整合性が含まれる。

実験結果

リサーチクエスチョン

• RQ1 高い個人的努力があるにもかかわらず、どのような条件下で代理指標が最適でない行動を引き起こすのか？
• RQ2 測定ノイズは、代理指標のパフォーマンスと実際の社会的目標との整合性にどのように影響するのか？
• RQ3 文化的進化が、時間の経過とともに欠陥のある代理指標の使用を強化する役割を果たすのか？
• RQ4 競争の激しさは、代理指標ベースのシステムにおける目的の逸脱の程度にどのように影響するのか？
• RQ5 モデルは、代理指標が目標として扱われるようになると、その有効性がどのように崩壊するかをどのように示すのか？

主な発見

• モデルは、代理指標が目標として扱われるようになると、高い努力があるにもかかわらず、エージェントが根本的な社会的目標ではなく代理指標の最適化に注力する傾向があることを示した。
• 高い競争が、システムをあざむく行動の傾向を強化し、代理指標のパフォーマンスと真の目的達成の間で顕著な乖離を生じさせた。
• 測定ノイズは、代理指標の信頼性を低下させ、その有効性が指標としての役割を果たせなくなるまでの時間を短縮した。
• 文化的進化は、欠陥のある代理指標の使用を強化し、良い指標が利用可能であっても、それらへの移行が困難になることを示した。
• モデルは、代理指標が目標として使われるほど、その情報性が低下する傾向があることを示し、キャンベルの法則がシミュレート環境で裏付けられた。
• 特に競争的圧力の下では、高い個人的努力があるにもかかわらず、代理指標と真の目標との整合性が欠けていると、システム全体のパフォーマンスが劣化することを示した。