[论文解读] 729 new measures of economic complexity (Addendum to Improving the Economic Complexity Index)

Saleh Albeaik, Mary Kaltenberg+2 more|arXiv (Cornell University)|Aug 9, 2017

Economic and Technological Innovation参考文献 12被引用 14

一句话总结

本文通过系统探索原始2009年ECI及其2012年变体的替代函数形式，提出了729种新的ECI变体。研究发现，其中超过28%的变体预测能力达到最佳版本的90%以上，表明基于出口的经济复杂性度量的预测成功在多种公式下均具鲁棒性，暗示对度量本身进一步优化不太可能带来显著改进。

ABSTRACT

Recently we uploaded to the arxiv a paper entitled: Improving the Economic Complexity Index. There, we compared three metrics of the knowledge intensity of an economy, the original metric we published in 2009 (the Economic Complexity Index or ECI), a variation of the metric proposed in 2012, and a variation we called ECI+. It was brought to our attention that the definition of ECI+ was equivalent to the variation of the metric proposed in 2012. We have verified this claim, and found that while the equations are not exactly the same, they are similar enough to be our own oversight. More importantly, we now ask: how many variations of the original ECI work? In this paper we provide a simple unifying framework to explore multiple variations of ECI, including both the original 2009 ECI and the 2012 variation. We found that a large fraction of variations have a similar predictive power, indicating that the chance of finding a variation of ECI that works, after the seminal 2009 measure, are surprisingly high. In fact, more than 28 percent of these variations have a predictive power that is within 90 percent of the maximum for any variation. These findings show that, once the idea of measuring economic complexity was out, creating a variation with a similar predictive power (like the ones proposed in 2012) was trivial (a 1 in 3 shot). More importantly, the result show that using exports data to measure the knowledge intensity of an economy is a robust phenomenon that works for multiple functional forms. Moreover, the fact that multiple variations of the 2009 ECI perform close to the maximum, tells us that no variation of ECI will have a performance that is substantially better. This suggests that research efforts should focus on uncovering the mechanisms that contribute to the diffusion and accumulation of productive knowledge instead of on exploring small variations to existing measures.

研究动机与目标

• 调查经济复杂性指数（ECI）的替代公式在多大程度上保持预测能力。
• 解决ECI+变体与2012年ECI变体之间等价性的困惑，确认其数学相似性。
• 构建一个统一框架，用于生成和评估多种ECI变体。
• 评估对ECI度量的进一步优化是否能带来显著更高的预测性能。
• 将研究重点从增量式度量改进，转向理解知识扩散与积累在经济体中的机制。

提出的方法

• 作者构建了一个综合框架，通过改变原始2009年ECI和2012年变体的关键组件，生成了729种不同的ECI变体。
• 每种变体均通过修改核心ECI算法中的参数和函数形式生成，包括加权方案和归一化方法。
• 利用历史出口数据和国家层面的经济表现指标，评估每种变体的预测能力。
• 该框架允许对全部729种变体进行系统比较，以识别预测精度较高的版本。
• 作者使用统计分析测量所有变体中预测性能的分布，识别出表现最佳的变体。
• 将729种变体的性能与原始ECI和2012年变体进行比较，确认ECI+在数学上等价于2012年变体。

实验结果

研究问题

• RQ1 原始2009年ECI的多少种变体能保持对经济发展的高预测能力？
• RQ2 ECI+变体与2012年ECI变体在数学上是否等价？如果是，为何此前未被发现？
• RQ3 有多少比例的ECI变体能达到最大可能准确度的90%以内？
• RQ4 基于出口的复杂性度量在ECI的不同函数形式下是否仍具鲁棒性？
• RQ5 通过微小的度量优化能否显著提升ECI性能，还是当前框架已接近最优？

主要发现

• 在729种ECI变体中，超过28%的变体其预测能力达到所有变体中最大预测准确度的90%以上。
• ECI+变体在数学上等价于2012年ECI变体，确认两者公式差异并非实质性的。
• ECI变体的预测性能在不同函数形式下均表现出高度鲁棒性，表明利用出口数据衡量知识强度的核心思想具有稳定性。
• 没有任何一种ECI变体能显著超越现有最佳版本，表明度量优化的边际收益正在递减。
• 结果表明，未来研究应优先关注知识扩散与积累的机制，而非优化ECI公式。
• 本研究证明，基于出口的复杂性度量的成功并非依赖于单一精确的公式，而是依赖于一类广泛相似的模型。