[논문 리뷰] Why we like the ECI+ algorithm

Andrea Gabrielli, Matthieu Cristelli외 4명|arXiv (Cornell University)|2017. 08. 03.

Economic and Technological Innovation참고 문헌 1인용 수 6

한 줄 요약

이 논문은 2012년에 소개된 피트니스 알고리즘과 ECI+ 알고리즘이 수학적으로 동일하며, 정규화 및 입력 데이터 처리 방식의 차이 외에는 다를 바가 없다고 보여준다. 저자들은 알베이크 등이 ECI+가 피트니스를 능가한다고 주장한 바를 반박하며, 후자의 보고된 결과가 알고리즘의 반복 횟수가 부족하기 때문이지 방법론적 우월성 때문이 아니라고 밝힌다.

ABSTRACT

Recently a measure for Economic Complexity named ECI+ has been proposed by Albeaik et al. We like the ECI+ algorithm because it is mathematically identical to the Fitness algorithm, the measure for Economic Complexity we introduced in 2012. We demonstrate that the mathematical structure of ECI+ is strictly equivalent to that of Fitness (up to normalization and rescaling). We then show how the claims of Albeaik et al. about the ability of Fitness to describe the Economic Complexity of a country are incorrect. Finally, we hypothesize how the wrong results reported by these authors could have been obtained by not iterating the algorithm.

연구 동기 및 목표

• ECI+와 피트니스 알고리즘 간의 수학적 동치성을 입증하기 위해.
• 알베이크 등이 자신의 ECI+ 논문에서 보고한 결과의 타당성을 도전하기 위해.
• ECI+ 논문에서 보고된 피트니스 순위가 기존 결과와 어떻게 다를 수 있는지 설명하기 위해.
• ECI+와 피트니스 간의 보고된 차이가 본질적 차이가 아니라 잘못된 알고리즘 구현에서 기인한다는 것을 보여주기 위해.
• ECI+는 새로운 알고리즘을 도입한 것이 아니라, 잘못된 실행과 해석을 반복하는 기존 알고리즘을 재브랜딩한 것임을 명확히 하기 위해.

제안 방법

• 도출: Revealed Comparative Advantage (RCA) 기반의 이진 수출 행렬을 사용하여 피트니스 알고리즘을 유도한다.
• 이항 행렬 $ M_{cp} $ 를 광범위한 수출 행렬 $ X_{cp} $ 로 대체하면 ECI+ 식이 도출됨을 보여준다.
• 정규화를 각 단계에서 수행하는 동일한 반복 프레임워크를 사용하여 ECI+ 알고리즘을 재현한다.
• 200회 반복한 피트니스의 순위를 알베이크 등의 논문에서 보고된 순위와 비교한다.
• 초기 조건과 반복 횟수에 대한 순위 민감도를 테스트하며, 특히 단일 반복 실행에 집중한다.
• 재현 가능성과 공정한 비교를 확보하기 위해 알베이크 등의 기준에 따라 필터링된 BACI 데이터셋을 사용한다.

실험 결과

연구 질문

• RQ1 ECI+ 알고리즘은 피트니스 알고리즘과 수학적으로 동일한가?
• RQ2 왜 ECI+ 논문에서 보고된 순위가 기존의 피트니스 순위와 크게 다를까?
• RQ3 알베이크 등이 주장하는 ECI+가 피트니스를 능가하는 것처럼 보이는 원인은 무엇인가?
• RQ4 알고리즘 반복 횟수가 피트니스 및 ECI+ 프레임워크에서 최종 순위에 어떻게 영향을 미치는가?
• RQ5 왜 ECI+ 논문에서 피트니스 순위가 이전 논문에서 알려진 결과와 일관되지 않는가?

주요 결과

• 이항 행렬 $ M_{cp} $ 를 광범위한 수출 행렬 $ X_{cp} $ 로 대체할 경우, ECI+는 피트니스 알고리즘과 수학적으로 동일하며, 정규화 및 입력 스케일링의 차이 외에는 다를 바가 없다.
• 알베이크 등이 자신의 논문에서 보고한 피트니스 순위는 잘못되었고, 200회 반복한 피트니스 알고리즘의 결과와 일관되지 않다.
• ECI+ 논문의 잘못된 순위는 피트니스 알고리즘을 단 한 번만 실행한 결과와 거의 정확히 일치하며, 이는 실행 과정에서의 근본적 오류를 시사한다.
• 2010년 기준 피트니스 순위 상위 5개국은 독일, 중국, 이탈리아, 일본, 미국이다. 이는 알베이크 등이 그리스가 일본이나 중국보다 높은 순위를 차지한다고 주장한 것과 정면으로 배치된다.
• ECI+ 저자들은 피트니스 값에 로그 변환을 적용하지 않았는데, 이는 문헌에서 표준으로 사용되며 거시경제 지표와의 비교에 필수적이다.
• 결과의 차이를 입력 데이터의 차이로만 설명할 수 없으며, 알고리즘을 수렴할 정도로 반복하지 않은 데 기인한다.