[논문 리뷰] "Generate" the Future of Work through AI: Empirical Evidence from Online Labor Markets

Liu Jin, Xingchen Xu외 3명|arXiv (Cornell University)|2023. 08. 09.

Digital Economy and Work TransformationSocial Sciences인용 수 3

한 줄 요약

이 연구는 ChatGPT의 외부적 출시를 자연 실험으로 활용하여 차등분석(DID) 방법을 통해 온라인 노동 시장에 미치는 영향을 분석한다. 그 결과, 급여 거래량은 3% 감소하고 프리랜서 수준에서는 5% 감소한 것으로 나타났지만, AI를 보완하는 프리랜서들은 거래량이 7.81% 증가하여 AI 시대에 적응하는 것이 성공의 핵심임을 시사한다.

ABSTRACT

Large Language Model (LLM)-based generative AI systems, such as ChatGPT, demonstrate zero-shot learning capabilities across a wide range of downstream tasks. Owing to their general-purpose nature and potential to augment or even automate job functions, these systems are poised to reshape labor market dynamics. However, predicting their precise impact extit{a priori} is challenging, given AI's simultaneous effects on both demand and supply, as well as the strategic responses of market participants. Leveraging an extensive dataset from a leading online labor platform, we document a pronounced displacement effect and an overall contraction in submarkets where required skills closely align with core LLM functionalities. Although demand and supply both decline, the reduction in supply is comparatively smaller, thereby intensifying competition among freelancers. Notably, further analysis shows that this heightened competition is especially pronounced in programming-intensive submarkets. This pattern is attributed to skill-transition effects: by lowering the human-capital barrier to programming, ChatGPT enables incumbent freelancers to enter programming tasks. Moreover, these transitions are not homogeneous, with high-skilled freelancers contributing disproportionately to the shift. Our findings illuminate the multifaceted impacts of general-purpose AI on labor markets, highlighting not only the displacement of certain occupations but also the inducement of skill transitions within the labor supply. These insights offer practical implications for policymakers, platform operators, and workers.

연구 동기 및 목표

• ChatGPT 출시가 텍스트 기반 온라인 노동 시장의 거래량에 미치는 인과적 영향을 정량화하는 것.
• 과거 거래량과 품질 기준에 따라 프리랜서와 급여 간의 이질적 영향을 평가하는 것.
• 서비스에 AI를 통합한 프리랜서가 성과 향상에 기여하는지 조사하는 것.
• LLM 기반 생성형 AI가 급여 경제의 노동 시장 역학을 어떻게 재편하는지에 대한 실증적 증거를 제공하는 것.
• 플랫폼 설계 및 정책 수립을 위해 AI 혁신 시대에 노동자가 어떻게 번영할 수 있는지 길잡이를 제공하는 것.

제안 방법

• 2022년 11월 30일 ChatGPT 공개 출시를 외부 충격으로 삼아 차등분석(DID) 프레임워크를 적용한다.
• 병행 추세를 검증하고 인과적 특정성을 확보하기 위해 상대적 시간 모델을 활용한다.
• DID 추정치의 탄력성을 시험하기 위해 일반화된 합성 통제 방법(GSCM)과 매칭 기반 반사모델(MC)을 사용한다.
• 시간에 따라 변하지 않는 요인과 시간에 따라 변화하는 혼란 요인을 제어하기 위해 단위 고정효과와 연-주 고정효과를 통합한다.
• 주요 온라인 노동 플랫폼의 거래량 데이터를 분석하여 텍스트 관련 급여에 집중한다.
• 서비스 설명과 플랫폼 활동을 바탕으로 프리랜서를 'AI 수용자' 또는 '비수용자'로 분류하여 차별적 영향을 평가한다.

실험 결과

연구 질문

• RQ1 ChatGPT의 출시가 온라인 노동 시장의 텍스트 기반 급여 거래량에 어떤 인과적 영향을 미치는가?
• RQ2 ChatGPT의 영향은 과거 거래량 또는 품질 평가가 다른 프리랜서들 사이에서 어떻게 다를까?
• RQ3 서비스 제공에 AI를 통합한 프리랜서는 거래 결과가 향상되는가?
• RQ4 ChatGPT 출시 이후 시간이 지남에 따라 그 효과는 어떻게 변화하는가?
• RQ5 이러한 발견은 생성형 AI 시대의 플랫폼 설계 및 노동 시장 정책에 어떤 함의를 갖는가?

주요 결과

• ChatGPT 출시로 인해 급여 수준에서는 통계적으로 유의미한 3% 감소와 프리랜서 수준에서는 5% 감소가 발생했다.
• 낮은 품질 기준을 가진 고거래량 급여와 프리랜서에서 부정적 영향이 가장 두드러졌으며, 이는 단순하고 반복적인 업무의 대체를 시사한다.
• AI를 수용하고 서비스에 통합한 프리랜서들은 거래량이 7.81% 증가하여 전략적 적응 경로의 가능성을 보여준다.
• ChatGPT의 부정적 영향은 시간이 지남에 따라 악화되었으며, 이는 사용자 숙련도 향상과 보급 확산이 대체 효과를 강화할 수 있음을 시사한다.
• GSCM와 MC 추정치를 활용한 탄력성 검증을 통해 DID 추정치의 신뢰성이 확인되었으며, 인과적 추론을 뒷받침한다.
• 연구 결과는 생성형 AI가 일부 노동 업무를 대체하지만, AI 능력을 보완하는 방식으로 적응하는 이들에게는 새로운 기회를 창출함을 입증한다.