[논문 리뷰] Cultural Shift or Linguistic Drift? Comparing Two Computational Measures of Semantic Change

William L. Hamilton, Jure Leskovec외 1명|arXiv (Cornell University)|2016. 06. 09.

Language and cultural evolution참고 문헌 16인용 수 37

한 줄 요약

이 논문은 의미 변화의 두 가지 계산적 측정법을 소개하고 비교한다: 단어 벡터 간 거리에 기반한 전역적 측정법과 단어의 가장 가까운 의미 이웃들에 중점을 둔 새로운 局소적 이웃 측정법. 局소적 측정법은 문화적 이동(예: 'cell'이 '감옥의 방'에서 '휴대폰'으로 변화하는 것)에 더 민감하며, 전역적 측정법은 규칙적인 언어적 이동(예: 'promise'가 수행어적 용법에서 일반적 용법으로 변화하는 것)을 탐지할 수 있어 의미 변화의 원인이 문화적 요인인지 언어적 요인인지를 구분하는 데 연구자들이 도움을 받을 수 있다.

ABSTRACT

Words shift in meaning for many reasons, including cultural factors like new technologies and regular linguistic processes like subjectification. Understanding the evolution of language and culture requires disentangling these underlying causes. Here we show how two different distributional measures can be used to detect two different types of semantic change. The first measure, which has been used in many previous works, analyzes global shifts in a word's distributional semantics, it is sensitive to changes due to regular processes of linguistic drift, such as the semantic generalization of promise ("I promise." -> "It promised to be exciting."). The second measure, which we develop here, focuses on local changes to a word's nearest semantic neighbors; it is more sensitive to cultural shifts, such as the change in the meaning of cell ("prison cell" -> "cell phone"). Comparing measurements made by these two methods allows researchers to determine whether changes are more cultural or linguistic in nature, a distinction that is essential for work in the digital humanities and historical linguistics.

연구 동기 및 목표

• 계산 기반 방법을 통해 의미 변화의 원인이 문화적 이동인지 언어적 이동인지를 구분하는 것.
• 갑작스럽고 문화적으로 유도된 의미 변화에 민감한 새로운 지역 이웃 측정법을 개발하는 것.
• 다양한 품사에서 두 측정법—전역 벡터 거리와 지역 이웃 변화—의 민감도를 평가하고 비교하는 것.
• 대규모 역학적 코퍼스와 집중적 사례 연구를 통해 측정법을 검증하는 것.
• 연구자의 연구 초점(문화적 변화 vs. 언어적 진화)에 따라 적절한 의미 변화 측정법을 선택할 수 있도록 돕는 것.

제안 방법

• 역학적 코퍼스(구글 N-grams, COHA)에서 훈련된 역학적 word2vec 임베딩을 사용하며, 음성 기반 음성 샘플링(SGNS)과 의미 공간 정렬을 적용한다.
• 연속된 10년대 간 단어 벡터 간 유클리드 거리로 전역적 의미 변화를 계산한다.
• 지역적 의미 변화를 인접한 시기 간 단어의 가장 가까운 이웃(상위 10개)의 재결합 유사도(Jaccard similarity)로 정의한다.
• 다양한 언어와 데이터셋을 사용하여 품사(명사, 동사, 형용사, 부사) 간 변화 속도를 비교하기 위해 혼합 효과 회귀 모델을 적용한다.
• 6개의 단어에 대한 사례 연구를 수행한다: 세 개는 알려진 언어적 이동을 겪은 단어(예: 'actually', 'must', 'promise')이고, 세 개는 문화적 이동을 겪은 단어(예: 'gay', 'virus', 'cell')이다.
• 두 측정법 간 변화 속도의 통계적 비교를 통해 문화적 변화와 언어적 변화에 대한 민감도를 평가한다.

실험 결과

연구 질문

• RQ1 지역 이웃 측정법이 전역 벡터 거리 측정법보다 문화적 이동을 더 효과적으로 탐지할 수 있는가?
• RQ2 지역 이웃 측정법이 문화적으로 유도된 의미 변화에 취약한 명사에서 더 민감한가?
• RQ3 전역 거리 측정법이 동사와 기타 서술어에서 규칙적인 언어적 이동을 더 잘 포착하는가?
• RQ4 두 측정법이 문화적 요인과 언어적 과정에 의해 유도된 의미 변화를 어느 정도로 구분하는가?
• RQ5 두 측정법을 비교함으로써 연구자들이 의미 변화의 주요 원인이 문화적인지 언어적인지를 판단하는 데 도움이 될 수 있는가?

주요 결과

• 지역 이웃 측정법은 모든 언어와 데이터셋에서 명사에 대해 유의미하게 높은 변화율을 할당하여 문화적 이동에 민감함을 나타낸다.
• 전역 거리 측정법은 동사, 형용사, 부사에 대해 높은 변화율을 할당하며, 주로 주관화와 문법화와 같은 알려진 언어적 이동 패tern과 일치한다.
• 사례 연구에서 문화적 이동을 겪은 단어들(예: 'cell', 'gay', 'virus')은 지역 이웃 측정법에 의해 더 큰 변화를 보였다.
• 규칙적인 언어적 이동을 겪은 단어들(예: 'actually', 'must', 'promise')은 전역 거리 측정법에 의해 더 큰 변화를 보였다.
• 두 측정법은 서로 다른 유형의 의미 변화에 민감하다: 지역 측정법은 갑작스럽고 문화적으로 유도된 변화를 탐지하고, 전역 측정법은 미세하고 체계적인 이동을 탐지한다.
• 결과는 지역 이웃 측정법을 문화적 변화의 시점 탐지에, 전역 측정법을 문법화와 언어적 진화 연구에 사용하는 것이 타당하다는 것을 뒷받침한다.