[논문 리뷰] The QWERTY effect on the web: How typing shapes the meaning of words in online human-computer interaction

David García, Markus Strohmaier|arXiv (Cornell University)|2016. 04. 08.

Digital Communication and Language참고 문헌 38인용 수 3

한 줄 요약

이 연구는 QWERTY 효과—오른손으로 입력하는 키보드 문자들이 무의식적으로 긍정적인 의미와 연결된다는 현상—을 15개의 대규모 웹 데이터셋을 통해 조사한다. 제목과 리뷰에서의 단어 사용에 대한 통계 분석을 통해, 오른쪽 키보드 문자 비율이 높을수록 평가가 더 긍정적으로 내려지는 경향이 있으며, 이는 해독(평가) 및 인코딩(작성) 과정 모두에서 관찰된다. 평가에서의 효과 크기는 표준편차의 1~3% 수준이며, 이는 키보드 레이아웃이 온라인 감성 인식에 강력하고 무의식적인 영향을 미친다는 것을 입증한다.

ABSTRACT

The QWERTY effect postulates that the keyboard layout influences word meanings by linking positivity to the use of the right hand and negativity to the use of the left hand. For example, previous research has established that words with more right hand letters are rated more positively than words with more left hand letters by human subjects in small scale experiments. In this paper, we perform large scale investigations of the QWERTY effect on the web. Using data from eleven web platforms related to products, movies, books, and videos, we conduct observational tests whether a hand-meaning relationship can be found in decoding text on the web. Furthermore, we investigate whether encoding text on the web exhibits the QWERTY effect as well, by analyzing the relationship between the text of online reviews and their star ratings in four additional datasets. Overall, we find robust evidence for the QWERTY effect both at the point of text interpretation (decoding) and at the point of text creation (encoding). We also find under which conditions the effect might not hold. Our findings have implications for any algorithmic method aiming to evaluate the meaning of words on the web, including for example semantic or sentiment analysis, and show the existence of "dactilar onomatopoeias" that shape the dynamics of word-meaning associations. To the best of our knowledge, this is the first work to reveal the extent to which the QWERTY effect exists in large scale human-computer interaction on the web.

연구 동기 및 목표

• QWERTY 효과—오른손 키보드 사용과 긍정적 감성의 연관성—이 실제 웹 상 상호작용에서 나타나는지 테스트하는 것.
• 이 효과가 텍스트 해석(해독) 뿐 아니라 텍스트 생성(인코딩) 과정에서도 발생하는지 조사하는 것.
• 고매출 또는 저빈도어 조건과 같은 특정 조건에서 QWERTY 효과가 약화되거나 반전되는지 여부를 규명하는 것.
• 언어적 및 맥락적 변수가 온라인 콘텐츠에서 손-의미 연관성의 강도에 미치는 영향을 평가하는 것.
• QWERTY 효과가 계산사회과학 분야의 감성 분석 및 의미 모델링에 미치는 영향을 평가하는 것.

제안 방법

• 표준 QWERTY 키보드 레이아웃을 기반으로, 단어 내 오른손 키보드 문자 비율을 측정한 Right Side Ratio(RSR)를 계산하였다.
• 언어적 및 맥락적 혼란요소로부터 RSR의 영향을 분리하기 위해 순열 검정, 강건한 회귀분석, 다변량 제어 기법을 적용하였다.
• IMDB, 아마존, 유튜브 등 11개의 사용자 평가 데이터셋을 분석하여, 항목 평가 및 좋아요 수에 대한 해독 효과를 테스트하였다.
• 별점 평가가 있는 4개의 제품 리뷰 데이터셋을 분석하여, RSR가 평가적 감성과 어떻게 연관되는지 테스트하였다.
• 단어 빈도, 길이, 의미적 내용을 제어하여, 손 사용이 인식된 의미에 미치는 영향을 분리하였다.
• 제품의 인기도 및 단어의 빈도 부족과 같은 맥락적 요소와 RSR 간의 상호작용을 탐색하였다.

실험 결과

연구 질문

• RQ1 사용자가 평가나 좋아요를 통해 항목을 평가하는 실제 웹 상 상호작용에서 QWERTY 효과가 나타나는가?
• RQ2 QWERTY 효과는 텍스트 해석(예: IMDB의 영화 제목 평가) 뿐 아니라 텍스트 생성(예: 아마존 리뷰 작성) 과정에서도 감지 가능한가?
• RQ3 고매출 또는 저빈도어 조건과 같은 특정 조건에서 QWERTY 효과가 약화되거나 사라지는가?
• RQ4 다른 심리언어학적 영향과 비교해 볼 때 이 효과는 얼마나 강력한가? 언어적 및 맥락적 변수를 통제한 후에도 지속되는가?
• RQ5 Right Side Ratio(RSR)는 감성 분석 모델에서 예측 특징으로 활용될 수 있는가?

주요 결과

• QWERTY 효과는 15개의 웹 데이터셋 전반에서 뚜렷하게 관찰되었으며, RSR가 1 증가할수록 사용자 평가에서 표준편차의 1~3% 수준의 정규화 계수를 보였다.
• 리뷰에 포함된 왼손 키보드 문자가 100개 더 많을수록 별점 평가가 최대 17% 감소하여 평가적 감성과의 유의미한 음의 상관관계를 보였다.
• 저빈도어에서 효과가 더 강했고, 고매출 제품에서는 효과가 약화되어 인기도가 효과에 영향을 미칠 수 있음을 시사했다.
• 일부 맥락에서는 역 QWERTY 효과가 관찰되어 맥락적 특성이 일반적인 손-의미 연관성을 뒤집거나 억제할 수 있음을 보여주었다.
• QWERTY 효과는 해독(예: IMDB의 영화 제목)뿐 아니라 인코딩(예: 아마존 리뷰)에서도 감지되었으며, 이는 사용자 평가 및 콘텐츠 생성 모두에서 효과의 존재를 확인한다.
• 효과 크기는 크지 않지만(표준편차의 1~3%), 다른 심리언어학적 효과와 유사하게 일관되므로, 키보드 레이아웃이 의미 인식에 무의식적이고 신체기반의 영향을 미친다는 것을 시사한다.