[论文解读] SemAxis: A Lightweight Framework to Characterize Domain-Specific Word Semantics Beyond Sentiment

Jisun An, Haewoon Kwak+1 more|arXiv (Cornell University)|Jun 14, 2018

Topic Modeling参考文献 21被引用 12

一句话总结

SemAxis 提出了一种轻量级、无监督的框架，通过将词语投影到基于 ConceptNet 反义对推导出的 732 个语义轴上，超越情感范畴来表征领域特定的词语语义。该方法在构建领域特定情感词典方面表现优异，并揭示了如 Reddit 子版块等在线社区中细微且依赖上下文的语义差异。

ABSTRACT

Because word semantics can substantially change across communities and contexts, capturing domain-specific word semantics is an important challenge. Here, we propose SEMAXIS, a simple yet powerful framework to characterize word semantics using many semantic axes in word- vector spaces beyond sentiment. We demonstrate that SEMAXIS can capture nuanced semantic representations in multiple online communities. We also show that, when the sentiment axis is examined, SEMAXIS outperforms the state-of-the-art approaches in building domain-specific sentiment lexicons.

研究动机与目标

• 为解决基于词典的文本分析方法在在线社区中因假设词语意义上下文不变而带来的局限性，尤其是在语言规范差异较大的社区中。
• 开发一种可泛化、轻量级的框架，以捕捉超越情感的细微领域特定词语语义。
• 系统性地识别并利用 ConceptNet 中的反义对来构建语义轴，以建模多样的语义视角。
• 评估该框架在构建高质量领域特定情感词典以及揭示社区间语义差异方面的有效性。

提出的方法

• 该框架从 ConceptNet 中的反义对中推导出 732 个语义轴，覆盖了超越情感的多样化语义维度。
• 将领域特定语料中的词向量投影到每个语义轴上，以计算每个词语的语义得分。
• 该方法使用预训练的词嵌入（如 word2vec），并通过向量运算评估词语在每个语义轴上的位置。
• 通过计算两个语料或社区之间的相对语义得分，实现对比分析。
• 使用情感轴进行评估，即将投影得分与标准情感词典进行比较。
• 所有推断出的词典、代码和评估工具均通过 SemAxis 包发布，以确保可复现性和可重用性。

实验结果

研究问题

• RQ1 轻量级、无监督的框架能否有效捕捉超越情感的细微领域特定词语语义？
• RQ2 与最先进方法相比，SemAxis 在构建领域特定情感词典方面的表现如何？
• RQ3 SemAxis 在多大程度上能够揭示在线社区之间的上下文依赖性语义差异？
• RQ4 该框架能否泛化到非情感语义轴？这些语义轴在捕捉语义细微差别方面与情感轴相比如何？

主要发现

• 在构建领域特定情感词典方面，SemAxis 的表现优于最先进方法，尤其在 Reddit 子版块上的评估中表现突出。
• 该框架成功捕捉了细微的语义差异：例如，在 /r/AskWomen 中，'Men' 被感知为更具攻击性且社交性更弱，而在 /r/AskMen 中则相反。
• 在 /r/NintendoSwitch 中，'Mario' 被感知为更具成功感、更讨人喜欢且更易操控，而相比之下在 /r/PS4 中则不然，反映出平台特有的文化认知差异。
• 将词语投影到语义轴上的结果揭示了社区间词语语义的系统性、可解释性差异，验证了该框架对上下文的敏感性。
• 使用 732 个由反义对推导出的语义轴，使语义表征超越情感，实现丰富多维的语义刻画。
• 即使在 Reddit 数据不完整的情况下，该框架依然有效，因为缺失评论对词级分析的语义投影影响微乎其微。