Skip to main content
QUICK REVIEW

[论文解读] End-to-End Neural Event Coreference Resolution

Yaojie Lu, Hongyu Lin|arXiv (Cornell University)|Sep 17, 2020
Topic Modeling参考文献 51被引用 8
一句话总结

该论文提出E³C,一种新颖的端到端神经网络,用于事件共指消解,该模型联合建模事件检测与共指消解,并从原始文本中自动学习特征。它引入了一种类型引导机制,以应对提及多样性与长距离共指问题,在KBP 2016和KBP 2017数据集上取得了最先进性能。

ABSTRACT

Traditional event coreference systems usually rely on pipeline framework and hand-crafted features, which often face error propagation problem and have poor generalization ability. In this paper, we propose an End-to-End Event Coreference approach -- E3C neural network, which can jointly model event detection and event coreference resolution tasks, and learn to extract features from raw text automatically. Furthermore, because event mentions are highly diversified and event coreference is intricately governed by long-distance, semantic-dependent decisions, a type-guided event coreference mechanism is further proposed in our E3C neural network. Experiments show that our method achieves new state-of-the-art performance on two standard datasets.

研究动机与目标

  • 解决传统基于流水线的事件共指消解系统中固有的错误传播问题,这些系统依赖于上游组件(如NER和事件检测)。
  • 克服先前方法中手工设计特征的局限性,这些特征限制了在不同领域和语言间的泛化能力。
  • 在端到端框架中联合建模事件检测与共指消解,以实现共享表征学习并提升性能。
  • 解决事件共指中提及多样性与长距离、语义依赖型共指决策的挑战。
  • 开发一种类型引导机制,以增强语义表征,并在解码过程中强制实现全局类型一致性。

提出的方法

  • 使用提及提议网络直接从原始文本中识别候选事件提及,而无需依赖上游组件。
  • 使用先行词预测网络以端到端方式预测提及之间的共指关系。
  • 引入一种类型感知的先行词网络,联合预测共指与事件类型得分,以提升语义理解。
  • 通过将事件类型嵌入融合到提及表征中,实现类型优化的提及表征,以连接词汇上不相似的提及。
  • 设计一种类型引导的解码算法,确保预测的共指链中事件类型的全局一致性。
  • 利用掩码注意力机制隐式建模论元信息,而无需显式提取论元角色,从而增强语义表征。

实验结果

研究问题

  • RQ1端到端神经网络是否能够在不依赖流水线组件的情况下,联合学习事件检测与共指消解?
  • RQ2类型引导机制在缓解提及多样性与长距离共指决策影响方面的有效性如何?
  • RQ3与基线方法相比,引入事件类型信息在多大程度上提升了共指消解性能?
  • RQ4所提出方法在不同领域(如新闻报道与非正式讨论论坛)之间是否具备良好的泛化能力?
  • RQ5在鲁棒性与准确率方面,该类型引导机制与传统基于特征的方法或联合建模方法相比表现如何?

主要发现

  • E³C在KBP 2016和KBP 2017两个基准数据集上均取得了最先进性能,优于以往方法。
  • 在KBP 2017数据集上,E³C的F1得分为63.4,显著优于此前最佳结果56.0。
  • 消融实验证实,类型引导机制的各个组件——类型感知预测、类型优化表征与类型引导解码——均对性能提升有贡献。
  • 该模型展现出较强的泛化能力,尽管在非正式讨论论坛数据(DF)上的性能相比新闻报道(NW)有所下降,表明领域自适应仍是挑战。
  • 类型引导机制能有效连接语义相似但词汇多样的提及,例如 'departing' 与 'goodbye',二者均指代同一类EndPosition事件。
  • 端到端设计消除了上游组件带来的错误传播,从而实现了更鲁棒且一致的预测。

更好的研究,从现在开始

从阅读论文到最终审阅,大幅缩短您的研究时间。

无需绑定信用卡

本解读由 AI 生成,并经人工编辑审核。