[论文解读] LLMediator: GPT-4 Assisted Online Dispute Resolution

Hannes Westermann, Jaromír Šavelka+1 more|arXiv (Cornell University)|Jul 27, 2023

Dispute Resolution and Class Actions被引用 13

一句话总结

LLMediator 是一个实验平台，使用 GPT-4 重新表述煽动性信息、起草调解员干预，并且可能在网上争端解决中自主参与以促进友好和解。

ABSTRACT

In this article, we introduce LLMediator, an experimental platform designed to enhance online dispute resolution (ODR) by utilizing capabilities of state-of-the-art large language models (LLMs) such as GPT-4. In the context of high-volume, low-intensity legal disputes, alternative dispute resolution methods such as negotiation and mediation offer accessible and cooperative solutions for laypeople. These approaches can be carried out online on ODR platforms. LLMediator aims to improve the efficacy of such processes by leveraging GPT-4 to reformulate user messages, draft mediator responses, and potentially autonomously engage in the discussions. We present and discuss several features of LLMediator and conduct initial qualitative evaluations, demonstrating the potential for LLMs to support ODR and facilitate amicable settlements. The initial proof of concept is promising and opens up avenues for further research in AI-assisted negotiation and mediation.

研究动机与目标

• 通过 AI 辅助谈判与调解，提升 ODR 处理高量级、低强度争议。
• 调查 GPT-4 如何将用户信息重新表述为更中立、利于和解。
• 提供草拟的调解员干预并评估作为实验特征的自主干预。

提出的方法

• 开发并部署一个与 GPT-4 API 集成的实验性基于网络的 ODR 平台。
• 实现 F1：重新表述煽动性信息以在保持内容的同时中和语气。
• 实现 F2：基于对话上下文生成草拟的调解员干预。
• 实现 F3：系统在谈判中的可选自主干预。
• 说明每个特征的提示策略和系统工作流。

实验结果

研究问题

• RQ1 GPT-4 能否在不改变核心内容的前提下有效地重新表述煽动性用户信息？
• RQ2 GPT-4 是否能够生成有用、具上下文感知的调解员干预，帮助人类调解员？
• RQ3 自主系统干预是否可行，及在 ODR 中相关风险是什么？
• RQ4 将 LLMs 集成到 ODR 工作流程中的实际考虑因素与风险？

主要发现

• GPT-4 展示了在保留内容的同时将信息改写为更中性语气的能力。
• GPT-4 能够起草适应最近消息与调解员指示的调解员干预。
• 系统可以在谈判中可选地进行自主干预，带来对风险及需谨慎评估的讨论。
• 作者讨论了作为增强智能的好处，并强调人机在环的安全措施以减轻幻觉和误导。