[논문 리뷰] LLMediator: GPT-4 Assisted Online Dispute Resolution

Hannes Westermann, Jaromír Šavelka외 1명|arXiv (Cornell University)|2023. 07. 27.

Dispute Resolution and Class Actions인용 수 13

한 줄 요약

LLMediator는 GPT-4를 이용해 공격적 메시지를 재구성하고 중재자 개입을 초안하며, 원만한 합의를 촉진하기 위해 온라인 분쟁 해결에 자율적으로 참여할 수 있는 실험 플랫폼입니다.

ABSTRACT

In this article, we introduce LLMediator, an experimental platform designed to enhance online dispute resolution (ODR) by utilizing capabilities of state-of-the-art large language models (LLMs) such as GPT-4. In the context of high-volume, low-intensity legal disputes, alternative dispute resolution methods such as negotiation and mediation offer accessible and cooperative solutions for laypeople. These approaches can be carried out online on ODR platforms. LLMediator aims to improve the efficacy of such processes by leveraging GPT-4 to reformulate user messages, draft mediator responses, and potentially autonomously engage in the discussions. We present and discuss several features of LLMediator and conduct initial qualitative evaluations, demonstrating the potential for LLMs to support ODR and facilitate amicable settlements. The initial proof of concept is promising and opens up avenues for further research in AI-assisted negotiation and mediation.

연구 동기 및 목표

• 고 AI-assisted negotiation 및 mediation으로 ODR의 대량의 낮은 강도의 분쟁을 해결합니다.
• GPT-4가 사용자 메시지를 보다 중립적이고 합의 친화적으로 재구성하는 방법을 조사합니다.
• 초안 중재자 개입을 제공하고 자율 개입을 실험적 기능으로 평가합니다.

제안 방법

• GPT-4 via API와 통합된 실험적 웹 기반 ODR 플랫폼을 개발하고 배포합니다.
• F1: 공격적 메시지를 내용은 유지하되 어조를 중립화하도록 재구성합니다.
• F2: 대화 맥락에 기반해 초안 중재자 개입을 생성합니다.
• F3: 협상에서 시스템의 선택적 자율 개입을 구현합니다.
• 각 기능에 대한 프롬프트 전략 및 시스템 워크플로를 설명합니다.

실험 결과

연구 질문

• RQ1 GPT-4가 핵심 콘텐츠를 변경하지 않으면서 공격적 사용자 메시지를 효과적으로 재구성할 수 있을까요?
• RQ2 GPT-4가 인간 중재자를 돕는 유용하고 맥락-aware한 중재자 개입을 생성할 수 있을까요?
• RQ3 자율 시스템 개입이 가능하며 ODR에서 관련 위험은 무엇인가요?
• RQ4 LLMs를 ODR 워크플로우에 통합하는 실용적 고려사항과 위험은 무엇인가요?

주요 결과

• GPT-4는 콘텐츠를 보존하면서 메시지를 더 중립적인 어조로 재구성하는 능력을 입증합니다.
• GPT-4는 최근 메시지와 중재자 지침에 적응하는 중재자 개입 초안을 작성할 수 있습니다.
• 시스템은 협상에서 선택적으로 자율 개입할 수 있으며, 위험에 대한 논의와 신중한 평가의 필요성을 제기합니다.
• 저자들은 보완적 지능으로서의 이점과 환각 및 오도 방지를 위한 인간-루프 안전장치를 강조합니다.