[論文レビュー] VISAR: A Human-AI Argumentative Writing Assistant with Visual Programming and Rapid Draft Prototyping

Zheng Zhang, Jie Gao+2 more|arXiv (Cornell University)|Apr 16, 2023

Software Engineering Research被引用数 4

ひとこと要約

VISAR は、視覚プログラミングと迅速なドラフトプロトタイピングを通じて、議論的ライティングを支援する人間とAIの共同作業支援ツールです。ユーザーが階層的なライティング目標をブレインストーリングし、テキストと視覚的アウトラインを同期し、根拠や反論のための議論のインスピレーションを得られ、LLMを用いたドラフトのプロトタイピングが可能になります。制御された研究において、計画の効率性とユーザー満足度の向上が確認されています。

ABSTRACT

In argumentative writing, writers must brainstorm hierarchical writing goals, ensure the persuasiveness of their arguments, and revise and organize their plans through drafting. Recent advances in large language models (LLMs) have made interactive text generation through a chat interface (e.g., ChatGPT) possible. However, this approach often neglects implicit writing context and user intent, lacks support for user control and autonomy, and provides limited assistance for sensemaking and revising writing plans. To address these challenges, we introduce VISAR, an AI-enabled writing assistant system designed to help writers brainstorm and revise hierarchical goals within their writing context, organize argument structures through synchronized text editing and visual programming, and enhance persuasiveness with argumentation spark recommendations. VISAR allows users to explore, experiment with, and validate their writing plans using automatic draft prototyping. A controlled lab study confirmed the usability and effectiveness of VISAR in facilitating the argumentative writing planning process.

研究の動機と目的

• 既存のAIライティングツールが、高レベルの議論構造と低レベルのコンテンツ生成の間でシームレスな統合を提供しないというギャップに対処すること。
• 構造的でAI支援のガイダンスを受けることで、ライターが段階的に計画・修正・プロトタイピングを行う能力を高めること。
• テキストエディタと視覚的エディタを同期させることで、階層的なライティング目標の作成と論理的整合性の維持を支援すること。
• LLMを活用したプロトタイピングにより、議論的ドラフトの迅速な検討を可能にし、ライティング計画の検証と精錬を促進すること。
• チャット形式のLLMインタラクションに依存するのを減らすことで、議論的ライティングプロセスにおけるユーザーのコントロール感と自律性を高めること。

提案手法

• VISAR はテキストエディタと視覚的アウトラインキャンバスの二重インターフェースを採用し、両者の編集をリアルタイムで同期することで一貫性を保っています。
• 視覚プログラミングを用いて、議論構造をノードと関係性として表現し、ドラッグアンドドロップによる操作で階層的なライティング目標を操作可能にしています。
• システムはLLMを統合し、ユーザーが定義した主張に基づいて、根拠、論理的誤謬、反論のための「議論のインスピレーション」を生成しています。
• VISAR は、視覚的アウトラインから自動的に完全なドラフトバージョンを生成することで、迅速なドラフトプロトタイピングを可能にし、ユーザーが計画を段階的に評価・修正できるようにしています。
• ユーザーは「ラクなモード」と「非ラクなモード」を切り替えることで、ドラフトプロトタイプの生成タイミングを制御でき、柔軟な計画ワークフローを実現しています。
• アウトラインノード間の複数の関係タイプ（例：支持、反論、根拠）をサポートすることで、複雑な議論構造をモデル化しています。

Figure 1 . The main interface of VISAR. The user can edit their argumentative writing outline via either the text editor (A) or the canvas of the visual outline (B); VISAR synchronizes these two workspaces and facilitates users to correspond a writing item in editor (E) to the counterpart node in vi

実験結果

リサーチクエスチョン

• RQ1 ライティングアシスタントは、ユーザーのコントロール感と自律性を保ちながら、議論的ライティングの階層的計画をどのように支援できるか？
• RQ2 視覚プログラミングは、議論的ライティング計画の明確さと一貫性をどの程度向上させるか？
• RQ3 迅速なドラフトプロトタイピングは、ライターが議論構造を評価・修正するのをどの程度効果的に支援するか？
• RQ4 AIが生成する議論のインスピレーションは、ライティング計画の説得力と包括性を向上させることができるか？
• RQ5 伝統的なチャットベースのLLMインターフェースと比較して、VISAR は段階的なライティング計画をどの程度効果的に支援するか？

主な発見

• 12名の参加者を対象とした制御されたラボ研究により、VISAR が議論的ライティング計画において有用で使いやすく、好まれるツールであると認識されていることが確認された。
• 参加者たちは、同期されたテキスト・ビジュアルインターフェースを通じて、階層的なライティング目標の整理と論理的整合性の維持がより容易になったと報告した。
• 迅速なドラフトプロトタイピング機能により、ユーザーはテキストのみの計画よりも構造上の弱みを特定し、議論をより効果的に精錬できた。
• 議論のインスピレーションの統合により、ユーザーは計画段階の初期段階で根拠や反論、論理的考察を組み込むことができた。
• ユーザーは、非構造的なチャットベースのLLMインタラクションよりも、構造的で視覚的なアプローチを好んだ。これは、コントロール感の向上と認知的負荷の低減が理由であるとされた。
• 特に全体の構造と局所的な議論の両立を図る上で、システムは段階的で非線形なライティングプロセスを効果的に支援していることが示された。

Figure 2 . Four cognitive writing stages (Flower and Hayes, 1981 ; Grabe and Kaplan, 2014 ) and how VISAR’s features support them. VISAR primarily focuses on prewriting and planning stages in argumentative writing. VISAR also assists with rapid draft prototyping as a way to facilitate more effective