[論文レビュー] An HCI-Centric Survey and Taxonomy of Human-Generative-AI Interactions

Jingyu Shi, Rahul Jain+3 more|arXiv (Cornell University)|Oct 11, 2023

Innovative Human-Technology Interaction被引用数 8

ひとこと要約

人間-GenAI との相互作用に関する291件の論文の総合的な survey を提出。人間と GenAI の視点から包括的な分類法を提案し、将来の設計の指針とする。

ABSTRACT

Generative AI (GenAI) has shown remarkable capabilities in generating diverse and realistic content across different formats like images, videos, and text. In Generative AI, human involvement is essential, thus HCI literature has investigated how to effectively create collaborations between humans and GenAI systems. However, the current literature lacks a comprehensive framework to better understand Human-GenAI Interactions, as the holistic aspects of human-centered GenAI systems are rarely analyzed systematically. In this paper, we present a survey of 291 papers, providing a novel taxonomy and analysis of Human-GenAI Interactions from both human and Gen-AI perspectives. The dimensions of design space include 1) Purposes of Using Generative AI, 2) Feedback from Models to Users, 3) Control from Users to Models, 4) Levels of Engagement, 5) Application Domains, and 6) Evaluation Strategies. Our work is also timely at the current development stage of GenAI, where the Human-GenAI interaction design is of paramount importance. We also highlight challenges and opportunities to guide the design of Gen-AI systems and interactions towards the future design of human-centered Generative AI applications.

研究の動機と目的

• 人間-GenAI との相互作用に関する既存研究を統合し、包括的な分類法を作成する。
• 人間と GenAI の両視点から設計空間を分析し、主要な相互作用要素を特定する。
• 将来の人間中心の GenAI システムの設計課題・機会・方向性を強調する。

提案手法

• PRISMA ガイドラインに従う系統的文献調査。
• ML/DL, CV, NLP の領域を横断する2波のキーワード検索で GenAI モデルと GenAI-システム論文を特定。
• 初期コーパス12,076件を797件にスクリーニングし、適格性審査を経て inclusion criteria に基づき291件に絞り込む。
• 3著者による反復的な精練を通じた協働的分類法の開発と、インターラター合意の評価（Fleiss’ Kappa = 0.79）。
• 人間中心およびモデル中心の設計次元を網羅するデュアル視点の分類法を編成。

実験結果

リサーチクエスチョン

• RQ1 人間-GenAI 相互作用を構成するコアな設計次元は何か。
• RQ2 GenAI システムは人間へどのようにフィードバックを提供し、協働ワークフローで人間は GenAI をどのように制御できるか。
• RQ3 人間-GenAI 相互作用の典型的な適用領域と評価戦略は何か。
• RQ4 将来の人間中心の GenAI 設計における機会と課題は何か。

主な発見

• 5つ（または6つ）の主要設計次元を含む包括的な分類法を提案：GenAI の利用目的、モデルから人間へのフィードバック、人間からモデルへの制御、関与のレベル、適用領域、評価戦略。
• 相互作用設計において人間の視点と GenAI の視点の両方を考慮した全体的な視点の必要性を実証。
• 将来の人間中心の GenAI アプリケーションを導くための未解決の研究課題・課題・機会を特定。
• 分類法の再現と拡張を可能にする厳選されたコーパスとオープンソース資源を提供。
• 人間-GenAI 相互作用システムに特化した初の総合的な文献調査で、領域横断の洞察を統合。