[论文解读] Conversational AI-Powered Design: ChatGPT as Designer, User, and Product

A. Baki Kocaballı|arXiv (Cornell University)|Feb 15, 2023

Artificial Intelligence in Healthcare and Education被引用 30

一句话总结

论文在一个假设的设计项目中，通过模拟设计师、用户和产品角色，研究 ChatGPT 在以人为本的设计过程中的能力，报告大多是适当的响应，但存在一些缺点。

ABSTRACT

The recent advancements in Large Language Models (LLMs), particularly conversational LLMs like ChatGPT, have prompted changes in a range of fields, including design. This study aims to examine the capabilities of ChatGPT in a human-centered design process. To this end, a hypothetical design project was conducted, where ChatGPT was utilized to generate personas, simulate interviews with fictional users, create new design ideas, simulate usage scenarios and conversations between an imaginary prototype and fictional users, and lastly evaluate user experience. The results show that ChatGPT effectively performed the tasks assigned to it as a designer, user, or product, providing mostly appropriate responses. The study does, however, highlight some drawbacks such as forgotten information, partial responses, and a lack of output diversity. The paper explains the potential benefits and limitations of using conversational LLMs in design, discusses its implications, and suggests directions for future research in this rapidly evolving area.

研究动机与目标

• 通过考察对话式大语言模型如何影响设计实践来激发本研究动机。
• 评估 ChatGPT 生成人物设定、进行用户访谈、头脑风暴想法、模拟使用场景以及评估用户体验的能力。
• 从响应质量和一致性方面识别使用对话式大语言模型进行设计任务的优点与局限。

提出的方法

• 使用 ChatGPT 在多种设计角色（设计师、用户、产品）中进行一个假设的设计项目。
• 让 ChatGPT 生成人物设定并与虚构用户进行访谈模拟。
• 让 ChatGPT 创造新的设计理念并模拟原型与虚构用户之间的使用场景与对话。
• 让 ChatGPT 评估设想产品的用户体验。
• 分析 ChatGPT 输出在各任务中的质量与局限。

实验结果

研究问题

• RQ1 ChatGPT 是否能够在以人为本的过程中跨设计师、用户和产品角色有效执行设计任务？
• RQ2 使用对话式大语言模型生成人物设定、进行访谈、头脑风暴、模拟交互和评估用户体验的优点和局限是什么？
• RQ3 在假设项目中，ChatGPT 的输出在多大程度上符合恰当的回应和有用的设计洞察？

主要发现

• ChatGPT 在作为设计师、用户或产品执行分配任务时，效果良好，提供了大部分恰当的回应。
• 缺点包括信息遗忘、回答不全以及输出多样性不足。
• 本研究讨论对话式大语言模型在设计中的潜在益处与局限，并概述了影响及未来研究方向。