[论文解读] Generative artificial intelligence enhances creativity but reduces the diversity of novel content

Anil R. Doshi, Oliver Hauser|arXiv (Cornell University)|Dec 1, 2023

Educational Games and Gamification被引用 6

一句话总结

本研究通过一项在线实验，调查生成式人工智能（GenAI）对人类创造力的影响，实验中作家们使用GenAI获取故事创意。结果显示，GenAI显著提升了人们对创造力和故事质量的感知，尤其对创造力较低的写作者效果更明显；但同时也降低了新内容的多样性，导致用户之间产生更多相似的故事。

ABSTRACT

Creativity is core to being human. Generative artificial intelligence (GenAI) holds promise for humans to be more creative by offering new ideas, or less creative by anchoring on GenAI ideas. We study the causal impact of GenAI on the production of a creative output in an online experimental study where some writers are could obtain ideas for a story from a GenAI platform. Access to GenAI ideas causes an increase in the writer's creativity with stories being evaluated as better written and more enjoyable, especially among less creative writers. However, GenAI-enabled stories are more similar to each other than stories by humans alone. Our results have implications for researchers, policy-makers and practitioners interested in bolstering creativity, but point to potential downstream consequences from over-reliance.

研究动机与目标

• 在受控环境中，检验生成式人工智能对人类创造性产出的因果影响。
• 评估获取GenAI创意是否提升了或削弱了用户生成故事的原创性与多样性。
• 探讨GenAI对不同基础创造力水平写作者的差异化影响。
• 评估在AI增强的创意工作中，故事质量提升与新颖性降低之间的权衡。

提出的方法

• 开展一项在线实验研究，让人类写作者负责创作原创故事。
• 将参与者随机分配至对照组（无GenAI访问权限）或干预组（可使用GenAI进行创意生成）。
• 使用标准化评估指标，由独立评审员评估故事质量、创造力和愉悦度。
• 利用基于自然语言处理的嵌入模型测量故事间的相似性，以量化内容多样性。
• 基于参与者的基础创造力水平分析结果差异。
• 采用统计建模方法，分离出GenAI访问对创造性表现和内容多样性影响的因果效应。

实验结果

研究问题

• RQ1 获取生成式人工智能是否提升了人类创作故事的感知质量与创造力？
• RQ2 GenAI的使用如何影响写作者所创作新内容的多样性？
• RQ3 在故事质量与原创性方面，创造力较低的写作者是否从GenAI中获得更显著的收益？
• RQ4 与未使用AI创作的故事相比，GenAI增强的故事在多大程度上变得更加相似？
• RQ5 在AI增强的创意工作流程中，内容多样性降低的长期影响是什么？

主要发现

• GenAI访问显著提升了故事的感知质量与愉悦度，尤其对创造力较低的写作者效果更明显。
• 在GenAI协助下生成的故事，其愉悦度与写作质量评分均高于无AI支持的故事。
• 尽管质量更高，GenAI增强的故事表现出更低的多样性，彼此之间相似度更高。
• GenAI辅助故事之间的相似性具有统计显著性，表明其对创意产出产生了同质化效应。
• GenAI对创造力的积极影响在基础创造力水平较低的参与者中最为显著。
• 研究发现存在明确的权衡：创造力与质量的提升是以新颖性与内容多样性的降低为代价的。