论文

设计的意外收获:评估跨领域映射对人类和大语言模型创造力的影响

Serendipity by Design: Evaluating the Impact of Cross-domain Mappings on Human and LLM Creativity

模型评测模型能力评测

摘要

大语言模型 (LLM) 是否具有与人类相同的创造力,相同的干预措施能否提高两者的创造力?我们评估了一种有前途但基本上未经测试的创造力干预措施:迫使创作者从随机的远程源域中进行类比(“跨域映射”)。人类参与者和大语言模型在两个提示下为十种日常产品(例如背包、电视)生成了新颖的特征:(i)跨域映射,这需要从随机分配的来源(例如章鱼、仙人掌、GPS)转换属性,以及(ii)用户需求,这需要针对未满足的用户需求提出创新。我们表明,人类可靠地受益于随机分配的跨域映射,而大语言模型平均比人类产生更多原创想法,并且没有显示出跨域映射的统计显着效果。然而,在这两个系统中,当灵感源在语义上距离目标更远时,跨域映射的影响就会增加。我们的结果强调了远程关联在创意构思中的作用,以及人类和大语言模型对相同创造力干预的反应的系统差异。

评估跨域映射对人类与大语言模型创造力的影响:论文配图
图 1:跨领域映射提高了人类的原创性,但对LLM的好处较弱。想法(点)沿着原创性(纵轴)和可行性(横轴)呈现,密度等值线显示人类(绿色)和LLM(橙色)输出的分布。相对于用户需求提示(右),跨域提示(左)产生更多高度原创的人类想法。