论文
实用主义遇上文化:适应文化的艺术品描述生成和评估
Pragmatics Meets Culture: Culturally-adapted Artwork Description Generation and Evaluation
摘要
众所周知,语言模型在决策任务中表现出各种形式的文化偏见,但人们对其在开放式文本生成任务中的文化熟悉程度知之甚少。在本文中,我们介绍了文化适应的艺术描述生成的任务,其中模型为来自不同文化群体的观众描述艺术品,他们对艺术品中嵌入的文化符号和叙事的熟悉程度有所不同。为了评估这项务实生成任务中的文化能力,我们提出了一个基于文化的问答框架。我们发现基本模型对于这项任务来说只能勉强满足,但是通过实用的说话者模型,我们可以将模拟听众的理解力提高高达 8.2%。一项人类研究进一步证实,语用能力较高的模型对理解的帮助提高了 8.0%。