评估 LLM 中的区域偏见从抽象刻板印象到具体社会决策

大语言模型 (LLM) 中的区域偏见可能会影响区域群体的看法和来自不同区域的个人的决策。然而现有的研究经常单独研究这些表现，而对其结构和后果尚不清楚。我们引入了刻板印象到决策（S2D），这是一个评估从抽象刻板印象到具体社会决策的区域偏见的系统框架。 S2D 覆盖中国所有 34 个省级行政区域，使用温暖（感知的友善和可信）和能力（感知的能力和智力）刻板印象评级以及教育、职业和社交互动的配对选择任务来评估六个 LLM。结果显示，地区得分存在显着的地区差异，不同模型之间存在相当大的一致性，特别是在能力和职业决策方面。此外，这些模式与区域经济和数字发展指标相关，并表现出混合的类人刻板印象，一些地区在一个方面评价较高，但在另一个方面评价较差。它们在中文和英文提示中也基本保持稳定。总体而言，我们的研究结果表明，LLM 中的区域偏差是普遍存在的、系统性的和后果性的，激励了更具区域意识的评估和缓解。