论文

Re3Culture以真实社区情境与显式价值优先级定义文化对齐目标

Whose Values, Which Contexts, and What Signals? Grounding Cultural Value Alignment with Re3Culture

模型评测基准与评测资源鲁棒性、公平性与可信度评测

摘要

文化价值对齐不仅需要模型优化,还需要基于真实人类证据的明确目标。然而,这些目标应如何以人类数据为基础仍然很大程度上尚未探索,这引发了三个基本问题:(1)应该代表谁的价值观? (2) 应在何种情境中观察文化价值观? (3)什么信号揭示了潜在的价值?我们通过 Re3Culture 来调查这些问题,Re3Culture 是一个连接 (i) 代表性社区的大型数据集:通过文化归属筛选和兼顾人口统计特征的抽样招募的来自四种文化的 700 多名人类参与者; (ii) 现实情景:社区成员选择的文化敏感情景,例如家庭和亲属关系; (iii) 揭示的价值信号:1,400 多个价值调查、20,000 多个基于主题的行为原则和明确的价值优先级以及 6,000 多个情景问题的回答。我们的分析表明了为什么这些选择对于定义目标很重要,具有三个含义。首先,评估文化价值需要社区归属和广泛的内部覆盖。用其他文化群体代替目标群体或限制亚组覆盖范围会改变价值估计。 LLM 模拟也不成比例地反映了特定的子组。其次,价值观必须在具体的、社区引导的情况下被观察。抽象问卷形成的价值画像只能较弱地还原具体情境中的价值优先次序,并且社区在他们认为具有文化价值揭示的场景方面存在差异。第三,应明确提出价值优先事项,而不是仅从响应偏好或最终答案中学习。偏好将价值一致性与其他响应级别的质量混为一谈,并且可以从不同的价值优先级中得出类似的答案。通过满足这些要求,Re3Culture 提供了第一个以人为本的资源,明确支持文化价值对齐的目标定义。

Re3Culture以真实社区情境与显式价值优先级定义文化对齐目标:论文配图
图 1:我们的研究框架和 Re3Culture 数据集概述。顶部:在人类数据中奠定文化价值对齐的三个基本问题;底部:Re3Culture 通过将人口统计抽样的社区成员、现实和文化敏感的场景以及明确的价值推理与情境响应联系起来,支持对这些问题的调查。