Grokipedia 与 Wikipedia：基于 LLM 的意识形态政治中立审计

在线百科全书塑造政治观点，并通过它塑造民主话语。 2025 年末，Grokipedia 发布，这是一本完全由 LLM Grok 编写的百科全书。该项目背后的一个动机是为维基百科提供一个公正的替代方案，维基百科曾面临“左翼”和“自由主义”偏见的指控。但是，由 LLM 编写的百科全书是否具有更大的中立性，或者它只是嵌入了不同的意识形态？我们在 Grokipedia 和 Wikipedia 上进行了一项大规模的政治偏见研究，分析了 1,394 篇文章对，这些文章对描述了政府成员在九个专家编码的意识形态维度上的中立性，并聘请了四位 LLM 法官 Grok、Claude、Mistral 和 DeepSeek。由于 LLM 本身可能存在偏见，因此我们还调查了他们的判断模式。我们发现所有 LLM 法官（包括 Grok）对 Grokipedia 的评价不如 Wikipedia 中立。两本百科全书都被评为总体上对政治人物的描述是有利的，但针对的是不同的意识形态群体。 Grokipedia 特别偏爱经济上的右翼政治家，并惩罚社会上的自由派政治家，而维基百科则被评为偏向后者。