论文
这本书是谁写的?检测和归因 LLM 代笔者
Who Wrote the Book? Detecting and Attributing LLM Ghostwriters
摘要
在本文中,我们介绍了 GhostWriteBench,这是一个 LLM 作者归属的数据集。它包含由前沿 LLM 生成的长文本(每本书超过 5 万字),旨在测试跨多个分布外 (OOD) 维度的泛化,包括领域和看不见的 LLM 作者。我们还提出了 TRACE——一种可解释且轻量级的新型指纹识别方法——适用于开源和闭源模型。 TRACE 通过捕获由另一个轻量级语言模型估计的 词元级 转换模式(例如单词排名)来创建指纹。 GhostWriteBench 上的实验表明,TRACE 实现了最先进的性能,在 OOD 设置中保持稳健,并且在有限的训练数据场景中运行良好。