检测人工智能冒名顶替者：中学生如何在实时协作环境中识别 LLM 代理？

LLM 可以模仿人们的书写方式，这引起了人们对社交环境中的冒充、信任和检测的担忧。这些担忧对于青少年来说尤其重要，他们经常使用生成式人工智能，但可能很难认识到它。我们推出 \textit{DoppelBot}，这是一款合作社交推理游戏，旨在研究年轻人如何检测和应对人工智能模仿。通过对中学生的研究，我们调查了 DoppelBot 是否会促使人们反思隐私和假冒行为、随着智能体变得更加个性化，重复暴露如何影响 AI 检测的准确性，以及学生使用哪些策略来识别 AI 分身。我们发现，随着时间的推移，由于从依赖语言线索转向利用共享的社交和上下文信号，学生的检测准确性不断提高。学生们还展示了对人工智能局限性（例如体现）的理解，并反思了数据隐私等更广泛的问题。为了支持未来的研究，我们发布了游戏记录和投票行为的匿名数据集。