论文

AI生成的幻灯片:质量如何?学生能分辨吗?

AI-Generated Slides: Are They Good? Can Students Tell?

模型评测模型能力评测

摘要

随着生成式AI(GenAI)工具变得触手可及,利用这类工具支持教师具有很大前景。为此,本文考察使用GenAI从教师编写的课程笔记生成幻灯片,重点关注教师与学生的感知。我们考察了一个端到端教育工具(NotebookLM)、两个通用LLM(Claude、M365 Copilot)以及两个编程助手(Cursor、Claude Code)。我们首先通过教育者的叙述式评估,分析GenAI生成的幻灯片是否“好”。我们挑选最佳的幻灯片(经一定修改)在真实课程环境中使用,并比较学生对人类生成与AI生成幻灯片的感知。我们发现编程助手工具生成的幻灯片在准确性、完整性和教学法合理性方面最佳。此外,学生对GenAI幻灯片的质量评价与教师制作的幻灯片相当,且无法可靠识别哪些幻灯片是AI生成的。我们还发现高质量评分与高“AI生成”评分之间呈负相关,表明学生将低质量与幻灯片源自AI联系起来。这些发现凸显了将GenAI融入教学设计工作流的可期机遇,并呼吁进一步研究教育者如何负责任且有效地利用此类工具。