提示教练：对代理导师在软件开发中学习提示工程的实证评估

即时工程已成为软件开发人员一项关键但尚未掌握的技能，鉴于其不断发展、交互式和上下文相关的性质，传统的学习方法无法支持这一技能。在本文中，我们介绍了 Prompt Coach (PC)，这是一个代理导师，可帮助开发人员学习如何通过 IDE 中嵌入的苏格拉底式指导来制作高质量的代码生成提示。 PC 跨多个维度评估提示质量，并提出有针对性的问题来指导自我纠正，这些问题以开发人员的代码库和目标 LLM 的行为为基础。我们对 15 名专业开发人员进行了一项早期实证研究，将定量即时质量评分与定性感知测量相结合。在一次 60 分钟的会议后，参与者在统计上表现出了显着的进步，其中在开发人员通常忽视的维度上取得了最大的进步。他们还表示强烈的信任、高度的采用准备度以及一致认为 PC 提高了他们的即时写作技能。