技术实践

腾讯云分层重构Skill,改善数据质量Agent指令遵循

上下文与知识智能体系统上下文工程Agent Harness

概述

腾讯云团队维护数据质量异常检测Agent,日常自动分析数据、生成报告并定位问题客户。系统上线后反复出现工具选错、禁用字段仍输出及正常维度被遗漏等问题,自动修复工具不断追加规则,Skill从约400行膨胀到1500行,遵循情况反而恶化。 团队回溯提交记录,将重复的全局约束集中到开头,明确总览全覆盖与异常下钻的适用范围,用正向行为表替代长篇禁令。表结构、SQL模板和报告格式外置为参考文件,同时检查参考示例是否违反主规则,避免模型接收相互冲突的指令。 原文披露重构后Skill约300行,篇幅减少80%,并称指令遵循情况明显改善,但未给出重构前后的受控测评集和成功率。文中另提出为自动修复设置行数预算、语义去重和定期压缩等约束;这些建议不全部等同于已完成部署,也不把引用的通用研究数字当作该系统的实测收益。