开源项目

huggingface/is-it-agentic-enough:编码Agent可复现评测工具

huggingface/is-it-agentic-enough

智能体系统Agent任务评测

概述

is-it-agentic-enough 是 Hugging Face 新建的仓库,针对编码 Agent 的评测问题:不只看任务是否完成,还覆盖行为、效率和错误率维度,并强调结果可复现。当前编码 Agent 评测普遍存在方差大、难以横向对比的问题,这类工具化尝试为选型提供参照。仓库处于创建初期,指标定义与测试集构成需以代码为准。