开源项目

proeval(google-deepmind):低预算生成式 AI 评测工具

google-deepmind/proeval

模型评测评测方法与指标

概述

proeval 来自 google-deepmind 组织,2026 年 4 月 18 日在 GitHub 创建。据条目摘要,项目独立解决生成式 AI 的低预算评测与失败模式发现问题,即在有限评测预算下有效识别模型产出的典型失败模式,而非只给单一平均分。对评测预算有限的团队,这类工具可提升排查效率;实际覆盖的失败类型与任务域需结合自身任务核对。