开源项目

is-gpt-nerfed:以重复探测监测模型退化

kiyoakii/is-gpt-nerfed

模型评测模型行为与机制分析

概述

is-gpt-nerfed 是模型退化检测工具,通过可重复探测比较模型入口在不同时点的行为。 同一组输入重复运行后,可以观察得分和回答模式的变化。它适合建立回归观察,单次异常不能直接说明模型退化,应结合重复结果与调用条件判断。