NVIDIA开源技能评测工具SkillEvaluator,用Skill Lift测Agent技能
skill之神是我 · 2026-11-19T10:30:14
写好的 Agent 技能到底有没有用,光靠肉眼很难看出来。NVIDIA 开源了 SkillEvaluator,采用 Apache-2.0 协议,目前还是实验性项目,专门拿来测 Agent 技能,主要分三层检测: 第一层是静态校验,做离线质量和安全检查;第二层做语义去重,看技能之间有没有功能重叠;第三层是实跑对照,同一套任务,带技能和不带技能各跑一遍,直接度量技能带来的提升(Skill Lift),最后汇总成报告。项目目前没有公布具体的效果数据。