GitHub · 3D 生成新仓库·· 4 天前AI 评分47
NVIDIA 开源 SkillEvaluator:检测 AI Agent 技能质量及其对任务效果的影响
NVIDIA/SkillEvaluator
来源与原文
GitHub · 3D 生成新仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/NVIDIA/SkillEvaluator
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
NVIDIA 发布开源工具 SkillEvaluator,用于检查 AI Agent 技能并衡量技能对任务结果的影响。它提供三层评估:Tier 1 静态校验(可用 Semgrep、SkillSpector、Gitleaks 做安全扫描)、Tier 2 基于 embeddings 的重复检测、Tier 3 通过 Harbor 沙箱对比有无技能的实际运行效果。示例技能可获得 84.5/100(B)评分,默认通过阈值为 70;工具支持 uv 运行 Python 3.13,可通过 NVIDIA Build API key 调用模型。
来源:GitHub · 3D 生成新仓库 · github.com