GitHub · 去对齐工具与仓库·· 5 天前精选AI 评分61
MCPLab 开源:用 LLM 智能体测试与评估 MCP 服务器的框架
inspectr-hq/mcplab
来源与原文
GitHub · 去对齐工具与仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/inspectr-hq/mcplab
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
Inspectr 在 GitHub 发布开源工具 MCPLab,用于测试、调试和评估 MCP 服务器,验证 LLM 智能体是否正确调用工具。支持 Streamable HTTP/SSE 传输,可对比 Claude、GPT-4 等模型在相同任务上的表现,提供工具约束、调用顺序校验、LLM 裁判语义断言、方差测试与 JSONL 轨迹追踪,并可通过 Rover 浏览器扩展在 Claude 和 ChatGPT 网页端运行评测,结果输出 HTML/JSON/Markdown 报告,支持 CI/CD 集成。项目采用 MIT 许可证。
推荐理由
这个框架把 MCP 工具的断言、多模型对比和 CI/CD 集成放进同一套 YAML 配置,开发者可以直接照搬其评测结构。
来源:GitHub · 去对齐工具与仓库 · github.com