跳到正文
GitHub · 去对齐工具与仓库·· 5 天前精选AI 评分61

MCPLab 开源:用 LLM 智能体测试与评估 MCP 服务器的框架

inspectr-hq/mcplab

来源与原文

GitHub · 去对齐工具与仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/inspectr-hq/mcplab

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

Inspectr 在 GitHub 发布开源工具 MCPLab,用于测试、调试和评估 MCP 服务器,验证 LLM 智能体是否正确调用工具。支持 Streamable HTTP/SSE 传输,可对比 Claude、GPT-4 等模型在相同任务上的表现,提供工具约束、调用顺序校验、LLM 裁判语义断言、方差测试与 JSONL 轨迹追踪,并可通过 Rover 浏览器扩展在 Claude 和 ChatGPT 网页端运行评测,结果输出 HTML/JSON/Markdown 报告,支持 CI/CD 集成。项目采用 MIT 许可证。

推荐理由

这个框架把 MCP 工具的断言、多模型对比和 CI/CD 集成放进同一套 YAML 配置,开发者可以直接照搬其评测结构。

来源:GitHub · 去对齐工具与仓库 · github.com