跳到正文
GitHub · 灵魂体仓库·· 5 天前AI 评分46

LLM-Code-Sandbox-Benchmark:AI 生成代码的沙箱自动化评测工具

prx12345/LLM-Code-Sandbox-Benchmark

来源与原文

GitHub · 灵魂体仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/prx12345/LLM-Code-Sandbox-Benchmark

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

GitHub 开源项目 LLM-Code-Sandbox-Benchmark 提供了一套针对 AI 生成代码的自动化评测框架,在受限 Python 沙箱子进程中执行候选代码,通过 baseline/edge/performance 测试集验证正确性,并基准测试运行时间与内存。工具基于最小二乘法拟合 O(1)…O(n³) 复杂度模型,输出加权 0–100 分的 JSON 报告和 Markdown 评分卡,支持 batch.py 批量排名多个候选及 --fail-under CI 门禁,适用于 HumanEval 式正确性检查与 RLHF 评分等场景。项目仅依赖 Python 3.10+ 标准库,采用 MIT 许可证。

来源:GitHub · 灵魂体仓库 · github.com