GitHub · 灵魂体仓库·· 17 天前精选AI 评分65
trajectory-sft-agents 仓库发布 Qwen2.5-1.5B 与 Qwen3-1.7B 的轨迹SFT与GRPO后训练流程
ttxttx1111/trajectory-sft-agents
来源与原文
GitHub · 灵魂体仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/ttxttx1111/trajectory-sft-agents
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
独立研究仓库 trajectory-sft-agents 发布在消费级单卡上运行的小模型Agent后训练项目。基于 Qwen2.5-1.5B-Instruct 的 ALFWorld 实验,用600条环境执行验证的专家轨迹做 LoRA SFT,再经在线GRPO,完整任务成功率由 Base 6.25% 提升至 SFT 68.75%、SFT+GRPO 77.08%。另一组 BFCL 实验将 Qwen3-1.7B 的多轮工具任务测试成功率从 2.5% 提升至 32.5%,单张RTX 5090训练约70分钟。仓库公开训练配置、专家轨迹、LoRA权重与逐题rollout,附CPU可运行的证据核验脚本;作者说明这是域内训练与内部留出评测结果,域外小样本评测未观察到明显退化但也不构成通用能力提升的证明。
推荐理由
作者给出完整训练链路、逐题成绩和可复现证据,读者可以在消费级单卡上照此复现小模型Agent后训练。
来源:GitHub · 灵魂体仓库 · github.com