Reddit · r/LocalLLaMA· /u/ConfidentDinner6648·· 2 天前AI 评分36
用 Qwen 3.5 4B 打造能与更大模型竞争的专用编码智能体
I'm going to try to turn a 4B model into a genuinely useful coding agent that can compete with much larger models
来源与原文
Reddit · r/LocalLLaMA
作者:/u/ConfidentDinner6648
发布时间:(北京时间)
阅读原始来源 · reddit.com ↗完整链接与内容说明
https://www.reddit.com/r/LocalLLaMA/comments/1xppw37/im_going_to_try_to_turn_a_4b_model_into_a/
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
开发者计划以 Qwen 3.5 4B 为基础训练专用 agentic 编码模型,先围绕 100–200 个功能性 mini SaaS 应用做开发、测试、调试与维护训练,若效果可行再扩展到约 100,000 条已验证的多轮轨迹、覆盖 30–40 个相关子领域。其此前 4B 模型仅靠 SFT 就能生成复杂 Three.js 场景和超过 64K token 的输出,他认为高质量 SFT 从强模型迁移能力可能比小模型用 RL 自行探索便宜得多。训练样本将是含工具交互、报错与真实修正的完整任务,并需选用允许输出用于训练的 teacher 模型;harness 倾向 Codex、OpenCode、Pi 或自建,暂不列入 Claude Code 以规避授权不确定性。
来源:Reddit · r/LocalLLaMA · reddit.com