跳到正文
GitHub · 灵魂体仓库·· 19 天前AI 评分49

nlScript-llm:用 nlScript 自动生成语料微调 LLM 的完整流程

nlScript/nlScript-llm

来源与原文

GitHub · 灵魂体仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/nlScript/nlScript-llm

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

nlScript-llm 仓库演示如何用 nlScript 微调 LLM,使其将自由文本翻译为 nlScript 自定义语言的合法输入。流程先用语法规则自动生成 400 个语法正确的脚本并各重复 5 次,再经 mistral-7B-instruct-v0.3 改写为自由文本,得到 1600 条训练、400 条测试样本;随后用 unsloth 对 mistral-7b 微调一个 epoch(约 1-2 小时),产出的 Lora 适配器可部署到 Ollama 使用。

来源:GitHub · 灵魂体仓库 · github.com