GitHub · 去对齐工具与仓库·· 19 天前AI 评分51
mac-llm-finetuning-lab 教程:在 Apple Silicon Mac 上用 LoRA 微调 Qwen2.5-0.5B-Instruct
ssganiger/mac-llm-finetuning-lab
来源与原文
GitHub · 去对齐工具与仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/ssganiger/mac-llm-finetuning-lab
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
ssganiger 在 GitHub 发布 mac-llm-finetuning-lab 动手实验仓库,用 Hugging Face Transformers + TRL + PEFT/LoRA 在 M3 Pro Mac 上微调 Qwen2.5-0.5B-Instruct 做笔记分类。实测用 18 条训练数据、3 条保留测试,格式完全匹配从基座模型的 0/3 提升到挂载 LoRA 适配器后的 3/3,训练仅更新 0.1093% 的参数。仓库涵盖下载模型、查看 token 化、记录基线、SFTTrainer 训练与前后对比全流程,并计划后续加入基于 MLX 的 gpt-oss-20b 练习,目前尚未包含。
来源:GitHub · 去对齐工具与仓库 · github.com