GitHub · 去对齐工具与仓库·· 18 天前AI 评分22
Khuzaima139/ATML-PA2-LLM-PostTraining:LLM 后训练课程作业学生起始仓库
Khuzaima139/ATML-PA2-LLM-PostTraining
来源与原文
GitHub · 去对齐工具与仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/Khuzaima139/ATML-PA2-LLM-PostTraining
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
GitHub 上的 ATML PA2 学生起始仓库提供 LLM 后训练作业框架,代码有意不完整:任务 1-3 覆盖 DPO、PPO、GRPO 的训练循环与消融实验,且各含一个待学生发现和修正的算法缺陷。任务 4 提供固定的 AI safety judge,任务 5 提供精确的 RLVR verifier 与用于 RLAIF 评估的 pairwise AI judge,学生需自行实现评估与聚合代码。课程资产(固定数据集、缓存诊断与 continuation checkpoints)通过 GitHub Release 分发,参考环境锁定 Transformers 4.57.1、TRL 0.27.2、PEFT 0.17.1 和 Tokenizers 0.22.1。
来源:GitHub · 去对齐工具与仓库 · github.com