GitHub · 去对齐工具与仓库·· 20 天前AI 评分20
ATML PA2 LLM 后训练课程作业学生入门仓库发布
zaryabzip/atml-fall2026-pa2
来源与原文
GitHub · 去对齐工具与仓库
发布时间：（北京时间）
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/zaryabzip/atml-fall2026-pa2
本站目前仅有 AI 导读与摘要，未展示原文正文；技术细节、代码和完整结论请查看原始来源。
AI 导读
ATML PA2（LLM Post-Training）课程作业的学生 starter 仓库上线，涵盖 DPO、PPO、GRPO、安全校准与 RLVR vs RLAIF 五个任务。课程资产（固定数据集、诊断缓存和续训 checkpoint）通过 GitHub Release 以 pinned revision 0b350481fb03f5525a35bcdec4131bd4fe487f98 分发；环境固定 Transformers 4.57.1、TRL 0.27.2、PEFT 0.17.1。Tasks 1-3 各含一个刻意算法缺陷待学生修正，PPO/GRPO 从提供的 midpoint checkpoint 续训，RLVR 和 RLAIF 使用冻结策略仅做评估，续训生成上限默认 512 tokens。
来源：GitHub · 去对齐工具与仓库 · github.com