GitHub · 去对齐工具与仓库·· 20 天前AI 评分27
LLM-from-scratch-Python：用 PyTorch 从零构建大语言模型的分阶段教程
bhuwanesh340/LLM-from-scratch-Python
来源与原文
GitHub · 去对齐工具与仓库
发布时间：（北京时间）
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/bhuwanesh340/LLM-from-scratch-Python
本站目前仅有 AI 导读与摘要，未展示原文正文；技术细节、代码和完整结论请查看原始来源。
AI 导读
GitHub 项目 LLM-from-scratch-Python 提供用 PyTorch 从零构建大语言模型的分步教程，分 10 个阶段覆盖从分词、嵌入到注意力机制。内容包含基于 tiktoken 的 BPE 分词（GPT-2 词表 50,257 tokens）、Q/K/V 自注意力、因果掩码与多头注意力，每阶段以独立 Jupyter notebook 呈现，依赖 torch、tiktoken 和 numpy。
来源：GitHub · 去对齐工具与仓库 · github.com