GitHub · 灵魂体仓库·· 20 天前AI 评分17
PagedCore v0.1.0：单 GPU 学习型 LLM 推理引擎
Anassbzdd/PagedCore
来源与原文
GitHub · 灵魂体仓库
发布时间：（北京时间）
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/Anassbzdd/PagedCore
本站目前仅有 AI 导读与摘要，未展示原文正文；技术细节、代码和完整结论请查看原始来源。
AI 导读
PagedCore 是一个面向学习的单 GPU LLM 推理引擎，用于在 NVIDIA T4 上研究 paged KV-cache 管理、continuous batching 和流式生成。v0.1.0 范围刻意收窄：固定的 TinyLlama checkpoint、Llama 兼容 FP16 decoder、贪心生成、2,048-token 上下文和本地 FastAPI/SSE 接口。项目目前处于可复现环境门禁阶段，推理引擎和服务尚未实现，采用 MIT License 开源。
来源：GitHub · 灵魂体仓库 · github.com