AIHOT · 精选· noreply@aihot.news (vLLM 官方博客)·· 6 天前AI 评分38
蚂蚁集团与 vLLM 社区开源量化推理内核库 Humming
来源与原文
AIHOT · 精选
作者:noreply@aihot.news (vLLM 官方博客)
发布时间:(北京时间)
阅读原始来源 · aihot.news ↗完整链接与内容说明
https://aihot.news/items/afv7us0zbvzo789rghqkfhq5q
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
蚂蚁集团与 vLLM 社区开源通用高性能量化推理内核库 Humming,仓库位于 github.com/vllm-project/humming。该项目定位为通用高性能量化推理内核库,以开源方式提供。
来源:AIHOT · 精选 · aihot.news