arXiv · cs.CL· Hochan Son·· 21 天前AI 评分51
arXiv 论文实测多智能体 LLM 推理中持久记忆层的开销与收益
Persistent Memory in Multi-Agent LLM Inference: What It Costs, What It Buys, and When You Can Tell
来源与原文
arXiv · cs.CL
作者:Hochan Son
发布时间:(北京时间)
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.07782v1
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
arXiv 论文 2610.07782 实测三层 Agent 架构中的 KV cache 分解与持久记忆层:分解使单次查询峰值 KV 工作集降至 14.3 MiB,低于单遍(35.5 MiB)和检索增强(35.3 MiB)基线。持久记忆层在八组受控数据对、每组 n=100 的实验中增加 +0.368 MiB 峰值缓存,却无可检测的准确率变化(+0.015,95% CI [-0.011, +0.046]);作者认为空结果是结构性的,因单问题基准让各条目自带证据且独立评分,并给出 Agent 记忆消融须满足的条件与检测方法。论文被 NeurIPS 2026 Machine Learning for Systems Workshop 接收为 poster。
来源:arXiv · cs.CL · arxiv.org