MemPilot:面向 LLM Agent 的按需多模态记忆整理框架
论文提出 MemPilot,一个按性能、成本、延迟偏好按需编排多模态记忆整理的框架。其通过强化学习优化多步 LLM 策略,在从 query-agnostic 记忆检索与委派异构 LLM/VLM 做查询级整理之间迭代选择,并联合控制证据量、整理指令、模型选择和视觉访问;采用目标级优势解耦与前缀边际效用估计做信用分配。
推荐理由:论文用强化学习让策略按性能、成本和延迟偏好动态调度记忆整理,在五个多模态基准上给出比现有基线更宽的权衡前沿。