Reddit · r/LocalLLaMA· /u/stevyhacker·· 4 天前AI 评分34
本地 LLM 记忆写入评测:Qwen3.5、Hy-Memory、LFM2.5 谁知道何时该「不存」
Recall vs. Restraint: Testing which local LLMs know when NOT to save a memory(Qwen3.5, Hy-Memory, LFM2.5)
来源与原文
Reddit · r/LocalLLaMA
作者:/u/stevyhacker
发布时间:(北京时间)
阅读原始来源 · reddit.com ↗完整链接与内容说明
https://www.reddit.com/r/LocalLLaMA/comments/1xd95n0/recall_vs_restraint_testing_which_local_llms_know/
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
一项针对本地 LLM 记忆提取的 120 例基准测试(60 组对照对、96 例英文主测试)显示:Hy-Memory 30B-A3B 召回率 100%(52/52),但 44 个空输出用例全部错误并产生 76 条冗余提议;Qwen3.5 4B 和 9B 更克制,空用例正确率分别为 95.5% 和 90.9%,冗余提议仅 3 条和 5 条;LFM2.5 24B-A2B 召回 76.9%,受指令示例污染和引用格式问题困扰,后验映射可修复 9/18 个无效引用字段。所有模型经 llama.cpp 在同一台 Ubuntu 机器上运行,测试不涉及速度。
来源:Reddit · r/LocalLLaMA · reddit.com