新闻、仓库与研究，按时间排列。
MIRROR 是一个自蒸馏框架，通过 reference-revealed on-policy self-distillation 将 LLM 个性化从模仿参考文本转向内化用户偏好，并配套 MIRROR-F 插件对信息量高的 reference token 做选择性监督。在三个个性化生成基准、两种模型规模及基于参考和 LLM 的评测中，MIRROR 与 MIRROR-F 取得领先的个性化表现与文本质量，且在三个未见任务上的灾难性遗忘少于 SFT 基线。
Jonghyun Han 在 arXiv 发布论文，发现持续预训练和微调中的灾难性遗忘集中在语料中罕见出现的 token 的输出嵌入，由 Adam 二阶矩归一化放大单侧 softmax 梯度所致。提出仅对输出投影提高 Adam epsilon 的干预，在 160M 到 12B 参数、四个模型族的八个设置中消除 39.4% 到 67.9% 的遗忘且不损害目标学习，与 replay 叠加后在 Qwen/Korean 上达到 79.8%，但事后编辑漂移行只能恢复不到 5%，因此必须在训练期间施加干预。
推荐理由：论文把灾难性遗忘定位于低频词的输出嵌入，并给出仅调 Adam epsilon 的单行干预及其跨 8 个设置的验证数据。
Sergei Polezhaev 在 arXiv 论文 arXiv:2610.09858 中提出 Caddie，通过强化学习训练批评模型，依据 Agent 接收反馈后最终是否成功来优化，不依赖步骤级标注，且基础模型保持冻结。基于 Qwen3-4B 训练的批评模型提升了四个不同规模与架构基础模型的成功率；在 MuSiQue 上使 Qwen3-4B 成功率提高超过 25 个百分点，超过无批评模型的 Kimi K3，并在 τ³、DeepDive 等域外交互基准上无需额外训练即有增益。
推荐理由：论文用任务最终成败而非步骤标注训练批评模型，读者可以了解一种可跨模型迁移的 Agent 反馈训练方法。
研究者推出 LiveMACEBench，以真实金融市场为持续演化测试床，过程感知地评估 LLM 智能体能力。五个前沿 LLM 在 Tool Use、Persistent Memory、Rule Following 和 Multi-Agent Collaboration 匹配配置下运行，经 30 天实时评测发现明显的"结果-能力差距"：实际收益常与能力特定指标背离。Trace 级诊断揭示了各能力的不同瓶颈，说明机制访问、有效使用与最终表现并非可互换的能力度量。
一篇 arXiv 论文提出面向 SIEM/XDR 事件响应的受限动作架构：SIEM/XDR 控制平面将 LLM 输出限定在封闭意图词汇表中，由端点代理执行，并配参数校验器兜底；外层用 NeMo-Guardrails 代理包裹 SOC 分析师 LLM。开箱即用的护栏将注入攻击召回率从 25.0% 提升至 94.5%，误报率 0.1%；红队演练证实该设计可在命令跨越信任边界前遏制 LLM 失效模式。受限于护栏延迟，方案建议采用人机协同或延迟执行模式。
arXiv 论文提出针对多向量视觉文档检索器索引的逆向攻击，将索引还原视为条件文档图像生成。在 ViDoRe v3 基准上，从原始索引还原的页面可恢复 47% 的词和 45% 的敏感 token，作为查询时有 98.4% 的概率将源页面排第一；token pooling 和乱序两种防护都能把词召回降到约 8%，但有模型可将乱序索引的源页面首位命中率从 3.8% 提回 93.5%。同一攻击作用于另一多向量检索器仍有 70.2% 的首位命中率，索引应像原文档一样被保护。
Itgan 团队参加 NADI 2026 三个阿拉伯语 ASR 子任务，统一采用 LoRA 在消费级 GPU 上微调 Whisper。子任务 1.1 提交系统达到 57.1% 国家平均 WER；子任务 1.2 达到 46.7% WER；子任务 1.3 以 14.49% WER 获得第二名，并在领先系统中取得最低 CER 5.38%，最后 0.60 个 WER 点来自多个独立训练运行的精确权重空间平均与 ROVER 投票。
一项新研究回答如何从目标不同的多个专家那里学习：把所有数据混在一起会丢失专家间的权衡，而逐个专家分别学习又无法共享数据。MA-BC 方法在专家观测动作不一致时进行池化，给出了样本复杂度的上下界证明。
GitHub 仓库 tupslyer/optimizing-llms-contextual-reasoning 将承载论文《Optimizing Large Language Models for Contextual Reasoning in Multi-Task Environments》的实现与实验代码，该论文目前处于 COAI 2025 审稿中。论文提出优化策略以增强 LLM 跨多任务的上下文推理能力，实验结果显示在动态环境中有更好的适应性。完整实现、实验配置、Benchmark 结果、预训练模型 checkpoint 和文档教程“即将发布”。
开源项目 AI World Cup 2026 提供一个公开、可复现的基准，让各 LLM 在相同的提示词、数据和评分规则下预测 FIFA World Cup 2026。项目不调用 API，而是手动提交统一提示词并验证各模型返回的 JSON 预测，排行榜发布在 GitHub Pages 静态网站上。截至 2026-07-31 的排行榜中，OpenAI 的 GPT-5.5 Thinking 以 744 分居首，GPT-5.5（717 分）和 Gemini（699 分）分列二三位。
谷歌 DeepMind 团队开源 Deliberate Lab 平台，用于运行人类 + LLM 群体动力学的在线研究实验，并提供面向研究者和开发者的文档及本地部署支持。项目以 Apache 2.0 许可证发布，官方声明其并非正式 Google 产品，目前仍由小团队活跃开发中。
GitHub 开源项目 Auto-Research-Paper-Scraper 用关键词过滤加 LLM 二分类，自动从 ArXiv 筛选时间序列建模相关论文。使用 GPT-3.5 turbo 在 284 篇基准论文（80 篇相关、204 篇不相关）上达到 93% 准确率和 100% 精确率，用 Mistral mistral-medium API 过滤 1000 篇论文成本约 $0.50。工具支持本地与云端 LLM 切换，提供一次性、批量及每日自动抓取脚本，仅需修改配置即可适配其他研究领域。
GitHub 仓库 zhixin612/awesome-papers-LMsys 每日汇总 LLM 系统方向的 arXiv 论文，内容包括会议论文列表和配套 web 页面。仓库目前获得 82 stars、3 watchers 和 5 forks，采用 Readme 作为主要说明文档。
PyAutoLabs 的 PyAutoMemory 是 PyAutoScientist 的长期记忆，将已学知识整理为交叉链接的 LLM wiki，含文献摘要、科学概念及用于验证的引用元数据。当前收录 166 页、69 页已起草、651 个论文章节中 40% 已具备规范引用键、229 篇论文排队待读。子 wiki 覆盖强引力透镜、超大质量黑洞、CTI、贝叶斯方法与星系演化；配套 Dashboard 与 GitHub Actions 工作流（queue_actions.yml、queue_filing.yml、queue_sweep.yml）管理阅读队列，Claude 生成的归档 PR 须经人工合并。
GitHub 开源仓库 brupj-zz/llm-adaptive-learning 实现了被 ICML 2025 接收的论文《Adaptive Learning Strategies for Large Language Models in Dynamic Environments》，让 LLM 在动态环境中实时自适应、持续学习且避免灾难性遗忘。实验显示该方法在多类动态环境中较基线 LLM 提升约 16.8%-19.1%，如 Temporal Changes 场景从 69.8% 提至 88.9%。项目采用轻量级更新机制、无需完整重训练，以 Apache 2.0 协议开源。
GitHub 上的 agent-daily 项目自动推荐每日最新大模型与 Agent 论文，数据源来自 arXiv 和 Hugging Face Daily Papers，并通过 Semantic Scholar 回填 5 年历史会议/期刊信息。项目支持 20+ 主题标签筛选、全库搜索、本地收藏和中文翻译入口，由 GitHub Actions 每 3 小时自动构建，历史数据只追加不删除，并部署到 GitHub Pages。
一项 arXiv 研究（AACL-IJCNLP 2026 短文）提出惩罚框架下的无有效选项 MCQA 设定，在 MMLU-Pro 数学子集上移除标注正确选项，允许模型选择剩余选项或输出 ABSTAIN 并对无效强制作答施加惩罚。实验表明，高 MCQA 准确率并不能完全保证弃权可靠性：即使在明确的无有效选项指令和惩罚计分下，模型仍会对部分原本答对的题目给出无效强制作答，揭示了标准选择题准确率无法反映的可靠性维度。
研究发现 COMET 翻译评测分数受目标语言书写系统影响：在 IndicMT Eval 上，文字身份解释了母语文字分数方差的 22.9%，与标注者的一致性在全部五种语言中均下降。COMET-QN 可将各 (language, script) 组合映射到统一参考分布，使混合一致率从 0.300 升至 0.399，且保证语言内排序不变；基于 parity 特征的回归器再恢复 17.1% 的灵敏度，剩余偏差属编码器，无法通过后处理修复。论文被 WMT 2026 接收。
研究者发布 MedConv 多语言数据集（含英、丹、德三语共 300 例临床就诊记录），并结合 ACI-BENCH 基准，将临床 AI 平台 Corti 与两款基于通用 AI 的主流环境式语音记录软件进行对比。评测框架结合蕴含指标与 LLM 判 pairwise 比较，覆盖 PDSQI-9 的八个维度。结果显示 Corti 的 API 文本生成能力与商业语音记录工具相当或更优，且其可配置 API 可针对具体文档场景微调质量维度，数据集已开源以支持可复现比较。
一项新研究显示，现成的视觉语言模型（VLM）从 logits 中按类别逐一读取答案时，其表现可匹敌甚至超过细粒度情绪识别基准 EmoNet-Face-HQ 的微调模型 Empathic-Insight-Face（EIF Small/Large）。在验证设置下，十一个开源权重 VLM 全部超过专家一致性锚点（κ_w=0.468），达到 κ_w=0.507-0.586，其中三个显著优于 EIF Small 的 κ_w=0.551。收益来自分级概率而非是非问答：将同一概率二值化会损失 142% 的平均收益。
arXiv 论文（https://arxiv.org/abs/2610.08164）提出免训练的两阶段闭式低秩量化误差补偿框架：Stage 1 以 Fisher 加权非对称目标将各层输出对齐全精度模型，Stage 2 在补偿后模型上做秩约束自然梯度步吸收剩余一阶信号，每个 adapter 只需一次截断 SVD。在 2 bit QuIP# 下，Qwen3-8B 的 WikiText-2 困惑度从 12.43 降至 10.26，Qwen3-4B 从 21.11 降至 13.22；在 C4 上相对最强基线（31%/63%）分别恢复 51% 和 84% 的到 FP16 的差距，并在更高位宽和另一量化器下保持增益。
推荐理由：论文指出既有低秩量化误差补偿的两个共同简化，并用两阶段闭式框架在 2 bit 极端量化下给出可复现的困惑度改进。
STRUCTURALCOST 是一个包含 475 名参与者、40,800 条观测的自定步速阅读数据集，用于分离长距离主谓依存解析的加工成本。研究在 NLP 规模上复现了心理语言学发现：主句动词处的阅读时间随依存长度增加，且受句法嵌入而非仅线性距离驱动。n-gram、SSM 和 Transformer 等模型只能部分反映这一难度曲线，并低估人类的整合成本，说明它们捕捉了预测成分但未捕捉工作记忆带来的整合成本。
Michael Andreev 在 arXiv 发布论文（arXiv:2610.08300，已被 NeurIPS 2026 PALM Workshop 接收），用 EverMemBench 受控评估对话长期记忆中结构深度与上下文宽度两个参数的作用。结果显示上下文从 1K 扩到 4K 可让 Accuracy 提升 10.11-17.98 个百分点，而加深记忆层次无单调收益；超过 8-16K 后 Production 条件性能进入平台期但每个正确答案的 token 开销持续上升，Oracle 条件在 68-71K token 完整档案上保持质量。
推荐理由：论文用受控实验比较记忆结构的深度与上下文宽度，给出了随宽度变化的量化收益和平台期数据，方法可复用于长期记忆系统评估。
一篇 arXiv 立场论文指出，多语言 LLM 评测依赖的“翻译同构假设”对语用标记、敬语、历时分层词汇等概念在原理上不成立，并定义了 α-unalignability 形式化刻画。论文用 usage-cloud 框架给出三层证据：FLORES-200 翻译失败与语系和资源等级相关而与文字无关，以及九模型 Yami 案例中的 Representation-Intervention Gap。作者提出 Cycle-Consistency、Pragmatic-Load Disagreement、Manifold-Curvature Mismatch 与 RIG 构成的多维诊断框架。
CoDe-LoRA 是一种免回放的大语言模型持续学习方法，用于解决 O-LoRA 等正交投影方法因严格参数隔离导致跨任务知识难以迁移积累的“正交困境”。该方法将学习拆解为巩固通用知识与解耦任务特定知识，借助自适应零空间投影和语义路由实现平衡。在 4 个骨干模型和 3 个持续学习基准上取得最佳平均准确率，代码已开源。
研究者提出 Foresight-over-Graph（FoG），一种面向知识库问答（KBQA）的前瞻式证据检索框架，通过迭代构建问题相关证据子图、远到近反馈引导路径探索，并以紧凑记忆子图支持持续探索，克服现有逐跳贪婪剪枝的短视问题。FoG 在常用 KBQA 基准上达到 SOTA，其中 CWQ 的 Hit 提升 16.58%，同时减少 LLM 调用和 token 用量。代码已开源，论文被 NeurIPS 2026 接收。
一项 arXiv 研究构建了含 423 段对话、1,661 个标注 turn-states 的多轮基准，用六个数据集和六个开源权重 LLM 检验「不可回答性」探测信号。数学与阅读理解（SQuAD 2.0、MuSiQue）间探测迁移稳健（AUROC 0.77-0.97 与 0.77-0.90），但单轮探测零样本无法识别对话何时变得可回答。基于校准探测的门控无需微调即可远超随机水平地识别欠规范回合，端到端成功率距真实标签门控仅差 0.08，但并未稳定优于普通生成，主要差距在模型如何利用澄清而非检测本身。
一项 arXiv 研究检验跨 tokenizer 在线蒸馏（OPD）中的序列与词表对齐问题。在三个异构师生模型对的数学推理与代码生成任务上，严格 1:1 对齐位置已覆盖绝大部分学生生成 token；将 reverse KL 限制在共享词表中学生选择的 top-16 子集，准确率与全共享词表 OPD 相当，优于所评测的跨 tokenizer 基线。对不匹配组补充 span log-probability 的 MSE 监督反而降低准确率，研究表明应从扩大对齐覆盖转向优先保障监督可靠性。
作者提出 Agentic AutoRAG，一种用于多目标 RAG 超参数优化的 LLM 智能体优化器，能在每次试验后用 Diagnoser 将失败问题归因到检索或生成阶段，并由 Proposer 结合模型排名与定价知识库选出下一组配置，在精度与成本间逼近 Pareto 前沿。在三个多跳 QA 基准上，其 LLM 评审准确率高于所有对比基线，且前 10 次试验即达到统计基线 30 次试验的水平；在真实医疗语料的成本感知模式下，中位测试准确率 77% 高于最强基线的 71.5%，查询成本约为其 58%，匹配 71.5% 时成本仅约 22%。论文已被 EMNLP 2026 REALM Workshop 与 NeurIPS 2026 ML for Systems Workshop 接收，代码已开源。
arXiv 论文（2610.08463）提出 UNREAL 框架，直接从冻结 LLM 的内部表示生成检索查询和编码文本块，仅新增不到 500K 可训练参数且不改动主干。在 3B token、21M chunk 的 Wikipedia 索引上，四种 dense 和 hybrid 主干均超越现有 retriever-reranker 系统，HotpotQA 召回率从 49.1% 提到 73.2%，2WikiMultiHopQA 从 31.7% 到 60.1%，MuSiQue 从 8.8% 到 14.4%。
推荐理由：论文用不到500K可训练参数统一语料检索与长上下文证据选择，并给出多基准召回率对比数据，方法与结果都可复用参考。
一项预注册研究将 11 个开源模型与提示词及评分方式交叉组合成 880 个大语言模型评分者，对 189 段访谈按 PHQ-8 量表评估抑郁。模型选择解释了症状总分方差的 30.0%，两名 AUC ≥ 0.70 的评分者平均对 40% 参与者的筛查结论不一致。用 40 名标注参与者重校准后准确率从约 60% 升至 75%、分歧减半，但仍有五分之一的参与者结论不同。
Wiki-Talkie 是一个源自五种语言 Wikipedia Talk 页面真实对话的多语言数据集，涵盖德语、英语、西班牙语、法语、意大利语，并配有来自真实用户社群、含社会人口属性与行为特征的 persona。基于下一轮生成任务评估显示，以用户评论历史示例行为的效果持续优于显式 persona 信息，且各模型系统性少生成负面或极端情绪、过多生成引用与建议，呈现讨好与正向偏差。这些模式跨语言稳健成立，跨语言差异很小。
Jeremy Canale 在 arXiv 发布论文，将对齐负担建模为 B_r(N)=a_rN^alpha_r 的幂律框架，指数小于 1 表示规模有助于对齐、大于 1 则积累对齐债务。预注册实测包括：Pythia 分类器的对抗训练数据显示将攻击成功率压到 10% 以下的算力随 N^0.60 增长；Qwen2.5 0.5B-72B 上真实性与 stated dispositions 的指数为 -0.05 和 0.48，sycophancy 和预置后门未能判定，其中后门在触发器已知时可快速移除，但在五个规模中的四个上能在盲安全训练后存活。论文未对当前前沿模型属于哪种区间下结论。
一项可解释性研究提出用「下限」（简单输入已能预测的水平）和「上限」（完整输入可预测的水平）为 probe 分数建立参照系，两者之差为余量。在 in-context 元分析 transformer 上，分布偏移使 probe 分数下降、预测误差上升 12–15 倍，但模型恢复的余量比例相近，说明是数据丢失信息而非表征受损。研究还发现单细胞基础模型 scGPT 仅部分编码生物变异性，并重审四项关于 LLM 表征地理、Othello 棋局、真值与用户人口特征的 probing 研究：部分结论成立，另一些很大程度上可由输入文本本身解释。
一项 arXiv 研究发现，未经修改的冻结视频-语言模型（VideoLLM）内部已线性可读地编码了“证据就绪”信号，该信号以问题为条件且与回答正确与否无关。在 7 个模型上，严格 not-ready 采样下 AUROC 达 0.733-0.905，仅改变问题即可在 66.1% 的字节相同窗口对上反转读出结果。据此提出的 Readiness Gating 回答时机策略在相同视频时长下将准确率最高提升 +9.75 pp，计算开销可忽略。
一项 arXiv 研究考察了大语言模型对病历中偶发信息（与就诊无关的闲聊、串入的他人对话）的敏感性。在 576 段对话中，前沿模型将闲聊写入 35% 的笔记，3.7% 的笔记错误归因或临床使用了这些内容；在 57 次模拟问诊中，-10 dB 背景语音泄漏进 48.2% 的转写文本，4 个开源权重模型生成的笔记中 5.3% 出现污染。研究提出双重编码假说，建议临床部署前评估模型对偶发信息的抵抗力。
Anthony Pym 的实验将一份地震应急指令由英文翻译成中文和西班牙文，结果显示使用针对话语类型的提示词可显著提升生成式 AI 译文的可理解性和可操作性，但译者可能仍不信任这些译文。人工修订仍不可少，既要查错，也是出于伦理考虑需要有人为应急信息的错误或延误负责。
研究提出 InterCorrect，一种用于公平 ASR 的人口统计感知模型合并方法：基于 SLAM-ASR 模型仅微调 connector，并将针对特定人群适配的 connector 合并为全局模型，再施加交叉群体特定校正向量。在 Fair-Speech 上，TIES 结合基于 WER 的校正取得最佳整体 WER，从 7.38% 降至 5.13%，但平均 WER 降低并不总意味着子群体差异缩小。
这是一篇关于 LLM 参数内记忆增强的综述，提出用模型参数、adapter 等参数化对象承载可复用记忆，在推理时接入前向计算，以补充 ICL 占用上下文、产生随长度增长编码开销的不足。该工作沿 Parameter Placement（Embedding、Attention、FFN、Hybrid）与 Parameter Acquisition Time（在线/离线）两个正交轴梳理方法，并讨论干扰、安全、与 ICL 协同及递归自我改进等开放方向。
研究者提出一套神经语义验证框架，将 UPenn-GBM 影像组学特征转化为可机检的证据记录与声明，用于验证生物医学 AI 解释是否被患者证据支持。GPT-5.6 Sol 在 24 例试点中复现 72/72 条原子声明，验证器在 6,620 条声明的破坏测试中达到 100% 精确集合准确率；预测 ROC AUC 从 0.899 降至 0.500 时验证准确率仍保持 1.000。结论是可验证性可独立于预测性能进行工程化与评估。
最多提供 50 页，更早的内容请使用搜索或主题页。