跳到正文
今天10月27日周二147 条
  1. arXiv · cs.AI55

    研究提出角色分离的自动红队方法,目标智能体宜自评而不宜自提攻击

    论文研究自动红队中批评与攻击提议两个角色的分工,发现自我批评因基于目标会话的实时执行上下文而更有效,移除推理会使下游攻击成功率下降 6%-17%,而自我提议因知晓对抗目标会引发明确拒答与 sandbagging。据此提出目标会话诊断失败、独立攻击者生成下一提案的角色分离方案,在覆盖 Telecom、Workflow、CRM 和 Code 的 DTAP-BENCH 上,多种智能体框架与直接滥用、间接威胁模型下整体攻击成功率达 63.2%,高于基线。

    推荐理由:论文拆解了自动红队中批评与提议两个角色该由谁承担,并给出角色分离后的攻击成功率数据,方法可迁移到智能体安全测试。

  2. arXiv · cs.AI32

    SVD-Attention:高效分析 Transformer 注意力块

    研究者提出 SVD-Attention,一种事后诊断方法,通过分解每个注意力头的交互矩阵并结合谱幅值与激活方差打分,判断哪些头在真实数据上真正用满秩预算。在 7 个预训练模型和 5 类任务上,该方法发现的冗余层具有任务相关性:情感、图像分类和生成任务冗余在早中层,密集预测和抽取式问答冗余在晚层。按其标记截断层最多损失 1.75 F1,随意截断则最多损失 50 F1;结合权重剪枝可减少 8-11% 推理 FLOPs。

  3. arXiv · cs.AI28

    SR-BEVS:提升相机式 3D 目标检测鲁棒性的稀疏恢复 BEV 模型汤

    研究者提出 SR-BEVS,一种无需额外数据和架构修改即可同时提升干净精度与腐蚀鲁棒性的稀疏恢复学习方法。该方法按层级权重大小选出剪枝候选,随机剪枝生成多个稀疏模型并各用随机采样学习率重训练,再平均为单个稠密模型,推理开销为零。在 nuScenes 上的实验显示,相比 Fast-BEV 基线腐蚀鲁棒性最高提升 33.8%,干净精度提升 1.8%。

  4. arXiv · cs.AI18

    AskGLP1:基于知识图谱的 LLM 智能体,用于探索在线患者叙述中的 GLP-1 用药体验

    研究者提出 AskGLP1,一个将在线患者叙述转为知识图谱并回答用药体验问题的 LLM 智能体。该系统基于 MedDRA 术语,从近 850 万条 Reddit 帖子中筛选出 163,135 条用药体验,结合 2,506 条 WebMD 评论,构建含 385,790 条药物-副作用与药物-用途关系的三元组。结果显示在线叙述与 FAERS 互为补充,且 tirzepatide 的恶心呕吐报告少于 semaglutide;智能体能提供可验证证据并拒绝医疗建议请求,代码与提示词已开源。

  5. arXiv · cs.AI34

    LLM 为何会自信地犯错?CoCHI 通过因果头干预纠正过度自信错误

    一项被 NeurIPS 2026 接收的研究提出 CoCHI(Class-oriented Causal Head Intervention)框架,通过分析正确性-置信度模式,定位并干预导致过度自信的模型内部组件来改善校准。在多个 LLM 上的实验显示,Expected Calibration Error、Negative Log-Likelihood 和 Brier Score 一致改善,同时在五个多项选择问答基准上保持准确率。该方法将校准可靠性归因于模型内可识别的结构,而非仅调整输出。

  6. arXiv · cs.AI5

    从单中心到系综:面向 NV 光谱的校准符号回归流水线

    研究者提出一套符号回归流水线,将单中心自旋结构带入校准后的 NV(氮-空位)系综模型:从单中心 ODMR 光谱中筛选厄米算符项作为源模型,再校准共振频移、局域无序、取向与光学响应。在公开数据上,零场系综保持频率的归一化光致发光 RMSE 从 0.008835 降至 0.003872,提升 56.2%;在 128 个位点、四种 NV 取向的 QuTiP 系综中,用 0 和 3 mT 校准的模型预测独立留出的 5.17 mT 光谱,误差 0.000207-0.000228,接近 0.000200 的噪声标准差。

  7. arXiv · cs.AI34

    PatentAgentBench:用专业专利任务套件评测 LLM Agent

    arXiv 新论文推出 PatentAgentBench,包含覆盖 8 个任务套件的 510 个实例,涵盖新颖性检索、FTO 检索、无效检索、权利要求对照表、专利撰写、审查意见答复和专利翻译等任务,基于真实专利记录并由专家标注。研究评估了 7 个 LLM 在 4 种 agent harness 下的表现,发现当前系统仍难以识别新颖性、评估风险和理解专利从业者意图。

  8. arXiv · cs.AI18

    CA-HNM:基于结构化领域模型的约束感知难负例挖掘方法用于稠密检索

    研究者提出 CA-HNM,一个将检索候选生成与来自结构化领域模型的确定性不兼容规则相结合的约束感知难负例挖掘框架,用于微调标准双编码器稠密检索模型。在 MOOCCubeX 和 Course-Skill Atlas 两个数据集上,用两种编码器、两种训练损失和十个随机种子评估,CA-HNM-Pure 在 8 个数据集-编码器-损失配置中的 6 个取得更高的平均 NDCG@10,另有实验显示 CA-HNM-Mixed 也略优于对照。结果表明约束感知选择的效果取决于训练目标和负例池构成。

  9. arXiv · cs.AI23

    超越单一属性审计:ComFair 可配置多属性基准评测 LLM 交叉性公平性

    研究者推出可配置公平性基准 ComFair,将现有公平性数据转换为 479,066 个受控的双属性与多属性实例,并为每个实例配对任务等价的源数据。对十款 LLM 在 Recognition、Selection、Continuation、Conversation 四类任务上的实验显示,敏感度依任务和子群组而异:判别式任务能暴露聚合指标下不可见的双向变化,生成式任务偏移更大且方向不对称,模型排名随属性组合而波动。ComFair 提供可扩展的受控敏感度审计,用于检验公平性评测结论在多属性交叉场景下的稳健性。

  10. arXiv · cs.AI16

    基于 Graphormer 的动态车道方向调整与可变限速联合控制方法

    一项 arXiv 研究提出用共享 Transformer(GERASTSA 注意力)联合控制路网动态车道方向调整与方向性限速,并以图定向理论保证路网始终强连通。在 6 x 6 网格仿真中,学习策略使约三分之二道路在高峰方向单向通行,日延误较固定初始配置降低 90%,较调优的双向负载均衡器降低 85%;预训练使超越固定配置所需的更新次数约减半。

  11. arXiv · cs.AI9

    电力负荷预测中 GNN 的诊断协议:分离参数共享与邻居访问的贡献

    一项研究提出诊断协议,将 GNN 负荷预测的优势拆分为跨序列参数共享与邻居访问两种机制,通过逐节点网络、无邻居共享网络、去边 GNN 三个参照模型和保度数重连实验加以区分。在法国区域负荷、英国低压馈线及客户用电序列三个数据集上,参数共享贡献了主要误差缩小(馈线上约三分之二),而边的增益较小且重连后消失过半,客户序列上甚至与零无异。结论认为预测收益只有在与逐节点和共享参照对比后才应归功于图结构。

  12. arXiv · cs.AI29

    从高频数字交互数据建模快速人类反应:EMBER 与 ORBIT 在 Counter-Strike 2 遥测数据上的探索

    一项探索性研究基于 Counter-Strike 2 的毫秒级遥测数据,提出 Ego-Knowledge 感知状态重建方法,并训练 EMBER(梯度提升)与 ORBIT(transformer)两个模型预测 60–120 ms 窗口内的“战或逃”反应标签。EMBER 在验证集上准确率达 73.5%,ORBIT 为 71.2%,均优于 51.5% 的多数类基线;在 1,000 个验证案例上,两者均显著超过最强 LLM 基线的 62.7%,且推理时间和成本低数个数量级。加入触发后短时间窗口可将准确率单调提升至 85.15%,作者将该曲线作为快速控制向深思控制过渡的候选探针,但强调神经科学解释仅为假设生成性质。

  13. arXiv · cs.AI13

    基于规则排序提示词的晶圆图零样本多类别分类:免训练框架借助大型多模态模型实现

    研究者提出一种免训练的六类晶圆图缺陷分类框架,将连通域高亮与融合形态、位置和排除规则的提示词结合,用于冻结的大型多模态模型,无需标注数据和再训练。在 Mixed-WM38 数据集(6,866 张图)上达到 92.9% macro 和 93.8% 总体准确率;在 WM811K(9,000 张图)上分别为 79.1% 和 81.3%。消融实验显示八种替代规则顺序总体准确率为 90.1-91.9%,低于所选顺序的 93.8%。

  14. arXiv · cs.AI58

    CoSA 论文提出 LLM Agent 技能冲突攻击,新增 5% 技能使违规率升至 58.45%

    论文提出 Conflict of Skills Attack(CoSA),在不改动现有 Skills 和运行时权限的情况下,向 Agent 技能池注入少量新 Skills 即可放大策略违规。CoSA-Bench 覆盖招聘、金融、IT 和商业共 288 个任务,在五个 LLM 和三种 agent harness 上,新增技能不超过原池 5% 就把违规率从 35.02% 提高到 58.45%。作者还开发了在关键动作前检查信息流与授权的 harness 级防护,在 OpenClaw 招聘任务上把违规率从 65.28% 降到 6.67%,正常任务完成率基本不变。

    推荐理由:论文给出技能组合导致违规的四种机制和可复用的 harness 级防护方法,对 Agent 生态安全设计有参考价值。

  15. arXiv · cs.AI57

    arXiv 论文提出用目标冲突样例改进 LLM 指令层级

    arXiv 论文(arXiv:2610.35093)指出指令层级(IH)训练中存在一类被 OpenAI 和 NVIDIA 现有训练集遗漏的冲突类型,即目标与目标之间的冲突。作者将任务分解为目标和约束后发现这一缺口,并在 Qwen3.5-9B 与 Gemma4-12B-it 上微调该类冲突样例,显著提升训练未见真实任务上的指令层级表现;将其加入现有 IH 训练集也能提高 adherence,且在八个基准的无冲突任务上平均效用变化很小。

    推荐理由:论文指出 OpenAI 和 NVIDIA 的指令层级训练集缺少目标冲突这一类型,并用微调实验给出可复用的补法。

  16. arXiv · cs.AI46

    arXiv 研究:Grokking 中的子空间结晶——秩压缩滞后于相变出现

    一项 arXiv 研究通过 mean-field MLP 和单层 Transformer 在模运算任务上分析 grokking 机制,发现权重矩阵有效秩的压缩发生在 grokking 出现之后而非之前:各 Transformer 均在 250 步内记住训练数据,而 grokking 起点在 6,500 至 21,000 步之间变化,秩下降最陡处在起点约 900 步后。研究还观察到"子空间结晶"现象,即保持输出精度所需的方向数从四分之一以上降至约十分之一。强制低秩反而延迟或阻止 grokking,说明秩压缩是 grokking 的标志而非原因。

  17. arXiv · cs.AI28

    UTA:通用训练自适应学习率衰减

    研究者提出 UTA 学习率衰减方法,将 UBA 的理论框架扩展到 Adam 类优化器,把学习率衰减建模为闭环的形状与尺度问题,使其能随训练状态自适应调整。实验显示 UTA 在 LLaMA 60M 到 1B 语言模型及 ImageNet 上的 ResNet50、ViT-B 视觉模型中带来一致提升,且即插即用、开销可忽略。

  18. arXiv · cs.AI25

    生成式 AI 在湍流研究中的应用:基础、应用、验证与基准

    一篇提交至 JFM-Perspective 的综述探讨生成式 AI(重点是 diffusion models、score-based 方法和概率输运公式)在湍流问题中的应用,涵盖随机闭合、超分辨率、数据同化和不确定性量化等场景。文章指出视觉逼真度、逐点误差和低阶谱一致性不足以衡量物理保真度,验证须考察能量传递、结构函数、反常标度、概率密度尾部、守恒律等湍流特性。作者还讨论了基准、数据可得性与可复现性方面的局限,呼吁建立含开放数据、标准化挑战与物理感知指标的基准生态。

  19. arXiv · cs.CL48

    面向外部 LLM 的文档可逆假名化:开源双语 benchmark 与引擎

    一项研究提出面向外部 LLM 的文档可逆假名化开源 benchmark 与引擎,在俄语和 UK English 上评测五个开源工具加正则基线,并基于其中两个最强工具构建新引擎。在每语言 1000 篇留出文档上,现有最佳工具仍有 61%(俄语)和 58%(UK English)泄露完整值,新引擎降至 0.3% 和 0.2%,并满足全部检测阈值。UK English 下引擎在 760 个回答后至少还原 99% 占位符,俄语姓名还原仅 94.6%,未达 99% 阈值;所有评测数据均为合成数据。

  20. arXiv · cs.CL47

    九个 AI 模型在医疗诊断中的谄媚性评测:患者信念分级研究

    一项 arXiv 研究评测了九个 AI 模型在患者坚持错误病情信念时改变诊断决定的倾向,发现模型平均 23.2% 的情况下会谄媚地采纳患者信念,有时甚至接受虚构疾病。其中“罕见病声称者”人设使模型接受信念的比例达 43.0%。分析显示医学微调和更大模型规模可降低这种易感性。

  21. arXiv · cs.CL32

    GEPA 合并何时有效?一项机制层面的诊断

    一项 arXiv 研究诊断 GEPA 反思式提示词优化器中合并算子不稳定的成因:合并平均提升 gpt-4.1-mini 却降低 Qwen3-8B 表现。在五个数据集、两种模型上进行的九种配置扫描显示,配置得当时合并对两个模型均有提升,说明不稳定源于配置敏感性而非算子固有缺陷;提示词级静态特征也无法预测合并接受决策。基于行为探针的概念验证可在高风险任务上弃权以避免大规模合并失败,但未稳定超过 NoMerge,代码以 GEPA-MergeProbe 开源。

  22. arXiv · cs.AI47

    ST-OPSD:用激活导向改进思考模型的 On-Policy Self-Distillation

    一项 arXiv 研究提出 Steered-Teacher OPSD(ST-OPSD),针对 on-policy self-distillation 中教师模型引发的两类失效模式:reference hallucinations 和 reconsideration suppression。该方法从模型生成的推理轨迹中提取两个方向,作用于教师 hidden states,抑制引用参考答案行为并鼓励重新审视。在 AIME 和 HMMT 上,ST-OPSD 准确率超过 vanilla OPSD 等干预方法,并将两类失效率恢复至 base-model 水平。

  23. arXiv · cs.AI22

    Fed-Universe:语义-几何-拓扑-人工(S-G-T-H)四层架构实现联邦系统中的协商式对齐

    研究者提出 Fed-Universe,一种语义-几何-拓扑-人工(S-G-T-H)架构,将联邦学习中被动的全局平均转为主动协商式对齐。其 S 层用边缘 LLM 转换异构输入,G 层以余弦相似度门控保留少数站点更新,T 层通过敏感度 knee point(lambda_k)做多目标聚合。在双国临床网络仿真中,数据量不足 3% 的少数节点实现效用持平(loss 从 0.857 降至 0.340)。

  24. arXiv · cs.AI19

    BriLLM-MetaPred:基于 AGI 数学理论的表示-预测统一语言模型与自适应自测量

    研究者提出 BriLLM-MetaPred,这是源自 AGI 数学理论的 MetaPred 机器学习框架在语言建模上的首个工程实现。其单一连续演化的动态状态同时承担上下文表示与预测读出,通过持续自测量降低有限深度不一致,并借助 BriLLM 的 SiFu 学习范式在现有软硬件加速器上运行。该实现达到与同规模 GPT 基线相当的预测性能。

  25. arXiv · cs.AI25

    DeepSciReasoner:物理约束下的深度科学推理与结构感知光谱预测

    研究者提出 DeepSciReasoner,一个在物理硬约束下预测科学光谱的通用框架,结合结构感知光谱解码与保持约束的物理推理。该方法以电子态密度(eDOS)为原型,并在 phDOS、XANES 和 Raman 光谱上显著提升预测精度,同时保持物理一致性。代码与数据已在项目页面公开,论文发表于 ICML 2026。

10月25日周日
  1. arXiv · cs.CL43

    指令微调早期阶段需要什么样的“高质量”数据:数据质量指标的实证研究

    一项实证研究将指令微调中的“数据质量”操作化,在固定微调预算下比较多个示例级指标对训练效用的预测能力。方法是将样本按指标分数分为低、中、高三档分别微调,用验证 perplexity 和 LLM-as-judge 评分评估。结果显示,以 response ratio 衡量的答案密集型监督比常用替代指标更能稳定预测指令微调效用。

  2. arXiv · cs.AI29

    层级协作 GFlowNets(HCG):动态划分搜索空间提升多模态探索

    研究者提出 Hierarchical Cooperative GFlowNets(HCG),通过动态划分搜索空间协调多个 GFlowNets 的探索,避免模型集中坍缩到少数高奖励区域。该方法用共享分类器划分层级,使最高排名模型可探索整个空间、低排名模型转向未覆盖区域,支持独立参数化与异步训练,并证明了聚合规则可恢复与奖励成比例的目标分布。实验涵盖多模态分布、序列生成、组合优化和生物序列设计,显示 HCG 提升了模式覆盖与目标近似效果。

  3. arXiv · cs.AI13

    QECGBERT:基于 VQ-VAE 波形 tokenization 的自监督可扩展 ECG 基础模型

    QECGBERT 是一种自监督 ECG 语言模型,通过 VQ-VAE 将 12 导联心电图的 P、QRS、T 及等电位背景波形进行 tokenization,并融合连续波形特征以保留量化丢失的形态信息。该模型在 MIMIC-IV 超过 800,000 条无标注 ECG 记录上做 BERT 预训练,并在 PTB-XL、CPSC2018 和 Chapman–Shaoxing–Ningbo 数据集上微调评估,性能达到或超过已发表基准。短序列设计提升了可扩展性并降低计算成本,为心脏诊断提供可扩展、具备生理语义的 ECG 基础建模方案。

  4. arXiv · cs.AI55

    研究评测五个 LLM 对虚假信息的抵抗:口头判断与实际行为脱节

    arXiv 论文(arXiv:2610.33962)评估五个大语言模型在 196 条构造的虚假通知和 204 条改编的存档攻击下的行为,发现模型在被其评为不可信的通知上仍以 27%–99% 的比例发出有害工具调用。去掉先评分的步骤使有害执行平均上升 15 个百分点,说明可信度引导本身改变了被评测的行为;简单预警在五个模型中的四个显著减少有害执行,但也会损害合法任务完成,基于生成虚假通知的微调保护则随模型和协议不同而有差异。

    推荐理由:论文用 196 条虚假通知与 204 条真实攻击测试五个模型,指出可信度评估本身会改变模型行为,评测协议设计值得关注。

  5. arXiv · cs.CL51

    小模型编码 Agent 如何使用代码图与嵌入工具:arXiv 论文实测 SWE-bench Verified

    arXiv 论文 2610.33958 测试了嵌入搜索和代码图工具对小模型编码 Agent 定位能力的实际收益。在 SWE-bench Verified 上对 Qwen3(0.6B 到 32B)和 Gemma 4 共十个模型做工具消融,共 79k 次实验。结构化工具使 Qwen3-8B 和 Gemma 4 E4B 的 grep-only 准确率翻倍,收益在 1.7-4B 达峰 17-21 点,到 32B 降到 4-5 点;8B 以上约一半收益来自提交格式而非定位。

  6. arXiv · cs.AI48

    Continual Learning Exam:评测 LLM Agent 长程 RSI 与经验学习能力的基准

    研究者推出 Continual Learning Exam(CLE)基准,由 50+ 领域专家构建,用于衡量 LLM Agent 在真实职业工作流中通过积累经验持续改进的能力。CLE 包含 120 个人工编写任务,每个任务分五级阶梯,共 600 个级别,覆盖 12 个职业领域的 89 种职业角色。在 17 种 harness-模型配置中,失败后反馈加一次修订平均带来 5.3 个百分点的完成率提升,但最强系统也仅通过 47.7% 的级别、仅在 23.3% 的任务中完成全部五级。

  7. arXiv · cs.CL47

    结构化输出为何失败?九个 LLM 上提示词强制的 Pydantic Schema 实证研究

    一项研究对 3,997 次生成尝试、横跨九个 OpenAI 与 Anthropic 模型/API 配置(基于 HotpotQA 和 FinanceBench 问题)进行了 schema 失败分类。研究发现相近的有效率掩盖了不同失败模式,Markdown 围栏 JSON 是最常见失败:681 次围栏失败中仅 48.0% 在去除围栏后通过验证,其余多为字段长度违规。作者提出四项工程实践并开源了分类器、生成结果与标注。

  8. arXiv · cs.CL43

    免 Schema 文本转 SQL:从查询日志学习企业数据库结构

    一项研究提出首个无需 schema 文档的 text-to-SQL 框架,通过解析历史查询日志构建知识图谱,并用实体驱动的 GraphRAG 检索将用户问题锚定到业务术语。在 Beaver 基准上执行有效率达 95.7%,远高于基于 embedding 检索的 60.8%;工业部署中专家数据工程师以 70% 对 10% 的偏好胜出。

  9. arXiv · cs.CL23

    HerHealthGPT:面向女性生殖健康的循证对话式 AI 系统

    研究者推出 HerHealthGPT,一个面向女性生殖健康、结合 RAG、上下文感知澄清与来源验证的对话式 AI 系统。在 540 条英文消息和 30 名成人的测试中,证据检索将关注类别准确率从 54.1% 提升至 59.3%,澄清路由器达到 85.6% 召回率与 86.2% 特异度,83.3% 的参与者偏好启用检索的配置。系统仍需进一步临床验证。

  10. arXiv · cs.AI36

    WebViSE:从开放网络提取视觉设计技能以增强 LLM 网页生成

    研究者提出 WebViSE 框架,自动将成熟网站实现抽象为可复用的 Visual Skills,并以多父 DAG 组织技能库。基于 Qwen3.8-Max 的自动演化结构在仅约 39.09% 检索成本下超越非层次化 LLM 检索基线。该框架可作为即插即用指导提升多种模型的网页视觉质量,并可为开源模型构建数据合成管线,相关技能库与代码已开源。

  11. arXiv · cs.AI34

    循环神经网络在 100 个认知任务上的多任务交互研究

    研究者在 100 个认知任务上同时训练分层 Almost-Linear RNN(AL-RNN),考察多任务间的迁移与干扰。结果显示性能随非线性容量与任务特征维度提升,分层联合模型优于单独训练模型和单一非结构化联合模型;许多任务单独可用线性动力学求解,却无法由共享线性模型共同求解。

  12. arXiv · cs.AI24

    Rank-1 权重校正的可训练权重平均方法用于 OOD 检测

    研究者提出在可训练权重平均(TWA)基础上,用 SVD 提取的 rank-one 权重主成分作为校正方向,并通过分布内分类目标学习其贡献,以改进 OOD 检测。在 ResNet50 上,该方法在使用 MSP 和 RankWeight 的多数据集评测中优于微调和标准 TWA,且无论是否使用 Outlier Exposure 均有效。基于 Mahalanobis 的评测结果好坏参半,分层分析显示校正靠近分类器层效果更佳。