跳到正文
10月23日周五
  1. arXiv · cs.CL48

    SQuAT:球面格点向量量化感知训练

    论文提出 SQuAT,一种面向十亿参数 LLM 的形状-增益向量量化感知训练(VQ-QAT)方法,用分离的 STE 对方向和增益分别更新,方向通过 E8 球面码本量化。其分布式最近邻分配方案将 VQ-QAT 训练时间缩短 12.8 倍,并扩展到 10B token。在 instruction-tuned LLaMA-3.2-1B/3B、Qwen3-4B 和 base Qwen3-1.7B 上,SQuAT 在相同码本和初始化下始终优于标准 VQ-QAT STE,达到 SOTA VQ-QAT 精度。

  2. arXiv · cs.CL16

    SyRA-CS:基于 Reptile 元学习的语码切换 ASR 合成到真实自适应框架

    研究者提出 SyRA-CS,一种基于 Reptile 元学习的合成到真实自适应框架,用于语码切换(CS)语音识别。该框架对每种语言对和预训练模型在合成 CS-FLEURS 子集上做元训练,再用 1 小时标注真实目标语音自适应,覆盖 Arabic、French、German、Hindi-English 四组及 Encoder-CTC、FastConformer-RNN-T、AED、Speech-LLM 四种架构。SyRA-CS 在全部 16 组模型-语言对比较的 WER 上优于持续微调,XLS-R 相对 macro WER 降低 17.7%,其余三个模型降低 5.3-5.8%。

  3. arXiv · cs.CL19

    决策模型在越南语文本分类上的零样本迁移效果如何?一项实证研究

    一项实证研究评估了四个专用决策模型在越南语零-shot 分类中的表现,覆盖六个任务组共 13 个分类设置,并测试英语、越南语和双语标签描述及 teencode、拼写错误、去声调等语言扰动的影响。结果显示,英语标签描述下 JEV 表现最强,在 11 个分类设置中排名第一,双语描述并无一致提升;去声调导致的性能下降最大,使平均 macro-F1 降低 9.51–15.47 分。

  4. arXiv · cs.CL33

    Multi-Token Prediction 与替代 Tokenization 助力语言模型大规模学习潜在多跳图搜索

    一项 arXiv 研究指出,语言模型难以在图上从起点 s 生成到终点 t 的最短路径,原因在于监督信号与 tokenization 两方面。作者从理论和实验上证明多-token 预测(MTP)有效且其收益与图拓扑无关,并引入替代 tokenization,证明两者正交。结合这些方法,模型突破了此前工作的规模瓶颈,能在远超以往限制的图规模上稳定求解该任务。

  5. arXiv · cs.CL26

    对话系统观点选择的立场粒度研究:概念级立场向量如何影响用户接触不同观点

    一项对话系统研究用 bandit 策略控制可选观点与用户的距离,并比较标量立场打分与 Perspectivized Stance Vectors(将立场拆分到概念层面)。被试间实验(N=63)显示,概念级立场带来更多样的观点曝光和更广的立场覆盖,但不改变用户论证观点的深度或复述准确度。分析还发现,用户在“某一方未表态”的概念上复述观点最不准确,而非双方分歧的概念上。

  6. arXiv · cs.CL29

    LLM 如何在健康摘要中保留临床对齐:从结构化记录到患者可读叙事

    一项针对月经健康监测的研究用结合结构化证据约束与 RAG 的受约束生成框架,评测 LLM 生成患者可读健康摘要时的语义漂移问题。在 3 个 LLM、4,500 份生成摘要上,通过 NLI、原子事实性与可读性指标评估显示,显式接地约束持续改善临床对齐,尤其提升不确定性保留。但这种改善以阅读难度和医学术语增加为代价。

  7. arXiv · cs.CL29

    TTS 评估中的验证器下限:多少表面罕见词错误其实是 ASR 错误?

    TTS 通常用 ASR 转录输出评估词错误率,但识别器本身的错误也会被计入。在 LibriSpeech 和 FLEURS 上,评估识别器对人类语音中极罕见词的漏识率达 33-67%,用另两族识别器复核后,至少一个识别器听到的词的表观 TTS 错误率降低两到三倍(极罕见 LibriSpeech 词从 10-13% 降至 3-5%)。直接忽略这些漏识词有偏:识别器在这些词上发现 TTS 错误的频率为 4-6% 对 0.2-0.3%,且推翻约半数保留的错误。

  8. arXiv · cs.CL27

    LLM 在知识图谱转文本生成基准上的实证研究

    一项 arXiv 实证研究将近期 LLM 与微调 encoder-decoder 模型在知识图谱转文本生成任务的标准基准上对比,并结合经人工标注验证的图 grounding 无参考 LLM 评估。结果显示 LLM 在 reference-based 指标上大幅缩小、部分场景下追平与微调模型的差距,且在图 grounding 指标上表现更好:提示模型产生的矛盾和三元组遗漏更少,而微调模型的此类错误随图规模增长更快。两种评估方式相关性有限,反映其衡量生成质量的不同侧面。

  9. arXiv · cs.CL51

    扩散语言模型用于困惑度感知的黑盒攻击研究

    论文提出将连续潜空间黑盒攻击框架直接耦合到扩散语言模型(dLLM),去掉随机映射,生成更自然的攻击提示。在 RareTrap 采样估计和 ThinkTrap 优化搜索两种设置下,字符级困惑度分别从 10^3–10^7 降到 3–5、从 20–28 降到 4.3–5.4;两种映射得到的模型风险估计可相差一个数量级。

  10. arXiv · cs.CL16

    双语语言模型能捕捉二语阅读中的跨语言影响

    双语语言模型的跨语言迁移与人类 L2 阅读中的 L1 偏向相符。研究基于 12 种母语背景读者阅读英文的眼动数据,发现使用与读者母语匹配的双语模型比单语英文基线和其他母语模型更能预测 L2 阅读时间。这种预测优势集中在晚期眼动指标,受 L1-L2 文字系统重叠程度调节,并在中等水平读者中最明显。

  11. arXiv · cs.CL55

    研究用 LLM 智能体审计 Slovak FineWeb2 语料,发现 5.32% 机器生成内容农场

    论文提出用 LLM 智能体作为语料调试器审计多语言数据管线,通过只读、有预算的 API 探索语料并将发现编译成可执行测试,再由母语者验证。在 FineWeb2 的 26.5M 文档斯洛伐克语子集上,三次运行各花费 $2.21-$2.84,共发现四个现象的七项问题,最大的是 1,408,437 篇(5.32%)通过管线过滤的机器生成内容农场;盲测支持 7 项中的 6 项(缺陷率 .53-1.00 对随机对照的 .08)。编译后的测试套件 0.7 秒即可扫全语料无需 GPU,而单次 LLM 分类需 $12k-$90k;最佳静态采样基线以不到一半成本验证了比任何智能体运行更多的选择器。

    推荐理由:论文把 LLM 当语料调试器用一次而非逐条分类,并对比静态采样基线的成本与效果,方法对比值得数据质量工作者参考。

  12. arXiv · cs.AI44

    面向 Agentic AI 的认证执行框架:推理与动作之间安全、最小侵入的 Petri 网监督控制

    一篇 arXiv 论文用 Petri 网将 LLM Agent 的工具执行框架形式化为监督控制问题,使未满足或已消耗前置条件的注入请求无论措辞如何都会被拒绝。论文引入重规划闭环,证明传统监督器可能比更严格的安全监督器侵入性高任意倍,并刻画了最小侵入监督器。在自主发布 Agent 上的综合实验表明,安全部署需要一个监督器可在 rollout 开始后拒绝的步骤。

  13. arXiv · cs.AI29

    面向 EU AI Act 合规的 AI 风险本体 AIRO 与 VAIR 及其与 DPV 的集成

    研究者提出 AI 风险本体 AIRO 和 AI 风险词汇表 VAIR,用于描述 AI 用例及其相关风险,辅助 EU AI Act 对高风险 AI 系统的风险管理与文档要求。两者基于 ISO/IEC 23894 和 ISO/IEC 22989 开发,并已通过共识流程集成进 Data Privacy Vocabulary(DPV),将 DPV 范围从数据扩展到 AI,以支持复用和多法规合规。

  14. arXiv · cs.AI27

    审计学习式访问控制中的人工编写输入

    一项 arXiv 研究审计了学习式访问控制依赖的两类人工构建组件:硬拒绝集与区域路由映射。在五个公开 ABAC Lab 策略上,作者穷举验证最多 794,250 元组的关系,发现忠实转录显式限制的条款在 1 位作者和 3 个盲测语言模型引出者下不可靠率达 0.50-0.70,97% 的反例由其他规则授予;未经校验的拒绝集会扣留策略 16-78% 的授权。研究还发现混合路由的排序候选池在全部 24 个单元格中均为单类,且在两条真实策略上多数选择规则在两类损失下结论相反,已发布工件可复现所有数字。

  15. arXiv · cs.AI45

    HERD:面向持续学习的 Harness 演化递归蒸馏框架

    研究者提出 HERD(Harness-Evolving Recursive Distillation),一种混合持续学习框架:在 harness 中高效学习,并通过带双锚点的漂移约束知识蒸馏把经验内化为累积能力,抑制灾难性遗忘。在 TRACE+17 的 25 阶段任务流上,在固定内存与计算预算下,HERD 在新任务习得上匹敌最强参数化基线,同时遗忘最少、通用能力保持最好。

  16. arXiv · cs.AI49

    AgentPhishing:一个针对 LLM 邮件智能体自适应攻击的基准

    研究者推出 AgentPhishing 基准,评估说服式钓鱼攻击能否让 LLM 邮件智能体遵从恶意请求,并提出 PhishOpt 方法针对单个智能体优化可复用的邮件生成技能。在九个智能体的评测中,四个钓鱼检测率低于 10%,恶意请求遵从率高于 45%。结果表明传统钓鱼评测无法推断智能体安全性,需评估其对说服式恶意请求的响应。

  17. arXiv · cs.AI46

    同一实体、不同文字:诊断语言模型跨文字实体匹配失败

    一项 arXiv 研究用 601 对天城文-拉丁文审计身份对测试发现,Qwen2.5-7B 在马拉地语提示下,同一人名判断准确率从拉丁文的 35.1% 降至天城文的 8.5%。在 374 对马拉雅拉姆语对上复现了该效应,0.925 AUROC,且标量校准可恢复 87% 的模型-探针平衡准确率差距。对 Qwen 中间层的干预将马拉地语同一人准确率从 6.5% 提升至 33.5%,不同人准确率保持 98.5%。

  18. arXiv · cs.AI45

    顶级期刊已发表论文遭遇 LLM 同行评审:四大模型大多给出大修或拒稿

    一项 arXiv 研究让四个 LLM(两个闭源、两个开源)以盲评方式评审来自 Nature、Science、Cell 等 20 本期刊的 200 篇 2026 年已发表论文,800 份评审中 75.6% 建议大修或拒稿,各模型比例从 17.5% 到 100% 不等(p < 0.001)。在被植入一个特定领域方法学或统计缺陷后,各模型检出率为 17.0% 到 60.5%,显示模型间结论高度不一致且假阳性与漏检并存。

  19. arXiv · cs.AI26

    面向神经网络可解释性的事后特征选择层(post-hoc FSL)

    研究者提出 post-hoc FSL,一个轻量可训练模块,可在已冻结的预训练模型上事后优化特征权重,不改动原模型架构与参数。该方法在统计与视觉指标(accuracy、F1、recall、precision、weighted t-SNE、silhouette score)上与 Integrated Gradients、DeepLIFT、Gradient SHAP、Feature Ablation 等事后方法对比,在合成与真实表格数据上均能识别相关特征,在保持原模型预测能力的同时提升可解释性。该工作已被 2026 IJCNN 接收。

  20. arXiv · cs.AI43

    深度增长与循环结构如何塑造语言模型的上下文学习能力

    一项研究分析了深度增长与循环结构如何促进语言模型的上下文学习,涵盖参数量最高 3B 的预训练模型与受控任务。实验显示此类模型比全深度稠密参考模型更依赖上下文信息,能更早习得 ICL 并在权重学习中更牢固地保留该能力。注意力追踪与消融实验表明,深度增长使早期 induction heads 跨层传播,模型更依赖 induction 排名靠前的注意力头支持 few-shot 表现。

  21. arXiv · cs.AI53

    FocusVLA:面向 VLA 模型的未来意图引导动态视图路由框架

    研究者提出 FocusVLA,一个基于阶段感知的 VLA 多视图动态路由框架,从历史动作预测未来交互意图以引导视图切换。在 RoboTwin 2.0 上平均成功率较最强基线 π0.5 提升 10.10 pp,真实世界评测成功率从 71.7% 提至 85.0%;其意图预测与动态路由模块可在不改核心架构的情况下集成到现有 VLA 框架,已被 CoRL 2026 接收。

    推荐理由:论文指出 VLA 模型普遍过度依赖腕部视角,给出的动态视图路由方法可迁移到现有 VLA 框架,改动成本较低。

  22. arXiv · cs.AI44

    可预测性能并非最优:这对 LLM 模型路由意味着什么

    一项 arXiv 研究表明,LLM 模型路由中的性能预测方法只有在候选模型在某任务上表现次优、或预测器相比模型有显著额外容量时,才能胜过以模型自置信度为基线的简单方案。理论上,优于自置信度的性能预测器可通过重新校准将优势精确转移到对数损失上,其优势上界为模型次优程度加上额外参数带来的增益。在 4 个 benchmark 上用 16 个语言模型的实验显示,模型经微调改进后,预测器的优势随之缩小,双模型级联路由也呈现同样规律。

  23. arXiv · cs.AI34

    PhysTrace:视频生成模型物理一致性的可解释时序评估框架

    研究者提出 PhysTrace,一个无需训练的框架,将 MLLM 生成的历史条件预期与观测视频窗口对齐,以时序定位视频生成模型中的物理违规并给出可解释描述。配套发布的 IntPhys2-Timing 基准为 IntPhys2 加入违规时间区间,PhysTrace 在其上的 Hit Rate 最高达 70.7%,并在 IntPhys2 的可能-不可能判别总准确率上优于对比方法。应用于 diffusion/flow 视频模型的重建视频时,该框架可跨时间步揭示属性与噪声相关的物理违规定位模式。

  24. arXiv · cs.AI34

    保守元智能体搜索(CMAS):非平稳环境下的架构自适应方法

    一篇 arXiv 论文提出 Conservative Meta-Agent Search(CMAS),将元智能体架构搜索形式化为带切换成本与硬风险约束的序贯现任替换问题,并配套引入 MetaInvest-Bench 模拟器用于评测元层级泛化。在 96 个金融流上,CMAS 将归一化平均 surrogate 动态预言机 regret 从 0.116 降至 0.104,held-out 效用从 0.44 提升至 0.48,每次更新的错误晋升率为 3.4%(名义目标 5%)。其部署推理成本低约 6%,但含搜索的 token 成本为对比方法中最高。

  25. arXiv · cs.AI43

    DIAL:通过蒸馏指令遵循程度实现对语言模型的细粒度可控

    DIAL(Distilled Instruction-Adherence Levels)是一个实现对大语言模型指令遵循程度进行细粒度数值控制的框架,同时兼顾可控性、效率与可扩展性。它用冻结 LLM 结合 classifier-free guidance 生成训练信号进行 on-policy 蒸馏,并设计了基于 LLM hidden states 分类器的轻量级 steering adapter 逐 token 自适应调节强度。配套发布的 SteirF 数据集含 98,625 条指令,训练后 DIAL 可细粒度控制 persona,并与提示词结合提升可验证指令遵循。

  26. arXiv · cs.AI36

    面向编码智能体的自适应技能粒度:运行时路由与宏到微恢复

    一篇 arXiv 论文提出 Adaptive Skill Granularity 框架,将编码智能体的技能粒度作为基于任务结构、执行状态和宏技能失败的动作抽象策略来控制,系统由基于特征的粒度控制器和有限状态恢复执行器组成。在采用验证器定义成功、总成本及宏采用率、失败恢复、路由匹配等过程指标的确定性编码智能体协议中,运行时路由与显式的宏到微恢复比固定粒度执行更稳健,可恢复固定执行无法解决的受控宏失败。作者据此主张技能库应被视为可控、可验证、可恢复的执行抽象。

  27. arXiv · cs.AI36

    MoG-VLM:基于运动引导视觉语言模型的高效视频异常检测

    MoG-VLM 是一个运动自适应视频异常检测框架,用时间梯度幅度(TGM)做内容感知采样,仅在异常可能性升高的帧附近触发 VLM 推理。该方法在 XD-Violence、UCF-Crime、MSAD 和 ShanghaiTech 四个基准上分别取得 91.91%、84.30%、87.88% 和 78.96% 的 AUC-ROC,其中三个基准在 zero-shot、免训练设置下刷新 SOTA。在 XD-Violence 上较此前最佳提升 +0.57%,同时推理提速 1.31x,代码已在 GitHub 开源。

  28. arXiv · cs.AI22

    SABLE:面向高维潜空间、低评测预算的贝叶斯优化方法

    研究者提出 SABLE,一种针对高维生成模型潜空间、评测预算有限的贝叶斯优化方法。它用贝叶斯仿射代理模型处理预测与采集,通过有限区间调度控制 off-span 范数避免欠探索,并用重压缩方案把信息压缩为 O(M) 伪观测。在合成基准与潜空间优化任务上,SABLE 实现高样本效率,决策时间保持在几十毫秒,大预算下比现有方法快数个数量级。

  29. arXiv · cs.AI21

    FairFRESH:面向公平且可解释家庭食物推荐的神经符号框架

    论文提出神经符号框架 FairFRESH,将家庭食物推荐建模为约束性公平分配,学习成员个体效用、通过确定性过滤器强制饮食规则,并基于 Shapley 和 Banzhaf 归因进行解释。在 NHANES 衍生数据上,学习效用模型 Recall@20 达 0.293,优于五个学习型推荐器(最高 0.244);四人家庭测试中 Nash 分配使 Gini 差距相对冲突消解降低 42%,Recall@20 从 0.180 提升至 0.197。所有推荐均满足编码的饮食规则,归因分数与移除组件后的效用损失相关(r = 0.76),模拟中共享餐食使储藏消耗减少约三分之一。

  30. arXiv · cs.AI41

    DuoCook:一个受 Overcooked 启发的视觉规划与协调 benchmark

    研究者推出 DuoCook,一个基于 Unreal Engine、受 Overcooked 启发的视觉规划与协调评测 benchmark,由单一视觉语言模型通过俯视视觉观察同时控制两名玩家。benchmark 包含 5 类共 20 张地图,评估任务得分、订单完成率、交付精度、动作接受率和 API 花费,并对共享自写笔记记忆做了消融实验。表现最强的模型 gpt-6-astra 平均订单完成率仅为 26.2%;笔记记忆对 Claude 和 Qwen 平均加分,对 GPT 和 Gemini 则为负向。

  31. arXiv · cs.AI25

    从提示词规则到 Golden Data Model:生产级生成个性化、合规的制药宣传语

    一项生产案例研究将合规与个性化信号从提示词规则迁移到检索时结构化上下文,基于含 1,867 条制药宣传语、覆盖四个产品的 Golden Data Model 构建内部工具 Composer。在六个产品-受众细分上,预期适应症提升 29%、预期内容类型提升 62%、预期目标受众提升 67%,6C 质量分提升 86%,宣传语复用提升 34%,每周 API 成本降低 29.5%。

  32. arXiv · cs.AI27

    Jev-DLC:基于类型化反馈的决策级持续学习

    Jev-DLC 是一种从类型化反馈中学习用户偏好的决策级持续学习方法,把每次纠正同时视为动作身份证据和偏好-拒绝选择间的有向关系,存储在冻结打分器之上的两个有界通道中,不保留原始交互历史、不增加打分器调用、不做运行时语言模型反向传播。作者还提出按时序考核纠正对后续决策影响的 TCPA-Bench。在 TCPA-Repeat 上,Jev-DLC 达到 44.83% user-macro 准确率,比 Recent-4 历史回放高 2.43 个百分点;在至少两次早期反馈后达到 56.07%,领先最强对比方法 7.54 个百分点。

  33. arXiv · cs.AI32

    超越因果掩码:审计与定位自适应序列模型中隐藏的未来 token 泄漏

    一项研究揭示了自适应残差路由解码器中隐藏的未来 token 泄漏如何制造虚假的架构进步:一个异常 24 层 checkpoint 将验证损失从基线的 3.5958 降至 1.4259,却未通过 prefix-invariance 审计,泄漏源自经动态路由查询路径广播的全序列摘要。两个独立训练的 12 层因果修复消除了可检测的泄漏,验证损失和参考困惑度回到对照水平。研究借助 LeakScore 等诊断工具指出,低 teacher-forced 损失须结合全模型因果检查与自由生成评估解读。

  34. arXiv · cs.AI27

    可争议智能体用于数据治理:跨结构化与非结构化系统记录 AI 生成元数据的人类监督

    一篇 arXiv 论文提出“可争议治理”模式:基于 LLM 的专家智能体为有争议的元数据决策生成带评分和引用的论证,steward 可在提交前接受、拒绝、修改或补充论证,治理记录保留证据、干预与结果。工作流包含分级分诊路径、评分与记录模型及已验证决策的先例门控,版本化领域术语表为智能体提供术语与缩写定义。两个 HVAC 用例展示了基于 Brick Schema 的点位分类(附开源参考实现)和关联索赔字段、遥测与服务记录的保修失效模式决策。

  35. arXiv · cs.AI38

    何时跟随教师:基于优势的在策略蒸馏 AOPD

    AOPD(Advantage-Based On-Policy Distillation)提出在 Online Policy Distillation 中区分教师偏好与对学生的实际帮助,依据教师动作在学生策略下的反事实优势进行加权,改善学生预期结果的动作被强化,否则降权。该方法无需额外 rollout 或奖励评估,仅用学生轨迹的终端奖励即可无偏估计目标。在数学、代码和 Medqa 任务上,AOPD 在外接教师与自蒸馏设置下均超过蒸馏与 RL 基线。

  36. arXiv · cs.AI49

    Social-HUMINT:一个用 LLM 统一衡量社交媒体暴露程度的框架

    研究者提出 Social-HUMINT 框架,将 SOCMINT 与 Cyber-HUMINT 统一为涵盖 38 项能力的分类体系(专家验证 Fleiss' κ = 0.92),并实现为 LLM 增强的多智能体流水线。在真实参与者公开数据上,信息抽取 F1 = 97.3%,推断属性得分 4.73/5,远超基于规则和 NER 的基线。该框架可预测目标对个性化诱导选项的排序以间接评估易感性,帮助防御者在攻击者之前评估自身暴露风险。

  37. arXiv · cs.AI49

    扩散语言模型中的可学习 unmasking 策略如何影响速度与精度权衡:一项受控研究

    一项受控研究系统考察了扩散语言模型的可学习 unmasking 策略,发现用最终输出匹配做标签在低 NFE 下过于宽松,隐藏状态单独较弱但可补充置信度,约 10% 的 NFE 减少即可抵消最高 7.5M 参数策略的开销。研究在 LLaDA-8B-Instruct 上训练的 856K 参数策略取得 GSM8K 上最佳精度—NFE 前沿与最高吞吐,在 MATH-500 和 HumanEval 中等目标下具竞争力,并基本可迁移至 Dream-7B-Instruct。