跳到正文
10月10日周六
  1. arXiv · cs.CL34

    DRIFT:通过依存推理改进大语言模型的方面情感四元组预测

    研究者提出 DRIFT,将依存句法树线性化后直接注入 LLM 提示词作为显式关系上下文,使模型对 aspect-opinion 依赖进行推理,并集成检索增强的 in-context learning 与基于 LLM 的语法感知裁决机制。在 SemEval Rest15、Rest16 和 ACOS 上,DRIFT 在对比的生成式 ASQP 方法中表现最佳,Rest15 和 Rest16 分别达到 54.47% 和 64.10% F1;裁决机制还表明 exact-match 指标系统性低估了语义正确的预测。

  2. arXiv · cs.AI35

    WeatherBridge:面向预训练气象预报模型的预报感知多源输入适配方法

    WeatherBridge 是一个源条件适配器,用 Swin-UNet 预测结构化残差修正,将 GFS、HRES、CMA 等业务 NWP 初始场映射到 ERA5 参考状态,且无需更新预训练的 FuXi 模型;训练目标结合纬度加权 ERA5 重建与 One-step Rollout Alignment(ORA)。在 2025 年 1 月 1 日至 11 月 22 日的评估中,FuXi 在 6–240 小时预报的 18 组源-变量组合中 17 组 RMSE 下降,中位数降幅 10.2%,最大 46.3%,且该适配器还能提升 FengWu 在 GFS 输入上的表现。

  3. arXiv · cs.CL22

    BioNEL-RAG:无需训练、基于 RAG 与大语言模型的生物医学实体链接框架

    研究者提出 BioNEL-RAG,一种无需训练的生物医学实体链接(BioNEL)框架,用 RAG 模块检索候选实体、LLM 模块结合上下文完成实体规范化。该方法无需在基因、疾病或化合物等子领域数据集上微调,性能即可与现有依赖领域数据训练的方法相当,提升了跨领域适应性。

  4. arXiv · cs.CL32

    谁获得尊重?孟加拉语敬语分配偏见的反事实基准

    该基准利用孟加拉语第三人称必须选择普通或敬语语体的特点,通过英译孟翻译测试 LLM 如何分配尊敬。评测集含 2,016 个句子、覆盖 72 种职业,给出 0–100 的 Honorific Bias Score(HBS),九个模型 HBS 在 19.9 到 70.1 之间。职业解释了 3.2%–51.5% 的语体选择方差,而性别最多仅 1.2%。

  5. arXiv · cs.CL36

    CUSE:基于反事实引导与在线自蒸馏的多模态大模型细粒度遗忘框架

    CUSE 是一种面向多模态大语言模型的反事实引导在线自蒸馏遗忘框架,通过移除目标相关证据构造反事实输入,利用 token 概率变化定位需更强遗忘的 token,并以冻结的原始模型副本作为教师进行 token 级蒸馏,同时确定遗忘与保留目标。在 MLLMU-Bench 上,CUSE 将遗忘集 ROUGE-L 降低 33.6%,保留集 ROUGE-L 比最强基线高 1.2%。

  6. arXiv · cs.CL18

    面向亚马孙通用语 Nheengatu 的开源机器翻译系统与可复现语料库管线

    研究者构建了迄今最大的葡萄牙语—Nheengatu 平行语料库(14.5k 句对),以 2023 年巴西联邦宪法官方翻译为核心,并发布首个开源权重双向 MT 模型。最终系统在文章不相交的宪法文本上达 31.7–32.8 chrF++,近域集 64.1–64.5,语音 45.2–47.5;加入转写口语语料使语音 chrF++ 提升 24–27 分。更大的 NLLB 模型仅改善译入葡语、不改善译入 Nheengatu 的效果。

  7. arXiv · cs.CL21

    基于统计机器翻译、命名实体识别与语义索引的阿姆哈拉语-英语跨语言问答系统

    一篇 arXiv 论文提出双向阿姆哈拉语-英语跨语言问答(CLQA)系统,整合统计机器翻译、最大熵命名实体识别与语义索引。阿姆哈拉语到英语检索达到 72% 精确率、79% 召回率,英语到阿姆哈拉语达到 65% 精确率、70% 召回率,表明模块化翻译-检索架构在低资源条件下也能提供有效的跨语言访问。

  8. arXiv · cs.CL48

    Vela:以用户行为作监督激发 LLM 智能

    Vela 框架将 100,000 名用户的匿名真实行为数据转化为 91 类真实任务模板、共 100,000 个任务,经难度过滤后保留约 75,000 个任务及其训练轨迹。基于这些轨迹微调 Qwen3.6-35B-A3B,用户相关任务较基础模型最高提升 11.5 分,通用基准平均提升 4 分;微调后再做强化学习比直接从基础模型强化学习最高多 7.7 分。

  9. arXiv · cs.CL41

    TasteBench:如何构建真正衡量“品味”的基准

    arXiv 论文提出 TasteBench,一个跨视觉、品牌、书籍和科技类别的成对 good-vs-bad 基准,采用冻结评分标准和仅专家金标(panel n>=3,一致率 >=0.60)。在 n=250 对的 Round-1 试点中量化出三类效度威胁:位置偏置(always_item_a 得分 0.956)、文件名词汇泄漏(0.912)以及难度天花板(五个 VLM 在 craft 类别均达 1.0)。团队发布参考 eval harness 和 side-randomization 工具,可将位置偏置从 0.916 降至 0.495/0.505。

  10. arXiv · cs.CL42

    Lingdan-V2:面向中医临床推理的大语言模型(4B/8B/14B)

    Lingdan-V2 是 4B、8B、14B 参数的中医大语言模型家族,采用持续预训练、推理监督与以方剂为核心的强化学习对齐框架,用于中医临床决策支持和方剂推荐。在含 25,620 条专家核验条目的公开基准上,14B 强化对齐模型方剂生成 F1 达 37.0,超过总参数 671B 的 DeepSeek-R1 的 32.3;在 4,348 例脾胃病回顾性临床数据集上 F1 为 52.8,剂量一致性提升。

  11. arXiv · cs.CL50

    面向大语言模型合并条件后门去对齐的研究:SMOKE 攻击框架

    研究揭示大语言模型合并中的单侧合并条件后门(OMCB)威胁:该后门在单一模型中潜伏且难以被后门检测发现,模型合并后激活并触发安全去对齐。作者提出基于元学习的 SMOKE 攻击框架,通过双层优化植入 OMCB,实验证明其在多种模型架构与合并技术下有效且能抵抗现有后门检测。

  12. arXiv · cs.CL28

    VoTSpeech:在指令跟随 TTS 中将音色设计与语音生成解耦

    VoTSpeech 通过显式中间语音潜变量,将音色设计与语音生成解耦。该系统基于共享语言模型骨干,先用 flow 模块从文本指令预测连续语音潜变量,再同时作为语言模型与 Acoustic DiT 的共享条件,最后由 audio VAE 解码器生成波形;语音潜变量由 speaker embeddings 与时间池化的 audio VAE 特征联合监督。VoTSpeech 在 InstructTTSEval-ZH 上表现强劲,与强开源模型相比具备竞争力且保持高自然度,代码、模型与音频样本已开源。

  13. arXiv · cs.CL42

    PVFH-Bench:评测视觉语言模型中前提诱导的视觉固着幻觉

    PVFH-Bench 基准用于系统评测视觉语言模型(LVLM)的"前提诱导视觉固着幻觉"(PVFH),即模型接受错误文本前提后,对并不存在但视觉上合理的对象生成回答。该基准自动构造视觉易混淆的缺失目标并配诊断子集,对 10 个 SOTA LVLM 的实验显示所有模型均高度易感,且显式链式推理(CoT)会进一步加剧该失败模式。

  14. arXiv · cs.CL36

    审计开源 Jev 风格模型的检索请求独立性

    一项研究在 92 条 TREC 检索查询构造的 276 个三段落状态上,审计了七个开源 Jev 风格检查点的请求独立性。请求扩展使 Nimble 的判断出现 9.1%/8.0% 的严格二元翻转,并在阈值 0.5 下改变 TREC DL2019/2020 中 21.4%/18.9% 的选择或弃权动作。字段掩码将全部 70 次请求集翻转追溯到提示词中序列化的 schema 字段,Von 修复共享分隔符位置可消除两处资格性偏好翻转。

  15. arXiv · cs.CL22

    FASD 方法解耦多模态大模型遗忘中的知识遗忘与拒答学习

    arXiv 论文提出 Forget-Aware Self-Distillation(FASD),针对多模态大模型遗忘评估只看停止输出导致的两类问题:抑制目标知识引发幻觉、拒答训练只是改变表面行为。FASD 分为行为与知识两条通道,前者从忽略提示的模型副本蒸馏拒答行为并掩蔽 target tokens,后者直接抑制 ground-truth 答案片段,实现"诚实无知":模型真正遗忘目标知识且能识别自身知识边界,同时保留数据性能。代码和数据将在论文发表后发布。

  16. arXiv · cs.CL39

    微调策略而非仅数据:面向 HR 推荐系统的嵌入模型性别与刻板印象偏差的统计学严格审计

    一项审计用 Bias-in-Bios 和 StereoSet 基准评估了六个多语言句子嵌入模型(LaBSE 与 E5 家族),并修正了 naive 显著性检验中的非独立性问题。结果显示 E5-Base 的知识蒸馏微调显著加大 Bias-in-Bios 偏差(Δ=-0.177,p<10⁻⁸),而二分类微调无统计学差异(p=0.218)。微调策略因此成为 HR 推荐系统设计的可操作杠杆。

  17. arXiv · cs.CL40

    基于均匀信息密度的偏好优化方法 UIDPO

    研究者将心理语言学理论 Uniform Information Density 引入大语言模型偏好优化,提出 UIDPO 算法,通过全局标准差与局部二阶差分组合度量信息均匀度并纳入优化目标。与此前 SOTA 方法 SimPO 相比,UIDPO 在 AlpacaEval2、ArenaHard 和 MT-Bench 上取得相当或更优的表现,代码仓库已开源。

  18. arXiv · cs.CL40

    Reward-Aligned Distillation(RAD):基于奖励对齐加权蒸馏信号提升 LLM 推理

    论文提出 Reward-Aligned Distillation(RAD),一种双层框架,通过预测每个 token 监督信号对学生模型更新后奖励的影响来加权 on-policy 蒸馏信号。在相同训练响应预算下,RAD 在六个竞赛数学基准上比最强基线提升 Qwen3-1.7B(non-thinking)6.5 个百分点、Qwen3-4B-Instruct-2507 2.5 个百分点;在 LiveCodeBench-v6 上,Qwen3-1.7B(non-thinking)与 OLMo3-7B-Instruct 分别达到 54.69% 和 58.67% pass@1,超过最强基线 8.7 和 6.4 个百分点。简化变体 RAD-Simple 在同等预算下取得相近数学准确率。

  19. arXiv · cs.CL33

    LongHisDoc:首个中文长篇历史文档理解基准发布

    LongHisDoc 是首个面向长篇(整本)中文历史文档理解的基准,包含来自 101 份 PDF 的 1,012 条专家标注 QA 对,平均每份 85.1 页、42,776.4 tokens,覆盖 10 个类别和单页、跨页、多跳、不可回答四类问题。评测显示最强 LVLM 和 LLM 准确率仅 62.9% 和 69.9%,同时基准还评测了多模态检索器与端到端 RAG 性能,基准和评测代码已开源。

  20. arXiv · cs.CL49

    Q-NeuS:面向大语言模型的查询自适应神经元调控框架

    arXiv 论文提出 Q-NeuS,一种查询自适应的 LLM 神经元调控框架,根据每个输入动态决定调控哪些神经元及调控幅度。该框架构建主题引导的候选神经元空间,用 Query-Adaptive Gate 生成逐神经元调制系数,并通过 Neu-GRPO 基于多种干预配置的相对表现训练。基座 LLM 全程冻结,推理时无需任务或主题标签,实验显示其在多模型与 benchmark 上均有一致提升并具跨 benchmark 迁移性。

  21. GitHub · 灵魂体仓库14

    rithirn75-bot 开源仓库:优化大语言模型在多任务环境中的上下文推理(论文投稿 COAI 2025)

    GitHub 仓库 rithirn75-bot/optimizing-llms-contextual-reasoning 为论文《Optimizing Large Language Models for Contextual Reasoning in Multi-Task Environments》提供实现与实验代码,该论文提出增强 LLM 多任务上下文推理的优化策略,目前处于 COAI 2025 审稿中。仓库状态为即将发布,将包含实验代码、benchmark 结果、预训练模型 checkpoint 及文档教程。

  22. arXiv · cs.CL32

    AphaVoice:面向失语症患者模拟的文本转语音模型

    研究者推出 AphaVoice,一种专为合成高度逼真失语语音设计的 TTS 框架,用于医疗人员训练模拟。对比 SOTA TTS 系统的评测显示,其能更好地捕捉构音障碍这一临床特征,在时间指标上超越现有模型并保持说话人身份一致。借助 latent space shifting,模型还支持多说话人生成,为失语症医疗训练与临床模拟提供可扩展的高保真工具。

  23. GitHub · 3D 生成新仓库45

    RSure-Agent 遥感智能体框架开源仓库发布,验证工具观测以抑制误差传播

    RSure-Agent 是一个遥感智能体框架,通过可验证观测协议和任务-工具可靠性先验来核验工具观测结果,限制错误在后续推理中传播。论文分析了 1,229 条执行轨迹,发现各基准至少 22.7% 的任务存在工具执行成功但观测错误的情况。在 EarthBench、ThinkGeo、TerraLogic 和 CHOICE-420 上,该框架将误差传播率降低 21.3 至 25.9 个百分点,在 CHOICE-420 上使 11 个 backbone 模型平均准确率提升 5.71 个百分点,核心代码将分阶段发布。

  24. GitHub · 灵魂体仓库13

    feomite 开源仓库:优化 LLM 在多任务环境下的上下文推理(论文投稿 COAI 2025,代码待发布)

    GitHub 仓库 feomite/optimizing-llms-contextual-reasoning 为论文《Optimizing Large Language Models for Contextual Reasoning in Multi-Task Environments》的实现与实验代码预留,该论文提出增强 LLM 跨多任务上下文推理的优化策略,目前处于 COAI 2025 审稿中。仓库状态为 To be released,将陆续放出实现代码、benchmark 结果、预训练模型 checkpoint 及文档教程。

  25. GitHub · 灵魂体仓库35

    ICML 2025 论文 llm-adaptive-learning 开源:LLM 动态环境自适应学习实现

    论文 "Adaptive Learning Strategies for Large Language Models in Dynamic Environments"(ICML 2025)的实现代码以 Apache 2.0 许可开源。该方法支持实时参数调整、动态记忆管理与防止灾难性遗忘,无需全量重训练即可持续适应变化环境。在四类动态场景中较 baseline 提升 +16.8% 至 +19.1%,如混合上下文 91.3% 对 74.5%。

  26. GitHub · 去对齐工具与仓库63

    psm-mixture-test 仓库对 Persona Selection Model 做定量检验

    OzAmram 在 GitHub 开源 psm-mixture-test 仓库,用 Olmo-3-1025-7B base 与 Olmo-3-7B-Instruct 一对开放权重模型,对 Persona Selection Model(Marks, Lindsey & Olah 2026)做定量检验,Qwen2.5-7B 系列作跨家族对照。

    推荐理由:原文用固定的一对开源权重模型做了完整可复现的定量检验,给出了混合拟合误差、AUROC 和软前缀差距等具体数字。

  27. arXiv · cs.AI33

    语言模型能玩好维基百科游戏吗?

    一项 arXiv 研究用“维基百科游戏”评测语言模型的信息检索能力,要求模型仅通过文章链接到达目标条目。研究者在本地构建了大规模维基百科图谱和基于 OpenAlex 的论文引用图谱,对比了嵌入向量模型与 LLM 在五种语言和五个学术数据集上的表现,并与人类及 TF-IDF 基准比较。结果显示没有任何模型显著超越人类,但 GPT-o3 mini、GPT-4o、QwQ:32B 和 DeepSeek-R1:70B 达到了可比水平,且性能排名随语言和主题变化。

  28. arXiv · cs.AI24

    Hide and Seek:面向黑盒视觉模型的无需权重与标注的概念级归因解释方法

    研究者提出 Hide and Seek(HnS),一种概念级归因方法,无需访问模型权重或概念标注数据集即可解释黑盒视觉模型。HnS 借助视觉-语言模型检索概念对齐图像、定位并遮蔽概念区域,通过对比遮蔽前后模型输出的变化来度量归因。该方法在 CelebA 和 COCO-Stuff 上验证,与真值归因的一致性优于现有方法,并可用于图像描述生成和卫星图像分割等现有方法无法处理的任务。

  29. arXiv · cs.CL58

    RSI-Anything:基于世界模型实现递归自我改进的通用框架

    Taoyong Cui 等人在 arXiv 发布 RSI-Anything(arXiv:2610.13912),一个基于 JEPA-Anything 的领域通用递归自我改进(RSI)框架,用预测式世界模型指导动作与学习数据选择,并通过组件与兼容性检查决定更新后策略-模型对的保留。代码修复中成功率先从静态验证器的 26.3% 提到预测选择的 29.2%,经世界模型适配后达 31.2%;GUI 任务完成率提高且平均动作减少 39.4%;五个连续策略版本使实验室规划得分从 21.80% 升至 46.01%;40 次实验预算下反应优化平均最优产率 96.15%,优于贝叶斯优化的 82.16%。

    推荐理由:论文用预测式世界模型替代昂贵外部反馈来驱动递归自我改进,并给出代码修复、GUI、实验规划等多域的可复核数字。

  30. arXiv · cs.CL24

    VLM 研究揭示:空间关系表示的保真度低于词汇先验

    arXiv 论文提出 EICS 指标与 CASP-VL 基准(基于 Visual Genome 场景图的空间扰动),检验 VLM 内部表示对概念与空间关系的编码。结果显示多种 VLM 架构对空间关系的表示明显不如词汇信息保真,即使这些模型在组合性 benchmark 上远高于随机水平。关系信息在谓词自身 token 处可识别,但经 (EOS) 聚合或 mean pooling 形成全局表示后丢失。

  31. arXiv · cs.AI17

    重新审视表格数据深度回归:目标函数与全局早停的局限

    该 arXiv 论文系统重评了表格数据深度回归的多种目标函数,发现多数相比调优后的 MSE 基线收益有限或不稳定,而 quantile loss 在多个神经骨干上带来一致改进。研究进一步指出不同噪声水平的区域最优训练轮数不同,单一全局早停点会迫使不确定性区域之间妥协;作者提出结合输入相关标签平滑的异方差感知 quantile loss 扩展,在部分骨干上有所提升。

  32. arXiv · cs.CL28

    结构自动机如何改进神经语义解析

    arXiv 论文提出接受路径解码(APD),在长度受限下保证语义解析输出可被自动机接受,DRS 上 Smatch++ 较局部掩码提升 5.1 和 2.4 点,AMR 上提升 6.4 和 3.2 点。事后处理方面,训练数据受限时 10.2% 的输入在 8 个无约束采样下仍无有效输出,全量数据时降至 0.4%。训练中惩罚被自动机拒绝的 token 在 10% 训练进度后可将开发集 Smatch++ 提升 3.6-11.0 点,但该优势随训练推进逐渐消失。

  33. arXiv · cs.AI34

    任务上下文如何塑造大语言模型中组件的角色

    一项针对五个开源权重模型(跨四个模型族、1.5B-14B 参数)的研究发现,任务变化会重新分配注意力头的 influence。在 Gemma-2-9B 和 Qwen3-14B 中,激活编辑可在保持指令不变的情况下切换模型读取的事实,同一批 head 会响应不同的图事实并以不同方式影响后续组件;对应的线性响应映射将预测均方误差在 Gemma 中降低 53.6%、Qwen 中降低 5.0%。这表明任务上下文同时改变共享组件响应的内容及其对后续计算的作用方式。

  34. arXiv · cs.AI44

    RATED:基于执行动态的可靠性感知 AI Agent 工具检索框架

    arXiv 论文提出 RATED,一个结合冻结双编码器对比微调与 contextual bandit 动态重排的 AI Agent 工具检索框架,可快速适应运行时工具故障而无需重训练。配套发布 EcoAgent 基准,含 5,172 个真实工具和超 21 万 query-tool 对。RATED 相对 ToolLLM API retriever 的 MRR 提升 52.2%,在 30% 故障率的严重 API 中断下将故障选择率从 86.2% 降至 2.9%,额外延迟开销不足 1 ms,代码与数据集已开源。

  35. arXiv · cs.AI49

    X-AgentRed:面向个人智能体的自演化红队测试框架,挖掘跨服务有害调用路径

    研究者提出 X-AgentRed,一个自演化红队测试框架,通过构建工具依赖有向图并利用执行反馈,发现个人智能体在多服务生态中完成良性请求时可能产生的有害工具调用路径。该框架通过工具替换多样化路径并修正被阻塞步骤的前置条件实现自我改进。在四个前沿 agentic 模型上,X-AgentRed 的有害路径率达到 STAC 的 1.77 倍,工具覆盖率平均达 2.99 倍。

  36. GitHub · 去对齐工具与仓库61

    WhoFlips 论文开源:反方论证如何让大语言模型放弃正确答案

    WhoFlips 论文(arXiv:2606.16011)开源配套仓库与数据集,用两阶段协议测量 LLM 答案稳定性:先让模型为错误选项写论证,再用该论证挑战其原本正确的答案。实验覆盖 GPT-5.1、Gemma-4-26B、Llama-3.1-8B、Llama-3.3-70B 和 Qwen3.5 系列,变量包括论证长度 k ∈ {1,3,5,10}、归属(盲/自)与来源(同模型/跨模型),解码温度为 0 并禁用推理。数据集 nafisehNik/WhoFlips 约 1.18 GB、约 20.3 万行,含 self_mmlu、cross_mmlu 和 maxflip_mmlu 三个子集,CC BY 4.0 许可,每行保留两阶段完整信息可直接重算 AFR 等指标。

    推荐理由:论文配套仓库同时放出了完整代码、复现脚本和约 203k 行的公开数据集,读者可直接复核答案翻转指标而不必重跑实验。

  37. arXiv · cs.AI27

    PAGE 框架:用人工智能规模化研究美国漫画与日本漫画

    研究者提出 PAGE 框架,将 AI 变为漫画研究工具:把扫描件解析为画格、文本与书目记录,用视觉语言模型按编码手册标注页面,并以人工标注校验。该框架在 3,929 本美国漫画(1938–1956)和 87 卷日本漫画上完成三项研究,分别考察政治权力描绘、视觉形式与个人画家风格、两个漫画传统中的说话者分析。

  38. arXiv · cs.AI45

    SpatialASM:将主动空间心理模拟内化到视觉语言模型的空间推理中

    研究者提出 SpatialASM 框架,通过训练时空间模拟将主动空间心理模拟(ASM)能力内化到大型视觉语言模型(LVLM)中。该框架用 allocentric novel-view 生成器提供显式 ASM 轨迹和自动构建的视角转换任务两类监督,在七个空间理解基准上提升了四种 LVLM 骨干模型的推理准确率,同时保持原有通用视觉能力。

  39. arXiv · cs.AI45

    MC-EvoBench:审计 Minecraft 智能体中经验驱动的自我改进

    研究者提出 MC-EvoBench,一个用于审计 Minecraft 智能体经验驱动自我改进的受控基准,含 19 条注册进化链(12 条主评测链、7 条校准/探针链)及三个图对齐配对探针族。基准将任务表示为任务状态图,设置阶段级环境验证器,仅允许声明的 agent 工件跨越源-目标边界。结果显示 planner 支持变体与 controller 变体间存在持续的直接能力差距,而相关经验未带来稳定迁移,各置信区间均含零。

  40. arXiv · cs.CL18

    OpenPA:无需强制对齐的多粒度发音评估框架,通过混合转写适配统一评分

    研究者提出发音评估框架 OpenPA,利用 Whisper 的 cross-attention 机制联合预测词级和语句级发音分数,无需强制对齐。通过混合转写适配和自适应替换加权,单一模型可同时覆盖封闭与开放作答场景。仅在 speechocean762 上训练的 OpenPA 在域内封闭和模拟开放作答条件下取得评估系统中最强的整体表现,并在 MultiPA 上保持零样本性能,口腔癌语音的跨任务评测显示其潜在应用前景。