跳到正文
今天10月26日周一2 条
  1. GitHub · 3D 生成新仓库20

    RiboCouple 开源:将 RNA 骨架生成与序列设计相耦合

    RiboCouple 通过学习的残基对交互拓扑,将 RNA 骨架生成与序列设计耦合,可从生成的骨架几何推断概率化残基对状态,并将二元与分型对信号作为软注意力偏置传递给序列解码。项目提供无条件生成流水线(sample → rank → refold,支持 TM ≥ 0.45 且 RMSD ≤ 5.5 的联合有效性评估)、固定骨架逆折叠解码(greedy / argmax / mutual 规则)等脚本,模型权重以预印本形式发布,采用 Apache-2.0 许可证,并支持 gRNAde 外部对照实验。

10月25日周日
10月24日周六
  1. arXiv · cs.CL18

    指令微调的语言模型应被视为一种文体:指令-会话文体

    一篇 arXiv 论文提出,指令微调的语言模型实现了一种可称为“指令-会话文体”的新文体,由生成模型与人类的历史对话语言经神经网络递归沉淀而成。该文体通过指令微调、system prompt 以及使用特殊 token 和角色轮替结构的标记语言输入形式化,得以在应用中实例化。

  2. arXiv · cs.AI51

    SceneBloom 提出 Agent 式室内环境生成框架,服务具身学习

    论文提出 SceneBloom,一个结合视觉布局采样与契约引导 3D 编译的 Agent 式室内环境生成框架:分层采样器用扩散先验在功能区生成家具布局,编译器再做几何拟合与局部姿态校正。在五类房间中视觉质量与物理稳定性最高,且是对比方法中唯一没有网格碰撞和越界物体的方法;在这些场景中训练的目标导航策略在 held-out 真实扫描上的成功率高于用同等数量真实训练扫描训练的策略。代码已开源。

  3. arXiv · cs.AI33

    RobustRLlib:面向鲁棒强化学习算法的统一库与基准

    RobustRLlib 是一个面向鲁棒强化学习的算法库与基准,以统一接口集成 17 种代表性在线、离线与安全 RL 算法。其评测平台覆盖多样真实扰动及人形与视觉-语言-动作任务,并基于 273 种扰动配置给出当前鲁棒 RL 算法的能力地图,揭示仍存在显著鲁棒性缺口之处。项目以开源形式提供可复现、可扩展的代码库。

  4. arXiv · cs.AI51

    DexPort:面向灵巧手数据采集的手持技能接口

    研究团队发布 DexPort,一种面向高自由度灵巧手的便携式数据采集接口,采集与部署使用相同手部硬件以避免 embodiment 差异,无需机器人臂即可在非结构化环境采集演示。操作者只控制机械腕运动并选择或调整技能来协调手指,共采集超 2,500 条演示;行为克隆训练的 visuomotor 策略在 4 项任务上评测,使用记录的机器人命令替代状态使成功率从 11% 提升到 64%,加入真实环境数据后从 36% 提升到 78%。论文地址 https://arxiv.org/abs/2610.32969v1

  5. arXiv · cs.CL50

    Foyer 论文提出先测量再训练:typed decision models、逻辑回归与生成式 LLM 对比路由个人多语言收件箱

    Federico Lucca 发布 arXiv 论文(arXiv:2610.32955),介绍自托管个人收件箱智能体 Foyer 及一套在训练前获得真值的测量协议。基于 739 封真实意大利语/英语邮件,对比生产关键词规则、TF-IDF+逻辑回归基线、typed decision models(Tev1、Nimble、Nimble v4-max)与生成式 LLM(Qwen2.5-7B、Gemma 4 26B/31B),发现约 200 标签下逻辑回归在各字段准确率最高但从不预测最稀有的两类;准确率并非产品指标,最准确的系统组合成动作后最常忽略需行动的邮件(18%),对噪声概率设置成本阈值后可减半并成为最便宜的方案。

  6. arXiv · cs.AI29

    HAD-VLM:在医学视觉语言模型中保留数值连续性,超越离散 token

    研究者提出 HAD-VLM,一个混合自回归-扩散框架的医学视觉语言模型,将自回归文本生成与超声测量的连续数值预测结合在共享骨干中。在 EchoNet-LVH 四项超声心动图测量任务上,其平均绝对误差为 1.36、2.77、3.05 和 1.16 mm,较基于 Vicuna 的自回归基线降低 21.4-37.6%,并优于微调后的 Qwen3-VL。X 射线椎体测量的平均绝对误差从 11.4 像素降至 6.7 像素,医学问答性能保持不变。

  7. arXiv · cs.AI26

    LLM 平台的智能变现:广告与订阅设计研究

    一项研究分析垄断性 LLM 平台如何同时选择服务响应质量、广告强度和订阅价格。研究发现:广告与无广告方案并存时,部分广告支持的用户可获益但付费用户可能受损;适度的广告上限可最大化消费者剩余;更便宜的算力可提升质量、降低广告强度,但成本大幅下降时总广告收入可能反而上升。

  8. arXiv · cs.AI40

    Yalda Embedding:开源打造有竞争力的波斯语检索模型

    研究者基于 Qwen3-Embedding-0.6B 训练出 595.8M 参数的波斯语检索模型 Yalda Embedding,使用超过一百万查询-文档对。在 FaMTEB 八项波斯语检索任务上,其宏平均达 0.5488,为受评 0.6B 模型中最高,并在四项任务上胜过 Qwen3-Embedding-4B。借助 F2LLM-v2-8B 的关系型知识蒸馏,均值从 0.4813 提升至 0.5488,且模型权重、代码与数据集均已开源。

  9. arXiv · cs.CL24

    面向自然语言与结构化语料的自适应频率阈值 BPE 分词方法 AdaBPE

    研究者提出 AdaBPE(Adaptive Frequency Threshold Byte Pair Encoding),一种基于自适应频繁模式挖掘的分词方法,可根据候选 token 的长度和类型动态调整最小频率阈值。该方法能将词表容量高效分配给 LaTeX 等特定领域记法。在涵盖 LaTeX 与自然语言的五个数据集上,AdaBPE 在领域内容上提升了编码效率和下游语言模型性能,且不损害通用语言表现。

  10. arXiv · cs.AI21

    SemantEq:形式化语句的忠实双向等价判定方法

    研究者提出 SemantEq,用于检验自动形式化生成的 Lean 4 语句是否忠实于原数学陈述,要求双向转换只能经由允许的推理步骤链完成。其无模型搜索 SemantEq-Eval 在 ProofNetVerif 测试集上达到 100% 精确率和 65.6% 召回率(BEq+ 为 95.8% 和 61.8%);配套的 SemantEq-ProofAudit 审核模型证明时拒绝了全部 104 对非等价语句,并在最佳提示下把 407 对等价语句的召回率从 65.4% 提升至 81.1%。代码与数据已开源。

  11. arXiv · cs.AI50

    绿色代码还是高耗代码?评估基于 LLM 的迭代代码优化的能耗成本

    一项 arXiv 研究测量了 11 个开源模型在 EffiBench 全部 1,000 道题上的代码优化能耗,发现性能优化并不等于节能:44 个配置中有 42 个生成的代码比人类参考解更耗能,开销从 +4% 到 +886%。推理能耗在 0.79 至 8.68 MJ 之间,约相当于 250 至 2800 次 GPT-4.1 查询;限制最大输出 token 可最多降低 69% 能耗,MoE 架构比同等规模稠密模型更省电。该论文已被 ICSE 2027 接收。

  12. arXiv · cs.AI42

    NgramRL:用感知 rollout 的 N-gram 推测解码加速 RL 后训练中的结构化生成

    NgramRL 从同一提示词的近期 rollout 历史构建逐提示词 n-gram 草稿器,加速 RL 后训练中占比可超 70% 训练时间的 rollout 生成,无需辅助模型或常驻 GPU 草稿状态。在两种模型家族和三种推理、结构化生成任务上,warm-cache 下每次目标模型前向提交 3.60-7.77 个 token,比 SuffixDecoding 最高快 1.99 倍、比 prompt-lookup decoding 快 7.0 倍;Spider 上 prefetcher 以候选预算 16 覆盖 Qwen3-8B 96.6% 的结果,rollout 吞吐提升 1.38 倍。

  13. arXiv · cs.AI45

    基于 SVD 的大语言模型压缩新进展:逐层误差模型搜索方法 LEMS

    研究者提出 LEMS 与 KFAC-SVD,改进基于 SVD 的大语言模型压缩:LEMS 通过逐层误差代理结合 ILP 实现更有效的全局秩分配,KFAC-SVD 利用逐 token 统计缓解此前 Fisher 方法的秩塌缩。在 Mistral、Qwen3 和 Llama 3 模型族上,LEMS 带来最高 4.8 p.p. 的 zero-shot 准确率提升(可泛化到 70B 参数规模),KFAC-SVD 平均降低困惑度 15%。论文已被 ICML 2026 接收。

  14. arXiv · cs.AI45

    Qwen3-4B、Llama-3.2-3B、Gemma-3-4B 在 LLM 智能体观点模拟中的补集一致性研究

    一项 arXiv 研究测试了 LLM 智能体观点模拟中的补集一致性:若概率描述的是智能体立场,将命题改写为补集并把 p 替换为 1-p 后,两次报告之和应为 1。但在 Qwen3-4B、Llama-3.2-3B 和 Gemma-3-4B 三个小型开源模型上,Qwen 在 2,304 个智能体状态中的成对报告平均和为 1.18,在 AVeriTeC 的 48 条真实事实核查声明上同样超过 1,偏差是同义改写影响的二至十倍。将答案与其配对补集平均可恢复一致性并降低 Brier loss,但最后一轮仅在三个模型之一上优于原始表述中较好的一方。

  15. arXiv · cs.CL38

    J-Comm:基于 Jacobian 引导的 LLM 智能体间潜空间通信框架

    J-Comm 是一个无需训练的 LLM 智能体潜空间通信框架,包含 GEAR 几何共识重加权模块和 H+J 双通道通信接口,接收方无需共享 KV cache 或相同模型宽度即可利用发送方的中间计算。在 Qwen3-8B 到 Qwen3-4B 的通信中,J-Comm 在七个 benchmark 上取得最高平均分,包括 MATH500 94.80%、GPQA-Diamond 54.55%、AIME2024+2025 73.33%;相比 TextMAS 提升 1.29-8.59 个百分点,生成 token 减少 19.2-74.8%。

  16. arXiv · cs.AI17

    从活动世界的系统性表征到对话:面向强语言型 ASI 的五层通信架构

    一篇 arXiv 论文提出 ASI 参与下消息形成与理解的五层组织架构,核心论点是语言模型的 context 无法呈现话语生成的基础以供检验。五个层次区分活动世界的系统性表征、从中切出的具体情境、情境的叙述描述、消息的完整意义与文本;接收方通过协商一致的共同表征从缩略文本重构完整意义。理论依据包括 G. P. Shchedrovitskiy 的系统方法论、A. Korzybski 的结构微分与 I. A. Mel'chuk 的 Meaning-Text 理论。

  17. arXiv · cs.AI54

    TopKLoRA 可解释稀疏微调方法支持忠实回路发现

    作者提出 TopKLoRA,一种每次仅激活 k 个最大 adapter 潜变量的可解释 LoRA 变体,仅以下游损失训练。在 gemma-2-2b、Qwen2.5-1.5B 和 Qwen2.5-7B 的 sleeper-agent 后门案例中,识别并消融了实现后门所必需且充分的回路,稀疏回路比稠密 LoRA 基线小至多一个数量级,可在不牺牲指令跟随性能的情况下手术式移除恶意能力,并开放了代码。

    推荐理由:论文给出可解释稀疏微调方法,并在多个模型上定位并消融后门回路,稀疏回路比稠密 LoRA 小约一个数量级。

  18. arXiv · cs.AI13

    PoKER:用机器学习为空空导弹估算杀伤概率的新模型

    研究者提出 PoKER,一个面向超视距(BVR)空战的杀伤概率估算模型,用机器学习结合目标随机行为与导弹脱靶距离来预测击杀概率。不同于基于最大、最小和不可逃逸距离等静态区间的传统武器交战区(WEZ)模型,PoKER 还纳入弹头杀伤力、目标与射手姿态及具体交战条件,动态量化交战成功概率,可辅助 BVR 飞行员的作战决策。论文已发表于 The Journal of Defense Modeling and Simulation,代码已开源。

  19. arXiv · cs.AI29

    PICLE-PFN:首个支持动态治疗策略的纵向因果效应估计基础模型

    研究者提出 PICLE-PFN,首个面向纵向因果效应估计、支持动态治疗策略的基础模型。它基于从纵向结构因果模型采样的合成数据预训练,通过 in-context 历史决策示例表示目标策略,一次前向传播即可直接预测条件平均潜在结果,无需任务特定训练或超参数调优。在合成与半合成基准上,其 RMSE 具有竞争力,不确定性校准显著优于逐数据集单独训练的 SOTA 传统估计器,部署运行时间仅为其一小部分。

  20. arXiv · cs.AI48

    面向多智能体系统的企业级 RAG 重构:先组织再检索的知识层

    一篇 arXiv 论文提出面向多智能体系统的企业 RAG 知识层,在检索前先组织知识。其七智能体逆向工程流水线处理 18 个服务的 241 个代码库,通过工件级本体、稀疏元数据注册表和超图导航,让查询解析到工件标识符从而约束向量搜索,实现结构性消歧。该层一周内建成,支持根因分析并解决 100+ 生产缺陷,定位 35 次发布回归失败。

  21. Reddit · r/LocalLLaMA39

    论文提出 Continuum Attention:用连续积分替代离散 lookup 的注意力算子

    论文提出 Continuum Attention(CA),一种将离散 key/value 查找替换为连续分段线性记忆曲线积分的因果 Transformer 注意力算子,可通过不超过二阶的矩解析求梯度并支持并行 GPU 实现,保持二次序列复杂度。相比 softmax 与 focal attention,CA 分别降低 0.0200 和 0.0480 nats per byte 的验证负对数似然,在全部配对比较中获胜;独立验证切片上较最强 softmax 基线优势 0.0457 nats per byte(含 95% 置信区间)。

  22. Reddit · r/LocalLLaMA59

    论文提出 Virtual Head Attention:同时压缩 KV cache 并降低训练与 prefill FLOPs

    PaddlePaddle 团队在 arXiv 发布 Virtual Head Attention(VHA)论文,通过 Q Premix 和 Linear Postmix 两个线性操作同时改善 KV cache 大小、训练与 prefill FLOPs 和模型质量,推理时可折叠进投影层化为标准 GQA-2 架构。在 4K 上下文 50B token 预训练的四个规模上均超过 GQA 基线(+0.05% 至 +0.81%),KV cache 相比 GQA-8 减少 4 倍;在 30B-A3B MoE 模型上比 MLA 和 GQA-4 分别高 +0.70% 和 +2.60%,长上下文 RULER 平均分 84.4 对 GQA 的 73.0。

    推荐理由:论文给出 VHA 在多个规模和 MoE 模型上对 GQA、MLA 的对比数据,KV cache 压缩和 FLOPs 降幅都有具体数字可查。

10月23日周五
  1. arXiv · cs.CL31

    KrishokTech:带显式授权控制的孟加拉语农业咨询系统

    KrishokTech 是一个围绕显式授权边界构建的孟加拉语农业咨询系统。在 200 条农户问题和 400 条压力问题上,该系统将跨作物检索违规率从 36.5% 降至 0%,文本-图像作物不匹配检测捕获 453/454 个冲突,验证器捕获 118 个插入剂量错误中的 114 个。农业知识存于可独立更新的外部证据索引,浏览器端视觉与本地检索降低了对网络的依赖。

  2. arXiv · cs.AI44

    HarnessMM:通过递归自我改进提升 Harness token 效率

    论文提出 HarnessMM,通过受保护的决策复用与递归自我改进(RSI)降低 Agent harness 的 token 消耗,actor 权重保持不变。在 HumanEval 上,Codex 成功率保持 90.82%,Tokens/task(k)从 66.72 降至 47.02(节省 29.54%);DeepSeek Harness 成功率从 71.43% 升至 85.71%,Tokens/task(k)从 96.28 降至 11.62(节省 87.93%)。MBPP 消融显示成本比单次使用图低 26.91%,比保留回调低 19.52%。

  3. arXiv · cs.CL49

    Frontier-OPD:发现智能体能力边界并引导其突破

    论文提出 Frontier-OPD,一种面向多轮智能体的在线策略蒸馏方法,通过学生学习前沿定位既有挑战性又可在短暂教师引导后自主延续的决策情境。方法将经验组织为共享状态轨迹图,用轨迹平衡聚合识别干预候选并过滤教师引导。在 ALFWorld、WebShop 和 ScienceWorld 上的实验显示,其平均自主性能高于所对比的蒸馏基线;在某个 ALFWorld 计时设置下,额外采集成本被更快达到目标成功率所抵消。

  4. arXiv · cs.AI26

    学习优化器调度中的乘法与加法状态耦合研究

    研究通过反向传播展开的经典求解器,学习 MAX-CUT 连续罚松弛的调度。状态自适应的双线性(乘法)调度可分布外泛化,在 15 个种子上优于未训练基线(t=4.1);相同输入输出头的加法消融在分布内与双线性无统计差异,但分布外表现差于自身基线(t=-11.7)。该差异在 30 轮 weight-decay 扫描中持续存在,表明求解器状态进入调度的方式(而非状态自适应性本身)是与分布外迁移相关的架构区别。

  5. arXiv · cs.CL15

    ParaTaxe:一套用于处理和发布多平行语料库的开源工具

    研究者推出开源工具套件 ParaTaxe,用于处理和发布多平行语料库,解决学术语料因维护或经费不足而失于线的难题。该套件包括基于多语言嵌入向量的 AIlign 对齐器、用于转换与对齐语料的 Python 处理流水线、管理平行语料集合的 ParaTaxe 网页界面,以及基于 TEI-Publisher 构建的语料浏览界面。工具由 ACR Grimm Tradalign 与 ParaTaxe 项目开发,成果将发表于 JADT 2026 会议。

  6. arXiv · cs.AI36

    语言模型智能体构建医疗软件采用知识的引用锚定图谱

    研究者提出一条从公开网页构建医院软件客户与集成关系知识图谱的流水线,要求每条边都必须有源页面的逐字引用支持。流水线对 61 个供应商达到 0.94 precision 和 0.71 recall;基于五个模型调用对九项标准投票构建的置信度分数在同等 recall 下达到 0.90 precision。该方法用有界的模型调用、字符串匹配证据和投票机制应对长上下文退化与运行间方差。

  7. arXiv · cs.AI38

    AI 对齐助力数字民主:如何抵御 LLM 偏见以实现更公平的选民代表

    一项 arXiv 研究考察 LLM 模拟选民的群体偏差:基于三届美国总统选举数据,对比一个闭源与一个开源模型在不同人口统计特征上的投票还原准确度。移除选民画像中的性别可将模型最大群体误差降低 22-42%,移除教育降低 64%,而移除自我报告的种族反而使平均群体误差增加逾 40%,且均不损失整体准确度;重复查询、公平性指令等常见对齐策略无法缩小这些误差,甚至可能使其翻倍。

  8. arXiv · cs.AI51

    arXiv 论文提出 On-Policy Self-Training:无需数据的大语言模型自我改进方法

    arXiv 论文 2610.32770 将 on-policy 自蒸馏重构为自训练框架,仅凭粗粒度高层主题描述,由模型自行合成问题与特权推理轨迹,不依赖任何人工提示或答案。实验覆盖文本与多模态领域,模型在标准语言基准和视觉问答上取得一致的自我提升,且未自训练领域能力得以保留。

  9. arXiv · cs.AI15

    车联网联邦学习中的干净标签投毒攻防博弈研究

    该 arXiv 论文研究车联网联邦学习中干净标签投毒攻击与防御的交互。攻击方在特征空间将良性样本扰动至恶意特征极端,在不改变标签的情况下降低类别可分性;防御方提出特征一致性重标注方法检测并重标可疑样本。博弈论框架分析表明,攻击随被控节点数有效扩展,而该防御能在不损害干净准确率的情况下保持低攻击成功率。

  10. arXiv · cs.AI45

    ActionRAG:面向 LLM 智能体长期记忆的证据细化图扩散方法

    论文提出 ActionRAG,一种结合谨慎索引与查询时图回评的图记忆架构,通过双通道实体与三元组检索及查询条件扩散细化评分,为 LLM 智能体长期记忆恢复精确且一致的证据。在 MemoryAgentBench 上,ActionRAG 平均准确率达 55.1,比最强检索式记忆基线高 5.4 分;平均合成成本低于 $0.001 每次查询,检索侧 p99 分项之和为 440.7 ms。

  11. arXiv · cs.AI27

    AWARE:面向机器人动力学预测与内省的自适应世界模型异常识别框架

    AWARE 是一个仅需外部摄像头监控即可进行异常检测的世界模型框架,通过系统动力学估计与状态预测识别异常,适用于缺乏车载传感器或禁止接入的旧有硬件。在 240 条真实机器人吊车轨迹(含载荷碰撞与电机退化)上评测,其异常分类效果比较强基线提升 26%,且动力学参数可解码定位故障源,电机退化定位准确率达 88%。

  12. arXiv · cs.AI22

    Agentic Hazard Mapper:用 AI 智能体模拟专家制图流程生成灾害风险地图

    研究者提出 Agentic Hazard Mapper,一个多智能体系统,通过模拟专业制图工作流程与迭代设计权衡,自动化生成适配不同数据、地点和灾害情境的灾害风险地图。用户研究与专家访谈显示,系统生成的地图提升了参与者的空间理解与疏散规划表现,降低了工作量感知和任务完成时间,且总体上比市政地图更受青睐。