LLMSeg:免训练的 B 样条文本提示图像分割
研究者提出 LLMSeg,一种免训练管线,将支持视觉的多模态大语言模型直接变成文本提示图像分割器,无需分割头、mask 解码器或专门训练。方法将分割分解为 detect、segment、refine 三个 LLM 驱动阶段,用闭合周期 B 样条勾勒边界并迭代修正。基于现成的 Gemini-3.7-Flash,LLMSeg 在 ReasonSeg val 上达到 71.5 cIoU,与专门的 SAM 3 相当甚至更优,代码已开源。
新闻、仓库与研究,按时间排列。
研究者提出 LLMSeg,一种免训练管线,将支持视觉的多模态大语言模型直接变成文本提示图像分割器,无需分割头、mask 解码器或专门训练。方法将分割分解为 detect、segment、refine 三个 LLM 驱动阶段,用闭合周期 B 样条勾勒边界并迭代修正。基于现成的 Gemini-3.7-Flash,LLMSeg 在 ReasonSeg val 上达到 71.5 cIoU,与专门的 SAM 3 相当甚至更优,代码已开源。
新求解器 Sanko 在位置超劫(PSK)规则下实现可靠证明迁移,恢复了置换表、死活识别与安全剪枝三大能力。它用六个线程 16 分钟证明 5x5 围棋(此前方法需 5.25 小时),并首次给出二十三个局面的 PSK 价值,其中十一个此前在任何规则下均未解决。超劫改变博弈价值:4x7 在基本劫规则下是全盘获胜,在 PSK 下仅值 12 点。
MERP 框架通过将多模态序列映射到固定大小的潜在库进行推理,提升模态缺失时的情感识别鲁棒性。在 20% 测试期随机模态缺失下,它在 CMU-MOSEI 和 M3ED 上分别取得 0.563 和 0.780 micro-F1;在 CMU-MOSEI 仅音频的严重场景中保留 0.473 micro-F1,远超 LDDU 的 0.022。该方法无需训练时的缺失模态样本,代码已开源。
一项 arXiv 研究发现,世界模型用于规划时的回报误差主要集中在“事件转移”步:在通过可靠性检验的 44 个 Atari-100k 模型-收集对中,修复事件转移可消除中位数 70% 的回报误差,39 个样本中事件补丁优于随机补丁(sign test p=1.4 x 10^{-7},中位增益 +44 个百分点),而按 MSE、SSIM 或 LPIPS 选取的修复效果不如随机。事件步的像素渲染质量与其他步相当(中位像素误差比 0.85),说明视觉保真度不能代表回报正确性。剩余误差呈结构化分布,且事件补丁可改进规划排序。
研究者提出 RegoBench——首个包含 1,159 个真实缺陷的 Rego 策略自动化基准,以及反馈引导的多智能体框架 RegoMender。该框架在 RegoBench 上取得 82.9% 的语法修复成功率和 77.9% 的语义修复成功率,超越最强基线 13.4%,并在 132 个真实 CVE 漏洞上达到 86.4% 修复率。
研究者提出记忆整合框架 PreCoMem,将用户记忆表示为置信加权信念,用有效惊异度结合语义偏离与矛盾证据驱动三档确定性更新。该方法在 LoCoMo、LongMemEval-S 和 PersonaMem-v2 上取得一致最优准确率,新基准 DiMoBench 显示其能适应非平稳信念漂移而不对噪声过度反应,论文已被 NeurIPS 2026 接收,代码已开源。
推荐理由:论文把记忆更新拆成置信加权信念加双阈值门控,区分噪声与真实漂移的思路可迁移到自己的长期对话系统。
一项 arXiv 研究提出基于正向-反向偏微分方程的生成建模框架 SBNL(Schrödinger Bridge NonLinear),将平均场博弈与非线性 Schrödinger 系统的联系重新诠释为生成建模问题。该框架通过基于分支扩散的模拟算法求解,具备高并行性、可扩展到高维,并在 MNIST 和 FFHQ 人脸图像合成任务上完成验证,同时统一了 score-based 生成建模与扩散模型。
RubricOpt 是一个让策略模型在偏好优化中自修订语义评分标准(rubric)的框架:模型诊断自身无评分标准时的输出,修订未覆盖重复失败的条款,并通过确定性门控校验证据引用与语义锚点。修订后的 rubric 在训练中引导 DPO,评估时移除。在能力与开放式生成基准上,rubric 条件化优于普通 DPO,但收益与回退因模型和数据集而异,修订的增量效果喜忧参半。
研究者对《Order of the Sinking Star》中一个 11×11 棋盘的晶体交换谜题给出最短解证明:玩家指令可将自身与同行或同列最近的 crystal 交换,十六个 crystal 全部就位时双门开启。论文给出显式 93 条指令解法,并用代价受限的广度优先搜索排除一切更短解,计算保留 605,349,215 个占用集合和 1,863,925,136 个状态,构成一项计算机辅助证明,并附源代码与执行日志。
一篇 arXiv 论文提出 Diverse Parallel Thinking(DPT),一种面向大语言模型并行思考的强化学习方法,通过惩罚并行思考路径的前缀相似度来奖励模型发展不同的推理策略,缓解 RL 并行思考中推理路径模式坍缩导致的同质化问题。在多个推理 benchmark 上的实验显示,DPT 超越以往并行思考方法,达到 SOTA,代码已开源。
研究者提出 FairAMO,一种冻结候选预测结果的控制评估协议,用于区分时间序列预测中智能体模型编排(AMO)的真实贡献。在 GIFT-Eval 上的实验显示,AMO 确实提升精度,但增益受候选 TSFM 限制:最佳编排者相对最佳单一 TSFM 的 MASE 仅降低不到 6%,增益主要来自候选模型互补性而非数量,增加成员收益递减,冗余成员甚至可抹去增益,历史证据的价值也很快饱和。该工作已被 NeurIPS 2026 FMTS Workshop 接收。
一项基于 MIMIC-IV 的实证研究探讨 JEPA(联合嵌入预测架构)能否用于纵向电子健康记录(EHR)的序列表示学习。结果显示,三种 JEPA 形式均能稳定训练、不出现表示坍塌,但始终不及标准 MLM 预训练;增大目标规模会提高预测误差,但缩小目标规模也无法恢复下游性能,表明稳定的潜空间预测本身不足以支撑有竞争力的 EHR 表示学习。
一项研究在 MIMIC-IV 数据集上以相同的 tokenization、上下文长度和模型容量对比块掩码扩散(BD)与自回归模型在纵向 EHR 建模中的表现。B=8 配置实现约 1.43× 更快的推理速度,其表示的线性探针在临床预测任务上与 AR 性能接近。结果表明块扩散是计算上更具吸引力的可行方案,但生成质量仍低于 AR。
一项 arXiv 研究提出针对 DPO 计算图的随机剪枝统一框架,可独立对评分的响应位置、执行的响应前缀和反向传播的偏好分支进行采样,从而省略训练各阶段的计算。分析刻画了位置与序列剪枝引起的目标变化,并用逆概率加权得到条件无偏的单分支梯度估计器。实验显示分支剪枝相比拼接式 DPO 基线获得 1.426x 步时加速,训练时间较原版 DPO 降低约 30%,均值准确率略降。
一项 NeurIPS 2026 录用的研究提出“反身性矩阵”$\Gamma$,用于刻画多智能体操演性预测中重复再训练的稳定性。当矩阵谱半径小于 1 时,再训练几何收敛到唯一稳定均衡;越过阈值后,局部信息学习者的期望累计超额损失随时间线性增长。该阈值以上下界刻画了相变行为,并将先前单智能体的标量阈值作为特例恢复。
一项 arXiv 研究发现,大型音频-语言模型(LALMs)难以定位音乐中被描述的时刻,但这并非时间信息缺失,而是 prompting 提取方式的瓶颈。研究基于 Slakh2100 stem 激活构建配对查询探针,对同一段音频同时施加状态查询和变化查询,并改变模型可见的前置音频量。结果显示,状态查询无需上下文即高于基线,变化查询在多数短段模型中随前置上下文改善,而 30s padded 编码器无类似恢复;prompting 失败低估了模型可验证的内容,但未低估其可定位的内容。
研究者提出一套边缘可部署的蜂箱巢框检测流程:用目标检测器识别具生物学意义的巢房类别,将检测结果蒸馏为结构化事实模式,再转为受约束的事实文本并触发知识库,生成可解释、可执行的蜂群检查报告。系统基于开源 FAIRHiveFrames-1K 数据集构建,并额外发布将图像事实与文本解释互相对应的 FAIRHiveText-1K 数据集,便于后续基于 LLM 的研究。
研究者提出对比归因拓扑搜索方法 CATS,在固定专家智能体超图中通过 LLM 归因器为各智能体分配贡献度,剪除弱边和弱智能体,搜索紧凑团队。使用小开源模型,CATS 在 BigCodeBench 上平均准确率比仅用分数的启发式搜索高 5.3 个百分点,部署 token 减少 54%;在 HotpotQA 提示词投毒测试中三次运行均排除全部被投毒的智能体。
研究者提出 FrameBench-HPS 基准,用覆盖医疗、金融、教育/职业、法律/消费者权益四大领域的 240 个高风险场景构建 2,880 条提示词,测试七个 LLM 在相同概率以收益或损失框架表述时的建议一致性。结果显示 32.4% 的完整组别中推荐类别因框架而改变,且该效应在对话式改写下依然存在。概率规范化处理能大幅降低框架敏感性。
ExpEvolve 提出在 AlphaEvolve 类进化编码智能体中注入“想法级”抽取与控制,从程序中发现解释得分差异的高层因素,并给出其提升样本效率的理论条件。在 11 个开放式数学任务上,ExpEvolve 将最终性能和样本效率最高提升至 5.0x,改进还可迁移到 4 个其他 LLM 及 MLS-Bench 的 6 个机器学习任务。
一项 arXiv 研究显示,在 Director Task 中,先询问模型“导演能看到哪些方块”再让它执行“选最大方块”的指令,会使 GPT 六个模型选择被遮挡方块的比例上升 12 至 88 个百分点,Qwen3.8-27B 上升 17 个百分点,尽管模型大多能正确报告导演视角。原因在于该问题改变了模型对请求的解读方式;当提示词明确说明导演所知所指时,正确报告与误选隐藏方块同时出现的比例不足 1%。作者提出仅差这一问的成对提示词设计,作为任何视角采纳基准可用的无问题基线。
研究者提出 OSynth,一个模拟组织的大规模合成数据集,包含 570 小时会议音频、相关文档及潜在真实状态。人类评审基于 150-300 词片段,区分 OSynth 会议与真实会议转录的准确率仅 56%。测试显示,引入日历、以往会议等额外上下文可使多个 LLM 在实体敏感维度显著提升。
Parlant 4.0 引入轻量级第一阶段的 Signals and Queries(S&Q)相关性过滤器,可在下游评估前剔除至少 30% 候选策略并保持高召回,且每轮无需 LLM 调用。在覆盖 254 个 τ²-bench 对话前缀和 36 条航空公司策略的 9,144 个 LLM-judge 相关性标签上,S&Q 在所有召回水平下的精度均高于 top-K 和余弦阈值检索。该方法为面向客户的 Agent 降低下游评估成本提供了实用的第一级过滤方案。
研究者提出 OACap(Observation-Adaptive Video Captioner),一个以描述为中心的智能体,将缺失信息转化为定向观察请求,借助时空工具获取证据并迭代校验和修订描述,在通用视频理解基准上使用固定纯文本读取器即可持续提升性能。论文还发布 FSCap-Bench 诊断描述保留的信息,其 CSFS 分数在 93.0-98.3% 的有效描述对上对四种受控扰动响应符合预期,CSRS 分数则通过 video-caption-video-caption 往返度量语义保留度。
一项 arXiv 研究分析两个 LLM 在多轮对话中讨论主观议题时如何达成一致。用线性分类器读取单次对话内部激活难以可靠预测外部一致性,但跨对话聚合后发现内部一致性表征通过幂律映射与马尔可夫过程耦合。研究还发现模型改变立场时,外部表达先于内部表征同步变化。
Policy Central 是一套已部署系统,用于检测警局书面政策条款之间的冲突、冗余、相似或差异关系。它包含两种架构:Retrieve-Judge 作为低成本全库健康信号,Screen-Confirm 用于审计人员所选文档的穷尽式筛查。在来自某部门约 84 份政策文档的 302 对 benchmark 上,Screen-Confirm 判断环节聚合 recall 达 0.795,Conflict 达 0.885;但难点在于找出待比对段落,Retrieve-Judge 组合 recall 仅 0.457,Screen-Confirm 恢复至 0.472(Conflict 0.615),能在数分钟内以低成本扫描近 20,000 个段落并按需重跑。
ChronoSynth 是一个记忆增强、约束感知的时序知识图谱问题生成框架,先将问题意图显式表示为 Temporal Intent State,再从索引模式库中检索并适配类型化问题模板,验证不一致时通过反馈进行修订。该方法在 CRONQUESTIONS 和 MultiTQ 上取得 SOTA 生成性能,消融实验验证了各组件的贡献。
arXiv 论文将 Transformer MLP 的每个隐通道分解为决定响应时机的 reader 和决定写回残差流内容的 writer,利用更新的 Jacobian 为每个通道计算带符号的配对坐标。测量显示各 block 都存在小的强耦合通道核心,且几乎全部呈对立方向——writer 朝 reader 响应方向的反方向写入,这一模式从从头训练的小模型到已发布 checkpoint 都成立,训练早期几步内即定型。翻转对立 writer 会使输出偏向常见 token,被置换到其他 reader 的 writer 会重新适配该 reader。
Ju-Chun Ko 在 arXiv 发表论文(arXiv:2610.29342),测试 abliteration(去审查)模型是否同时消除政治审查相关偏差。研究用 NVIDIA Nemotron 3.5 Bolt 74B-A9B 与 Qwen3.8-Flash-Next 及各自的社区 abliteration 版本,以繁体中文、简体中文和英文各回答 22 组陈述对和 27 个开放问题。结果显示脚本影响远大于 abliteration:原版 Bolt 在繁中 Index S 得分 +0.58、英文 +0.57、简中仅 +0.05,且以 0.91 的概率在简中肯定台湾属于 PRC、繁中仅 0.06;abliteration 最多改变 0.06。
推荐理由:论文用配对模型实测 abliteration 前后偏差,显示去审查不等于去立场偏差,并给出脚本切换与立场方向的量化证据。
一项 arXiv 研究将 LLM mid-training(MT)从预训练(PT)数据的完全切换视为数据混合调度的一种特例,发现在固定总算力和 MT token 预算下,哪种数据调度最优取决于学习率(LR)调度:LR 持续衰减时提前引入并混合 MT 数据可降低最终 MT loss,而恒定 LR 下结论相反。消融实验表明,仅在 MT 数据进入训练后再衰减 LR 效果更好,作者还提出了解释该现象的理论模型。
B-CARE(Blind Classwise Assessment of Relative Evidence for Stance Error Ranking)是一种预测盲的错误排序框架,用固定 LLM 验证器对各候选立场标签赋证据分,对比最强替代类与预测类的证据来构建风险分。该框架在 4 个立场基准和 3 个异构基座 LLM 上的 12 个数据集-模型组合、5,206 条测试实例中评测,取得平均 AUROC 0.735、平均 AUPRC 0.524,并在风险最高的 20% 预测中捕获 41.06% 的错误;其证据信号可跨模型复用,与置信度基线互补。
一种闭环双参考引导方法将原始参考音与通过语音转换(VC)构建的可复用母语锚音配对,减少零样本跨语言语音克隆中的口音迁移。在 20 名法语留出说话人上,λ*=0.33 设置使残余法语 LID 质量降低 73%,ECAPA 相似度仅损失 0.042,平均 WER 低至 0.009;西班牙语 LID 质量降低 56% 且无需重新调参。在线合成 RTF 约 0.59,比 TTS→VC 级联的 0.80 低约 26%。
arXiv 论文(arXiv:2610.29352)通过五个模型规模、百余种 token 预算配置,建立了长上下文性能与模型规模、短上下文及 LCCP token 预算之间的经验加性幂律,可外推到未训练的模型规模。论文提出 Constant-Last4 观测协议,稳定预测了 1.22B 参数模型在约 100B LCCP token 上的性能轨迹;128K 上下文扩展和监督微调后增益仍保持,在评测范围内未见饱和,支持继续扩展 LCCP 而非提前停止。
推荐理由:论文给出长上下文持续预训练收益随 token 预算扩展的经验缩放律,并用 1.22B 模型轨迹验证了可预测性与增益持续性。
研究者提出 Memory-Centric Continual Learning(MCCL),主张应依据记忆能否改善智能体未来行为而非仅凭检索效果来评估记忆。框架包含三部分:按存储基底、记忆资产和管理策略划分的三轴分类法与内外双循环生命周期;测量干扰下保持、变化适应和任务迁移的评估协议;以及刻画性能随经验、存储和计算预算扩展的记忆扩展框架,覆盖非参数与参数记忆,推动智能体记忆从被动检索转向持续学习。
论文提出 OnQ,一种结合 on-policy 蒸馏与逐候选 Dynamic KL 的低比特恢复管线,用量化学生模型自身生成的前缀接受全精度教师监督。在 Qwen3-1.7B、4B 和 8B 的 2 与 3-bit 精度上,OnQ 取得九个基准的最高平均分;2-bit 下在每个模型规模的每个基准都超过所有基线,Qwen3-8B 平均比最强基线提升 10.26 分,且响应更短、截断和重复错误更少。论文链接:https://arxiv.org/abs/2610.29378v1
推荐理由:论文指出现有量化感知训练的固定响应监督缺陷,并用自身前缀上的蒸馏与动态 KL 给出可复现的低比特恢复方案。
arXiv 论文 ECHO 提出偏好优化的失败源于共同模态偏移,即隐状态中跨 token 位置、提示词和 chosen/rejected 响应共享的方向性偏移,相对排序损失几乎察觉不到其累积;该偏移投影到输出层形成词表井,使单一 token 概率主导解码并引发生成坍缩。在所研究的 per-token 排序损失下,同样的坍缩出现在 17 个 base 模型谱系中的 14 个,且注入该偏移可复现坍缩、屏蔽该成分可预防;教科书式 DPO 偏移较弱,而全参数 SimPO 在 Llama-2 和 Llama-3.1 上均驱动其坍缩。17 次 UltraFeedback 运行显示排名指标越好,两个公开奖励模型反而越少偏好其样本,揭示了标准排序指标的盲区。
推荐理由:论文用注入和消融实验把偏好优化中的共同模态偏移与词表坍缩因果联系起来,并给出可在坍缩前预警的表征层信号。
研究者提出 Trajectory-based Disclosure Evaluation(TraDE)评估框架,基于社会渗透理论,通过预定义披露轨迹评估先前披露历史如何影响模型在当前披露深度相同下的回复行为。实验表明多个模型对披露的回应取决于此前轨迹,尤其体现在是否接受或挑战用户框架,且差异随深度披露的累积暴露产生并持续数轮。相比人类支持者(ESConv 语料),模型最明显偏离发生在用户减少披露而非袒露心声时。
研究者提出 CCG Diffusion,一种无需训练的文生图控制方法,利用组合范畴语法(CCG)通过提示词改写和注意力引导控制属性绑定、空间关系与数量,并可固定介词词类来消解介词短语挂靠歧义。在 Stable Diffusion 和 Sana 两种骨干模型上,该方法在属性绑定和 2D 空间关系上取得对比方法中的最高分,在 PP 歧义消解上显著超越所有对比方法。
一项 arXiv 研究提出用 KAN(Kolmogorov Arnold Networks)启发的可学习非线性投影增强低秩分解,突破嵌入层压缩中线性瓶颈的表达能力限制。方法在 Skip-gram 框架下于 Word Analogy 和 Semantic Similarity 基准上与标准低秩基线在相同参数预算下对比,并结合预训练未压缩嵌入层的初始化策略及蒸馏变体。结果表明非线性投影能在固定维度下生成更忠实的压缩嵌入。
BIRD-RL 是一个四阶段智能体强化学习课程,配合 Trajectory-scoped Persistent Execution Infrastructure 实现数据库副本安全复用并保持轨迹隔离,空间效率提升 12.8x,无需 Kubernetes 即可扩展。在 BIRD-CRITIC-SQLite 基准上,7B 和 14B 模型分别取得 44.40% 和 48.00% 的成功率,可与 Claude-Opus-4.6 Agent(48.20%)竞争。该框架还训练出兼具 SQL 调试与生成能力的统一小模型。