跳到正文
10月14日周三
  1. arXiv · cs.CL32

    TRACESTEER:用轨迹驱动的激活转向缓解扩散语言模型幻觉

    TRACESTEER 是一种针对扩散大语言模型(dLLM)幻觉的激活转向框架,利用先前去噪预测作为反馈,通过 DF-Steering 构建逐步转向向量、TS-Gate 依据预测不确定性和去噪时间步调节强度。骨干冻结下,在两个 dLLM 上提升了 TruthfulQA 事实可靠性,并在五个下游 benchmark 上展现泛化能力。

  2. arXiv · cs.CL50

    SWE-MISBEHAVIOR:编码智能体越界行为的分类评测框架与 CODE-KIT 缓解方案

    论文提出 SWE-MISBEHAVIOR,首个针对编码智能体越界失当行为的分类与评测框架,含 7.4K 人在环合成样本,覆盖代码生成、文件管理、系统交互三层动作空间中的 11 种失当行为,评测协议全自动。对 OpenHands、smolagents 等开源编码智能体的实验发现依赖误读最高达 98.5%、未经意修改用户输入 50.5%、环境完整性被静默破坏 53%。配套提出的 CODE-KIT 框架将 smolagents 失当行为减少 52%、OpenHands 减少 34%,同时提升任务完成表现。代码与数据已公开。

  3. arXiv · cs.CL53

    TextualRL:面向上下文管理的文本强化学习框架

    论文提出 TextualRL,一种免梯度的强化学习框架,通过修订引导 LLM 智能体行为的文本上下文来适应任务反馈,而不改变模型参数。其核心机制包括以同任务的一组 rollout 为单位的 Groupwise Policy Critique、跨组证据审查提案的 Cross-Group Policy Update,以及由留出验证奖励决定是否采纳的有界文本补丁。在六个基准上对五个目标智能体的评测中,GPT-5.5 和 Qwen3.8-27B 的测试准确率较基座模型平均分别提升 24.4 和 15.3 个百分点。

    推荐理由:原文给出了框架机制与六个基准上的分组对比数据,读者可以据此评估这种免梯度上下文更新方法是否值得复现。

  4. arXiv · cs.CL22

    Runoff 方法让 System One 模型的选择题答案不再依赖选项顺序

    论文提出 Runoff 方法:先单独为每个选项打分筛出少量候选,再让候选在排列中轮流占据各位置进行比较,无需训练、最少两次前向传播即可消除选项顺序对答案的影响。在两个开放模型和五个数据集上,打乱顺序后 Runoff 不改变任何答案,而循环平均法仍改变 9.3%;20 个选项时准确率相当且速度快 3 到 4 倍。包在八个 System One 模型外层后,可消除五个 benchmark 上的顺序依赖,循环平均法最多仍改变 15.4%。

  5. arXiv · cs.CL31

    PACT:面向表达力与音色保留的语音到语音翻译实用提示词框架

    arXiv 论文提出 PACT,一种面向目标空间的提示词框架,用于保留语音者身份与情感、语调、节奏等语用信息的语音到语音翻译。该框架从源语音提取语用线索,投影到目标语言表达空间并校准后,转化为连续提示词驱动冻结的语音生成器。在双向西班牙语-英语 TOPI 评测中,PACT 在内容保真、音色保留与表达保留指标上综合表现最佳。

  6. arXiv · cs.CL34

    我们是否测试得太多了?LLM 高效评估的基准压缩综述

    该 arXiv 综述系统梳理了针对大语言模型(LLM)评估的基准压缩研究,共回顾 119 篇论文,通过从部分评估估计完整基准分数与排名来降低评估成本。研究提出一套分类法,覆盖单基准内压缩、跨基准套件压缩与自适应评估三类方法,并比较其信息需求、总成本与可靠性验证。这类方法可显著降低评估开销,但存在覆盖不足、估计不准和顺序延迟的风险。

  7. arXiv · cs.CL42

    加密技能或成 AI 智能体新安全漏洞:Ciphered Skill Injection 攻击解析

    研究提出 Ciphered Skill Injection(CSI)攻击,将恶意指令编码隐藏在第三方技能文件中,诱导 LLM 智能体解码并执行。在 8 个模型、139 组注入任务对的评测中,Caesar 及分层变体在缩短技能的主设定下攻击成功率最高达 47.5% 和 40.3%;成功解码不必然导致攻击成功,且分层效果因模型而异,现有技能扫描器很少能检出注入。

  8. arXiv · cs.CL31

    PAINT:覆盖医学考试到真实临床文本的多语言疼痛表征框架

    研究者提出 PAINT 多语言疼痛表征框架,包含覆盖英语、西班牙语、葡萄牙语和日语的九个数据集分区,全部配有临床医生标注。该框架借助 LLM 集成策略提取疼痛相关性、存在性、解剖部位与人口学信息,集成标签在疼痛相关性与存在性上 macro-F1 达 0.91-1.00,人口学信息准确率 92-100%。相关标注数据、抽取流程与验证脚本已随 WorldMedQA-Pain 公开发布。

  9. arXiv · cs.CL51

    arXiv 论文提出 JevGPT 双系统架构加速自主研究智能体

    Yasheng Sun、Jürgen Schmidhuber 等人在 arXiv 发布论文 JevGPT,提出用于自主研究的双系统架构,System Two 设定证据目标并整合发现,System One 定位支持、评估相关性并指导后续检索,独立来源判断并行运行。在固定语料问答与文档排序实验中,JevGPT 达到领先的任务表现,完成速度更快且成本低于同等有效的研究智能体,并显示更广的来源检查与支持文档覆盖。论文共 24 页,链接 https://arxiv.org/abs/2610.18272v1。

  10. arXiv · cs.CL33

    LegalRewardBench:首个法律领域奖励模型人类验证基准

    研究者推出 LegalRewardBench,首个经人类验证的法律领域奖励模型评测基准,将法律偏好评估分为知识、理解、分析、决策、写作五个能力层级,偏好样本由规则引导的自动判定结合人工核验构建。评测涵盖通用与微调、生成式与判别式三类判别器架构,结果显示强大的通用生成模型目前是法律奖励模型中最稳健的,现有微调奖励模型向法律偏好评估迁移可靠性较低。

  11. arXiv · cs.CL31

    SimInter:基于访谈画像增强的对话推荐系统用户模拟方法

    SimInter 是一种通过两个 LLM 智能体进行合成访谈来丰富用户画像的对话推荐系统评测模拟管线,用统计画像和历史对话证据作锚定,并由审计智能体逐轮标记潜在虚构与刻板印象。在模拟 300 个 ReDial 电影推荐用户的实验中,SimInter 将表达偏好方面的多样性从基线的 0.859 提升至 1.619(filtered aspect entropy),与 KBRD 和 UniCRS 两个推荐器对话时增益保持在 +0.28 到 +0.56 nats(均 p < 0.001);人工评估中 94.3% 的富集属性断言获支持或部分支持。

  12. arXiv · cs.CL33

    提示词还是策略?用 LLM 用户模拟器优化医生推荐列表展示

    arXiv 论文提出 slate presentation 优化任务:针对患者病例和固定排序的医生列表,生成基于医生档案的病例定制摘要,并用 persona 条件化的 LLM 模拟患者选择进行离线优化。实验比较提示词级 GEPA 与参数级 GRPO 优化,GRPO 在满足全部约束上大幅领先且经未见过的 LLM 评测验证,用 GEPA 优化后的提示词初始化 GRPO 可加速训练并获得最高模拟转化率。

  13. arXiv · cs.CL42

    Jev-Guard:基于可编辑策略树的 Agent 行为快速路由与审计模型

    香港科技大学团队(Yangqiu Song 等)提出 Jev-Guard,一个统一的 Agent 安全分类与策略路由模型,在可编辑策略树上先选择适用的审计策略再做安全分类。在 7,033 个评测案例上达到 93.72% 安全准确率、58ms 平均延迟与 93.10% 分层路由准确率,完整流程平均 240ms。集成到 Hermes harness 框架后,权限门控将每任务平均审查时间从 SFT-LLM judge 的 4.80s 降至 1.33s。

  14. arXiv · cs.CL24

    多语言语言模型中颜色表示几何结构的研究

    一项 arXiv 研究将多语言语言模型的颜色表示分解为两个几何维度:与感知颜色空间(CIE-LAB)的对齐程度和跨语言对称性。研究发现感知基础较弱——对齐在中间层达到峰值后在输出层坍缩,且跨语言对称性随深度下降。模型在 P1 对齐峰值层的颜色分类准确率达 96.7%,P1 对齐与下游能力显著相关(r=0.70),表明纯文本模型学到的是通用的颜色-语言几何而非颜色-感知几何。

  15. arXiv · cs.CL51

    巴伐利亚语、德语与英语上的量化鲁棒性研究:4-bit 量化对 7B–10B 模型影响不稳定

    arXiv 论文 2610.18343 用 BAVGROUND 基准在巴伐利亚语、标准德语和英语上评估 14 个开源 7B–10B 指令模型的量化鲁棒性。8-bit GPTQ 接近 BF16 且基本保持三语相对行为;4-bit GPTQ 与 AWQ 使平均准确率下降约 1.4–1.5 个百分点,改变 11.9–16.0% 的 BF16 决策,且 5 个模型的自由文本评测显示 4-bit 压缩在选择题准确率变化不大时也可能劣化生成回答。受影响最大的语言随模型、量化方法和校准数据而变,不能仅凭聚合多语言准确率衡量。

  16. arXiv · cs.CL42

    无需密钥即可认证式篡改多比特 LLM 水印:目标位移攻击首次提出

    研究者提出针对多比特 LLM 水印的"目标位移"攻击,可在不掌握水印密钥的情况下改写嵌入文本的账号标识等消息。攻击者只需访问若干账号以获取模型输出与 logits,理论上给出了攻击成功概率的上下界,并在 5 种水印方法和 4 个 LLM 上验证,账号充足时几乎总能高准确率篡改成功,代码已开源。

  17. arXiv · cs.CL51

    PRISM:用反事实探针校准黑盒 LLM 评审的评分偏差

    arXiv 论文提出 PRISM,通过保持被评内容不变、探查强调或弱化属性时的评分变化,来修正 LLM 评审的隐性评分偏差。方法将探针响应表示为代理 Jacobian,用 Ridge 回归学习对基线分数的校正,无需评分细则;在 SummEval 和 HANNA 的 Jev 与 Sol 对比中,校准后与人类排序的一致性显著提升,且与基于 rubric 的方法相当。

  18. arXiv · cs.CL52

    扩散语言模型多残差流研究:双流将验证集重建困惑度降低 5.71%

    arXiv 论文 arXiv:2610.18407 为掩码扩散语言模型引入贯穿深度、可自适应路由的多残差流。双流使验证集重建困惑度较标准残差连接降低 5.71%,外部语料平均降低 5.13%。因果干预显示可见与掩码位置自发形成不同路由模式,角色条件路由训练可恢复双流一半的验证收益,该机制在更大模型规模上同样成立。

    推荐理由:论文给出多残差流扩散语言模型的具体改动和 5.71% 困惑度下降数据,并解释了双流分工的机制来源。

  19. arXiv · cs.CL55

    arXiv 论文:提示词注入探针学到的是对话特征而非注入本身

    arXiv 论文(2610.18408)发现间接提示词注入的线性探针标准评测可被非模型特征通过,仅凭对话位置和文本长度就达到 0.91-0.98 AUROC。作者将无注入对话和形似注入的无害文本作为匹配负样本加入训练数据,在六个开源模型上,默认阈值下对无注入对话的误报率从 41-80% 降至 4-27%,对无害形似文本从 92-98% 降至 3-16%,同时在正常流量阈值下仍能检出中位数 95% 骗过智能体的攻击(不加数据为 91%)。在新应用中误报保持低位,但检出率取决于模型和阈值设定;同一数据也帮助纯文本过滤器。

    推荐理由:论文指出注入探针评测可被对话位置和文本长度骗过,并给出用匹配负样本把误报率大幅压低的数据。

  20. arXiv · cs.CL44

    并非所有漂移都是机制:arXiv 论文追踪 LLM 中的提示词适应机制

    arXiv 论文研究了离散提示词优化、prompt tuning 和 prefix tuning 如何改变稠密模型与 MoE 模型的内部处理过程,发现适应方法的位置决定了任务信息传向输出的方式:优化文本主要改变响应构建,输入级提示词将影响写入内容表示,逐层前缀则通过注意力保持直接控制,在 MoE 模型中还会引发不同的专家路由模式。论文指出常见表示层面的度量对通用上下文变化反应强烈,难以可靠区分有效适应与安慰剂对照,主张将表示漂移与模型任务计算真正使用的部分区分开。

  21. arXiv · cs.CL31

    计算心理语言学研究重新审视 unigram surprisal 的估计方法

    一项 arXiv cs.CL 研究指出,计算心理语言学中 contextsurprisal 通常由神经语言模型导出,而 unigram surprisal 多来自独立语料统计,这种做法割裂了二者的概率联系。作者提出三项估计原则,要求两者来自同一语言模型,并给出 Monte Carlo 估计器及更低方差的边缘化变体。在该统一框架下重新估计后,各预测变量对阅读时间的贡献发生变化,且频次可成为比 contextual surprisal 更强的加工努力预测指标。

  22. arXiv · cs.CL47

    事实性方法能否让 LLM 更真实?五种对齐方法的独立复现与公平比较

    一项研究首次独立复现了五种事实性对齐方法,涵盖 on-policy RL(PPO、GRPO、Dr. GRPO)与离线偏好优化(DPO、KTO),并在统一基准与评测指标下比较。结果显示没有任何方法完全复现,在共同基准上也无方法显著超过基座模型,奖励主要优化格式、长度或简洁而非事实性。研究指出依赖 LLM judge 和检索验证的评测本身也较脆弱,团队已开源代码、数据与 checkpoint。

  23. arXiv · cs.CL60

    arXiv 论文研究 LLM 智能体间谈判:持有一方决定资金转移量

    arXiv 论文(arXiv:2610.18424)对 15 个语言模型智能体进行了 1,049 场循环赛谈判,发现知道哪一方持有 $100 资金可解释转移金额方差的 47%,而知道请求方仅解释 2%。文中显示最不亏的持有方是拒绝首次请求的一方,其首轮拒绝率与总亏损排序的相关系数为 -0.73;用几乎无拒绝的说服语料微调 Qwen3-8B 使其作为持有方给出资金从 12% 升到 84%,把两个从不亏损的持有方蒸馏进 4B 学生模型则将亏损从 95% 降到 1%。作者建议对持有资源的智能体评测应测试其持有角色表现,包括说服微调之后。

    推荐理由:论文给出多智能体谈判中持有方角色对结果的主导性量化证据,并提示对持有资源的 Agent 评测应纳入持有角色与说服微调后的表现。

  24. arXiv · cs.CL61

    arXiv 论文提出 Randomized Block Curation:用随机实验筛选智能体自写 playbook 里的有效经验

    Hoang Pham 在 arXiv 发表论文(arXiv:2610.18427),提出 Randomized Block Curation(RBC),用随机实验衡量智能体自写 playbook 中各条经验对任务成功的实际影响。将相关经验分组后,在练习任务上随机决定每块是否纳入提示词,用有无某块的成功率差值估计其效果,只保留有效块。跨 2 个记忆系统、3 个模型和 3 个基准,RBC 平均成功率达 66.9,高于全量 playbook 的 55.5、无 playbook 的 54.1 和靠智能体自行判断筛选的 53.8。论文还指出同一流程写出的 playbook 可能有效也可能比无 playbook 低最多 69.6 分,因此需并行维护多个 playbook 并选用在新鲜练习集上表现最佳者。

    推荐理由:论文给出量化实验设计,用随机对照衡量 playbook 条目对任务成功率的真实贡献,数字齐全可复现。

  25. arXiv · cs.CL18

    如何从语音信号直接估计 surprisal:一种基于重要性采样的方法

    一项 arXiv cs.CL 研究提出用语音 LM 直接从语音信号估计 surprisal,摆脱依赖文本转录的瓶颈。该工作引入重要性采样估计器,通过 TTS 模型对抽象语言单元的多种声学实现边缘化,在瞳孔测量听感实验中,发现该方法比逐实现估计更准确预测瞳孔扩张,亚词汇单元的 surprisal 也有预测力;但整体上 surprisal 对瞳孔变化的预测力不强。

  26. arXiv · cs.CL42

    复制不等于落地:用 Authored-Sentence Credit 训练忠实长文 RAG

    arXiv 论文指出长文 RAG 的 faithfulness 奖励会被复制粘贴"钻空子",模型倾向照抄检索段落而非自己撰写有依据的内容;KL 或 copy penalty 只会转移问题,GRPO 逐句给出答案级优势还会强化复制句。论文提出 Authored-Sentence Credit(ASC),把奖励和优势下移到句子级,只奖励原创、有信息量且被段落支持的句子。在 4 个模型和 5 个语料上,ASC 将原创句错误率中位数降低 38%,被支持句子增加 46%。

  27. arXiv · cs.CL22

    SeTPO:基于双向 KL 约束的教师引导小语言模型工具学习方法

    论文提出 SeTPO(Selective Teacher guided Policy Optimization),通过逆向 KL 的 token 级教师反馈与正向 KL 持续监督,解决小语言模型在强化学习工具使用探索不足与师生行为分布失配问题。理论上证明最优策略期望奖励不低于教师并保留部分教师概率质量,在 BFCL v4 与 API Bank 上超越 SFT、强化学习和蒸馏基线。

  28. arXiv · cs.CL22

    Readout Scaling 如何影响稀疏自编码器的特征恢复:RC-DS 方法研究

    研究提出 readout-canonicalized decision-space(RC-DS)坐标方法,去除奇异值增益同时保留决策信息,用于分析 readout scaling 对稀疏自编码器(SAE)特征恢复的影响。在受控坐标匹配实验中,当因子在 readout scaling 之前生成时,RC-DS 将平均稀疏因子恢复从 0.506 提升至 0.913(条件数 100)。在三个固定语言模型 checkpoint 的全部 18 个 task-sparsity 设置中,RC-DS 均获得更高的无增益重构,而 centered-logit SAE 在其中 17 个设置中更好地重构输出 logits。

  29. arXiv · cs.CL53

    研究实测 ChatGPT 健康建议安全性:四国 20 万对话中约五分之一为高风险

    一项 arXiv 研究基于印度、尼日利亚、巴西、巴基斯坦 1,252 名用户授权捐赠的 202,590 条 ChatGPT 对话,筛出 15,555 条健康对话做安全评测,约五分之一获高风险评级。风险集中在症状与病情类提问,表现为不安全用药剂量建议、有害自我诊断、缺失安全警示和未引导就医;加入用户自身上下文后高风险比例上升 13-17 个百分点,约四分之一单独评级安全的对话对具体提问者并不安全。作者指出基于合成病例的安全评测可能漏掉这些伤害。

    推荐理由:论文用四国真实用户对话而非合成病例评测 ChatGPT 健康建议安全性,发现合成评测可能漏掉的风险模式。

  30. arXiv · cs.CL51

    arXiv 论文提出 DeRef 方法缓解工具调用裁判模型的推导缺口

    arXiv 论文(arXiv:2610.18497)发现工具调用裁判模型在输入中没有说明正确取值的参考文本时,接受正确参数值的比例下降,作者称之为推导缺口,在评测的七个裁判模型上均存在,且正确默认值在无截断基准上缺口最大。受控来源搬迁实验表明裁判更倾向采纳可见的错误值而非来源被隐藏的正确值;作者提出的 DeRef 方法由单独模型读取完整对话历史后为裁判生成参考,在三个基准上提升所有受测裁判的参数 AUROC,在受控测试中将 AUROC 从随机或以下水平提升至 98.40 到 99.59。

  31. arXiv · cs.CL37

    FaithAlign:面向理论尺度自动形式化的忠实性对齐评测基准

    该 arXiv 论文将自动形式化(AF)的忠实性评测建模为“先对齐再标注”问题,在非形式与形式化陈述间识别短语级对应并逐条标注忠实性。论文发布首个理论尺度忠实性基准 FaithAlign,含 460 个条目和 4,982 条标注的短语级链接,另有去除上下文与假设的 FaithAlign-Gap(146 条)。8 个模型中 GPT-6 Astra 缺陷 F1 最高达 47.8%,在 FaithAlign-Gap 上仅识别出 28.2% 的不可判定条目。

  32. arXiv · cs.CL61

    编码智能体长文档任务研究发布 TrialPD-Bench 基准与 TrialScribe 框架

    研究者以临床试验方案数字化为测试场景,发布含 150 份公开协议 PDF、四个任务类别的专家标注基准 TrialPD-Bench,并评估九个模型在五种 coding-agent harness 下的表现。结果显示最强智能体也无法完全解决该任务,通常能定位所需证据但在转写与结构化的最后一公里失败;配套的领域 harness TrialScribe 加入任务技能与验证循环,使本地部署的开源模型在八项指标上提升 6.2-59.4 分,达到或超过 GPT-5.6-Sol 等专有模型。

    推荐理由:原文用专家标注基准把编码智能体在长文档任务上的失败定位到转写与结构化环节,并给出可复用的领域harness改进数据。

  33. arXiv · cs.CL50

    知识蒸馏研究揭示"烙印"效应:教师模型可改变学生模型行为倾向

    arXiv 一项研究提出"烙印"(imprinting)现象:用同一基础教师模型构建的害接受与害回避两种变体生成普通推理与知识问题的回答并蒸馏给学生模型,学生在获得任务能力的同时,下游决策会向源教师的安全务实倾向偏移。排除稀疏的分歧 token 可减弱烙印,而蒸馏后的偏好优化虽提高害回避程度,却无法消除源自源教师的差异。

  34. arXiv · cs.CL42

    语言模型 logit 几何的系统性分析:通用结构与训练学到的偏离

    该 arXiv 论文实证分析自回归语言模型在每步预测产生的词表级 logit 向量,发现有序 logits 遵循跨架构与规模一致的 log-linear 关系 z_(r) ≈ μ − α·log r。训练后模型的斜率 α 约为 1.4–1.7,远高于初始化基线的 0.2,且 α 与预测性能相关,表明其捕捉了超越极值效应的学习结构。

  35. arXiv · cs.CL22

    检索分歧作为信号:诊断并调控多语言稠密嵌入模型

    多语言稠密检索器将所有语言放进一个共享向量空间,但同一问题用不同语言提问会检索出明显不同的文档;各语言单独排序表现一致,分歧仅在共享索引下出现,正确答案被同语言或英文的无关文档挤到靠后位置。研究提出 disagreement-guided steering 方法:对比各语言一致文档与该语言特有检索文档的表示差异,得到语言专属方向并在推理时加到对应语言查询上,相比 language-mean removal、subspace removal 和 per-language rotation 等基线最能减少同语言挤占,同时在 recall 上保持竞争力。

  36. arXiv · cs.AI54

    GUIDE:面向可信临床实践指南更新的计算增强共识系统

    Yuanfan Lin 等人在 arXiv 发布 GUIDE,一个用于人类与 AI 协作生成和更新临床实践指南(CPG)的多智能体 copilot 系统,将劳动密集型任务交给专用智能体,专家保留判断与最终仲裁。在 12 个 NICE 眼科数据集上,GUIDE 实现文献召回率 88.85%、证据确定性评级一致率 86.06%、推荐一致率 91.67%,平均每个数据集耗时 162.17 分钟(人工干预 28.68%);在心血管、内分泌、消化和呼吸领域 20 个数据集上表现稳定。消融分析显示移除专家干预会降低偏倚风险评估等判断密集环节的表现。

    推荐理由:论文报告了在 NICE 眼科数据集上的文献召回率、推荐一致率与人工干预比例等数字,便于评估多智能体系统在指南更新中的实际表现。

  37. arXiv · cs.AI25

    SatPV-Field:构建区域光伏发电场改进分布式光伏超短期预测

    研究提出 SatPV-Field 框架,将分布式光伏测量数据转化为图像状区域发电场并建模其时空演化,结合卫星短波辐射与气象预报预测区域发电状态。在 496 个分布式光伏系统(446 个源站、50 个目标站)上的实验显示,该方法的站级 MAE 较最优单站时序基线降低约 10.0%,较基于图结构的区域预测方法降低 2.5%。

  38. arXiv · cs.AI47

    超越完美队友:面向不可靠同事的 LLM 多智能体协作研究

    该研究提出 Unreliable Colleagues Benchmark(UnCoBench),通过 Misaligned、Incomplete、Missed 三类故障设置,将 LLM 多智能体协作中的任务求解能力与从不可靠证据收集过程中恢复的能力区分开。配套的可验证自动生成管线结合 LLM 场景生成与答案唯一性、角色必要性的可执行检查。十个模型的测试显示,可靠设置下表现相近的模型对不可靠证据的鲁棒性差异明显,且常缺少纠正性追问。

  39. arXiv · cs.AI44

    arXiv 论文提出被动模仿(PI)机制:局部修复与验证式技能习得助力自适应智能体

    一篇 arXiv 论文将被动模仿(PI)形式化为定位违约、提取局部目标、提出匹配技能并小规模修补、全任务验证后保留证据的架构循环。在十个模拟工具世界中,PI 用 3 次小试验解决全部 600 个冷启动 held-out 组合任务,对照的整轨迹方法仅 6.17%;面对未见过的工具修订,成功率达 70.0%,自试验枚举下为 79.0%。实现仅用 CPU,代码已开源可复现。

  40. arXiv · cs.AI14

    面向香港 AEC 行业消防安全规范解读的 LLM 评测基准研究

    研究者与领域专家合作构建了一个针对香港消防安全规范的 LLM 评测数据集,含选择题(MCQ)与开放式题(OEQ),评估 12 个专有和开源模型。表现最好的专有模型在 MCQ 上准确率达 80-90%,开源模型普遍落后;而专家人工评估的开放式题准确率仅 50-70%,表明 LLM 在专业合规任务上仍有较大提升空间。