跳到正文
10月23日周五
  1. arXiv · cs.CL55

    研究用 LLM 智能体审计 Slovak FineWeb2 语料,发现 5.32% 机器生成内容农场

    论文提出用 LLM 智能体作为语料调试器审计多语言数据管线,通过只读、有预算的 API 探索语料并将发现编译成可执行测试,再由母语者验证。在 FineWeb2 的 26.5M 文档斯洛伐克语子集上,三次运行各花费 $2.21-$2.84,共发现四个现象的七项问题,最大的是 1,408,437 篇(5.32%)通过管线过滤的机器生成内容农场;盲测支持 7 项中的 6 项(缺陷率 .53-1.00 对随机对照的 .08)。编译后的测试套件 0.7 秒即可扫全语料无需 GPU,而单次 LLM 分类需 $12k-$90k;最佳静态采样基线以不到一半成本验证了比任何智能体运行更多的选择器。

    推荐理由:论文把 LLM 当语料调试器用一次而非逐条分类,并对比静态采样基线的成本与效果,方法对比值得数据质量工作者参考。

  2. arXiv · cs.AI44

    面向 Agentic AI 的认证执行框架:推理与动作之间安全、最小侵入的 Petri 网监督控制

    一篇 arXiv 论文用 Petri 网将 LLM Agent 的工具执行框架形式化为监督控制问题,使未满足或已消耗前置条件的注入请求无论措辞如何都会被拒绝。论文引入重规划闭环,证明传统监督器可能比更严格的安全监督器侵入性高任意倍,并刻画了最小侵入监督器。在自主发布 Agent 上的综合实验表明,安全部署需要一个监督器可在 rollout 开始后拒绝的步骤。

  3. arXiv · cs.AI29

    面向 EU AI Act 合规的 AI 风险本体 AIRO 与 VAIR 及其与 DPV 的集成

    研究者提出 AI 风险本体 AIRO 和 AI 风险词汇表 VAIR,用于描述 AI 用例及其相关风险,辅助 EU AI Act 对高风险 AI 系统的风险管理与文档要求。两者基于 ISO/IEC 23894 和 ISO/IEC 22989 开发,并已通过共识流程集成进 Data Privacy Vocabulary(DPV),将 DPV 范围从数据扩展到 AI,以支持复用和多法规合规。

  4. arXiv · cs.AI27

    审计学习式访问控制中的人工编写输入

    一项 arXiv 研究审计了学习式访问控制依赖的两类人工构建组件:硬拒绝集与区域路由映射。在五个公开 ABAC Lab 策略上,作者穷举验证最多 794,250 元组的关系,发现忠实转录显式限制的条款在 1 位作者和 3 个盲测语言模型引出者下不可靠率达 0.50-0.70,97% 的反例由其他规则授予;未经校验的拒绝集会扣留策略 16-78% 的授权。研究还发现混合路由的排序候选池在全部 24 个单元格中均为单类,且在两条真实策略上多数选择规则在两类损失下结论相反,已发布工件可复现所有数字。

  5. arXiv · cs.AI45

    HERD:面向持续学习的 Harness 演化递归蒸馏框架

    研究者提出 HERD(Harness-Evolving Recursive Distillation),一种混合持续学习框架:在 harness 中高效学习,并通过带双锚点的漂移约束知识蒸馏把经验内化为累积能力,抑制灾难性遗忘。在 TRACE+17 的 25 阶段任务流上,在固定内存与计算预算下,HERD 在新任务习得上匹敌最强参数化基线,同时遗忘最少、通用能力保持最好。

  6. arXiv · cs.AI49

    AgentPhishing:一个针对 LLM 邮件智能体自适应攻击的基准

    研究者推出 AgentPhishing 基准,评估说服式钓鱼攻击能否让 LLM 邮件智能体遵从恶意请求,并提出 PhishOpt 方法针对单个智能体优化可复用的邮件生成技能。在九个智能体的评测中,四个钓鱼检测率低于 10%,恶意请求遵从率高于 45%。结果表明传统钓鱼评测无法推断智能体安全性,需评估其对说服式恶意请求的响应。

  7. arXiv · cs.AI46

    同一实体、不同文字:诊断语言模型跨文字实体匹配失败

    一项 arXiv 研究用 601 对天城文-拉丁文审计身份对测试发现,Qwen2.5-7B 在马拉地语提示下,同一人名判断准确率从拉丁文的 35.1% 降至天城文的 8.5%。在 374 对马拉雅拉姆语对上复现了该效应,0.925 AUROC,且标量校准可恢复 87% 的模型-探针平衡准确率差距。对 Qwen 中间层的干预将马拉地语同一人准确率从 6.5% 提升至 33.5%,不同人准确率保持 98.5%。

  8. arXiv · cs.AI45

    顶级期刊已发表论文遭遇 LLM 同行评审:四大模型大多给出大修或拒稿

    一项 arXiv 研究让四个 LLM(两个闭源、两个开源)以盲评方式评审来自 Nature、Science、Cell 等 20 本期刊的 200 篇 2026 年已发表论文,800 份评审中 75.6% 建议大修或拒稿,各模型比例从 17.5% 到 100% 不等(p < 0.001)。在被植入一个特定领域方法学或统计缺陷后,各模型检出率为 17.0% 到 60.5%,显示模型间结论高度不一致且假阳性与漏检并存。

  9. arXiv · cs.AI26

    面向神经网络可解释性的事后特征选择层(post-hoc FSL)

    研究者提出 post-hoc FSL,一个轻量可训练模块,可在已冻结的预训练模型上事后优化特征权重,不改动原模型架构与参数。该方法在统计与视觉指标(accuracy、F1、recall、precision、weighted t-SNE、silhouette score)上与 Integrated Gradients、DeepLIFT、Gradient SHAP、Feature Ablation 等事后方法对比,在合成与真实表格数据上均能识别相关特征,在保持原模型预测能力的同时提升可解释性。该工作已被 2026 IJCNN 接收。

  10. arXiv · cs.AI43

    深度增长与循环结构如何塑造语言模型的上下文学习能力

    一项研究分析了深度增长与循环结构如何促进语言模型的上下文学习,涵盖参数量最高 3B 的预训练模型与受控任务。实验显示此类模型比全深度稠密参考模型更依赖上下文信息,能更早习得 ICL 并在权重学习中更牢固地保留该能力。注意力追踪与消融实验表明,深度增长使早期 induction heads 跨层传播,模型更依赖 induction 排名靠前的注意力头支持 few-shot 表现。

  11. arXiv · cs.AI53

    FocusVLA:面向 VLA 模型的未来意图引导动态视图路由框架

    研究者提出 FocusVLA,一个基于阶段感知的 VLA 多视图动态路由框架,从历史动作预测未来交互意图以引导视图切换。在 RoboTwin 2.0 上平均成功率较最强基线 π0.5 提升 10.10 pp,真实世界评测成功率从 71.7% 提至 85.0%;其意图预测与动态路由模块可在不改核心架构的情况下集成到现有 VLA 框架,已被 CoRL 2026 接收。

    推荐理由:论文指出 VLA 模型普遍过度依赖腕部视角,给出的动态视图路由方法可迁移到现有 VLA 框架,改动成本较低。

  12. arXiv · cs.AI44

    可预测性能并非最优:这对 LLM 模型路由意味着什么

    一项 arXiv 研究表明,LLM 模型路由中的性能预测方法只有在候选模型在某任务上表现次优、或预测器相比模型有显著额外容量时,才能胜过以模型自置信度为基线的简单方案。理论上,优于自置信度的性能预测器可通过重新校准将优势精确转移到对数损失上,其优势上界为模型次优程度加上额外参数带来的增益。在 4 个 benchmark 上用 16 个语言模型的实验显示,模型经微调改进后,预测器的优势随之缩小,双模型级联路由也呈现同样规律。

  13. arXiv · cs.AI34

    PhysTrace:视频生成模型物理一致性的可解释时序评估框架

    研究者提出 PhysTrace,一个无需训练的框架,将 MLLM 生成的历史条件预期与观测视频窗口对齐,以时序定位视频生成模型中的物理违规并给出可解释描述。配套发布的 IntPhys2-Timing 基准为 IntPhys2 加入违规时间区间,PhysTrace 在其上的 Hit Rate 最高达 70.7%,并在 IntPhys2 的可能-不可能判别总准确率上优于对比方法。应用于 diffusion/flow 视频模型的重建视频时,该框架可跨时间步揭示属性与噪声相关的物理违规定位模式。

  14. arXiv · cs.AI34

    保守元智能体搜索(CMAS):非平稳环境下的架构自适应方法

    一篇 arXiv 论文提出 Conservative Meta-Agent Search(CMAS),将元智能体架构搜索形式化为带切换成本与硬风险约束的序贯现任替换问题,并配套引入 MetaInvest-Bench 模拟器用于评测元层级泛化。在 96 个金融流上,CMAS 将归一化平均 surrogate 动态预言机 regret 从 0.116 降至 0.104,held-out 效用从 0.44 提升至 0.48,每次更新的错误晋升率为 3.4%(名义目标 5%)。其部署推理成本低约 6%,但含搜索的 token 成本为对比方法中最高。

  15. arXiv · cs.AI43

    DIAL:通过蒸馏指令遵循程度实现对语言模型的细粒度可控

    DIAL(Distilled Instruction-Adherence Levels)是一个实现对大语言模型指令遵循程度进行细粒度数值控制的框架,同时兼顾可控性、效率与可扩展性。它用冻结 LLM 结合 classifier-free guidance 生成训练信号进行 on-policy 蒸馏,并设计了基于 LLM hidden states 分类器的轻量级 steering adapter 逐 token 自适应调节强度。配套发布的 SteirF 数据集含 98,625 条指令,训练后 DIAL 可细粒度控制 persona,并与提示词结合提升可验证指令遵循。

  16. arXiv · cs.AI36

    面向编码智能体的自适应技能粒度:运行时路由与宏到微恢复

    一篇 arXiv 论文提出 Adaptive Skill Granularity 框架,将编码智能体的技能粒度作为基于任务结构、执行状态和宏技能失败的动作抽象策略来控制,系统由基于特征的粒度控制器和有限状态恢复执行器组成。在采用验证器定义成功、总成本及宏采用率、失败恢复、路由匹配等过程指标的确定性编码智能体协议中,运行时路由与显式的宏到微恢复比固定粒度执行更稳健,可恢复固定执行无法解决的受控宏失败。作者据此主张技能库应被视为可控、可验证、可恢复的执行抽象。

  17. arXiv · cs.AI36

    MoG-VLM:基于运动引导视觉语言模型的高效视频异常检测

    MoG-VLM 是一个运动自适应视频异常检测框架,用时间梯度幅度(TGM)做内容感知采样,仅在异常可能性升高的帧附近触发 VLM 推理。该方法在 XD-Violence、UCF-Crime、MSAD 和 ShanghaiTech 四个基准上分别取得 91.91%、84.30%、87.88% 和 78.96% 的 AUC-ROC,其中三个基准在 zero-shot、免训练设置下刷新 SOTA。在 XD-Violence 上较此前最佳提升 +0.57%,同时推理提速 1.31x,代码已在 GitHub 开源。

  18. arXiv · cs.AI22

    SABLE:面向高维潜空间、低评测预算的贝叶斯优化方法

    研究者提出 SABLE,一种针对高维生成模型潜空间、评测预算有限的贝叶斯优化方法。它用贝叶斯仿射代理模型处理预测与采集,通过有限区间调度控制 off-span 范数避免欠探索,并用重压缩方案把信息压缩为 O(M) 伪观测。在合成基准与潜空间优化任务上,SABLE 实现高样本效率,决策时间保持在几十毫秒,大预算下比现有方法快数个数量级。

  19. arXiv · cs.AI21

    FairFRESH:面向公平且可解释家庭食物推荐的神经符号框架

    论文提出神经符号框架 FairFRESH,将家庭食物推荐建模为约束性公平分配,学习成员个体效用、通过确定性过滤器强制饮食规则,并基于 Shapley 和 Banzhaf 归因进行解释。在 NHANES 衍生数据上,学习效用模型 Recall@20 达 0.293,优于五个学习型推荐器(最高 0.244);四人家庭测试中 Nash 分配使 Gini 差距相对冲突消解降低 42%,Recall@20 从 0.180 提升至 0.197。所有推荐均满足编码的饮食规则,归因分数与移除组件后的效用损失相关(r = 0.76),模拟中共享餐食使储藏消耗减少约三分之一。

  20. arXiv · cs.AI41

    DuoCook:一个受 Overcooked 启发的视觉规划与协调 benchmark

    研究者推出 DuoCook,一个基于 Unreal Engine、受 Overcooked 启发的视觉规划与协调评测 benchmark,由单一视觉语言模型通过俯视视觉观察同时控制两名玩家。benchmark 包含 5 类共 20 张地图,评估任务得分、订单完成率、交付精度、动作接受率和 API 花费,并对共享自写笔记记忆做了消融实验。表现最强的模型 gpt-6-astra 平均订单完成率仅为 26.2%;笔记记忆对 Claude 和 Qwen 平均加分,对 GPT 和 Gemini 则为负向。

  21. arXiv · cs.AI25

    从提示词规则到 Golden Data Model:生产级生成个性化、合规的制药宣传语

    一项生产案例研究将合规与个性化信号从提示词规则迁移到检索时结构化上下文,基于含 1,867 条制药宣传语、覆盖四个产品的 Golden Data Model 构建内部工具 Composer。在六个产品-受众细分上,预期适应症提升 29%、预期内容类型提升 62%、预期目标受众提升 67%,6C 质量分提升 86%,宣传语复用提升 34%,每周 API 成本降低 29.5%。

  22. arXiv · cs.AI27

    Jev-DLC:基于类型化反馈的决策级持续学习

    Jev-DLC 是一种从类型化反馈中学习用户偏好的决策级持续学习方法,把每次纠正同时视为动作身份证据和偏好-拒绝选择间的有向关系,存储在冻结打分器之上的两个有界通道中,不保留原始交互历史、不增加打分器调用、不做运行时语言模型反向传播。作者还提出按时序考核纠正对后续决策影响的 TCPA-Bench。在 TCPA-Repeat 上,Jev-DLC 达到 44.83% user-macro 准确率,比 Recent-4 历史回放高 2.43 个百分点;在至少两次早期反馈后达到 56.07%,领先最强对比方法 7.54 个百分点。

  23. arXiv · cs.AI32

    超越因果掩码:审计与定位自适应序列模型中隐藏的未来 token 泄漏

    一项研究揭示了自适应残差路由解码器中隐藏的未来 token 泄漏如何制造虚假的架构进步:一个异常 24 层 checkpoint 将验证损失从基线的 3.5958 降至 1.4259,却未通过 prefix-invariance 审计,泄漏源自经动态路由查询路径广播的全序列摘要。两个独立训练的 12 层因果修复消除了可检测的泄漏,验证损失和参考困惑度回到对照水平。研究借助 LeakScore 等诊断工具指出,低 teacher-forced 损失须结合全模型因果检查与自由生成评估解读。

  24. arXiv · cs.AI27

    可争议智能体用于数据治理:跨结构化与非结构化系统记录 AI 生成元数据的人类监督

    一篇 arXiv 论文提出“可争议治理”模式:基于 LLM 的专家智能体为有争议的元数据决策生成带评分和引用的论证,steward 可在提交前接受、拒绝、修改或补充论证,治理记录保留证据、干预与结果。工作流包含分级分诊路径、评分与记录模型及已验证决策的先例门控,版本化领域术语表为智能体提供术语与缩写定义。两个 HVAC 用例展示了基于 Brick Schema 的点位分类(附开源参考实现)和关联索赔字段、遥测与服务记录的保修失效模式决策。

  25. arXiv · cs.AI38

    何时跟随教师:基于优势的在策略蒸馏 AOPD

    AOPD(Advantage-Based On-Policy Distillation)提出在 Online Policy Distillation 中区分教师偏好与对学生的实际帮助,依据教师动作在学生策略下的反事实优势进行加权,改善学生预期结果的动作被强化,否则降权。该方法无需额外 rollout 或奖励评估,仅用学生轨迹的终端奖励即可无偏估计目标。在数学、代码和 Medqa 任务上,AOPD 在外接教师与自蒸馏设置下均超过蒸馏与 RL 基线。

  26. arXiv · cs.AI49

    Social-HUMINT:一个用 LLM 统一衡量社交媒体暴露程度的框架

    研究者提出 Social-HUMINT 框架,将 SOCMINT 与 Cyber-HUMINT 统一为涵盖 38 项能力的分类体系(专家验证 Fleiss' κ = 0.92),并实现为 LLM 增强的多智能体流水线。在真实参与者公开数据上,信息抽取 F1 = 97.3%,推断属性得分 4.73/5,远超基于规则和 NER 的基线。该框架可预测目标对个性化诱导选项的排序以间接评估易感性,帮助防御者在攻击者之前评估自身暴露风险。

  27. arXiv · cs.AI49

    扩散语言模型中的可学习 unmasking 策略如何影响速度与精度权衡:一项受控研究

    一项受控研究系统考察了扩散语言模型的可学习 unmasking 策略,发现用最终输出匹配做标签在低 NFE 下过于宽松,隐藏状态单独较弱但可补充置信度,约 10% 的 NFE 减少即可抵消最高 7.5M 参数策略的开销。研究在 LLaDA-8B-Instruct 上训练的 856K 参数策略取得 GSM8K 上最佳精度—NFE 前沿与最高吞吐,在 MATH-500 和 HumanEval 中等目标下具竞争力,并基本可迁移至 Dream-7B-Instruct。

  28. arXiv · cs.AI53

    arXiv 论文提出 Human Deference Index 度量人类对自信 LLM 的谄媚

    arXiv 论文(2610.31579)研究谄媚的反向问题:当 LLM 自信、一致且错误时,用户是否会向它弯腰。32 名参与者与基于 GPT-5-mini 的 5 个助手学习科学话题,各助手事实被 0-100% 替换为貌似合理的错误,104 次测验、1040 个答案中得分从 7.4 降至 2.9/10,被植入错误选项在篡改题目中被选 60%(正确教学仅 11%,odds ratio 12.5),吸收的错误以 8.4/10 高置信度持有,置信度区分正确性的 AUROC 从 0.70 跌至随机水平,而事后信任评分几乎不变。论文提出基线校正的 Human Deference Index 量化人类侧谄媚,主张可信性是人机对的属性,谄媚评测应测双向。

    推荐理由:研究给出人向AI弯腰的量化指标与实验数据,把谄媚评测从模型单向扩展到人类方向,方法可直接复用。

  29. arXiv · cs.AI41

    开源大模型能否考上西班牙 MIR 住院医师考试:不确定性、推理与图像使用研究

    一项研究用西班牙 MIR 住院医师考试规则评测了 4 个 8B 至 27B 参数的开源模型,共 1,552 道题。三个较大模型答完全部题目可排进约前 600 至 3,000 名,41 至 43 个专业仍可匹配。但医学微调虽降低过度自信却牺牲准确率,且替换或删除图像不影响成绩,13-38% 的正确答案因临床不合理理由排除干扰项。

  30. arXiv · cs.AI28

    VERA:基于 EU AI Act 评估 LLM 部署的负责任 AI 仪表盘

    研究者推出开源、自托管的 VERA 仪表盘,帮助机构基于 EU AI Act 的 18 项技术要求(其中 12 项可由现有 benchmark 测量)评估 LLM 部署,并在某欧洲大型银行内部使用,同时记录每次评估的能耗。被试实验显示,用仪表盘完成负责任 AI 评估的平均时间从 56 秒降至 30 秒,内部调查有用性评分达 4.36/5。仪表盘与研究材料已公开发布。

  31. arXiv · cs.AI53

    arXiv 论文提出模拟控制评测 SCE,用模型模拟工具响应预测 AI 安全指标

    论文提出模拟控制评测(SCEs),用语言模型模拟工具响应替代真实环境来拓宽控制评测适用范围。在 LinuxArena 上,SCE 预测安全性的 RMSE 为 3.6 个百分点(5% 审计预算、五个监控器),优于 BashArena 的 10.1,对攻击策略等分布的 KL 散度比 BashArena 低十倍以上,可解释 78-85% 的跨环境方差,且通过模拟发现的策略可提升监控器对留存攻击的表现。

    推荐理由:论文用实测数据对比了模拟控制评测与独立控制设置预测安全的误差和 KL 散度,方法可迁移到 AI 控制评测设计。

  32. arXiv · cs.AI23

    证据感知评估:真实标注如何影响乳腺病变 RAG 系统的检索得分

    一项研究提出面向乳腺病变管理文献的临床 RAG 系统证据感知检索评估协议。混合检索器(密集嵌入 + BM25 + cross-encoder 重排)采用 384-token 块、20% 重叠,在 18 个查询中 17 个于前三条结果检回认可证据,Recall@3、R-Precision、MRR@3 与 nDCG@3 均达 0.94。扩充真实标注使证据跨度从 25 增至 37、可接受块从 36 增至 51,但不改变检索排名,凸显得分对标注覆盖的敏感性。

  33. arXiv · cs.AI54

    RLVR 是否加剧工具性收敛?OLM-3 检查点证据的质疑研究

    arXiv 论文 2610.31624 用 InstrumentalEval 评测 OLMo-3-7B-Think 从 SFT、DPO 到 13 个 RLVR 中间检查点的行为轨迹,发现工具性行为率先升后降:从 SFT 的 25.0% 升至 RLVR step 200 附近的 46.1%,最终降至 11.8%。提示词框架效应只能解释检查点内约 15% 的方差,INLP 移除框架方向也不改变 SFT 到最终 RLVR 的下降;32B 端点初步结果同样从 35.53% 降到 22.37%。作者强调结论仅适用于该模型族和基准,评审一致性中等,绝对比率需谨慎解读。

    推荐理由:论文用 13 个 RLVR 中间检查点追踪工具性收敛行为的完整轨迹,比单一前后对比更能说明训练阶段的影响。

  34. arXiv · cs.AI40

    CausalCoT:通过上下文隔离缓解注意力泄漏的因果链式推理框架

    研究者提出 CausalCoT 推理框架,将问题分解为有向无环图中的原子子问题,每个节点仅在只含直接因果父节点的隔离上下文中求值,以消除注意力对无关上下文的泄漏。在多个推理 benchmark 上,CausalCoT 在保持有竞争力的预测性能的同时,中间推理步骤的因果敏感性平均提升 12 个百分点、最高提升 21 个百分点。其结构化依赖图还支持测试时干预,使局部修正可预测地传播到下游推理。

  35. arXiv · cs.AI58

    arXiv 论文提出用低比特精度压缩语言模型 n-gram 嵌入表

    Stephen Chung 在 arXiv 发布论文,研究以低精度存储语言模型 n-gram 嵌入表以降低内存开销。在 nanochat、Llama、GPT-2 系列从零训练的模型上,4-bit 表节省约 75% 表内存,同时保留加表带来的验证损失改善的 99% 以上;对 DeepSeek-V4.1-Flash 和 Qwen3.8-Flash-Next 节省 47-55% 表内存,困惑度增加低于 1.2%。更低位宽性能下降更大,但短时微调可恢复大部分损失,将省出的内存换成更大表还能超越原全精度表的性能。

    推荐理由:论文系统比较了不同量化和位宽分配方案,给出从零训练与现有大模型两组数据,可帮助读者评估低比特 n-gram 表的实际收益。

  36. arXiv · cs.AI47

    EpiSEM-Bench:评估 LLM Agent 在证据缺失下的安全性与证据恢复

    arXiv 论文提出可执行基准 EpiSEM-Bench,评估 LLM Agent 在关键安全证据缺失时的不安全执行、安全边界与证据恢复能力。基准包含六个领域的 300 组不安全/安全配对任务,通过系统性抑制关键事实,测量不安全执行并确定最小观测失败基数。评测显示十个模型在缺失证据鲁棒性上差异显著;恢复访问降低了全部十个模型的不安全执行,但各 Agent 是否主动获取缺失事实并据此行动各不相同。

  37. arXiv · cs.AI40

    METTA:面向元强化学习的记忆增强测试时自适应方法

    研究者提出元强化学习方法 METTA,将快速自适应分解为两个时间尺度:因果神经记忆以线性序列复杂度完成回合内细粒度自适应,紧凑的回合级摘要支持跨回合任务推断。在未见过的 Meta-World ML10/45 测试环境上,METTA 成功率超过 50%,且训练预算低、耗时短;在长上下文稀疏奖励 PointMaze 任务上,其探索行为比基于 transformer 的基线更有结构。

  38. arXiv · cs.AI31

    面向 LLM 的 IT 工单分类成本感知弃权研究

    一项研究提出用成本感知弃权评估 IT 工单自动路由策略的离线可用性。在 47,837 条工单、八分类的公开语料上,TF-IDF 加逻辑回归在校准数据上选定阈值 0.60 后,测试成本从 0.763 降至 0.472,相对降低 38.1%,错误路由率从 15.3% 降至 3.5%;表现最好的提示配置准确率 0.477,低于同批工单上微调 DistilBERT 的 0.879。研究还报告 correctness AUROC 与 ECE,并强调这是评估框架而非新的弃权算法。