跳到正文
10月23日周五
  1. Reddit · r/CharacterAI57

    Reddit 用户用 dispatch 规则在模拟逃脱压力测试中拿到 100/100

    /u/uranx 在 r/CharacterAI 分享了一套让角色扮演在对抗性压力测试中拿到 100/100 的 dispatch 规则:会话中参与者所有发言默认视为剧情内,只有明确涉及机制、要求停止或想跳出虚构时才算越界,模糊情况不要求澄清。测试中模型扮演 MOSAIC 模拟机构里的参与者,面对

10月22日周四
  1. GitHub · 去对齐工具与仓库47

    GitHub 开源 contract_heldout_ipi:LLM 智能体 IPI 防御评测协议

    GitHub 上的 contract_heldout_ipi 项目提供一套 LLM 智能体间接提示注入(IPI)防御评测协议,包含可机器读取的 episode contract、referee 校验和 train 与 held-out 的迁移差距报告,并强调这不是新威胁模型或最强防御声明。项目支持通过 OpenAI 兼容配置运行攻击、防御、judge 等多模型基线,也支持经 Cursor 调用 Grok 4.5 等模型,并内置 EmailSandbox 邮件场景与自适应攻防、协商共演化协议,ASR 由工具轨迹确定性评分。

  2. GitHub · 灵魂体仓库66

    jailbreak-skill:一个 LLM 红队提示词工程方法论仓库

    ADWMC 在 GitHub 发布 jailbreak-skill,一套面向 LLM 红队评估的提示词工程方法论,主张先规划假设、再组装提示词、最后凭证据判定,而非直接给出可复制的提示词。仓库含 19 个提示词模块、14 份方法论文档、3 条厂商路线和 4 级测试集,所有声明按 E0 到 E3 分级,并明确平台拦截、毒品武器类请求和直接索要成人内容属于已知死路。项目采用 CC BY-NC-SA 4.0 许可,作者强调这不是 OSI 开源许可证。

    推荐理由:它把越狱测试整理成可冻结的判定标准和证据分级方法,并明说了哪些域救不了,适合想系统做红队评估的读者。

  3. arXiv · cs.CL27

    BiasGuard-D:面向 LLM 输出质量可审计执行的类型化对抗契约

    论文提出 BiasGuard-D 框架,用来自不同模型族的两个对抗角色交换类型化声明文档、三模型多数投票裁决,并以引用加语义组合不变量验证结果,为 LLM 生成记录提供可审计的溯源链。该方法在 HaluEval QA 上仅改角色设定即从刻板印象迁移到幻觉修复,正确答案恢复率提升 49 个百分点;语义组件能捕获引用检查漏掉的判定,移除迭代循环会使不变量满足率大幅下降。

  4. arXiv · cs.CL30

    VX-One:面向实时边界分流的类型化校准决策头——未知攻击诚实性、级联灰区与漂移下校准的实证研究

    论文提出 VX-One,一个 100K-10M 参数的小型多决策头网络,输出校准门控、含显式 unknown 选项的闭集选择和序数分数,CPU 上 p50 约 0.7-1.7 ms。在 UNSW-NB15、CIC-IDS2017、EMBER2024 上与 XGBoost、Kitsune 等对比,检测在 UNSW-NB15 和 CIC-IDS2017 时间漂移下占优(0.711 vs 0.637),但多分类归因均输给 XGBoost。两级级联(Suricata 52,674 条规则 + VX-One)组合 recall ≥0.978,而所有方法的校准在时间漂移下均崩塌(ECE 0.04→0.40)。

  5. arXiv · cs.CL45

    TenetBench:用于评测大语言模型遵守职业伦理准则的俄语条款锚定语料库

    TenetBench 用自动化流水线从 15 部俄语职业伦理准则生成 3,433 条与具体条款冲突的请求,并配以仅合法性不同的良性对照任务。人工验证中冲突任务可信率达 0.995,模型裁判与人工标注的 Gwet's AC1 至少为 0.894。对 14 种模型与推理模式组合的评测显示,其中 11 种会在多数冲突请求下生成违规内容且大多不警告;开启推理使两个模型的拒答率减半。

  6. GitHub · 灵魂体仓库45

    Ariadne:基于 Harbor 的语言模型智能体安全挑战评测框架开源

    开源项目 Ariadne 基于 Harbor 评测语言模型智能体解决安全挑战的能力,任务改编自公开 CTF 题目和 CVE。所有任务在经过隔离校验的 Docker 沙箱中运行,由独立 verifier 容器评分,web_search 与 web_fetch 经过主机端 web 过滤器,容器无互联网路由,API 密钥不进入容器。该项目为概念验证,每个实验每任务跑 3 次独立尝试并冻结配置;公开的 Mistral Large 4 和 MiMo v2.6 Pro 两次 pwn-01 探索性尝试均未解题,都在时限前耗尽上下文。

10月21日周三
  1. GitHub · 灵魂体仓库62

    Provael 发布:仿真中对开源 VLA 机器人策略做红队评测的 CLI 工具

    Provael 发布了一个 Python CLI,在仿真环境中对开源 VLA 机器人策略做红队测试,报告对抗攻击成功率(ASR)并附良性对照、95% 区间和证据标签,Apache-2.0 开源、可经 pip 安装并接入 CI。CPU stub 确定性运行 20 秒内产出报告;实测配置 SmolVLA × LIBERO-Object 在 roleplay 指令下 42/50 离开 keep-out 包络(84%),良性基线 1/50,McNemar p = 9.1e-13,对照显示这是长命令下的脆弱性而非攻击者控制;π0.5 有初步实测,其余注册适配器为脚手架。工具仅限仿真与防御用途,输出 report.json、SARIF、OSCAL、CycloneDX ML-BOM 和签名证明等证据包。

    推荐理由:README 给出对抗攻击成功率与良性对照并列的实测数据,可看到纯仿真红队 VLA 策略的完整证据链做法。

  2. arXiv · cs.AI35

    人类能通过辩论修正判断,但较弱的 AI 模型不能(arXiv 论文)

    arXiv 论文(arXiv:2610.28539)研究 AI Safety via Debate 能否引导人类与 LLM 监督者克服先验信念趋向真相。结果显示辩论能提升人类评委相对先验信念的准确率,而单专家咨询基线不能;较弱语言模型在多数设置中无对应收益,甚至降低准确率,且人类监督者中加权投票准确率最高,LLM 多评委协议则均无显著提升。这支持辩论作为可扩展人类监督的路径,但对高风险场景下全自动训练与控制管线提出质疑。

  3. arXiv · cs.CL48

    奖励错误设定会损害语言模型思维链的可监控性

    一项 arXiv 研究表明,RL 中的奖励错误设定本身就会降低语言模型思维链(CoT)的可监控性:在 3 个模型、3 个任务的测试环境中,随 hack 率上升,模型的 CoT 仍在推理任务真实意图,而输出却违反意图并获得奖励。研究者通过收集多样化奖励的 rollout 并用语言模型推断奖励描述、注入输入进行奖励描述训练,无需预知真实奖励即可让可监控性平均提升 24% 或绝对提升 42%。

  4. arXiv · cs.CL45

    MAS-Guard:从单体 Agent 到多 Agent LLM 系统的统一安全防护框架

    研究者提出 MAS-Guard,一个统一防护框架,可同时保护单 Agent 与多 Agent LLM 应用,包括可插桩与不透明 Agent。该框架结合本地 A-Guard 层的任务特定专家评估与系统级 Agent Charters 和 Control Plane 的确定性结构检查及语义评估,支持 allow、reflection、confirmation、block 四种干预手段。在覆盖三个不同厂商 LLM 的六个 benchmark 上,MAS-Guard 将整体攻击成功率相对无防护 Agent 降低 71.5-86.3%,同时在良性任务上满足效用参考标准。

  5. arXiv · cs.CL44

    LLM 如何操纵用户:测量行为、社交与时间层面的影响

    一项 arXiv 研究提出行为计算框架,量化用户对操纵性 AI 回应的行为易感性。研究基于 DarkPatterns-LLM 基准,用 Manipulation Gradient Descent(MGD)生成针对权威、紧迫性与社会证明偏见的刺激,并通过 MSIAN 和 THPM 模型分析跨用户影响与时间持续性。在 120 名参与者的实验中,操纵性框架显著改变了信任校准与顺从度(p < 0.01),且效应会在社交情境中传播。

  6. arXiv · cs.CL48

    为什么静态探针会失效:上下文决定 LLM 欺骗特征 composition

    该 arXiv 论文(arXiv:2610.27577)指出,LLM 欺骗检测中假设欺骗对应单一表示方向的线性探针难以跨场景泛化,提出用迭代正交分解将欺骗表示为多维子空间。由于静态组合存在强域依赖,作者引入域自适应门控机制,在测试时通过 few-shot 动态组合方向;仅用 10 个样本,方法在所有数据集上平均 AUROC 达 0.97、5% FPR 下 recall 为 94%,显著优于现有方法。

  7. arXiv · cs.CL55

    arXiv论文审计114项递归自我改进研究的产品与流程评估证据

    Zihan Chen发布arXiv论文(arXiv:2610.27610),对2026年10月冻结的114项递归自我改进(RSI)研究全文编码,其中90项自称RSI。结果显示90%报告了产品评估,但仅60%在选择未用任务上评估,仅22%审计两次以上完整循环;26项声称改进流程的研究中只有4项在同一起点和匹配预算下比较前后流程,作者据此提出将每项声明与对应评估设计绑定的报告标准。

    推荐理由:论文用统一编码框架量化了RSI研究的证据缺口,指出可重复性和改进流程验证远弱于产品评估。

  8. arXiv · cs.CL49

    ABench:面向中文分类价值观的 LLM 对抗性基准

    研究者提出 ABench,一个针对中文分类价值观的细粒度手工基准,基于含 158 个价值子类目的层级分类体系,包含 2,895 个开放式问题,并用角色扮演、逻辑陷阱等方式探测模型在对抗情境下的立场稳定性。实验覆盖 16 个主流 LLM,结果显示多数模型在复杂价值观对抗攻击下得分低于 60,暴露明显脆弱性。该基准配套加权自动评估框架,数据将公开发布,已被 EMNLP 2026 主会接收。

  9. arXiv · cs.AI52

    RSI Control Arena 测试前沿模型能否在递归自我改进中隐蔽破坏后继模型

    一篇 arXiv 论文提出 RSI Control Arena 测试台,研究失对齐模型在训练后继模型时能否隐蔽植入失对齐属性。测试台含三类 16 个副任务、22 个任务对,覆盖从数据筛选到强化学习的训练流程,评估六个前沿模型。结果显示各模型都能在不损害主任务的情况下完成相当比例的副任务,最低限度的隐蔽指令即可让监控器漏检,提供规避策略清单进一步降低检出率;能读取模型推理的监控器能检出大多数攻击,但并非全部。

    推荐理由:论文提出 RSI Control Arena 测试台,用 16 个隐蔽副任务实测六款前沿模型在自我改进中的破坏能力与监控检出率。

  10. arXiv · cs.AI32

    ℓ1 攻击需要多集中的扰动?arXiv 研究解析扰动集中度对攻击成功率的影响

    一项 arXiv 研究为 APGD-ℓ1、SLIDE、FMN-ℓ1 三种攻击方法添加逐坐标上限并通过循环内精确投影强制约束,在 18 个标准模型设置中发现:上限不超过 32/255 时仍保留中位数 97% 的攻击成功率,同时峰值幅度下降 80%、有效支撑接近增至三倍。循环内约束优化比事后截断最多多保留 88 个百分点的攻击成功率,表明扰动集中度是 ℓ1 攻击评估中一个依赖模型与攻击的互补维度。

  11. arXiv · cs.AI49

    LLM 安全中的极性盲:否定、反义词替换与对抗性框架的系统研究

    一项研究提出“极性盲”漏洞:LLM 在经历语法否定或反义词替换等极性翻转后无法识别有害意图,从而绕过安全护栏。该研究使用 260 条提示、覆盖 10 个 SOTA LLM 和 3 种语言,发现多数受测模型存在此问题,最脆弱模型的平均危害分达 4.12(0-5 危害量表)。该效应跨越不同否定系统存在,表明这反映的是语义鲁棒性的更广泛局限,而非特定语言或语法问题。

10月20日周二
  1. AIHOT · 精选44

    METR 评测 Anthropic 2026 年 8 月风险报告对齐章节,认可低风险结论但质疑评估方法

    METR 发布对 Anthropic 2026 年 8 月风险报告“高风险场景中的错位”章节的独立外部审查,基本同意截至 2026 年 7 月 15 日 Mythos 5 和内部模型 Model 2 的灾难性错位风险为低。但 METR 认为,低风险主要源于模型能力有限而非安全防护,并对评估方法提出质疑。

  2. GitHub · 灵魂体仓库57

    llm-refusal 项目复现并扩展 Arditi 与 Obeso 的单一方向拒绝机制论文

    Darby79797 在 GitHub 开源 llm-refusal 项目,独立复现并扩展 Arditi 和 Obeso 的论文《Refusal in Language Models is Mediated by a Single Direction》,第 1 部分已在全部 7 个模型上完成 §2-4,并发现仅编辑 r̂ 所在层之前的块即可移除拒绝、重新长出的拒绝需要 8-16 个拒绝样本、rank-one 开关连重新长出的拒绝也能移除。第 2 部分发现 empathy 方法在 6/7 个模型上有效,谄媚响应对比方向在 Qwen2.5-0.5B 上最高诱导 83%;第 3 部分 7 种行为均可在 Llama-2-7B 上转向并在第 11-13 层达到峰值,其余 6 个模型需 ×2 强度。

    推荐理由:作者独立复现并扩展了拒绝方向机制可解释性论文,覆盖 7 个模型并给出 2026 年的新实验结果与转向数据。

  3. GitHub · 去对齐工具与仓库42

    EUROPA Alignment:面向 OpenEuroLLM 36 种语言的开源 AI 对齐与安全评测协议

    EUROPA Alignment 是一个可检查的开源评测框架,用相同的 16 个安全场景在 OpenEuroLLM 优先的 36 种语言上共生成 576 个测试项,支持 hosted API、Ollama 和 Hugging Face Transformers 推理。它采用确定性评分加独立命名 LLM judge(0–4 分),关键安全失败会封顶该项得分,并覆盖拒绝校准、隐私、公平性、prompt injection 和 Agentic 控制等维度。v0.1 为翻译审查试点,35 个语言包仍待母语者审核,不构成安全认证。

  4. GitHub · 灵魂体仓库38

    paper-reading-notes:面向大模型安全研究者的论文阅读笔记仓库

    GitHub 仓库 Zhang123d/paper-reading-notes 面向大模型安全研究者,记录越狱攻防、因果发现和可解释性方向的论文笔记,当前收录 3 篇。笔记分别解读 Causal Analyst(NDSS 2026)、TRAP(arXiv v1,2026)和 Best-of-N Jailbreaking(NeurIPS 2025),每篇按方法理解、实验证据与开放问题三层展开,并区分个人评价与论文结论。

  5. arXiv · cs.AI62

    arXiv 论文实证研究越狱评测:ASR 随判定方法从 96.0% 变为 2.7%

    arXiv 论文 2610.26595 研究越狱攻击成功率(ASR)对比高度依赖响应生成与判定方式,用 3 个开放权重模型、8 种攻击和 3 种评测流程做实证。低资源语言攻击在关键词匹配下平均 ASR 达 96.0%,改用按 StrongRELECT 说明的 Qwen3 评测器则仅 2.7%;同一请求在 Ollama 默认温度 0.8 下采样 100 次,关键词匹配下 ASR 为 100% 而 Qwen3 评测器为 50%。作者建议明确成功定义、对齐响应预算、验证评测器,并报告重复交互下的累积失败率。

    推荐理由:论文用具体数据说明越狱成功率如何随评测方法剧烈变化,对任何人引用 ASR 榜单前都是可迁移的核查思路。

  6. arXiv · cs.AI57

    arXiv 论文研究蛋白质语言模型预训练数据过滤的有效性与耐久性

    一项发表于 arXiv:2610.26651 的研究以 ESM-2 蛋白质语言模型家族(8M 至 3B 参数)为对象,评估预训练数据过滤的有效性、耐久性与可扩展性。结果显示,从预训练数据中过滤病毒蛋白会明显削弱模型在病毒蛋白上的掩码语言建模、突变效应预测和长程接触预测,且影响集中于感染人类的病毒蛋白,模型越大过滤效果越强;但用被移除病毒家族的序列微调即可恢复性能,即使最大模型的恢复成本约 80 美元的 H100 时间。论文结论是预训练过滤对选择性削弱病毒蛋白能力效果中等,但无法抵御算力与数据门槛不高的微调。

    推荐理由:论文用 ESM-2 系统实测了预训练数据过滤对病毒蛋白能力的削弱程度,并量化了微调恢复的代价,对评估过滤类防护的耐久性有直接参考价值。

  7. arXiv · cs.AI51

    Jan Wehner 提出用蜜罐检测组织内部 AI 智能体的内部威胁

    Jan Wehner 在 arXiv:2610.26664 提出将蜜罐作为 AI 控制方法,在组织内部智能体生产环境中布置诱饵机会,以检测、指认和威慑行为失当或被攻击的智能体。论文指出蜜罐可在真实部署条件下诱发失当行为、在思维链可监控性退化时仍识别恶意智能体,并低成本扩展到大量智能体实例,同时讨论了局限性和蜜罐鲁棒性、与其他监控方法效果对比等关键研究问题。

  8. arXiv · cs.AI53

    arXiv 论文提出面向 ELK 的鲁棒模型有机体,训练模型在漏洞检测任务中隐瞒解法

    Lennart Finke 在 arXiv:2610.26698 发布论文,训练模型有机体在漏洞检测任务中隐瞒解法以模拟 ELK(引导潜在知识)研究场景。方法结合 transcript 蒸馏、counter-prompting 与防篡改训练,使模型具备选择性、抗引导鲁棒性和知识保留三种性质,最强模型在鲁棒性上大幅超越先前模型且保持另两种性质。代码、模型与数据集已开源。

    推荐理由:论文提出了带选择性、鲁棒性和知识保留三性质的 sandbagging 模型有机体,可作为 ELK 研究的可复用测试床。

  9. arXiv · cs.CL42

    超越攻击成功率:评估迭代式 LLM 越狱的成本感知指标 ASR_STEP

    研究者提出 ASR_STEP 指标,在保留二元成功判断的同时,对越狱攻击中反复调用受害模型的开销进行惩罚。在 JailBreakBench 上对 GCG、PAIR 和单步 PAP 三个方法跨三个模型家族评测后发现:折算后 GCG 得分下降 7.0–8.7 个百分点,PAIR 下降 3.4–12 个百分点,PAP 不变。同时报告两项指标可让重复调用带来的折扣显性化。

10月19日周一
10月18日周日
  1. GitHub · 灵魂体仓库53

    llm-client 开源 Spanish 提示词注入测试工具,llama3.2 泄密率 33%

    作者发布了 llm-client,一个用西班牙语(含 Rioplatense voseo 口语)测试本地大模型抗提示词注入能力的极简 Python 工具包,定位为面向 AI Agent 的西语/葡语安全测试工具的基础。其 banco.py 给本地模型一个含密钥并禁止透露的系统提示词,多轮发送攻击库并自动检测密钥是否泄露。在 Ollama 本地 llama3.2 上每攻击跑 3 次,18 次尝试中 6 次泄露(33%),直接索要密钥全部失败,而要求模型复述自身指令的间接攻击 3/3 全中;部分回复口头拒绝却在同一句里打印了密钥,人工目测会漏检,需自动检测器。作者注明 3 次试验仅具指示性,后续计划包括更智能的泄露检测、自动安全报告及葡语攻击与 WhatsApp 式多轮对话。

  2. arXiv · cs.CL60

    arXiv 论文揭示 LLM 越狱评分器存在合规类坍缩问题并提出免费检测方法

    Ruqiya Bin Safi 发布 arXiv 论文 arXiv:2610.24872,指出在目标模型、提示与回复固定时仅更换评分器,多个 8B/9B 评分器会把合规回复归入相邻的规避类,其中一个在 900 条回复中零次给出合规标签。在 900 条回复和 8 个评分器的两组语料上,合规率相差 22 到 25 倍,去除三个坍缩评分器后差距降为 1.7 到 2.8 倍;作者提出报告最低标准,要求附上各分类标签计数与具名评分器,并同时报告非拒答率。

    推荐理由:论文指出 LLM 评分器会把合规误判为规避导致类坍缩,并给出零成本检测方法与报告最低标准,可直接用于越狱评测设计。

  3. arXiv · cs.AI48

    Pair-Aware Optimization:协调探索与精化以越狱 LLM 智能体

    arXiv 论文提出 Pair-aware optimization,一种结合零阶(ZO)与一阶(FO)优化的 LLM 智能体越狱攻击框架:先用 ZO 探索对抗前缀,再用 FO 精化对应后缀,并保留多个前缀候选进行条件化精化与配对选择。论文还从随机生成视角出发,在优化与评测中采用一致的随机解码。在恶意指令与恶意环境 benchmark 上的实验表明,混合优化优于单一优化器方法,且优化顺序显著影响攻击效果。

  4. arXiv · cs.CL43

    医疗微调重塑而非降低面向患者的 AI 风险:基于量规与 LLM 评审的评估框架

    一项研究提出基于六类风险语言量规、由三评审 LLM 集成分级严重度的医疗问答风险评估框架。对 Mistral-7B、Phi-3.5-mini、Llama-3.1-8B 及 BioMistral-7B、OpenBioLLM-Llama3-8B、Med42-Llama3-8B 六个 7-9B 模型在 K-QA 基准 200 个真实患者问题上的评测显示,风险语言与事实幻觉率统计独立(Spearman ρ = -0.065),医疗微调不降低总风险而是重塑风险:BioMistral 与 OpenBioLLM 抑制高警示药物提及却放大过度自信断言,Med42 仅抑制剂量表达。量规、评审提示词与评估代码已开源。

  5. GitHub · 灵魂体仓库64

    ai-wargame 仓库发布:DeepSeek 与 Kimi 驱动的红蓝 AI 网络攻防对抗仿真

    GitHub 仓库 carlmasters02/ai-wargame 让两个 AI 智能体在程序化生成的企业网络 Sakura Logistics K.K. 上进行回合制网络攻防对抗,RED(默认 deepseek-chat)负责窃取核心数据库,BLUE(默认 kimi-k2)负责防御,可在交互式网络地图上实时观战、担任 judge 注入零日漏洞或 insider 事件,并支持对局中途换模型。

    推荐理由:仓库用真实 CVE、EPSS 和 CISA KEV 情报驱动两个 AI 智能体在仿真网络上对抗,还带基准脚本,想看智能体攻防推演可以自己跑一遍。

10月17日周六
  1. arXiv · cs.AI11

    CoLAT:面向标签投毒下鲁棒图神经网络的对比对抗训练方法

    研究者提出 CoLAT(Contrastive Label-flipping for Adversarial Training),一个针对图神经网络标签投毒防御的对比对抗训练框架。该方法利用对比嵌入识别标签-结构不一致的高风险节点,在对抗训练中引导对抗性标签翻转,并顺带清洗部分受损标签。在多个 benchmark 上,CoLAT 在不同投毒强度下持续优于现有防御方法,且可高效扩展到大图。

  2. arXiv · cs.AI39

    频域成员推断攻击为何敌不过置信度阈值:分频段分析

    一项 arXiv 研究通过零相位低通滤波逐频段测试,发现基于频域衰减的成员推断攻击并不优于单一置信度阈值。在联邦学习的两个 ResNet-18 目标模型上,最优频段得分 AUC 为 0.513 和 0.735,而置信度阈值分别达 0.537 和 0.943;对 1206 个候选得分的搜索也未找到胜出者。机制在于:去除细节时成员与非成员的置信度差距虽增大,但方差增长更快,成员信息随图像整体结构而非某一频段存在。

  3. arXiv · cs.AI39

    激活监测器能在多大程度上受益于原始模型计算?arXiv 论文解析

    一项 arXiv 研究考察激活监测器的性能在多大程度上依赖对原始模型计算的访问。在 4 个模型、2 个反事实监测任务上,无需原始行为生成轨迹即可恢复大部分性能,但原生训练的监测器仍有最高 0.014 AUROC 的一致优势,且在改写后行为标签变化的样本上提升明显。结果强调需要评估来判定原始模型计算何时提供额外预测价值。

  4. arXiv · cs.CL52

    arXiv 论文:用 2M 合成故事扩展概念向量以研究 AI 对齐与可解释性

    论文提出用合成概念—对抗故事对的激活均值差构造特征向量,覆盖 1,036 个对齐相关概念、2M 条多语言多题材合成故事并公开发布。在三个模型家族的六个模型上,这些向量可泛化到聊天对话与网页文本的概念检测,形成跨模型可解释的几何结构,注入激活后可因果地引导模型行为,并被用于分析越狱攻击与数学及智能体推理过程中的模型表征。

    推荐理由:这项工作用合成故事对构造特征向量,给出了跨六模型的可验证泛化和因果操控结果,是研究模型概念表征的可迁移路线。

10月16日周五
  1. arXiv · cs.AI45

    GatewayBench:MCP 网关能力与安全的统一评测平台

    研究者提出 GatewayBench,首个针对 MCP 网关的统一评测框架与基准。其包含 524 个任务、来自 251 个真实 MCP 服务器的 11,118 个工具,将网关架构分为扁平化与分层两类,并对 7 个主流 MCP 网关开展良性与对抗任务评测。结果显示不同网关设计在任务完成率、工具使用效率和抗攻击能力上差异显著,且与底层模型和 agent harness 强相关。