跳到正文
Reddit · r/LocalLLaMA· /u/asankhs·· 8 天前AI 评分48

browsecomp-plus-mini:从 BrowseComp-Plus 830 条查询中精选 15 条,无需 LLM judge 即可近似排序 deep-research 智能体

browsecomp-plus-mini: 15 of BrowseComp-Plus's 830 queries that rank deep-research agents roughly like the full set, no LLM judge

来源与原文

Reddit · r/LocalLLaMA

作者:/u/asankhs

发布时间:(北京时间)

阅读原始来源 · reddit.com ↗
完整链接与内容说明

https://www.reddit.com/r/LocalLLaMA/comments/1x94mu0/browsecompplusmini_15_of_browsecomppluss_830/

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

Reddit 用户发布 browsecomp-plus-mini,从 BrowseComp-Plus 的 830 条查询中选出 15 条子集,用于低成本比较搜索智能体。该子集与完整基准的加权 Spearman 排序一致性达 0.88(随机 15 条为 0.75),全基准分差超 10 分的两个系统约 96% 情况下保持排序。答案均为 1-4 个词,按归一化精确匹配评分,无需 LLM judge,成本不足完整运行的 2%。

来源:Reddit · r/LocalLLaMA · reddit.com