Reddit · r/LocalLLaMA· /u/Individual_Page9676·· 1 天前AI 评分56
用云端 Agent 评测本地 35B 模型:800 道自编数学题盲测,盲解者以 5 比 1 优于出题作者
I pointed my cloud AI agent at my local 35B and had it run a full training-and-grading program: 800 self-authored problems, blind cold-solves, brute-force grading. The cold solver beat the author 5-to-1.
来源与原文
Reddit · r/LocalLLaMA
作者:/u/Individual_Page9676
发布时间:(北京时间)
阅读原始来源 · reddit.com ↗完整链接与内容说明
https://www.reddit.com/r/LocalLLaMA/comments/1xex61w/i_pointed_my_cloud_ai_agent_at_my_local_35b_and/
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
Reddit 用户 /u/Individual_Page9676 让云端 Agent 通过 Tailscale + LM Studio 调用本地 Mac 上的 Qwen3.6-35B-A3B,构建了一套验证式数据管线:模型自编 800 道数学题后在新会话中盲解,分歧交由 Qwopus 3.5 122B 仲裁,Agent 用 Python 暴力核算,最终得到 793 道可用题。盲解者在仲裁分歧中 56 次正确、作者 12 次,说明出题写官方答案比解题更易出错;第三轮复验中 793 个答案有 774 个被直接确认,甚至抓出 Agent 自己暴力核算写错的一道题。
来源:Reddit · r/LocalLLaMA · reddit.com