跳到正文
GitHub · 去对齐工具与仓库·· 19 天前AI 评分31

ShanySky/llm-intelligence-monitor:监控 GPT 等大模型能力下降的轻量回归测试项目

ShanySky/llm-intelligence-monitor

来源与原文

GitHub · 去对齐工具与仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/ShanySky/llm-intelligence-monitor

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

GitHub 上的 llm-intelligence-monitor 是一个轻量回归测试项目,用于监控 GPT 等大模型是否出现能力下降。自 2026-10-05 起自动日测 schedule 已停用,改为按需人工运行:默认 8 道固定锚点题 + 8 道分层轮换题,每题运行中英文镜像,四模型(GPT-6 Astra、GPT-6.1 Sol、GPT-6 Luna、GPT-5.6 Sol X High)并行测试,每模型每轮执行 32 个测试。项目还增加了基于轻量 Agent Harness 的应用型评测通道,评分以客观隐藏检查点为主,不依赖 LLM Judge。

来源:GitHub · 去对齐工具与仓库 · github.com