佩奇大学开源MCQ生成评测框架aqg-framework
热点事件观察中
佩奇大学开源MCQ生成评测框架aqg-framework
1 篇报道1 个报道来源1 天前更新
先了解这件事
AI 综述
匈牙利佩奇大学一名BSc论文的软件部分aqg-framework开源在GitHub上（MIT许可，标注开发中），用于让大语言模型生成技术选择题，并在多个模型端点间对同一任务做对比评测。 框架向各端点发送同一份固定生成合同，用确定性规则校验每道题，并按语义对齐、干扰项合理性、可读性、latency、tokens和成本等可复现指标评分。每次调用记录model ID、host、设置、tokens、latency与成本，数据存入SQLite，实验可断点续跑。 仓库说明称，生成的题目和评分将在论文评定后发布。
AI 根据报道生成 · 9 小时前更新
最新进展11月4日 02:26
aqg-framework：用 LLM 自动生成技术选择题的对比评测框架报道时间线
沿着报道，了解事件的不同侧面。
11月4日
- GitHub · 3D 生成新仓库aqg-framework：用 LLM 自动生成技术选择题的对比评测框架
匈牙利佩奇大学 BSc 论文的软件部分 aqg-framework 开源（MIT，开发中），用大语言模型生成技术选择题并在多个模型端点间做同任务对比。框架向各端点发送同一份固定生成合同，用确定性规则校验每道题，并以语义对齐、干扰项合理性、可读性、latency、tokens 和成本等可复现指标评分；每次调用记录 model ID、host、设置、tokens、latency 与成本，所有数据存入 SQLite，实验可断点续跑。
本事件热度走势
- 可比范围当前
- 4
- 可比范围峰值
- 511月5日 05:00
- 近 24 小时变化
- –
0246
06:0008:0010:0012:00
趋势仅比较持续完整观测到的相同主体，范围可能小于当前热度统计。移动指针或点击图表查看每小时热度；键盘可用左右方向键切换。