GitHub · 去对齐工具与仓库·· 11 小时前AI 评分32
tipofyzik 发布基于评分标准的 IELTS 写作 LLM-as-Judge 评估工具
tipofyzik/Rubric-Grounded-LLM-as-Judge-for-IELTS-Writing
来源与原文
GitHub · 去对齐工具与仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/tipofyzik/Rubric-Grounded-LLM-as-Judge-for-IELTS-Writing
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
tipofyzik 推出 IELTS Writing Evaluator,结合仅评论文的 AES 模型、检索到的 PANDA 训练参考、评分标准与 Qwen2.5-1.5B-Instruct,按 0–9 整数给出 Task Response、Coherence and Cohesion、Lexical Resource、Grammatical Range and Accuracy 四项分数。基线实验在 1,635 篇测试作文、9,810 个 Qwen 任务上未发现完整混合方案带来提升:AES 的 Macro MAE 为 0.979511、Macro QWK 为 0.607192,Rubric + PANDA + AES 为 0.981040 与 0.606128。
来源:GitHub · 去对齐工具与仓库 · github.com
这条消息,你怎么看?
把新闻带到 MickerBook,和社区伙伴聊聊;也可以去 AIHER 看看模型背后的角色与梗。