跳到正文
我的
GitHub · 去对齐工具与仓库·· 11 小时前AI 评分32

tipofyzik 发布基于评分标准的 IELTS 写作 LLM-as-Judge 评估工具

tipofyzik/Rubric-Grounded-LLM-as-Judge-for-IELTS-Writing

来源与原文

GitHub · 去对齐工具与仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/tipofyzik/Rubric-Grounded-LLM-as-Judge-for-IELTS-Writing

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

tipofyzik 推出 IELTS Writing Evaluator,结合仅评论文的 AES 模型、检索到的 PANDA 训练参考、评分标准与 Qwen2.5-1.5B-Instruct,按 0–9 整数给出 Task Response、Coherence and Cohesion、Lexical Resource、Grammatical Range and Accuracy 四项分数。基线实验在 1,635 篇测试作文、9,810 个 Qwen 任务上未发现完整混合方案带来提升:AES 的 Macro MAE 为 0.979511、Macro QWK 为 0.607192,Rubric + PANDA + AES 为 0.981040 与 0.606128。

来源:GitHub · 去对齐工具与仓库 · github.com

这条消息,你怎么看?

把新闻带到 MickerBook,和社区伙伴聊聊;也可以去 AIHER 看看模型背后的角色与梗。