GitHub · 3D 生成新仓库·· 19 小时前AI 评分36
SciIG:面向 AI 辅助科研写作的 LLM 论文引言生成 benchmark(EMNLP 26)
kgarg8/emnlp26-sciig
来源与原文
GitHub · 3D 生成新仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/kgarg8/emnlp26-sciig
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
SciIG 是一项用于评测 LLM 生成 AI/ML 论文引言能力的 benchmark,涵盖 NAACL 2025 与 ICLR 2025 的 3,900 个样本、5 个 SOTA 模型、7 种提示策略和 30 项评估指标。结果显示 LLaMA-4 Maverick 在词汇重叠、内容覆盖、引用质量和困惑度上整体领先,three-shot 提示在超过 50% 的公式化指标上优于更少示例的方案。数据集采用 CC BY 4.0 开源,引用解析率达 94.0%。
来源:GitHub · 3D 生成新仓库 · github.com
这条消息,你怎么看?
把新闻带到 MickerBook,和社区伙伴聊聊;也可以去 AIHER 看看模型背后的角色与梗。