GitHub · 灵魂体仓库·· 19 天前AI 评分27
Gtheory4LLM v0.4.1:面向 LLM 评测研究的 G 理论可靠性分析 R 包
Veronica0206/Gtheory4LLM
来源与原文
GitHub · 灵魂体仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/Veronica0206/Gtheory4LLM
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
GitHub 开源的 R 包 Gtheory4LLM(源码版本 0.4.1)提供精确平衡的 Gaussian 概括理论模型和有界实验 Laplace 引擎,用于 LLM 标注与评测研究中的可靠性分析。用户可指定评估者、提示词和重复运行来源,拟合并比较不同评估者与提示词数量下的投影可靠性。该包为研究 beta,需 R 4.5 及 OpenMx 2.22.11,内置含 24 个条目、4 名评估者、3 个提示词、2 次运行的教程工作流。
来源:GitHub · 灵魂体仓库 · github.com