跳到正文
GitHub · 灵魂体仓库·· 19 天前AI 评分27

Gtheory4LLM v0.4.1:面向 LLM 评测研究的 G 理论可靠性分析 R 包

Veronica0206/Gtheory4LLM

来源与原文

GitHub · 灵魂体仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/Veronica0206/Gtheory4LLM

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

GitHub 开源的 R 包 Gtheory4LLM(源码版本 0.4.1)提供精确平衡的 Gaussian 概括理论模型和有界实验 Laplace 引擎,用于 LLM 标注与评测研究中的可靠性分析。用户可指定评估者、提示词和重复运行来源,拟合并比较不同评估者与提示词数量下的投影可靠性。该包为研究 beta,需 R 4.5 及 OpenMx 2.22.11,内置含 24 个条目、4 名评估者、3 个提示词、2 次运行的教程工作流。

来源:GitHub · 灵魂体仓库 · github.com