GitHub · 去对齐工具与仓库·· 19 天前AI 评分25
RQ1ConvertToRimay:用 LLM 将自然语言需求转换为 Rimay 并对照人工标注评分
G-Pavel-H/RQ1ConvertToRimay
来源与原文
GitHub · 去对齐工具与仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/G-Pavel-H/RQ1ConvertToRimay
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
这是一个需求工程博士论文的首篇研究仓库,将自然语言功能请求经 LLM(zero-shot / few-shot / chain-of-thought 三种提示策略)转换为受控自然语言 Rimay,缺失信息用占位符标记,并对照四位标注者的人工 gold 标注评分。系统分为转换(scripts/run_conversion.py,记录到 MLflow)与离线评分(scripts/run_scoring.py)两个解耦阶段,含槽位 F1 精度、转换质量及 Paska 缺陷检测三条评估线;需 macOS/Linux 与 Java 1.8,配置 ANTHROPIC_API_KEY 后运行。
来源:GitHub · 去对齐工具与仓库 · github.com