跳到正文
GitHub · 去对齐工具与仓库·· 19 天前AI 评分25

RQ1ConvertToRimay:用 LLM 将自然语言需求转换为 Rimay 并对照人工标注评分

G-Pavel-H/RQ1ConvertToRimay

来源与原文

GitHub · 去对齐工具与仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/G-Pavel-H/RQ1ConvertToRimay

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

这是一个需求工程博士论文的首篇研究仓库,将自然语言功能请求经 LLM(zero-shot / few-shot / chain-of-thought 三种提示策略)转换为受控自然语言 Rimay,缺失信息用占位符标记,并对照四位标注者的人工 gold 标注评分。系统分为转换(scripts/run_conversion.py,记录到 MLflow)与离线评分(scripts/run_scoring.py)两个解耦阶段,含槽位 F1 精度、转换质量及 Paska 缺陷检测三条评估线;需 macOS/Linux 与 Java 1.8,配置 ANTHROPIC_API_KEY 后运行。

来源:GitHub · 去对齐工具与仓库 · github.com