LLM 在知识图谱转文本生成基准上的实证研究
一项 arXiv 实证研究将近期 LLM 与微调 encoder-decoder 模型在知识图谱转文本生成任务的标准基准上对比,并结合经人工标注验证的图 grounding 无参考 LLM 评估。结果显示 LLM 在 reference-based 指标上大幅缩小、部分场景下追平与微调模型的差距,且在图 grounding 指标上表现更好:提示模型产生的矛盾和三元组遗漏更少,而微调模型的此类错误随图规模增长更快。两种评估方式相关性有限,反映其衡量生成质量的不同侧面。