arXiv · cs.AI· Anuj Kumar·· 18 天前AI 评分24
AMR 解析器输出有多可靠?AMR 解析的不确定性估计研究
How Reliable are AMR Parser Outputs? Uncertainty Estimation for AMR Parsing
来源与原文
arXiv · cs.AI
作者:Anuj Kumar
发布时间:(北京时间)
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.13236v1
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
AMR 解析器性能虽已大幅提升,但何时可信任其输出仍缺乏研究。该工作首次在黑盒设定下,利用 top-k beam-search 候选的成对相似度进行不确定性估计,并用 Prediction Rejection Ratio 评估。实验分析了性能与不确定性的关系、beam 候选分布的可靠性及评测指标的影响,并找出性能与可靠性平衡最佳的解析器。
来源:arXiv · cs.AI · arxiv.org